KR20140126770A - 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스 - Google Patents

소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스 Download PDF

Info

Publication number
KR20140126770A
KR20140126770A KR1020147027252A KR20147027252A KR20140126770A KR 20140126770 A KR20140126770 A KR 20140126770A KR 1020147027252 A KR1020147027252 A KR 1020147027252A KR 20147027252 A KR20147027252 A KR 20147027252A KR 20140126770 A KR20140126770 A KR 20140126770A
Authority
KR
South Korea
Prior art keywords
gesture
keyboard
display
touch
area
Prior art date
Application number
KR1020147027252A
Other languages
English (en)
Inventor
조나단 코치
비. 마이클 빅토르
아비 이. 씨에플린스키
줄리안 미시그
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US13/076,395 external-priority patent/US9141285B2/en
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20140126770A publication Critical patent/KR20140126770A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas

Abstract

디스플레이 및 터치-감지 표면을 갖춘 전자 장치는 키보드 및 하나 이상의 텍스트 기입 영역을 동시에 디스플레이한다. 키들의 배열을 가지는 키보드는 분할될 수 있다. 키보드는 분할될 수 있고 문자들은 제1 및 제2 텍스트 기입 영역에 디스플레이될 수 있다. 키보드를 가지는 입력 영역은 이동될 수 있다. 입력 영역은 재구성될 수 있다.

Description

소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스{DEVICE, METHOD, AND GRAPHICAL USER INTERFACE FOR MANIPULATING SOFT KEYBOARDS}
본 발명은 일반적으로, 디스플레이 상의 소프트 키보드(soft keyboard)를 제어하는 터치-감지 표면을 갖는 전자 장치를 포함하지만, 이것으로 한정되지 않는, 터치-감지 표면을 갖는 전자 장치에 관한 것이다.
컴퓨터 및 기타의 전자 컴퓨팅 장치를 위한 입력 장치로서의 터치-감지 표면의 이용은 최근 상당히 증가해 오고 있다. 예시적인 터치-감지 표면은 터치 패드와 터치 스크린 디스플레이를 포함한다. 이러한 표면들은 디스플레이 상의 사용자 인터페이스 객체를 조작하는 데 널리 이용된다.
예시적인 사용자 인터페이스 객체는 소프트 키보드를 포함한다. 예시적인 조작은 소프트 키보드를 선택하는 것, 소프트 키보드의 위치 및/또는 크기를 조정하는 것, 및 소프트 키보드의 키들을 작동하는 것을 포함한다. 사용자는, 파일 관리 프로그램(예를 들어, California주 Cupertino시 Apple Inc.의 Finder), 화상 관리 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 Aperture 또는 iPhoto), 디지털 콘텐츠(예를 들어, 비디오 및 음악) 관리 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 iTunes), 도안작성 애플리케이션, 프리젠테이션 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 Keynote), 워드 프로세싱 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 Pages), 웹사이트 생성 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 iWeb), 디스크 저작 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 iDVD), 또는 스프레드시트 애플리케이션(예를 들어, California주 Cupertino시 Apple Inc.의 Numbers)에서 소프트 키보드들에 관해 이러한 조작을 수행할 필요가 있을 수도 있다.
그러나, 이러한 처리를 수행하기 위한 기존의 방법들은 다루기 힘들고 비효율적이다. 예를 들어, 사용자가 태블릿-크기의 휴대 장치를 유지한 상태에서의 장치 상의 비분할 소프트 키보드 상에서의 2엄지 타이핑은 짜증나며 사용자에 대해 상당한 인지적 부담(cognitive burden)을 생성한다. 또한, 기존의 방법들은 필요 이상으로 오래 걸리기 때문에 에너지를 낭비한다. 이러한 후자의 고려사항은 배터리-작동형 장치에서 특히 중요하다.
따라서, 소프트 키보드를 처리하기 위한 더 빠르고 더 효율적인 방법과 인터페이스를 갖는 전자 장치에 대한 요구가 있다. 이러한 방법 및 인터페이스는 소프트 키보드를 처리하기 위한 종래의 방법을 보충하거나 대체할 수도 있다. 이러한 방법 및 인터페이스는 사용자에 대한 인지적 부담을 감소시키고 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 장치의 경우, 이러한 방법 및 인터페이스는 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
터치감지 표면을 갖는 전자 장치에 대한 사용자 인터페이스와 연관된 상기의 단점과 기타의 문제점들이 개시되는 장치에 의해 줄어들거나 제거된다. 일부 실시예들에서, 이 장치는 데스크탑 컴퓨터이다. 일부 실시예들에서, 이 장치는 휴대형(예를 들어, 노트북 컴퓨터, 태블릿 컴퓨터, 또는 핸드헬드 장치)이다. 일부 실시예들에서, 이 장치는 터치패드를 가진다. 일부 실시예들에서, 이 장치는 ("터치 스크린" 또는 "터치 스크린 디스플레이"라고도 알려진) 터치-감지 디스플레이를 가진다. 일부 실시예들에서, 이 장치는 그래픽 사용자 인터페이스(GUI), 하나 이상의 프로세서, 메모리, 및 메모리에 저장되어 복수의 기능을 수행하기 위한 하나 이상의 모듈, 프로그램 또는 명령어 세트를 가진다. 일부 실시예들에서, 사용자는 주로 터치-감지 표면 상의 손가락 접촉과 제스처를 통해 GUI와 상호작용한다. 일부 실시예들에서, 이 기능들은 화상 편집, 도안작성, 프리젠팅, 워드 프로세싱, 웹사이트 생성, 디스크 저작, 스프레드시트 작성, 게임 플레이, 전화, 화상 회의, 전자메일, 인스턴트 메시징, 운동 지원, 디지털 사진촬영, 디지털 비디오 녹화, 웹 브라우징, 디지털 음악 재생, 및/또는 디지털 비디오 재생을 포함할 수도 있다. 이들 기능들을 수행하기 위한 실행가능한 명령어들은, 하나 이상의 프로세서에 의한 실행용으로 구성된 비일시적 컴퓨터 판독가능한 저장 매체나 기타의 컴퓨터 프로그램 제품에 포함될 수 있다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 제1 텍스트 기입 영역과 비분할 키보드를 디스플레이 상에 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제스처를 검출하는 단계; 및 상기 터치-감지 표면 상의 제스처의 검출에 응답하여, 비분할 키보드를 통합 입력 영역(integrated input area)으로 대체하는 단계를 포함한다. 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부; 분할 키보드의 우측을 갖는 우측부; 및 좌측부와 우측부 사이의 중앙부를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 디스플레이 상에 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하는 단계; 상기 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처를 검출하는 단계; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키를 작동하는 단계; 상기 제1 시간 이후의 제2 시간에서 상기 터치-감지 표면 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하는 단계; 및 상기 제1 시간 이후의 상기 제2 시간에서의 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 제1 키보드를 제2 키보드로 대체하는 단계와, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 상기 제1 키보드의 디스플레이를 유지하는 단계를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은 디스플레이 상에 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하는 단계; 상기 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉을 검출하는 단계; 상기 터치-감지 표면을 따른 제1 접촉의 이동을 검출하는 단계; 상기 터치-감지 표면을 따른 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키는 단계; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 상의, 상기 제1 접촉과는 별개의 제2 접촉을 검출하는 단계; 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동을 검출하는 단계; 및 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치 ―상기 제2 이동 임계치는 상기 제1 이동 임계치보다 큼― 를 초과할 때 상기 제2 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키는 단계를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 디스플레이 상에, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 상기 디스플레이의 하부에 있음― 을 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제스처를 검출하는 단계; 상기 터치-감지 표면 상의 상기 제스처의 검출에 응답하여, 상기 입력 영역을 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키는 단계; 및 상기 애플리케이션 콘텐츠 영역을 상기 제1 크기보다 큰 제2 크기로 증가시키는 단계를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수 열(a plurality of rows)의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수 열의 키를 포함함― 을 동시에 디스플레이하는 단계; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역 ―상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에 고유함― 에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하는 단계; 및 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 상기 텍스트 기입 영역에 입력하는 단계를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함― 을 동시에 디스플레이하는 단계; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하는 단계; 및 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 문자를 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시에 디스플레이하는 단계를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 디스플레이 상에, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하는 단계; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처(drag gesture)를 검출하는 단계; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 상의 상기 입력 영역을 이동시키는 단계; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 상의 플릭 제스처(flick gesture)를 검출하는 단계; 및 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 상기 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 상의 상기 입력 영역을 이동시키는 단계를 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 디스플레이 상에, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함―을 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제1 입력을 검출하는 단계; 상기 제1 입력의 검출에 응답하여, 상기 통합 입력 영역에 대한 재구성 모드에 진입하는 단계; 및 상기 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하는 단계, 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 상기 분할 키보드의 상기 좌측 및 상기 우측 중 적어도 하나의 크기를 조정하는 단계, 제3 입력을 검출하는 단계, 및 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드를 종료하는 단계를 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에 제1 텍스트 기입 영역과 비분할 키보드를 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제스처를 검출하는 단계; 및 상기 터치-감지 표면 상의 제스처의 검출에 응답하여, 상기 비분할 키보드를 통합 입력 영역으로 대체하는 단계를 위한 명령어들을 포함하고, 상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측을 갖는 우측부; 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하는 단계; 상기 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처를 검출하는 단계; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키를 작동하는 단계; 상기 제1 시간 이후의 제2 시간에 상기 터치-감지 표면 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하는 단계; 및 상기 제1 시간 이후의 상기 제2 시간에서의 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 제1 키보드를 제2 키보드로 대체하는 단계와, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 상기 제1 키보드의 디스플레이를 유지하는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측과 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하는 단계; 상기 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉을 검출하는 단계; 상기 터치-감지 표면을 따른 제1 접촉의 이동을 검출하는 단계; 상기 터치-감지 표면을 따른 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키는 단계; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 상의, 상기 제1 접촉과는 별개의 제2 접촉을 검출하는 단계; 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동을 검출하는 단계; 및 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치 ―상기 제2 이동 임계치는 상기 제1 이동 임계치보다 큼― 를 초과할 때 상기 제2 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 상기 디스플레이의 하부에 있음― 을 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제스처를 검출하는 단계; 상기 터치-감지 표면 상의 상기 제스처의 검출에 응답하여, 상기 입력 영역을 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키는 단계; 및 상기 애플리케이션 콘텐츠 영역을 상기 제1 크기보다 큰 제2 크기로 증가시키는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수 열의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수 열의 키를 포함함― 을 동시에 디스플레이하는 단계; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역 ―상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에 고유함― 에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하는 단계; 및 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 상기 텍스트 기입 영역에 입력하는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함― 을 동시에 디스플레이하는 단계; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하는 단계; 및 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 문자를 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시에 디스플레이하는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하는 단계; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처를 검출하는 단계; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 상의 상기 입력 영역을 이동시키는 단계; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 상의 플릭 제스처를 검출하는 단계; 및 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 상기 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 상의 상기 입력 영역을 이동시키는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제1 입력을 검출하는 단계; 상기 제1 입력의 검출에 응답하여, 상기 통합 입력 영역에 대한 재구성 모드에 진입하는 단계; 및 상기 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하는 단계, 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 상기 분할 키보드의 상기 좌측 및 상기 우측 중 적어도 하나의 크기를 조정하는 단계, 제3 입력을 검출하는 단계, 및 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드를 종료하는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는 제1 텍스트 기입 영역 및 비분할 키보드를 포함하고, 상기 비분할 키보드는 상기 터치-감지 표면 상의 제스처의 검출에 응답하여 통합 입력 영역으로 대체되며, 상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부; 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함한다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 제1 복수의 키를 포함하는 제1 키보드를 포함하고; 상기 제1 키보드의 제1 키의 위치에 대응하는 상기 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처가 검출되며; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키가 작동되고; 상기 제1 시간 이후의 제2 시간에 상기 터치-감지 표면 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉이 검출되며; 및 상기 제1 시간 이후의 상기 제2 시간에서의 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 제1 키보드는 제2 키보드로 대체되고, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 상기 제1 키보드의 디스플레이가 유지된다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는 제1 텍스트 기입 영역과 통합 입력 영역을 포함하고, 상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측과 상기 우측부 사이의 중앙부를 포함하며; 상기 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉이 검출되며; 상기 터치-감지 표면을 따른 제1 접촉의 이동이 검출되고; 상기 터치-감지 표면을 따른 상기 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 통합 입력 영역이 이동되며; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 상의, 상기 제1 접촉과는 별개의 제2 접촉이 검출되고; 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동이 검출되며; 및 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치를 초과할 때 상기 제2 접촉의 이동에 따라 상기 통합 입력 영역이 이동되고, 상기 제2 이동 임계치는 상기 제1 이동 임계치보다 크다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역을 포함하며, 상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하고, 상기 입력 영역은 상기 디스플레이의 하부에 있으며, 터치-감지 표면 상의 제스처가 검출되고; 상기 터치-감지 표면 상의 상기 제스처의 검출에 응답하여, 상기 입력 영역이 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동되며; 상기 애플리케이션 콘텐츠 영역은 상기 제1 크기보다 큰 제2 크기로 증가된다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측을 포함하고, 상기 분할 키보드의 좌측은 복수열의 키를 포함하며 상기 분할 키보드의 우측은 대응하는 복수열의 키를 포함하고; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역 ―상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에서 고유함― 에 대응하는 터치-감지 표면 상의 위치에서 제스처가 검출되고; 상기 분할 키보드의 좌측상의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자가 상기 텍스트 기입 영역에 입력된다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는, 제1 텍스트 기입 영역과 통합 입력 영역을 포함하고, 상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함하며; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처가 검출되고; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 문자가 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력되고 동시에 디스플레이된다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 포함하고, 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처가 검출되며; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 상의 상기 입력 영역이 이동되고; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 상의 플릭 제스처가 검출되며; 및 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 상기 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 상의 상기 입력 영역이 이동된다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 동시에 디스플레이되는, 제1 텍스트 기입 영역과 통합 입력 영역을 포함하고, 상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함하며; 터치-감지 표면 상의 제1 입력이 검출되고; 상기 제1 입력의 검출에 응답하여, 상기 통합 입력 영역에 대한 재구성 모드로 진입되며; 상기 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력이 검출되고, 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 상기 분할 키보드의 상기 좌측 및 상기 우측 중 적어도 하나의 크기가 조정되며, 제3 입력이 검출되고, 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드가 종료된다.
일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 디스플레이 상에 제1 텍스트 기입 영역과 비분할 키보드를 동시에 디스플레이하고; 터치-감지 표면 상의 제스처를 검출하며; 상기 터치-감지 표면 상의 제스처의 검출에 응답하여, 상기 비분할 키보드를 통합 입력 영역으로 대체하게 하고, 상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측을 갖는 우측부; 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 디스플레이 상에 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하고; 상기 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처를 검출하며; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키를 작동하고; 상기 제1 시간 이후의 제2 시간에 상기 터치-감지 표면 상에서 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하며; 상기 제1 시간 이후의 상기 제2 시간에서의 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 제1 키보드를 제2 키보드로 대체하고, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 상기 제1 키보드의 디스플레이를 유지하게 한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 디스플레이 상에 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측과 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하고; 상기 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉을 검출하며; 상기 터치-감지 표면을 따른 제1 접촉의 이동을 검출하고; 상기 터치-감지 표면을 따른 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키며; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 상의, 상기 제1 접촉과는 별개의 제2 접촉을 검출하고; 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동을 검출하며; 및 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치 ―상기 제2 이동 임계치는 상기 제1 이동 임계치보다 큼 ― 를 초과할 때 상기 제2 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키게 한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 디스플레이 상에, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 상기 디스플레이의 하부에 있음― 을 동시에 디스플레이하고; 터치-감지 표면 상의 제스처를 검출하며; 상기 터치-감지 표면 상의 상기 제스처의 검출에 응답하여, 상기 입력 영역을 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키고; 상기 애플리케이션 콘텐츠 영역을 상기 제1 크기보다 큰 제2 크기로 증가시키게 한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수열의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수열의 키를 포함함― 을 동시에 디스플레이하고; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역 ― 상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에서 고유함― 에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하며; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 상기 텍스트 기입 영역에 입력하게 한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함―을 동시에 디스플레이하고; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하며; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 문자를 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시에 디스플레이하게 한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 디스플레이 상에, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하고; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처를 검출하며; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 상의 상기 입력 영역을 이동시키고; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 상의 플릭 제스처를 검출하며; 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 상기 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 상의 상기 입력 영역을 이동시키게 한다.
일부 실시예들에서, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 디스플레이 상에, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하고; 터치-감지 표면 상의 제1 입력을 검출하며; 상기 제1 입력의 검출에 응답하여, 상기 통합 입력 영역에 대한 재구성 모드에 진입하고; 상기 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하며, 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 상기 분할 키보드의 상기 좌측 및 상기 우측 중 적어도 하나의 크기를 조정하고, 제3 입력을 검출하며, 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드를 종료하게 한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 디스플레이 상에 제1 텍스트 기입 영역과 비분할 키보드를 동시에 디스플레이하기 위한 수단; 터치-감지 표면 상의 제스처를 검출하기 위한 수단; 및 상기 터치-감지 표면 상의 제스처의 검출에 응답하여, 상기 비분할 키보드를 통합 입력 영역으로 대체하기 위한 수단을 포함하고, 상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측을 갖는 우측부; 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 디스플레이 상에 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하기 위한 수단; 상기 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처를 검출하기 위한 수단; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키를 작동하기 위한 수단; 상기 제1 시간 이후의 제2 시간에 상기 터치-감지 표면 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하기 위한 수단; 및 상기 제1 시간 이후의 상기 제2 시간에서의 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 제1 키보드를 제2 키보드로 대체하기 위한 수단과, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 상기 제1 키보드의 디스플레이를 유지하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 디스플레이 상에 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측과 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하기 위한 수단; 상기 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉을 검출하기 위한 수단; 상기 터치-감지 표면을 따른 제1 접촉의 이동을 검출하기 위한 수단; 상기 터치-감지 표면을 따른 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키기 위한 수단; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 상의, 상기 제1 접촉과는 별개의 제2 접촉을 검출하기 위한 수단; 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동을 검출하기 위한 수단; 및 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치를 초과할 때 상기 제2 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키기 위한 수단을 포함하고, 상기 제2 이동 임계치는 상기 제1 이동 임계치보다 크다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 디스플레이 상에, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 상기 디스플레이의 하부에 있음― 을 동시에 디스플레이하기 위한 수단; 터치-감지 표면 상의 제스처를 검출하기 위한 수단; 상기 터치-감지 표면 상의 상기 제스처의 검출에 응답하여, 상기 입력 영역을 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키기 위한 수단; 및 상기 애플리케이션 콘텐츠 영역을 상기 제1 크기보다 큰 제2 크기로 증가시키기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수열의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수열의 키를 포함함― 을 동시에 디스플레이하기 위한 수단; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역 ―상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에서 고유함― 에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하기 위한 수단; 및 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 상기 텍스트 기입 영역에 입력하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함― 을 동시에 디스플레이하기 위한 수단; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하기 위한 수단; 및 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 문자를 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시에 디스플레이하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 디스플레이 상에, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하기 위한 수단; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처를 검출하기 위한 수단; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 상의 상기 입력 영역을 이동시키기 위한 수단; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 상의 플릭 제스처를 검출하기 위한 수단; 및 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 상기 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 상의 상기 입력 영역을 이동시키기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 디스플레이 상에, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함―을 동시에 디스플레이하기 위한 수단; 터치-감지 표면 상의 제1 입력을 검출하기 위한 수단; 상기 제1 입력의 검출에 응답하여, 상기 통합 입력 영역에 대한 재구성 모드에 진입하기 위한 수단; 및 상기 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하기 위한 수단, 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 상기 분할 키보드의 상기 좌측 및 상기 우측 중 적어도 하나의 크기를 조정하기 위한 수단, 제3 입력을 검출하기 위한 수단, 및 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드를 종료하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 상기 디스플레이 상에 제1 텍스트 기입 영역과 비분할 키보드를 동시에 디스플레이하기 위한 수단; 상기 터치-감지 표면 상의 제스처를 검출하기 위한 수단; 및 상기 터치-감지 표면 상의 제스처의 검출에 응답하여, 상기 비분할 키보드를 통합 입력 영역으로 대체하기 위한 수단을 포함하고, 상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측을 갖는 우측부; 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 디스플레이 상에 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하기 위한 수단; 상기 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처를 검출하기 위한 수단; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키를 작동하기 위한 수단; 상기 제1 시간 이후의 제2 시간에서 상기 터치-감지 표면 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하기 위한 수단; 및 상기 제1 시간 이후의 상기 제2 시간에서의 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 제1 키보드를 제2 키보드로 대체하기 위한 수단과, 상기 제2 시간이 상기 제1 시간 이후의 미리 정의된 기간보다 작을 때에는 상기 제1 키보드의 디스플레이를 유지하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 디스플레이 상에 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은, 분할 키보드의 좌측을 갖는 좌측부; 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측과 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하기 위한 수단; 상기 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉을 검출하기 위한 수단; 상기 터치-감지 표면을 따른 제1 접촉의 이동을 검출하기 위한 수단; 상기 터치-감 응 표면을 따른 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키기 위한 수단; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 상의, 상기 제1 접촉과는 별개의 제2 접촉을 검출하기 위한 수단; 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동을 검출하기 위한 수단; 및 상기 터치-감지 표면을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치를 초과할 때 상기 제2 접촉의 이동에 따라 상기 통합 입력 영역을 이동시키기 위한 수단을 포함하고, 상기 제2 이동 임계치는 상기 제1 이동 임계치보다 크다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 디스플레이 상에, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 상기 디스플레이의 하부에 있음― 을 동시에 디스플레이하기 위한 수단; 터치-감지 표면 상의 제스처를 검출하기 위한 수단; 상기 터치-감지 표면 상의 상기 제스처의 검출에 응답하여, 상기 입력 영역을 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키기 위한 수단; 및 상기 애플리케이션 콘텐츠 영역을 상기 제1 크기보다 큰 제2 크기로 증가시키기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수열의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수열의 키를 포함함― 을 동시에 디스플레이하기 위한 수단; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역 ―상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에서 고유함― 에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하기 위한 수단; 및 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 상기 텍스트 기입 영역에 입력하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함― 을 동시에 디스플레이하기 위한 수단; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출하기 위한 수단; 및 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 문자를 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시에 디스플레이하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 디스플레이 상에, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하기 위한 수단; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처를 검출하기 위한 수단; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 상의 상기 입력 영역을 이동시키기 위한 수단; 상기 디스플레이 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 상의 플릭 제스처를 검출하기 위한 수단; 및 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 상기 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 상의 상기 입력 영역을 이동시키기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이와 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 디스플레이 상에, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함―을 동시에 디스플레이하기 위한 수단; 터치-감지 표면 상의 제1 입력을 검출하기 위한 수단; 상기 제1 입력의 검출에 응답하여, 상기 통합 입력 영역에 대한 재구성 모드에 진입하기 위한 수단; 및 상기 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하기 위한 수단, 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 상기 분할 키보드의 상기 좌측 및 상기 우측 중 적어도 하나의 크기를 조정하기 위한 수단, 제3 입력을 검출하기 위한 수단, 및 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드를 종료하기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 제1 텍스트 기입 영역과 비분할 키보드를 동시에 디스플레이하도록 구성된 디스플레이 유닛, 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛, 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 터치-감지 표면 유닛 상의 제스처를 검출하고, 상기 터치-감지 표면 유닛 상의 제스처의 검출에 응답하여, 비분할 키보드를 통합 입력 영역으로 대체하도록 구성된다. 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함한다.
일부 실시예들에 따르면, 전자 장치는, 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하도록 구성된 디스플레이 유닛; 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛, 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 상기 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 유닛 상의 위치에서 제1 시간에 키 작동 제스처를 검출하고; 상기 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 상기 제1 키를 작동하며; 상기 제1 시간 이후의 제2 시간에 상기 터치-감지 표면 유닛 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하고; 상기 제1 시간 이후의 상기 제2 시간에 상기 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간을 초과할 때는 상기 디스플레이 유닛 상의 상기 제1 키보드를 제2 키보드로 대체하며, 상기 제2 시간이 상기 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 상기 디스플레이 유닛 상의 상기 제1 키보드의 디스플레이를 유지하도록 구성된다.
일부 실시예들에 따르면, 전자 장치는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛; 사용자 접촉과 상기 사용자 접촉의 이동을 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 유닛 상의 제1 접촉을 검출하고; 상기 터치-감지 표면 유닛을 따른 제1 접촉의 이동을 검출하며; 상기 터치-감지 표면 유닛을 따른 제1 접촉의 이동의 검출에 응답하여, 상기 제1 접촉의 이동이 제1 이동 임계치를 초과하면 상기 제1 접촉의 이동에 따라 상기 디스플레이 유닛 상의 상기 통합 입력 영역을 이동시키고; 상기 분할 키보드에 대응하는 위치에서 상기 터치-감지 표면 유닛 상의, 상기 제1 접촉과는 별개의 제2 접촉을 검출하며; 상기 터치-감지 표면 유닛을 따른 상기 제2 접촉의 이동을 검출하고; 및 상기 터치-감지 표면 유닛을 따른 상기 제2 접촉의 이동의 검출에 응답하여, 상기 제2 접촉의 이동이 제2 이동 임계치를 초과할 때 상기 제2 접촉의 이동에 따라 상기 디스플레이 유닛 상의 상기 통합 입력 영역을 이동시키도록 구성되고, 상기 제2 이동 임계치는 상기 제1 이동 임계치보다 크다.
일부 실시예들에 따르면, 전자 장치는, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 디스플레이 유닛의 하부에 있음― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛; 사용자의 제스처를 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 터치-감지 표면 유닛 상의 제스처를 검출하고; 상기 터치-감지 표면 유닛 상의 제스처의 검출에 응답하여, 입력 영역을 디스플레이 유닛의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키고, 상기 애플리케이션 콘텐츠 영역의 크기를 제1 크기보다 큰 제2 크기로 증가시키도록 구성된다.
일부 실시예들에 따르면, 전자 장치는, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수열의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수열의 키를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛; 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 분할 키보드의 좌측의 각 열의 최우측키의 우측 ―상기 분할 키보드의 좌측의 각 열의 최우측키는 상기 분할 키보드의 좌측에서 고유함― 에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 유닛 상의 위치에서 제스처를 검출하고; 상기 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 유닛 상의 위치에서의 제스처의 검출에 응답하여, 상기 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 텍스트 기입 영역에 입력하도록 구성된다.
일부 실시예들에 따르면, 전자 장치는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛; 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 유닛상의 위치에서 제스처를 검출하고; 상기 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 유닛 상의 위치에서의 제스처의 검출에 응답하여, 대응하는 디스플레이 유닛 상의 문자를 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에 따르면, 전자 장치는, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 상기 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하도록 구성된 디스플레이 유닛; 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 디스플레이 유닛 상의 입력 영역에 대응하는 위치에서 터치-감지 표면 유닛 상의 드래그 제스처를 검출하고; 상기 드래그 제스처의 검출에 응답하여, 상기 드래그 제스처에 따라 상기 디스플레이 유닛 상의 상기 입력 영역을 이동시키며; 상기 디스플레이 유닛 상의 상기 입력 영역에 대응하는 위치에서 상기 터치-감지 표면 유닛 상의 플릭 제스처를 검출하고; 상기 플릭 제스처의 검출에 응답하여, 상기 입력 영역이 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 상기 플릭 제스처에 따라 관성에 의해 상기 디스플레이 유닛 상의 상기 입력 영역을 이동시키도록 구성된다.
일부 실시예들에 따르면, 전자 장치는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛; 사용자 입력을 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 터치-감지 표면 유닛 상의 제1 입력을 검출하고; 상기 제1 입력의 검출에 응답하여, 통합 입력 영역에 대한 재구성 모드에 진입하며; 통합 입력 영역에 대한 재구성 모드에 있는 동안, 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하고; 상기 제2 입력의 검출에 응답하여, 상기 통합 입력 영역 내의 분할 키보드의 좌측 및 우측 중 적어도 하나의 크기를 조정하며; 제3 입력을 검출하고; 상기 제3 입력의 검출에 응답하여 상기 통합 입력 영역에 대한 재구성 모드를 종료하도록 구성된다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 방법이 수행된다. 이 방법은, 디스플레이 상에 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 상기 디스플레이의 하부에 위치함― 를 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제1 제스처를 검출하는 단계; 및 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 상기 제1 제스처에 따라 상기 비분할 키보드를 분할 키보드로 변환하고 상기 분할 키보드를 상기 디스플레의 하단부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키는 단계를 포함한다.
일부 실시예들에 따르면, 전자 장치는 디스플레이, 터치-감지 표면, 하나 이상의 프로세서, 메모리, 및 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 메모리에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된다. 하나 이상의 프로그램은, 디스플레이 상에 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 상기 디스플레이의 하부에 위치함― 를 동시에 디스플레이하는 단계; 터치-감지 표면 상의 제1 제스처를 검출하는 단계; 및 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 상기 비분할 키보드를 분할 키보드로 변환하고 제1 제스처에 따라 상기 분할 키보드를 상기 디스플레이의 하부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키는 단계를 위한 명령어들을 포함한다.
일부 실시예들에 따르면, 비일시적 컴퓨터 판독가능한 저장 매체는 내부에 명령어들을 저장하며, 상기 명령어들은 디스플레이 및 터치-감지 표면을 갖는 전자 장치에 의해 실행될 때 상기 장치로 하여금, 상기 디스플레이 상에 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 상기 디스플레이의 하부에 위치함― 를 동시에 디스플레이하고; 터치-감지 표면 상의 제1 제스처를 검출하며; 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 상기 제1 제스처에 따라 상기 비분할 키보드를 분할 키보드로 변환하고 상기 분할 키보드를 상기 디스플레의 하단부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키게 한다.
일부 실시예들에 따르면, 디스플레이, 터치-감지 표면, 메모리, 및 상기 메모리에 저장된 하나 이상의 프로그램을 실행하는 하나 이상의 프로세서를 갖는 전자 장치 상의 그래픽 사용자 인터페이스는, 애플리케이션 콘텐츠 영역과 비분할 키보드를 포함한다. 비분할 키보드는 디스플레이의 하부에 위치한다. 터치-감지 표면 상에서 제1 제스처가 검출된다. 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 제1 제스처에 따라 비분할 키보드는 분할 키보드로 변환되고 분할 키보드는 디스플레이의 하부로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동된다.
일부 실시예들에 따르면, 전자 장치는, 디스플레이; 터치-감지 표면; 상기 디스플레이 상에 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 상기 디스플레이의 하부에 위치함― 를 동시에 디스플레이하기 위한 수단; 상기 터치-감지 표면 상의 제1 제스처를 검출하기 위한 수단; 및 상기 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 상기 제1 제스처에 따라 상기 비분할 키보드를 분할 키보드로 변환하고 상기 분할 키보드를 상기 디스플레의 하단부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키기 위한 수단을 포함한다.
일부 실시예들에 따르면, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에서 사용하기 위한 정보 처리 장치는, 상기 디스플레이 상에 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 상기 디스플레이의 하부에 위치함― 를 동시에 디스플레이하기 위한 수단; 및 상기 터치-감지 표면 상의 제1 제스처를 검출하기 위한 수단; 상기 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 상기 제1 제스처에 따라 상기 비분할 키보드를 분할 키보드로 변환하고 상기 분할 키보드를 상기 디스플레의 하단부로부터 멀리 상기 애플리케이션 콘텐츠 영역 위로 이동시키기 위한 수단을 포함한다.
일부 실시예들에 따르면, 전자 장치는, 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 디스플레이 유닛의 하부에 위치함― 를 동시에 디스플레이하도록 구성된 디스플레이 유닛; 제스처를 수신하도록 구성된 터치-감지 표면 유닛; 및 상기 디스플레이 유닛과 상기 터치-감지 표면 유닛에 결합된 처리 유닛을 포함한다. 이 처리 유닛은, 터치-감지 표면 유닛 상의 제1 제스처를 검출하고; 상기 터치-감지 표면 유닛 상의 제1 제스처의 검출에 응답하여, 상기 제1 제스처에 따라 비분할 키보드를 분할 키보드로 변환하고, 이 분할 키보드를 상기 디스플레이 유닛의 하부로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시키도록 구성된다.
따라서, 디스플레이 및 터치-감지 표면을 갖는 전자 장치에는, 소프트 키보드를 처리하기 위한 더 빠르고 더욱 효율적인 방법 및 인터페이스가 제공됨으로써, 이러한 장치들의 실효성과 효율과 사용자 만족도를 향상시킨다. 이러한 방법 및 인터페이스는 소프트 키보드를 처리하기 위한 종래의 방법을 보충하거나 대체할 수도 있다.
본 발명의 전술된 실시예들 뿐만 아니라 추가 실시예들의 더 나은 이해를 위해, 도면 전체를 통해 유사한 참조 번호가 대응하는 요소를 가리키는 이하의 도면들과 연계한 이하의 실시예의 상세한 설명을 참조해야 한다.
도 1a는 일부 실시예들에 따른 터치-감지 디스플레이를 갖춘 휴대용 다기능 장치를 나타내는 블록도이다.
도 1b는 일부 실시예들에 따른 이벤트 처리를 위한 예시적 컴포넌트들을 나타내는 블록도이다.
도 2는 일부 실시예들에 따른 터치 스크린을 갖는 휴대 다기능 장치를 나타낸다.
도 3은 일부 실시예들에 따른 디스플레이 및 터치-감지 표면을 갖춘 예시적 다기능 장치의 블록도이다.
도 4a는 일부 실시예들에 따른 휴대 다기능 장치 상의 애플리케이션의 메뉴를 위한 예시적 사용자 인터페이스를 나타낸다.
도 4b는 일부 실시예들에 따른 디스플레이로부터 분리된 터치-감지 표면을 갖춘 다기능 장치에 대한 예시적 사용자 인터페이스를 나타낸다.
도 5a 내지 도 5ttt는 일부 실시예들에 따른 소프트 키보드를 처리하기 위한 예시적 사용자 인터페이스를 나타낸다.
도 6a 및 도 6b는 일부 실시예들에 따른 비분할 키보드를 통합 입력 영역으로 대체하는 방법을 나타내는 흐름도이다.
도 7a 및 도 7b는 일부 실시예들에 따른 키보드 선택 제스처에 응답하는 방법을 나타내는 흐름도이다.
도 8a 및 도 8b는 일부 실시예들에 따른 통합 입력 영역을 이동시키는 방법을 나타내는 흐름도이다.
도 9는 일부 실시예들에 따른 입력 영역을 이동시키고 애플리케이션 콘텐츠 영역의 크기를 조정하는 방법을 나타내는 흐름도이다.
도 10a 및 도 10b는 일부 실시예들에 따른 분할 소프트 키보드로 문자를 입력하는 방법을 나타내는 흐름도이다.
도 11a 내지 도 11d는 일부 실시예들에 따른 통합 입력 영역의 중앙 부분을 이용하는 방법을 나타내는 흐름도이다.
도 12a 및 도 12b는 일부 실시예들에 따른 키보드를 포함하는 입력 영역을 애플리케이션 콘텐츠 영역 위로 이동시키는 방법을 나타내는 흐름도이다.
도 13a 및 도 13b는 일부 실시예들에 따른 통합 입력 영역을 재구성하는 방법을 나타내는 흐름도이다.
도 14는 일부 실시예들에 따른 비분할 키보드와 분할 키보드간의 자동 변환 방법을 나타내는 흐름도이다.
도 15는 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 16은 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 17은 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 18은 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 19는 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 20은 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 21은 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 22는 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
도 23은 일부 실시예들에 따른 전자 장치의 기능적 블록도이다.
많은 전자 장치들은 문자 입력을 위한 소프트 키보드를 갖춘 그래픽 사용자 인터페이스를 가진다. 태블릿 컴퓨터와 같은 비교적 큰 휴대 장치에서, 비분할 소프트 키보드 상의 타이핑은, 컴퓨터가 딱딱한 표면 상에 놓여 있는 경우와 같이, 어떤 환경에서는 괜찮을 수도 있으나, 다른 환경에서는 문제가 많을 수도 있다. 예를 들어, 비분할 키보드는, 양손으로 장치를 잡고 있을 때 타이핑하는 경우에는 편리하지 않다. 분할 소프트 키보드는 이런 상황들에서 더 나을 수도 있다. 양손으로 장치를 잡고 있을 때의 2-엄지 타이핑을 위한 분할 키보드의 이용은 다음과 같은 인지되지 않았던 및/또는 적절하게 해결되지 않았던 새로운 문제점을 야기한다:
● 비분할 키보드와, 분할 키보드를 포함하는 통합 입력 영역 사이의 용이한 변환;
● 타이핑 중에 소프트 키보드를 뜻하지 않게 (예를 들어, 비분할 키보드로부터 분할 키보드를 갖는 통합 입력 영역으로, 또는 그 반대로) 변경하는 것을 방지;
● 원하는 경우 통합 입력 영역을 이동시키되, 사용자가 분할 키보드로 타이핑하는 동안에 사용자 접촉이 이동할 때 통합 입력 영역의 우발적 이동을 방지하는 것.
● 입력 영역을 이동시키고 더 많은 애플리케이션을 디스플레이하기 위해 애플리케이션 콘텐츠 영역의 크기를 조정하는 것.
● 분할 소프트 키보드를 이용한 2-엄지 타이핑 동안에 문자를 더욱 효율적으로 입력하기.
● 통합 입력 영역의 중앙부를 이용하여 2-엄지 타이핑 동안에 문자 입력을 더 빠르고 더 효율적으로 만들기.
● 입력 영역이 애플리케이션의 텍스트 기입 영역 바로 아래에 있도록 키보드를 포함하는 입력 영역을 애플리케이션 콘텐츠 영역 위로 이동시키는 것.
● 통합 입력 영역의 분할 키보드를 사용자의 엄지 손가락 크기로 용이하게 맞춤화하는 것; 및
● 비분할 키보드와 분할 키보드간의 자동 변환.
후술되는 실시예들은 이들 문제들 및 관련된 문제들을 해결한다.
이하에서, 도 1a 및 도 1b, 2, 3 및 도 15 내지 도 23은 예시적 장치들의 설명을 제공한다. 도 4a 및 도 4b와 도 5a-5ttt는 소프트 키보드를 처리하기 위한 예시적 사용자 인터페이스를 나타낸다. 도 6a 및 도 6b, 도 7a 및 7b, 도 8a 및 8b, 도 9, 도 10a 및 10b, 도 11a 내지 11d, 도 12a 및 12b, 도 13a 및 13b, 및 도 14는 소프트 키보드를 처리하는 방법을 나타내는 흐름도이다. 도 5a 내지 도 5ttt의 사용자 인터페이스는, 도 6a 및 도 6b, 도 7a 및 7b, 도 8a 및 8b, 도 9, 도 10a 및 10b, 도 11a 내지 11d, 도 12a 및 12b, 도 13a 및 13b, 및 도 14의 프로세스들을 설명하기 위해 이용된다.
예시적 장치들
이제 실시예들을 상세히 참조할 것이며, 그 예들은 첨부된 도면들에 나타나 있다. 이하의 상세한 설명에서, 본 발명의 철저한 이해를 제공하기 위하여 다양한 구체적인 세부사항이 개시된다. 그러나, 본 발명은 이들 구체적인 세부사항 없이도 실시될 수 있다는 것은 당업자에게 명백할 것이다. 다른 사례에서, 공지된 방법, 프로시저, 컴포넌트, 회로, 및 네트워크는 실시예들의 양태를 불필요하게 모호하게 하지 않도록 상세히 설명되지 않았다.
비록, 용어 제1, 제2 등이 다양한 요소들을 설명하기 위해 사용될 수도 있지만, 이들 요소들은 이들 용어에 의해 제한되어서는 안 된다는 것을 이해할 것이다. 이들 용어들은 한 요소를 다른 요소로부터 구분하기 위해서만 사용된다. 본 발명의 범위로부터 벗어나지 않고, 예를 들어, 제1 접촉은 제2 접촉이라 명명할 수 있고, 제2 접촉은 제1 접촉이라 명명할 수 있다. 제1 접촉 및 제2 접촉 양쪽 모두는 접촉이지만, 동일한 접촉은 아니다.
여기 본 발명의 설명에서 사용되는 용어는 특정한 실시예를 설명하기 위한 것일 뿐이며, 본 발명을 제한하기 위한 것이 아니다. 본 발명의 설명 및 첨부된 특허청구범위에서 사용될 때, 단수 형태, "한(a)", "하나의(an)", 그 하나의(the)"는, 문맥상 달리 표시하지 않는 한, 마찬가지로 복수 형태도 포함하는 것을 의도한 것이다. 본 명세서에서 사용될 때 용어 "및/또는"은 연관된 나열된 항목들 중 하나 이상의 임의의 및 모든 가능한 조합을 지칭하며 포함하도록 사용된다는 것도 이해할 것이다. 용어 "내포한다", "내포하는", "포함한다", 및/또는 "포함하는"은, 본 명세서에서 사용될 때, 진술된 특징, 정수, 단계, 동작, 요소, 및/또는 컴포넌트의 존재를 명시하지만, 하나 이상의 다른 특징, 정수, 단계, 동작, 요소, 컴포넌트, 및/또는 이들의 그룹의 존재나 추가를 배제하는 것은 아님을 추가로 이해할 것이다.
본 명세서에서 사용될 때, 용어 "만일"은 문맥에 따라 "~할 때", 또는 "~시에" 또는 "판정에 응답하여" 또는 "검출에 응답하여"를 의미하는 것으로 해석될 수도 있다. 마찬가지로, 구문 "만일 ~라고 판정되면" 또는 "만일 [진술된 조건이나 이벤트]가 검출되면"은, 문맥에 따라, "판정시에", 또는 "판정에 응답하여", " [진술된 조건이나 이벤트]의 검출시에", 또는 " [진술된 조건이나 이벤트]의 검출에 응답하여"를 의미하는 것으로 해석될 수도 있다.
전자 장치들, 이러한 전자 장치들의 인터페이스들, 및 이러한 장치를 이용하기 위한 연관된 프로세스들의 실시예를 설명한다. 일부 실시예들에서, 장치는, PDA 및/또는 음악 재생기 기능과 같은 기타의 기능도 역시 포함하는 모바일 전화와 같은, 휴대 통신 장치이다. 휴대 다기능 장치의 실시예는, California주 Cupertino시 Apple Inc.의 iPhone®, iPod Touch®, 및 iPad® 장치들을 포함하지만, 이들로 제한되는 것은 아니다. 터치-감지 표면(예를 들어, 터치 스크린 디스플레이 및/또는 터치 패드)을 갖춘 랩탑이나 태블릿 컴퓨터와 같은 기타의 휴대 전자 장치들도 역시 이용될 수 있다. 일부 실시예들에서, 장치는 휴대 통신 장치가 아니라, 터치-감지 표면(예를 들어, 터치 스크린 디스플레이 및/또는 터치 패드)을 갖춘 데스크탑 컴퓨터라는 것을 역시 이해하여야 한다.
이하의 논의에서, 디스플레이 및 터치-감지 표면을 포함하는 전자 장치를 설명한다. 그러나, 전자 장치는, 물리적 키보드, 마우스 및/또는 조이스틱과 같은 하나 이상의 다른 물리적 사용자 인터페이스 장치를 포함할 수도 있다는 것을 이해하여야 한다.
장치는 통상, 다음과 같은 것들 중 하나 이상과 같은 다양한 애플리케이션을 지원한다: 도안작성 애플리케이션, 프리젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 생성 애플리케이션, 디스크 저작 애플리케이션, 스프레드시트 애플리케이션, 게임 애플리케이션, 전화 애플리케이션, 화상 회의 애플리케이션, 전자-메일 애플리케이션, 인스턴트 메시징 애플리케이션, 운동 지원 애플리케이션, 사진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플리케이션, 디지털 음악 재생기 애플리케이션, 및/또는 디지털 비디오 플레이어 애플리케이션.
장치에서 실행될 수 있는 다양한 애플리케이션들은, 터치-감지 표면과 같은 적어도 하나의 공통의 물리적 사용자 인터페이스를 이용할 수도 있다. 터치 감지 표면의 하나 이상의 기능뿐만 아니라 장치 상에 표시되는 대응 정보는 애플리케이션마다 그리고/또는 각 애플리케이션 내에서 조정 및/또는 변경될 수 있다. 이런 방식으로, 장치의 (터치-감지 표면과 같은) 공통의 물리적 아키텍처는, 사용자에게 직관적이고 투명한(transparent) 사용자 인터페이스를 갖춘 다양한 애플리케이션을 지원할 수 있다.
이제 터치-감지 디스플레이를 갖춘 휴대 장치의 실시예들을 주목할 것이다. 도 1a는 일부 실시예들에 따른 터치-감지 디스플레이(112)를 갖춘 휴대 다기능 장치(100)를 나타내는 블록도이다. 터치-감지 디스플레이(112)는 편의상 때때로 "터치 스크린"이라고 불리며, 터치-감지 디스플레이 시스템이라 알려져 있거나 터치-감지 디스플레이 시스템이라고도 불린다. 장치(100)는 (하나 이상의 컴퓨터 판독가능한 저장 매체를 포함할 수도 있는) 메모리(102), 메모리 제어기(122), 하나 이상의 처리 장치(CPU)(120), 주변장치 인터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입력/출력(I/O) 서브시스템(106), 기타 입력 또는 제어 장치(116), 및 외부 포트(124)를 포함할 수도 있다. 장치(100)는 하나 이상의 광 센서(164)를 포함할 수도 있다. 이들 컴포넌트들은 하나 이상의 통신 버스나 신호선(103)을 통해 통신할 수도 있다.
장치(100)는 휴대 다기능 장치의 한 예일 뿐이며, 장치(100)는 도시된 것보다 많거나 적은 컴포넌트를 구비할 수도 있거나, 2개 이상의 컴포넌트를 결합하거나, 상이한 구성이나 배열의 컴포넌트를 가질 수도 있다는 점을 이해하여야 한다. 도 1a에 도시된 다양한 컴포넌트들은, 하나 이상의 신호 처리 및/또는 주문형 집적 회로를 포함한, 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어 양쪽 모두의 조합으로 구현될 수도 있다.
메모리(102)는 고속 랜덤 액세스 메모리를 포함하고, 또한 하나 이상의 자기 디스크 저장 장치, 플래시 메모리 장치, 또는 기타의 비휘발성 반도체 메모리 장치와 같은 비휘발성 메모리를 포함할 수도 있다. CPU(120) 및 주변장치 인터페이스(118)와 같은 장치(100)의 다른 컴포넌트들에 의한 메모리(102)로의 액세스는 메모리 제어기(122)에 의해 제어될 수 있다.
주변장치 인터페이스(118)는 장치의 입력 및 출력 주변 장치를 CPU(120) 및 메모리(102)에 결합하는 데 이용될 수 있다. 하나 이상의 프로세서(120)는 장치(100)에 대한 다양한 기능을 수행하고 데이터를 처리하기 위해 메모리(102)에 저장된 다양한 소프트웨어 프로그램 및/또는 명령어 세트를 운영하거나 실행한다.
일부 실시예들에서, 주변장치 인터페이스(118), CPU(120), 및 메모리 제어기(122)는, 칩(104)과 같은 단일 칩 상에 구현될 수도 있다. 일부 다른 실시예들에서는, 이들은 별개의 칩들 상에 구현될 수도 있다.
RF(무선 주파수) 회로(108)는, 전자기 신호라고도 불리는 RF 신호를 수신 및 송신한다. RF 회로(108)는 전기 신호를 전자기 신호로 및/또는 전자기 신호를 전기 신호로 변환하며, 전자기 신호를 통해 통신 네트워크 및 기타의 통신 장치와 통신한다. RF 회로(108)는, 안테나 시스템, RF 트랜시버, 하나 이상의 증폭기, 튜너, 하나 이상의 오실레이터, 디지털 신호 프로세서, CODEC 칩셋, 가입자 식별 모듈(SIM) 카드, 메모리 등을 포함하지만 이들만으로 한정되지 않는, 이들 기능들을 수행하기 위한 공지된 회로를 포함할 수도 있다. RF 회로(108)는, 월드 와이드 웹(WWW)이라고도 불리는 인터넷, 셀룰러 전화망, 무선 근거리 통신망(LAN, local area network) 및/또는 도시권 통신망(MAN, metropolitan area network)과 같은 인트라넷 및/또는 무선 네트워크와 같은 네트워크들, 및 기타의 장치와 무선 통신에 의해 통신할 수 있다. 무선 통신은, GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), HSUPA(high-speed uplink packet access), WCDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스(Bluetooth), Wi-Fi(Wireless Fidelity)(예를 들어, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 전자메일용 프로토콜(예를 들어, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예를 들어, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service)), 및/또는 SMS(Short Message Service), 또는 본 문서의 출원일까지 개발되지 않은 통신 프로토콜을 포함한 기타 임의의 적절한 통신 프로토콜을 포함하지만 이들만으로 한정되지 않는 복수의 통신 표준, 프로토콜 및 기술들 중 임의의 것을 이용할 수도 있다.
오디오 회로(110), 스피커(111), 및 마이크로폰(113)은 사용자와 장치(100) 사이에 오디오 인터페이스를 제공한다. 오디오 회로(110)는 주변장치 인터페이스(118)로부터 오디오 데이터를 수신하고, 오디오 데이터를 전기 신호로 변환하며, 전기 신호를 스피커(111)에 전송한다. 스피커(111)는 전기 신호를 인간이 들을 수 있는 음향파로 변환한다. 오디오 회로(110)는 또한 음향파로부터 마이크로폰(113)에 의해 변환된 전기 신호를 수신한다. 오디오 회로(110)는 전기 신호를 오디오 데이터로 변환하고, 처리를 위해 오디오 데이터를 주변장치 인터페이스(118)에 전송한다. 오디오 데이터는, 주변장치 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로(108)로부터 검색되고 및/또는 메모리(102) 및/또는 RF 회로(108)에 전송될 수도 있다. 일부 실시예들에서, 오디오 회로(110)는 또한 헤드셋 잭(예를 들어, 도 2의 212)을 포함한다. 헤드셋 잭은, 출력 전용 헤드폰이나 출력(예를 들어, 한쪽 귀나 양쪽 귀용의 헤드폰) 및 입력(예를 들어, 마이크로폰) 양쪽 모두를 갖는 헤드셋과 같은 착탈식 오디오 입력/출력 주변장치와 오디오 회로(110) 사이에 인터페이스를 제공한다.
I/O 서브시스템(106)은, 터치 스크린(112) 및 기타 입력 제어 장치(116)와 같은 장치(100) 상의 입력/출력 주변장치를 주변장치 인터페이스(118)에 결합한다. I/O 서브시스템(106)은, 디스플레이 제어기(156)와, 기타 입력이나 제어 장치를 위한 하나 이상의 입력 제어기(160)를 포함할 수 있다. 하나 이상의 입력 제어기(160)는 기타 입력이나 제어 장치(116)로부터/로 전기 신호를 수신/송신한다. 기타 입력 제어 장치(116)는 물리적 버턴(예를 들어, 푸시 버턴, 라커 버턴 등), 다이얼, 슬라이더 스위치, 조이스틱, 클릭 휠 등을 포함할 수도 있다. 일부 대안적 실시예에서, 입력 제어기(들)(160)은 다음 중 임의의 것에 연결될(또는 연결되지 않을) 수도 있다: 키보드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 장치. 하나 이상의 버턴(예를 들어, 도 2의 208)은 스피커(111) 및/또는 마이크로폰(113)의 볼륨 제어용 업/다운 버턴을 포함할 수도 있다. 하나 이상의 버턴은 푸시 버턴(예를 들어, 도 2의 206)을 포함할 수도 있다.
터치-감지 디스플레이(112)는 장치와 사용자 사이에 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플레이 제어기(156)는 터치 스크린(112)으로부터/으로 전기 신호를 수신 및/또는 송신한다. 터치 스크린(112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은, 그래픽, 텍스트, 아이콘, 비디오, 및 이들의 임의의 조합(집합적으로 "그래픽"이라 함)을 포함할 수도 있다. 일부 실시예들에서, 시각적 출력의 일부 또는 전부는 사용자 인터페이스 객체에 대응할 수도 있다.
터치 스크린(112)은, 터치-감지 표면, 햅틱 및/또는 촉각 접촉에 기초한 사용자로부터의 입력을 수용하는 센서나 센서 세트를 가진다. (메모리(102) 내의 임의의 연관된 모듈 및/또는 명령어 세트와 함께) 터치 스크린(112) 및 디스플레이 제어기(156)는, 터치 스크린(112) 상의 접촉(및 접촉의 임의의 이동이나 중단)을 검출하고, 검출된 접촉을 터치 스크린(112) 상에 디스플레이되는 사용자 인터페이스 객체(예를 들어, 하나 이상의 소프트 키, 아이콘, 웹 페이지나 화상)와의 상호작용으로 변환한다. 실시예에서, 터치 스크린(112)과 사용자 사이의 접촉 포인트는 사용자의 손가락에 대응한다.
터치 스크린(112)은, LCD(액정 디스플레이) 기술, LPD(발광 폴리머 디스플레이) 기술, 또는 LED(발광 다이오드) 기술을 이용할 수 있지만, 다른 실시예들에서는 다른 디스플레이 기술이 이용될 수도 있다. 터치 스크린(112) 및 디스플레이 제어기(156)는, 용량성, 저항성, 적외선, 및 표면 음향파 기술 뿐만 아니라 터치 스크린(112)과의 하나 이상의 접촉 포인트를 판정하기 위한 기타의 근접 센서 어레이나 기타의 소자를 포함하지만 이들만으로 한정되지 않는, 현재 공지되었거나 이후에 개발될 복수의 터치 감지 기술들 중 임의의 것을 이용하여 접촉과 접촉의 임의의 이동이나 중단을 검출할 수도 있다. 일 실시예에서는, California주 Cupertino시 Apple Inc.의 iPhone®, iPod Touch®, 및 iPad®에서 발견되는 바와 같이, 투영 상호 커패시턴스 감지 기술(projected mutual capacitance sensing technology)이 이용된다.
터치 스크린(112)은 100 dpi를 넘는 비디오 해상도를 가질 수도 있다. 일부 실시예들에서, 터치 스크린은 약 160 dpi의 비디오 해상도를 가진다. 사용자는, 스타일러스, 손가락 등과 같은 임의의 적절한 물체나 부속물을 이용하여 터치 스크린(112)과 접촉할 수 있다. 일부 실시예들에서, 사용자 인터페이스는 주로, 터치 스크린 상의 손가락의 접촉 면적이 더 커서 스타일러스-기반의 입력보다 덜 정확할 수 있는 손가락-기반의 접촉과 제스처로 동작하도록 설계된다. 일부 실시예들에서, 장치는 대략적인 손가락-기반의 입력을, 사용자가 원하는 동작을 수행하기 위한 정확한 포인터/커서 위치나 명령으로 변환한다.
일부 실시예들에서, 터치 스크린 외에도, 장치(100)는 특정 기능을 활성화 또는 비활성화하기 위한 터치패드(미도시)를 포함할 수도 있다. 일부 실시예들에서, 터치패드는, 터치 스크린과는 달리, 시각적 출력을 디스플레이하지 않는, 장치의 터치-감지 영역이다. 터치패드는, 터치 스크린(112)으로 분리된 터치-감지 표면이거나, 터치 스크린에 의해 형성된 터치-감지 표면의 연장물일 수도 있다.
장치(100)는 또한 다양한 컴포넌트들에 전력을 공급하기 위한 전력 시스템(162)을 포함한다. 전력 시스템(162)은 전력 관리 시스템, 하나 이상의 전원(예를 들어, 배터리, 교류(AC)), 재충전 시스템, 정전 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시기(예를 들어, 발광 다이오드(LED)), 및 휴대 장치에서 전력의 생성, 관리 및 분배와 연관된 기타 임의의 컴포넌트를 포함할 수도 있다.
장치(100)는 또한, 하나 이상의 광 센서(164)를 포함할 수도 있다. 도 1a는 I/O 서브시스템(106) 내의 광 센서 제어기(158)에 결합된 광 센서를 도시한다. 광 센서(164)는 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor) 포토트랜지스터를 포함할 수도 있다. 광 센서(164)는, 하나 이상의 렌즈를 통해 투사된 주변으로부터의 광을 수신하고, 그 광을 화상을 나타내는 데이터로 변환한다. (카메라 모듈이라고도 불리는) 촬상 모듈(143)과 연계하여, 광 센서(164)는 정지 화상이나 비디오를 포착한다. 일부 실시예들에서, 광 센서는 장치의 전면상의 터치 스크린 디스플레이(112)와는 반대쪽의 장치(100)의 후면에 위치하여, 터치 스크린 디스플레이가 정지 및/또는 비디오 화상 획득을 위한 뷰파인더로서 이용될 수도 있다. 일부 실시예들에서, 또 다른 광 센서는 장치의 전면에 위치하여, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참여자를 보면서 화상 회의용으로 자신의 화상을 얻을 수 있다.
장치(100)는 또한, 하나 이상의 근접 센서(166)를 포함할 수도 있다. 도 1a는 주변장치 인터페이스(118)에 결합된 근접 센서(166)를 도시한다. 대안으로서, 근접 센서(166)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합될 수도 있다. 일부 실시예들에서, 근접 센서는, 다기능 장치가 사용자 귀 부근에 놓일 때(예를 들어, 사용자가 전화 통화를 하고 있을 때) 터치 스크린(112)을 턴오프 및 디스에이블한다.
장치(100)는 또한, 하나 이상의 가속도계(168)를 포함할 수도 있다. 도 1a는 주변장치 인터페이스(118)에 결합된 가속도계(168)를 도시한다. 대안으로서, 가속도계(168)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 결합될 수도 있다. 일부 실시예들에서, 하나 이상의 가속도계로부터 수신된 데이터의 분석에 기초하여 터치 스크린 디스플레이 상에 정보가 세로 보기(portrait view)나 가로 보기(landscape view)로 디스플레이된다. 장치(100)는 선택사항으로서, 가속도계(들)(168) 외에도, 장치(100)의 위치 및 배향(예를 들어, 세로나 가로)에 관한 정보를 얻기 위한 자력계(미도시) 및 GPS(또는 GLONASS 또는 기타의 전역 네비게이션 시스템) 수신기(미도시)를 포함한다.
일부 실시예들에서, 메모리(102)에 저장된 소프트웨어 컴포넌트는, 운영 체제(126), 통신 모듈(또는 명령어 세트)(128), 접촉/이동 모듈(또는 명령어 세트)(130), 그래픽 모듈(또는 명령어 세트)(132), 텍스트 기입 모듈(또는 명령어 세트)(134), GPS 모듈(또는 명령어 세트)(135), 및 애플리케이션(또는 명령어 세트)(136)을 포함한다. 또한, 일부 실시예들에서, 메모리(102)는 도 1a 및 도 3에 도시된 바와 같이, 장치/전역 내부 상태(157)를 저장한다. 장치/전역 내부 상태(157)는, 다음 중 하나 이상을 포함한다: 있다면, 어떤 애플리케이션이 현재 활성인지를 나타내는 활성 애플리케이션 상태; 어떤 애플리케이션, 뷰 또는 기타의 정보가 터치 스크린 디스플레이(112)의 다양한 영역들을 점유하고 있는지를 나타내는 디스플레이 상태; 장치의 다양한 센서 및 입력 제어 장치(116)로부터 얻어진 정보를 포함한 센서 상태; 및 장치의 위치 및/또는 자세에 관한 위치 정보.
운영 체제(126)(예를 들어, Darwin, RTXC, LINUX, UNIX, OS X, WINDOWS, 또는 VxWorks와 같은 내장 운영 체제)는, 일반적인 시스템 태스크(예를 들어, 메모리 관리, 저장 장치 제어, 전력 관리 등)를 제어하고 관리하며 다양한 하드웨어와 소프트웨어 컴포넌트 사이의 통신을 용이하게 하기 위한 다양한 소프트웨어 컴포넌트 및/또는 드라이버를 포함한다.
통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 장치들과의 통신을 용이하게 하며, 또한 RF 회로(108) 및/또는 외부 포트(124)에 의해 수신된 데이터를 처리하기 위한 다양한 소프트웨어 컴포넌트를 포함한다. 외부 포트(124)(예를 들어, USB(Universal Serial Bus), FIREWIRE 등)는 다른 장치들과 직접 또는 네트워크(예를 들어, 인터넷, 무선 LAN 등)를 통해 간접으로 결합하도록 적응되어 있다. 일부 실시예들에서, 외부 포트는, iPod(Apple Inc.의 상표) 장치에서 이용되는 30핀 커넥터와 동일하거나 유사하거나 및/또는 호환되는 멀티-핀(예를 들어, 30핀) 커넥터이다.
접촉/이동 모듈(130)은 (디스플레이 제어기(156)와 연계하여) 터치 스크린(112) 및 기타의 터치 감지 장치(예를 들어, 터치패드 또는 물리적 클릭 휠)와의 접촉을 검출할 수 있다. 접촉/이동 모듈(130)은, 접촉이 발생했는지의 판정(예를 들어, 손가락 다운 이벤트 검출), 접촉의 이동이 있는지의 판정 및 터치-감지 표면에 걸친 이동의 추적(예를 들어, 하나 이상의 손가락 드래깅 이벤트의 검출), 및 접촉이 중단되었는지의 판정(예를 들어, 손가락 들어올림 이벤트나 접촉의 중단의 검출)과 같은, 접촉의 검출과 관련된 다양한 동작을 수행하기 위한 다양한 소프트웨어 컴포넌트를 포함한다. 접촉/이동 모듈(130)은 터치-감지 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터로 표현되는 접촉 포인트의 이동을 판정하는 것은, 접촉 포인트의 속력(크기), 속도(크기 및 방향), 및/또는 가속도(크기 및/또는 방향에서의 변화)를 판정하는 것을 포함한다. 이들 동작들은 하나의 접촉(예를 들어, 하나의 손가락 접촉) 또는 복수의 동시 접촉(예를 들어, "멀티터치"/복수의 손가락 접촉)에 적용될 수도 있다. 일부 실시예들에서, 접촉/이동 모듈(130)과 디스플레이 제어기(156)는 터치패드 상의 접촉을 검출한다.
접촉/이동 모듈(130)은 사용자에 의해 입력된 제스처를 검출할 수도 있다. 터치-감지 표면 상의 상이한 제스처들은 상이한 접촉 패턴을 가진다. 따라서, 제스처는 특정한 접촉 패턴을 검출함으로써 검출될 수 있다. 예를 들어, 손가락 탭(tap) 제스처를 검출하는 것은, 손가락 다운 이벤트의 검출에 후속하여 손가락 다운 이벤트와 동일한 위치(또는 실질적으로 동일한 위치)(예를 들어, 아이콘의 위치)에서의 손가락 업(들어올림) 이벤트를 검출하는 것을 포함한다. 또 다른 예로서, 터치-감지 표면 상의 손가락 스와이프(swipe) 제스처를 검출하는 것은, 손가락 다운 이벤트의 검출에 후속하여 하나 이상의 손가락 드래깅 이벤트를 검출하고 후속하여 손가락 업(들어올림) 이벤트를 검출하는 것을 포함한다.
그래픽 모듈(132)은, 디스플레이되는 그래픽의 강도를 변경하기 위한 컴포넌트를 포함하여, 터치 스크린(112)이나 기타의 디스플레이 상에 그래픽을 렌더링 및 디스플레이하기 위한 다양한 공지된 소프트웨어 컴포넌트를 포함한다. 본 명세서에서 사용될 때, 용어 "그래픽"은 사용자에게 디스플레이될 수 있는 임의의 객체를 포함하는 것으로서, 텍스트, 웹 페이지, (소프트 키를 포함하는 사용자-인터페이스 객체와 같은) 아이콘, 디지털 화상, 비디오, 애니메이션 등을 포함하지만, 이것으로 한정되는 것은 아니다.
일부 실시예들에서, 그래픽 모듈(132)은 이용될 그래픽을 나타내는 데이터를 저장한다. 각 그래픽에는 대응하는 코드가 할당된다. 그래픽 모듈(132)은, 애플리케이션 등으로부터, 필요하다면 좌표 데이터 및 기타의 그래픽 속성 데이터와 함께, 디스플레이될 그래픽을 명시하는 하나 이상의 코드를 수신한 다음, 디스플레이 제어기(156)에 출력할 스크린 화상 데이터를 생성한다.
그래픽 모듈(132)의 컴포넌트일 수 있는 텍스트 기입 모듈(134)은 다양한 애플리케이션(예를 들어, 연락처(137), 전자메일(140), IM(141), 브라우저(147), 및 텍스트 기입을 요구하는 기타 임의의 애플리케이션)에서 텍스트를 입력하기 위한 소프트 키보드를 제공한다.
GPS 모듈(135)은 장치의 위치를 판정하고, 다양한 애플리케이션에서 이용하기 위해 (예를 들어, 위치-기반 다이얼링에 이용하기 위해 전화(138)에, 사진/비디오 메타데이터로서 카메라(143)에, 및 날씨 위젯, 지역 옐로 페이지 위젯, 및 지도/네비게이션 위젯과 같은 위치-기반 서비스를 제공하는 애플리케이션에) 이 정보를 제공한다.
애플리케이션(136)은 이하의 모듈들(또는 명령어 세트들), 또는 그 서브셋이나 수퍼셋을 포함할 수도 있다:
● 연락처 모듈(137)(때때로 주소록 또는 연락처 목록이라고 함);
● 전화 모듈(138);
● 화상 회의 모듈(139);
● 전자메일 클라이언트 모듈(140);
● 인스턴트 메시징(IM) 모듈(141);
● 운동 지원 모듈(142);
● 정지 및/또는 비디오 화상용 카메라 모듈(143);
● 화상 관리 모듈(144);
● 브라우저 모듈(147);
● 캘린더 모듈(148);
● 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5), 및 사용자가 구한 기타의 위젯들 뿐만 아니라 사용자-생성 위젯(149-6) 중 하나 이상을 포함할 수 있는, 위젯 모듈(149);
● 사용자-생성 위젯(149-6)을 만들기 위한 위젯 생성기 모듈(150);
● 검색 모듈(151);
● 비디오 플레이어 모듈 및 음악 재생기 모듈로 이루어질 수 있는 비디오 및 음악 재생기 모듈(152);
● 노트 모듈(153);
● 지도 모듈(154); 및/또는
● 온라인 비디오 모듈(155).
메모리(102)에 저장될 수 있는 기타의 애플리케이션(136)의 예로서는, 다른 워드 프로세싱 애플리케이션, 다른 화상 편집 애플리케이션, 도안작성 애플리케이션, 프리젠테이션 애플리케이션, JAVA-가능형 애플리케이션, 암호화, 디지털 저작권 관리, 음성 인식, 및 음성 복제가 포함된다.
터치스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 연락처 모듈(137)은, 주소록에 이름(들)을 추가하는 것; 주소록으로부터 이름(들)을 지우는 것; 전화 번호(들), 전자메일 주소(들), 실제 주소(들)나 기타의 정보를 이름과 연관시키는 것; 화상과 이름을 연관시키는 것; 이름을 카테고리화 및 분류하는 것; 전화(138), 화상 회의(139), 전자메일(140), 또는 IM(141)에 의한 통신을 개시 및/또는 용이하게 하기 위해 전화 번호나 전자메일 주소를 제공하는 것 등을 포함하여, (예를 들어, 메모리(102)나 메모리(370)의 연락처 모듈(137)의 애플리케이션 내부 상태(192)에 저장되는) 주소록이나 연락처 목록을 관리하는 데 이용될 수 있다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 전화 모듈(138)은 전화 번호에 대응하는 문자열을 입력하고, 주소록(137) 내의 하나 이상의 전화 번호에 액세스하며, 입력된 전화 번호를 수정하고, 각 전화 번호를 다이얼링하며, 대화를 행하고 대화가 끝났을 때 접속을 끊거나 전화를 끊는데 이용될 수 있다. 앞서 언급한 바와 같이, 무선 통신은 복수의 통신 표준, 프로토콜 및 기술들 중 임의의 것을 이용할 수도 있다.
RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기(156), 광 센서(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), 연락처 목록(137), 및 전화 모듈(138)과 함께, 화상 회의 모듈(139)은 사용자 명령에 따라 사용자와 한 명 이상의 다른 참여자 사이의 화상 회의를 개시, 수행, 및 종료하는 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 전자메일 클라이언트 모듈(140)은 사용자 명령에 응답하여 전자메일을 생성, 전송, 송신 및 관리하는 실행가능한 명령어들을 포함한다. 화상 관리 모듈(144)과 함께, 전자메일 클라이언트 모듈(140)은 카메라 모듈(143)에 의해 촬영된 정지 또는 비디오 화상을 갖는 함께 전자메일을 생성 및 전송하는 것을 매우 용이하게 한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 인스턴트 메시징 모듈(141)은 인스턴트 메시지에 대응하는 문자열을 입력하고, 이전에 입력된 문자를 수정하며, (예를 들어, 전화 기반의 인스턴스 메시징을 위한 SMS(Short Message Service) 또는 MMS(Multimedia Message Service) 프로토콜을 이용하거나, 인터넷 기반의 인스턴트 메시지용의 XMPP, SIMPLE 또는 IMPS를 이용하여) 각 인스턴스 메시지를 전송하고, 인스턴트 메시지를 수신하며, 수신된 인스턴트 메시지를 보기 위한 실행가능한 명령어들을 포함한다. 일부 실시예들에서, 전송된 및/또는 수신된 인스턴트 메시지들은 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 그래픽, 사진, 오디오 파일, 비디오 파일 및/또는 기타의 첨부물을 포함할 수도 있다. 본 명세서에서 사용될 때, "인스턴트 메시징"이란, 전화-기반의 메시지(예를 들어, SMS나 MMS를 이용하여 전송된 메시지) 및 인터넷-기반의 메시지(예를 들어, XMPP, SIMPLE 또는 IMPS를 이용하여 전송된 메시지) 양쪽 모두를 말한다.
RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), GPS 모듈(135), 지도 모듈(154), 및 음악 재생기 모듈(146)과 함께, 운동 지원 모듈(142)은 (예를 들어, 시간, 거리, 및/또는 칼로리 소비 목표를 갖는) 운동을 생성하고; 운동 센서(스포츠 장치)와 통신하며; 운동 센서 데이터를 수신하고; 운동을 모니터링하는 데 이용되는 센서를 교정하며; 운동을 위한 음악을 선택 및 재생하고; 운동 데이터를 디스플레이, 저장 및 전송하기 위한 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 제어기(156), 광 센서(들)(164), 광 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 및 화상 관리 모듈(144)과 함께, 카메라 모듈(143)은 정지 화상이나 비디오(비디오 스트림 포함)을 포착하고 이들을 메모리(102) 내에 저장하며, 정지 화상이나 비디오의 특성을 수정하거나, 정지 화상이나 비디오를 메모리(102)로부터 삭제하기 위한 실행가능한 명령어들을 포함한다.
터치스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), 및 카메라 모듈(143)과 함께, 화상 관리 모듈(144)은 정지 및/또는 비디오 화상을 배열, 수정(예를 들어, 편집), 또는 처리, 라벨링, 삭제, 프리젠트(예를 들어, 디지털 슬라이드 쇼나 앨범으로), 및 저장하기 위한 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 브라우저 모듈(147)은, 웹페이지나 그 일부 뿐만 아니라 웹 페이지에 링크된 첨부물 및 다른 파일들의 검색, 링킹, 수신, 및 디스플레이를 포함하여, 사용자 명령에 따라 인터넷을 브라우징하기 위한 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), 전자메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 함께, 캘린더 모듈(148)은 사용자 명령에 따라 캘린더 및 캘린더와 연관된 데이터(예를 들어, 캘린더 입력, 해야할 일 목록 등)를 생성, 디스플레이, 수정, 및 저장하기 위한 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), 및 브라우저 모듈(147)과 함께, 위젯 모듈(149)은 사용자에 의해 다운로드되고 이용되거나(예를 들어, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 및 사전 위젯(149-5)), 사용자에 의해 생성(예를 들어, 사용자 생성 위젯(들)(149-6))될 수 있는 미니-애플리케이션이다. 일부 실시예들에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파일, 및 자바스크립트(JavaScript) 파일을 포함한다. 일부 실시예들에서, 위젯은 XML(Extensible Markup Language) 파일 및 자바스크립트 파일(예를 들어, Yahoo! 위젯)을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), 및 브라우저 모듈(147)과 함께, 위젯 생성기 모듈(150)은 사용자가 위젯을 생성하는 데(예를 들어, 웹 페이지의 사용자 지정된 부분을 위젯으로 변환하는 데) 이용될 수 있다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 검색 모듈(151)은 사용자 명령에 따라 하나 이상의 검색 기준(예를 들어, 하나 이상의 사용자-지정된 검색 용어)에 맞는 텍스트, 음악, 사운드, 화상, 비디오, 및/또는 기타의 파일들을 메모리(102)에서 검색하기 위한 실행가능한 명령어들을 포함한다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 및 브라우저 모듈(147)과 함께, 비디오 및 음악 재생기 모듈(152)은, 사용자가, MP3나 AAC 파일과 같은 하나 이상의 파일 포맷으로 저장된 녹음된 음악 및 기타의 사운드 파일을 다운로드하여 재생하는 것을 허용하는 실행가능한 명령어들, 및 비디오를 (예를 들어, 터치 스크린(112) 상에, 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에) 디스플레이, 프리젠트 또는 재생하기 위한 실행가능한 명령어들을 포함한다. 일부 실시예들에서, 장치(100)는 iPod(Apple Inc.의 상표)와 같은 MP3 플레이어의 기능을 포함할 수도 있다.
터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 및 텍스트 기입 모듈(134)과 함께, 노트 모듈(153)은 사용자 명령에 따라 노트, 해야할 일 목록 등을 생성 및 관리하기 위한 실행가능한 명령어들을 포함한다.
RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 기입 모듈(134), GPS 모듈(135), 및 브라우저 모듈(147)과 함께, 지도 모듈(154)은 사용자 명령에 따라 지도 및 지도와 연관된 데이터(예를 들어, 운전 방향; 특정 위치나 그 부근의 관심대상 가게나 기타의 지점에 관한 데이터; 및 기타의 위치-기반의 데이터)를 수신, 디스플레이, 수정, 및 저장하는 데 이용될 수 있다.
터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108), 텍스트 기입 모듈(134), 전자메일 클라이언트 모듈(140), 및 브라우저 모듈(147)과 함께, 온라인 비디오 모듈(155)은, 사용자로 하여금 특정 온라인 비디오에 대한 링크를 갖는 이메일을 액세스, 브라우징, (예컨대, 스트리밍 및/또는 다운로드를 통해) 수신, (예컨대, 터치 스크린 상에서 또는 외부 포트(124)를 통해 접속된 외부 디스플레이 상에서) 재생, 송신할 수 있게 하거나, H.264 등의 하나 이상의 파일 포맷의 온라인 비디오를 관리할 수 있게 하기 위한 명령어들을 포함한다. 일부 실시예들에서는, 전자메일 클라이언트 모듈(140)이 아니라, 인스턴트 메시징 모듈(141)이 특정한 온라인 비디오에 대한 링크를 전송하는 데 이용된다.
상기 식별된 모듈들 및 애플리케이션들 각각은, 전술된 하나 이상의 기능과 본 출원에서 설명되는 방법(예를 들어, 본 명세서에서 설명되는 컴퓨터 구현 방법 및 기타의 정보 처리 방법)을 수행하기 위한 한 세트의 실행가능한 명령어에 대응한다. 이들 모듈들(즉, 명령어 세트)은 별개의 소프트웨어 프로그램들, 프로시저 또는 모듈들로서 구현될 필요는 없으므로, 이들 모듈들의 다양한 서브셋들은 다양한 실시예들에서 결합되거나 재배열될 수도 있다. 일부 실시예들에서, 메모리(102)는 앞서 식별된 모듈들 및 데이터 구조들의 서브셋을 저장할 수도 있다. 또한, 메모리(102)는 전술되지 않은 추가의 모듈과 데이터 구조를 저장할 수도 있다.
일부 실시예들에서, 장치(100)는, 장치 상의 미리 정의된 세트의 기능들의 동작이 전적으로 터치 스크린 및/또는 터치패드를 통해 수행되는 장치이다. 터치 스크린 및/또는 터치패드를 장치(100)의 동작에 대한 1차 입력 제어 장치로서 이용함으로써, 장치(100)의 물리적 입력 제어 장치(푸시 버튼, 다이얼 들)의 개수가 저감될 수 있다.
전적으로 터치 스크린 및/또는 터치패드를 통해 수행될 수 있는 미리 정의된 세트의 기능들은 사용자 인터페이스들간 네비게이션을 포함한다. 일부 실시예들에서, 터치패드는, 사용자에 의해 터치될 때, 장치(100) 상에 디스플레이될 수 있는 임의의 사용자 인터페이스로부터 메인, 홈, 또는 루트 메뉴 쪽으로 장치(100)를 네비게이트한다. 이러한 실시예들에서, 터치패드는 "메뉴 버턴"이라 부를 수도 있다. 일부 다른 실시예들에서는, 메뉴 버턴은 터치패드 대신에 물리적 푸시 버턴이나 기타의 물리적 입력 제어 장치일 수도 있다.
도 1b는 일부 실시예들에 따른 이벤트 처리를 위한 예시적 컴포넌트들을 나타내는 블록도이다. 일부 실시예들에서, (도 1a의) 메모리(102) 또는 (도 3의) 메모리(370)는, (예를 들어, 운영 체제(126)의) 이벤트 분류기(170) 및 각각의 애플리케이션(136-1)(예를 들어, 임의의 전술된 애플리케이션 137-151, 155, 380-390)을 포함한다.
이벤트 분류기(170)는 이벤트 정보를 수신하고 그 이벤트 정보를 전달할 애플리케이션(136-1), 및 애플리케이션(136-1)의 애플리케이션 뷰(191)를 결정한다. 이벤트 분류기(170)는 이벤트 모니터(171)와 이벤트 디스패처 모듈(174)을 포함한다. 일부 실시예들에서, 애플리케이션(136-1)은, 애플리케이션이 활성이거나 실행 중일 때 터치 감지 디스플레이(112) 상에 디스플레이된 현재의 애플리케이션 뷰(들)을 가리키는 애플리케이션 내부 상태(192)를 포함한다. 일부 실시예들에서, 장치/전역 내부 상태(157)는 어떤 애플리케이션(들)이 현재 활성인지를 판정하기 위해 이벤트 분류기(170)에 의해 이용되며, 애플리케이션 내부 상태(192)는 이벤트 정보를 전달할 애플리케이션 뷰(191)를 결정하기 위해 이벤트 분류기(170)에 의해 이용된다.
일부 실시예들에서, 애플리케이션 내부 상태(192)는, 애플리케이션(136-1)이 실행을 재개할 때 이용될 재개 정보, 애플리케이션(136-1)에 의해 디스플레이된 준비가 되거나 디스플레이 중인 정보를 가리키는 사용자 인터페이스 상태 정보, 애플리케이션(136-1)의 이전 상태나 뷰로 사용자가 되돌아갈 수 있게 하기 위한 상태 큐, 및 사용자에 의해 취해진 이전 동작들의 재실행(redo)/실행취소(undo) 큐 중 하나 이상과 같은 추가의 정보를 포함한다.
이벤트 모니터(171)는 주변장치 인터페이스(118)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브-이벤트(예를 들어, 멀티-터치 제스처의 일부로서 터치-감지 디스플레이(112) 상의 사용자 터치)에 대한 정보를 포함한다. 주변장치 인터페이스(118)는, 근접 센서(166), 가속도계(들)(168), 및/또는 (오디오 회로(110)를 통한) 마이크로폰(113)과 같은, I/O 서브시스템(106) 또는 센서로부터 수신하는 정보를 전송한다. 주변장치 인터페이스(118)가 I/O 서브시스템(106)으로부터 수신하는 정보는, 터치-감지 디스플레이(112) 또는 터치-감지 표면으로부터의 정보를 포함한다.
일부 실시예들에서, 이벤트 모니터(171)는 미리결정된 간격으로 주변장치 인터페이스(118)에 요청을 전송한다. 이에 응답하여, 주변장치 인터페이스(118)는 이벤트 정보를 전송한다. 다른 실시예들에서, 주변장치 인터페이스(118)는, 중요한 이벤트가 있을 때에만(예를 들어, 미리결정된 노이즈 임계치를 넘는 및/또는 미리결정된 지속기간 이상 동안 입력을 수신하는 것) 이벤트 정보를 전송한다.
일부 실시예들에서, 이벤트 분류기(170)는 또한, 히트 뷰 결정 모듈(172), 및/또는 활성 이벤트 인식기 결정 모듈(173)을 포함한다.
히트 뷰 결정 모듈(172)은, 터치 감지 디스플레이(112)가 하나보다 많은 뷰를 디스플레이할 때, 하나 이상의 뷰 내에서 서브-이벤트가 발생한 장소를 결정하기 위한 소프트웨어 프로시저를 제공한다. 뷰들은, 사용자가 디스플레이 상에서 볼 수 있는 제어 요소와 기타의 요소들로 구성된다.
애플리케이션과 연관된 사용자 인터페이스의 또 다른 양태는 한 세트의 뷰로서, 때때로 여기서는 애플리케이션 뷰 또는 사용자 인터페이스 윈도우라고 불리며, 여기에서 정보가 표시되고, 터치 기반의 제스처가 발생한다. 터치가 검출되는 (각각의 애플리케이션의) 애플리케이션 뷰는 애플리케이션의 프로그램 또는 뷰 계층구조 내의 프로그램 레벨에 대응할 수도 있다. 예를 들어, 터치가 검출되는 최하위 레벨의 뷰는 히트 뷰(hit view)라 불리고, 적절한 입력으로서 인식되는 이벤트 세트는, 적어도 부분적으로, 터치 기반의 제스처를 시작하는 초기 터치의 히트 뷰에 기초하여 결정될 수도 있다.
히트 뷰 결정 모듈(172)은 터치-기반 제스처의 서브-이벤트에 관련된 정보를 수신한다. 애플리케이션이 계층구조로 조직화된 복수의 뷰를 가질 때, 히트 뷰 결정 모듈(172)은 히트 뷰를 서브-이벤트를 처리해야 하는 계층구조 내의 최하위 뷰로서 식별한다. 대부분의 상황에서, 히트 뷰는 개시되는 서브-이벤트가 발생하는 최하위 레벨의 뷰이다(즉, 이벤트나 잠재적 이벤트를 형성하는 서브-이벤트 시퀀스 내의 첫 번째 서브-이벤트). 일단 히트 뷰가 히트 뷰 결정 모듈에 의해 식별되면, 히트 뷰는 통상, 그가 히트 뷰로서 식별된 것과 동일한 터치나 입력 소스에 관련된 모든 서브-이벤트를 수신한다.
활성 이벤트 인식기 결정 모듈(173)은, 뷰 계층구조 내에서 어느 뷰 또는 뷰들이 특정한 서브-이벤트들의 시퀀스를 수신해야 하는지를 결정한다. 일부 실시예들에서, 활성 이벤트 인식기 결정 모듈(173)은 히트 뷰만이 특정한 서브-이벤트들의 시퀀스를 수신해야 한다고 결정한다. 다른 실시예들에서는, 활성 이벤트 인식기 결정 모듈(173)은 서브-이벤트의 물리적 위치를 포함하는 모든 뷰가 적극 참여 뷰(actively involved view)라고 결정하므로, 모든 적극 참여 뷰가 특정한 서브-이벤트들의 시퀀스를 수신해야 한다고 결정한다. 다른 실시예들에서, 터치 서브-이벤트가 하나의 특정한 뷰와 연관된 영역으로 완전히 제한되더라도, 계층구조 내의 상위 뷰들은 여전히 적극 참여 뷰로서 남아 있을 것이다.
이벤트 디스패처 모듈(174)은 이벤트 정보를 이벤트 인식기(예를 들어, 이벤트 인식기(180)에 송달한다. 활성 이벤트 인식기 결정 모듈(173)을 포함하는 실시예들에서, 이벤트 디스패처 모듈(174)은 활성 이벤트 인식기 결정 모듈(173)에 의해 결정된 이벤트 인식기에 이벤트 정보를 전달한다. 일부 실시예들에서, 이벤트 디스패처 모듈(174)은 이벤트 큐 내에 이벤트 정보를 저장하고, 이벤트 정보는 각각의 이벤트 수신기 모듈(182)에 의해 검색된다.
일부 실시예들에서, 운영 체제(126)는 이벤트 분류기(170)를 포함한다. 대안으로서, 애플리케이션(136-1)은 이벤트 분류기(170)를 포함한다. 또 다른 실시예에서, 이벤트 분류기(170)는 독립형 모듈이거나, 접촉/이동 모듈(130)과 같은 메모리(102)에 저장된 또 다른 모듈의 일부이다.
일부 실시예들에서, 애플리케이션(136-1)은 복수의 이벤트 처리기(190)와 하나 이상의 애플리케이션 뷰(191)를 포함하며, 그 각각은 애플리케이션의 사용자 인터페이스의 각각의 뷰 내부에서 발생하는 터치 이벤트를 처리하기 위한 명령어를 포함한다. 애플리케이션(136-1)의 각각의 애플리케이션 뷰(191)는 하나 이상의 이벤트 인식기(180)를 포함한다. 통상적으로, 각각의 애플리케이션 뷰(191)는 복수의 이벤트 인식기(180)를 포함한다. 다른 실시예들에서, 하나 이상의 이벤트 인식기(180)는, 사용자 인터페이스 키트(미도시) 또는 애플리케이션(136-1)이 메소드나 기타의 속성을 상속받는 상위 레벨 객체와 같은, 별개의 모듈의 일부이다. 일부 실시예들에서, 각각의 이벤트 처리기(190)는, 데이터 갱신기(176), 객체 갱신기(177), GUI 갱신기(178), 및/또는 이벤트 분류기(170)로부터 수신된 이벤트(179) 데이터 중에서 하나 이상을 포함한다. 이벤트 처리기(190)는, 애플리케이션 내부 상태(192)를 갱신하기 위해 데이터 갱신기(176), 객체 갱신기(177) 또는 GUI 갱신기(178)를 이용하거나 호출할 수도 있다. 대안으로서, 애플리케이션 뷰(191)들 중 하나 이상은 하나 이상의 각각의 이벤트 처리기(190)를 포함한다. 또한, 일부 실시예들에서, 데이터 갱신기(176), 객체 갱신기(177), 및 GUI 갱신기(178) 중 하나 이상은 각각의 애플리케이션 뷰(191)에 포함된다.
각각의 이벤트 인식기(180)는 이벤트 분류기(170)로부터 이벤트 정보(예를 들어, 이벤트 데이터(179))를 수신하고, 그 이벤트 정보로부터 이벤트를 식별한다. 이벤트 인식기(180)는 이벤트 수신기(182)와 이벤트 비교기(184)를 포함한다. 일부 실시예들에서, 이벤트 인식기(180)는 또한, 메타데이터(183) 및 (서브-이벤트 전달 명령어를 포함할 수도 있는) 이벤트 전달 명령어(188) 중에서 적어도 서브셋을 포함한다.
이벤트 수신기(182)는 이벤트 분류기(170)로부터 이벤트 정보를 수신한다. 이벤트 정보는 서브-이벤트, 예를 들어, 터치나 터치 이동에 대한 정보를 포함한다. 서브-이벤트에 따라, 이벤트 정보는 또한, 서브-이벤트의 위치와 같은 추가의 정보를 포함한다. 서브-이벤트가 터치의 이동에 관한 것일 때, 이벤트 정보는 또한, 서브-이벤트의 속력과 방향을 포함할 수도 있다. 일부 실시예들에서, 이벤트는 한 배향으로부터 다른 배향(예를 들어, 세로 배향으로부터 가로 배향, 또는 그 반대)으로의 장치의 회전을 포함하며, 이벤트 정보는 장치의 현재 배향(장치 자세라고도 함)에 관한 대응하는 정보를 포함한다.
이벤트 비교기(184)는 이벤트 정보를 미리 정의된 이벤트나 서브-이벤트 정의와 비교하고, 이 비교에 기초하여, 이벤트나 서브-이벤트를 결정하거나, 이벤트나 서브-이벤트의 상태를 결정 또는 갱신한다. 일부 실시예들에서, 이벤트 비교기(184)는 이벤트 정의(186)를 포함한다. 이벤트 정의(186)는, 이벤트(예를 들어, 이벤트 1(187-1), 이벤트 2(1872), 및 기타)의 정의(예를 들어, 서브-이벤트들의 미리 정의된 시퀀스)를 포함한다. 일부 실시예들에서, 이벤트(187) 내의 서브-이벤트들은, 예를 들어, 터치 시작, 터치 종료, 터치 이동, 터치 취소, 및 다중 터치를 포함한다. 한 예에서, 이벤트 1(187-1)에 대한 정의는 디스플레이된 객체 상의 더블 탭(double tap)이다. 더블 탭는, 예를 들어, 미리결정된 페이즈 동안에 디스플레이된 객체 상의 제1 터치(터치 시작), 미리결정된 페이즈 동안의 제1 들어올림(터치 종료), 미리결정된 페이즈 동안의 디스플레이된 객체 상의 제2 터치(터치 시작), 및 미리결정된 페이즈 동안의 제2 들어올림(터치 종료)을 포함한다. 또 다른 예에서, 이벤트 2(187-2)에 대한 정의는 디스플레이된 객체 상의 드래깅(dragging)이다. 드래깅은, 예를 들어, 미리결정된 페이즈 동안의 디스플레이된 객체 상의 터치(또는 접촉), 터치-감지 디스플레이(112)를 가로지른 터치의 이동, 및 터치의 들어올림(터치 종료)을 포함한다. 일부 실시예들에서, 이벤트는 또한, 하나 이상의 연관된 이벤트 처리기(190)에 대한 정보를 포함한다.
일부 실시예들에서, 이벤트 정의(187)는 각각의 사용자-인터페이스 객체에 대한 이벤트의 정의를 포함한다. 일부 실시예들에서, 이벤트 비교기(184)는 어느 사용자-인터페이스 객체가 서브-이벤트와 연관되어 있는지를 결정하기 위해 히트 테스트(hit test)를 수행한다. 예를 들어, 터치 감지 디스플레이(112) 상에 3개의 사용자-인터페이스 객체가 표시되어 있는 애플리케이션 뷰에서, 터치 감지 디스플레이(112) 상에서 터치가 검출되면, 이벤트 비교기(184)는, 3개의 사용자 인터페이스 객체 중 어느 것이 터치(서브-이벤트)와 연관되어 있는지를 결정하기 위해 히트 테스트를 수행한다. 만일 각각의 디스플레이된 객체가 각각의 이벤트 처리기(190)와 연관되어 있다면, 이벤트 비교기는 어느 이벤트 처리기(190)가 활성화되어야 하는지를 결정하기 위해 히트 테스트의 결과를 이용한다. 예를 들어, 이벤트 비교기(184)는 히트 테스트를 트리거링하는 객체 및 서브-이벤트와 연관된 이벤트 처리기를 선택한다.
일부 실시예들에서, 각각의 이벤트(187)에 대한 정의는 또한, 서브-이벤트들의 시퀀스가 이벤트 인식기의 이벤트 타입에 대응하는지의 여부가 결정된 후까지 이벤트 정보의 전달을 지연시키는 지연된 동작을 포함한다.
일련의 서브-이벤트가 이벤트 정의(186) 내의 어떠한 이벤트와도 부합하지 않는다고 각각의 이벤트 인식기(180)가 판정하면, 각각의 이벤트 인식기(180)는 이벤트 불가능, 이벤트 실패, 또는 이벤트 종료 상태로 진입하고, 그 후, 각각의 이벤트 인식기는 터치 기반의 제스처의 후속하는 서브-이벤트들을 무시한다. 이 상황에서, 있다면, 히트 뷰에 대해 활성으로 남아 있는 다른 이벤트 인식기들은, 진행중인 터치 기반의 제스처의 서브-이벤트들을 계속 추적 및 처리한다.
일부 실시예들에서, 각각의 이벤트 인식기(180)는, 이벤트 전달 시스템이 어떻게 적극 참여 이벤트 인식기들에 대한 서브-이벤트 전달을 수행해야 하는지를 나타내는 구성가능한 속성, 플래그, 및/또는 목록을 갖는 메타데이터(183)를 포함한다. 일부 실시예들에서, 메타데이터(183)는 이벤트 인식기들이 어떻게 서로 상호작용할 수 있는지를 나타내는 구성가능한 속성, 플래그, 및/또는 목록을 포함한다. 일부 실시예들에서, 메타데이터(183)는, 서브-이벤트들이 뷰나 프로그램 계층구조 내의 상이한 레벨들에 전달되어야 하는지를 나타내는 구성가능한 속성, 플래그, 및/또는 목록을 포함한다.
일부 실시예들에서, 각각의 이벤트 인식기(180)는, 이벤트의 하나 이상의 특정한 서브-이벤트가 인식될 때 이벤트와 연관된 이벤트 처리기(190)를 활성화한다. 일부 실시예들에서, 각각의 이벤트 인식기(180)는 이벤트와 연관된 이벤트 정보를 이벤트 처리기(190)에 전달한다. 이벤트 처리기(190)를 활성화하는 것은, 각 히트 뷰에 서브-이벤트를 전송(및 지연 전송)하는 것과는 구별된다. 일부 실시예들에서, 이벤트 인식기(180)는 인식된 이벤트와 연관된 플래그를 던지고, 그 플래그와 연관된 이벤트 처리기(190)는 그 플래그를 포착하여 미리 정의된 처리를 수행한다.
일부 실시예들에서, 이벤트 전달 명령어(188)는, 이벤트 처리기를 작동시키지 않고 서브-이벤트에 대한 이벤트 정보를 전달하는 서브-이벤트 전달 명령어를 포함한다. 대신에, 서브-이벤트 전달 명령어는, 일련의 서브-이벤트와 연관된 이벤트 처리기들에 또는 적극 참여 뷰들에 이벤트 정보를 전달한다. 일련의 서브-이벤트 또는 적극 참여 뷰들과 연관된 이벤트 처리기들은, 이벤트 정보를 수신하고 미리결정된 처리를 수행한다.
일부 실시예들에서, 데이터 갱신기(176)는 애플리케이션(136-1)에서 이용되는 데이터를 생성하고 갱신한다. 예를 들어, 데이터 갱신기(176)는 연락처 모듈(137)에서 이용되는 전화 번호를 갱신하거나, 비디오 재생기 모듈(145)에서 이용되는 비디오 파일을 저장한다. 일부 실시예들에서, 객체 갱신기(177)는 애플리케이션(136-1)에서 이용되는 객체를 생성하고 갱신한다. 예를 들어, 객체 갱신기(176)는 새로운 사용자-인터페이스 객체를 생성하거나 사용자-인터페이스 객체의 위치를 갱신한다. GUI 갱신기(178)는 GUI를 갱신한다. 예를 들어, GUI 갱신기(178)는 디스플레이 정보를 준비하고, 이것을 터치-감지 디스플레이 상에 디스플레이하기 위해 그래픽 모듈(132)에 전송한다.
일부 실시예들에서, 이벤트 처리기(들)(190)은 데이터 갱신기(176), 객체 갱신기(177), 및 GUI 갱신기(178)를 포함하거나 액세스한다. 일부 실시예들에서, 데이터 갱신기(176), 객체 갱신기(177), 및 GUI 갱신기(178)는 각각의 애플리케이션(136-1) 또는 애플리케이션 뷰(191)의 단일 모듈 내에 포함된다. 다른 실시예들에서, 이들은 2개 이상의 소프트웨어 모듈에 포함된다.
터치 감지 디스플레이들 상의 사용자 터치들의 이벤트 처리에 관한 위의 설명은 입력 장치들을 갖는 다기능 장치들(100)을 조작하기 위한 다른 형태의 사용자 입력들에도 적용된다는 것을 이해해야 하고, 이러한 사용자 입력들은 그 모두가 터치 스크린들 상에서 개시되는 것은 아니며, 이들은 예를 들어 단일 또는 다수의 키보드 누름 또는 유지가 있거나 없는 상태에서의 마우스 이동 및 마우스 버튼 누름의 조정, 터치패드들 상에서의 사용자 이동 탭, 드래그, 스크롤 등, 펜 스타일러스 입력, 장치의 이동, 구두 명령, 눈 이동 감지, 생체학적 입력 및/또는 이들의 조합을 포함하며, 인식될 이벤트를 정의하는 서브이벤트들에 대응하는 입력들로서 사용될 수 있다.
도 2는 일부 실시예들에 따른 터치 스크린(112)을 갖는 휴대 다기능 장치(100)를 나타낸다. 터치 스크린은 사용자 인터페이스(UI)(200) 내에 하나 이상의 그래픽을 디스플레이할 수도 있다. 이 실시예에서 뿐만 아니라 이하에서 설명되는 다른 실시예에서, 사용자는, 예를 들어, 하나 이상의 손가락(202)(도면에서는 축척으로 도시되지 않음)이나 하나 이상의 스타일러스(203)(도면에서는 축척비율대로 도시되지 않음)로 그래픽 상에서 제스처를 수행함으로써 하나 이상의 그래픽을 선택할 수도 있다. 일부 실시예들에서, 하나 이상의 그래픽의 선택은 사용자가 하나 이상의 그래픽과의 접촉을 중단할 때 발생한다. 일부 실시예들에서, 제스처는, 장치(100)와 접촉한 손가락의 하나 이상의 탭, (좌에서 우로, 우에서 좌로, 위로 및/또는 아래로의) 하나 이상의 스와이프(swipe) 및/또는 (우에서 좌로, 좌에서 우로, 위로 및/또는 아래로의) 롤링을 포함할 수도 있다. 일부 실시예에서, 그래픽과의 부주의한 접촉은 그래픽을 선택하지 않을 수도 있다. 예를 들어, 애플리케이션 아이콘 위에서 휩쓸고 지나가는 스와이프 제스처는, 선택에 대응하는 제스처가 탭일 때 그 대응하는 애플리케이션을 선택하지 않을 수도 있다.
장치(100)는 또한, "홈"이나 메뉴 버턴(204)과 같은 하나 이상의 물리적 버턴을 포함할 수도 있다. 전술된 바와 같이, 메뉴 버턴(204)은 장치(100) 상에서 실행될 수도 있는 한 세트의 애플리케이션 내의 임의의 애플리케이션(136)으로 네비게이트하는 데 이용될 수 있다. 대안으로서, 일부 실시예들에서, 메뉴 버턴은 터치 스크린(112) 상에 디스플레이된 GUI에서 소프트 키로서 구현된다.
한 실시예에서, 장치(100)는, 터치 스크린(112), 메뉴 버턴(204), 장치를 파워 온/오프하고 장치를 잠그기 위한 푸시 버턴(206), 볼륨 조절 버턴(들)(208), SIM(Subscriber Identity Module) 카드 슬롯(210), 헤드셋 잭(212), 및 도킹/충전 외부 포트(124)를 포함한다. 푸시 버턴(206)은, 버턴을 누르고 그 버턴을 미리 정의된 시구간 동안 누른 상태로 유지함으로써 전력을 턴 온/오프하고; 버턴을 누르고 미리 정의된 시구간이 경과하기 이전에 버턴을 놓음으로써 장치를 잠그며; 및/또는 장치를 잠금해제하거나 잠금해제 프로세스를 시작하는 데 이용될 수도 있다. 대안적 실시예에서, 장치(100)는 마이크로폰(113)을 통해 몇 가지 기능의 활성화 및 비활성화를 위한 구두 입력(verbal input)을 수신할 수도 있다.
도 3은 일부 실시예들에 따른 디스플레이와 터치-감지 표면을 갖춘 예시적 다기능 장치의 블록도이다. 장치(300)는 휴대형일 필요는 없다. 일부 실시예들에서, 장치(300)는, 랩탑 컴퓨터, 데스크탑 컴퓨터, 태블릿 컴퓨터, 멀티미디어 재생기 장치, 네비게이션 장치, (어린이 학습 장난감과 같은) 교육용 장치, 게임 시스템, 또는 제어 장치(예를 들어, 가정용 또는 산업용 제어기)이다. 장치(300)는 통상 하나 이상의 처리 유닛(CPU)(310), 하나 이상의 네트워크나 기타의 통신 인터페이스(360), 메모리(370), 및 이들 컴포넌트들을 상호접속하기 위한 하나 이상의 통신 버스(320)를 포함한다. 통신 버스(320)는 시스템 컴포넌트들을 상호접속하고 이들간의 통신을 제어하는 회로(때때로 칩셋이라고 함)를 포함할 수도 있다. 장치(300)는, 통상 터치 스크린 디스플레이인 디스플레이(340)를 포함하는 입력/출력(I/O) 인터페이스(330)를 포함한다. I/O 인터페이스(330)는 또한, 키보드 및/또는 마우스(또는 기타의 포인팅 장치)(350) 및 터치패드(355)를 포함할 수도 있다. 메모리(370)는, DRAM, SRAM, DDR RAM 또는 기타의 랜덤 액세스 반도체 메모리(solid state memory) 장치와 같은 고속 랜덤 액세스 메모리를 포함할 수도 있으며; 하나 이상의 자기 디스크 저장 장치, 광학 디스크 저장 장치, 플래시 메모리 장치나 기타의 비휘발성 반도체 저장 장치와 같은 비휘발성 메모리를 포함할 수도 있다. 메모리(370)는, 선택사항으로서, CPU(들)(310)로부터 원격 위치한 하나 이상의 저장 장치를 포함할 수도 있다. 일부 실시예들에서, 메모리(370)는, (도 1의) 휴대 다기능 장치(100)의 메모리(102)에 저장된 프로그램, 모듈, 및 데이터 구조와 유사한, 프로그램, 모듈, 및 데이터 구조 또는 이들의 서브셋을 저장한다. 또한, 메모리(370)는 휴대 다기능 장치(100)의 메모리(102)에 존재하지 않는 추가의 프로그램, 모듈, 및 데이터 구조를 저장할 수도 있다. 예를 들어, 장치(300)의 메모리(370)는 도안작성 모듈(380), 프리젠테이션 모듈(382), 워드 프로세싱 모듈(384), 웹사이트 생성 모듈(386), 디스크 저작 모듈(388), 및/또는 스프레드시트 모듈(390)을 저장할 수도 있는 반면, (도 1의) 휴대 다기능 장치(100)의 메모리(102)는 이들 모듈들을 저장하지 않을 수도 있다.
도 3의 상기 식별된 요소들 각각은 앞서 언급된 메모리 장치들 중 하나 이상에 저장될 수도 있다. 상기 식별된 모듈들 각각은 전술된 기능을 수행하기 위한 한 세트의 명령어에 대응한다. 앞서 식별된 모듈들 또는 프로그램들(즉, 명령어 세트)은 별개의 소프트웨어 프로그램들, 프로시저 또는 모듈들로서 구현될 필요는 없으므로, 이들 모듈들의 다양한 서브셋들은 다양한 실시예들에서 결합되거나 재배열될 수도 있다. 일부 실시예들에서, 메모리(370)는 앞서 식별된 모듈들 및 데이터 구조들의 서브셋을 저장할 수도 있다. 또한, 메모리(370)는 전술되지 않은 추가의 모듈과 데이터 구조를 저장할 수도 있다.
이제 휴대 다기능 장치(100 상에서 구현될 수도 있는 사용자 인터페이스("UI")의 실시예들에 대해 주목한다.
도 4a는 일부 실시예에 따른 휴대 다기능 장치(100) 상의 애플리케이션의 메뉴를 위한 예시적 사용자 인터페이스를 나타낸다. 유사한 사용자 인터페이스가 장치(300) 상에 구현될 수도 있다. 일부 실시예들에서, 사용자 인터페이스(400)는 다음의 요소들, 또는 그 서브셋이나 수퍼셋을 포함한다:
● 셀룰러 및 Wi-Fi 신호와 같은 무선 통신(들)에 대한 신호 강도 표시자(들)(402);
● 시간(404);
● 블루투스 표시자(405);
● 배터리 상태 표시자(406);
● 하기와 같은, 자주 이용되는 애플리케이션들에 대한 아이콘을 갖는 트레이(408):
o 부재중 전화나 음성메일 메시지의 개수의 표시자(414)를 포함할 수도 있는 전화(138);
o 읽지 않은 전자메일의 개수의 표시자(410)를 포함할 수도 있는 전자메일 클라이언트(140);
o 브라우저(147); 및
o iPod(Apple Inc.의 상표) 모듈(152)라고도 불리는, 비디오 및 음악 재생기(152); 및
● 하기와 같은 다른 애플리케이션들에 대한 아이콘들:
o IM(141);
o 화상 관리(144);
o 카메라(143);
o 날씨(149-1);
o 주식(149-2);
o 운동 지원(142);
o 캘린더(148);
o 알람 시계(149-4);
o 지도(154);
o 노트(153);
o 장치(100) 및 그 다양한 애플리케이션(136)에 대한 설정으로의 액세스를 제공하는 설정(412); 및
o YouTube(Google, Inc.의 상표) 모듈(155)이라고도 불리는 온라인 비디오 모듈(155).
도 4b는 디스플레이(450)(예를 들어, 터치 스크린 디스플레이(112))로부터 분리된 터치-감지 표면(451)(예를 들어, 도 3의 태블릿이나 터치패드(355))을 갖춘 장치(예를 들어, 도 3의 장치(300)) 상의 예시적 사용자 인터페이스를 나타낸다. 뒤따르는 많은 예들이 (터치 감지 표면과 디스플레이가 결합되어 있는) 터치 스크린 디스플레이(112) 상의 입력을 참조하여 설명되지만, 일부 실시예들에서는, 장치는 도 4b에 도시된 바와 같이 디스플레이로부터 분리된 터치-감지 표면 상의 입력을 검출한다. 일부 실시예들에서는 터치 감지 표면(예를 들어, 도 4b의 451)은 디스플레이(예를 들어, 450) 상의 주축(예를 들어, 도 4b의 453)에 대응하는 주축(예를 들어, 도 4b의 452)을 가진다. 이들 실시예들에 따르면, 장치는 디스플레이 상의 각 위치에 대응하는 위치들(예를 들어, 도 4b에서, 460은 468에 대응하고, 462는 470에 대응함)에서 터치-감지 표면(451)과의 접촉(예를 들어, 도 4b에서 460 및 462)을 검출한다. 이런 방식으로, 터치-감지 표면(예를 들어, 도 4b의 451) 상에서 장치에 의해 검출된 사용자 입력(예를 들어, 접촉(460 및 462) 및 그 이동)은, 터치-감지 표면이 디스플레이로부터 분리되어 있을 때 다기능 장치의 디스플레이(예를 들어, 도 4b의 450) 상의 사용자 인터페이스를 조작하기 위해 장치에 의해 이용된다. 본 명세서에서 설명되는 다른 사용자 인터페이스에 대해서도 유사한 방법이 이용될 수 있다는 것을 이해하여야 한다.
사용자 인터페이스 및 연관된 프로세스
이제, 장치(300)나 휴대 다기능 장치(100)와 같은 디스플레이 및 터치-감지 표면을 갖는 전자 장치 상에서 구현될 수 있는 사용자 인터페이스("UI") 및 연관된 프로세스의 실시예들에 대하여 주목한다.
도 5a 내지 도 5ttt는 일부 실시예들에 따른 소프트 키보드를 처리하기 위한 예시적 사용자 인터페이스를 나타낸다. 이들 도면들의 사용자 인터페이스는, 도 6a 및 도 6b, 도 7a 및 7b, 도 8a 및 8b, 도 9, 도 10a 및 10b, 도 11a 내지 11d, 도 12a 및 12b, 도 13a 및 13b, 및 도 14의 프로세스들을 포함한, 이하의 프로세스들을 설명하기 위해 이용된다.
도 5a는 장치(예를 들어, 장치(100))의 터치-감지 디스플레이(112) 상에 디스플레이되는 사용자 인터페이스(UI)(5000A)를 도시한다. UI(5000A)는 장치(100) 상의 애플리케이션(예를 들어, 노트 애플리케이션, 웹 브라우저 애플리케이션 등)에서의 사용자 인터페이스일 수도 있다. UI(5000A)는 텍스트 기입 영역(5002)을 포함한다. 커서(5004) 및 입력 텍스트(5006)가 텍스트 기입 영역(5002)에 디스플레이된다.
비분할 소프트 키보드(5008)가 디스플레이(112) 상에 디스플레이된다. 비분할 소프트 키보드(5008)의 키들은 2개 이상의 별개의 키보드 부분으로 분할되지 않는다. 일부 실시예들에서, 비분할 소프트 키보드(5008)는 키보드 분할키(5012)를 포함한다. 일부 실시예들에서, 키보드 분할키(5012)는, 키보드 분할키(5012)가 분할 소프트 키보드를 포함하는 통합 입력 영역으로 전환하는 데 이용될 수 있음을 나타내는 아이콘이나 기타의 그래픽 표시(예를 들어, 2개의 반쪽부가 분할되어 떨어져 이동하는 모습을 보여주는 아이콘이나 그래픽)를 도시한다.
도 5a는, 검출시에 그에 응답하여 비분할 소프트 키보드(5008)의 분할을 활성화하는 예시적인 제스처를 도시한다. 제스처(5010)는 비분할 소프트 키보드(5008) 상에 수행되는 2-손가락 디핀치(de-pinch) 제스처이다. 제스처(5010)는, 디스플레이(112) 상에서 각각 방향(5011-A 및 5011-B)으로 서로 멀어지는 손가락 접촉(5010-A 및 5010-B)을 포함한다. 반면, 제스처(5014)는 키보드 분할키(5012) 상의 탭 제스처이다.
디스플레이(112) 상의 제스처(5010 또는 5014) 중 어느 하나의 검출에 응답하여, 장치(100)는 비분할 소프트 키보드(5008)(도 5a)를 통합 입력 영역(5016)(도 5c)으로 변경한다. 일부 실시예들에서, 비분할 소프트 키보드(5008)로부터 통합 입력 영역(5016)으로의 천이를 나타내는 애니메이션이 디스플레이(112) 상에 디스플레이된다. 예를 들어, 천이 애니메이션은 비분할 소프트 키보드(5008)가 반쪽으로 갈라지고 반쪽부들 사이에 중앙 영역(5016-C)이 나타나며, 반쪽부들이 방향(5017-A 및 5017-B)(도 5b)으로 서로 멀어지는 것을 보여줄 수도 있다. 반쪽부들은 분할 키보드 부분(5016-A 및 5016-B)(도 5b)이 되고, 비분할 소프트 키보드(5008)의 키들은 반쪽부들간에 분할된다. 일부 실시예들에서, 일부 키들은 통합 입력 영역(5016)의 좌측 및 우측 부분(5016-A 및 5016-B) 양쪽 모두에 포함된다. 도 5b는 비분할 소프트 키보드(5008)로부터 통합 입력 영역(5016)으로의 천이 애니메이션의 한 순간에서의 사용자 인터페이스(5000B)를 도시한다. 비분할 키보드(5008)였던 것이 통합 입력 영역(5016)으로 천이되고, 비분할 소프트 키보드(5008)의 키들이 2개의 대향 부분으로 분할된다. 천이 애니메이션의 완료시에, 도 5c에 도시된 바와 같이, 통합 입력 영역(5016)이 디스플레이된다.
도 5c는 사용자 인터페이스(5000C)를 도시하며, 여기서 통합 입력 영역(5016)은 천이 애니메이션의 완료 후에 디스플레이된다. 통합 입력 영역(5016)은, 좌측 분할 키보드 부분(5016-A), 우측 분할 키보드 부분(5016-B), 및 분할 키보드 부분들(5016-A 및 5016-B) 사이의 중앙 영역(5016-C)을 포함한다. 분할 키보드 부분(5016-A 및 5016-B) 및 중앙 영역(5016-C)은 통합 입력 영역(5016)을 형성한다. 일부 실시예들에서, 통합 입력 영역(5016)은, 키보드 분할키(5012)를 대체하여 키보드 비분할키(5018)를 포함한다. 일부 실시예들에서, 양쪽 분할 키보드 부분(5016-A 및 5016-B)에는 문자키가 포함된다. 예를 들어, "G"키(5019)는 양쪽 부분(5016-A 및 5016-B)에 포함된다. 일부 실시예들에서는, 비분할 소프트 키보드(5008)의 일부 키들은 통합 입력 영역(5016)에서 디스플레이되지 않는다. 예를 들어, 비분할 소프트 키보드(5008)의 키보드 숨김 키(5009)(도 5a)는 통합 입력 영역(5016)에서 디스플레이되지 않는다.
일부 실시예들에서, 중앙 영역(5016-C)은 복제 커서(5020) 및 복제 입력 텍스트(5022)를 디스플레이한다. 복제 커서(5020) 및 복제 입력 텍스트(5022)는, 각각, 커서(5004)와 입력 텍스트(5006)의 적어도 일부를 미러링한다. 임의의 순간에 중앙 영역(5016-C)에서 복제 입력 텍스트(5022)로서 나타나는 입력 텍스트(5006)의 부분은, 통상, 커서(5004)에 바로 근접해 있는 입력 텍스트(5006)의 부분이다. 일부 실시예들에서, 복제 커서(5020) 및 복제 입력 텍스트(5006)는 각각 커서(5004) 및 입력 텍스트(5006)보다 큰 크기로 디스플레이된다. 일부 다른 실시예들에서는, 도 5k에 도시된 바와 같이, 중앙 영역(5016)은 비어 있고, 텍스트 기입 영역(5002)은 중앙 영역(5016-C)을 통해 볼 수 있다.
도 5d는 사용자 인터페이스(5000D)를 도시하며, 여기서 제스처(5026)가 디스플레이(112) 상에서 검출된다. 제스처(5026)는 좌측 분할 키보드 부분(5016-A)의 "T" 키(5024) 상에서 검출된다. "T" 키(5024) 상에서의 제스처(5026)의 검출에 응답하여, "T" 키(5024)가 작동되고 "t" 문자가 입력 텍스트(5006) 내에 입력된다. 중앙 영역(5016-C)의 복제 입력 텍스트(5022)도, 입력되고 있는 "t" 문자를 표시하여, 입력 텍스트(5006) 내로의 "t" 문자의 입력을 미러링한다.
도 5e는, 검출시에 그에 응답하여 통합 입력 영역(5016) 내의 분할 소프트 키보드의 비분할을 활성화하는 제스처를 보여주는 사용자 인터페이스(5000E)를 도시한다. 제스처(5028)는 통합 입력 영역(5016) 상에 수행되는 2-손가락 핀치(pinch) 제스처이다. 제스처(5028)는, 디스플레이(112) 상에서 각각 방향(5030-A 및 5030-B)로 서로를 향하여 이동하는 손가락 접촉(5028-A 및 5028-B)을 포함한다. 반면, 제스처(5032)는 키보드 비분할키(5018) 상의 탭 제스처이다.
디스플레이(112) 상의 제스처(5028 또는 5032) 중 어느 하나의 검출에 응답하여, 장치(100)는 통합 입력 영역(5016)을 비분할 소프트 키보드(5008)로 변경한다. 일부 실시예들에서, 통합 입력 영역(5016)으로부터 비분할 소프트 키보드(5008)로의 천이를 나타내는 애니메이션이 디스플레이(112) 상에 디스플레이된다. 예를 들어, 천이 애니메이션은, 분할 키보드 부분(5016-A 및 5016-B)이 서로 병합되며 중앙 영역(5016-C)이 크기가 줄어들고 결국은 디스플레이되지 않는 것을 보여줄 수 있다. 도 5f는 천이 애니메이션의 한 시점에서의 사용자 인터페이스(5000F)를 도시한다. 통합 입력 영역 부분(5016-A 및 5016-B)은 방향(5034-A 및 5034-B)으로 서로 병합되고, 중앙 영역(5016-C)은 지속적으로 크기가 줄어든다. 천이 애니메이션의 완료시에, 도 5g에 도시된 바와 같이, 키보드 분할키(5012)를 포함하는 비분할 소프트 키보드(5008)가 UI(5000G)에 디스플레이된다.
도 5h는 디스플레이(112) 상에 디스플레이되는 사용자 인터페이스(5000H)를 도시한다. 탭 제스처(5038)가 어느 시점에서 비분할 소프트 키보드(5008)의 "T" 키(5036) 상에서 검출된다. 이에 응답하여, "T" 키(5036)가 작동되고; 도 5i에 도시된 바와 같이, UI(5000I)에 디스플레이된 입력 텍스트(5006) 내에 "t" 문자가 입력된다.
도 5i는 제스처(5038)의 검출 시간 후의 시간에서 디스플레이(112) 상에서 검출된 제스처(5010)를 도시한다. 일부 실시예에서, 제스처(5010)의 검출에 응답하여 통합 입력 영역(5016)이 비분할 소프트 키보드(5008) 대신에 디스플레이될지의 여부는 제스처(5038)가 검출되는 시간과 제스처(5010)가 검출되는 시간에 의존한다. 만일 제스처(5038)가 검출되는 시간과 제스처(5010)가 검출되는 시간 사이의 기간이 미리 정의된 기간(예를 들어, 0.3, 0.5, 또는 1.0초)을 초과하면, 도 5k에 도시된 바와 같이, 통합 입력 영역(5016)이 UI(5000K)에 디스플레이된다. 일부 실시예들에서는, 도 5j에 도시된 바와 같이, UI(5000J)에 천이 애니메이션이 디스플레이된다. 도 5j는 도 5b와 유사하므로, 도 5j의 상세한 설명은 간소화를 위해 생략되었다. 제스처(5038)가 검출되는 시간과 제스처(5010)가 검출되는 시간 사이의 기간이 미리 정의된 기간을 초과하지 않는다면, 비분할 소프트 키보드(5008)의 디스플레이가 유지된다. 이러한 시간 임계치의 이용은, 사용자가 비분할 키보드를 이용하여 타이핑하고 있을 때 비분할 소프트 키보드(5008)의 통합 입력 영역(5016)으로의 우발적 변환을 방지한다.
도 5l는 디스플레이(112) 상에 디스플레이되는 사용자 인터페이스(5000L)를 도시한다. 사용자 인터페이스(5000L)는 장치(100) 상의 애플리케이션(예를 들어, 노트 애플리케이션, 웹 브라우저 애플리케이션 등)에서의 사용자 인터페이스일 수도 있다. 사용자 인터페이스(5000L)는 텍스트 기입 영역(5002) 및 통합 입력 영역(5039)을 포함한다. 통합 입력 영역(5039)은 분할 키보드 부분(5039-A 및 5039-B)과 중앙 영역(5039-C)을 포함한다. 일부 실시예들에서, 통합 입력 영역(5039)은 통합 입력 영역(5016)이고, 복제 입력 텍스트 및 복제 커서는 중앙 영역(5039-C)에 디스플레이된다.
일부 실시예들에서, 통합 입력 영역(5039)은 제스처(예를 들어, 드래깅 제스처)에 응답하여 디스플레이(112) 상의 상이한 장소로 이동될 수 있다. 도 5l에서, 2개의 제스처가 도시되어 있다; 제스처(5040) 및 제스처(5044). 제스처(5040)는, 손가락 접촉 위치(5040-1)로 표시된 바와 같이 손가락 접촉이 중앙 영역(5039-C)에서 시작하여, 위치(5040-2)로 이동하는 드래깅 제스처이다. 제스처(5044)는, 손가락 접촉 위치(5044-1)로 표시된 바와 같이 손가락 접촉이 분할 키보드 부분(5039-B)에서 시작하여, 위치(5044-2)로 이동하는 드래깅 제스처이다.
통합 입력 영역(5039)이 제스처(5040)나 제스처(5044)의 검출에 응답하여 이동할지의 여부는, 각각의 제스처(5040 또는 5044)의 크기, 즉, 제스처에서 손가락 접촉이 이동하는 거리가 각각의 미리 정의된 임계치를 초과하는지의 여부에 달려있다. 임계치의 양은, 검출된 제스처가 중앙 영역(5039)에서 또는 분할 키보드 부분(5039-A 또는 5039-B)에서 시작하는지에 의존한다. 중앙 영역(5039-C)에서 시작하는 제스처의 경우, 임계치(5042)는 제스처의 개시로부터의 미리 정의된 거리이다. 분할 키보드 부분(5039-B 또는 5039-A)에서 시작하는 제스처의 경우, 임계치(5046)는 제스처의 개시로부터의 미리 정의된 거리이다. 임계치(5046)에 대한 거리는 임계치(5042)에 대한 거리보다 길다. 따라서, 통합 입력 영역은, 제스처(5044)의 접촉의 이동에 따라 이동을 개시하기 전에 제스처(5040)의 접촉의 이동에 따라 이동을 개시할 것이다. 거리 임계치는 분할 키보드를 이용한 타이핑 중에 사용자 접촉이 이동할 때 통합 입력 영역의 우발적 이동을 방지하기 위해 (통합 입력 영역의 중앙 부분에 비해) 통합 입력 영역의 분할 키보드 부분에서 더 크다.
일부 실시예들에서, 거리 임계치는 제스처의 수직 거리 성분과 비교된다. 일부 다른 실시예들에서는, 거리 임계치는, 수평 및 수직 성분 양쪽 모두를 포함한 전체의 제스처와 비교되며; 임계치는 제스처의 절대 거리와 비교된다. 따라서, 예를 들어, 제스처(5044)에 대해 대안적 임계치(5046 및 5048)가 도시되어 있다. 임계치(5046)는 제스처(5044)의 수직 성분과 비교된다. 반면, 임계치(5048)는 전체 제스처(5044)와 비교된다.
만일 제스처(5040 또는 5044) 중 어느 하나가 검출되고, 검출된 제스처가 검출된 제스처가 시작된 장소에 따른 각각의 임계치를 초과하면, 도 5m에 도시된 바와 같이, 통합 입력 영역(5039)이 UI(5000M)에서 검출된 제스처의 방향에 따라 수직으로 이동된다. 분할 키보드 부분(5039-A, 5039-B)과 중앙 영역(5039-C)는 하나의 통합된 유닛으로서 함께 수직 방향으로 이동한다. 통합 입력 영역(5039)의 이동은 통상 수직 ―위 또는 아래― 이동으로 제한되는데, 이것은, 통합 입력 영역이 이동될 때, 좌측 및 우측 분할 키보드 부분들이 각각 디스플레이의 좌측 및 우측에 인접하게 유지한다. 또한, 이것은 좌측 및 우측 분할 키보드 부분들 내의 키들이, 2-엄지 타이핑 동안에, 각각, 좌측 및 우측 엄지에 의해 용이하게 닿을 수 있게 한다.
도 5n은, 디스플레이(112) 상에서 제스처가 시작하는 장소에 기초하여 임계치의 양을 나타내는 2개의 차트를 나타낸다. 차트(5050)는 일부 실시예들에 따른 임계치의 양을 나타낸다. 차트(5050)은 디스플레이(112)의 폭을 따른 위치에 해당하는 x축과 임계치의 크기에 해당하는 y축을 가지며, x축의 끝들은 디스플레이(112)의 좌측 에지 및 우측 에지를 나타낸다. 라인(5052)은 디스플레이(112)의 중심축을 마킹하는 라인이다. 라인들(5054-A 및 5054-B) 사이의 간격(5055)은 중앙 영역(5039-C)의 폭을 나타낸다. 간격(5055) 바깥의 영역은 분할 키보드 부분(5039-A 및 5039-B)의 폭을 나타낸다. 제1 값은, 중앙 영역(5039-C)에서 시작하는 제스처에 대한 임계치(5056-B)를 위해 정의된다. 임계치(5056-B)는 중앙 영역(5039-C)의 폭에 대해 일정하다. 제2 값은, 분할 키보드 부분(5039-A 또는 5039-B) 중 어느 하나에서 시작하는 제스처에 대한 임계치(5056-A)를 위해 정의된다. 임계치(5056-A)는 분할 키보드 부분(5039-A 또는 5039-B)의 폭에 대해 일정하다.
차트(5058)는 일부 대안적 실시예들에 따른 임계치의 양을 나타낸다. 차트(5058)은 디스플레이(112)의 폭을 따른 위치에 해당하는 x축과 임계치의 크기에 해당하는 y축을 가지며, x축의 끝들은 디스플레이(112)의 좌측 에지 및 우측 에지를 나타낸다. 라인들(5054-A 및 5054-B) 사이의 간격(5055)은 중앙 영역(5039-C)의 폭을 나타낸다. 간격(5055) 바깥의 영역은 분할 키보드 부분(5039-A 및 5039-B)의 폭을 나타낸다. 차트(5058)는, 중심 라인(5052)에서 특정 양이 되고 중심 라인(5052)으로부터의 거리에 따라 그 양으로부터 선형적으로 증가하도록 정의된 임계치 양(5060-A 및 5060-B)을 나타낸다. 어느 하나의 차트(5050 또는 5058) 하에서, 중앙 영역(5039-C) 내에서의 임계치는 분할 키보드 영역(5039-A 또는 5039-B)에서의 임계치보다 낮다. 중앙 영역(5039-C)에서는, (통합 입력 영역(5039)을 이동시키기 위한) 드래깅 제스처와 (문자를 입력하기 위한) 키 작동 제스처를 혼동할 가능성이 적기 때문에 거리 임계치는 더 낮다.
도 5o는 UI(5000O)를 도시한다. UI(5000O)는 디스플레이(112) 상에 디스플레이되는 높이(5064)를 갖는 애플리케이션 콘텐츠 영역(5062)을 포함한다. UI(5000O)는 또한, 디스플레이(112) 상의 하단에 도킹된, 높이(5065)를 갖는 통합 입력 영역(5039)을 포함한다. 높이(5064)와 높이(5065)의 합은 디스플레이(112)의 높이(5066)와 동일하다(또는 실질적으로, 예를 들어, 10 픽셀 이내에서 동일하다). 디스플레이(112) 상에서 제스처(5068)가 검출된다. 제스처(5068)는, 손가락 접촉이 디스플레이(112) 상에서 위치(5068-1)로부터 위치(5068-2)로 이동하는 것을 포함한다.
제스처(5068)의 검출에 응답하여, 통합 입력 영역(5039)은 언도킹되고, 도 5p에 도시된 바와 같이, UI(5000P)에서 제스처(5068)의 방향에 따라 수직으로 이동한다. 도 5p에서 통합 입력 영역(5039)는 애플리케이션 콘텐츠 영역(5062) 위에 오버레이로서 디스플레이된다. 또한 제스처(5068)의 검출에 응답하여, 애플리케이션 콘텐츠 영역(5062)은 크기가 증가하여 높이(5066)를 점유한다. 크기 증가의 결과로서, 스크롤링 없이는 UI(5000O)에서 이전에 볼 수 없었던 애플리케이션 콘텐츠 영역(5062)의 콘텐츠가 UI(5000P)에서는 표시될 수 있다. 예를 들어, 인스턴트 메시징(IM) 필드(5067)는 스크롤링 없이도 UI(5000P)에 표시될 수 있다. 따라서, 키보드를 갖는 입력 영역이 디스플레이의 하부로부터 "언도킹"되면, 애플리케이션 콘텐츠 영역을 디스플레이하기 위해 더 많은 디스플레이 영역이 이용되며 입력 영역은 애플리케이션 콘텐츠 영역 위에서 "떠 다닌다(float)".
도 5q는 디스플레이(112) 상에 디스플레이되는 UI(5000Q)를 도시한다. UI(5000Q)는 텍스트 기입 영역(5002) 및 분할 소프트 키보드(5069)를 포함한다. 일부 실시예들에서, 분할 소프트 키보드(5069)는 통합 입력 영역(5016 또는 5039)의 일부이다. 커서(5004) 및 입력 텍스트(5006)가 텍스트 기입 영역(5002)에 디스플레이된다. 분할 키보드(5069)는 좌측 분할 키보드 부분(5069-A)과 우측 분할 키보드 부분(5069-B)을 포함한다. 좌측 분할 키보드 부분(5069-A)에서, 최우측 문자 키들은 "T" 키(5070), "F" 키(5072), 및 "V" 키(5074)를 포함한다. 우측 분할 키보드 부분(5039-B)에서, 최좌측 문자 키들은 "Y" 키(5076), "G" 키(5078), 및 "B" 키(5080)를 포함한다.
좌측 분할 키보드 부분(5069-A)의 "T" 키(5070), "F" 키(5072), 및 "V" 키(5074)의 우측에는 각각 디스플레이되지 않은 키 작동 영역(5082, 5084, 및 5086)이 있다. 작동 영역(5082)은 "Y" 키(5076)에 대응한다. 작동 영역(5084)은 "G" 키(5078)에 대응한다. 작동 영역(5086)은 "B" 키(5080)에 대응한다. 디스플레이되지 않은 키 작동 영역들은 통상 대응하는 키와 동일한 크기이거나 약간 더 크다(예를 들어, 최대 10% 더 크다). 도면에서 작동 영역(5082, 5084, 및 5086) 내의 빗금들은 이들 작동 영역들이 사용자에게 디스플레이되지 않는 반면, 대응하는 키들이 디스플레이된다는 것을 나타내는 데 사용된다.
"Y" 키(5076), "G" 키(5078), 및 "B" 키(5080)의 좌측에는 각각 디스플레이되지 않은 키 작동 영역(5088, 5090, 및 5092)이 있다. 작동 영역(5088)은 "T" 키(5070)에 대응한다. 작동 영역(5090)은 "F" 키(5072)에 대응한다. 작동 영역(5092)은 "V" 키(5074)에 대응한다. 디스플레이되지 않은 키 작동 영역들은 통상 대응하는 키와 동일한 크기이거나 약간 더 크다(예를 들어, 최대 10% 더 크다). 도면에서 작동 영역(5088, 5090, 및 5092) 내의 빗금들은 이들 작동 영역들이 사용자에게 디스플레이되지 않는 반면, 대응하는 키들이 디스플레이된다는 것을 나타내는 데 사용된다.
도 5q는 또한, 우측 분할 키보드 부분(5069-B)의 "O" 키(5094) 상에서 검출된 제스처(5096)(예를 들어, 탭 제스처)를 도시한다. 제스처(5096)의 검출에 응답하여, 도 5r에 도시된 바와 같이, UI(5000R)의 입력 텍스트(5006)에는 문자 "o"가 입력된다.
도 5r은 또한, 제스처(5096)의 검출에 후속하여 키 작동 영역(5086) 상에서 검출된 제스처(5098)를 도시한다. 일부 실시예들에서, 제스처(5098)의 검출에 응답하여, 키 작동 영역(5086)이 "B" 키(5080)에 대응하기 때문에, 도 5s에 도시된 바와 같이, UI(5000S)의 입력 텍스트(5006)에는 문자 "b"가 입력된다.
일부 다른 실시예들에서는, 제스처(5096)의 검출 시간과 제스처(5098)의 검출 시간 사이의 기간이 미리 정의된 기간보다 작다면 제스처(5098)의 검출에 응답하여 입력 텍스트(5006)에는 문자 "b"가 입력된다. 만일 그 기간이 미리 정의된 기간을 초과한다면, 문자 "b"의 입력은 버려지고; 제스처(5098)는 무시된다.
도 5t는 UI(5000T)를 도시하고, 제스처(5100)가 키 작동 영역(5088) 상에서 검출된 것을 나타낸다. 제스처(5100)의 검출에 응답하여, 키 작동 영역(5088)이 "T" 키(5070)에 대응하기 때문에, 도 5u에 도시된 바와 같이, UI(5000U)의 입력 텍스트(5006)에는 문자 "t"가 입력된다.
도 5v는 UI(5000V)를 도시한다. UI(5000V)는 텍스트 기입 영역(5002) 및 통합 입력 영역(5016)을 포함한다. 통합 입력 영역(5016)은 분할 키보드 부분(5016-A)(좌측 부분) 및 분할 키보드 부분(5016-B)(우측 부분)과 중앙 영역(5016-C)을 포함한다. 커서(5004) 및 입력 텍스트(5006)가 또한 텍스트 기입 영역(5002)에 디스플레이된다. 커서(5004) 및 입력 텍스트(5006)가 중앙 영역(5016-C)에서 각각 복제 커서(5020) 및 복제 입력 텍스트(5022)로서 미러링된다. 일부 실시예들에서, 복제 커서(5020) 및 복제 입력 텍스트(5022)는 각각 커서(5004) 및 입력 텍스트(5006)보다 큰 크기로 디스플레이된다.
도 5v는 또한, 좌측 분할 키보드 부분(5016-A)의 "T" 키(5024) 상에서 검출된 제스처(5102)(예를 들어, 탭 제스처)를 도시한다. 제스처(5102)의 검출에 응답하여, 도 5w에 도시된 바와 같이, UI(5000W)의 입력 텍스트(5006)에는 문자 "t"가 입력된다. 복제 입력 텍스트(5022)도 역시 새로이 입력된 문자 "t"를 나타내기 때문에, 새로이 입력된 문자 "t"를 포함한 입력 텍스트(5006)는 중앙 영역(5016-C)에서 미러링된다.
도 5x는 복제 커서(5020)가 복제 입력 텍스트(5022)의 끝에 위치해 있는 동안에(미러링 커서(5004)는 입력 텍스트(5006)의 끝에 위치함) 중앙 영역(5016-C) 내의 복제 커서(5020) 상에서 제스처(5102)가 검출되는 UI(5000X)를 나타낸다. 제스처(5102)는, 손가락 접촉이 방향(5103)으로 이동되는 드래깅 제스처이다. 복제 커서(5020) 상에서의 제스처(5102)의 검출에 응답하여, 도 5y에 도시된 바와 같이, 커서(5004)는 UI(5000Y)의 방향(5103)을 따라 입력 텍스트(5006)에서 상이한 위치로 이동된다. 커서(5004)가 입력 텍스트(5006)에 상대적인 것과 마찬가지로 복제 커서(5020)가 복제 입력 텍스트(5022)에 상대적인 위치에 있도록 복제 입력 텍스트(5022)가 이동되므로, 커서(5004)의 이동의 결과는 중앙 영역(5016-C)에서 미러링된다. 일부 실시예들에서, 복제 커서(5020)는 중앙 영역(5016-C) 내에서 정지된 채로 유지되고, 복제 입력 텍스트(5022)에 대한 그의 상대적인 위치는, 도 5y에 도시된 바와 같이, 복제 입력 텍스트(5022)를 전진 또는 후퇴시킴으로써 변한다.
도 5z는 UI(5000Z)를 도시한다. 텍스트 편집 동작에 대응하는 편집 제어 객체(5104)는 UI(5000Z)에서 입력 텍스트(5006) 부근에 디스플레이된다. 편집 제어 객체(5104)는, 작동시 입력 텍스트(5006) 상에서 수행되는 텍스트 붙여넣기 동작에 대응한다. 편집 제어 객체(5104)에 대응하는 복제 편집 제어 객체(5106)는 중앙 영역(5016-C)에서 복제 입력 텍스트(5022) 부근에 디스플레이된다. 제스처(5108)(예를 들어, 탭 제스처)가 복제 편집 제어 객체(5106) 상에서 검출된다.
복제 편집 제어 객체(5106) 상에서의 제스처(5108)의 검출에 응답하여, 도 5aa에 도시된 바와 같이, UI(5000AA)에서 편집 제어 객체(5104)에 대응하는 텍스트 붙여넣기 동작이 활성화된다. 텍스트 "ahead"가 입력 텍스트(5006)에 붙여넣기 된다. 붙여넣기된 텍스트 "ahead"를 또한 포함하도록 복제 텍스트(5022)가 갱신되므로, 텍스트 붙여넣기는 중앙 영역(5016-C)에서 미러링된다.
도 5bb는 UI(5000BB)를 도시한다. UI(5000BB)는 텍스트 기입 영역(5002)에서 디스플레이된 폼(form, 5110)을 포함한다. 폼(5110)은 하나 이상의 텍스트 기입 필드(5114)와 하나 이상의 체크박스(5112)를 포함하며, 각각의 체크박스(5112)는 폼(5110) 내의 옵션과 연관된다. 예를 들어, 폼(5110) 내의 체크박스(5112-A)는 "Vegetarian" 옵션과 연관된다. 복제 체크박스(5116) 및 대응하는 옵션은 체크박스(5112) 및 대응하는 옵션에 미러링하며, 중앙 영역(5016-C)에 디스플레이된다. 예를 들어, 복제 체크박스(5116-A)는 체크박스(5112-A)에 대응하고, 복제 체크박스(5116-B)는 체크박스(5112-B)에 대응하며, 기타 등등이다. 일부 실시예들에서, 복제 체크박스(5116)와 대응하는 옵션은 그들의 대응하는 체크박스(5112)보다 큰 크기로 디스플레이된다. 제스처(5118)(예를 들어, 탭 제스처)가, 체크박스(5112-A)와 같이, 미선택인(즉, 체크되지 않은) 복제 체크박스(5116-A) 상에서 검출된다.
복제 체크박스(5116-A) 상에서의 제스처(5118)의 검출에 응답하여, 도 5cc에 도시된 바와 같이, UI(5000CC)에서 체크박스(5112-A)가 선택된다. 복제 체크박스(5116-A)가 또한 선택되어, 체크박스(5112-A)의 선택을 미러링한다.
도 5dd는 UI(5000DD)를 도시한다. UI(5000DD)는 복제 커서(5020) 및 복제 입력 텍스트(5022)로부터 떨어진 중앙 영역(5016-c)에서 검출된 제스처(5120)를 도시한다. 일부 실시예들에서, 제스처(5120)는 더블 탭 제스처 또는 제자리에 유지되는 손가락 접촉이다. 중앙 영역(5016-C)에서의 제스처(5120)의 검출에 응답하여, 도 5ee에 도시된 바와 같이, UI(5000EE)에 팝업 메뉴(5122)가 디스플레이된다. 복제 메뉴(5124)가 중앙 영역(5016-C)에 디스플레이된다. 복제 메뉴(5124)에서의 옵션의 선택은 팝업 메뉴(5122)의 대응하는 옵션을 선택하는 것과 동일한 효과를 가진다. (도시되지 않은) 다른 실시예들에서, 제스처(5120)의 검출에 응답하여, 5122의 동시 디스플레이 없이 메뉴(5124)가 중앙 영역(5016-C)에 디스플레이되는데; 즉, 팝업 메뉴는 중앙 영역(5016-C)에만 디스플레이된다.
도 5ff는 UI(5000FF)를 도시한다. UI(5000FF)는, 중앙 영역(5016-C) 내에서 이루어진 하나 이상의 손가락 스트로크(5128)를 이용하여 행한 수기(handwriting)(5126)를 포함한다. 수기(5126)는 한자(Chinese character)를 닮은 것으로 인식되며, 하나 이상의 후보 문자(미도시)가 중앙 영역(5016-C)에 디스플레이될 수 있다. 후보 문자의 선택에 응답하여, 도 5gg에 도시된 바와 같이, UI(5000GG)의 입력 텍스트(5006)에는 선택된 후보 문자가 입력된다. UI(5000GG)에서, 문자 "中"이 입력 텍스트(5006)에 입력된다. 일부 실시예들에서, 복제 입력 텍스트(5022)도 입력중인 문자 "中"을 보여준다.
도 5hh는 UI(5000HH)를 도시한다. UI(5000hh)는 텍스트 기입 영역(5002)내의 커서(5004), 및 중앙 영역(5016-C)에서 하나 이상의 손가락 스트로크(5132)를 이용하여 작성한 도안(5130)을 포함한다. 도안(5130)의 완료 후에, 도 5ii에 도시된 바와 같이, 도안(5130)에 대응하는 도안(5133)이 UI(5000II)의 텍스트 기입 영역(5002) 내에 입력된다.
도 5jj는 UI(5000JJ)를 도시한다. UI(5000JJ)는 텍스트 기입 영역(5002)에 디스플레이된 입력 텍스트(5006)와 커서(5004)를 포함한다. 입력 텍스트(5006)에 대해 제안 단어(5134)가 디스플레이된다. 제안 단어(5134)에 대응하는 복제 제안 단어(5136)가 중앙 영역(5016-C)에서 복제 입력 텍스트(5022) 부근에 디스플레이된다. 제스처(5138)(예를 들어, 탭 제스처)가, 복제 제안된 단어(5136)를 동반하는 (제안 단어(5134)를 동반하는 X-아이콘(5135)에 대응하는) X-아이콘(5137) 상에서 검출된다.
X-아이콘(5137) 상의 제스처(5138)의 검출에 응답하여, 제안 단어(5134)가 거부되고, 도 5kk에 도시된 바와 같이, 입력 텍스트(5006)는 UI(5000KK)에서와 같이 유지된다.
도 5ll은 UI(5000ll)를 도시한다. UI(5000ll)는 텍스트 기입 영역(5002)에 디스플레이된 입력 텍스트(5006)와 커서(5004)를 포함한다. 입력 텍스트(5006)로의 입력에 이용가능한 하나 이상의 이모티콘(emoticon, 5140)이 디스플레이된다. 이모티콘(5140)에 대응하는 복제 이모티콘(5142)이 중앙 영역(5016-C)에서 복제 입력 텍스트(5022) 부근에 디스플레이된다. 제스처(5144)(예를 들어, 탭 제스처)가, 이모티콘(5140-A)에 대응하는 복제 이모티콘(5142-A) 상에서 검출된다.
복제 이모티콘(5142-A) 상에서의 제스처(5144)의 검출에 응답하여, 도 5mm에 도시된 바와 같이, UI(5000MM)의 입력 텍스트(5006) 내에 이모티콘(5140-A)이 입력된다. 복제 이모티콘(5142-A)이 복제 입력 텍스트(5022) 내에 입력될 때, 변경된 텍스트 기입(5006)이 중앙 영역(5016-C)에서 미러링된다. (도시되지 않은) 다른 실시예들에서, 이모티콘(5140)의 동시 디스플레이없이, 이모티콘(5142)이 중앙 영역(5016-C)에 디스플레이되는데; 즉, 입력에 이용가능한 이모티콘들이 중앙 영역(5016-C)에서만 디스플레이된다.
도 5nn은, 텍스트 기입 영역(5002)에 디스플레이된 입력 텍스트(5006)와 커서(5004)를 포함하는 UI(5000NN)을 나타낸다. 입력 텍스트(5006) 내의 입력에 이용가능한 하나 이상의 유니코드 문자(5146)가 디스플레이된다. 유니코드 문자(5146)에 대응하는 복제 유니코드 문자(5148)가 중앙 영역(5016-C)에서 복제 입력 텍스트(5022) 부근에 디스플레이된다. 제스처(5149)(예를 들어, 탭 제스처)가, 유니코드 문자(5146-A)에 대응하는 복제 유니코드 문자(5148-A) 상에서 검출된다.
복제 유니코드 문자(5148-A) 상에서의 제스처(5149)의 검출에 응답하여, 도 5oo에 도시된 바와 같이, UI(5000OO)의 입력 텍스트(5006) 내에 유니코드 문자(5146-A)가 입력된다. 복제 입력 텍스트(5022)도 복제 유니코드 문자(5148-A)를 포함할 때, 변경된 텍스트 기입(5006)이 중앙 영역(5016-C)에서 미러링된다. (도시되지 않은) 다른 실시예들에서, 유니코드 문자(5146)의 동시 디스플레이없이, 유니코드 문자(5148)가 중앙 영역(5016-C)에 디스플레이되는데; 즉, 입력에 이용가능한 유니코드 문자들이 중앙 영역(5016-C)에서만 디스플레이된다.
도 5pp는, 텍스트 기입 영역(5002)에 디스플레이된 입력 텍스트(5006)와 커서(5004)를 포함하는 UI(5000PP)를 타나낸다. 커서(5004) 및 입력 텍스트(5006)의 적어도 일부가 중앙 영역(5016-C)에서 각각 복제 커서(5020) 및 복제 입력 텍스트(5022)로서 미러링된다. 제스처(5150)가 중앙 영역(5016-C)에서 검출된다. 제스처(5150)는, 손가락 접촉이 위치(5150-A)로부터 위치(5150-B)로, 복제 입력 텍스트(5022)를 넘어 이동하는 것을 포함한다.
복제 입력 텍스트(5022) 위의 제스처(5150)의 검출에 응답하여, 복제 입력 텍스트(5022)가 음영(5154)(또는 기타의 강조)과 함께 디스플레이되어(도 5qq), 복제 입력 텍스트(5022)가 선택되었음을 나타낸다. 입력 텍스트(5006) 내의 대응하는 텍스트가 마찬가지로 음영(5152)(또는 기타의 강조)과 함께 디스플레이된다.
도 5rr은, 텍스트 기입 영역(5002)에 디스플레이된 입력 텍스트(5006)와 커서(5004)를 포함하는 UI(5000RR)을 나타낸다. 커서(5004) 및 입력 텍스트(5006)가 중앙 영역(5016-C)에서 각각 복제 커서(5020) 및 복제 입력 텍스트(5022)로서 미러링된다. 제스처(5156)(예를 들어, 더블 탭 제스처, 트리플 탭 제스처, 또는 탭 및 홀드 제스처)가 중앙 영역(5016-C)에서 복제 입력 텍스트(5022) 상에서 검출된다. 제스처(5156)는 텍스트 포맷팅 동작(예를 들어, 텍스트를 볼드체(bold)로 하기, 텍스트에 밑줄 긋기, 텍스트를 이탤릭체로 하기 등)과 연관된다.
복제 입력 텍스트(5022) 상의 제스처(5156)의 검출에 응답하여, 도 5ss에 도시된 바와 같이, UI(5000SS)에서 입력 텍스트(5006)의 포맷팅이 변경된다. 입력 텍스트(5006)는 볼드체 텍스트로 변경된다. 복제 입력 텍스트(5022)도 역시 볼드체 텍스트로 변경되어, 입력 텍스트(5006)의 포맷팅에서의 변경을 미러링한다.
도 5tt는 UI(5000TT)를 도시한다. 중앙 영역(5016-C)에 대한 입력 옵션의 메뉴(5158)가 UI(5000TT)에 디스플레이된다. 메뉴(5158)는, 텍스트 포맷팅 동작과 연관된 제스처, 텍스트 편집 동작과 연관된 제스처, 한자 수기, 도면, 이모티콘 등과 같은, 중앙 영역(5016-C)에서 허용가능한 사용자 입력에 대한 옵션을 포함한다. 사용자는, 중앙 영역(5016-C)에서 인에이블되거나 디스에이블되기를 원하는 입력을 메뉴(5158)에서 선택할 수도 있다.
도 5uu는 UI(5000UU)를 도시한다. UI(5000UU)는 애플리케이션 콘텐츠 영역(5160)(예를 들어, 웹 브라우저의 콘텐츠 영역, 워드 프로세싱 애플리케이션의 콘텐츠 영역 등)을 포함한다. 애플리케이션 콘텐츠 영역(5160)에는 하나 이상의 텍스트 기입 영역(5162)(예를 들어, 온라인 폼의 텍스트 필드)가 디스플레이된다. 예를 들어, 애플리케이션 콘텐츠 영역(5160)은, 온라인 폼의 일부인 텍스트 기입 영역(5162-A 내지 5162-F)을 포함한다. 소프트 키보드(5164)도 역시 디스플레이된다. 소프트 키보드(5164)가 비분할 소프트 키보드로서 도시되어 있지만, 일부 실시예에서는, 입력 영역은, 분할 소프트 키보드이거나, 통합 입력 영역(5016 또는 5039)과 같은 분할 키보드를 포함하는 통합 입력 영역이다.
디스플레이(112) 상에서 제스처(5166)가 검출된다. 제스처(5166)는 손가락 접촉이 위치(5166-A)에서 시작하여 위치(5166-B)로 이동하는 것을 포함하는 드래깅 제스처이다. 제스처(5166)의 검출에 응답하여, 도 5vv에 도시된 바와 같이, 소프트 키보드(5164)는 UI(5000VV)에서 제스처(5166)의 방향과 최종 위치(5166-B)에 따라 수직으로 이동한다. 드래그 제스처(5166) 이후에, 소프트 키보드(5164)는 텍스트 기입 영역(5162)을 부분적으로 가릴 수도 있다. 예를 들어, UI(5000VV)에서, 소프트 키보드(5164)는 텍스트 기입 영역(5162-F)을 부분적으로 가린다.
도 5uu는 UI(5000WW)를 도시한다. UI(5000WW)에서, 제스처(5168)가 검출된다. 제스처(5168)는 소프트 키보드(5164) 상의 위치로부터 시작하는 수직 방향의 플릭 제스처이다. 제스처(5168)의 검출에 응답하여, 이동 관성을 포함하는 이동 궤적(5170)이 제스처(5168)에 따라 소프트 키보드(5164)에 부여된다. 예를 들어, 작은 플릭킹 제스처에 응답하여 짧은 궤적이 부여되고, 큰 플릭킹 제스처에 응답하여 긴 궤적이 부여된다. 이동 궤적(5170)은 종료 포인트(5171)를 가진다.
소프트 키보드(5164)는 도 5xx에 도시된 바와 같이 UI(5000XX)에서 이동 궤적(5170)에 따라 관성에 의해 이동하고, 텍스트 기입 영역(5162-F) 아래의 인접 위치에 오게 된다. 소프트 키보드(5164)는 텍스트 기입 영역(5162-F) 바로 아래에서 멈추므로, 텍스트 기입 영역(5162-F)의 어느 것도 소프트 키보드(5164)에 의해 가려지지 않는다. 다르게는 궤적(5170) 및 그 연관된 이동 관성이 소프트 키보드(5164)를 텍스트 기입 영역(516-2F)(도 5ww) 하단 위의 종료 포인트(5171)로 이동시키더라도, 궤적(5170)은 소프트 키보드(5164)가 텍스트 기입 영역(5162-F) 바로 아래에서 멈추도록 조정된다.
도 5yy는 UI(5000YY)를 도시한다. UI(5000YY)에서, 제스처(5172)가 검출된다. 제스처(5172)는 소프트 키보드(5164) 상의 위치로부터 시작하는 수직 방향의 플릭 제스처이며, 제스처(5168)보다 큰 플릭킹 제스처이다. 제스처(5172)의 검출에 응답하여, 이동 관성을 포함하는 이동 궤적(5174)이 제스처(5172)에 따라 소프트 키보드(5164)에 부여된다. 이동 궤적(5174)은 이동 궤적(5170)보다 크며, 종료 포인트(5175)를 가진다.
소프트 키보드(5164)는 도 5zz에 도시된 바와 같이, UI(5000ZZ)에서 이동 궤적(5174)에 따라 관성에 의해 이동하고, 텍스트 기입 영역(5162-A) 아래의 인접 위치에 오게 된다. 소프트 키보드가 텍스트 기입 영역(5162-A) 바로 아래에서 멈추므로, 텍스트 기입 영역(5162-A)의 어느 것도 소프트 키보드(5164)에 의해 가려지지 않는다. 다르게는 궤적(5174) 및 연관된 관성이 소프트 키보드(5164)를 텍스트 기입 영역(5162-A)(도 5yy) 하단 위의 종료 포인트(5175)로 이동시키더라도, 궤적(5174)은 소프트 키보드(5164)가 텍스트 기입 영역(5162-A) 바로 아래에서 멈추도록 조정된다.
일부 실시예들에서, 키보드가 "던져지거나" 또는 "내팽개쳐지면", 터치가 들어 올려질 때 어느 정도의 주목할만한 터치의 속도 성분이 있다면, 키보드는 소정량만큼(예를 들어, 상부나 하부 툴바 높이에 각각 대응하는 양만큼) 디스플레이의 상부나 하부로부터 되튄다. 역으로, 키보드가 디스플레이의 에지로 드래깅된 다음 속도없이 또는 속도가 거의 없이 손가락을 떼면, 키보드는 디스플레이의 에지(미도시)와 같은 높이로 "도킹한다".
도 5aaa는 디스플레이(112) 상에 디스플레이되는 UI(5000aaa)를 도시한다. UI(5000aaa)는, 텍스트 기입 영역(5002)에 디스플레이되는 커서(5004) 및 입력 텍스트(5006)를 갖는 텍스트 기입 영역(5002)을 포함한다. 통합 입력 영역(5039)도 역시, UI(5000AAA)에 디스플레이된다. 통합 입력 영역(5039)은 분할 키보드 부분(5039-A)(좌측 부분) 및 분할 키보드 부분(5039-B)(우측 부분)과 중앙 영역(5039-C)을 포함한다.
디스플레이(112) 상에서 제스처(5176)가 검출된다. 일부 실시예들에서, 제스처(5176)는 2-엄지 탭 제스처로서, 한 엄지는 분할 키보드 부분(5039-A) 위의 위치(5176-A)에 있고, 다른 엄지는 분할 키보드(5039-B) 위의 위치(5176-B)에 있다.
제스처(5176)의 검출에 응답하여, 장치(100)는 (도 5bbb의) UI(5000BBB)의 통합 입력 영역(5039)에 대한 재구성 모드에 진입한다. 장치(100)가 재구성 모드에 있을 때, 제스처(5178)가 디스플레이(112) 상에서 검출된다. 제스처(5178)는 좌측 엄지 접촉이 디스플레이(112)의 좌측 가장자리로 이동하는 것을 포함한다. 제스처(5178)의 검출에 응답하여, 도 5ccc에 도시된 바와 같이, 분할 키보드 부분(5039-A)는 UI(5000CCC)에서 크기(예를 들어, 폭, 높이, 또는 폭과 높이 양쪽 모두)가 줄어들고, 분할 키보드 부분(5039-A)의 키들은 분할 키보드 부분(5039-A)의 크기 축소에 따라 크기가 재조정된다. 일부 실시예들에서, 중앙 영역(5039-C)은 크기가 증가하고, 분할 키보드 부분(5039-B)은 이에 응답하여 동일한 크기를 유지한다. 일부 다른 실시예들에서, 중앙 영역(5039-C)과 분할 키보드 부분(5039-B) 양쪽 모두는 그에 응답하여 크기가 증가한다.
도 5ddd는, 재구성 모드 있는 동안에 디스플레이(112) 상에 검출되는 제스처(5180)를 나타내는 UI(5000ddd)를 도시한다. 제스처(5180)는 좌측 엄지 접촉이 디스플레이(112)의 좌측 가장자리로부터 멀어지는 것을 포함한다. 제스처(5180)의 검출에 응답하여, 도 5eee에 도시된 바와 같이, 분할 키보드 부분(5039-A)는 UI(5000EEE)에서 크기(예를 들어, 폭, 높이, 또는 폭과 높이 양쪽 모두)가 증가되고, 분할 키보드 부분(5039-A)의 키들은 분할 키보드 부분(5039-A)의 크기 증가에 따라 크기가 재조정된다. 일부 실시예들에서, 중앙 영역(5039-C)은 크기가 감소하고, 분할 키보드 부분(5039-B)은 그에 응답하여 동일한 크기를 유지한다. 일부 다른 실시예들에서, 중앙 영역(5039-C)과 분할 키보드 영역(5039-B) 양쪽 모두는 그에 응답하여 크기가 감소한다.
도 5fff는, 재구성 모드 있는 동안에 디스플레이(112) 상에 검출되는 제스처(5182)를 나타내는 UI(5000FFF)를 도시한다. 제스처(5182)는 우측 엄지 접촉이 디스플레이(112)의 우측 가장자리로 이동하는 것을 포함한다. 제스처(5182)의 검출에 응답하여, 도 5ggg에 도시된 바와 같이, 분할 키보드 부분(5039-B)는 UI(5000GGG)에서 크기(예를 들어, 폭, 높이, 또는 폭과 높이 양쪽 모두)가 줄어들고, 분할 키보드 부분(5039-B)의 키들은 분할 키보드 부분(5039-B)의 크기 축소에 따라 크기가 재조정된다. 일부 실시예들에서, 중앙 영역(5039-C)은 크기가 증가하고 분할 키보드 부분(5039-A)은 그에 응답하여 동일한 크기를 유지한다. 일부 다른 실시예들에서, 중앙 영역(5039-C)과 분할 키보드 영역(5039-A) 양쪽 모두는 응답하여 크기가 증가한다.
도 5hhh는, 재구성 모드 있는 동안에 디스플레이(112) 상에 검출되는 제스처(5184)를 나타내는 UI(5000hhh)를 도시한다. 제스처(5184)는 우측 엄지 접촉이 디스플레이(112)의 우측 가장자리로부터 멀어지는 것을 포함한다. 제스처(5184)의 검출에 응답하여, 도 5iii에 도시된 바와 같이, 분할 키보드 부분(5039-B)는 UI(5000III)에서 크기(예를 들어, 폭, 높이, 또는 폭과 높이 양쪽 모두)가 증가하고, 분할 키보드 부분(5039-B)의 키들은 분할 키보드 부분(5039-B)의 크기 축소에 따라 크기가 재조정된다. 일부 실시예들에서, 중앙 영역(5039-C)은 크기가 감소하고, 분할 키보드 부분(5039-A)은 그에 응답하여 동일한 크기를 유지한다. 일부 다른 실시예들에서, 중앙 영역(5039-C)과 분할 키보드 영역(5039-A) 양쪽 모두는 그에 응답하여 크기가 감소한다.
도 5jjj는, 일부 다른 실시예들에서, 재구성 모드 있는 동안에 디스플레이(112) 상에 검출되는 제스처(5186)를 나타내는 UI(5000JJJ)를 도시한다. 제스처(5186)는 좌측 엄지 접촉이 디스플레이(112)의 좌측 가장자리로 이동하는 것을 포함한다. 제스처(5186)의 검출에 응답하여, 도 5kkk에 도시된 바와 같이, 분할 키보드 부분(5039-A 및 5039-B) 양쪽 모두는 UI(5000KKK)에서 크기(예를 들어, 폭, 높이, 또는 폭과 높이 양쪽 모두)가 줄어들고, 분할 키보드 부분(5039-A 및 5039-B)의 키들은 각각 분할 키보드 부분(5039-A 및 5039-B)의 크기 축소에 따라 크기가 재조정된다. 중앙 영역(5039-C)도 역시 결과적으로 크기가 증가한다.
도 5lll은, 일부 다른 실시예들에서, 재구성 모드 있는 동안에 디스플레이(112) 상에 검출되는 제스처(5188)를 나타내는 UI(5000LLL)를 도시한다. 제스처(5188)는 좌측 엄지 접촉이 디스플레이(112)의 좌측 가장자리로부터 멀어지는 것을 포함한다. 제스처(5188)의 검출에 응답하여, 도 5mmm에 도시된 바와 같이, 분할 키보드 부분(5039-A 및 5039-B) 양쪽 모두는 UI(5000MMM)에서 크기(예를 들어, 폭, 높이, 또는 폭과 높이 양쪽 모두)가 증가하고, 분할 키보드 부분(5039-A 및 5039-B)의 키들은 각각 분할 키보드 부분(5039-A 및 5039-B)의 크기 증가에 따라 크기가 재조정된다. 중앙 영역(5039-C)도 역시 결과적으로 크기가 감소한다.
도 5nnn은 UI(5000NNN)를 도시하며, 여기서 제스처(5190)가 디스플레이(112) 상에서 검출된다. 일부 실시예들에서, 제스처(5190)는 2-엄지 탭 제스처로서, 한 엄지는 분할 키보드 부분(5039-A) 위의 위치(5190-A)에 있고, 다른 엄지는 분할 키보드(5039-B) 위의 위치(5190-B)에 있다. 제스처(5190)의 검출에 응답하여, 장치(100)는 통합 입력 영역(5039)에 대한 재구성 모드를 종료한다.
도 5a 및 도 5nnn의 세부사항이 세로 배향의 디스플레이(112)와 관련하여 기술되었지만, 도 5a 내지 도 5nnn의 세부사항은 가로 배향의 디스플레이(예를 들어, 디스플레이(112))에도 유사하게 적용될 수 있다는 것을 이해하여야 한다.
도 5ooo는 장치(100)의 터치-감지 디스플레이(112) 상에 디스플레이되는 UI(5000OOO)를 도시한다. UI(5000OOO)는 장치(100) 상의 애플리케이션(예를 들어, 노트 애플리케이션, 웹 브라우저 애플리케이션 등)에서의 사용자 인터페이스일 수도 있다. UI(5000OOO)는 텍스트 기입 영역(5002)을 포함한다. 커서 및 입력 텍스트가 텍스트 기입 영역(5002)에 디스플레이될 수도 있다. 비분할 소프트 키보드(5008)가 터치-감지 디스플레이(112) 상에서 디스플레이의 하부에 디스플레이된다. 일부 실시예들에서, 비분할 소프트 키보드는 키보드 분할키(5012)를 포함하며, 그 세부사항은 앞서 설명되었으므로, 여기서는 반복하지 않는다.
터치-감지 디스플레이(112) 상에서 제스처(5194)가 검출된다. 제스처(5194)는, 비분할 키보드(5008)에 대응하는 터치-감지 디스플레이(112) 상의 위치로부터 시작하는 드래깅 또는 플릭 제스처이다. 제스처(5194)는 터치-감지 디스플레이(112)의 하단으로부터 멀어지는 방향(5196)으로 이동한다.
디스플레이(112) 상의 제스처(5194)의 검출에 응답하여, 장치(100)는 비분할 소프트 키보드(5008)(도 5ooo)를 분할 키보드(5198)(도 5rrr)로 변경한다. 일부 실시예들에서, 비분할 소프트 키보드(5008)로부터 분할 키보드(5198)로의 천이를 나타내는 애니메이션이 디스플레이(112) 상에 디스플레이된다. 예를 들어, 천이 애니메이션은, 비분할 소프트 키보드(5008)가 방향(5199)으로 디스플레이(112)의 하단으로부터 멀어져 텍스트 기입 영역(5002) 위로 이동하여, 도 5ppp 및 도 5qqq에 도시된 바와 같이, 분할 키보드 부분(5198-A 및 5198-B)으로 분할되는 것을 보여줄 수 있다. 비분할 소프트 키보드(5008)가 부분들(5198-A 및 5198-B)로 분할될 때, 부분들(5198-A 및 5198-B)은 각각 방향(5200-A 및 5200-B)으로 떨어져 이동한다. 일부 실시예들에서, 비분할 키보드(5008)는, 도 5ppp에 도시된 바와 같이, 분할이 개시되기 이전에 디스플레이(112)의 하단으로부터 멀리 이동된다. 천이 애니메이션의 완료시에, 도 5rrr에 도시된 바와 같이, 분할 키보드(5198)가 디스플레이된다.
도 5ppp는, 비분할 키보드(5008)로부터 분할 키보드(5198)로의 천이시의 한 순간을 나타내는 UI(5000PPP)를 도시한다. 비분할 키보드(5008)는, (제스처(5194)의 방향(5196)에 따라) 방향(5199)으로 디스플레이(112)의 하단으로부터 멀리 이동되지만, 분할은 아직 개시되지 않았다.
도 5qqq는, 비분할 키보드(5008)로부터 분할 키보드(5198)로의 천이시, 도 5ppp에 도시된 순간에 후속한, 한 순간을 나타내는 UI(5000QQQ)를 도시한다. 분할 키보드 부분(5198A 및 5198-B)이 디스플레이되고 방향(5199)으로 계속 이동함에 따라, 비분할 키보드(5008)의 분할이 진행된다. 분할 키보드 부분(5198-A 및 5198-B)은 또한, 각각, 방향(5200-A 및 5200-B)으로 서로 멀어진다.
도 5rrr은, 분할 키보드(5198)가 디스플레이된 UI(5000RRR)를 도시한다. 일부 실시예들에서, 분할 키보드(5198)는 또한 키보드 비분할키(5018)를 포함하며, 그 세부사항은 앞서 설명되었으므로, 여기서는 반복하지 않는다. 분할 키보드(5198)에 대응하는 디스플레이(112) 상의 위치로부터 시작하여 방향(5204)으로 이동하는 제스처(5202)가 검출된다. 일부 실시예들에서, 제스처(5202)는 드래깅 또는 플릭 제스처이다.
도 5sss는, 분할 키보드(5198)로부터 비분할 키보드(5008)로의 천이시의 한 순간을 나타내는 UI(5000SSS)를 도시한다. 분할 키보드(5198)는, (제스처(5202)의 방향(5204)에 따라) 방향(5206)으로 디스플레이(112)의 하단쪽으로 멀리 이동되지만, 분할 키보드 부분(5198-A 및 5198-B)의 병합은 아직 개시되지 않았다.
도 5ttt는, 분할 키보드(5198)로부터 비분할 키보드(5008)로의 천이시, 도 5sss에 도시된 순간에 후속한, 한 순간을 나타내는 UI(5000TTT)를 도시한다. 분할 키보드 부분(5198-A 및 5198-B)이 방향(5206)으로 이동할 뿐만 아니라 각각 방향(5208-A 및 5208-B)으로 서로를 향하여 이동함에 따라, 분할 키보드 부분(5198-A 및 5198-B)의 병합이 진행된다. 병합이 완료되면, 도 5ooo에 도시된 바와 같이, 비분할 키보드(5008)가 디스플레이(112)의 하단에 디스플레이된다.
도 6a 및 도 6b는 일부 실시예들에 따라 비분할 키보드를 통합 입력 영역으로 대체하는 방법(600)을 나타내는 흐름도이다. 방법(600)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(600)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(600)은 텍스트 기입를 위해 비분할 키보드를 통합 입력 영역으로 대체하는 직관적인 방법으로 제공한다. 이 방법은, 사용자가 태블릿 컴퓨터로 타이핑하고 있고 (예를 들어, 태블릿 컴퓨터가 딱딱한 표면 상에 놓여 있을시 10 손가락 타이핑을 위한) 비분할 키보드를 이용하는 것으로부터 분할 키보드를 갖는 (예를 들어, 사용자가 나머지 8개 손가락으로 태블릿 컴퓨터를 잡고 있고 2-엄지로 타이핑하기 위한) 통합 입력 영역을 이용하는 것으로 바꾸기를 원할 때 또는 그 반대일 때 특히 유용하다. 이 방법은 소프트 키보드를 조작할 때 사용자에 주는 인지적 부담을 줄임으로써, 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자가 소프트 키보드를 더 빨리 더 효율적으로 처리할 수 있게 하는 것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 디스플레이 상에 제1 텍스트 기입 영역(예를 들어, 애플리케이션 콘텐츠 영역에) 및 비분할 키보드(예를 들어, 분할 키보드의 좌측 및 우측으로부터의 문자 키들을 포함하는 하나의, 통합된, 또는 병합된 키보드)를 동시에 디스플레이한다(602). 도 5a는, 예를 들어, 디스플레이(112) 상에 동시에 디스플레이되고 있는 텍스트 기입 영역(5002) 및 비분할 소프트 키보드(5008)를 도시한다.
장치는 터치-감지 표면 상의 제스처를 검출한다(604). 예를 들어, 도 5a에서, 제스처(5010 또는 5014)가 터치 스크린인 디스플레이(112) 상에 검출된다.
일부 실시예들에서, 제스처는, 디스플레이 상의 비분할 키보드의 위치에 대응하는 터치-감지 표면 상의 위치에서의 다중손가락(즉, 하나보다 많은 손가락) 디핀치 제스처이다(606). 예를 들어, 도 5a에서, 제스처(5010)는 비분할 소프트 키보드(5008) 상의 2-손가락 디핀치 제스처이다. 일부 실시예들에서, 2-손가락 디핀치 제스처는, 터치-감지 표면 상의 대칭적 수평 이동(또는 5°, 10°, 15° 또는 20°와 같은 미리결정된 수평 각도 내에서의 이동)을 요구한다. 대칭적 수평 이동을 요구하는 것은, 하나의 터치만이 이동하는 정박된 디핀치 제스처, 비수평 디핀치 제스처, 및 비분할 키보드를 통합 입력 영역으로 대체할 것을 의도하지 않을 수 있는 기타의 제스처들을 걸러내는 것을 도운다.
일부 실시예들에서, 제스처는, 키보드 선택 아이콘 상의 탭 제스처(예를 들어, 비분할 키보드, 통합 입력 영역, 및 아마도 기타 유형의 키보드 입력 영역 사이에서 토글하는 아이콘 상의 손가락 탭 제스처; 비분할 키보드를 통합 입력 영역으로 대체하는 것을 활성화하는 아이콘 상의 손가락 탭 제스처)이다(608). 예를 들어, 도 5a에서, 제스처(5014)는, 2개의 반쪽부들의 아이콘이 분할되어 이동하는 것을 나타내고 있는 키보드 분할키(5012) 상의 탭 제스처이다.
터치-감지 표면 상의 이 제스처의 검출에 응답하여, 장치는 비분할 키보드를 통합 입력 영역으로 대체한다(610). 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함한다. 예를 들어, 도 5a 내지 도 5c에서, 제스처(5010)의 검출에 응답하여, 비분할 소프트 키보드(5008)는 통합 입력 영역(5016)으로 대체된다. 통합 입력 영역(5016)은, 좌측 분할 키보드 부분(5016-A), 우측 분할 키보드 부분(5016-B), 및 좌측과 우측 분할 키보드 부분들(5016-A 및 5016-B) 사이에 위치한 중앙 영역(5016-C)을 포함한다.
일부 실시예들에서, 통합 입력 영역의 폭은 디스플레이의 폭과 동일(또는 실질적으로 동일, 예를 들어, 90% 또는 95%)하다. 이 폭은, 분할 키보드의 좌측을 사용자의 좌측 엄지에 의해 더욱 접근가능하게 만든다. 마찬가지로, 이 폭은, 분할 키보드의 우측을 사용자의 우측 엄지에 의해 더욱 접근가능하게 만든다.
일부 실시예들에서, 통합 입력 영역은, 예를 들어 통합 입력 영역의 좌측부, 중앙부, 및 우측부에 일반적인 구분되는 음영, 배경색 또는 패턴을 제공하거나 및/또는 통합 입력 영역의 좌측부, 중앙부, 및 우측부 주변에 구분되는 경계선을 제공함으로써, 디스플레이의 다른 사용자 인터페이스 요소들로부터 시각적으로 구분된다.
일부 실시예들에서, 통합 입력 영역은 제2 텍스트 기입 영역을 포함한다(612). 제2 텍스트 기입 영역은, 통상 제1 텍스트 기입 영역의 커서 부근의 영역과 같은 제1 텍스트 기입 영역의 복제된 부분을 디스플레이된다. 예를 들어, 제2 텍스트 기입 영역은, 제1 텍스트 기입 영역의 커서/삽입 포인트의 사본과 이 커서/삽입 포인트에 인접한 사용자에 의해 입력된 가장 최근의 텍스트로부터의 하나 이상의 단어를 포함할 수도 있다. 예를 들어, 통합 입력 영역(5016)은 중앙 영역(5016-C)을 포함한다. 중앙 영역(5016-C)은 복제 입력 텍스트(5022)를 디스플레이하며, 중앙 영역(5016-C)을 제1 텍스트 기입 영역(5002)에 대한 제2 텍스트 기입 영역으로 만든다.
일부 실시예들에서, 제1 텍스트 기입 영역은 제1 크기로 텍스트를 디스플레이하고, 제2 텍스트 기입 영역은 제1 크기보다 큰 제2 크기로 제1 텍스트 기입 영역의 텍스트의 일부를 디스플레이한다(614). 예를 들어, 도 5c에서, 복제 텍스트 기입(5022)은 텍스트 기입 영역(5002)의 입력 텍스트(5006)보다 큰 크기로 중앙 영역(5016-C)에 디스플레이된다.
일부 실시예들에서, 통합 입력 영역을 디스플레이하는 동안, 장치는, 분할 키보드에서의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처(예를 들어, 도 5d에서 "T" 키(5024) 상의 탭 제스처(5026))를 검출한다(616). 분할 키보드에서의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 장치는 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 대응하는 문자를 입력하고 동시에 디스플레이한다(618). 예를 들어, 도 5d에서, 제스처(5026)의 검출에 응답하여, 문자 "t"가 입력 텍스트(5006) 및 복제 입력 텍스트(5022)에 입력된다.
일부 실시예들에서, 비분할 키보드를 통합 입력 영역으로 대체하는 것은, 비분할 키보드를 통합 입력 영역으로 천이시키는 애니메이션을 디스플레이하는 것(620)을 포함한다. 예를 들어, 도 5b는 비분할 소프트 키보드(5008)로부터 통합 입력 영역(5016)으로의 천이 애니메이션의 한 순간을 도시한다.
일부 실시예들에서, 각 문자 키에 대한 천이는 2개 상태들, 즉 비분할(또는 병합된) 상태와 분할 상태 사이의 선형 보간이다. 일부 실시예들에서, 분할 키보드의 좌측부와 분할 키보드의 우측부가 적어도 하나의 공통 문자 키(예를 들어, 도 5c의 "g" 키(5019-A 및 5019-B))를 포함하도록 천이 동안에 적어도 하나의 문자 키가 복제된다. 일부 실시예들에서, 비분할 키보드의 일부 키들은 분할 키보드에서 디스플레이되지 않는다(예를 들어, (도 5a의) 비분할 키보드의 키보드 숨김 키(5009)는 (도 5c의) 분할 키보드에 디스플레이되지 않는다). 일부 실시예들에서, 애니메이트되는 통합 입력 영역으로의 천이 동안에, 분할 키보드에 디스플레이되지 않는 키들은, 천이 동안에 제로 불투명도로 사라져감에 따라 스크린 밖으로 밀려나는 것처럼 보인다.
일부 실시예들에서, 통합 입력 영역을 디스플레이하는 동안, 장치는 터치-감지 표면 상의 제2 제스처(예를 들어, 도 5e의 디스플레이(112) 상의 제스처(5028 또는 5032))를 검출한다(622).
일부 실시예들에서, 제2 제스처는, 디스플레이 상의 통합 입력 영역의 위치에 대응하는 터치-감지 표면 상의 위치에서의 다중손가락(즉, 하나보다 많은 손가락) 핀치 제스처이다(624). 예를 들어, 도 5e에서, 제스처(5028)는 디스플레이(112) 상의 2-손가락 핀치 제스처이다. 일부 실시예들에서, 2-손가락 핀치 제스처는, 터치-감지 표면 상의 대칭적 수평 이동(또는 5°, 10°, 15° 또는 20°와 같은 미리결정된 수평 각도 내에서의 이동)을 요구한다. 대칭적 수평 이동을 요구하는 것은, 하나의 터치만이 이동하는 정박된 핀치 제스처, 비수평 핀치 제스처, 및 통합 입력 영역을 비분할 키보드로 대체할 것을 의도하지 않을 수 있는 기타의 제스처들을 걸러내는 것을 도운다.
일부 실시예들에서, 제2 제스처는, 키보드 선택 아이콘 상의 탭 제스처(예를 들어, 비분할 키보드, 통합 입력 영역, 및 아마도 기타 유형의 키보드 입력 영역 사이에서 토글하는 아이콘 상의 손가락 탭 제스처; 비분할 키보드를 통합 입력 영역으로 대체하는 것을 활성화하는 아이콘 상의 손가락 탭 제스처)이다(626). 예를 들어, 도 5e에서, 제스처(5032)는, 2개의 반쪽부들의 아이콘이 서로 병합되는 것을 나타내고 있는 키보드 비분할키(5018) 상의 탭 제스처이다.
터치-감지 표면 상의 제2 제스처의 검출에 응답하여, 장치는 통합 입력 영역을 비분할 키보드로 대체한다(628). 예를 들어, 도 5e 내지 도 5g에서, 제스처(5028 또는 5032)에 응답하여, 통합 입력 영역(5016)은 비분할 키보드(5008)로 대체된다.
일부 실시예들에서, 통합 입력 영역을 비분할 키보드로 대체하는 것은 통합 입력 영역을 비분할 키보드로 천이시키는 애니메이션을 디스플레이하는 것(630)을 포함한다. 예를 들어, 도 5f는 통합 입력 영역(5016)으로부터 비분할 소프트 키보드(5008)로의 천이 애니메이션의 한 순간을 도시한다.
일부 실시예들에서, 전자 장치는 휴대 전자 장치(예를 들어, California주 Cupertino시 Apple Inc.의 iPad®과 같은 태블릿 컴퓨터)이다(632). 예를 들어, 장치(100 또는 300)는 휴대 태블릿 컴퓨터일 수도 있다.
일부 실시예들에서, 디스플레이는 터치-감지 표면을 포함하는 터치-감지 디스플레이이다(634). 예를 들어, 디스플레이(112)는 터치 스크린이다.
방법(600)의 세부사항은 이하에서 설명되는 방법들에 적용되며, 간소화를 위해 생략된다.
도 7a 및 도 7b는 일부 실시예들에 따른 키보드 선택 제스처에 응답하는 방법(700)을 나타내는 흐름도이다. 방법(700)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(700)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(700)은, 타이핑 중에 소프트 키보드를 뜻하지 않게 (예를 들어, 비분할 키보드로부터 분할 키보드를 갖는 통합 입력 영역으로, 또는 그 반대로) 변경하는 것을 방지하는 방법을 제공한다. 이 방법은 소프트 키보드를 처리하고 이용할 때 사용자에 주는 인지적 부담을 줄임으로써, 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자가 소프트 키보드를 더 빨리 더 효율적으로 처리하고 이용할 수 있게 하는 것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 디스플레이 상에 제1 키보드를 디스플레이하고(702), 이 제1 키보드(예를 들어, 분할 키보드, 또는 역으로, 분할 키보드의 좌측 및 우측부로부터의 문자 키들을 포함하는 하나의, 통합된, 또는 병합된 키보드)는 제1 복수의 키를 포함한다. 예를 들어, 도 5h에서, 비분할 키보드(5008)가 디스플레이된다. 비분할 키보드(5008)는 복수의 문자 키를 포함하며, 예를 들어, 그 한 예가 "T" 키(5036)이다.
장치는 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처(예를 들어, 도 5h의 "T" 키(5036) 상의 탭 제스처(5038))를 검출한다(704).
제1 시간에서의 키 작동 제스처의 검출에 응답하여, 장치는 제1 키를 작동한다(706)(예를 들어, 제1 키에 대응하는 문자를 입력하거나 제1 키에 대응하는 동작을 수행). 예를 들어, 도 5h 및 도 5i에서, "T" 키(536) 상의 제스처(5038)에 응답하여, 입력 텍스트(5006) 내에는 문자 "t"가 입력된다.
일부 실시예들에서, 제1 시간에서의 키 작동 제스처의 검출에 응답하여, 장치는 미리 정의된 기간 동안에 키보드 선택 제스처에 대해 제스처 인식기를 디스에이블한다(708). 예를 들어, 도 5h에서, 제스처(5038)의 검출에 응답하여, 장치는 미리 정의된 기간 동안에 키보드 선택 제스처에 대해 제스처 인식기를 디스에이블한다.
장치는 제1 시간 이후의 제2 시간에 터치-감지 표면 상의 하나 이상의 접촉을 검출하며(710), 이 하나 이상의 접촉은 키보드 선택 제스처에 대응한다. 예를 들어, 도 5i에서, 2개의 접촉을 포함하는 제스처(5010)가 검출된다.
일부 실시예들에서, 키보드 선택 제스처는, 디스플레이 상의 제1 키보드의 위치에 대응하는 터치-감지 표면 상의 위치에서의 다중손가락 제스처이다(712). 예를 들어, 도 5i에서, 제스처(5010)는 비분할 소프트 키보드(5008) 상의 2-손가락 디핀치 제스처이다.
제1 시간 이후의 제2 시간에서의 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여(713), 장치는, 제2 시간이 제1 시간 이후에 미리 정의된 기간을 초과할 때 제1 키보드를 제2 키보드로 대체한다(714).
일부 실시예들에서, 제1 키보드를 제2 키보드로 대체하는 것은 제1 키보드를 제2 키보드로 천이시키는 애니메이션을 디스플레이하는 것(716)을 포함한다. 예를 들어, 도 5j는 비분할 소프트 키보드(5008)로부터 통합 입력 영역(5016)으로의 천이 애니메이션의 한 순간을 도시한다.
일부 실시예들에서, 키보드 선택 제스처에 대응하는 접촉이 터치-감지 표면 상에서 검출되더라도, 키보드 선택 제스처는 인식되지 않는데, 이것은 키 작동 제스처가 검출된 후 미리 정의된 기간 동안 키보드 선택 제스처에 대한 제스처 인식기가 디스에이블되기 때문이다.
제1 시간 이후의 제2 시간에서의 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 장치는 제2 시간이 제1 시간 이후에 미리 정의된 시간보다 작을 때 제1 키보드의 디스플레이를 유지한다(718).
예를 들어, 분할 키보드가 현재 디스플레이되고 있을 때의 병합된 키보드를 선택하는 다중손가락 핀치 제스처의 검출에 응답하여, 분할 키보드의 키가 작동된 이후에 미리 정의된 기간(예를 들어, 0.3, 0.4, 0.5, 0.6초 또는 어떤 다른 합당한 기간)보다 많은 기간이 경과했다면 분할 키보드는 병합된 키보드로 대체된다. 그러나, 분할 키보드의 키가 작동된 이후에 미리 정의된 기간보다 적은 기간이 경과했다면 분할 키보드가 디스플레이된 채로 유지되므로, 사용자가 능동적으로 타이핑하고 있을 때 뜻하지 않게 키보드를 변경하는 것을 방지한다. 역으로, 병합된 키보드가 현재 디스플레이되고 있을 때의 분할 키보드를 선택하는 다중손가락 디핀치 제스처의 검출에 응답하여, 병합된 키보드의 키가 작동된 이후에 미리 정의된 기간보다 많은 기간이 경과했다면 병합된 키보드는 분할 키보드로 대체된다. 그러나, 병합된 키보드의 키가 작동된 이후에 미리 정의된 기간보다 적은 기간이 경과했다면 병합된 키보드가 디스플레이된 채로 유지된다.
예로서, 도 5h 및 도 5i에서, 제스처(5038)로부터 제스처(5010)까지 기간이 미리 정의된 기간을 초과한다면, 도 5k에 도시된 바와 같이, 비분할 소프트 키보드(5008)는 분할 소프트 키보드 영역(5016)으로 대체된다. 제스처(5038)로부터 제스처(5010)까지 기간이 미리 정의된 기간을 초과하지 않는다면, 비분할 소프트 키보드(5008)는 디스플레이된 채로 유지된다.
일부 실시예들에서, 전자 장치는 휴대 전자 장치(예를 들어, 태블릿 컴퓨터)이다(720). 예를 들어, 장치(100 또는 300)는 휴대 태블릿 컴퓨터일 수도 있다.
일부 실시예들에서, 디스플레이는 터치-감지 표면을 포함하는 터치-감지 디스플레이이다(722). 예를 들어, 디스플레이(112)는 터치 스크린이다.
도 8a 및 도 8b는 일부 실시예들에 따른 통합 입력 영역을 이동시키는 방법(800)을 나타내는 흐름도이다. 방법(800)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(800)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(800)은 분할 키보드로 타이핑하는 중에 사용자 접촉이 이동할 때 통합 입력 영역의 우발적 이동을 방지하는 방법을 제공한다. 이 방법은 분할 키보드를 포함하는 통합 입력 영역을 재배치하고 이용할 때 사용자에 주는 인지적 부담을 줄임으로써, 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자가 소프트 키보드를 더 빨리 더 효율적으로 재배치하고 이용할 수 있게 하는 것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 제1 텍스트 기입 영역과 통합 입력 영역을 디스플레이 상에 동시에 디스플레이(802)하고, 이 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함한다. 예를 들어, 도 5l에서, 텍스트 기입 영역(5002) 및 통합 입력 영역(5039)이 디스플레이(112) 상에 디스플레이된다. 통합 입력 영역(5039)은, 좌측 분할 키보드 부분(5039-A), 우측 분할 키보드 부분(5039-B), 및 좌측 분할 키보드 부분과 우측 분할 키보드 부분(5039-A와 5039-B) 사이의 중앙 영역(5039-C)을 포함한다.
장치는 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 상의 제1 접촉을 검출한다(804). 예를 들어, 도 5l에서, 제스처(5040)에 대응하는 손가락 접촉이 중앙 영역(5039-C)의 위치(5040-1)에서 검출된다.
장치는 터치-감지 표면을 따른 제1 접촉의 이동을 검출한다(806). 예를 들어, 도 5l에서, 제스처(5040)의 손가락 접촉은 위치(5040-1)로부터 위치(5040-2)로 이동한다.
터치-감지 표면을 따른 제1 접촉의 이동의 검출에 응답하여, 장치는 제1 접촉의 이동이 제1 이동 임계치를 초과할 때 제1 접촉의 이동에 따라 통합 입력 영역을 이동시킨다(808). 예를 들어, 도 5l 및 도 5m에서, 제스처(5040)의 이동이 임계치(5042)를 초과하면, 통합 입력 영역(5039)은 이동 제스처(5040)에 따라 이동한다.
장치는, 분할 키보드에 대응하는 위치의 터치-감지 표면 상에서, 제1 접촉과는 별개의 제2 접촉을 검출한다(810). 예를 들어, 도 5l에서, 제스처(5044)에 대응하는 손가락 접촉이 우측 분할 키보드 부분(5039-B)의 위치(5044-1)에서 검출된다.
장치는 터치-감지 표면을 따른 제2 접촉의 이동을 검출한다(812). 예를 들어, 도 5l에서, 제스처(5044)의 손가락 접촉은 위치(5044-1)로부터 위치(5044-2)로 이동한다.
터치-감지 표면을 따른 제2 접촉의 이동의 검출에 응답하여, 장치는 제2 접촉의 이동이 제2 이동 임계치를 초과할 때 제2 접촉의 이동에 따라 통합 입력 영역을 이동시키고(814), 제2 이동 임계치는 제1 이동 임계치보다 크다. 예를 들어, 도 5l 및 도 5m에서, 제스처(5044)의 이동이 임계 거리(5046)(또는 구현에 따라서는 임계 거리(5048))를 초과하면, 통합 입력 영역(5039)은 이동 제스처(5044)에 따라 이동한다.
일부 실시예들에서, 각각의 이동 임계치는 통합 입력 영역의 수직 중심라인으로부터의 각각의 접촉의 수평 거리의 함수이다(816). 예를 들어, 도 5n에서, 차트(5050 및 5058)는 통합 입력 영역(5039)의 중심라인으로부터의 거리의 함수로서 임계 거리를 도시한다. 일부 실시예들에서, 이동 임계치는 수직 중심라인으로부터의 접촉의 수평 거리가 증가함에 따라 증가한다. 예를 들어, 도 5l에서, 우측 소프트 키보드 부분(5039-B)의 임계 거리(5046)는 중앙 영역(5039-C)의 임계 거리(5042)보다 크다. 또 다른 예로서, 도 5n의 차트(5058)는 통합 입력 영역(5039)의 중심라인으로부터의 거리에 따라 선형적으로 변하는 임계 거리를 도시한다.
일부 실시예들에서, 통합 입력 영역은 디스플레이 상의 수직 이동으로 제한되며(예를 들어, 통합 입력 영역의 폭이 디스플레이의 폭과 동일(또는 실질적으로 동일, 예를 들어, 90% 또는 95%)할 때), 통합 입력 영역은, 각각의 접촉에 대한 이동 임계치가 초과될 때 각각의 접촉의 이동의 수직 성분에 따라 이동한다(818). 예를 들어, 도 5l 및 도 5m에서, 각도를 이룬 이동을 갖는(그리고 그에 따라 수평 성분과 수직 성분을 갖는) 제스처(5044)에서도, 통합 입력 영역(5039)의 이동은 수직 이동으로 제한된다. 제스처(5044)의 수평 이동은 무시된다.
일부 실시예들에서, 분할 키보드의 좌측과 분할 키보드의 우측은, 통합 입력 영역의 이동 동안에 통합 입력 영역 내에서 서로에 관해 고정된 위치를 유지한다(820). 예를 들어, 도 5l 및 도 5m에서, 좌측 및 우측 키보드 부분(5039-A 및 5039-B)은 이동 동안에 서로 상대적으로 고정된 위치를 유지한다.
도 9는 일부 실시예들에 따른 입력 영역을 이동시키고 애플리케이션 콘텐츠 영역의 크기를 조정하는 방법(900)을 나타내는 흐름도이다. 방법(900)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(900)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(900)은, 키보드를 갖는 입력 영역이 디스플레이의 하부로부터 이동될 때 애플리케이션 콘텐츠 영역(예를 들어, 애플리케이션 뷰 또는 윈도우)의 크기를 증가시키는 방법을 제공한다. 이 방법은, 사용자가 제한된 디스플레이 영역을 갖는 태블릿 컴퓨터에서 타이핑하고 있을 때 특히 유용한데, 이것은 더 많은 애플리케이션을 볼 수 있게 허용함으로써, 더 효율적인 인간-머신 인터페이스를 생성하기 때문이다. 배터리-작동형 전자 장치의 경우, 사용자가 소프트 키보드를 처리하고 더 많은 애플리케이션을 볼 수 있게 하는 것은, 사용자가 더 빨리 작업할 수 있게 하고, 이것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드(예를 들어, 분할 키보드 또는 병합된 키보드)를 갖는 입력 영역을 디스플레이 상에 동시에 디스플레이하며(902), 여기서, 입력 영역은 제1 크기를 갖는 애플리케이션 콘텐츠 영역으로부터 분리되어 인접하고, 디스플레이의 하부에 위치한다. 예를 들어, 도 5o에서, 높이(5064)를 갖는 애플리케이션 콘텐츠 영역(5062)과 높이(5065)를 갖는 통합 입력 영역(5039)이 디스플레이된다. 통합 입력 영역(5039)은 디스플레이(112)의 하단에서 도킹되고, 애플리케이션 콘텐츠 영역(5062)으로부터 분리되어 인접한다.
장치는 터치-감지 표면 상의 제스처(예를 들어, 디스플레이의 하부에서의 입력 영역에 대응하는 터치-감지 표면 상의 위치에서의 위쪽 플릭 또는 드래그 제스처)를 검출한다(904). 예를 들어, 도 5o에서, 드래깅 제스처인 제스처(5068)가 디스플레이(112) 상에서 검출된다.
터치-감지 표면 상의 제스처의 검출에 응답하여, 장치는 입력 영역을 디스플레이 하단으로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시키며(906), 애플리케이션 콘텐츠 영역을 제1 크기보다 큰 제2 크기로 증가시킨다(908). 예를 들어, 도 5p에서, 제스처(5068)에 응답하여, 통합 입력 영역(5039)은 디스플레이(112)의 하단으로부터 멀리 애플리케이션 콘텐츠 영역(5062) 위로 이동한다. 추가적으로, 애플리케이션 콘텐츠 영역(5062)(도 5p)는, (도 5o) 높이(5064)를 갖는 애플리케이션 콘텐츠 영역의 크기보다 큰 높이(5066)를 갖는 크기로 크기가 증가한다.
일부 실시예들에서, 애플리케이션 콘텐츠 영역의 제1 크기는 제1 높이를 가지고, 애플리케이션 콘텐츠 영역의 제2 크기는 제2 높이를 가지며, 입력 영역은 입력 영역 높이를 가지고, 제2 높이는 제1 높이보다 입력 영역 높이와 동일한(또는 실질적으로 동일한(예를 들어, 5% 또는 10%)) 양만큼 크다(910). 예를 들어, 도 5o에서, 애플리케이션 콘텐츠 영역(5062)은 높이(5064)를 가지며, 통합 입력 영역(5039)은 높이(5065)를 가진다. 도 5p에서, 애플리케이션 콘텐츠 영역(5062)은 높이(5066)를 가지며, 이것은 높이(5064)와 높이(5065)의 합이다.
즉, 키보드가 스크린의 하단에 "정박"되면, 애플리케이션은 그 키보드를 애플리케이션 콘텐츠 영역을 디스플레이하는 데 이용될 수 없는 비-제로 높이를 갖는 영역인 것으로 취급한다. 따라서, 애플리케이션은 애플리케이션 콘텐츠 영역의 크기를 그에 따라 축소시킨다. 그러나, 키보드가 스크린의 하단으로부터 멀리 이동되면(예를 들어, 디스플레이의 하부로부터 "정박해제"되면), 애플리케이션은 그 키보드를 (입력 영역의 실제 디스플레이된 높이가 비제로이더라도) 제로 높이를 갖는 영역으로 취급하고, 따라서 그 애플리케이션은 더 많은 디스플레이(예를 들어, 디스플레이 영역의 전부 또는 실질적으로 전부)를 이용하기 위해 그의 콘텐츠 디스플레이 영역을 증가시킨다. 정박해제되면, 키보드는 애플리케이션 콘텐츠 영역 위에서 떠다닌다. 키보드는 위쪽 손가락 제스처의 검출에 응답하여 이동한다. 키보드는 손가락 들어올림시의 속도가 미리 정의된 임계치 이상이면 관성에 의해 이동할 수도 있다.
도 10a 및 도 10b는 일부 실시예들에 따른 분할 소프트 키보드로 문자를 입력하는 방법(1000)을 나타내는 흐름도이다. 방법(1000)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(900)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(1000)은, 사용자가 분할 키보드의 우측 상의 소정 키들을 좌측 엄지로 용이하게 작동시킬 수 있게 함으로써(역으로, 분할 키보드의 좌측 상의 소정 키들을 우측 엄지로 용이하게 작동시킬 수 있게 함으로써), (예를 들어, 사용자의 나머지 8개 손가락에 의해 유지되는 태블릿 컴퓨터에서) 분할 키보드를 이용한 2-엄지 타이핑을 더 빠르고 더 효율적으로 만듦으로써, 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 2-엄지 타이피스트가 분할 소프트 키보드에서 더 빨리 더 효율적으로 문자를 입력할 수 있게 하는 것은, 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측을 동시에 디스플레이하고(1002), 분할 키보드의 좌측은 복수열의 키를 포함하며, 분할 키보드의 우측은 대응하는 복수열의 키를 포함한다. 분할 키보드의 좌측상의 키열과 키보드의 우측상의 키열은, 그 열이 분할 키보드에 대응하는 비분할 키보드의 동일한 열에 속한다면 대응한다.
예를 들어, 도 5q에서, 텍스트 기입 영역(5002)과 분할 소프트 키보드(5069)가 디스플레이된다. 분할 소프트 키보드(5069)는 좌측 분할 키보드 부분(5069-A)과 우측 분할 키보드 부분(5069-B)을 포함한다. 분할 소프트 키보드(5069)는 QWERTY 레이아웃에 따라 배열된 문자 키들을 포함한다. 좌측부(5069-A)에서, 문자 키들의 상위 열은 "Q", "W", "E", "R", 및 "T" 키를 포함한다. 문자 키들의 중간열은 "A", "S", "D", 및 "F" 키들을 포함한다. 문자 키들의 하위열은 "Z", "X", "C", 및 "V" 키들을 포함한다. 우측부(5069-B)에서, 문자 키들의 상위 열은 "Y", "U", "I", "O", 및 "P" 키를 포함한다. 문자 키들의 중간열은 "G", "H", "J", "K", 및 "L" 키들을 포함한다. 문자 키들의 하위열은 "B", "N", 및 "M" 키들을 포함한다. 좌측부(5069-A) 상의 "Q", "W", "E", "R", 및 "T" 키를 갖는 열과 우측부(5069-B) 상의 "Y", "U", "I", "O", 및 "P" 키들을 갖는 열은, 이들 열이 비분할 QWERTY 키보드의 동일한 상위열에 속하기 때문에 대응한다. 마찬가지로, "A", "S", "D", 및 "F" 키를 갖는 열은 "G", "H", "J", "K", 및 "L" 키를 갖는 열에 대응하며, "Z", "X", "C", 및 "V" 키를 갖는 열은 "B", "N", 및 "M" 키를 갖는 열에 대응한다. 반면, 좌측부(5069-A) 상의 "Q", "W", "E", "R", 및 "T" 키를 갖는 열은, 우측부(5069-B)의 "G", "H", "J", "K", 및 "L" 키를 갖는 열이나 "B", "N", 및 "M" 키를 갖는 열에 대응하지 않는데, 이것은 이들이 비분할 QWERTY 키보드에서 동일한 열에 속하지 않기 때문이다.
장치는, 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출한다(1004). 예를 들어, 도 5r에서, 좌측 분할 키보드 부분(5069-A)의 문자 키들의 하위열 내의 "V" 키(5074)의 우측에 있는 미리 정의된 키 작동 영역(5086) 상에서 제스처(5098)가 검출된다.
일부 실시예들에서, 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역은, 분할 키보드의 우측의 대응하는 각 열의 최좌측 키에 대응하는 디스플레이되지 않은 키 작동 영역이다(1006). 예를 들어, 도 5q에서, 각각 키(5070, 5072, 및 5074)의 우측에서 인접해 있는 키 작동 영역(5082, 5084, 및 5086)은 각각 키(5076, 5078, 및 5080)에 대응한다.
분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 장치는 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 텍스트 기입 영역에 입력한다(1008). 예를 들어, 도 5r 및 도 5s에서, 제스처(5098)의 검출에 응답하여, 키 작동 영역(5086)이 우측 분할 키보드 부분(5069-B)의 "B" 키(5080)에 대응하기 때문에, 문자 "b"가 입력 텍스트(5006)에 입력되며; "B" 키(5080)는 우측 분할 키보드 부분(5069-B)의 대응하는 열의 최좌측키이다.
만일 분할 키보드의 우측의 대응하는 각 열의 최좌측키가 분할 키보드의 좌측의 각 열의 최우측키의 복제이라면, 분할 키보드의 우측의 대응하는 각 열의 최좌측키의 우측에서 인접해 있는 키가 그 대신에 입력된다. 예를 들어, 도 5q의 좌측 및 우측 분할 키보드 부분(5069-A 및 5069-B)의 문자 키들의 하위열들로 되돌아가면, 만일 "V" 키(5074)에 대응하는 디스플레이되지 않은 키 작동 영역(5092)이 그 대신에 디스플레이된 복제판 "V" 키이라면, 좌측부(5069-A)의 하위행의 최우측 "V" 키(5074)의 우측에 있는 키 작동 영역(5086) 상의 제스처의 검출에 응답하여, 복제판 "V" 키에 대응하는 문자 "v" 대신에 ("B" 키(5080)에 대응하는) 문자 "b"가 입력된다.
일부 실시예들에서, 장치는, 분할 키보드의 우측의 각 열의 최좌측키의 좌측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서 제스처를 검출한다(1010). 예를 들어, 도 5t에서, 우측 분할 키보드 부분(5069-B)의 문자 키들의 상위열 내의 최우측 "Y" 키의 좌측에 있는 미리 정의된 키 작동 영역(5088) 상에서 제스처(5100)가 검출된다.
일부 실시예들에서, 분할 키보드의 우측의 각 열의 최좌측키의 좌측에서 인접해 있는 미리 정의된 영역은, 분할 키보드의 좌측의 대응하는 각 열의 최우측 키에 대응하는 디스플레이되지 않은 키 작동 영역이다(1012). 예를 들어, 도 5q에서, 각각 키(5076, 5078, 및 5080)의 좌측에서 인접해 있는 키 작동 영역(5088, 5090, 및 5092)은 각각 키(5070, 5072, 및 5074)에 대응한다.
분할 키보드의 우측의 각 열의 최좌측키의 좌측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 장치는 분할 키보드의 좌측의 대응하는 각 열의 최우측키에 대응하는 문자를 텍스트 기입 영역에 입력한다(1014). 예를 들어, 도 5t 및 도 5u에서, 제스처(5100)의 검출에 응답하여, 키 작동 영역(5088)이 좌측 분할 키보드 부분(5069-A)의 "T" 키(5070)에 대응하기 때문에, 문자 "t"가 입력 텍스트(5006)에 입력되며; "T" 키(5070)는 좌측 분할 키보드 부분(5069-B)의 대응하는 열의 최우측키이다.
만일 분할 키보드의 좌측의 대응하는 각 열의 최우측키가 분할 키보드의 우측의 각 열의 최좌측키의 복제판이라면, 분할 키보드의 좌측의 대응하는 각 열의 최우측키의 좌측에서 인접해 있는 키가 그 대신에 입력된다. 예를 들어, 도 5q의 좌측 및 우측 분할 키보드 부분(5069-A 및 5069-B)의 문자 키들의 중간열들에서, 만일 "G" 키(5078)에 대응하는 디스플레이되지 않은 키 작동 영역(5084)이 그 대신에 디스플레이된 복제판 "G" 키이라면, 우측부(5069-B)의 중간열의 최좌측 "G" 키(5078)의 좌측에 있는 키 작동 영역(5090) 상의 제스처의 검출에 응답하여, 복제판 "G" 키에 대응하는 문자 "g" 대신에 ("F" 키(5072)에 대응하는) 문자 "f"가 입력된다.
일부 실시예들에서, 제스처의 검출 이전에, 장치는, 분할 키보드에서 가시적 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 시간에 키 작동 제스처를 검출한다(1016). 예를 들어, 도 5q 및 도 5r에서, 제스처(5098)의 검출 이전에, 제스처(5096)가 "O" 키(5094) 상에서 검출된다. 제스처(5096)의 검출에 응답하여 입력 텍스트(5006) 내에 문자 "o"가 입력된다.
제1 시간 이후의 제2 시간에서의 제스처의 검출에 응답하여, 장치는, 제2 시간이 제1 시간 후에 미리 정의된 기간보다 작을 때에는 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 텍스트 기입 영역에 입력하지만(1018), 장치는, 제2 시간이 제1 시간 이후에 미리 정의된 기간을 초과할 때는 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 텍스트 기입 영역에 입력하는 것을 중단한다(1020). 일부 실시예들에서, 디스플레이되지 않은 키 영역들은, 디스플레이되지 않은 키 영역에서의 제스처의 검출의 미리 정의된 기간(예를 들어, 0.5, 1.0 또는 2.0초 또는 어떤 다른 합당한 기간) 내에서 분할 키보드의 가시적 키들의 작동의 검출에 의해 결정되는 바와 같이, 사용자가 능동적으로 타이핑중일 때에만 작동가능하다. 가시적 키의 작동의 검출 이후 미리 정의된 기간이 경과한 후에 디스플레이되지 않은 키 영역에서의 제스처가 검출되면, 디플레이되지 않은 키에 대응하는 문자는 입력되지 않는다. 이것은 사용자가 능동적으로 타이핑중이 아닐 때 디스플레이되지 않은 키 영역에 대응하는 문자의 우발적 텍스트 기입을 방지한다.
예를 들어, 제스처(5096)가 검출되는 때와 제스처(5098)가 검출되는 때 사이의 기간이 미리 정의된 기간보다 작다면, 제스처(5098)에 응답하여 문자 "b"가 입력된다. 반면, 제스처(5096)가 검출되는 때와 제스처(5098)가 검출되는 때 사이의 기간이 미리 정의된 기간보다 크다면, 제스처(5098)에 응답하여 문자 "b"가 입력되지 않는다.
도 11a 내지 도 11d는 일부 실시예들에 따른 통합 입력 영역의 중앙부를 이용하는 방법(1100)을 나타내는 흐름도이다. 방법(1100)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(1100)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(1100)은 문자 입력을 더 빠르고 더 효율적으로 만들기 위해 통합 입력 영역의 중앙부를 이용하는 방법을 제공한다. 이 방법은, 사용자가 태블릿 컴퓨터를 이용한 2-엄지 타이핑을 수행하고 있을 때 특히 유용하다. 이 방법은 추가의 문자 입력 기능들이 사용자의 엄지에 의해 용이하게 접근가능하게 만듦으로써, 더욱 효율적인 인간-기계 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자가 문자 입력을 더 빨리 더 효율적으로 수행할 수 있게 하는 것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 제1 텍스트 기입 영역과 통합 입력 영역을 동시에 디스플레이(1102)하고, 이 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함한다. 예를 들어, 도 5v에서, 텍스트 기입 영역(5002) 및 통합 입력 영역(5016)이 디스플레이(112) 상에 디스플레이된다. 통합 입력 영역(5016)은, 좌측 분할 키보드 부분(5016-A), 우측 분할 키보드 부분(5016-B), 및 좌측과 우측 부분(5016-A와 5016-B) 사이의 중앙 영역(5016-C)을 포함한다. 중앙 영역(5016-C)에는 복제판 커서(5020) 및 복제판 입력 텍스트(5022)가 디스플레이되기 때문에, 중앙 영역(5016-C)은 제2 텍스트 기입 영역으로서 역할한다.
장치는 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 제스처(예를 들어, 도 5v의 좌측 부분(5016-A) 상의 "T" 키(5024) 상의 탭 제스처(5102))를 검출한다(1104).
분할 키보드에서의 문자 키의 위치에 대응하는 터치-감지 표면 상의 위치에서의 제스처의 검출에 응답하여, 장치는 디스플레이 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 대응하는 문자를 입력하고 동시에 디스플레이한다(1106). 도 5w에서, "T" 키(5024) 상의 제스처(5102)의 검출에 응답하여, 입력 텍스트(5006) 내에는 문자 "t"가 입력되고 동시에 디스플레이된다. 문자 "t"는 또한, 복제판 입력 텍스트(5022) 내에 입력되고 중앙 영역(5016-C)에 동시에 디스플레이된다. 제1 텍스트 기입 영역에 입력중인 텍스트의 일부를 보여주는 제2 텍스트 기입 영역을 통합 입력 영역의 중앙 부분에서 갖는 것은, 사용자가 분할 키보드로 엄지손가락 타이핑 중일 때 안구 움직임량을 줄임으로써, 텍스트 입력을 더 빨리, 더 효율적으로, 및 덜 스트레스를 받게 한다.
일부 실시예들에서, 제1 텍스트 기입 영역은 제1 크기로 텍스트를 디스플레이하고, 제2 텍스트 기입 영역은 제1 크기보다 큰 제2 크기로 제1 텍스트 기입 영역의 텍스트의 일부를 디스플레이한다(1108). 예를 들어, 도 5v에서, 복제판 텍스트 기입(5022)은 텍스트 기입 영역(5002)의 입력 텍스트(5006)보다 큰 크기로 중앙 영역(5016-C)에 디스플레이된다.
일부 실시예들에서, 통합 입력 영역의 폭은 디스플레이의 폭과 동일(또는 실질적으로 동일, 예를 들어, 90% 또는 95%)하다(1110). 도 5v의 통합 입력 영역(5016)은, 예를 들어, 디스플레이(112)의 폭에 걸친 폭을 가진다.
일부 실시예들에서, 분할 키보드의 좌측과 분할 키보드의 우측은, 통합 입력 영역의 이동 동안에 통합 입력 영역 내에서 서로에 관해 고정된 위치를 유지한다(1112). 좌측 및 우측 부분이 서로에 관하여 고정된 위치를 유지하게 하는 것은 좌측 및 우측 부분을 사용하기에 더 친숙한 디스플레이 상의 상대적 위치에 유지시키므로, 타이핑 효율을 유지하기 위해 사용자 편에서 더 낮은 인지적 재조정이 요구된다.
예를 들어, 도 5m은 제스처(예를 들어, 제스처 5040)의 검출에 응답하여 이동하는 통합 입력 영역(5039)을 도시한다. 통합 입력 영역(5039) 내에서, 좌측 부분(5039-A) 및 우측 부분(5039-B)는 이동 동안에 서로에 관하여 고정된 위치를 유지한다. 통합 입력 영역(5039 및 5016)은 유사하므로, 통합 입력 영역(5016)이 이동할 때, 좌측 및 우측 부분(5016-A 및 5016-B)은 서로에 관하여 고정된 위치를 유지한다.
일부 실시예들에서, 제2 텍스트 기입 영역은 텍스트가 입력될 때 디스플레이 상에 정지된 채로 유지되는 삽입 포인트를 포함한다(1114). 제2 텍스트 기입 영역의 정지 삽입 포인트는 측방향 안구 움직임을 줄이는 데 도움을 주는 사용자를 위한 안정적 초점 포인트를 제공한다. 예를 들어, 도 5x 및 도 5y에서, 복제판 커서(5020)는 중앙 영역(5016-C) 내에서 정지되어 있고; 복제 입력 텍스트(5022)에 관한 복제(5020)의 위치가 변할 때, 복제 입력 텍스트(5022)는 복제 커서(5020)에 관하여 앞서거나 후퇴한 것으로 디스플레이된다.
일부 실시예들에서, 제2 텍스트 기입 영역은 삽입 포인트(1116)를 포함한다. 장치는 제2 텍스트 기입 영역의 삽입 포인트에 대응하는 위치에서 터치-감지 표면 상의 제스처를 검출하고(1118), 제2 텍스트 기입 영역의 삽입 포인트에 대응하는 위치에서의 터치-감지 표면 상의 제스처에 따라 제2 텍스트 기입 영역의 삽입 포인트를 이동시킨다(1120). 제1 텍스트 기입 영역의 삽입 포인트는 또한, 제2 텍스트 기입 영역의 삽입 포인트에 대응하는 위치에서의 터치-감지 표면 상의 제스처에 따라 이동한다. 예를 들어, 좌측 스와이프(leftward swipe)는 삽입 포인트를 단어의 시작부로 이동시키는 반면, 우측 스와이프는 삽입 포인트를 단어의 끝으로 이동시킨다. 제2 텍스트 기입 영역에서 제스처를 통해 삽입 포인트를 조정하는 것은, 조정이 필요할 때마다 (제1 텍스트 기입 영역(또는 디스플레이 상단의 메뉴 바)에 도달하는 대안에 비해) 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5x 및 도 5y에서, 방향(5103)으로 이동하는 제스처(5102)가 중앙 영역(5016-C)의 복제 커서(5020) 상에서 검출된다. 제스처(5102)의 검출에 응답하여, 복제 커서(5020)는 제스처(5102)에 따라 중앙 영역(5016-C) 내에서의 복제 입력 텍스트(5022)에 관한 위치를 변경한다(그리고 커서(5004)도 입력 텍스트(5006)에 관해 마찬가지를 행한다).
일부 실시예들에서, 장치는 통합 입력 영역의 중앙 부분에서 텍스트 편집 제어부(예를 들어, 텍스트를 선택하고, 자르고, 복사하고, 및/또는 붙여넣기 하기 위한 아이콘, 또는 그래픽이나 사용자 인터페이스 객체)를 디스플레이한다(1122). 일부 실시예들에서, 통합 입력 영역의 중앙 부분의 텍스트 편집 제어부는 제1 텍스트 기입 영역의 대응하는 텍스트 편집 제어부를 가진다(1124). 예를 들어, 중앙 부분의 텍스트 편집 제어부는 제1 텍스트 기입 영역의 텍스트 편집 제어부의 복제일 수도 있다. 예를 들어, 도 5z에서, 텍스트 편집 제어부(5106)에 대응하는 텍스트 편집 제어부(5104)가 텍스트 기입 영역(5002)에 디스플레이된다. 일부 실시예들에서, 장치는, 통합 입력 영역의 중앙 부분의 텍스트 편집 제어부에 대응하는 위치에서 터치-감지 표면 상의 제스처를 검출하고(1126), 텍스트 편집 제어부에 대응하는 위치에서의 터치-감지 표면 상의 제스처에 따라 텍스트 편집 명령어를 실행한다(1128). 통합 입력 영역의 중앙 부분에서 제스처를 통해 텍스트를 편집하는 것은, 편집 기능이 필요할 때마다 (제1 텍스트 기입 영역(또는 디스플레이 상단의 메뉴 바)에 도달하는 대안에 비해) 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5z 및 도 5aa에서, 붙여넣기 동작에 대응하는 텍스트 편집 제어부(5106)가 중앙 영역(5016-C)에 디스플레이된다. 편집 제어부(5106) 상의 제스처(5108)가 중앙 영역(516-C)에서 검출된다. 제스처(5108)의 검출에 응답하여, 붙여넣기 동작이 실행되며; 텍스트 "ahead"가 복제 텍스트(5022) 및 입력 텍스트(5006)에 붙여넣기 된다.
일부 실시예들에서, 장치는 통합 입력 영역의 중앙 부분에 사용자-선택가능한 입력 요소(예를 들어, 라디오 버턴, 체크 박스, 픽 리스트, 타임 픽커, 및/또는 날짜 픽커)를 디스플레이하고(1130), 통합 입력 영역의 중앙 부분의 사용자-선택가능한 입력 요소에 대응하는 위치에서 터치-감지 표면 상의 제스처를 검출하며(1132), 사용자-선택가능한 입력 요소에 대응하는 위치에서 터치-감지 표면 상의 제스처의 검출에 응답하여, 사용자-선택가능한 입력 요소를 선택한다(1134). 통합 입력 영역의 중앙 부분에서의 제스처를 통해 라디오 버턴, 체크 박스, 픽업 리스트 내의 항목, 시간 및 날짜를 선택하는 것은, 선택이 필요할 때마다 사용자가 그들의 엄지손가락을 타이핑중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5bb 및 도 5cc에서, 텍스트 기입 영역(5002)에 폼(5110)이 디스플레이된다. 폼(5110)은 체크박스(5112)를 포함하고, 각각의 체크박스는 폼 내의 옵션에 대응한다. 체크박스들(5112) 중 적어도 일부가 복제 체크박스(5116)로서 중앙 영역(5016-C)에 디스플레이된다. 중앙 영역(5016-C)의 복제 체크박스(5116-A) 상에서 제스처(5118)가 검출된다. 제스처(5118)의 검출에 응답하여, 체크박스(5116-A)가 선택된다.
일부 실시예들에서, 장치는 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 상의 제스처(예를 들어, 팝업 메뉴를 활성화하기 위한 아이콘 상의 제스처 또는 중앙 부분 내에서의 사전정의된 다중 손가락 제스처)를 검출하고(1136), 통합 입력 영역의 중앙 부분에 대응하는 위치에서의 터치-감지 표면 상의 제스처의 검출에 응답하여, 팝업 뷰를 디스플레이한다(1138). 통합 입력 영역의 중앙 부분에서 제스처를 통해 팝업 뷰(예를 들어, 애플리케이션 내의 윈도우나 메뉴)를 액세스하는 것은, 팝업 뷰가 필요할 때마다 (제1 텍스트 기입 영역(또는 디스플레이 상단의 메뉴 바)에 도달하는 대안에 비해) 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5dd 및 도 5ee에서, 중앙 영역(5016-C)에서 제스처(5120)가 검출된다. 제스처(5120)의 검출에 응답하여, 팝업 메뉴(5124)가 디스플레이된다. 일부 실시예들에서, 팝업 메뉴(5124)에 대응하는 팝업 메뉴(5122)가 텍스트 기입 영역(5002)에 디스플레이된다.
일부 실시예들에서, 장치는, 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 상의 복수의 제스처(예를 들어, 한자, 일본어, 한국어 또는 기타의 문자에 대응하는 일련의 손가락 스트로크 및 탭)를 검출하고(1140), 복수의 제스처에 대응하는 문자를 제1 텍스트 기입 영역 및 제2 텍스트 기입 영역에 입력한다(1142). 예시적인 문자들로는, 알파벳 영문자, 숫자 문자, 심볼, 구두점 문자, 아라비아 스크립트 문자, 키릴(Cyrillic) 문자, 그리스 문자, 이모지(emoji) 심볼, 이모티콘 심볼, 시노그래프(sinograph), 일본어 간지(Kanji), 가타가나, 또는 히라가나 등과 같은 아시안 문자, 데바나가리(Devanagari) 문자, 페르소-아라비아 문자, 구르무키(Gurmukhi) 문자, 및 히브리어 문자가 포함된다. 통합 입력 영역의 중앙 부분에서 제스처를 통해 문자를 그리는 것은, 사용자가 그들의 손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5ff 및 도 5gg에서, 수기(handwriting, 5126)에 대응하는 하나 이상의 제스처(5128)가 중앙 영역(5016-C)에서 검출된다. 수기(5126)에 대응하는 문자 "中"이 입력 텍스트(5006) 및 복제 입력 텍스트(5022)에 입력된다.
일부 실시예들에서, 장치는, 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 상의 복수의 제스처(예를 들어, 간단한 도안에 대응하는 일련의 손가락 스트로크 및 탭)를 검출하고(1144), 복수의 제스처에 따라 도안을 작성한다(1146). 통합 입력 영역의 중앙 부분에서 제스처를 통해 도안을 작성하는 것은, 사용자가 그들의 손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5hh 및 도 5ii에서, 도안(5130)에 대응하는 하나 이상의 제스처(5132)가 중앙 영역(5016-C)에서 검출된다. 도안(5130)에 대응하는 도안(5133)이 입력 텍스트(5006)에 입력된다.
일부 실시예들에서, 장치는, 제안된 단어(예를 들어, 제1 텍스트 기입 영역 및 제2 텍스트 기입 영역에 디스플레이된 일련의 문자를 완성하거나 교정하기 위해 자동으로 제안된 단어)를 통합 입력 영역의 중앙 부분에 디스플레이하고(1148), 제안된 단어에 대응하는 위치에서 터치-감지 표면 상의 제스처를 검출하며(1150), 제안된 단어에 대응하는 위치에서의 터치-감지 표면 상의 제스처에 따라 텍스트 편집 명령을 실행한다(1152). 일부 실시예들에서, 제안된 단어를 탭핑하는 것은 제안된 단어를 수신하고 입력한다. 일부 실시예들에서, 제안된 단어(또는 X 아이콘)를 탭핑하는 것은 제안된 단어를 거절하고 제안된 단어의 디스플레이를 종료한다. 통합 입력 영역의 중앙 부분에서 제스처를 통해 텍스트를 편집하는 것은, 편집 기능이 필요할 때마다 (제1 텍스트 기입 영역(또는 디스플레이 상단의 메뉴 바)에 도달하는 대안에 비해) 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5jj 및 도 5kk에서, 제안 단어(5134)는 텍스트 기입 영역(5002)에 디스플레이되고, 제안 단어(5134)에 대응하는 복제 제안 단어(5136)는 중앙 영역(5016-C)에 디스플레이된다. 제안된 단어(5136)는 X 아이콘(5137)과 함께 디스플레이된다. 제안된 단어(5136)와 연관된 X 아이콘(5137) 상에서 제스처(5138)가 검출된다. 제스처(5138)의 검출에 응답하여, 제안된 단어(5136)가 거부되고, 제안된 단어(5136) 및 제안된 단어(5134)의 디스플레이가 종료된다.
일부 실시예들에서, 장치는, 통합 입력 영역의 중앙 부분에 복수의 이모지 문자를 디스플레이하고(1154), 복수의 이모지 문자 중 한 이모지 문자에 대응하는 위치에서 터치-감지 표면 상의 제스처(예를 들어, 이모지 문자 상의 탭 제스처)를 검출하며(1156), 이모지 문자에 대응하는 위치에서의 터치-감지 표면 상의 제스처의 검출에 응답하여, 디스플레이 상의 제1 텍스트 기입 영역 및 제2 텍스트 기입 영역에 그 이모지 문자를 입력하고 디스플레이한다(1158). 통합 입력 영역의 중앙 부분에서 제스처를 통해 이모지 문자를 입력하는 것은, 이모지 문자가 필요할 때마다 (제1 텍스트 기입 영역(또는 디스플레이 상단의 메뉴 바)에 도달하는 대안에 비해) 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5ll 및 도 5mm에서, 이모지 문자(5140-A)를 포함하는 이모지 문자(5140)가 텍스트 기입 영역(5002)에 디스플레이된다. 복제 이모지 문자(5142)가 중앙 영역(5016-C)에 디스플레이된다. 복제 이모지 문자(5142-A)는 이모지 문자(5140-A)의 복제이다. 복제 이모지 문자(5142-A) 상에서 제스처(5144)가 검출된다. 제스처(5144)의 검출에 응답하여, 이모지 문자(5140-A)가 입력 텍스트(5006)에 입력되고 디스플레이되며, 복제 이모지 문자(5142-A)가 복제 입력 텍스트(5022)에 입력되고 디스플레이된다.
일부 실시예들에서, 장치는, 통합 입력 영역의 중앙 부분에 복수의 유니코드 문자를 디스플레이하고(1160), 복수의 유니코드 문자 중 한 유니코드 문자에 대응하는 위치에서 터치-감지 표면 상의 제스처(예를 들어, 유니코드 문자 상의 탭 제스처)를 검출하며(1162), 유니코드 문자에 대응하는 위치에서의 터치-감지 표면 상의 제스처의 검출에 응답하여, 디스플레이 상의 제1 텍스트 기입 영역 및 제2 텍스트 기입 영역에 그 유니코드 문자를 입력하고 디스플레이한다(1164). 통합 입력 영역의 중앙 부분에서 제스처를 통해 유니코드 문자를 입력하는 것은, 유니코드 문자가 필요할 때마다 (제1 텍스트 기입 영역(또는 디스플레이 상단의 메뉴 바)에 도달하는 대안에 비해) 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5nn 및 도 5oo에서, 유니코드 문자(5146-A)를 포함하는 유니코드 문자(5146)가 텍스트 기입 영역(5002)에 디스플레이된다. 복제 유니코드 문자(5148)가 중앙 영역(5016-C)에 디스플레이된다. 복제 유니코드 문자(5148-A)는 유니코드 문자(5146-A)의 복제이다. 복제 유니코드 문자(5148-A) 상에서 제스처(5149)가 검출된다. 제스처(5149)의 검출에 응답하여, 유니코드 문자(5146-A)가 입력 텍스트(5006)에 입력되고 디스플레이되며, 복제 유니코드 문자(5148-A)가 복제 입력 텍스트(5022)에 입력되고 디스플레이된다.
일부 실시예들에서, 장치는, 제2 텍스트 기입 영역에 대응하는 위치에서 터치-감지 표면 상의 제스처(예를 들어, 제2 텍스트 기입 영역의 텍스트 위의 탭 및 드래그 제스처)를 검출하고(1166), 제2 텍스트 기입 영역에 대응하는 위치에서의 터치-감지 표면 상의 제스처의 검출에 응답하여, 텍스트의 범위를 선택한다(1168). 통합 입력 영역의 중앙 부분에서 제스처를 통해 텍스트를 선택하는 것은, 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5pp 및 도 5qq에서, 중앙 영역(5016-C)의 복제 입력 텍스트(5022) 위에서 제스처(5150)가 검출된다. 제스처(5150)는, 탭 및 위치(5150-A)로부터 위치(5150-B)로의 드래그 제스처를 포함한다. 제스처(5150)에 응답하여, 하이라이팅(5154)으로 표시된 바와 같이, 복제 입력 텍스트(5022)가 선택된다.
일부 실시예들에서, 장치는, 제2 텍스트 기입 영역의 하나 이상의 단어에 대응하는 위치에서 터치-감지 표면 상의 제스처(예를 들어, 제2 텍스트 기입 영역의 단어 상의 스와이프 및 더블 탭 제스처)를 검출하고(1170), 제2 텍스트 기입 영역에 대응하는 위치에서의 터치-감지 표면 상의 제스처의 검출에 응답하여, 하나 이상의 단어를 포맷팅한다(1172). 통합 입력 영역의 중앙 부분에서 제스처를 통해 텍스트를 포맷팅하는 것은, 사용자가 그들의 엄지손가락을 타이핑 중인 위치로부터 작은 거리만큼만 이동시킬 것을 요구하는 이점을 가진다.
예를 들어, 도 5rr 및 도 5ss에서, 중앙 영역(5016-C)의 복제 입력 텍스트(5022)의 단어 "gotten" 상에서 제스처(5156)가 검출된다. 제스처(5156)의 검출에 응답하여, 복제 입력 텍스트(5022)의 단어 "gotten" 및 입력 텍스트(5006)의 대응하는 단어가 볼드체 텍스트로 포맷팅된다.
일부 실시예들에서, 통합 입력 영역의 중앙 부분의 입력 요소들은 (예를 들어, 툴바(tool bar)나 설정 메뉴를 통해) 사용자-구성가능하다(1174). 중앙 부분에 관하여 전술된 다양한 특징들(예를 들어, 문자 수기, 도안 작성, 사용자 선택가능한 요소를 선택하기, 텍스트 편집 동작 등)은 사용자에 의해 선택적으로 인에이블될 수 있다. 예를 들어, 도 5tt에서, 중앙 영역(5016-C)에 대한 이용가능한 입력 요소들을 도시하는 옵션 페이지 표시(5158)가 디스플레이된다. 옵션 페이지(5158)는, 중앙 영역(5016-C)에 대한 입력 요소 옵션과 이들 옵션들을 인에이블 또는 디스에이블하기 위한 대응하는 체크박스를 포함한다.
도 12a 및 도 12b는 일부 실시예들에 따른 키보드를 포함하는 입력 영역을 애플리케이션 콘텐츠 영역 위로 이동시키는 방법(1200)을 나타내는 흐름도이다. 방법(1200)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(1200)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(1200)은 애플리케이션에서 소프트 키보드를 텍스트 기입 영역 바로 아래에 정확하게 자동으로 배치하기 위해 부정확한 플릭(flick) 제스처를 이용하는 방법을 제공한다. 이 방법은 소프트 키보드를 배치하고 이용할 때 사용자에 주는 인지적 부담을 줄임으로써, 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자가 소프트 키보드를 더 빨리 더 효율적으로 처리할 수 있게 하는 것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
이 장치는, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과, 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드(예를 들어, 병합된 키보드 또는 분할 키보드를 갖는 통합 입력 영역)를 갖는 입력 영역을 디스플레이 상에 동시에 디스플레이한다(1202). 도 5uu는, 예를 들어, 디스플레이(112) 상에 디스플레이된 애플리케이션 콘텐츠 영역(5160)을 도시한다. 텍스트 기입 영역(5162)이 애플리케이션 콘텐츠 영역(5160)에 디스플레이된다. 소프트 키보드(5164)가 또한, 디스플레이(112) 상에 디스플레이된다.
장치는, 디스플레이 상의 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 드래그 제스처를 검출한다(1204). 예를 들어, 도 5uu에서, 디스플레이(112) 상에서 드래그 제스처(5166)가 검출된다. 드래그 제스처(5166)는, 소프트 키보드(5164)에 놓여 있는 위치(5166-1)로부터 시작한다.
장치는, 드래그 제스처의 검출에 응답하여, 드래그 제스처에 따라 디스플레이 상에서 입력 영역을 이동시킨다(1206). 드래그 제스처(5166)의 검출에 응답하여, 도 5w에 도시된 바와 같이, 드래그 제스처(5166)에 따라 소프트 키보드(5164)가 이동된다.
장치는, 디스플레이 상의 입력 영역에 대응하는 위치에서 터치-감지 표면 상의 플릭 제스처를 검출한다(1208). 예를 들어, 도 5ww에서, 디스플레이(112) 상에서 제스처(5168)가 검출된다. 제스처(5168)는 소프트 키보드(5164)에 대응하는 위치로부터 시작한다.
이 장치는, 플릭 제스처의 검출에 응답하여, 입력 영역이 애플리케이션 콘텐츠 영역의 텍스트 기입 영역 바로 아래의 인접한 위치에 오게 되도록, 플릭 제스처에 따라 관성에 의해 디스플레이 상에서 입력 영역을 이동시킨다(1210).
즉, 드래그 제스처가 입력 영역에 가해질 때, 입력 영역은 드래그 제스처를 만드는 손가락의 움직임을 추적한다(추종한다). 드래그 제스처를 만드는 손가락의 들어올림이 검출되면, 입력 영역의 이동이 중단된다. 대조적으로, 플릭 제스처가 입력 영역에 가해지면, 입력 영역은 소정의 시뮬레이트된 관성 및 마찰에 의해 플릭 제스처의 방향으로 '던져지며', 따라서 입력 영역은 플릭 제스처를 만드는 손가락의 들어올림이 발생한 곳에 대응하는 위치에서 중단되지 않는다. 대신에, 입력 영역은 플릭 제스처 방향으로 계속 이동하고, 점진적으로 느려지며, 애플리케이션의 텍스트 기입 영역 바로 아래의 인접한 위치에 오게 된다. 따라서, 부정확한 플릭 제스처가 애플리케이션의 텍스트 기입 영역 바로 아래에 키보드를 자동으로 정확히 배치하는 반면, 더 정확한 드래그 제스처는 사용자가 텍스트 기입 영역을 수동으로 배치하는 것을 가능케한다.
예를 들어, 도 5ww 및 도 5xx에서, 제스처(5168)에 응답하여, 소프트 키보드(5164)는, 제스처(5168)에 따라 이동 관성을 포함하는, 궤적(5170)을 따라 이동한다. 소프트 키보드(5164)는 텍스트 기입 영역(5162-F) 아래에 인접하게 오게 되며; 소프트 키보드(5164)는 텍스트 기입 영역(5162-F) 바로 아래에서 도킹한다.
일부 실시예들에서, 플릭 제스처에 따라 관성에 의해 디스플레이 상에서 입력 영역을 이동시키는 것은, 플릭 제스처에 기초하여 입력 영역의 궤적을 계산하고(1212), 미리 정의된 후보 기준을 만족하는 애플리케이션 콘텐츠 영역 내의 하나 이상의 텍스트 기입 영역을 검색하며(1214), 하나 이상의 후보 텍스트 기입 영역이 발견되면, 각각의 후보 텍스트 기입 영역을 입력 영역이 바로 아래에서 인접하게 오게 될 텍스트 기입 영역으로서 식별하고 그에 따라 궤적을 조정하는 것(1216)을 포함한다. 예를 들어, 도 5ww 및 도 5xx에서, 종료 포인트(5171)를 갖는 궤적(5170)이 제스처(5168)에 기초하여 계산된다. 미리 정의된 기준을 만족하는(예를 들어, 종료 포인트(5171)로부터의 미리 정의된 거리 내의) 애플리케이션 콘텐츠 영역(5160) 내의 하나 이상의 텍스트 기입 영역(5162)이 검색된다. 발견된 후보 텍스트 기입 영역들 중에서, 하나(예를 들어, 5162-F)가 바로 아래에 소프트 키보드(5164)가 오게 될 텍스트 기입 영역으로서 선택된다. 텍스트 기입 영역(5162-F) 아래에 소프트 키보드(5164)가 오게 되도록 궤적(5170)이 조정된다.
또 다른 예로서, 도 5yy 및 도 5zz에서, 종료 포인트(5175)를 갖는 궤적(5174)이 플릭 제스처(5172)에 기초하여 계산된다. 미리 정의된 기준을 만족하는(예를 들어, 종료 포인트(5175)로부터의 미리 정의된 거리 내의) 애플리케이션 콘텐츠 영역(5160) 내의 하나 이상의 텍스트 기입 영역(5162)이 검색된다. 발견된 후보 텍스트 기입 영역들 중에서, 하나(예를 들어, 5162-A)가 바로 아래에 소프트 키보드(5164)가 오게 될 텍스트 기입 영역으로서 선택된다. 텍스트 기입 영역(5162-A) 아래에 소프트 키보드(5164)가 오게 되도록 궤적(5174)이 조정된다.
일부 실시예들에서, 후보 텍스트 기입 영역들 중 하나를 입력 영역이 바로 아래에서 인접하게 오게 될 텍스트 기입 영역으로서 식별하는 것은, 궤적의 종료 포인트에 가장 가까운 각각의 후보 텍스트 기입 영역을, 입력 영역이 바로 아래에 인접하게 오게 될 텍스트 기입 영역으로서 선택하는 것(1218)을 포함한다. 예를 들어, 도 5yy에서, 바로 아래에 소프트 키보드(5164)가 오게 되는 텍스트 기입 영역으로서 텍스트 기입 영역(5162-A)이 선택되며; 텍스트 기입 영역(5162-A)은 종료 포인트(5175)에 가장 가깝다. 도 5zz에서, 소프트 키보드(5164)는 텍스트 기입 영역(5162-A) 아래에 인접하게 오게 된다.
일부 실시예들에서, 각각의 후보 텍스트 기입 영역은, 궤적의 종료 포인트에 대한 각 후보 텍스트 기입 영역의 근접도에 기초하여 입력 영역이 바로 아래에서 인접하게 오게 되는 텍스트 기입 영역으로서 식별된다(1220). 예를 들어, 도 5yy 및 도 5zz에서, 텍스트 기입 영역(5162) 중에서 텍스트 기입 영역(5162-A)이 종료 포인트(5175)에 가장 가깝다는 사실에 기초하여, 아래에 소프트 키보드(5164)가 오게 되는 텍스트 기입 영역으로서 텍스트 기입 영역(5162-A)이 선택된다;
일부 실시예에서, 궤적은, 입력 영역의 시뮬레이트된 물리적 속성에 기초하여 계산된다(1222). 예를 들어, 하나 이상의 시뮬레이트된 물리적 속성은 애플리케이션 콘텐츠 영역(5160)과 연관된다. 시뮬레이트된 물리적 속성의 예는, 밀도, 마찰 계수 등과 같은 물체의 운동에 영향을 미치는 속성을 포함한다. 속성에 대한 값들은 미리 정의된다. 궤적(예를 들어, 궤적(5170))은 속성과 대응하는 제스처(예를 들어, 제스처(5168))에 기초하여 계산된다.
일부 실시예들에서, 각각의 텍스트 기입 영역이 궤적의 종료 포인트의 미리 정의된 거리 내에 있다면 각각의 텍스트 기입 영역에 대해 후보 기준이 만족된다(1224). 예를 들어, 도 5yy에서, 종료 포인트(5175)로부터 미리 정의된 거리(예를 들어, 거리 5177) 내에 있는 텍스트 기입 영역은, 궤적(5175)에 따라 소프트 키보드(5164)가 아래에 오게 되는 후보 텍스트 기입 영역으로서 식별된다. 텍스트 기입 영역(5162-A 및 5162-B)는 거리(5177) 내에 있고, 그에 따라 후보 텍스트 기입 영역으로서 식별된다.
도 13a 및 도 13b는 일부 실시예들에 따른 통합 입력 영역을 재구성하는 방법(1300)을 나타내는 흐름도이다. 방법(1300)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(1300)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(1300)은 통합 입력 영역 내의 소프트 분할 키보드의 좌측 및 우측의 크기와 위치를 재구성하는 직관적 방법을 제공한다. 이 방법은, 사용자가 태블릿 컴퓨터로 2-엄지손가락 타이핑을 수행하고 있을 때(예를 들어, 태블릿 컴퓨터가 사용자의 나머지 8개 손가락에 의해 유지될 때) 특히 유용하다. 이 방법은 사용자가 통합 입력 영역에서 분할 키보드를 사용자의 엄지손가락의 크기로 맞춤화하는 것을 빠르고 쉽게 함으로써, 더 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자의 손가락 크기로 맞춤화되는 분할 키보드를 이용하는 것은 사용자가 문자 입력을 더 빨리 더 효율적으로 수행하는 것을 가능케 함으로써, 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 제1 텍스트 기입 영역과 통합 입력 영역을 디스플레이 상에 동시에 디스플레이(1302)하고, 이 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함한다. 예를 들어, 도 5aaa에서, 텍스트 기입 영역(5002) 및 통합 입력 영역(5039)이 디스플레이된다. 통합 입력 영역(5039)은, 좌측 분할 키보드 부분(5039-A), 우측 분할 키보드 부분(5039-B), 및 좌측과 우측 부분(5039-A와 5039-B) 사이의 중앙 영역(5039-C)을 포함한다.
장치는 터치-감지 표면 상의 제1 입력을 검출한다(1304). 일부 실시예들에서, 제1 입력은, 터치-감지 표면 상에서의 제1 엄지와, 제1 엄지와는 별개의 제2 엄지에 의한 것이다(1305)(예를 들어, 제2 엄지에 의한 단일 탭 제스처와 동시발생적인 제1 엄지에 의한 단일 탭 제스처; 제2 엄지에 의한 더블 탭 제스처와 동시발생적인 제1 엄지에 의한 더블 탭 제스처; 또는 제2 엄지에 의한 스와이프와 동시발생적인 제1 엄지에 의한 스와이프 제스처). 일부 실시예들에서, 디스플레이 상의 통합 입력 영역의 위치에 대응하는 터치-감지 표면 상의 위치에서 제1 입력이 검출된다. 예를 들어, 도 5aa로 되돌아가면, 분할 소프트 키보드(5039)에서 제스처(5176)가 검출된다. 제스처(5176)는 디스플레이(112) 상의 동시발생적인 엄지 접촉(5176-A 및 5176-B)을 포함한다.
제1 입력의 검출에 응답하여, 장치는 통합 입력 영역에 대한 재구성 모드에 진입한다(1306). (도 5aaa) 제스처(5176)의 검출에 응답하여, 예를 들어, 장치(100)는 통합 입력 영역(5039)에 대한 재구성 모드에 진입한다. 재구성 모드에 있는 동안, 장치(100)는 통합 입력 영역(5039)의 분할 키보드의 크기를 재조정하기 위한 하나 이상의 제스처를 수용한다. 통합 입력 영역에 대한 별개의 재구성 모드를 갖는 한 이점은, 이것이 사용자가 엄지손가락 타이핑 중일 때 분할 키보드가 우발적으로 재구성되는 것을 방지한다는 것이다.
통합 입력 영역에 대한 재구성 모드에 있는 동안, 장치는 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출한다(1308). 제2 입력의 검출에 응답하여, 장치는 통합 입력 영역의 분할 키보드의 좌측 및 우측 중 적어도 하나의 크기를 조정한다(1310).
통합 입력 영역에 대한 재구성 모드에 있는 동안, 장치는 제3 입력을 검출한다(1312). 일부 실시예들에서, 제3 입력은, 제1 엄지 및/또는 제2 엄지에 의한 것이다(1313)(예를 들어, 제2 엄지에 의한 단일 탭 제스처와 동시발생적인 제1 엄지에 의한 단일 탭 제스처; 제2 엄지에 의한 더블 탭 제스처와 동시발생적인 제1 엄지에 의한 더블 탭 제스처; 또는 제2 엄지에 의한 스와이프와 동시발생적인 제1 엄지에 의한 스와이프 제스처). 제3 입력의 검출에 응답하여, 장치는 통합 입력 영역에 대한 재구성 모드를 종료한다(1314). 일부 실시예들에서, 디스플레이 상의 통합 입력 영역의 위치에 대응하는 터치-감지 표면 상의 위치에서 제3 입력이 검출된다.
예를 들어, 도 5bbb 내지 도 5mmm은, 재구성 모드에 있는 동안 검출된 다양한 제스처와, 각각의 검출된 제스처에 대한 응답으로서의 통합 입력 영역(5039)에 대한 결과적 변경을 도시한다. 이들 예들 중 하나만을 취하기 위해, 도 5lll은 제스처(5188)가 검출되고 있는 것을 도시하고 있다. 제스처(5188)는 좌측 엄지손가락이 디스플레이(112)의 좌측 가장자리로부터 멀리 이동하는 것을 포함한다. 제스처(5188)의 검출에 응답하여, 도 5mmm에 도시된 바와 같이, 좌측 부분(5039-A) 및 우측 부분(5039-B)은 크기가 증가한다. 도 5nnn은 디스플레이(112) 상에서 검출된 제스처(5190)를 도시한다. 제스처(5190)에 응답하여, 장치(100)는 재구성 모드를 종료하고, 분할 키보드 부분(5039-A 및 5039-B)는 그들의 새로운 위치를 유지한다.
일부 실시예들에서, 제2 입력은 디스플레이의 좌측 수직 측면을 향한 좌측 엄지손가락의 수평 이동을 포함하며, 디스플레이의 좌측 수직 측면을 향한 좌측 엄지손가락의 수평 이동의 검출에 응답하여, 장치는 분할 키보드의 좌측의 크기를 줄인다(1316). 일부 실시예들에서, 한 개 엄지손가락에 의한 이동은 분할 키보드의 대응하는 측의 크기를 조정한다. 예를 들어, 도 5bbb 및 도 5ccc에서, 디스플레이(112) 상에서 제스처(5178)가 검출된다. 제스처(5178)는 좌측 엄지손가락이 디스플레이(112)의 좌측 수직 측면을 향하여 수평으로 이동하는 것을 포함한다. 제스처(5178)의 검출에 응답하여, 좌측 분할 키보드 부분(5039-A)은 크기가 줄어든다.
일부 실시예들에서, 제2 입력은 디스플레이의 좌측 수직 측면으로부터 멀어지는 좌측 엄지손가락의 수평 이동을 포함하며, 디스플레이의 좌측 수직 측면으로부터 멀어지는 좌측 엄지손가락의 수평 이동의 검출에 응답하여, 장치는 분할 키보드의 좌측의 크기를 증가시킨다(1318). 예를 들어, 도 5ddd 및 도 5eee에서, 디스플레이(112) 상에서 제스처(5180)가 검출된다. 제스처(5180)는 좌측 엄지손가락이 디스플레이(112)의 좌측 수직 측면으로부터 멀리 수평으로 이동하는 것을 포함한다. 제스처(5180)의 검출에 응답하여, 좌측 분할 키보드 부분(5039-A)은 크기가 증가한다.
비슷하게, 일부 실시예들에서, 디스플레이의 우측 수직 측면을 향한 그리고 디스플레이의 우측 수직 측면으로부터 멀어지는 우측 엄지손가락에 의한 이동은 각각, 도 5fff 내지 도 5iii에 도시된 바와 같이, 분할 키보드의 우측의 크기를 감소 및 증가시킨다.
일부 실시예들에서, 제2 입력은 제1 엄지손가락에 가장 가까운 디스플레이의 수직 측면을 향한 제1 엄지손가락의 수평 이동(예를 들어, 디스플레이의 좌측 수직 측면을 향한 좌측 엄지손가락의 이동이나, 디스플레이의 우측 수직 측면을 향한 우측 손가락의 이동)을 포함하며, 제1 엄지손가락에 가장 가까운 디스플레이의 수직 측면을 향한 제1 엄지 손가락의 수평 이동의 검출에 응답하여, 장치는 분할 키보드의 좌측 및 우측의 크기를 줄인다(1320). 일부 실시예들에서, 단 한 개 엄지손가락에 의한 이동은 분할 키보드의 좌측 및 우측 양쪽 모두의 크기를 동시에 줄인다. 예를 들어, 도 5jjj 및 도 5kkk에서, 디스플레이(112) 상에서 제스처(5186)가 검출된다. 제스처(5186)는 좌측 엄지손가락이 디스플레이(112)의 좌측 수직 측면을 향하여 이동하는 것을 포함한다. 제스처(5186)의 검출에 응답하여, 좌측 분할 키보드 부분(5039-A) 및 우측 분할 키보드 부분(5039-B)는 크기가 동시에 줄어든다.
일부 실시예들에서, 분할 키보드의 좌측의 좌측 가장자리는, 분할 키보드의 좌측이 줄어들 때 (통상 디스플레이의 좌측 수직 측면 부근에 있는) 그 위치를 유지한다. 따라서, 분할 키보드의 좌측의 우측 가장자리는, 분할 키보드의 좌측이 줄어들 때 디스플레이의 좌측 수직 측면에 더 가깝게 이동한다. 이것은, 좌측 엄지손가락이 분할 키보드의 좌측의 우측 가장자리 부근의 키에 도달하기 쉽게 만들며, 키보드의 좌측이 줄어든 후에 사용자가 키보드의 좌측의 좌측 가장자리를 재배치시킬 필요성을 제거한다. 마찬가지로, 일부 실시예들에서, 분할 키보드의 우측의 우측 가장자리는, 분할 키보드의 우측이 줄어들 때 (통상 디스플레이의 우측 수직 측면 부근에 있는) 그 위치를 유지한다. 따라서, 분할 키보드의 우측의 좌측 가장자리는, 분할 키보드의 우측이 줄어들 때 디스플레이의 우측 수직 측면에 더 가깝게 이동한다. 이것은, 우측 엄지손가락이 분할 키보드의 우측의 좌측 가장자리 부근의 키에 도달하기 쉽게 만들며, 키보드의 우측이 줄어든 후에 사용자가 키보드의 우측의 우측 가장자리를 재배치시킬 필요성을 제거한다.
일부 실시예들에서, 제2 입력은 제1 엄지손가락에 가장 가까운 디스플레이의 수직 측면으로부터 멀어지는 제1 엄지손가락의 수평 이동(예를 들어, 디스플레이의 좌측 수직 측면으로부터 멀어지는 좌측 엄지손가락의 이동이나, 디스플레이의 우측 수직 측면으로부터 멀어지는 우측 손가락의 이동)을 포함하며, 제1 엄지손가락에 가장 가까운 디스플레이의 수직 측면으로부터 멀어지는 제1 엄지 손가락의 수평 이동의 검출에 응답하여, 장치는 분할 키보드의 좌측 및 우측의 크기를 증가시킨다(1322). 일부 실시예들에서, 단 한 개 엄지손가락에 의한 이동은 분할 키보드의 좌측 및 우측 양쪽 모두의 크기를 동시에 증가시킨다. 예를 들어, 도 5lll 및 도 5mmm에서, 디스플레이(112) 상에서 제스처(5188)가 검출된다. 제스처(5188)는 좌측 엄지손가락이 디스플레이(112)의 좌측 수직 측면으로부터 멀리 이동하는 것을 포함한다. 제스처(5188)의 검출에 응답하여, 좌측 분할 키보드 부분(5039-A) 및 우측 분할 키보드 부분(5039-B)은 크기가 동시에 증가한다.
도 14는 일부 실시예들에 따른 비분할 키보드와 분할 키보드간의 자동 변환 방법을 나타내는 흐름도이다. 방법(1400)은 디스플레이 및 터치-감지 표면을 갖는 전자 장치(예를 들어, 도 3의 장치(300), 또는 도 1의 휴대 다기능 장치(100))에서 수행된다. 일부 실시예들에서, 디스플레이는 터치 스크린 디스플레이이며, 터치-감지 표면은 디스플레이 상에 있다. 일부 실시예들에서, 디스플레이는 터치-감지 표면으로부터 분리되어 있다. 방법(1400)의 일부 동작들이 결합되거나 및/또는 일부 동작들의 순서가 변할 수도 있다.
후술되는 바와 같이, 방법(1400)은 사용자의 요구에 최상으로 부합하는 위치와 구성으로 소프트 키보드를 조정하는 효율적인 방법을 제공한다. 이 방법은, 사용자가 한 표면에 태블릿 컴퓨터를 놓거나(이 경우, 디스플레이의 하부의 비분할 키보드 상에서 타이핑하는 것이 더욱 효율적임) 양손으로 태블릿 컴퓨터를 잡고 있는 것(이 경우, 디스플레이의 하부로부터 떨어져 있는 분할 키보드 상에서의 2개-엄지손가락 타이핑이 더욱 효율적임)을 번갈아 행할 때 특히 유용하다. 이 방법은, 이용을 위해 소프트 키보드를 구성할 때 사용자에 주는 인지적 부담을 줄임으로써, 더욱 효율적인 인간-머신 인터페이스를 생성한다. 배터리-작동형 전자 장치의 경우, 사용자가 소프트 키보드를 더 빨리 더 효율적으로 구성할 수 있게 하는 것은 전력을 절감하고 다음 배터리 충전까지의 시간을 늘려준다.
장치는 디스플레이 상에 애플리케이션 콘텐츠 영역 및 비분할 키보드(예를 들어, 분할 키보드의 좌측 및 우측으로부터의 문자 키들을 포함하는 하나의, 통합된, 또는 병합된 키보드)를 동시에 디스플레이한다(1402). 비분할 키보드는 디스플레이의 하부에 위치한다. 예를 들어, 도 5ooo에서, (예를 들어, 노트 애플리케이션의) 텍스트 기입 영역(5002) 및 비분할 키보드(5008)가 디스플레이(112) 상에 디스플레이된다. 비분할 키보드(5008)가 디스플레이(112)의 하단에 디스플레이된다.
장치는, 터치-감지 표면 상의 제1 제스처(예를 들어, 디스플레이의 하부의 비분할 키보드에 대응하는 터치-감지 표면 상의 위치에서의 위쪽 플릭 또는 드래그 제스처, 또는 도 5ooo의 키(5012)와 같은 비분할 키보드 상의 미리 정의된 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 시작하는 위쪽 드래그 제스처)를 검출한다(1404). 예를 들어, 도 5ooo에서, 디스플레이(112)의 하단으로부터 멀어지는 위쪽 이동(5196)과 함께, 디스플레이(112) 상에서 제스처(5194)가 검출된다.
터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 장치는 제1 제스처에 따라 비분할 키보드를 분할 키보드로 변환하고 분할 키보드를 디스플레이의 하부로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시킨다(1406). 예를 들어, 제스처(5194)의 검출에 응답하여, 비분할 키보드(5008)는 분할 키보드(5198)로 변환되고, 도 5ppp 내지 도 5rrr에 도시된 바와 같이, 분할 키보드(5198)는 디스플레이(112)의 하단으로부터 멀리 이동된다. 일부 실시예들에서, 애플리케이션 콘텐츠 영역은, 도 5ooo에 도시된 바와 같이, 제1 제스처 이전 및 이후에 동일한 크기를 유지한다. 일부 실시예들에서, 제1 제스처의 검출에 응답하여, 애플리케이션 콘텐츠 영역은, 방법(900)에 관하여 전술된 바와 같이, 제1 크기로부터, 제1 크기보다 큰 제2 크기로 변한다.
일부 실시예들에서, 터치-감지 표면 상의 제1 제스처의 검출에 응답하여 그리고 비분할 키보드를 분할 키보드로 변환하기 이전에, 장치는 제1 제스처에 따라 비분할 키보드를 디스플레이의 하부로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시킨다(1408). 예를 들어, 도 5ppp에서, 비분할 키보드(5008)는, 분할 키보드 부분(5198-A 및 5198-B)으로의 분할의 시작 이전에 디스플레이(112)의 하단으로부터 멀리 이동된다.
일부 실시예들에서, 터치-감지 표면 상의 제1 제스처의 검출에 응답하여, 장치는 디스플레이의 하부로부터 멀리 키보드를 이동시키면서 비분할 키보드가 분할 키보드로 변환하는 애니메이션을 디스플레이한다(1410). 예를 들어, 도 5ppp 및 도 5qqq는 비분할 키보드(5008)로부터 분할 키보드(5198)로의 애니메이트된 천이의 순간들을 도시한다.
일부 실시예들에서, 디스플레이 상에 애플리케이션 콘텐츠 영역과, 디스플레이의 하부로부터 떨어져 위치해 있는 분할 키보드를 동시에 디스플레이하는 동안, 장치는, 터치-감지 표면 상의 제2 제스처(예를 들어, 분할 키보드에 대응하는 터치-감지 표면 상의 위치에서의 아래쪽 플릭 또는 드래그 제스처, 또는 도 5rrr의 키(5018)와 같은 분할 키보드 상의 미리 정의된 키의 위치에 대응하는 터치-감지 표면 상의 위치에서 시작하는 아래쪽 드래그 제스처)를 검출한다. 터치-감지 표면 상의 제2 제스처의 검출에 응답하여, 장치는 제2 제스처에 따라 분할 키보드를 비분할 키보드로 변환하고 비분할 키보드를 디스플레이의 하부으로 이동시킨다(1412). 예를 들어, 도 5rrr에서, 분할 키보드(5198)가 디스플레이(112) 상에 디스플레이된다. 분할 키보드(5198)가 디스플레이(112)의 하단으로부터 떨어져 디스플레이된다. 디스플레이(112)의 하단을 향한 아래쪽 이동(5204)과 함께, 디스플레이(112) 상에서 제스처(5202)가 검출된다. 제스처(5202)의 검출에 응답하여, 분할 키보드(5198)는 비분할 키보드(5008)로 변환되고, 도 5sss-5ttt 및 도 5ooo에 도시된 바와 같이, 비분할 키보드(5008)는 디스플레이(112)의 하단으로 이동된다.
일부 실시예들에서, 터치-감지 표면 상의 제2 제스처의 검출에 응답하여 그리고 분할 키보드를 비분할 키보드로 변환하기 이전에, 장치는 제2 제스처에 따라 비분할 키보드를 디스플레이의 하부을 향하여 애플리케이션 콘텐츠 영역 위로 이동시킨다(1414). 예를 들어, 도 5sss에서, 분할 키보드(5198)는, 분할 키보드 부분(5198-A 및 5198-B)의 병합의 개시 이전에 디스플레이(112)의 하부를 향하여 이동된다.
일부 실시예들에서, 터치-감지 표면 상의 제2 제스처의 검출에 응답하여, 장치는 디스플레이의 하부을 향하여 키보드를 이동시키면서 분할 키보드가 비분할 키보드로 변환하는 애니메이션을 디스플레이한다(1416). 예를 들어, 도 5sss 및 도 5ttt는 분할 키보드(5198)로부터 비분할 키보드(5008)로의 애니메이트된 천이의 순간들을 도시한다.
일부 실시예들에 따라, 도 15는 전술된 본 발명의 원리에 따라 구성된 전자 장치(1500)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 15에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 15에 도시된 바와 같이, 전자 장치(1500)는, 제1 텍스트 기입 영역과 비분할 키보드를 동시에 디스플레이하도록 구성된 디스플레이 유닛(1502), 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛(1504), 및 디스플레이 유닛(1502)과 터치-감지 표면 유닛(1504)에 결합된 처리 유닛(1506)을 포함한다. 일부 실시예들에서, 처리 유닛(1506)은, 검출 유닛(1508), 교체 유닛(1510), 입력 유닛(1512), 및 디스플레이 인에이블 유닛(1514)을 포함한다.
처리 유닛(1506)은, 터치-감지 표면 유닛(1504) 상의 제스처를 (예를 들어, 검출 유닛(1508)에 의해) 검출하고, 터치-감지 표면 유닛(1504) 상의 제스처의 검출에 응답하여, (예를 들어, 교체 유닛(1510)에 의해) 비분할 키보드를 통합 입력 영역으로 대체하도록 구성된다. 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함한다.
일부 실시예들에서, 통합 입력 영역은 제2 텍스트 기입 영역을 포함한다.
일부 실시예들에서, 제1 텍스트 기입 영역은 제1 크기로 텍스트를 디스플레이하는 텍스트 기입 영역이고, 제2 텍스트 기입 영역은 제1 크기보다 큰 제2 크기로 제1 텍스트 기입 영역의 텍스트의 일부를 디스플레이하는 텍스트 기입 영역이다.
일부 실시예들에서, 처리 유닛(1506)은, (예를 들어, 검출 유닛(1508)에 의해) 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 유닛(1504) 상의 위치에서 제스처를 검출하고; 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 유닛(1504) 상의 위치에서의 제스처의 검출에 응답하여, (예를 들어, 입력 유닛(1512) 및 디스플레이 인에이블 유닛(1514)에 의해) 대응하는 문자를 디스플레이 유닛(1502) 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에서, 전자 장치(1500)는 휴대 전자 장치이다.
일부 실시예들에서, 전자 장치(1502)는 터치-감지 디스플레이 유닛(1504)을 포함하는 터치-감지 디스플레이 유닛이다.
일부 실시예들에서, 제스처는, 디스플레이 유닛(1502) 상의 비분할 키보드의 위치에 대응하는 터치-감지 표면 유닛(1504) 상의 위치에서의 다중손가락 디핀치 제스처이다.
일부 실시예들에서, 제스처는 키보드 선택 아이콘 상의 탭 제스처이다.
일부 실시예들에서, 비분할 키보드를 통합 입력 영역으로 대체하는 것은, 비분할 키보드를 통합 입력 영역으로 천이시키는 애니메이션의 디스플레이를 인에이블하는 것을 포함한다.
일부 실시예들에서, 처리 유닛(1506)은, 통합 입력 영역을 디스플레이는 동안 터치-감지 표면 유닛(1504) 상의 제2 제스처를 (예를 들어, 검출 유닛(1508)에 의해) 검출하고, 터치-감지 표면 유닛(1504) 상의 제2 제스처의 검출에 응답하여, (예를 들어, 교체 유닛(1510)에 의해) 통합 입력 영역을 비분할 키보드로 대체하도록 구성된다.
일부 실시예들에서, 제2 제스처는, 디스플레이 유닛(1502) 상의 통합 입력 영역의 위치에 대응하는 터치-감지 표면 유닛(1504) 상의 위치에서의 다중손가락 핀치 제스처이다.
일부 실시예들에서, 제2 제스처는 키보드 선택 아이콘 상의 탭 제스처이다.
일부 실시예들에서, 통합 입력 영역을 비분할 키보드로 대체하는 것은 통합 입력 영역을 비분할 키보드로 천이시키는 애니메이션의 디스플레이를 인에이블하는 것을 포함한다.
일부 실시예들에 따라, 도 16은 전술된 본 발명의 원리에 따라 구성된 전자 장치(1600)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 16에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 16에 도시된 바와 같이, 전자 장치(1600)는, 제1 복수의 키를 포함하는 제1 키보드를 디스플레이하도록 구성된 디스플레이 유닛(1602); 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛(1604), 및 디스플레이 유닛(1602)과 터치-감지 표면 유닛(1604)에 결합된 처리 유닛(1606)을 포함한다. 일부 실시예들에서, 처리 유닛(1606)은, 검출 유닛(1608), 작동 유닛(1610), 교체 유닛(1612), 유지 유닛(1614), 및 디스에이블 유닛(1616)을 포함한다.
이 처리 유닛(1606)은, (예를 들어, 검출 유닛(1608)에 의해) 제1 키보드의 제1 키의 위치에 대응하는 터치-감지 표면 유닛(1604) 상의 위치에서 제1 시간에 키 작동 제스처를 검출하고; 제1 시간에서의 키 작동 제스처의 검출에 응답하여, (예를 들어, 작동 유닛(1610)에 의해) 제1 키를 작동하며; (예를 들어, 검출 유닛(1608)에 의해) 제1 시간 이후의 제2 시간에 터치-감지 표면 유닛(1604) 상에서, 키보드 선택 제스처에 대응하는 하나 이상의 접촉을 검출하고; 제1 시간 이후의 상기 제2 시간에서의 키보드 선택 제스처에 대응하는 하나 이상의 접촉의 검출에 응답하여, 제2 시간이 제1 시간 이후에 미리 정의된 기간을 초과할 때는 (예를 들어, 교체 유닛(1612)에 의해) 디스플레이 유닛(1602) 상의 제1 키보드를 제2 키보드로 대체하며, 제2 시간이 제1 시간 이후에 미리 정의된 기간보다 작을 때에는 (예를 들어, 유지 유닛(1614)에 의해) 디스플레이 유닛(1602) 상의 제1 키보드의 디스플레이를 유지하도록 구성된다.
일부 실시예들에서, 처리 유닛(1606)은, 제1 시간에서의 키 작동 제스처의 검출에 응답하여, (예를 들어, 디스에이블 유닛(1616)에 의해) 미리 정의된 기간 동안 키보드 선택 제스처에 대해 제스처 인식기를 디스에이블하도록 구성된다.
일부 실시예들에서, 전자 장치(1600)는 휴대 전자 장치이다.
일부 실시예들에서, 디스플레이 유닛(1602)은 터치-감지 표면 유닛(1604)을 포함하는 터치-감지 디스플레이 유닛이다.
일부 실시예들에서, 키보드 선택 제스처는, 디스플레이 유닛(1602) 상의 제1 키보드의 위치에 대응하는 터치-감지 표면 유닛(1604) 상의 위치에서의 다중손가락 제스처이다.
일부 실시예들에서, 제1 키보드를 제2 키보드로 대체하는 것은 제1 키보드를 제2 키보드로 천이시키는 애니메이션의 디스플레이를 인에이블하는 것을 포함한다.
일부 실시예들에 따라, 도 17은 전술된 본 발명의 원리에 따라 구성된 전자 장치(1700)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 17에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 17에 도시된 바와 같이, 전자 장치(1700)는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛(1702); 사용자 접촉과 상기 사용자 접촉의 이동을 수신하도록 구성된 터치-감지 표면 유닛(1704); 및 디스플레이 유닛(1702)과 터치-감지 표면 유닛(1704)에 결합된 처리 유닛(1706)을 포함한다. 일부 실시예들에서, 처리 유닛(1706)은 검출 유닛(1708) 및 이동 유닛(1710)을 포함한다.
이 처리 유닛(1706)은, (예를 들어, 검출 유닛(1708)에 의해) 통합 입력 영역의 중앙부에 대응하는 위치에서 터치-감지 표면 유닛(1704) 상의 제1 접촉을 검출하고; (예를 들어, 검출 유닛(1708)에 의해) 터치-감지 표면 유닛(1704)을 따른 제1 접촉의 이동을 검출하며; 터치-감지 표면 유닛(1704)을 따른 제1 접촉의 이동의 검출에 응답하여, 제1 접촉의 이동이 제1 이동 임계치를 초과하면 (예를 들어, 이동 유닛(1710)에 의해) 제1 접촉의 이동에 따라 디스플레이 유닛(1702) 상에서 통합 입력 영역을 이동시키고; (예를 들어, 검출 유닛(1708)에 의해) 분할 키보드에 대응하는 위치에서 터치-감지 표면 유닛(1704) 상의, 제1 접촉과는 별개의 제2 접촉을 검출하며; (예를 들어, 검출 유닛(1708)에 의해) 터치-감지 표면 유닛(1704)을 따른 제2 접촉의 이동을 검출하고; 터치-감지 표면 유닛(1704)을 따른 제2 접촉의 이동의 검출에 응답하여, 제2 접촉의 이동이 제2 이동 임계치를 초과하면 (예를 들어, 이동 유닛(1710)에 의해) 제2 접촉의 이동에 따라 디스플레이 유닛(1702) 상에서 통합 입력 영역을 이동시키도록 구성되고, 제2 이동 임계치는 제1 이동 임계치보다 크다.
일부 실시예들에서, 각각의 이동 임계치는 통합 입력 영역의 수직 중심라인으로부터의 각각의 접촉의 수평 거리의 함수이다.
일부 실시예들에서, 통합 입력 영역은 디스플레이 유닛(1702) 상의 수직 이동으로 제한되고, 통합 입력 영역은 각각의 접촉에 대한 이동 임계치가 초과될 때 각각의 접촉의 이동의 수직 성분에 따라 이동한다.
일부 실시예들에서, 분할 키보드의 좌측과 분할 키보드의 우측은, 통합 입력 영역의 이동 동안에 통합 입력 영역 내에서 서로에 관해 고정된 위치를 유지한다.
일부 실시예들에 따라, 도 18은 전술된 본 발명의 원리에 따라 구성된 전자 장치(1800)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 18에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 18에 도시된 바와 같이, 전자 장치(1800)는, 제1 크기를 갖는 애플리케이션 콘텐츠 영역과 키보드를 갖는 입력 영역 ―상기 입력 영역은 상기 제1 크기를 갖는 애플리케이션 콘텐츠 영역과는 분리되어 인접하며, 상기 입력 영역은 상기 디스플레이 유닛(1802)의 하단에 있음― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛(1802); 및 사용자의 제스처를 수신하도록 구성된 터치-감지 표면 유닛(1804); 및 디스플레이 유닛(1802)과 터치-감지 표면 유닛(1804)에 결합된 처리 유닛(1806)을 포함한다. 일부 실시예들에서, 처리 유닛(1806)은, 검출 유닛(1808), 이동 유닛(1810), 및 증가 유닛(1812)을 포함한다.
이 처리 유닛(1806)은, (예를 들어, 검출 유닛(1808)에 의해) 터치-감지 표면 유닛(1804) 상의 제스처를 검출하고; 터치-감지 표면 유닛(1804) 상의 제스처의 검출에 응답하여, (예를 들어, 이동 유닛(1810)에 의해) 입력 영역을 디스플레이 유닛(1802)의 하단으로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시키고, (예를 들어, 증가 유닛(1812)에 의해) 애플리케이션 콘텐츠 영역의 크기를 제1 크기보다 큰 제2 크기로 증가시키도록 구성된다.
일부 실시예들에서, 애플리케이션 콘텐츠 영역의 제1 크기는 제1 높이를 가지고, 애플리케이션 콘텐츠 영역의 제2 크기는 제2 높이를 가지며, 입력 영역은 입력 영역 높이를 가지고, 제2 높이는 제1 높이보다 입력 영역 높이와 동일한 양만큼 크다.
일부 실시예들에 따라, 도 19는 전술된 본 발명의 원리에 따라 구성된 전자 장치(1900)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 19에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 19에 도시된 바와 같이, 전자 장치(1900)는, 텍스트 기입 영역, 분할 키보드의 좌측, 및 분할 키보드의 우측 ―상기 분할 키보드의 좌측은 복수열의 키를 포함하고 상기 분할 키보드의 우측은 대응하는 복수열의 키를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛(1902); 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛(1904); 디스플레이 유닛(1902)과 터치-감지 표면 유닛(1904)에 결합된 처리 유닛(1906)을 포함한다. 일부 실시예들에서, 처리 유닛(1906)은, 검출 유닛(1908), 기입 유닛(1910), 및 중지 유닛(1912)을 포함한다.
이 처리 유닛(1906)은, (예를 들어, 검출 유닛(1908)에 의해) 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 유닛(1904) 상의 위치에서 제스처를 검출하고; 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 유닛(1904) 상의 위치에서의 제스처의 검출에 응답하여, (예를 들어, 기입 유닛(1910)에 의해) 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 텍스트 기입 영역에 입력하도록 구성된다.
일부 실시예들에서, 분할 키보드의 좌측의 각 열의 최우측키의 우측에서 인접해 있는 미리 정의된 영역은, 분할 키보드의 우측의 대응하는 각 열의 최좌측 키에 대응하는 디스플레이되지 않은 키 작동 영역이다.
일부 실시예들에서, 이 처리 유닛(1906)은, (예를 들어, 검출 유닛(1908)에 의해) 분할 키보드의 우측의 각 열의 최좌측키의 좌측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 유닛(1904) 상의 위치에서 제스처를 검출하고; 분할 키보드의 우측의 각 열의 최좌측키의 좌측에서 인접해 있는 미리 정의된 영역에 대응하는 터치-감지 표면 유닛(1904) 상의 위치에서의 제스처의 검출에 응답하여, (예를 들어, 기입 유닛(1910)에 의해) 분할 키보드의 좌측의 대응하는 각 열의 최우측키에 대응하는 문자를 텍스트 기입 영역에 입력하도록 구성된다.
일부 실시예들에서, 분할 키보드의 우측의 각 열의 최좌측키의 좌측에서 인접해 있는 미리 정의된 영역은, 분할 키보드의 좌측의 대응하는 각 열의 최우측 키에 대응하는 디스플레이되지 않은 키 작동 영역이다.
일부 실시예들에서, 처리 유닛(1906)은, 제스처의 검출 이전에, (예를 들어, 검출 유닛(1908)에 의해) 분할 키보드의 가시적 키의 위치에 대응하는 터치-감지 표면 유닛(1904) 상의 위치에서 제1 시간에 키 작동 제스처를 검출하고; 제1 시간 이후의 제2 시간에서의 제스처의 검출에 응답하여, 제2 시간이 제1 시간 이후의 미리 정의된 기간보다 작을 때에는 (예를 들어, 기입 유닛(1910)에 의해) 분할 키보드의 우측의 대응하는 각 열의 최좌측키에 대응하는 문자를 텍스트 입력 영역에 입력하고; 제2 시간이 제1 시간 이후에 미리 정의된 기간을 초과할 때는(예를 들어, 중지 유닛(1912)에 의해) 분할 키보드의 우측의 대응하는 각 열의 최좌측 키에 대응하는 문자를 텍스트 기입 영역에 입력하는 것을 중단한다.
일부 실시예들에 따라, 도 20은 전술된 본 발명의 원리에 따라 구성된 전자 장치(2000)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 20에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 20에 도시된 바와 같이, 전자 장치(2000)는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 상기 분할 키보드의 우측을 갖는 우측부, 및 상기 좌측부와 상기 우측부 사이에 있고 제2 텍스트 기입 영역을 갖는 중앙부를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛(2002); 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛(2004); 및 상기 디스플레이 유닛(2002)과 상기 터치-감지 표면 유닛(2004)에 결합된 처리 유닛(2006)을 포함한다. 일부 실시예들에서, 처리 유닛(2006)은, 검출 유닛(2008), 디스플레이 인에이블 유닛(2010), 입력 유닛(2012), 이동 유닛(2014), 실행 유닛(2016), 선택 유닛(2018), 작성 유닛(2020), 포맷팅 유닛(2022), 및 기입 유닛(2024)을 포함한다.
처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 유닛(2004) 상의 위치에서 제스처를 검출하고; 분할 키보드의 문자 키의 위치에 대응하는 터치-감지 표면 유닛(2004) 상의 위치에서의 제스처의 검출에 응답하여, (예를 들어, 입력 유닛(2012) 및 디스플레이 인에이블 유닛(2010)에 의해) 대응하는 문자를 디스플레이 유닛(2002) 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 동시 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에서, 제1 텍스트 기입 영역은 제1 크기로 텍스트를 디스플레이하고, 제2 텍스트 기입 영역은 제1 크기보다 큰 제2 크기로 제1 텍스트 기입 영역의 텍스트의 일부를 디스플레이한다.
일부 실시예들에서, 통합 입력 영역의 폭은 디스플레이 유닛(2002)의 폭과 동일하다.
일부 실시예들에서, 분할 키보드의 좌측과 분할 키보드의 우측은, 통합 입력 영역의 이동 동안에 통합 입력 영역 내에서 서로에 관해 고정된 위치를 유지한다.
일부 실시예들에서, 제2 텍스트 기입 영역은 텍스트가 입력될 때 디스플레이 유닛(2002) 상에서 정지된 채로 유지되는 삽입 포인트를 포함한다.
일부 실시예들에서, 제2 텍스트 기입 영역은 삽입 포인트를 포함하고, 처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 제2 텍스트 기입 영역의 삽입 포인트에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처를 검출하고; (예를 들어, 이동 유닛(2014)에 의해) 제2 텍스트 기입 영역에서 삽입 포인트에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처에 따라 제2 텍스트 기입 영역에서 삽입 포인트를 이동시키도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 디스플레이 인에이블 유닛(2010)에 의해) 통합 입력 영역의 중앙 부분에서의 텍스트 편집 제어부의 디스플레이를 인에이블하고; (예를 들어, 검출 유닛(2008)에 의해) 통합 입력 영역의 중앙 부분에서의 텍스트 편집 제어부에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처를 검출하며; (예를 들어, 실행 유닛(2016)에 의해) 텍스트 편집 제어부에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 제스처에 따라 텍스트 편집 명령을 실행하도록 구성된다.
일부 실시예들에서, 통합 입력 영역의 중앙 부분의 텍스트 편집 제어부는 제1 텍스트 기입 영역의 대응하는 텍스트 편집 제어부를 가진다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 디스플레이 인에이블 유닛(2010)에 의해) 통합 입력 영역의 중앙 부분에서의 사용자-선택가능한 입력 요소의 디스플레이를 인에이블하고; (예를 들어, 검출 유닛(2008)에 의해) 통합 입력 영역의 중앙 부분에서의 사용자-선택가능한 입력 요소에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처를 검출하며; 사용자-선택가능한 입력 요소에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처의 검출에 응답하여, (예를 들어, 선택 유닛(2018)에 의해) 사용자-선택가능한 입력 요소를 선택하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 제스처를 검출하고; 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 제스처의 검출에 응답하여, (예를 들어, 디스플레이 인에이블 유닛(2010)에 의해) 팝업 뷰의 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 복수의 제스처를 검출하고; (예를 들어, 기입 유닛(2024)에 의해) 복수의 제스처에 대응하는 문자를 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 통합 입력 영역의 중앙 부분에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 복수의 제스처를 검출하고; (예를 들어, 작성 유닛(2020)에 의해) 복수의 제스처에 대응하는 도안을 작성하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 디스플레이 인에이블 유닛(2010)에 의해) 통합 입력 영역의 중앙 부분에서의 제안된 단어의 디스플레이를 인에이블하고; (예를 들어, 검출 유닛(2008)에 의해) 제안된 단어에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 제스처를 검출하며; (예를 들어, 실행 유닛(2016)에 의해) 제안된 단어에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 제스처에 따라 텍스트 편집 명령을 실행하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 디스플레이 인에이블 유닛(2010)에 의해) 통합 입력 영역의 중앙 부분에서의 복수의 이모지 문자의 디스플레이를 인에이블하고; (예를 들어, 검출 유닛(2008)에 의해) 복수의 이모지 문자들 내의 한 이모지 문자에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처를 검출하고; 그 이모지 문자에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처의 검출에 응답하여, (예를 들어, 입력 유닛(2012) 및 디스플레이 인에이블 유닛(2010)에 의해) 이모지 문자를 디스플레이 유닛(2002) 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 디스플레이 인에이블 유닛(2010)에 의해) 통합 입력 영역의 중앙 부분에서의 복수의 유니코드 문자의 디스플레이를 인에이블하고; (예를 들어, 검출 유닛(2008)에 의해) 복수의 유니코드 문자들 내의 한 유니코드 문자에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처를 검출하고; 그 유니코드 문자에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처의 검출에 응답하여, (예를 들어, 입력 유닛(2012) 및 디스플레이 인에이블 유닛(2010)에 의해) 유니코드 문자를 디스플레이 유닛(2002) 상의 제1 텍스트 기입 영역과 제2 텍스트 기입 영역에 입력하고 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 제2 텍스트 기입 영역에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처를 검출하고; 제2 텍스트 기입 영역에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처의 검출에 응답하여, (예를 들어, 선택 유닛(2018)에 의해) 텍스트의 범위를 선택하도록 구성된다.
일부 실시예들에서, 처리 유닛(2006)은, (예를 들어, 검출 유닛(2008)에 의해) 제2 텍스트 기입 영역의 하나 이상의 단어에 대응하는 위치에서 터치-감지 표면 유닛(2004) 상의 제스처를 검출하고; 제2 텍스트 기입 영역에 대응하는 위치에서의 터치-감지 표면 유닛(2004) 상의 제스처의 검출에 응답하여, (예를 들어, 포맷팅 유닛(2022)에 의해) 하나 이상의 단어를 포맷팅하도록 구성된다.
일부 실시예들에서, 통합 입력 영역의 중앙부의 입력 요소들은 사용자-구성가능하다.
일부 실시예들에 따라, 도 21은 전술된 본 발명의 원리에 따라 구성된 전자 장치(2100)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 21에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 21에 도시된 바와 같이, 전자 장치(2100)는, 하나 이상의 텍스트 기입 영역을 포함하는 애플리케이션 콘텐츠 영역과 이 애플리케이션 콘텐츠 영역 위에 디스플레이되는 키보드를 갖는 입력 영역을 동시에 디스플레이하도록 구성된 디스플레이 유닛(2102); 사용자 제스처를 수신하도록 구성된 터치-감지 표면 유닛(2104); 및 디스플레이 유닛(2102)과 터치-감지 표면 유닛(2104)에 결합된 처리 유닛(2106)을 포함한다. 일부 실시예들에서, 처리 유닛(2106)은 검출 유닛(2108) 및 이동 유닛(2110)을 포함한다.
이 처리 유닛은(2106), (예를 들어, 검출 유닛(2108)에 의해) 디스플레이 유닛(2102) 상의 입력 영역에 대응하는 위치에서 터치-감지 표면 유닛(2104) 상의 드래그 제스처를 검출하고; 드래그 제스처의 검출에 응답하여, (예를 들어, 이동 유닛(2110)에 의해) 드래그 제스처에 따라 상기 디스플레이 유닛(2102) 상에서 입력 영역을 이동시키며; (예를 들어, 검출 유닛(2108)에 의해) 디스플레이 유닛(2102) 상의 입력 영역에 대응하는 위치에서 터치-감지 표면 유닛(2104) 상의 플릭 제스처를 검출하고; 플릭 제스처의 검출에 응답하여, (예를 들어, 이동 유닛(2110)에 의해) 입력 영역이 애플리케이션 콘텐츠 영역 내의 텍스트 기입 영역 바로 아래에 인접한 위치에 오도록, 플릭 제스처에 따라 관성에 의해 디스플레이 유닛(2102) 상에서 입력 영역을 이동시키도록 구성된다.
일부 실시예들에서, 플릭 제스처에 따라 관성에 의해 디스플레이 유닛(2102) 상에서 입력 영역을 이동시키는 것은, 플릭 제스처에 기초하여 입력 영역의 궤적을 계산하고; 미리 정의된 후보 기준을 만족하는 애플리케이션 콘텐츠 영역 내의 하나 이상의 텍스트 기입 영역을 검색하며; 하나 이상의 후보 텍스트 기입 영역이 발견되면, 각각의 후보 텍스트 기입 영역을 입력 영역이 바로 아래에서 인접하게 오게 될 텍스트 기입 영역으로서 식별하고 그에 따라 궤적을 조정하는 것을 포함한다.
일부 실시예들에서, 각각의 후보 텍스트 기입 영역은, 궤적의 종료 포인트에 대한 각 후보 텍스트 기입 영역의 근접도에 기초하여 입력 영역이 바로 아래에서 인접하게 오게 되는 텍스트 기입 영역으로서 식별된다.
일부 실시예에서, 궤적은, 입력 영역의 시뮬레이트된 물리적 속성에 기초하여 계산된다.
일부 실시예들에서, 각각의 텍스트 기입 영역이 궤적의 종료 포인트의 미리 정의된 거리 내에 있다면 각각의 텍스트 기입 영역에 대해 후보 기준이 만족된다.
일부 실시예들에서, 후보 텍스트 기입 영역들 중 하나를 입력 영역이 바로 아래에서 인접하게 오게 될 텍스트 기입 영역으로서 식별하는 것은, 궤적의 종료 포인트에 가장 가까운 각각의 후보 텍스트 기입 영역을, 입력 영역이 바로 아래에 인접하게 오게 될 텍스트 기입 영역으로서 선택하는 것을 포함한다.
일부 실시예들에 따라, 도 22는 전술된 본 발명의 원리에 따라 구성된 전자 장치(2200)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 22에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 22에 도시된 바와 같이, 전자 장치(2200)는, 제1 텍스트 기입 영역과 통합 입력 영역 ―상기 통합 입력 영역은 분할 키보드의 좌측을 갖는 좌측부, 분할 키보드의 우측을 갖는 우측부, 및 좌측부와 우측부 사이의 중앙부를 포함함― 을 동시에 디스플레이하도록 구성된 디스플레이 유닛(2202); 사용자 입력을 수신하도록 구성된 터치-감지 표면 유닛(2204); 디스플레이 유닛(2202)과 터치-감지 표면 유닛(2204)에 결합된 처리 유닛(2206)을 포함한다. 일부 실시예들에서, 처리 유닛(2206)은, 검출 유닛(2208), 진입 유닛(2210), 조정 유닛(2212), 종료 유닛(2214), 감소 유닛(2216), 및 증가 유닛(2218)을 포함한다.
이 처리 유닛(2206)은, (예를 들어, 검출 유닛(2208)에 의해) 터치-감지 표면 유닛(2204) 상의 제1 입력을 검출하고; 제1 입력의 검출에 응답하여, (예를 들어, 진입 유닛(2210)에 의해) 통합 입력 영역에 대한 재구성 모드에 진입하며; 통합 입력 영역에 대한 재구성 모드에 있는 동안, (예를 들어, 검출 유닛(2208)에 의해) 제1 엄지 및/또는 제2 엄지에 의한 제2 입력을 검출하고; 제2 입력의 검출에 응답하여, (예를 들어, 조정 유닛(2212)에 의해) 통합 입력 영역 내의 분할 키보드의 좌측 및 우측 중 적어도 하나의 크기를 조정하며; (예를 들어, 검출 유닛(2208)에 의해) 제3 입력을 검출하고; 상기 제3 입력의 검출에 응답하여, (예를 들어, 종료 유닛(2214)에 의해) 통합 입력 영역에 대한 재구성 모드를 종료하도록 구성된다.
일부 실시예들에서, 제1 입력은 제1 엄지손가락, 및 제1 엄지손가락과는 별개의 제2 엄지손가락을 포함한다.
일부 실시예들에서, 제3 입력은 제1 엄지손가락 및/또는 제2 엄지손가락을 포함한다.
일부 실시예들에서, 제2 입력은 디스플레이 유닛(2202)의 좌측 수직 측면을 향한 좌측 엄지손가락의 수평 이동을 포함하며; 처리 유닛(2206)은, 디스플레이 유닛(2202)의 좌측 수직 측면을 향한 좌측 엄지손가락의 수평 이동의 검출에 응답하여, (예를 들어, 감소 유닛(2216)에 의해) 분할 키보드의 좌측의 크기를 줄이도록 구성된다.
일부 실시예들에서, 제2 입력은 디스플레이 유닛(2202)의 좌측 수직 측면으로부터 멀어지는 좌측 엄지손가락의 수평 이동을 포함하며; 처리 유닛(2206)은, 디스플레이 유닛(2202)의 좌측 수직 측면으로부터 멀어지는 좌측 엄지손가락의 수평 이동의 검출에 응답하여, (예를 들어, 증가 유닛(2218)에 의해) 분할 키보드의 좌측의 크기를 증가시키도록 구성된다.
일부 실시예들에서, 제2 입력은 제1 엄지손가락에 가장 가까운 디스플레이 유닛(2202)의 수직 측면을 향한 제1 엄지손가락의 수평 이동을 포함하며; 처리 유닛(2206)은, 제1 엄지손가락에 가장 가까운 디스플레이 유닛(2202)의 수직 측면을 향한 제1 엄지손가락의 수평 이동의 검출에 응답하여, (예를 들어, 감소 유닛(2216)에 의해) 분할 키보드의 좌측 및 우측의 크기를 줄이도록 구성된다.
일부 실시예들에서, 제2 입력은 제1 엄지손가락에 가장 가까운 디스플레이 유닛(2202)의 수직 측면으로부터 멀어지는 제1 엄지손가락의 수평 이동을 포함하며; 처리 유닛(2206)은, 제1 엄지손가락에 가장 가까운 디스플레이 유닛(2202)의 수직 측면으로부터 멀어지는 제1 엄지손가락의 수평 이동의 검출에 응답하여, (예를 들어, 증가 유닛(2218)에 의해) 분할 키보드의 좌측 및 우측의 크기를 증가시키도록 구성된다.
일부 실시예들에 따라, 도 23은 전술된 본 발명의 원리에 따라 구성된 전자 장치(2300)의 기능 블록도를 도시한다. 장치의 기능 블록들은, 본 발명의 원리를 실행하기 위해 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합에 의해 구현될 수도 있다. 당업자라면, 도 23에 기술된 기능 블록들은 전술된 본 발명의 원리를 구현하기 위해 결합되거나 서브-블록들로 분리될 수도 있다는 것을 이해할 것이다. 따라서, 여기서의 설명은 여기서 설명된 기능 블록들의 임의의 가능한 조합 또는 분리 또는 추가의 정의를 지원할 수도 있다.
도 23에 도시된 바와 같이, 전자 장치(2300)는, 애플리케이션 콘텐츠 영역과 비분할 키보드 ―상기 비분할 키보드는 디스플레이 유닛(2302)의 하단에 위치함― 를 동시에 디스플레이하도록 구성된 디스플레이 유닛(2302); 제스처를 수신하도록 구성된 터치-감지 표면 유닛(2304); 및 디스플레이 유닛(2302)과 터치-감지 표면 유닛(2304)에 결합된 처리 유닛(2306)을 포함한다. 일부 실시예들에서, 처리 유닛(2306)은, 검출 유닛(2308), 변환 유닛(2310), 이동 유닛(2312), 및 디스플레이 인에이블 유닛(2314)을 포함한다.
이 처리 유닛(2306)은, (예를 들어, 검출 유닛(2308)에 의해) 터치-감지 표면 유닛(2304) 상의 제1 제스처를 검출하고; 터치-감지 표면 유닛(2304) 상의 제1 제스처의 검출에 응답하여, (예를 들어, 변환 유닛(2310)에 의해) 비분할 키보드를 분할 키보드로 변환하고, (예를 들어, 이동 유닛(2312)에 의해) 제1 제스처에 따라 이 분할 키보드를 디스플레이 유닛(2302)의 하단으로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시키도록 구성된다.
일부 실시예들에서, 이 처리 유닛(2306)은, 터치-감지 표면 유닛(2304) 상의 제1 제스처의 검출에 응답하여, 비분할 키보드를 분할 키보드로 변환하기 이전에, (예를 들어, 이동 유닛(2312)에 의해) 제1 제스처에 따라 비분할 키보드를 디스플레이 유닛(2302)의 하단으로부터 멀리 애플리케이션 콘텐츠 영역 위로 이동시킨다.
일부 실시예들에서, 이 처리 유닛(2306)은, 터치-감지 표면 유닛(2304) 상의 제1 제스처의 검출에 응답하여, (예를 들어, 디스플레이 인에이블 유닛(2314)에 의해) 디스플레이 유닛(2302)의 하단으로부터 멀리 키보드를 이동시키면서 비분할 키보드가 분할 키보드로 변환되는 애니메이션의 디스플레이를 인에이블하도록 구성된다.
일부 실시예들에서, 이 처리 유닛(2306)은, 디스플레이 유닛(2302) 상에 애플리케이션 콘텐츠 영역과 분할 키보드 ― 상기 분할 키보드는 디스플레이 유닛(2302)의 하단으로부터 떨어져 위치함― 를 동시에 디스플레이하면서; (예를 들어, 검출 유닛(2308)에 의해) 터치-감지 표면 유닛(2304) 상의 제2 제스처를 검출하고; 터치-감지 표면 유닛(2304) 상의 제2 제스처의 검출에 응답하여, (예를 들어, 변환 유닛(2310)에 의해) 분할 키보드를 비분할 키보드로 변환하며, (예를 들어, 이동 유닛(2312)에 의해) 제2 제스처에 따라 비분할 키보드를 디스플레이 유닛(2302)의 하단으로 이동시키도록 구성된다.
일부 실시예들에서, 이 처리 유닛(2306)은, 터치-감지 표면 유닛(2304) 상의 제2 제스처의 검출에 응답하여, 분할 키보드를 비분할 키보드로 변환하기 이전에, (예를 들어, 이동 유닛(2312)에 의해) 제2 제스처에 따라 비분할 키보드를 디스플레이 유닛(2302)의 하부를 향하여 애플리케이션 콘텐츠 영역 위로 이동시킨다.
일부 실시예들에서, 처리 유닛(2306)은, 터치-감지 표면 유닛(2304) 상의 제2 제스처의 검출에 응답하여, (예를 들어, 디스플레이 인에이블 유닛(2314)에 의해) 디스플레이 유닛(2302)의 하부를 향하여 키보드를 이동시키면서 분할 키보드가 비분할 키보드로 변환되는 애니메이션의 디스플레이를 인에이블하도록 구성된다.
전술된 정보 처리 방법들에서의 동작들은, 범용 프로세서나 주문형 칩과 같은 정보 처리 장치에서 하나 이상의 기능 모듈들을 실행시킴으로써 구현될 수도 있다. 이들 모듈들, 이들 모듈의 조합, 및/또는 (예를 들어, 도 1a 및 도 3을 참조하여 전술된) 일반적 하드웨어와의 조합은 본 발명의 보호 범위 내에 모두 포함된다.
도 6a 및 도 6b, 도 7a 및 도 7b, 도 8a 및 도 8b, 도 9, 도 10a 및 도 10b, 도 11a 내지 도 11d, 도 12a 및 도 12b, 도 13a 및 도 13b, 도 14를 참조하여 전술된 동작들은 도 1a 및 도 1b에 기술된 컴포넌트들에 의해 구현될 수도 있다. 예를 들어, 검출 동작(604), 및 교체 동작(610)은, 이벤트 분류기(170), 이벤트 인식기(180), 및 이벤트 처리기(190)에 의해 구현될 수 있다. 이벤트 분류기(170) 내의 이벤트 모니터(171)는 터치-감지 디스플레이(112) 상의 접촉을 검출하고, 이벤트 디스패처 모듈(174)은 그 이벤트 정보를 애플리케이션(136-1)에 전달한다. 애플리케이션(136-1)의 각각의 이벤트 인식기(180)는 그 이벤트 정보를 각각의 이벤트 정의(186)와 비교하고, 터치-감지 표면 상의 제1 위치에서의 제1 접촉이 사용자 인터페이스 상의 선택과 같은 미리 정의된 이벤트나 서브-이벤트에 대응하는지를 판정한다. 각각의 미리 정의된미리 정의된서브-이벤트가 검출되면, 이벤트 인식기(180)는 이벤트나 서브-이벤트의 검출과 연관된 이벤트 처리기(190)를 활성화한다. 이벤트 처리기(190)는, 애플리케이션 내부 상태(192)를 갱신하기 위해 데이터 갱신기(176) 또는 객체 갱신기(177)를 이용하거나 호출할 수도 있다. 일부 실시예들에서, 이벤트 처리기(190)는 애플리케이션에 의해 디스플레이되는 것을 갱신하기 위해 각각의 GUI 갱신기(178)에 액세스한다. 마찬가지로, 도 1a 및 도 1b에 도시된 컴포넌트들에 기초하여 다른 프로세스들이 어떻게 구현될 수 있는지는 당업자에게 명백할 것이다.
전술된 설명은, 설명의 목적을 위해, 구체적인 실시예들을 참조하여 기술되었다. 그러나, 상기의 예시적 논의는, 철저히 남김없이 드러내거나 본 발명을 정확히 개시된 형태로 제한하기 위한 것이 아니다. 상기의 교시에 비추어 많은 수정과 변형이 가능하다. 본 발명의 원리와 그 실제적 적용을 최상으로 설명함으로써 당업자가 본 발명 및 고려중인 특정한 이용에 적합한 다양한 수정을 가한 다양한 실시예들을 최상으로 이용할 수 있도록, 실시예들이 선택되고 설명되었다.

Claims (1)

  1. 제1항에 기재된 장치.
KR1020147027252A 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스 KR20140126770A (ko)

Applications Claiming Priority (23)

Application Number Priority Date Filing Date Title
US41086210P 2010-11-05 2010-11-05
US61/410,862 2010-11-05
US13/076,395 US9141285B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,399 2011-03-30
US13/076,389 US8547354B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,392 2011-03-30
US13/076,392 US8593422B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,397 US8754860B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,389 2011-03-30
US13/076,393 US8648823B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,395 2011-03-30
US13/076,391 US9146673B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,399 US8659562B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,401 US8587540B2 (en) 2010-11-05 2011-03-30 Device, method, and graphical user interface for manipulating soft keyboards
US13/076,393 2011-03-30
US13/076,401 2011-03-30
US13/076,397 2011-03-30
US13/076,391 2011-03-30
US201161493496P 2011-06-05 2011-06-05
US61/493,496 2011-06-05
US13/243,599 US8587547B2 (en) 2010-11-05 2011-09-23 Device, method, and graphical user interface for manipulating soft keyboards
US13/243,599 2011-09-23
PCT/US2011/059092 WO2012061569A2 (en) 2010-11-05 2011-11-03 Device, method, and graphical user interface for manipulating soft keyboards

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020137014110A Division KR101503194B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스

Publications (1)

Publication Number Publication Date
KR20140126770A true KR20140126770A (ko) 2014-10-31

Family

ID=46025100

Family Applications (5)

Application Number Title Priority Date Filing Date
KR1020147027252A KR20140126770A (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020137013933A KR101511883B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020147015535A KR101836564B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020127030352A KR101836540B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020137014110A KR101503194B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스

Family Applications After (4)

Application Number Title Priority Date Filing Date
KR1020137013933A KR101511883B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020147015535A KR101836564B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020127030352A KR101836540B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스
KR1020137014110A KR101503194B1 (ko) 2010-11-05 2011-11-03 소프트 키보드를 조작하기 위한 장치, 방법, 및 그래픽 사용자 인터페이스

Country Status (10)

Country Link
US (2) US8587547B2 (ko)
EP (3) EP2545434B1 (ko)
JP (5) JP5698845B2 (ko)
KR (5) KR20140126770A (ko)
CN (4) CN107704083B (ko)
AU (6) AU2011323301B2 (ko)
BR (3) BR112013011098B1 (ko)
HK (1) HK1190212A1 (ko)
NL (6) NL2007721C2 (ko)
WO (6) WO2012061628A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180115699A (ko) * 2016-02-23 2018-10-23 마이스크립트 다중 입력 관리를 위한 시스템 및 방법

Families Citing this family (146)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8018440B2 (en) 2005-12-30 2011-09-13 Microsoft Corporation Unintentional touch rejection
US10048860B2 (en) 2006-04-06 2018-08-14 Google Technology Holdings LLC Method and apparatus for user interface adaptation
KR101578430B1 (ko) * 2009-07-13 2015-12-18 엘지전자 주식회사 이동 단말기
US8621380B2 (en) * 2010-01-06 2013-12-31 Apple Inc. Apparatus and method for conditionally enabling or disabling soft buttons
US9965165B2 (en) 2010-02-19 2018-05-08 Microsoft Technology Licensing, Llc Multi-finger gestures
US9367205B2 (en) 2010-02-19 2016-06-14 Microsoft Technolgoy Licensing, Llc Radial menus with bezel gestures
US9454304B2 (en) 2010-02-25 2016-09-27 Microsoft Technology Licensing, Llc Multi-screen dual tap gesture
US20110242138A1 (en) * 2010-03-31 2011-10-06 Tribble Guy L Device, Method, and Graphical User Interface with Concurrent Virtual Keyboards
US8593422B2 (en) 2010-11-05 2013-11-26 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
KR101821160B1 (ko) * 2010-12-10 2018-03-08 삼성전자 주식회사 휴대단말에서 사용자 키패드 제공 방법 및 장치
US10365819B2 (en) 2011-01-24 2019-07-30 Apple Inc. Device, method, and graphical user interface for displaying a character input user interface
US9250798B2 (en) 2011-01-24 2016-02-02 Apple Inc. Device, method, and graphical user interface with a dynamic gesture disambiguation threshold
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
CN103034351A (zh) * 2011-09-29 2013-04-10 富泰华工业(深圳)有限公司 触摸屏电子装置及其虚拟键盘的显示和控制方法
KR20130052151A (ko) * 2011-11-11 2013-05-22 삼성전자주식회사 터치스크린을 구비한 휴대 단말기의 데이터 입력 방법 및 장치
KR101972924B1 (ko) 2011-11-11 2019-08-23 삼성전자주식회사 휴대용 기기에서 부분 영역의 터치를 이용한 전체 영역 지정을 위한 방법 및 장치
US9395868B2 (en) 2011-12-06 2016-07-19 Google Inc. Graphical user interface window spacing mechanisms
KR101846447B1 (ko) * 2011-12-08 2018-04-06 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
KR101919853B1 (ko) * 2011-12-23 2018-11-19 삼성전자주식회사 디스플레이 장치 및 그 잠금 해제 방법
KR20130083195A (ko) * 2012-01-12 2013-07-22 삼성전자주식회사 터치를 이용한 키보드 레이아웃 변경을 위한 방법 및 장치
US20130185668A1 (en) * 2012-01-16 2013-07-18 Gulfstream Aerospace Corporation Virtual keyboard arrangement
JP6184053B2 (ja) * 2012-01-18 2017-08-23 キヤノン株式会社 情報端末、表示制御方法、およびプログラム
US9367085B2 (en) 2012-01-26 2016-06-14 Google Technology Holdings LLC Portable electronic device and method for controlling operation thereof taking into account which limb possesses the electronic device
EP2813936A4 (en) * 2012-02-07 2015-09-30 Nec Corp INFORMATION PROCESSING DEVICE, DISPLAY FORM CONTROL METHOD, AND NON-TEMPORARY COMPUTER-READABLE MEDIUM
JP5639111B2 (ja) * 2012-04-27 2014-12-10 京セラドキュメントソリューションズ株式会社 情報処理装置及び画像形成装置
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN105260049B (zh) 2012-05-09 2018-10-23 苹果公司 用于响应于用户接触来显示附加信息的设备、方法和图形用户界面
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
EP3264252B1 (en) 2012-05-09 2019-11-27 Apple Inc. Device, method, and graphical user interface for performing an operation in accordance with a selected mode of operation
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169853A1 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for providing tactile feedback for operations performed in a user interface
CN106201316B (zh) 2012-05-09 2020-09-29 苹果公司 用于选择用户界面对象的设备、方法和图形用户界面
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
JP6182207B2 (ja) 2012-05-09 2017-08-16 アップル インコーポレイテッド ユーザインタフェースオブジェクトのアクティブ化状態を変更するためのフィードバックを提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
JP6002836B2 (ja) 2012-05-09 2016-10-05 アップル インコーポレイテッド ジェスチャに応答して表示状態間を遷移するためのデバイス、方法、及びグラフィカルユーザインタフェース
US10198163B2 (en) * 2012-06-08 2019-02-05 Nec Corporation Electronic device and controlling method and program therefor
KR102096070B1 (ko) * 2012-06-22 2020-04-14 삼성전자주식회사 터치 인식 개선 방법 및 그 전자 장치
KR101899817B1 (ko) * 2012-08-01 2018-09-19 엘지전자 주식회사 이동단말기 및 그 제어 방법
CN103577090A (zh) * 2012-08-10 2014-02-12 台湾视讯系统股份有限公司 以触控屏幕建构触控及键盘功能的方法及装置
US9959038B2 (en) * 2012-08-30 2018-05-01 Google Llc Displaying a graphic keyboard
EP2897055A4 (en) * 2012-09-11 2016-04-06 Toshiba Kk INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, AND PROGRAM
CN103677645B (zh) * 2012-09-11 2017-06-27 联想(北京)有限公司 一种候选对象显示方法和装置
US10139868B2 (en) * 2012-09-21 2018-11-27 Apple Inc. Cover for electronic device
KR102044829B1 (ko) 2012-09-25 2019-11-15 삼성전자 주식회사 휴대단말기의 분할화면 처리장치 및 방법
US9547375B2 (en) * 2012-10-10 2017-01-17 Microsoft Technology Licensing, Llc Split virtual keyboard on a mobile computing device
US9582122B2 (en) 2012-11-12 2017-02-28 Microsoft Technology Licensing, Llc Touch-sensitive bezel techniques
CN103838500A (zh) * 2012-11-20 2014-06-04 联想(北京)有限公司 一种操作对象集合显示方法及电子设备
JP2014106849A (ja) * 2012-11-29 2014-06-09 Toshiba Corp 電子機器、表示処理プログラム及び表示処理方法
KR102069862B1 (ko) * 2012-12-14 2020-01-23 삼성전자주식회사 가상 키패드 제어 방법 및 그 전자 장치
KR102007651B1 (ko) * 2012-12-21 2019-08-07 삼성전자주식회사 터치스크린 키보드를 구성하는 방법, 장치 및 이를 수행하는 프로그램을 저장하는 컴퓨터로 읽을 수 있는 저장 매체
JP2014126949A (ja) * 2012-12-25 2014-07-07 Kyocera Corp 携帯端末装置、画面制御方法およびプログラム
KR102001332B1 (ko) 2012-12-29 2019-07-17 애플 인크. 콘텐츠를 스크롤할지 선택할지 결정하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
KR102000253B1 (ko) 2012-12-29 2019-07-16 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105275A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for forgoing generation of tactile output for a multi-contact gesture
EP3435220B1 (en) 2012-12-29 2020-09-16 Apple Inc. Device, method and graphical user interface for transitioning between touch input to display output relationships
EP2939095B1 (en) 2012-12-29 2018-10-03 Apple Inc. Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
KR102032449B1 (ko) 2013-01-07 2019-10-15 삼성전자주식회사 이미지 표시 방법 및 휴대 단말
JP2014142681A (ja) * 2013-01-22 2014-08-07 Nec Corp 表示制御装置、表示制御方法、及び表示制御プログラム
US9942750B2 (en) * 2013-01-23 2018-04-10 Qualcomm Incorporated Providing an encrypted account credential from a first device to a second device
US9465446B2 (en) * 2013-03-14 2016-10-11 Blackberry Limited Electronic device including mechanical keyboard having touch sensors for detecting touches and actuation of mechanical keys
US8918339B2 (en) 2013-03-15 2014-12-23 Facebook, Inc. Associating an indication of user emotional reaction with content items presented by a social networking system
JP5998085B2 (ja) * 2013-03-18 2016-09-28 アルプス電気株式会社 入力装置
KR102087896B1 (ko) * 2013-04-03 2020-03-12 삼성전자주식회사 터치스크린을 가지는 전자 장치에서 텍스트 입력하는 방법 및 장치
US9215302B2 (en) 2013-05-10 2015-12-15 Google Technology Holdings LLC Method and device for determining user handedness and controlling a user interface
US9898187B2 (en) 2013-06-09 2018-02-20 Apple Inc. Managing real-time handwriting recognition
GB2516029A (en) * 2013-07-08 2015-01-14 Ibm Touchscreen keyboard
JP5456200B1 (ja) * 2013-08-13 2014-03-26 ソフトバンクモバイル株式会社 文字処理装置及びプログラム
US10156984B2 (en) 2013-09-29 2018-12-18 Shenzhen Hsmc Technology Co., Ltd. Method for implementing control of keys of virtual keyboard on wide touch screen with two thumbs
CN103576879B (zh) * 2013-09-29 2016-03-30 罗蒙明 一种实现双手拇指操控宽屏虚拟键盘按键的方法
US9933858B2 (en) 2013-09-29 2018-04-03 Shenzhen Hsmc Technology Co., Ltd. Keyboard operated with two thumbs and key layout method thereof
US20150160849A1 (en) * 2013-12-06 2015-06-11 Microsoft Corporation Bezel Gesture Techniques
CN104780093B (zh) * 2014-01-15 2018-05-01 阿里巴巴集团控股有限公司 即时通讯过程中的表情信息处理方法及装置
US9477337B2 (en) 2014-03-14 2016-10-25 Microsoft Technology Licensing, Llc Conductive trace routing for display and bezel sensors
KR102177607B1 (ko) 2014-05-16 2020-11-11 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9971496B2 (en) 2014-08-04 2018-05-15 Google Technology Holdings LLC Method and apparatus for adjusting a graphical user interface on an electronic device
US10642365B2 (en) * 2014-09-09 2020-05-05 Microsoft Technology Licensing, Llc Parametric inertia and APIs
CN104281385B (zh) * 2014-09-17 2017-03-15 北京搜狗科技发展有限公司 输入法虚拟键盘的调整方法和输入法装置
WO2016053901A1 (en) 2014-09-30 2016-04-07 Apple Inc Configurable force-sensitive input structures for electronic devices
USD768649S1 (en) * 2014-11-14 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
USD768650S1 (en) * 2014-11-14 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
USD766925S1 (en) * 2014-11-14 2016-09-20 Microsoft Corporation Display screen with animated graphical user interface
USD768648S1 (en) * 2014-11-14 2016-10-11 Microsoft Corporation Display screen with animated graphical user interface
US10459608B2 (en) * 2014-12-01 2019-10-29 Ebay Inc. Mobile optimized shopping comparison
US9996232B2 (en) 2014-12-15 2018-06-12 International Business Machines Corporation Creating multiple cursors for duplicated entry
JP6043334B2 (ja) * 2014-12-22 2016-12-14 京セラドキュメントソリューションズ株式会社 表示装置、画像形成装置、及び、表示方法
US20160179326A1 (en) * 2014-12-23 2016-06-23 General Electric Company Medical imaging apparatus and method for managing touch inputs in a touch based user interface
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
JP2016206994A (ja) * 2015-04-23 2016-12-08 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、及びプログラム
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US20170003837A1 (en) * 2015-06-30 2017-01-05 Integrated Computer Solutions, Inc. Systems and Methods for Generating, Presenting, and Adjusting Adjustable Virtual Keyboards
CN105094548A (zh) * 2015-07-20 2015-11-25 联想(北京)有限公司 一种信息处理的方法及电子设备
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US10248308B2 (en) 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US11442618B2 (en) 2015-09-28 2022-09-13 Lenovo (Singapore) Pte. Ltd. Flexible mapping of a writing zone to a digital display
US10409412B1 (en) 2015-09-30 2019-09-10 Apple Inc. Multi-input element for electronic device
TWI628569B (zh) 2015-09-30 2018-07-01 蘋果公司 具有適應性輸入列之鍵盤
JP6139647B1 (ja) * 2015-12-11 2017-05-31 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、入力判定方法、及びプログラム
KR102503422B1 (ko) * 2015-12-17 2023-02-24 삼성전자주식회사 문자 입력 기능을 제공하는 전자 장치 및 그 제어 방법
US10628036B2 (en) 2016-01-18 2020-04-21 Microsoft Technology Licensing, Llc Keyboard customization
JP6812639B2 (ja) * 2016-02-03 2021-01-13 セイコーエプソン株式会社 電子機器、電子機器の制御プログラム
CN105700703A (zh) * 2016-02-24 2016-06-22 北京小牛互联科技有限公司 一种在键盘的文字输入界面嵌入表情并支持自定义表情的方法和装置
US20170308289A1 (en) * 2016-04-20 2017-10-26 Google Inc. Iconographic symbol search within a graphical keyboard
TWI698774B (zh) * 2016-04-29 2020-07-11 姚秉洋 鍵盤觸控指令之產生方法及其電腦程式產品與非暫態電腦可讀取媒體
DK179329B1 (en) 2016-06-12 2018-05-07 Apple Inc Handwriting keyboard for monitors
JP6162299B1 (ja) * 2016-07-28 2017-07-12 レノボ・シンガポール・プライベート・リミテッド 情報処理装置、入力切替方法、及びプログラム
US10318065B2 (en) 2016-08-03 2019-06-11 Apple Inc. Input device having a dimensionally configurable input area
JP2018022438A (ja) * 2016-08-05 2018-02-08 ソニー株式会社 情報処理装置、情報処理方法、およびプログラム
US10871860B1 (en) 2016-09-19 2020-12-22 Apple Inc. Flexible sensor configured to detect user inputs
KR101791930B1 (ko) * 2016-09-23 2017-10-31 (주)신성이노테크 문자입력 장치
KR102659981B1 (ko) * 2017-01-03 2024-04-24 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10359930B2 (en) * 2017-01-23 2019-07-23 Blackberry Limited Portable electronic device including physical keyboard and method of controlling selection of information
US10956033B2 (en) * 2017-07-13 2021-03-23 Hand Held Products, Inc. System and method for generating a virtual keyboard with a highlighted area of interest
US10732743B2 (en) 2017-07-18 2020-08-04 Apple Inc. Concealable input region for an electronic device having microperforations
US10732676B2 (en) 2017-09-06 2020-08-04 Apple Inc. Illuminated device enclosure with dynamic trackpad
US20190107944A1 (en) * 2017-10-06 2019-04-11 Microsoft Technology Licensing, Llc Multifinger Touch Keyboard
US20190114073A1 (en) * 2017-10-12 2019-04-18 Blackberry Limited Electronic device and method of providing selectable keys of a keyboard
KR102219280B1 (ko) 2018-03-11 2021-02-24 놀란 존스 비-쿼티 키보드
EP4235390A3 (en) * 2018-03-23 2023-10-25 Huawei Technologies Co., Ltd. Application window display method and terminal
USD898764S1 (en) * 2019-01-30 2020-10-13 Citrix Systems, Inc. Display screen or portion thereof with graphical user interface
US11829591B2 (en) * 2019-06-01 2023-11-28 Apple Inc. User interface for managing input techniques
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US11379104B2 (en) * 2019-06-07 2022-07-05 Microsoft Technology Licensing, Llc Sharing user interface customization across applications
CN110750201A (zh) * 2019-09-30 2020-02-04 北京百度网讯科技有限公司 一种键盘显示方法、装置以及电子设备
US11514696B2 (en) * 2019-12-17 2022-11-29 Ricoh Company, Ltd. Display device, display method, and computer-readable recording medium
US11392217B2 (en) 2020-07-16 2022-07-19 Mobius Connective Technologies, Ltd. Method and apparatus for remotely processing speech-to-text for entry onto a destination computing system
KR20220049407A (ko) * 2020-10-14 2022-04-21 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
CN115129223A (zh) * 2021-03-25 2022-09-30 北京小米移动软件有限公司 键盘显示方法、键盘显示装置及存储介质
CN115170555B (zh) * 2022-08-04 2023-06-06 格物致和生物科技(北京)有限公司 一种基于图像的计数方法和系统

Family Cites Families (386)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1280700A (en) * 1918-07-16 1918-10-08 Sidney A Fouche Bottle.
NL185694B (nl) 1954-01-19 Victor Company Of Japan Afspeelinrichting voor een roterend registratiemedium waarin een informatiesignaal en een adressignaal zijn geregistreerd.
US4107784A (en) 1975-12-22 1978-08-15 Bemmelen Henri M Van Management control terminal method and apparatus
US4081631A (en) 1976-12-08 1978-03-28 Motorola, Inc. Dual purpose, weather resistant data terminal keyboard assembly including audio porting
US4202041A (en) 1977-07-11 1980-05-06 Massachusetts Institute Of Technology Dynamically variable keyboard terminal
JPS5443726A (en) 1977-09-13 1979-04-06 Minolta Camera Co Ltd Main switch circuit for camera
GB1545406A (en) 1977-12-16 1979-05-10 Ibm Keyboard apparatus
US4313108A (en) 1978-12-07 1982-01-26 Casio Computer Co., Ltd. Electric apparatus for displaying a plurality of key symbols on a single passive display
DE2907811B1 (de) 1979-02-28 1980-03-20 Agfa Gevaert Ag Funktionseingabeeinheit mit Beruehrungstasten
US4353056A (en) 1980-06-05 1982-10-05 Siemens Corporation Capacitive fingerprint sensor
US4332464A (en) 1980-09-22 1982-06-01 Xerox Corporation Interactive user-machine interface method and apparatus for copier/duplicator
US4433377A (en) 1981-06-29 1984-02-21 Eustis Mary S Data processing with format varying
US4459581A (en) 1981-07-22 1984-07-10 Data General Corporation Alphanumeric keyboard having identification capability
US4485439A (en) 1982-07-27 1984-11-27 S.A. Analis Standard hardware-software interface for connecting any instrument which provides a digital output stream with any digital host computer
US4513379A (en) 1982-09-07 1985-04-23 General Electric Company Customization window for a computer numerical control system
US4455452A (en) 1982-09-13 1984-06-19 Touch Activated Switch Arrays, Inc. Touch activated controller for generating X-Y output information
JPS5968037A (ja) 1982-09-21 1984-04-17 Canon Inc 入力装置
US4555775B1 (en) 1982-10-07 1995-12-05 Bell Telephone Labor Inc Dynamic generation and overlaying of graphic windows for multiple active program storage areas
US4586158A (en) 1983-02-22 1986-04-29 International Business Machines Corp. Screen management system
EP0121015B1 (en) 1983-03-31 1990-03-07 International Business Machines Corporation Presentation space management and viewporting on a multifunction virtual terminal
US4598363A (en) 1983-07-07 1986-07-01 At&T Bell Laboratories Adaptive delayed polling of sensors
JPS60171560A (ja) 1984-02-17 1985-09-05 Toshiba Corp パスワ−ド方式
US4658425A (en) 1985-04-19 1987-04-14 Shure Brothers, Inc. Microphone actuation control system suitable for teleconference systems
US4698625A (en) 1985-05-30 1987-10-06 International Business Machines Corp. Graphic highlight adjacent a pointing cursor
US4680429A (en) 1986-01-15 1987-07-14 Tektronix, Inc. Touch panel
US4790028A (en) 1986-09-12 1988-12-06 Westinghouse Electric Corp. Method and apparatus for generating variably scaled displays
US4812831A (en) 1987-02-10 1989-03-14 Amp Incorporated Key switch with controllable illumination
US4746770A (en) 1987-02-17 1988-05-24 Sensor Frame Incorporated Method and apparatus for isolating and manipulating graphic objects on computer video monitor
US4755811A (en) 1987-03-24 1988-07-05 Tektronix, Inc. Touch controlled zoom of waveform displays
JPH02249062A (ja) 1989-03-23 1990-10-04 Matsushita Refrig Co Ltd 個人識別システム
CA2027103A1 (en) * 1989-10-13 1991-04-14 William A. Clough Method and apparatus for displaying simulated keyboards on touch-sensitive displays
US5465084A (en) 1990-03-27 1995-11-07 Cottrell; Stephen R. Method to provide security for a computer and a device therefor
US5347295A (en) 1990-10-31 1994-09-13 Go Corporation Control of a computer through a position-sensed stylus
JPH05127819A (ja) 1991-10-31 1993-05-25 Nec Corp ストロークコマンド支援方式
US7835989B1 (en) 1992-12-09 2010-11-16 Discovery Communications, Inc. Electronic book alternative delivery systems
JPH06214954A (ja) 1993-01-14 1994-08-05 Toshiba Corp パスワード入力装置
US5677710A (en) 1993-05-10 1997-10-14 Apple Computer, Inc. Recognition keypad
JPH0784661A (ja) 1993-09-17 1995-03-31 Toshiba Corp 電子ロックを用いた情報処理装置
TW299410B (ko) 1994-04-04 1997-03-01 At & T Corp
US6154758A (en) 1994-05-13 2000-11-28 Apple Computer, Inc. Text conversion method for computer systems
US5754636A (en) 1994-11-01 1998-05-19 Answersoft, Inc. Computer telephone system
US6295372B1 (en) 1995-03-03 2001-09-25 Palm, Inc. Method and apparatus for handwriting input on a pen based palmtop computing device
JPH08263215A (ja) 1995-03-28 1996-10-11 Yamatake Honeywell Co Ltd タッチスクリーンの画面表示方法
JPH0918566A (ja) 1995-06-30 1997-01-17 Hitachi Ltd 電話機
WO1997005541A1 (en) * 1995-07-26 1997-02-13 King Martin T Reduced keyboard disambiguating system
US6486895B1 (en) 1995-09-08 2002-11-26 Xerox Corporation Display system for displaying lists of linked documents
US5821933A (en) 1995-09-14 1998-10-13 International Business Machines Corporation Visual access to restricted functions represented on a graphical user interface
JP3470327B2 (ja) 1996-02-20 2003-11-25 横河電機株式会社 セキュリティー装置
DE19620346A1 (de) 1996-05-21 1997-11-27 Bosch Gmbh Robert Grafische Paßworteingabe
US5729219A (en) 1996-08-02 1998-03-17 Motorola, Inc. Selective call radio with contraposed touchpad
JPH1069346A (ja) 1996-08-28 1998-03-10 Alps Electric Co Ltd 座標入力装置およびその制御方法
US5905497A (en) 1997-03-31 1999-05-18 Compaq Computer Corp. Automatic and seamless cursor and pointer integration
US6160555A (en) 1997-11-17 2000-12-12 Hewlett Packard Company Method for providing a cue in a computer system
US6037937A (en) 1997-12-04 2000-03-14 Nortel Networks Corporation Navigation tool for graphical user interface
JP4074431B2 (ja) 1997-12-16 2008-04-09 マイクロソフト コーポレーション ソフト入力パネルシステムおよび方法
US5933141A (en) 1998-01-05 1999-08-03 Gateway 2000, Inc. Mutatably transparent displays
JPH11203045A (ja) 1998-01-14 1999-07-30 Matsushita Electric Ind Co Ltd タッチパネルつき携帯端末装置
US20070177804A1 (en) 2006-01-30 2007-08-02 Apple Computer, Inc. Multi-touch gesture dictionary
US7800592B2 (en) 2005-03-04 2010-09-21 Apple Inc. Hand held electronic device with multiple touch sensing devices
US9292111B2 (en) 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US20060033724A1 (en) 2004-07-30 2006-02-16 Apple Computer, Inc. Virtual input device placement on a touch screen user interface
US7844914B2 (en) 2004-07-30 2010-11-30 Apple Inc. Activating virtual keys of a touch-screen virtual keyboard
US7614008B2 (en) 2004-07-30 2009-11-03 Apple Inc. Operation of a computer with touch screen interface
KR100595917B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US6249606B1 (en) 1998-02-19 2001-06-19 Mindmaker, Inc. Method and system for gesture category recognition and training using a feature vector
US6192478B1 (en) 1998-03-02 2001-02-20 Micron Electronics, Inc. Securing restricted operations of a computer program using a visual key feature
US7768501B1 (en) 1998-05-01 2010-08-03 International Business Machines Corporation Method and system for touch screen keyboard and display space sharing
US6421453B1 (en) 1998-05-15 2002-07-16 International Business Machines Corporation Apparatus and methods for user recognition employing behavioral passwords
US6573883B1 (en) 1998-06-24 2003-06-03 Hewlett Packard Development Company, L.P. Method and apparatus for controlling a computing device with gestures
US6151208A (en) 1998-06-24 2000-11-21 Digital Equipment Corporation Wearable computing device mounted on superior dorsal aspect of a hand
US6347290B1 (en) 1998-06-24 2002-02-12 Compaq Information Technologies Group, L.P. Apparatus and method for detecting and executing positional and gesture commands corresponding to movement of handheld computing device
US6975712B1 (en) 1998-08-26 2005-12-13 Microsoft Corporation Common visual and functional architecture for presenting and controlling arbitrary telephone line features
JP4939682B2 (ja) 1999-04-27 2012-05-30 エーユー オプトロニクス コーポレイション 表示装置
GB9910525D0 (en) 1999-05-07 1999-07-07 Healey Nicholas Erroneous keyboard entry correction method
US7971784B2 (en) 1999-05-25 2011-07-05 Silverbrook Research Pty Ltd Sensing device with mode changes via nib switch
CA2392446C (en) 1999-05-27 2009-07-14 America Online Incorporated Keyboard system with automatic correction
JP4219050B2 (ja) 1999-06-03 2009-02-04 シャープ株式会社 通信用端末装置
US6909424B2 (en) 1999-09-29 2005-06-21 Gateway Inc. Digital information appliance input device
US7185274B1 (en) 1999-12-07 2007-02-27 Microsoft Corporation Computer user interface architecture wherein users interact with both content and user interface by activating links
US7437683B1 (en) 1999-12-16 2008-10-14 Microsoft Corporation Method and apparatus for fostering immersive reading of electronic documents
US6735695B1 (en) 1999-12-20 2004-05-11 International Business Machines Corporation Methods and apparatus for restricting access of a user using random partial biometrics
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US6766456B1 (en) 2000-02-23 2004-07-20 Micron Technology, Inc. Method and system for authenticating a user of a computer system
WO2001077792A2 (en) 2000-04-07 2001-10-18 Rsa Security Inc. System and method for authenticating a user
US6633310B1 (en) 2000-05-31 2003-10-14 Microsoft Corporation Switchably translucent and opaque graphical user interface elements
JP2001356870A (ja) * 2000-06-13 2001-12-26 Toshiba Corp 情報入力端末装置
US6720860B1 (en) 2000-06-30 2004-04-13 International Business Machines Corporation Password protection using spatial and temporal variation in a high-resolution touch sensitive display
US6859217B2 (en) 2000-07-19 2005-02-22 Microsoft Corporation System and method to display and manage data within hierarchies and polyarchies of information
CN101025778A (zh) 2000-07-25 2007-08-29 有限会社信息安全 保密信息记录媒介、保护方法、保护存储方法及信息访问报警系统
US20020015064A1 (en) 2000-08-07 2002-02-07 Robotham John S. Gesture-based user interface to multi-level and multi-modal sets of bit-maps
US6704004B1 (en) 2000-08-17 2004-03-09 Nokia Mobile Phones Ltd. Arrangement for integration of key illumination into keymat of portable electronic devices
FR2814254B1 (fr) 2000-09-15 2006-07-21 Thomson Csf Procede de traitement du deplacement d'un curseur sur un ecran
CA2323856A1 (en) 2000-10-18 2002-04-18 602531 British Columbia Ltd. Method, system and media for entering data in a personal computing device
WO2002033882A1 (en) 2000-10-19 2002-04-25 Fumio Mizoguchi User selectable authentication interface and universal password oracle
US6924822B2 (en) 2000-12-21 2005-08-02 Xerox Corporation Magnification methods, systems, and computer program products for virtual three-dimensional books
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US20040034801A1 (en) 2001-02-15 2004-02-19 Denny Jaeger Method for creating and using computer passwords
JP2002244780A (ja) * 2001-02-19 2002-08-30 Digital Electronics Corp ユーザインターフェース装置、および、そのプログラム
US8699995B2 (en) 2008-04-09 2014-04-15 3D Radio Llc Alternate user interfaces for multi tuner radio device
US7194618B1 (en) 2001-03-05 2007-03-20 Suominen Edwin A Encryption and authentication systems and methods
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US7308652B2 (en) 2001-06-08 2007-12-11 Lenovo Singapore Pte. Ltd Entry of a password through a touch-sensitive computer screen
US20030001899A1 (en) 2001-06-29 2003-01-02 Nokia Corporation Semi-transparent handwriting recognition UI
US6947062B2 (en) 2001-07-23 2005-09-20 Koninklijke Philips Electronics N.V. Seamlessly combined freely moving cursor and jumping highlights navigation
US6985137B2 (en) 2001-08-13 2006-01-10 Nokia Mobile Phones Ltd. Method for preventing unintended touch pad input due to accidental touching
US6690365B2 (en) 2001-08-29 2004-02-10 Microsoft Corporation Automatic scrolling
US6944818B2 (en) 2001-09-10 2005-09-13 Xerox Corporation Method and apparatus for the viewing and exploration of the content of hierarchical information
JP2003091370A (ja) 2001-09-19 2003-03-28 Nec Eng Ltd タッチパネル清掃方法
US20040030934A1 (en) 2001-10-19 2004-02-12 Fumio Mizoguchi User selectable authentication interface and universal password oracle
US6657560B1 (en) 2001-10-19 2003-12-02 Richard Jung Rounded keypad
GB2381603B (en) 2001-10-30 2005-06-08 F Secure Oyj Method and apparatus for selecting a password
US20120188206A1 (en) 2001-11-02 2012-07-26 Neonode, Inc. Optical touch screen with tri-directional micro-lenses
US20100238139A1 (en) 2009-02-15 2010-09-23 Neonode Inc. Optical touch screen systems using wide light beams
US8095879B2 (en) 2002-12-10 2012-01-10 Neonode Inc. User interface for mobile handheld computer unit
US7130446B2 (en) 2001-12-03 2006-10-31 Microsoft Corporation Automatic detection and tracking of multiple individuals using multiple cues
GB0201074D0 (en) 2002-01-18 2002-03-06 3G Lab Ltd Graphic user interface for data processing device
US6996783B2 (en) 2002-01-28 2006-02-07 International Business Machines Corporation Selectively adjusting transparency of windows within a user interface using a flashlight tool
JP2003296022A (ja) 2002-04-01 2003-10-17 Pioneer Electronic Corp タッチパネル一体型表示装置
JP2003323259A (ja) 2002-05-02 2003-11-14 Nec Corp 情報処理装置
US20030210272A1 (en) 2002-05-09 2003-11-13 Gateway, Inc. System and method for providing a user interface
TWI238348B (en) 2002-05-13 2005-08-21 Kyocera Corp Portable information terminal, display control device, display control method, and recording media
US7299424B2 (en) 2002-05-14 2007-11-20 Microsoft Corporation Lasso select
JP3852368B2 (ja) 2002-05-16 2006-11-29 ソニー株式会社 入力方法及びデータ処理装置
US7159186B2 (en) 2002-05-31 2007-01-02 Nokia Corporation User interface for transferring data with a communications terminal
FI20021655A (fi) 2002-06-19 2003-12-20 Nokia Corp Menetelmä lukituksen avaamiseksi ja kannettava elektroninen laite
KR20050016691A (ko) * 2002-07-04 2005-02-21 코닌클리케 필립스 일렉트로닉스 엔.브이. 자동으로 적응 가능한 가상 키보드
EP1522007B1 (en) * 2002-07-04 2011-12-21 Koninklijke Philips Electronics N.V. Automatically adaptable virtual keyboard
JP3630153B2 (ja) 2002-07-19 2005-03-16 ソニー株式会社 情報表示入力装置及び情報表示入力方法、並びに情報処理装置
US6954862B2 (en) 2002-08-27 2005-10-11 Michael Lawrence Serpa System and method for user authentication with enhanced passwords
FI20021682A (fi) 2002-09-20 2004-03-21 Nokia Corp Menetelmä laitteen lukitustilan avaamiseksi ja elektroninen laite
FI20021736A (fi) 2002-09-30 2004-03-31 Nokia Corp Menetelmä ja järjestely lukituksen toiminnan ohjaamiseksi
EP1408443B1 (en) 2002-10-07 2006-10-18 Sony France S.A. Method and apparatus for analysing gestures produced by a human, e.g. for commanding apparatus by gesture recognition
US20040080487A1 (en) 2002-10-29 2004-04-29 Griffin Jason T. Electronic device having keyboard for thumb typing
US7278019B2 (en) 2002-11-04 2007-10-02 Hewlett-Packard Development Company, L.P. Method of hindering the propagation of a computer virus
US7174462B2 (en) 2002-11-12 2007-02-06 Intel Corporation Method of authentication using familiar photographs
KR100630048B1 (ko) 2002-11-14 2006-09-27 삼성전자주식회사 이동 단말기의 문자 입력 장치 및 방법
JP2004178584A (ja) 2002-11-26 2004-06-24 Asulab Sa 機能、装置、又は所定の場所にアクセスするためのタッチスクリーンによるセキュリティコードの入力方法、及びその方法を実行するためのデバイス
US7124433B2 (en) 2002-12-10 2006-10-17 International Business Machines Corporation Password that associates screen position information with sequentially entered characters
US6842182B2 (en) 2002-12-13 2005-01-11 Sun Microsystems, Inc. Perceptual-based color selection for text highlighting
US7081887B2 (en) 2002-12-19 2006-07-25 Intel Corporation Method and apparatus for positioning a software keyboard
TW589577B (en) * 2003-01-03 2004-06-01 Tatung Co Method to display software keyboard
JP3848269B2 (ja) 2003-02-20 2006-11-22 有限会社 未来夢 情報処理装置、情報処理方法、及びコンピュータプログラム
US20040183834A1 (en) 2003-03-20 2004-09-23 Chermesino John C. User-configurable soft input applications
US7136047B2 (en) 2003-04-09 2006-11-14 Microsoft Corporation Software multi-tap input system and method
US20040250138A1 (en) 2003-04-18 2004-12-09 Jonathan Schneider Graphical event-based password system
US8479112B2 (en) 2003-05-13 2013-07-02 Microsoft Corporation Multiple input language selection
JP4363084B2 (ja) 2003-05-23 2009-11-11 ソニー株式会社 情報処理装置および方法、並びに制御プログラム
JP2004348600A (ja) 2003-05-23 2004-12-09 Sony Corp 情報処理装置および方法、並びにプログラム
JP4341298B2 (ja) 2003-05-23 2009-10-07 ソニー株式会社 情報処理装置および方法、並びにプログラム
GB0312465D0 (en) 2003-05-30 2003-07-09 Therefore Ltd A data input method for a computing device
JP2005004396A (ja) 2003-06-11 2005-01-06 Sony Corp 情報表示方法及び情報表示装置、並びにコンピュータ・プログラム
JP2006527439A (ja) 2003-06-13 2006-11-30 ユニヴァーシティ オブ ランカスター ユーザインタフェース
FI20030920A0 (fi) 2003-06-19 2003-06-19 Nokia Corp Menetelmä ja järjestelmä graafisen salasanan tuottamiseksi sekä päätelaite
US20040268267A1 (en) 2003-06-25 2004-12-30 Xerox Corporation. Methods and apparatus for prompted activation of an inactive control element in graphical user interface, and context-based help therefor
US20040230843A1 (en) 2003-08-20 2004-11-18 Wayne Jansen System and method for authenticating users using image selection
JP2005071008A (ja) 2003-08-22 2005-03-17 Matsushita Electric Ind Co Ltd 情報端末装置
CN1820288A (zh) 2003-08-29 2006-08-16 诺基亚公司 用于定制的基于图片的用户标识和认证方法和设备
CN1305003C (zh) 2003-09-29 2007-03-14 摩托罗拉公司 用户界面上的书写标记识别
US7231231B2 (en) 2003-10-14 2007-06-12 Nokia Corporation Method and apparatus for locking a mobile telephone touch screen
FI116641B (fi) 2003-10-24 2006-01-13 Nokia Corp Menetelmä elektronisessa laitteessa olevan pikavalinnan muuttamiseksi, laitteen näyttöyksikkö sekä elektroninen laite
JP2005167455A (ja) 2003-12-01 2005-06-23 Sony Ericsson Mobilecommunications Japan Inc 携帯電話端末
US7401300B2 (en) 2004-01-09 2008-07-15 Nokia Corporation Adaptive user interface input device
WO2005076477A1 (en) 2004-01-31 2005-08-18 Frogpad Kazien, Inc. System and method for implementing a keyboard
JP4396314B2 (ja) 2004-02-24 2010-01-13 日本電気株式会社 画像生成方法、画像生成装置および画像生成プログラム
US20050264833A1 (en) 2004-03-09 2005-12-01 Seiko Epson Corporation Image retouching apparatus, corresponding image retouching method, and computer program product for image retouching
JP4095071B2 (ja) 2004-03-19 2008-06-04 株式会社リコー ディスプレイ付き電子装置、ディスプレイ付き電子装置の制御方法、及びプログラム
US7176888B2 (en) 2004-03-23 2007-02-13 Fujitsu Limited Selective engagement of motion detection
US20050212760A1 (en) 2004-03-23 2005-09-29 Marvit David L Gesture based user interface supporting preexisting symbols
US8448083B1 (en) 2004-04-16 2013-05-21 Apple Inc. Gesture control of multimedia editing applications
US7383517B2 (en) 2004-04-21 2008-06-03 Microsoft Corporation System and method for acquiring a target with intelligent pointer movement
JP4747510B2 (ja) * 2004-04-26 2011-08-17 ソニー株式会社 情報処理装置
JP4395408B2 (ja) 2004-05-07 2010-01-06 Hoya株式会社 タッチパネル付き入力装置
US7296233B2 (en) 2004-05-10 2007-11-13 Microsoft Corporation Spy-resistant keyboard
US8281241B2 (en) 2004-06-28 2012-10-02 Nokia Corporation Electronic device and method for providing extended user interface
US20060007178A1 (en) 2004-07-07 2006-01-12 Scott Davis Electronic device having an imporoved user interface
EP1782170A4 (en) 2004-07-29 2012-04-25 Paul Lloyd Baker KEYBOARD FOR A HAND-HELD COMPUTER DEVICE
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7178111B2 (en) 2004-08-03 2007-02-13 Microsoft Corporation Multi-planar three-dimensional user interface
US7434173B2 (en) 2004-08-30 2008-10-07 Microsoft Corporation Scrolling web pages using direct interaction
US7761814B2 (en) 2004-09-13 2010-07-20 Microsoft Corporation Flick gesture
US20060061542A1 (en) 2004-09-23 2006-03-23 Stokic Dragan Z Dynamic character display input device
KR100636184B1 (ko) 2004-10-13 2006-10-19 삼성전자주식회사 정보 처리 장치의 표시 화면에 표시되는 표시 윈도우의위치 제어 방법 및 위치 제어 장치
JP4094002B2 (ja) 2004-11-10 2008-06-04 京セラミタ株式会社 操作入力装置
JP4079937B2 (ja) 2004-12-17 2008-04-23 シャープ株式会社 画像処理装置
US7810105B2 (en) 2004-12-29 2010-10-05 Motorola, Inc. Method and apparatus for running different types of applications on a wireless mobile device
US7760189B2 (en) 2005-01-21 2010-07-20 Lenovo Singapore Pte. Ltd Touchpad diagonal scrolling
CA2495445A1 (en) 2005-01-29 2005-07-13 Hai Tao An arrangement and method of graphical password authentication
US7441202B2 (en) 2005-02-14 2008-10-21 Mitsubishi Electric Research Laboratories, Inc. Spatial multiplexing to mediate direct-touch input on large displays
US7561145B2 (en) 2005-03-18 2009-07-14 Microsoft Corporation Systems, methods, and computer-readable media for invoking an electronic ink or handwriting interface
JP4603931B2 (ja) 2005-05-16 2010-12-22 任天堂株式会社 オブジェクト移動制御装置およびオブジェクト移動制御プログラム
US7886233B2 (en) 2005-05-23 2011-02-08 Nokia Corporation Electronic text input involving word completion functionality for predicting word candidates for partial word inputs
CN101814005B (zh) 2005-07-22 2013-02-27 运行移动系统公司 最适宜拇指的触摸屏用户界面的系统和方法
JP2007036928A (ja) 2005-07-29 2007-02-08 Sharp Corp 携帯情報端末装置
US8708822B2 (en) 2005-09-01 2014-04-29 Nintendo Co., Ltd. Information processing system and program
WO2007031410A2 (en) 2005-09-14 2007-03-22 Irex Technologies B.V. Electronic reading device mimicking a reading experience of a paper document
US7659887B2 (en) 2005-10-20 2010-02-09 Microsoft Corp. Keyboard with a touchpad layer on keys
US20070097085A1 (en) 2005-10-27 2007-05-03 Kentaro Iwatsuki Data processing device
EP1791051A1 (en) 2005-11-23 2007-05-30 Research In Motion Limited System and method for recognizing a keystroke in an electronic device
US7480870B2 (en) 2005-12-23 2009-01-20 Apple Inc. Indication of progress towards satisfaction of a user input condition
US7657849B2 (en) 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
JP2007183787A (ja) * 2006-01-06 2007-07-19 Hitachi High-Technologies Corp ソフトウェアキーボード表示装置
US20060150087A1 (en) 2006-01-20 2006-07-06 Daniel Cronenberger Ultralink text analysis tool
US8858332B2 (en) 2006-01-27 2014-10-14 Wms Gaming Inc. Handheld device for wagering games
US7634263B2 (en) 2006-01-30 2009-12-15 Apple Inc. Remote control of electronic devices
JP2009527041A (ja) * 2006-02-16 2009-07-23 エフティーケー テクノロジーズ エルティーディー. コンピューティングシステムにデータを入力するシステム及び方法
JP5210497B2 (ja) 2006-04-12 2013-06-12 クラリオン株式会社 ナビゲーション装置
US20070300140A1 (en) 2006-05-15 2007-12-27 Nokia Corporation Electronic device having a plurality of modes of operation
TW200805131A (en) 2006-05-24 2008-01-16 Lg Electronics Inc Touch screen device and method of selecting files thereon
CN101079907B (zh) 2006-05-26 2011-11-30 鸿富锦精密工业(深圳)有限公司 移动设备显示装置及其显示方法
GB0612624D0 (en) 2006-06-26 2006-08-02 Symbian Software Ltd Speed of gesture
US9019300B2 (en) 2006-08-04 2015-04-28 Apple Inc. Framework for graphics animation and compositing operations
US8166415B2 (en) 2006-08-04 2012-04-24 Apple Inc. User interface for backup management
US7813774B2 (en) 2006-08-18 2010-10-12 Microsoft Corporation Contact, motion and position sensing circuitry providing data entry associated with keypad and touchpad
US20080055263A1 (en) 2006-09-06 2008-03-06 Lemay Stephen O Incoming Telephone Call Management for a Portable Multifunction Device
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7934156B2 (en) 2006-09-06 2011-04-26 Apple Inc. Deletion gestures on a portable multifunction device
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US7941760B2 (en) 2006-09-06 2011-05-10 Apple Inc. Soft keyboard display for a portable multifunction device
KR100843077B1 (ko) 2006-09-28 2008-07-02 삼성전자주식회사 터치스크린 상에서 가변적인 크기로 그룹화된 정보를디스플레이하는 장치 및 방법
KR100764652B1 (ko) 2006-10-25 2007-10-08 삼성전자주식회사 터치스크린을 가지는 단말기의 키 입력 장치 및 방법
US7602378B2 (en) 2006-10-26 2009-10-13 Apple Inc. Method, system, and graphical user interface for selecting a soft keyboard
US8161395B2 (en) 2006-11-13 2012-04-17 Cisco Technology, Inc. Method for secure data entry in an application
US20080141126A1 (en) 2006-11-17 2008-06-12 Vincent Lee Johnson Method and system to aid in viewing digital content
GB0624033D0 (en) 2006-12-01 2007-01-10 Iti Scotland Ltd Dynamic intervention with software applications
WO2008074223A1 (fr) 2006-12-19 2008-06-26 Bo Qiu Dispositif d'interaction entre l'homme et l'ordinateur, dispositif électronique, et procédé permettant une interaction entre l'homme et l'ordinateur
US20080158024A1 (en) 2006-12-21 2008-07-03 Eran Steiner Compact user interface for electronic devices
US7956847B2 (en) 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US8462109B2 (en) 2007-01-05 2013-06-11 Invensense, Inc. Controlling and accessing content using motion processing on mobile devices
US7890778B2 (en) 2007-01-06 2011-02-15 Apple Inc. Power-off methods for portable electronic devices
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US8091045B2 (en) * 2007-01-07 2012-01-03 Apple Inc. System and method for managing lists
US7978176B2 (en) 2007-01-07 2011-07-12 Apple Inc. Portrait-landscape rotation heuristics for a portable multifunction device
US20090213081A1 (en) 2007-01-10 2009-08-27 Case Jr Charlie W Portable Electronic Device Touchpad Input Controller
KR101426718B1 (ko) * 2007-02-15 2014-08-05 삼성전자주식회사 휴대단말기에서 터치 이벤트에 따른 정보 표시 장치 및방법
KR100913962B1 (ko) * 2007-05-14 2009-08-26 삼성전자주식회사 이동통신 단말기의 문자 입력 방법 및 장치
TW200846980A (en) 2007-05-28 2008-12-01 High Tech Comp Corp Keypad structure and handheld electronic device using the same
US8265382B2 (en) 2007-05-29 2012-09-11 Livescribe, Inc. Electronic annotation of documents with preexisting content
US8127254B2 (en) 2007-06-29 2012-02-28 Nokia Corporation Unlocking a touch screen device
KR20090024541A (ko) 2007-09-04 2009-03-09 삼성전자주식회사 하이퍼링크 선택 방법 및 이를 이용하는 이동통신 단말기
US20090058823A1 (en) 2007-09-04 2009-03-05 Apple Inc. Virtual Keyboards in Multi-Language Environment
KR101515064B1 (ko) 2007-09-04 2015-04-24 삼성전자주식회사 휴대 단말기 및 그의 터치 키패드 표시 방법
US20090058820A1 (en) 2007-09-04 2009-03-05 Microsoft Corporation Flick-based in situ search from ink, text, or an empty selection region
US20110047459A1 (en) 2007-10-08 2011-02-24 Willem Morkel Van Der Westhuizen User interface
US20090091541A1 (en) 2007-10-09 2009-04-09 Stephen Chen Method for controlling appearing and disappearing of screen keyboard tables
KR100878191B1 (ko) * 2007-10-27 2009-01-13 주식회사 자코드 통신단말기의 문자/숫자 입력장치 및 입력방법
US20090122018A1 (en) 2007-11-12 2009-05-14 Leonid Vymenets User Interface for Touchscreen Device
EP2060970A1 (en) 2007-11-12 2009-05-20 Research In Motion Limited User interface for touchscreen device
US20090128581A1 (en) 2007-11-20 2009-05-21 Microsoft Corporation Custom transition framework for application state transitions
US20090132957A1 (en) 2007-11-21 2009-05-21 Sharp Laboratories Of America Inc. System and method for selecting thumbnails in a multi-page document
US20090140986A1 (en) 2007-11-30 2009-06-04 Nokia Corporation Method, apparatus and computer program product for transferring files between devices via drag and drop
US9767681B2 (en) 2007-12-12 2017-09-19 Apple Inc. Handheld electronic devices with remote control functionality and gesture recognition
JP4364273B2 (ja) * 2007-12-28 2009-11-11 パナソニック株式会社 携帯端末装置及び表示制御方法並びに表示制御プログラム
TWI416399B (zh) * 2007-12-28 2013-11-21 Htc Corp 手持式電子裝置及其操作方法
US20090174679A1 (en) 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface
CN101477431A (zh) * 2008-01-04 2009-07-08 宏达国际电子股份有限公司 手持式电子装置及其操作方法
US8384671B2 (en) 2008-01-07 2013-02-26 Mark Shkolnikov Split QWERTY keyboard with reduced number of keys
US20090189858A1 (en) 2008-01-30 2009-07-30 Jeff Lev Gesture Identification Using A Structured Light Pattern
US20090195959A1 (en) 2008-01-31 2009-08-06 Research In Motion Limited Electronic device and method for controlling same
US8412150B2 (en) 2008-02-21 2013-04-02 Apple Inc. Transitional data sets
US8555207B2 (en) 2008-02-27 2013-10-08 Qualcomm Incorporated Enhanced input using recognized gestures
CA2714534C (en) 2008-02-28 2018-03-20 Kenneth Perlin Method and apparatus for providing input to a processor, and a sensor pad
KR20090093250A (ko) * 2008-02-29 2009-09-02 황재엽 터치식 가상 키보드 상의 투명 가상 마우스 방법
US8289283B2 (en) 2008-03-04 2012-10-16 Apple Inc. Language input interface on a device
US8650507B2 (en) 2008-03-04 2014-02-11 Apple Inc. Selecting of text using gestures
US20090231281A1 (en) 2008-03-11 2009-09-17 Microsoft Corporation Multi-touch virtual keyboard
US20090235281A1 (en) 2008-03-12 2009-09-17 Inventec Corporation Handheld electronic device, input device and method thereof, and display device and method thereof
US8358277B2 (en) 2008-03-18 2013-01-22 Microsoft Corporation Virtual keyboard based activation and dismissal
KR101456490B1 (ko) 2008-03-24 2014-11-03 삼성전자주식회사 터치 스크린 키보드 디스플레이 방법 및 그와 같은 기능을갖는 장치
KR101513023B1 (ko) 2008-03-25 2015-04-22 엘지전자 주식회사 단말기 및 이것의 정보 디스플레이 방법
US7453441B1 (en) 2008-03-31 2008-11-18 International Business Machines Corporation Method and system for intelligent keyboard illumination
DE102008017840A1 (de) 2008-04-08 2009-10-29 Vodafone Holding Gmbh Elektronische Anzeigeeinrichtung sowie Verfahren zu deren Bedienung
US20090251422A1 (en) 2008-04-08 2009-10-08 Honeywell International Inc. Method and system for enhancing interaction of a virtual keyboard provided through a small touch screen
US9582049B2 (en) 2008-04-17 2017-02-28 Lg Electronics Inc. Method and device for controlling user interface based on user's gesture
US20090267906A1 (en) 2008-04-25 2009-10-29 Nokia Corporation Touch sensitive apparatus
TWI375162B (en) 2008-05-02 2012-10-21 Hon Hai Prec Ind Co Ltd Character input method and electronic system utilizing the same
US8174503B2 (en) 2008-05-17 2012-05-08 David H. Cain Touch-based authentication of a mobile device through user generated pattern creation
GB2462579A (en) 2008-06-10 2010-02-17 Sony Service Ct Touch screen display including proximity sensor
US20090309768A1 (en) 2008-06-12 2009-12-17 Nokia Corporation Module, user interface, device and method for handling accidental key presses
US9002680B2 (en) 2008-06-13 2015-04-07 Nike, Inc. Foot gestures for computer input and interface control
KR101504201B1 (ko) * 2008-07-02 2015-03-19 엘지전자 주식회사 이동단말기 및 그의 키패드 표시방법
US20100020033A1 (en) 2008-07-23 2010-01-28 Obinna Ihenacho Alozie Nwosu System, method and computer program product for a virtual keyboard
KR200450989Y1 (ko) 2008-07-25 2010-11-16 이노디지털 주식회사 양면 터치스크린을 구비한 플랫 패널 형상의 모바일 장치
WO2010018579A2 (en) 2008-08-12 2010-02-18 Benjamin Firooz Ghassabian Improved data entry system
US8595638B2 (en) 2008-08-28 2013-11-26 Nokia Corporation User interface, device and method for displaying special locations on a map
US20100064261A1 (en) 2008-09-09 2010-03-11 Microsoft Corporation Portable electronic device with relative gesture recognition mode
US8621045B2 (en) 2008-09-12 2013-12-31 At&T Intellectual Property I, L.P. Portable communication interface for accessing media content
CN101685342B (zh) * 2008-09-26 2012-01-25 联想(北京)有限公司 一种动态虚拟键盘的实现方法及装置
US20100079380A1 (en) 2008-09-30 2010-04-01 Nokia Corporation Intelligent input device lock
KR101586627B1 (ko) 2008-10-06 2016-01-19 삼성전자주식회사 멀티 터치를 이용한 리스트 관리 방법 및 장치
US8175612B2 (en) 2008-10-23 2012-05-08 Anansi Networks, Inc. System and method for map-based radio spectrum allocation search
US8411046B2 (en) 2008-10-23 2013-04-02 Microsoft Corporation Column organization of content
CN101729736A (zh) 2008-10-24 2010-06-09 鸿富锦精密工业(深圳)有限公司 具有图片编辑功能的电子相框及方法
US20100110017A1 (en) 2008-10-30 2010-05-06 Research In Motion Limited Portable electronic device and method of controlling same
US8368658B2 (en) 2008-12-02 2013-02-05 At&T Mobility Ii Llc Automatic soft key adaptation with left-right hand edge sensing
JP2010134755A (ja) * 2008-12-05 2010-06-17 Toshiba Corp 通信機器
US20100146459A1 (en) 2008-12-08 2010-06-10 Mikko Repka Apparatus and Method for Influencing Application Window Functionality Based on Characteristics of Touch Initiated User Interface Manipulations
US9041660B2 (en) 2008-12-09 2015-05-26 Microsoft Technology Licensing, Llc Soft keyboard control
US20100185949A1 (en) 2008-12-09 2010-07-22 Denny Jaeger Method for using gesture objects for computer control
US20100153313A1 (en) 2008-12-15 2010-06-17 Symbol Technologies, Inc. Interface adaptation system
WO2010071630A1 (en) 2008-12-15 2010-06-24 Hewlett-Packard Development Company, L.P. Gesture based edit mode
US20100156793A1 (en) 2008-12-19 2010-06-24 Ozias Orin M System and Method For An Information Handling System Touchscreen Keyboard
US8443303B2 (en) 2008-12-22 2013-05-14 Verizon Patent And Licensing Inc. Gesture-based navigation
US8289162B2 (en) 2008-12-22 2012-10-16 Wimm Labs, Inc. Gesture-based user interface for a wearable portable device
NL2002498C2 (nl) 2008-12-23 2010-06-24 Teach You Bv Ophangsysteem voor een elektronisch lesbord.
US9864513B2 (en) 2008-12-26 2018-01-09 Hewlett-Packard Development Company, L.P. Rendering a virtual input device upon detection of a finger movement across a touch-sensitive display
JP2010176332A (ja) * 2009-01-28 2010-08-12 Sony Corp 情報処理装置、情報処理方法およびプログラム
US8633901B2 (en) 2009-01-30 2014-01-21 Blackberry Limited Handheld electronic device having a touchscreen and a method of using a touchscreen of a handheld electronic device
RU2011134935A (ru) 2009-02-04 2013-03-10 Кейлесс Системз Лтд. Система ввода данных
US8686954B2 (en) 2009-02-23 2014-04-01 Blackberry Limited Touch-sensitive display and method of controlling same
US8286106B2 (en) 2009-03-13 2012-10-09 Oracle America, Inc. System and method for interacting with status information on a touch screen device
US20100235784A1 (en) 2009-03-16 2010-09-16 Bas Ording Methods and Graphical User Interfaces for Editing on a Multifunction Device with a Touch Screen Display
US8839155B2 (en) 2009-03-16 2014-09-16 Apple Inc. Accelerated scrolling for a multifunction device
US8274536B2 (en) 2009-03-16 2012-09-25 Apple Inc. Smart keyboard management for a multifunction device with a touch screen display
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
US20100238125A1 (en) 2009-03-20 2010-09-23 Nokia Corporation Method, Apparatus, and Computer Program Product For Discontinuous Shapewriting
WO2010110550A1 (en) * 2009-03-23 2010-09-30 Core Logic Inc. Apparatus and method for providing virtual keyboard
KR101844366B1 (ko) 2009-03-27 2018-04-02 삼성전자 주식회사 터치 제스처 인식 장치 및 방법
US8300023B2 (en) 2009-04-10 2012-10-30 Qualcomm Incorporated Virtual keypad generator with learning capabilities
JP5229084B2 (ja) 2009-04-14 2013-07-03 ソニー株式会社 表示制御装置、表示制御方法およびコンピュータプログラム
US20100277414A1 (en) 2009-04-30 2010-11-04 Qualcomm Incorporated Keyboard for a portable computing device
US8669945B2 (en) 2009-05-07 2014-03-11 Microsoft Corporation Changing of list views on mobile device
US20100293498A1 (en) 2009-05-14 2010-11-18 Larenzo Maxfield Bible Interface for Computer
US20100289756A1 (en) 2009-05-15 2010-11-18 Anzures Freddy A Accelerometer-based control for radio broadcast receivers
KR101601040B1 (ko) 2009-05-19 2016-03-09 삼성전자주식회사 휴대 단말기의 화면 표시 방법 및 이를 지원하는 휴대 단말기
US8619029B2 (en) 2009-05-22 2013-12-31 Motorola Mobility Llc Electronic device with sensing assembly and method for interpreting consecutive gestures
KR101564222B1 (ko) 2009-05-26 2015-11-06 삼성전자주식회사 휴대단말의 잠금 모드 해제 방법 및 장치
US9141284B2 (en) 2009-05-28 2015-09-22 Microsoft Technology Licensing, Llc Virtual input devices created by touch input
US9141768B2 (en) 2009-06-10 2015-09-22 Lg Electronics Inc. Terminal and control method thereof
DE102009031354A1 (de) 2009-07-01 2011-01-05 GÖTZL, Gertrud Klemmhalter zur Befestigung eines Anzeigemittels an einer Basis
US20110006996A1 (en) 2009-07-08 2011-01-13 Smith Nathan J Private data entry
US8347232B1 (en) 2009-07-10 2013-01-01 Lexcycle, Inc Interactive user interface
KR101578430B1 (ko) 2009-07-13 2015-12-18 엘지전자 주식회사 이동 단말기
US8407613B2 (en) 2009-07-13 2013-03-26 Apple Inc. Directory management on a portable multifunction device
KR101596890B1 (ko) 2009-07-29 2016-03-07 삼성전자주식회사 사용자의 시선 정보를 이용한 디지털 오브젝트 탐색 장치 및 방법
US20110039602A1 (en) 2009-08-13 2011-02-17 Mcnamara Justin Methods And Systems For Interacting With Content On A Mobile Device
KR20110022347A (ko) 2009-08-27 2011-03-07 삼성전자주식회사 터치 스크린에서의 노이즈 제거 방법 및 터치 스크린을 구비한 디스플레이 장치에서의 터치 동작 디스플레이 방법
US20110055753A1 (en) 2009-08-31 2011-03-03 Horodezky Samuel J User interface methods providing searching functionality
US8799775B2 (en) 2009-09-25 2014-08-05 Apple Inc. Device, method, and graphical user interface for displaying emphasis animations for an electronic document in a presentation mode
US8624933B2 (en) 2009-09-25 2014-01-07 Apple Inc. Device, method, and graphical user interface for scrolling a multi-section document
KR101115467B1 (ko) 2009-09-30 2012-02-24 주식회사 팬택 가상 키보드 제공 단말 및 그 방법
US8365059B2 (en) 2009-11-03 2013-01-29 Oto Technologies, Llc E-reader semantic text manipulation
US20110106439A1 (en) 2009-11-04 2011-05-05 In-Tai Huang Method of displaying multiple points of interest on a personal navigation device
CN102117164A (zh) * 2009-12-30 2011-07-06 乐金电子(中国)研究开发中心有限公司 一种虚拟键盘的实现方法、装置和设备
EP2341414A1 (en) 2009-12-31 2011-07-06 Sony Computer Entertainment Europe Limited Portable electronic device and method of controlling a portable electronic device
US20110187647A1 (en) 2010-02-04 2011-08-04 Charles Howard Woloszynski Method and apparatus for virtual keyboard interactions from secondary surfaces
US20110191719A1 (en) 2010-02-04 2011-08-04 Microsoft Corporation Cut, Punch-Out, and Rip Gestures
US9519356B2 (en) 2010-02-04 2016-12-13 Microsoft Technology Licensing, Llc Link gestures
US20110231796A1 (en) 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
US20110221684A1 (en) 2010-03-11 2011-09-15 Sony Ericsson Mobile Communications Ab Touch-sensitive input device, mobile device and method for operating a touch-sensitive input device
WO2011123099A1 (en) 2010-03-30 2011-10-06 Hewlett-Packard Development Company, L.P. An image of a keyboard
US20110242138A1 (en) 2010-03-31 2011-10-06 Tribble Guy L Device, Method, and Graphical User Interface with Concurrent Virtual Keyboards
KR101704531B1 (ko) 2010-04-22 2017-02-08 삼성전자주식회사 휴대 단말기의 텍스트 정보 표시 방법 및 장치
US20110283241A1 (en) 2010-05-14 2011-11-17 Google Inc. Touch Gesture Actions From A Device's Lock Screen
US9542091B2 (en) 2010-06-04 2017-01-10 Apple Inc. Device, method, and graphical user interface for navigating through a user interface using a dynamic object selection indicator
US8811948B2 (en) 2010-07-09 2014-08-19 Microsoft Corporation Above-lock camera access
US8249556B2 (en) 2010-07-13 2012-08-21 Google Inc. Securing a mobile computing device
US8452600B2 (en) 2010-08-18 2013-05-28 Apple Inc. Assisted reader
US9465457B2 (en) 2010-08-30 2016-10-11 Vmware, Inc. Multi-touch interface gestures for keyboard and/or mouse inputs
US20120096345A1 (en) 2010-10-19 2012-04-19 Google Inc. Resizing of gesture-created markings for different display sizes
US9377950B2 (en) 2010-11-02 2016-06-28 Perceptive Pixel, Inc. Touch-based annotation system with temporary modes
US8593422B2 (en) 2010-11-05 2013-11-26 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US8587547B2 (en) 2010-11-05 2013-11-19 Apple Inc. Device, method, and graphical user interface for manipulating soft keyboards
US20120112026A1 (en) 2010-11-10 2012-05-10 Kimball Physics, Inc. Apparatus for supporting an assembly of conflat-connected ultra-high vacuum modules
US10503255B2 (en) 2010-12-02 2019-12-10 Immersion Corporation Haptic feedback assisted text manipulation
US9658769B2 (en) 2010-12-22 2017-05-23 Intel Corporation Touch screen keyboard design for mobile devices
US20120162078A1 (en) 2010-12-28 2012-06-28 Bran Ferren Adaptive virtual keyboard for handheld device
US8438473B2 (en) 2011-01-05 2013-05-07 Research In Motion Limited Handling of touch events in a browser environment
US9519418B2 (en) 2011-01-18 2016-12-13 Nokia Technologies Oy Method and apparatus for providing a multi-stage device transition mechanism initiated based on a touch gesture
US10365819B2 (en) 2011-01-24 2019-07-30 Apple Inc. Device, method, and graphical user interface for displaying a character input user interface
US9116616B2 (en) 2011-02-10 2015-08-25 Blackberry Limited Portable electronic device and method of controlling same
US20120206370A1 (en) 2011-02-10 2012-08-16 Research In Motion Limited Method and apparatus for displaying keys of a virtual keyboard
US9645986B2 (en) 2011-02-24 2017-05-09 Google Inc. Method, medium, and system for creating an electronic book with an umbrella policy
US8358321B1 (en) 2011-04-29 2013-01-22 Google Inc. Change screen orientation
WO2012159254A1 (en) 2011-05-23 2012-11-29 Microsoft Corporation Invisible control
WO2011137812A2 (zh) * 2011-05-23 2011-11-10 华为终端有限公司 一种输入方法、输入装置和终端设备
US8719719B2 (en) 2011-06-17 2014-05-06 Google Inc. Graphical icon presentation
US20130002565A1 (en) 2011-06-28 2013-01-03 Microsoft Corporation Detecting portable device orientation and user posture via touch sensors
US20130016129A1 (en) 2011-07-14 2013-01-17 Google Inc. Region-Specific User Input
US20130057475A1 (en) 2011-09-01 2013-03-07 Microsoft Corporation Split keyboard for thumb typing
US9262076B2 (en) 2011-09-12 2016-02-16 Microsoft Technology Licensing, Llc Soft keyboard interface
US20130167013A1 (en) 2011-12-23 2013-06-27 Qnx Software Systems Limited Method of presenting digital data on an electronic device operating under different environmental conditions
US10216286B2 (en) 2012-03-06 2019-02-26 Todd E. Chornenky On-screen diagonal keyboard
US8405630B1 (en) 2012-04-12 2013-03-26 Google Inc. Touchscreen text input
JP5672262B2 (ja) 2012-04-27 2015-02-18 コニカミノルタ株式会社 画像処理装置、その制御方法、および、その制御プログラム
US8850350B2 (en) 2012-10-16 2014-09-30 Google Inc. Partial gesture text entry

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180115699A (ko) * 2016-02-23 2018-10-23 마이스크립트 다중 입력 관리를 위한 시스템 및 방법

Also Published As

Publication number Publication date
WO2012061572A3 (en) 2012-06-28
AU2011323269B2 (en) 2015-04-30
JP2015092383A (ja) 2015-05-14
NL2007719C2 (en) 2012-07-17
AU2011323375A1 (en) 2013-05-02
AU2020204503B2 (en) 2020-09-03
HK1190212A1 (zh) 2014-06-27
KR101836540B1 (ko) 2018-04-19
AU2020204503A1 (en) 2020-07-23
CN103384871B (zh) 2016-10-12
JP2013546073A (ja) 2013-12-26
CN107704083B (zh) 2020-09-29
JP5698845B2 (ja) 2015-04-08
AU2016202878A1 (en) 2016-05-26
JP2013545192A (ja) 2013-12-19
JP5873550B2 (ja) 2016-03-01
AU2011323301B2 (en) 2016-02-04
WO2012061628A3 (en) 2012-08-02
NL2007721C2 (en) 2012-07-05
WO2012061569A9 (en) 2013-07-25
NL2007722A (en) 2012-05-10
WO2012061569A2 (en) 2012-05-10
KR20130010052A (ko) 2013-01-24
US20120113007A1 (en) 2012-05-10
AU2011323301A1 (en) 2013-05-09
BR112013010897B1 (pt) 2021-04-27
BR112013010897A2 (pt) 2016-08-02
CN103262017A (zh) 2013-08-21
EP2638460B1 (en) 2018-01-24
JP2013536508A (ja) 2013-09-19
WO2012061572A2 (en) 2012-05-10
CN103403663B (zh) 2017-10-03
US20140071054A1 (en) 2014-03-13
CN107704083A (zh) 2018-02-16
EP2646897A2 (en) 2013-10-09
BR112013011089A2 (pt) 2016-08-23
WO2012061564A3 (en) 2012-06-28
AU2011323375B2 (en) 2016-02-04
JP5676006B2 (ja) 2015-02-25
EP2638460A2 (en) 2013-09-18
WO2012061575A2 (en) 2012-05-10
US9128614B2 (en) 2015-09-08
JP5639279B2 (ja) 2014-12-10
JP6126255B2 (ja) 2017-05-10
NL2007725A (en) 2012-05-08
BR112013011098A2 (pt) 2016-08-02
NL2007723A (en) 2012-05-10
CN103384871A (zh) 2013-11-06
WO2012061628A2 (en) 2012-05-10
BR112013011098B1 (pt) 2020-12-29
KR101503194B1 (ko) 2015-03-16
WO2012061569A3 (en) 2012-10-04
NL2007722C2 (en) 2012-07-05
CN103262017B (zh) 2016-10-12
AU2018205173A1 (en) 2018-08-02
WO2012061575A3 (en) 2012-06-28
WO2012061564A2 (en) 2012-05-10
EP2545434A2 (en) 2013-01-16
KR20130093138A (ko) 2013-08-21
KR20140082863A (ko) 2014-07-02
NL2007719A (en) 2012-05-08
AU2018205173B2 (en) 2020-04-09
EP2646897B1 (en) 2016-10-19
CN103403663A (zh) 2013-11-20
AU2016202878B2 (en) 2018-04-12
KR101511883B1 (ko) 2015-04-13
NL2007721A (en) 2012-05-10
AU2011323269A1 (en) 2012-11-08
EP2545434B1 (en) 2018-02-14
NL2007718C2 (en) 2012-07-17
BR112013011089B1 (pt) 2021-02-09
KR101836564B1 (ko) 2018-03-08
WO2012061566A3 (en) 2012-06-28
NL2007725C2 (en) 2012-07-24
WO2012061566A2 (en) 2012-05-10
NL2007723C2 (en) 2012-07-05
NL2007718A (en) 2012-05-08
US8587547B2 (en) 2013-11-19
JP2016105297A (ja) 2016-06-09
KR20130093141A (ko) 2013-08-21

Similar Documents

Publication Publication Date Title
AU2020204503B2 (en) Device, method, and graphical user interface for manipulating soft keyboards
US8593422B2 (en) Device, method, and graphical user interface for manipulating soft keyboards

Legal Events

Date Code Title Description
A107 Divisional application of patent
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid