KR101368041B1 - 모바일 디바이스들을 위한 압력 감지 사용자 인터페이스 - Google Patents

모바일 디바이스들을 위한 압력 감지 사용자 인터페이스 Download PDF

Info

Publication number
KR101368041B1
KR101368041B1 KR1020127008384A KR20127008384A KR101368041B1 KR 101368041 B1 KR101368041 B1 KR 101368041B1 KR 1020127008384 A KR1020127008384 A KR 1020127008384A KR 20127008384 A KR20127008384 A KR 20127008384A KR 101368041 B1 KR101368041 B1 KR 101368041B1
Authority
KR
South Korea
Prior art keywords
keystroke
touch
detected
touch screen
keystrokes
Prior art date
Application number
KR1020127008384A
Other languages
English (en)
Other versions
KR20120060223A (ko
Inventor
바박 포루탄푸어
살만 사에드
Original Assignee
퀄컴 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 퀄컴 인코포레이티드 filed Critical 퀄컴 인코포레이티드
Publication of KR20120060223A publication Critical patent/KR20120060223A/ko
Application granted granted Critical
Publication of KR101368041B1 publication Critical patent/KR101368041B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202—Constructional details or processes of manufacture of the input device
    • G06F3/0216—Arrangements for ergonomically adjusting the disposition of keys of a keyboard
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Input From Keyboards Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

키스트로크들의 위치뿐만 아니라 다른 키스트로크 특성들, 이를테면 키스트로크 형태 및/또는 압력에 기초하여, 의도된 사용자 키 입력을 결정하는 가상 키패드들이 제공된다. 가상 키패드 레이아웃들은 중첩 또는 멀티-문자 키들을 포함하는 것으로서, 작은 압력 감지 터치 스트린들 상의 타이핑 에러들을 줄이는데 사용될 수 있다. 중첩 또는 멀티-글자 키들 상의 키스트로크들은 압력 감지 터치 스크린에 인가되는 측정된 압력들뿐만 아니라 다른 스트로크 특성들, 이를테면 키스트로크 형태를 이용하여 명확화할 수 있다. 터치 스크린 표면에 가해진 압력의 크기들을 구분할 수 있는 압력 감지 터치 스크린을 이용하는 부가적인 사용자 인터페이스들이 제공된다.

Description

모바일 디바이스들을 위한 압력 감지 사용자 인터페이스{PRESSURE SENSITIVE USER INTERFACE FOR MOBILE DEVICES}
본 발명은 일반적으로 컴퓨터 사용자 입력 디바이스들에 관한 것으로, 더 상세하게는 압력 감지 모바일 디바이스 사용자 인터페이스들에 관한 것이다.
강력하지만 휴대용이며, 소형이지만 완전한 기능의 컴퓨팅 디바이스들에 대한 수요가 계속 증가하고 있다. 이 경향은 전화기들, 비디오 및 오디오 캡처 디바이스들, 비디오 및 오디오 플레이어들, 웹 액세스 터미널들, 및 컴퓨터들로서 현재 기능하는 모바일 전자 디바이스들 (모바일 디바이스들), 이를테면 셀룰러 전화기들의 발전으로 특히 증명되고 있다.
모바일 디바이스들이 복잡 정교해짐에 따라, 애플리케이션 소프트웨어의 다양성 및 복잡 정교함도 증가하여, 모바일 디바이스들을 다용도 생산성 도구들로 변화시켰다. 아직, 모바일 디바이스들 및 그 애플리케이션들의 유용성은 사용자 인터페이스를 위해 이용가능한 작은 영역으로 제한된다. 예를 들어, 종래의 셀룰러 전화기들은 고정 구성의 간단한 키패드를 구비한다. 최근에, 미니어처 쿼티 (QWERTY) 키보드들, 터치 감지 스크린 인터페이스들, 및 재구성가능 키들을 특징으로 하는 모바일 디바이스들이 발매되고 있다.
종래에, 키패드들은 물리적 키의 누름 (depression) 을 모바일 디바이스 및 그것의 애플리케이션 소프트웨어에 의해 해석될 수 있는 전기 신호로 변환하는 기능을 한다. 도 1은 키 누름 이벤트들이 애플리케이션 소프트웨어에 통신될 수도 있는 하나의 방식을 보이는 전형적인 모바일 디바이스의 하드웨어/소프트웨어 아키텍처를 도시한다. 종래의 고정식 키패드 (5) 상의 키의 누름은 회로를 닫거나 또는 커패시턴스 또는 저항을 변경시켜 하드웨어 드라이버 (4) 에 의해 처리될 수 있는 전기 신호가 생기게 한다. 하드웨어 드라이버 (4) 는 특정한 모바일 디바이스에 의존하는 회로, 소프트웨어, 또는 하드웨어와 소프트웨어의 혼합체일 수도 있다. 하드웨어 드라이버 (4) 는 키패드 (5) 로부터 수신된 전기 신호를 모바일 디바이스 상에서 실행중인 소프트웨어 애플리케이션에 의해 해석될 수 있는 포맷으로 변환한다. 이 신호는 애플리케이션 소프트웨어에 의해 액세스가능한 메모리 테이블에서의 인터럽트 또는 저장된 값의 형태일 수도 있다. 이러한 메모리에서의 인터럽트 또는 저장된 값은 런타임 환경 (runtime environment) 소프트웨어 계층 (3) 에 의해 수신될 수도 있다. 런타임 환경 소프트웨어 계층 (3) 의 목적은 애플리케이션 소프트웨어 및 모바일 디바이스 간에 공통 인터페이스를 제공하는 것이다. 따라서, 키 누름 이벤트 신호들은 키 누름 이벤트 메시지의 형태로 애플리케이션 계층 (2) 에 전달된다. 이 애플리케이션 소프트웨어는 키 누름 이벤트의 의미를 이해할 수 있어야 하고, 그러므로 기본 하드웨어 드라이버 (4) 및 키패드 하드웨어 (5) 에 부응하도록 기록될 수 있어야 한다. 또한 키 누름 이벤트들은 사용자 인터페이스 계층 (1) 에 통신되어 이를테면 특정 키와 연관된 값을 디스플레이할 수도 있다.
가상 키패드들 (즉, 터치 감지 디스플레이 표면상의 소프트웨어 생성 키패드들) 은 모바일 디바이스 디자이너들에게 증대된 디자인의 유연성 및 자유를 제공한다. 필요할 때만 터치 감지 디스플레이 표면이 키패드로서 역할을 하도록 멀티태스킹하는 것에 의해, 모바일 디바이스는 키패드가 필요하지 않을 때 사용자에게 더 큰 디스플레이 표면을 제공할 수도 있다. 그러나, 가상 키패드들은 종래의 접근법을 계속 사용한다. 다시 말하면, 가상 키패드들은 통상 종래의 키패드들의 기능 및 레이아웃 디자인을 모사한다.
미국 출원 제 11/996,722 호는 다기능 키들을 갖는 입력 디바이스를 개시하며, 여기서 상이한 기능들은 키들 상의 압력을 변경하거나 키가 눌려지는 깊이 또는 키가 이동되는 거리를 변경함으로써 트리거된다.
미국 출원 제 12/180,587 호는 압력 센서 어레이 장치 및 촉각 감지 방법을 개시한다. 입력 데이터는 미리 결정된 압력을 초과하는 압력이 부과되는 경우에 획득된다.
다양한 실시형태의 시스템들 및 방법들은 압력 감지 디스플레이들을 이용하여, 사용자 데이터 엔트리 스루풋 (throughput) 을 개선하고 데이터 엔트리 에러들을 감소시킬 수도 대안의 가상 키패드들을 제공한다. 가상 키패드의 일 실시형태에서 종래에 개별 키들로서 디스플레이된 키들의 이미지들은 결합되어 결합된 키를 형성한다. 결합된 키에 대한 키스트로크들은 결합된 개별 키들 중 임의의 것을 입력하고자 하는 사용자의 의도를 나타낼 수도 있다. 결합된 가상 키는 개별 키들이 표시되었던 경우보다 훨씬 큰 사이즈로 디스플레이될 수 있으므로, 사용자는 실수로 의도하지 않은 키를 두드릴 가능성이 더 적다. 가변 압력 레벨들 사이를 구별할 수 있는 압력 센서가 개별 키들 중 사용자가 의도한 것을 구별하는데 사용된다. 결합된 키를 가변 압력 레벨들로 두드리는 것에 의해, 사용자들은 그들의 의도된 키를 모바일 디바이스에 통신할 수도 있다. 따라서, 사용자의 의도된 키는 사용자의 키스트로크의 위치 및 사용자가 키스트로크를 실행하는 압력 양자를 상관시킴으로써 결정될 수도 있다.
다른 실시형태에서 가상 키패드 레이아웃에서의 개별 키 이미지들은 일부 키들이 서로 중첩하도록 배치될 수도 있다. 다양한 실시형태들은 위치, 형태 (shape) 및/또는 압력 측정치들의 조합을 활용하여 사용자의 의도된 키패드 엔트리를 구별한다. 일 실시형태에서, 모바일 디바이스는 기준 정지 위치 (baseline resting position) 에서의 사용자의 손가락끝의 위치를 측정하고 어느 쪽 손이 키스트로크를 실행하였는지를 결정함으로써 중첩된 키 이미지에 대한 키스트로크를 명확화할 수도 있다. 다른 실시형태에서, 모바일 디바이스는 터치 형태 및 압력의 측면에서 사용자의 키스트로크 서명을 중첩된 키 이미지들 상에 기록하고, 이 데이터를 이용하여 중첩된 키 이미지에 대한 키스트로크를 명확화할 수도 있다.
모바일 디바이스 디스플레이의 압력 측정 능력들은 다른 애플리케이션들과 연계하여 사용되어 어떤 기능을 개시할 수도 있다. 일 실시형태에서, 모바일 디바이스는 연락처 애플리케이션의 디스플레이 내의 키스트로크의 압력량을 측정하여 사용자의 다양한 연락처 레코드들과 연관된 상이한 연락처 기능들 (예컨대, 음성 통화, 이메일, SMS 등) 을 디스플레이하도록 구성될 수도 있다. 다른 실시형태에서, 모바일 디바이스는 터치 감지 디스플레이 표면에 가해진 압력량을 측정하고 그에 따라 하드웨어 제어 설정들을 조절하도록 구성될 수도 있다. 예를 들어, 모바일 디바이스는 음성 통화 중에 사용자의 귀에 눌려지는 터치 스크린에 인가되는 압력의 측정에 응답하여 스피커의 볼륨 출력을 증가시키도록 구성될 수 있다. 다른 실시형태에서, 모바일 디바이스는 줌 인/아웃 2-핑거 핀치 터치 동안 터치 감지 디스플레이 표면에 가해지는 압력량을 측정하고 그에 따라 확대 (줌) 정도를 조절하도록 구성될 수도 있다.
첨부 도면들은 여기에 통합되고 이 출원서의 부분을 구성하는 것으로서, 본 발명의 예시적인 양태들을 도시하고, 위에서 주어진 전반적인 설명 및 아래에 주어지는 상세한 설명과 함께 본 발명의 특징들을 설명하는데 기여한다.
도 1은 종래 기술의 모바일 디바이스의 하드웨어/소프트웨어 아키텍처 도면이다.
도 2는 종래기술의 가상 키패드의 예시도이다.
도 3은 터치 스크린 디스플레이에 일부 키들을 함께 위치시킨 가상 키패드 레이아웃의 실시형태의 예시도이다.
도 4는 터치 압력을 이용하여 도 3에 도시된 가상 키패드 레이아웃의 실시형태에서 의도된 키스트로크들을 식별하는 프로세스 흐름도이다.
도 5는 일 실시형태에서 사용하기에 적합한 압력 데이터 테이블의 데이터 구조이다.
도 6은 왼손 키들을 보이는 가상 키패드 레이아웃의 실시형태의 예시도이다.
도 7은 왼손 및 오른손 키들 양자가 일부 키들과 중첩하는 가상 키패드 레이아웃의 실시형태의 예시도이다.
도 8은 중첩 영역에서 키스트로크를 실행하는 한 손가락의 움직임을 보이는 사용자의 기준 손가락 끝 정지 위치의 예시도이다.
도 9는 중첩 지역에서 키스트로크를 명확화하기 위한 방법의 실시형태의 프로세스 흐름도이다.
도 10은 중첩 지역에서 키 두드림을 실행할 때 터치 스크린 표면상의 사용자의 키스트로크들의 형태의 예시도이다.
도 11은 중첩 지역에서 키스트로크를 명확화하기 위한 방법의 다른 실시형태를 도시하는 프로세스 흐름도이다.
도 12는 일 실시형태에 따른 학습 모듈의 시스템 구성 도면이다.
도 13은 중첩 지역에서의 키스트로크들에 대한 사용자의 키스트로크 서명 데이터를 캡처하는 티칭 (teaching) 루틴을 도시하는 프로세스 흐름도이다.
도 14는 중첩 지역에서 키스트로크를 명확화하기 위한 방법의 다른 실시형태를 도시하는 프로세스 흐름도이다.
도 15는 중첩 지역에서 키스트로크를 명확화하기 위한 방법의 다른 실시형태를 도시하는 프로세스 흐름도이다.
도 16은 중첩 지역에서 키스트로크를 명확화하기 위한 방법의 다른 실시형태를 도시하는 프로세스 흐름도이다.
도 17은 가상 키패드 레이아웃의 대안적인 실시형태의 예시도이다.
도 18은 예시적인 연락처 애플리케이션 최상위 (top) 메뉴 디스플레이의 예시도이다.
도 19는 단일 키스트로크의 측정된 압력에 기초하여 연락처 기능을 개시하기 위한 방법의 실시형태를 도시하는 프로세스 흐름도이다.
도 20은 오디오 볼륨 출력을 제어하기 위한 방법의 실시형태를 도시하는 프로세스 흐름도이다.
도 21은 터치 스크린 표면상에 가해진 압력의 측정량에 기초하여 핀치 제스처에서의 디스플레이 확대를 제어하기 위한 방법의 실시형태를 도시하는 프로세스 흐름도이다.
도 22는 단축번호 기능의 실시형태에서 사용하기에 적합한 압력 데이터 테이블의 데이터 구조이다.
도 23은 이미지 줌 기능의 실시형태에서 사용하기에 적합한 압력 데이터 테이블의 데이터 구조이다.
도 24는 여러 실시형태들에서 사용하기에 적합한 모바일 디바이스의 예시적인 구성요소들을 도시하는 구성요소 블록도이다.
다양한 양태들이 첨부 도면들을 참조하여 상세히 설명될 것이다. 가능한 곳이라면 어디서든, 동일한 참조 번호들이 도면들 전체를 통해서 동일하거나 유사한 부분들을 참조하는데 사용될 것이다. 특정한 예들 및 구현예들에 대한 언급들은 예시의 목적을 위한 것이고, 발명 또는 청구항들의 범위를 제한하려는 의도는 아니다.
여기서 사용되는 바와 같이, 용어들 "모바일 핸드셋들" 및 "모바일 디바이스들" 은 상호교환하여 사용되고, 다양한 셀룰러 전화기들, 개인휴대 정보단말들 (PDA들), 팜탑 컴퓨터들, 랩톱 컴퓨터들, 무선 전자 메일 수신기들 (예컨대, Blackberry® 및 Treo® 디바이스들), 및 멀티미디어 인터넷 가능 셀룰러 전화기들 (예컨대, Blackberry Storm®), 및 유사한 개인용 전자 디바이스들 중의 임의의 것을 지칭한다. 모바일 디바이스는 도 24를 참조하여 하기에서 더 충분하게 설명되는 것과 같이 프로그램가능 프로세서 및 메모리를 구비할 수도 있다.
여기서 사용되는 바와 같이, 용어들 "키패드" 및 "키보드" 는 상호교환적으로 사용되어 입력 데이터를 컴퓨팅 디바이스에 전달하는데 사용되는 다양한 구성의 사용자 입력 디바이스들 중의 어느 하나, 이를테면 쿼티 (QWERTY) (또는 다른) 키보드, 숫자 패드, 게임 컨트롤러, 및 뮤직 키보드를 일반적으로 지칭한다. 다양한 양태들은 그 "키들" 이 디스플레이될 수도 있는 "가상" 사용자 입력 디바이스들을 수반하며, 용어들 "키패드" 및 "키보드" 는 눌러질 수 있는 물리적인 키들을 요구할 의도는 아니고, 그보다는 사용자 손가락에 의한 터치 (누름) 를 감지하고 그 터치를 컴퓨팅 디바이스에 대한 입력으로서 해석할 수 있는 임의의 사용자 입력 디바이스를 지칭한다.
여기서 사용된 바와 같이, 용어 "터치 감지 표면"은 사용자 손가락에 의한 터치 (또는 누름) 를 검출하거나 감지하고 그 터치를 컴퓨팅 디바이스에 대한 입력으로서 해석하도록 구성된 어떤 표면이라도 포괄한다. 특히, 터치 감지 표면은 사용자의 손가락 끝의 터치의 위치 및/또는 형태를 결정할 수 있다. 표면에 대한 손가락끝의 터치 위치 및/또는 형태를 감지하는 것은 다양한 공지된 기술들 중의 임의의 것을 이용하여 달성될 수 있다. 예를 들어, 터치 감지 표면들은 사용자의 터치를 직접 검출하는 압력 감지 표면들, 캐패시턴스 감지 표면들, 및 인덕턴스 감지 서비스들을 포함할 수도 있다. 다른 예시적인 터치 센서는 사운드 또는 진동 측정치들을 이용하여 사용자 터치의 위치를 검출하고 결정할 수도 있는데, 이를테면 초음파 센서는 덮개 유리를 통과하여 이동하는 초음파의 영향에 기초하여 터치를 검출할 수 있거나, 또는 사운드 또는 진동 센서들은 덮개 유리 상의 터치로부터 수신되는 진동 또는 사운드의 삼각측량 (triangulation) 에 기초하여 터치의 위치를 결정할 수 있다.
터치 감지 표면은 다양한 표면들 중의 어느 것에도 채용될 수도 있고, 따라서 특정 유형의 디바이스 또는 폼으로 한정되는 의도는 아니다. 여기서 사용되는 바와 같이, "터치 감지 스크린" 또는 "터치스크린"은 디스플레이와 결합하는 터치 감지 표면이다. 디스플레이는 물리적 디스플레이, 이를테면 (Blackberry Storm®에서처럼) 액정 디스플레이 일 수도 있다.
여기서 사용되는 바와 같이, 용어들 "가상 키패드" 및 "가상 키보드" 는 터치 감지 표면, 이를테면 터치 스크린상에 디스플레이되는 키패드 이미지를 지칭한다. 가상 키패드는 숫자들 또는 글자 (letter) 들로 한정될 필요는 없고, 여기서 사용된 바와 같이 키 또는 버튼의 사용자 활성화에 관계가 있는 임의의 사용자 인터페이스라도 포괄한다. 숫자 및 글자가 아닌 가상 키패드들의 예들은 터치 감지 표면을 구비한 게임 컨트롤러들, 디바이스 컨트롤러들 (예컨대, TV 리모트 컨트롤), 애플리케이션 인터페이스들, 및 조이스틱들을 포함한다. 예를 들어, 가상 키패드는 MP3 또는 비디오 플레이어 애플리케이션을 위한 사용자 인터페이스로서 구현될 수도 있다.
여기서 사용되는 바와 같이, 용어 "키패드 레이아웃 데이터" 는 가상 키패드에서의 키들의 위치, 사이즈, 형태, 및 방위에 관한 정보, 특히 가상 키패드의 이미지를 생성하는데 사용될 수 있는 정보를 총괄하여 지칭한다.
모바일 디바이스들이 점점 더 강력한 컴퓨팅 플랫폼들이 됨에 따라, 사용자들은 그들의 모바일 디바이스들 상에서 데스크톱의 체험을 얻는 것을 추구한다. 이들 사용자들을 만족시키기 위하여, 많은 모바일 디바이스들은 사용자들에게 단순한 12 키 (0-9, * 및 #) 키패드들과는 대조적으로, 데이터 엔트리를 위해 완전한 영숫자 쿼티 스타일 키패드들을 제공한다. 컴퓨팅 디바이스 키패드의 구체적인 하드웨어/소프트웨어 인터페이스가 도 1에 도시되어 있다. 키패드 (5) 상의 키의 누름은 하드웨어 드라이버 (4) 에 의해 처리될 수 있는 전기 신호를 발생한다. 하드웨어 드라이버 (4) 는 특정한 컴퓨팅 디바이스 (예컨대, 모바일 디바이스) 에 의존하는 회로, 소프트웨어, 또는 하드웨어와 소프트웨어의 혼합체일 수도 있다. 하드웨어 드라이버 (4) 는 키패드 (5) 로부터 수신된 전기 신호를 컴퓨팅 디바이스 상에서 실행중인 소프트웨어 애플리케이션 (2) 에 의해 해석될 수 있는 포맷으로 변환한다. 이 신호는 애플리케이션 (2) 에 의해 액세스가능한 메모리 테이블에서의 인터럽트 또는 저장된 값의 형태일 수도 있다. 이러한 메모리에서의 인터럽트 또는 저장된 값은 런타임 환경 또는 운영 체제의 부분일 수도 있는 키패드 인터페이스 (3) 에 의해 수신될 수도 있다. 키패드 인터페이스 (3) 의 목적은 애플리케이션 소프트웨어 (2) 및 컴퓨팅 디바이스 키패드 (5) 간에 공통 인터페이스를 제공하는 것이다. 따라서, 키 누름 이벤트 신호들은 애플리케이션 계층 (2) 에 애플리케이션 (2) 이 해석할 수 있는 표준 키 누름 이벤트 신호들 또는 메시지들 (예컨대, ASCI 문자 값들) 의 형태로 통신될 수도 있다.
도 1에 도시된 바와 같은 이미 공지된 시스템/하드웨어 아키텍처들을 이용하여, 애플리케이션 개발자들은 그들의 소프트웨어를 "표준" 키패드 레이아웃 (예를 들어, QWERTY 키보드 또는 숫자 패드) 또는 애플리케이션이 로딩되어야 하는 각 유형의 모바일 디바이스에 고유한 키패드 레이아웃으로 동작하도록 조정하여야 한다. 특정 키 세트 (예를 들어 게임 또는 디바이스 리모트 컨트롤) 를 요구하는 애플리케이션은, 고정 키패드 레이아웃을 가지는 디바이스들 상에서 동작하지 않을 수도 있거나 또는 제한된 혹은 사용자 비친화적인 방식으로 동작될 수도 있다. 애플리케이션 소프트웨어와 키패드들 사이의 표준 인터페이스 및 다른 사용자 인터페이스들로서 키패드 프로토콜을 제공하기 위한 시스템들 및 방법들이 2008년 6월 16일에 출원된 "Standardized Method and Systems for Providing Configurable Keypads"라는 명칭의 본 출원인 공동소유의 미국특허출원 제12/139,823호에 최근에 개시되었고, 그 전체 내용은 모든 목적을 위해 참조로서 여기에 통합된다.
모바일 디바이스에 대한 분명한 치수 제한은 없지만, 사용자들은 사용자의 주머니 속에 쉽게 들어맞지 않는 모바일 디바이스들을 피할 수도 있다. 따라서, 모바일 디바이스 디자이너들은 종종 주머니 사이즈의 디바이스에 많은 특징들을 통합하는 것을 추구한다. 모바일 디바이스들에 완전한 쿼티 스타일 키보드를 제공하는 것의 단점들 중의 하나는 키보드에 의해 소비되는 디바이스의 실제 면적의 양이다. 완전한 쿼티 키보드를 가능하게 하기 위해서, 디스플레이 사이즈는 모바일 디바이스의 주머니 사이즈의 치수들을 유지하기 위해 감소되어야 한다.
터치 스크린 기술의 도래로, 일부 모바일 디바이스들에는 가상 키보드들이 장착되어 있다. 모바일 디바이스 표면의 일부를 물리적 키보드로 전용하는 대신, 가상 키보드가 필요할 때만 터치 스크린상에 디스플레이된다. 가상 키보드를 더 큰 터치 스크린 디스플레이 (물리적 키보드의 제거로 가능하게 됨) 상에 디스플레이하는 것에 의해 각각의 키 이미지는 물리적 키보드들에 의해 이전에 이용가능했던 것보다 더 큰 사이즈로 형성될 수도 있다. 그럼에도 불구하고, 사용자들은 작은 사이즈의 개별 키들과 결합된 키패드 상에서 개별 키들을 묘사하는 촉각적 피드백 없이는, 키스트로크 에러들이 통상적이라는 불평을 종종 한다. 키스트로크 에러들은 사용자들이 하나의 키를 두드리려고 시도하지만 모바일 디바이스가 인접한 키의 두드림을 감지할 때 일어날 수도 있다. 이러한 문제들을 극복하기 위하여, 다양한 실시형태들은 사용자 데이터 엔트리 스루풋을 개선하기 위하여 압력 측정치들 또는 키스트로크 치수 분석과 결합되는 대안적인 가상 키보드 레이아웃들을 제시한다.
도 2는 모바일 디바이스 (101) 의 종래의 터치 스크린 디스플레이 (102) 상에 디스플레이되는 예시적인 종래의 가상 키패드의 예시도이다. 터치 스크린 디스플레이 (102) 는 기록된 키스트로크들을 사용자에게 디스플레이하는 디스플레이 영역 (104) 뿐만 아니라 종래의 쿼티 키패드 레이아웃을 모사하는 가상 키패드 영역 (105) 을 구비할 수도 있다. 각각의 글자에는 종래의 가상 키패드 레이아웃으로 그 소유의 개별 키가 제공된다. 도 2에 도시된 바와 같이, 모바일 디바이스들에는 모바일 디바이스의 이용가능한 전체 실제 면적의 대부분을 구성하는 터치 스크린 디스플레이 (102) 가 제공될 수도 있다. 가상 키패드가 필요하지 않은 경우에, 증가된 디스플레이 사이즈는 사용자가 인터넷 웹 페이지들을 보는 것과 같은 태스크들을 수행할 때 매우 바람직한 더 큰 이미지들과 더 완전한 스크릿 샷들을 볼 수 있게 한다.
종래의 터치 스크린 디스플레이들 (102) 은 사용자가 터치 스크린 디스플레이 표면상에서 터치한 시점과 위치를 파악하는 능력을 가질 수도 있다. 그러나, 기존의 터치 스크린 디스플레이는 디스플레이 표면의 각각의 터치에 의해 가해진 압력의 양을 측정하거나 구별하지는 않는다. 따라서, 종래의 터치 스크린 디스플레이들은 사용자가 디스플레이 표면을 터치한 시점과 위치를 결정할 수도 있지만 사용자가 그 표면을 얼마나 강하게 터치하는지를 결정할 수 없다. 종래의 터치 스크린들의 하나의 단점은 터치 스크린 표면에 가해진 어떤 압력이 터치로서 등록될 수도 있어 의도하지 않은 키스트로크 엔트리를 발생한다는 것이다. 결과적으로, 사용자들은 그들의 손가락들을 종래의 가상 키보드 상에서는 그대로 둘 수 없다. 그보다는, 사용자들은 그들의 손가락들을 키들의 위쪽에 맴돌도록 하며 이는 사용자가 지치고 데이터 입력 스루풋이 감소되게 할 수도 있다.
더 큰 터치 스크린 디스플레이들 (102) 에도 불구하고, 사용자들은 종래의 가상 키보드들이 사용하기 어렵고 종종 의도하지 않은 키스트로크들 (즉, 인접한 키들이 잘못 입력됨) 이 야기된다고 여전히 불평한다. 이는 종종 사용자 불만으로 이어지고 가상 키패드 사용을 꺼리게 한다. 일부 해법들이 이 문제를 풀기 위하여 시도되었지만 상반된 결과들을 얻었다. 예를 들어, 일부 모바일 디바이스들은 예측식 (predictive) 워드 기술들의 형식에 의존하여 사용자 데이터 입력 스루풋을 개선한다. 그러나, 이러한 해법들은 증가된 처리 시간 및 사용자 리뷰 그리고 예측된 키스트로크들의 수용 (acceptance) 을 필요로 하고, 이것에 의해 데이터가 입력될 수 있는 레이트가 느려지게 한다. 더구나, 현재의 예측식 워드 기술들은 통상적이지 않은 워드들 또는 숫자들, 이를테면 이름들 및 어드레스들을 예측할 수 없다.
터치 스크린 기술들에서의 혁신들은 모바일 디바이스 디자이너들에게 압력 감지 디스플레이들을 제공할 것으로 예상된다. 터치 스크린 디스플레이들에 곧 통합될 수도 있는 새로운 압력 감지 기술들은 사용자가 터치 스크린 디스플레이 표면을 터치한 위치뿐만 아니라 사용자가 그 표면을 얼마나 강하게 터치했는지도 모바일 디바이스가 결정할 수 있게 한다. 일 예로서, 스탄텀 아이엔씨. (Stantum Inc.) 는 모바일 디바이스들로의 통합을 위한 고품질 저항막 (resistive) 터치 스크린 디스플레이 표면을 생산하는데, 이것은 터치 스크린 디스플레이 표면에서 사용자가 터치하는 위치뿐만 아니라 사용자가 그 터치 스크린 디스플레이 표면을 얼마나 강하게 터치하는지의 모두를 측정한다. 스탄텀 터치 스크린 디스플레이 능력들의 입증은 http://www.stantum.com/spip.php?page=video 에서 볼 수도 있다. 이러한 압력 감지 터치 스크린 디스플레이들을 채용하면, 사용자들이 그들의 손가락들을 터치 스크린 약간 위에서 정지 (rest) 하여도 의도하지 않은 키스트로크들로서 터치들이 검출되는 일이 없도록 모바일 디바이스들이 구성되게 할 수도 있다. 다양한 실시형태들은 이러한 압력 감지 터치 스크린 디스플레이들을 이용하여 모바일 디바이스들에 사용자 체험을 개선할 수도 있는 대안적인 가상 키패드 레이아웃들을 제공한다.
도 3은 압력 감지 터치 스크린 디스플레이 기술들을 이용하는 가상 키패드 레이아웃의 일 실시형태의 예시도이다. 도 3에 도시된 실시형태에서, 모바일 디바이스 (111) 는 압력 감지 터치 스크린 디스플레이 (112) 를 구비하는데 이 디스플레이는 모바일 디바이스가 터치 스크린 표면 상의 사용자의 터치에 의해 가해진 힘의 위치 및 크기를 결정할 수 있게 한다. 도시된 예에서, 디스플레이는 2 개의 영역들, 즉 검출된 키스트로크들을 보이는 제 1 영역인 디스플레이 영역 (114); 및 제 2 영역인 가상 키패드 영역 (115) 으로 세분된다. 종래의 가상 키패드들 (예컨대, 도 2의 도면부호 (105) 참조) 과는 대조적으로, 도시된 실시형태의 가상 키패드 (115) 는 단일 키들이 2 개의 글자들을 위해 사용되는 쿼티 스타일 키패드 레이아웃을 표시한다. 예를 들어, QW 키 (120) 는 글자 Q 및 W 양자를 위해 사용된다. 2 개의 글자들을 단일 키로 결합함으로써, 가상 키패드 디스플레이는 공간적으로 더 떨어져 있는 더 큰 키들을 제공할 수 있고 이는 키스트로크 에러들을 줄이는 것을 도울 수 있다. 더 큰 키들 및 키들 간의 더 넓은 간격은 인접한 키의 부정확한 키스트로크의 확률을 줄일 것이다. 오직 2 개의 가능한 키 엔트리들만이 도 3에 도시된 가상 키패드의 실시형태에서 단일의 결합된 키에 할당되고 있지만, 2 개를 초과하는 가능한 키 엔트리들이 단일 키로 결합될 수도 있다. 예를 들어, 가상 키패드의 일 실시형태는 숫자 0-9를 결합하는 단일 숫자 키를 구비할 수도 있다.
하나의 키에 할당된 2 개의 글자들 (예컨대, Q 및 W) 을 구별하기 위하여, 모바일 디바이스는 압력 감지 터치 스크린 디스플레이의 능력들을 이용하여 키에 인가되는 압력을 측정하도록 구성될 수도 있다. 2 개의 글자들 또는 숫자들을 상이한 양의 측정된 압력과 상관시킴으로써, 모바일 디바이스는 키스트로크로 인가되는 측정된 힘에 기초하여 2 개의 키들 중의 어느 것이 기록할 키 인지를 결정할 수 있다. 이러한 능력을 갖는 모바일 디바이스를 사용할 때, 사용자는 상이한 양의 힘을 인가하여 의도된 키스트로크를 나타낼 수도 있다. 예를 들어, 사용자가 Q 를 입력할 의도이면, 사용자는 QW 키를 가볍게 두드릴 수 있는 반면, 사용자가 W 를 입력할 의도이면, 사용자는 QW 키를 더 큰 힘으로 두드릴 수 있다. 모바일 디바이스는 결합된 키와 연관된 각각의 글자 또는 숫자를 측정된 압력 값들의 범위와 상관시킬 수도 있다. 10개의 숫자 중 어느 것이 단일 숫자 키의 누름으로 의도되는지를 결정하기 위하여, 모바일 디바이스는 인가된 힘을 측정하고 측정된 값을 10개의 숫자 값들의 각각에 상관된 압력 범위들의 테이블에 대해 비교할 수도 있다.
도 4는 도 3에 도시된 실시형태의 가상 키패드 레이아웃 상의 사용자 키스트로크들을 검출하고 해석하기 위한 방법의 실시형태를 도시하는 프로세스 흐름도이다. 애플리케이션에 의해 키패드를 디스플레이하라는 요구가 있을 때마다, 모바일 디바이스 프로세서와 통신하는 터치 감지 표면 및 디바이스 드라이버는 도 3에 도시된 바와 같은 가상 키패드 레이아웃을 생성하고 디스플레이할 수 있다 (단계 201). 사용자가 가상 키패드 상의 키 이미지를 두드릴 때 압력 감지 터치 스크린은 키스트로크의 위치를 캡처할 뿐만 아니라 키스트로크에 의해 가해진 압력의 양을 측정할 수도 있다 (단계 205). 키스트로크 위치 및 압력 측정치 양자는 모바일 디바이스 프로세서에 통신되어 모바일 디바이스 프로세서에 의해 수신될 수 있다 (단계 305). 모바일 디바이스 프로세서는 검출된 터치 위치 좌표들을 가상 키패드 키 좌표들과 비교함으로써 키스트로크 위치를 가상 키와 상관시킬 수 있다 (단계 310). 이는 터치 좌표들이 터치 위치에 관련된 문자 (character) 들을 찾아보는데 사용되는 데이터 테이블 룩업 프로세스로 달성될 수 있다. 예를 들어, 사용자가 압력 감지 터치 스크린의 QW 키 (120) 가 디스플레이되는 곳을 터치한다면, 프로세서는 그 터치 위치를 글자들인 Q 및 W 와 상관시킬 것이다. 일단 상관된 글자들이 결정되면, 모바일 디바이스 프로세서는 사용자에 의해 가해진 측정된 압력을 이용하여 의도된 글자를 결정함으로써 키스트로크를 명확화 (즉, 상관된 키들 중의 어느 것이 사용자가 입력을 의도한 키들인지를 파악) 할 수 있다 (단계 315). 이 프로세스는, 측정된 압력이 압력 데이터 테이블의 압력 범위들과 비교되어 대응하는 글자를 결정하는, 데이터 테이블 룩업 동작으로 달성될 수도 있다. 구체적인 압력 데이터 테이블이 도 5에 도시되어 있다.
도 5를 참조하면, 압력 데이터 테이블 (501) 의 제 1 열은 특정 가상 키와 연관된 가능한 문자들을 확인할 수도 있다. 위에서 설명된 바와 같이, 모바일 디바이스 프로세서는 눌러진 키를 사용자 키스트로크의 위치 좌표들에 기초하여 결정할 수 있다 (단계 310 참조). 일단 프로세서가 터치된 키를 결정하면, 측정된 압력은 대응하는 키를 결정하기 위해 압력 데이터 테이블 (501) 내의 범위들과 비교될 수도 있다. 사용자가 QW 키 (120) 를 두드렸던 위의 예를 이용하여, 터치 스크린 표면에 가해진 힘의 크기가 10 뉴턴 미만의 힘인 것으로 측정된다면, 프로세서는 압력 데이터 테이블 (501) 로부터 사용자가 글자 Q 를 입력하는 것을 의도하고 있다고 결정할 수도 있다. 그러나, 터치 스크린 표면에 가해진 힘의 크기가 10 뉴턴보다 큰 것으로 측정되면 프로세서는 사용자가 글자 W 를 입력하는 것을 의도하고 있다고 결정할 수도 있다. 도 3에 도시된 구체적인 가상 키패드 레이아웃에서, 키 중 일부는 단일 글자들 또는 기능들과 연관된다는 것에 주의한다. 예를 들어, "L", "M", 스페이스 (space), 시프트 (shift), 삭제 (delete), 및 리턴 (return) 키들 각각은 단일 문자 또는 기능을 나타낸다. 따라서, 프로세서는 이러한 키스트로크들이 명확할 것이기 때문에 대응하는 키를 결정하기 위해 압력 데이터 테이블 (501) 에 액세스할 필요가 없을 것이다. 그럼에도 불구하고, 압력 데이터 테이블 (501) 은 동일한 글자를 도시된 압력 범위들 둘 다에 상관시킬 수도 있다.
도 4를 참조하여, 일단 키스트로크가 명확하다면 (즉, 의도된 문자가 결정되었다면), 모바일 디바이스 프로세서는 그 문자를 입력으로서 기록하고, 의도된 문자의 디스플레이 이미지를 생성하거나 파악된 기능을 수행할 수 있다 (단계 320). 적절하다면, 식별된 문자의 이미지가 터치 스크린상에 디스플레이될 수 있다 (단계 220). 사용자들이 개별 키스트로크들로 인가된 압력의 양을 제어하는 것에 더욱 능숙해짐에 따라, 가상 키패드 레이아웃 및 검출 방법의 실시형태는 사용자들이 데이터를 증가된 속력으로 입력하는 것을 허용할 수도 있다.
도 6 및 도 7에 도시된 다른 실시형태에서, 압력 측정치 또는 터치 형태 정보를 이용하여 중복하는 키들에 대하여 키스트로크들을 명확화함으로써 타이핑 속력을 증가시킬 수 있는 대안적인 가상 키패드 레이아웃이 구현될 수 있다. 도시된 바와 같이, 전형적인 모바일 디바이스 터치 스크린들의 폭을 약간 증가시킴으로써, 많은 인체공학적 "내추럴 스타일 키보드" 레이아웃들과 유사한 가상 키패드 레이아웃이 구현될 수도 있다. 생체역학적 분석은 반복되는 스트레스성 활동, 이를 테면 키보드상의 타이핑 동안 종종 발생하는 근육의 압박 (muscle strain) 및 스트레스를 최소화할 의도의 인체공학적 키보드의 개발로 이어졌다. 종래의 쿼티 키보드 레이아웃의 키들을 2 개의 그룹들로 분리하고 이 2 개의 그룹들의 키들을 분리하는 각도를 사용자의 손들의 자연스러운 회내 (pronation) 와 더욱 일치하도록 함으로써, 근육 압박 및 스트레스는 최소화될 수도 있다.
도 6은 모바일 디바이스 (151) 상에 디스플레이되는 가상 키패드 레이아웃의 왼손 키보드 부분 (156) 을 도시한다. 모바일 디바이스 (151) 는 디스플레이 스크린 (152) 을 구비하며 이 스크린은 디스플레이 영역 (154) 과 가상 키패드 영역 (155) 을 구비한다. 이 실시형태에서, 왼손 부분 (156) 은 디스플레이 영역 (154) 에 거의 수직이다.
도 7은 왼손 부분 (156) 및 오른손 부분 (157) 양자를 구비하는 전체 가상 키패드 레이아웃 (155) 이 모바일 디바이스 (151) 상에 디스플레이되는 것을 도시한다. 모바일 디바이스의 전체 폭을 약간 증가시키고, 따라서 터치 스크린 디스플레이 (152) 의 사이즈를 증가시킴으로써, 왼손 및 오른손 부분들 (156, 157) 양자에서의 개별 문자 키들의 사이즈는 잘못된 키스트로크들 (즉, 인접한 키들에 대한 의도하지 않은 키스트로크들) 의 확률을 낮출 만큼 크게 디스플레이될 수도 있다. 디스플레이 영역의 최선의 사용을 위하여, 오른손 부분 (157) 에 있는 최상단 행의 키들은 중첩 지역 (158) 에서 왼손 부분 (156) 의 최상단 행의 키들과 중첩될 수도 있다. 사용자가 중첩 지역 (158) 에 있지 않은 어떤 키를 두드리는 경우, 프로세서는 도 4의 단계 (310) 를 참조하여 위에서 설명된 바와 같은 종래의 프로세싱을 이용하여 의도된 문자를 결정할 수 있다. 그러나, 사용자가 중첩 지역 (158) 에 있는 키를 두드리는 경우 키스트로크를 명확화하기 위해 추가의 프로세싱이 요구된다. 압력 감지 터치 스크린 디스플레이로부터 수신되는 압력 측정 정보는 이러한 명확화를 달성하는데 사용될 수도 있다.
중첩 지역 (158) 에서 키스트로크들을 명확화하기 위한 방법의 실시형태에서, 터치 스크린상의 모든 손가락 터치들의 기준 위치 판독치는 디스플레이 표면상에서 정지중인 사용자의 손가락끝들의 위치를 결정하기 위해 획득될 수도 있다. 종래의 터치 스크린 디스플레이들과는 달리, 압력 감지 터치 스크린 디스플레이는 그 표면상에 정지한 손가락들 및 그 표면에 압력을 인가하는 키스트로크들 사이를 구별할 수 있다. 그러한 사용자 인터페이스는 사용하기에 더 편할 뿐만 아니라 정지 위치 정보는 중첩 지역 (158) 에서 키스트로크를 달성하기 위해 어떤 손가락이 이동되었는지를 결정하는데 사용될 수 있다. 어떤 손가락끝이 더 이상 기준 위치에 있지않는지의 분석에 의해 모바일 디바이스 프로세서는 중첩 키들 중의 어느 것이 사용자가 터치하려고 의도한 키 인지를 결정할 수도 있다. 예를 들면, W 및 P 키들이 도시된 예시적인 가상 키보드 레이아웃에서 중첩된다. 사용자들은 보통은 왼손의 넷째 손가락으로 W 키를 누르고 오른손의 새끼 손가락으로 P 키를 누른다. 따라서, 중첩 지역 (158) 에서의 키스트로크를 달성하기 위해 어떤 손가락이 그 정지 위치에 남아있는지를 주목함으로써, 프로세서는 어떤 손이 키스트로크를 실행했는지를 결정할 수 있고, 이 정보로부터, 2 개의 중첩 키들 중의 어느 것이 사용자가 두드리기를 의도했던 것인지를 결정할 수 있다. 프로세서는 그에 따라 중첩 지역에서의 수신된 키스트로크를 적절한 문자와 상관시킬 수도 있다.
도 8은 도 7에 도시된 가상 키패드 레이아웃의 실시형태상에서 정지중인 사용자의 손가락끝들의 예시적인 기준 위치들을 도시한다. 키스트로크가 중첩 지역에서 일어났다는 지시를 프로세서가 수신하는 경우, 프로세서는 키스트로크를 명확화하여 중첩 키들 중의 어느 것이 사용자가 두드리려고 의도한 것인지를 결정해야 한다. 디스플레이 표면상에서 정지중인 각 손가락끝의 현재 위치를 체크함으로써, 프로세서는 어떤 손가락끝이 더 이상 그 기준 위치에 있지 않은지를 결정할 수도 있다. 이 정보를 이용하면, 프로세서는 중첩 키들 중의 어느 것이 사용자가 의도했던 것인지를 결정할 수도 있다. 도 8에 도시된 실시예에서, 디스플레이 표면상에서 정지중인 사용자의 손가락끝들의 위치들은 진회색 (dark gray) 원들에 의해 식별된다. 대부분의 사용자의 경우, 왼손 손가락끝들은 "A", "S", "D", 및 "F" 키들 상에 또는 적어도 "A, S, D, F, G" 행의 어딘가에는 자연스럽게 정지할 것이다. 왼손 엄지손가락은 통상적으로 "V" 키 상에, 또는 적어도 "Z, X, C, V, B" 행의 어딘가에 정지할 수도 있다. 오른손 손가락끝들은 "J", "K", 및 "L" 키들 상에, 또는 적어도 "H, J, K, L" 행의 어딘가에 자연스럽게 정지할 것이다. 오른손잡이의 엄지손가락은 "N" 키 위치상에, 또는 적어도 "N, M, 삭제, 리턴" 행에 정지할 수도 있다. 도 8에 도시된 손가락끝 위치들은 예시적인 것으로만 의도되고 있음에 주의해야 할 것이다. 실제 사용자 기준 손가락끝 위치들은 변화할 수도 있다.
도시된 가상 키패드 레이아웃의 실시형태에서, 중첩 지역 (158) 은 "Q", "W", "E", "R", "T", "Y", "U", "I", "O", 및 "P" 키들을 포함한다. 통상, "Q" 키를 두드리기 위하여 사용자는 왼손의 새끼 손가락을 이용할 수 있다. "W" 키를 두드리기 위하여 사용자는 왼손의 넷째 손가락을 이용할 수 있다. "E" 키를 두드리기 위하여 사용자는 왼손의 가운데 손가락을 이용할 수 있다. "R" 키를 두드리기 위하여 사용자는 왼손의 가운데 또는 집게 손가락을 이용할 수 있다. "T" 키를 두드리기 위하여 사용자는 왼손의 집게 손가락을 이용할 수 있다. "Y" 키를 두드리기 위하여 사용자는 오른손의 집게 손가락을 이용할 수 있다. "U" 키를 두드리기 위하여 사용자는 오른손의 가운데 또는 집게 손가락을 이용할 수 있다. "I" 키를 두드리기 위하여 사용자는 오른손의 가운데 손가락을 이용할 수 있다. "O" 키를 두드리기 위하여 사용자는 오른손의 넷째 손가락을 이용할 수 있다. "P" 키를 두드리기 위하여 사용자는 오른손의 새끼 손가락을 이용할 수 있다. 도 7에 도시된 바와 같이, 중첩 지역에서 "W" 키는 "P" 키와 중첩될 수 있다. 따라서, "W" 키 및 "P" 키 양자의 영역에서의 키스트로크는 모호할 것이고, 프로세서가 의도된 문자 엔트리를 결정하기 위해 추가의 프로세싱을 수행할 것을 필요로 한다. "T" 또는 "U" 키들의 영역으로의 키스트로크가 실행되었을 때 왼손의 집게 손가락이 기준 위치 (연회색 원 및 화살표로서 도시됨) 로부터 이동하였음을 결정하는 것에 의해, 프로세서는 사용자가 두드리려고 의도한 것이 "T" 키 이고 "U" 키는 아니라고 결정할 수 있다. 마찬가지로, 프로세서는 어느 쪽 손 (왼손 또는 오른손) 의 어떤 손가락이 중첩 지역에서의 키스트로크를 실행하기 위하여 기준 위치로부터 이동하였는지를 결정함으로써 사용자가 "E" 또는 "O" 키, "R" 또는 "I" 키, 또는 "T" 또는 "U" 키 중 어느 것을 두드리려고 의도하였는지를 결정할 수도 있을 것이다.
도 9는 도 7에 도시된 가상 키패드 레이아웃 실시형태의 중첩 지역 (158) 에서의 키스트로크들을 명확화하기 위한 방법의 일 실시형태를 도시하는 프로세스 흐름도이다. 도 4에 도시된 프로세스 흐름과 마찬가지로, 키패드가 애플리케이션에 의해 디스플레이될 것이 요구될 때마다, 모바일 디바이스 프로세서와 통신하는 터치 감지 표면 및 디바이스 드라이버는 도 7에 도시된 실시형태와 같은 가상 키패드 레이아웃을 생성하고 디스플레이할 수 있다 (단계 201). 압력 감지 터치 스크린은 일정한 압력 임계치를 초과하는 키스트로크를 검출할 수 있다 (단계 202). 사용자는 디스플레이 표면상에 손가락끝들을 정지시킬 수 있기 때문에, 키스트로크 압력이 일정한 임계치를 넘어야만 키스트로크들을 정지중인 손가락끝 위치들로부터 구별할 수 있다. 압력 임계치를 초과하는 키스트로크가 검출된다면 키스트로크의 위치는 캡처될 수도 있다 (단계 206). 키스트로크의 위치는 프로세서에 이를테면 디스플레이 좌표들의 형태로 통신될 수 있다 (단계 306). 프로세서는 키스트로크의 위치가 중첩 지역 (158) 에 있는지를 결정할 수 있다 (결정단계 307). 키스트로크가 중첩 지역 내에 있지 않으면 (즉, 결정단계 307 = 아니오), 프로세서는 이를테면 추가의 프로세싱 없이 대응하는 문자를 검색하기 위해 위치 좌표들을 이용하여 키스트로크 위치를 대응하는 문자에 상관시키고, 문자 엔트리를 기록하고 의도된 키의 디스플레이 이미지를 생성할 수도 있다 (단계 320). 디스플레이 이미지는 사용자로의 디스플레이를 위해 터치 스크린에 통신될 수 있다 (단계 220).
키스트로크가 중첩 지역 내에 있으면 (즉, 결정단계 307 = 예), 프로세서는 디스플레이 표면상에서 압력 임계치 미만의 모든 터치들의 현재 위치를 결정할 수 있다 (단계 308). 이는 디스플레이 표면상의 모든 터치들의 위치를 보고할 것을 압력 감지 터치 스크린에 요구하는 것과 관계가 있을 수도 있다. 대안적으로, 압력 감지 터치 스크린은 압력 임계치 미만의 터치들을 포함한 모든 터치들의 위치를 계속 보고할 수 있고, 이 경우 프로세서는 그러한 터치 위치 데이터를 버퍼 메모리로부터 간단히 액세스할 수 있다. 프로세서는 모든 현재 터치들의 수신된 위치들을 저장된 기준 위치와 비교하여 어떤 터치가 기준 위치로부터 벗어났는지를 결정할 수 있다 (단계 309). 기준 위치 데이터는 압력 임계치 미만의 모든 터치들의 위치들을 빈번하게 획득하여 그 위치들을 메모리에 저장함으로써 획득될 수 있다. 이런 방식으로, 임계치를 초과하는 키스트로크의 수신 전에 모든 임계치 미만의 터치들의 위치들은 메모리에서 이용가능하게 될 수 있다. 대안적인 실시형태에서, 프로세서는 사용자의 손가락들의 평균 위치를, 압력 임계치 미만의 모든 터치들의 위치들에 관한 다수의 관측에 기초하여 결정하고, 그 평균 위치를 기준 위치로서 사용할 수 있다. 어느 손가락끝 또는 어느 측 (즉, 오른손 측과 마주보는 왼손 측) 이 그것의 기준 위치로부터 벗어났는지를 결정함으로써, 프로세서는 위에서 설명된 방식으로 중첩 지역에서의 키스트로크를 명확화할 수 있다 (단계 311). 일단 사용자가 두드리려고 의도한 키가 어떤 키 인지를 프로세서가 결정하면, 프로세서는 대응하는 문자의 엔트리를 기록하고 그 문자의 디스플레이 이미지를 생성할 수 있다 (단계 320). 디스플레이 이미지는 사용자로의 디스플레이를 위해 터치 감지 표면 및 디바이스 드라이버에 통신될 수도 있다 (단계 220).
다른 실시형태에서, 중첩 지역 (158) 에 위치된 키스트로크에 할당되는 적절한 문자는 키스트로크 터치의 형태 및/또는 배향을 분석함으로써 결정될 수도 있다. 중첩 지역 (158) 에서 왼손의 손가락으로부터의 키스트로크는 오른손의 손가락으로부터의 키스트로크의 형태 및/또는 배향과는 상이하게 터치 스크린에 의해 감지된 형태 및/또는 배향을 가질 수도 있다. 통상, 사용자들이 그들의 손가락끝들을 디스플레이 스크린 표면상에 정지시킬 때 터치들은 대략 둥글게 나타날 수 있다. 그러나, 사용자들이 중첩 지역 (158) 에 있는 키에 손을 뻗을 때, 디스플레이 스크린 표면상의 터치의 형태는 길쭉한 (oblong) 형태로 나타날 수도 있다. 어떤 경우들에서는, 이 길쭉한 형태는 눈물방울 모양과 유사할 수도 있다.
도 10은 사용자가 중첩 지역에서 키스트로크를 실행할 때 일어날 수도 있는 고유의 터치 형태를 도시한다. 도 10은 기준 위치에 정지중인 9개의 고정된 손가락 위치들과 중첩 지역 (158) 에서 키스트로크를 실행하는 사용자의 왼손으로부터의 집게 손가락의 터치 형태를 묘사한다. 집게 손가락의 펼침과 사용자의 손의 나머지 손가락들의 자연스런 포지셔닝 덕분에, 터치 스크린 표면상에서 만들어지는 터치 형태는 눈물방울 또는 일부 다른 인식가능 형태로서 나타날 수도 있다. 도 10에 도시된 예에서, 눈물방울 형태의 테일 부분은 키스트로크를 실행한 손 (도시된 실시예에서 왼손) 이 속한 디스플레이 측을 향하게 된다. 중첩 지역에서 키스트로크의 터치 형태 및 배향을 분석함으로써, 프로세서는 중첩 지역 (158) 의 중첩 키들 상의 키스트로크를 명확화할 수도 있다.
일 실시형태에서, 터치 형태의 분석은 눈물방울 터치 형태의 테일 부분이 유지하고 있는 키패드 레이아웃 측면을 결정하는 것에 관계가 있을 수도 있다. 테일 부분이 왼쪽을 가리키고 있다면, 키스트로크는 왼손의 손가락으로 실행되었고, 그러므로 왼손 중첩 키 (즉, W, E, R 또는 T 중의 하나) 가 눌러졌다고 결정될 것이다. 마찬가지로, 테일 부분이 오른쪽을 가리키고 있다면, 키스트로크는 오른손의 손가락으로 실행되었고, 그러므로 오른손 중첩 키 (즉, Y, U, I 또는 O 중의 하나) 가 눌러졌다고 결정될 것이다. 도 9를 참조하여 위에서 설명된 방법의 실시형태에서처럼, 어떤 손이 중첩 지역의 특정 키 위치로의 키스트로크를 실행했는지를 결정하는 것에 의해, 프로세서는 사용자가 두드리길 의도했던 키를 결정할 수 있다.
도 11은 중첩 지역에서 키스트로크들을 명확화하기 위한 방법의 대안적인 실시형태를 도시하는 프로세스 흐름도이다. 도 9에 도시된 프로세스 흐름과 마찬가지로, 압력 감지 터치 스크린은 사용자 또는 애플리케이션에 의해 키패드가 요구될 때마다 가상 키패드 레이아웃을 디스플레이한다 (단계 201). 압력 감지 터치 스크린은 키스트로크가 임계 압력을 초과하는 측정 압력으로 실행되는 시점을 검출한다 (단계 202). 압력 감지 터치 스크린은 키스트로크 형태를 포함하는 키스트로크의 위치 좌표들 (즉, 윤곽 좌표들) 을 캡처할 수 있다 (단계 212). 이 정보는 모바일 디바이스 프로세서에 통신된다 (단계 312). 이 정보에 기초하여, 프로세서는 키스트로크가 중첩 지역 (158) 에서 실행되었는지를 결정할 수 있다 (결정단계 307). 도 9를 참조하여 위에서 설명된 바와 같이, 키스트로크가 중첩 지역 (158) 에서 일어나지 않으면 (즉, 결정단계 307 = 아니오), 프로세서는 대응하는 문자를 추가의 프로세싱 없이 식별하고, 그 문자를 입력으로서 수신하고 식별된 문자의 디스플레이 이미지를 생성할 수 있다 (단계 320). 이 디스플레이 이미지는 사용자로의 디스플레이를 위해 압력 감지 터치 스크린에 통신될 수 있다 (단계 220).
키스트로크가 중첩 지역 내에 있다고 결정되면 (즉, 결정단계 307 = 예), 프로세서는 중첩 지역 키스트로크의 배향을 결정할 수 있다 (단계 313). 이는 터치 형태를 분석하여 다른 비대칭 특성들의 장축을 확인함으로써 달성될 수 있다. 예를 들어, 눈물방울 터치 형태가 인식되는 일 실시형태에서, 프로세서는 키스트로크 형태의 나머지 부분에 대하여 테일 부분이 향하는 배향을 결정할 수 있다. 테일 부분의 이 배향은 중첩 지역에서 키스트로크를 실행하는 손을 결정하는데 사용될 수 있다. 다른 실시형태들에서 프로세서는 중첩 지역 키스트로크에 의해 만들어지는, 검출된 길쭉한 터치 형태의 장축의 배향을 결정할 수 있다. 중첩 키들에 따라, 터치 형태의 장축의 각도는 왼손 키스트로크를 위한 하나의 배향으로 및 오른손 키스트로크를 위한 다른 배향으로 지향될 수 있다.
일단 중첩 지역 터치 형태의 배향이 결정되면, 프로세서는 도 9를 참조하여 위에서 논의된 것과 유사한 방식으로 중첩 지역에서의 키스트로크를 명확화할 수도 있다. 구체적으로는, 키스트로크를 실행한 손 및 키스트로크 위치의 2 개의 중첩 키들을 결정함으로써, 프로세서는 2 개의 키들 (예컨대, "T" 또는 "U", "R" 또는 "I" 등) 중 어떤 것이 눌려졌었는지를 결정할 수 있다. 일단 프로세서가 눌러졌었던 키를 결정하면, 프로세서는 대응하는 문자를 입력으로서 수신하고 식별된 문자의 디스플레이 이미지를 생성한다 (단계 320). 이 디스플레이 이미지는 사용자로의 디스플레이를 위해 압력 감지 터치 스크린에 통신될 수도 있다 (단계 220).
중첩 키들의 영역 상에서 키스트로크를 명확화하기 위한 방법의 다른 실시형태에서, 모바일 디바이스는 상이한 키스트로크들을 측정된 키스트로크 특성들, 이를테면 형태 및 인가된 압력에 기초하여 구별하도록 학습할 수 있는 학습 모듈을 활용할 수도 있다. 학습 모듈을 이용하면, 프로세서는 특정 사용자의 키스트로크 서명들에 관한 데이터를 수집할 수 있다. 이러한 키스트로크 서명 데이터는 사용자가 학습 모듈에 그 값이 알려져 있는 키들, 이를테면 디스플레이된 텍스트를 타이핑 하는 트레이닝 세션 동안 또는 모바일 디바이스 스피커에 의해 방출되는 청각 명령들에 응답하여 수집될 수도 있다. 이러한 키스트로크 서명 데이터는 사용자가 특정 키를 두드리는 고유 위치들, 각각의 키스트로크의 고유 형태 및/또는 각각의 키를 두드릴 때 사용자가 가하는 고유 압력량의 측정치들을 포함할 수도 있다. 이 데이터를 학습 세션 동안 수집함으로써, 프로세서는 후속하는 두드림 위치들, 형태들 및/또는 압력 판독치들을 상관시켜 중첩 지역에서의 키스트로크들을 명확화할 수도 있다. 하기에서 더 충분히 설명되는 바와 같이, 다양한 실시형태들과 관련된 학습 알고리즘들은 모바일 디바이스 프로세서 내에서 학습 모듈로 구현될 수도 있는데, 이 학습 모듈은 프로세서에서 동작하는 프로세서 실행가능 명령들의 모듈일 수도 있다.
학습 모듈 및 트레이닝 루틴들이 하기에서 쿼티 키보드 레이아웃의 측면에서 설명되지만, 다양한 양태들은 다른 유형들의 키패드들, 이를테면 상이한 키 레이아웃들을 갖는 숫자 키패드들 및 영숫자 키패드들을 정의하는데 적용될 수도 있다. 예를 들어, 다양한 양태들은 캐나다 다국어 표준, 캐나다 프랑스어, 체코어, 덴마크어, 네덜란드어, 페로어 (Faroese), 아일랜드어, 이탈리아어, 노르웨이어, 폴란드어, 포르투갈어 (포르투갈), 포르투갈어 (브라질), 루마니아어 (루마니아 및 몰도바), 슬로바키아어, 스페인어 (스페인), 스페인어 (라틴 아메리카), 스웨덴어/핀란드어, 영국식, 영국 확장식 (extended), 및 미국 국제식을 위해 정의된 것들을 포함하여, 변형된 형태의 쿼티 키보드 레이아웃들에 적용될 수도 있다. 다양한 양태들은 예를 들어, QWERTZ (체코어, 헝가리, 독일, 및 오스트리아, 슬로바키아어, 보스니아어, 크로아티아어, 세르비아어 (라틴), 및 슬로베니아어, 세르비아어 (키릴 자모), 스위스 독일어, 스위스 프랑스어, 스위스 이탈리아어, 리히텐슈타인어, 및 룩셈부르크어를 위해 정의된 것들을 포함), AZERTY (프랑스어 및 벨기에어를 위해 정의된 것들 포함), QZERTY, 드보락 (Dvorak) 키보드, 콜맥 (Colemak) 키보드, 터키어, 및 코디드 (chorded) 키보드들을 포함한 다른 유형들의 키보드 레이아웃들에도 동일하게 잘 적용된다. 게다가, 다양한 양태들은, 예를 들어, 아랍어, 아르메니아어, 그리스어, 히브리어, 러시아어, 우크라이나어, 불가리아어, 데바나가리어, 태국어, 크메르어, 티벳 스크립트, 티베트어 (중국), 종카어 (부탄), 중국어, 일본어, 한글 (한국어), 두벌식 (Dubeolshik), 세벌식 (Sebeolsik) 390, 세벌식 최종, 및 세벌식 노시프트를 포함한 비-라틴 알파벳들 및 비 알파벳 쓰기에 최적화된 키보드들에 적용될 수도 있다. 게다가, 다양한 실시형태들은 뮤직 키보드들, 이를테면 피아노 키보드에 적용될 수 있다.
사용자들이 모바일 디바이스 프로세서에 그들의 고유한 키스트로크 서명들을 알려주기 전에, 모바일 디바이스는 가상 키보드 레이아웃, 이를테면 도 7에 도시된 레이아웃을 디스플레이할 수도 있다. 사용자가 가상 키보드 레이아웃과 인터페이싱하므로, 학습 모듈은 사용자가 중첩 지역에서 키스트로크들을 실행하는 특정 방식을 기록할 수도 있다. 후속하는 키스트로크들의 특성들을 학습 세션 동안 기록되는 키스트로크 서명 데이터와 비교함으로써, 프로세서는 중첩 지역 (158) 에서의 키스트로크를 명확화할 수 있다.
도 12는 다양한 실시형태들을 가능하게 하는 모바일 디바이스의 시스템 구성도이다. 모바일 디바이스는 가상 키보드 (12) 가 그 위에 디스플레이되는 압력 감지 터치 스크린 (14) 을 구비할 수도 있다. 압력 감지 터치 스크린 (14) 은 하드웨어 드라이버 (4) 에 결합될 수도 있고 이 드라이버는 표면으로의 키스트로크들과 연관된 신호들을 수신하고 그런 신호들을 컴퓨팅 디바이스 운영 체제, 이를테면 키패드 인터페이스 (3) 에 의해 해석될 수 있는 키스트로크 이벤트, 좌표 및 측정된 압력 신호들로 번역한다. 설명의 편이를 위해, 키패드 인터페이스 (3) 는 프로세스 모듈로서 도시되었지만, 컴퓨팅 디바이스 운영 체제의 기능의 일 부분 또는 이 컴퓨팅 디바이스의 펌웨어 또는 하드웨어 구성요소일 수도 있다. 예시적인 구현에서, 키패드 인터페이스 (3) 기능은 키스트로크 이벤트 신호들을 운영 체제의 환경 내에서 동작하는 애플리케이션들 (2) 로, 이 애플리케이션에 의해 해석될 수 있는 포맷으로 중계한다. 하드웨어 및 컴퓨팅 디바이스 구현예에 의존하여, 키패드 인터페이스 (3) 와 결합하여, 압력 감지 터치 스크린 (14) 을 위한 하드웨어 드라이버 (4) 는 가상 키보드 (12) 디스플레이를 생성할 수도 있다. 게다가, 하드웨어 드라이버 (4) 및/또는 키패드 인터페이스 (3) 는 압력 감지 터치 스크린 (14) 상의 키스트로크들을 이 키스트로크들의 위치 좌표들에 기초하여 특정 키들에 대한 두드림들 (strikes) 로서 해석할 수도 있다. 하드웨어 드라이버 (4) 및/또는 키패드 인터페이스 (3) 는 터치 스크린 디스플레이의 정밀도 및 해상도에 의지하여 특정 키에 대한 각각의 키스트로크의 형태를 추가로 결정할 수도 있다. 덧붙여서, 하드웨어 드라이버 (4) 및/또는 키패드 인터페이스 (3) 는 각각의 키스트로크에 의해 관련된 터치 스크린 표면에 가해진 압력의 크기를 측정할 수도 있다. 드라이버 (4) 및/또는 키패드 인터페이스 (3) 는 중첩 키들의 지역들에서의 또는 멀티-문자 키들 상에서의 키스트로크들을 명확화하는 다양한 실시형태들을 구현할 수도 있다. 그러면 키패드 인터페이스 (3) 는 키 누름 이벤트를 눌러진 키를 물리적 키보드로부터 온 것으로서 식별하는 애플리케이션 (2) 에 통신할 수도 있다.
일 실시형태에서, 키패드 인터페이스 (3) 는 사용자의 키스트로크들로부터의 키스트로크 서명 데이터를 모으도록 구성된 학습 모듈 (10) 과 협력할 수도 있다. 위에서 설명된 바와 같이, 학습 모듈 (10) 은 압력 감지 터치 스크린 (14) 상의 키스트로크들의 위치들, 형태 및 압력 (즉, 키스트로크 서명 데이터) 에 관한 정보를 키패드 인터페이스 (3) 또는 하드웨어 드라이버 (4) 로부터 수신하고 이 키스트로크 서명 데이터를 구체적인 문자들 또는 기능들과 상관시킬 수도 있다. 따라서, 각각의 키에 대한 두드림은 상관된 키스트로크 서명 데이터를 가질 수 있다. 그러면 상관된 키스트로크 서명 데이터는 차후의 명확화 시의 사용을 위해 메모리에 저장될 수도 있다. 차후의 가상 키보드 사용 동안 중첩 지역에서의 키스트로크에 의해 야기된 입력 문자 모호성이 있을 때, 상관된 키스트로크 서명 데이터는 메모리로부터 검색되고 측정된 키스트로크 특성들과 비교되어 가장 가능한 매칭물을 결정할 수도 있다. 키스트로크 특성을 저장된 키스트로크 서명 데이터에 매칭시킴으로써, 프로세서는 2 개의 키들 중 어느 것이 사용자가 두드림을 의도한 키 인지를 결정할 수 있다.
일 실시형태에서, 학습 모듈 (10) 은 애플리케이션 (2) 으로서, 모바일 디바이스 운영 체제의 일 부분으로서, 또는 하드웨어 드라이버 (4) 의 일 부분으로서 구현될 수도 있는 프로세서 실행가능 프로세스들일 수도 있다. 또한 학습 모듈 (10) 은 다른 애플리케이션들, 이를테면 트레이닝 애플리케이션, (워드 프로세싱 애플리케이션 내에 구현될 수도 있는) 맞춤법 검사 애플리케이션들 , 및 학습 모듈 (10) 에 의도된 또는 예측된 키스트로크들을 알려줄 수 있는 자동 수정 애플리케이션들로부터 정보를 수신할 수도 있다. 학습 알고리즘들, 인공지능, 또는 다른 추론 프로세스들을 이용하여, 학습 모듈 (10) 은 수집된 키스트로크 서명 데이터를 원하는 또는 적절한 키, 문자 또는 기능에 상관시킬 수도 있다. 학습 모듈 (10) 로부터의 키패드 레이아웃 데이터 (8) 는 키패드 드라이버 (4), 키패드 인터페이스 (3) 또는 컴퓨팅 디바이스 운영 체제의 다른 요소가 가상 키패드 상의 키스트로크 서명 데이터를 적절한 문자 (예컨대, ASCII 문자 값) 으로 해석하는데 사용할 수 있는, 메모리에 저장된 상관 매트릭스의 형태일 수도 있다.
학습 모듈 (10) 은 추론 엔진 (100) 및 명령어 데이터베이스 (106) 를 구비할 수도 있다. 추론 엔진 (100) 은 컴퓨팅 디바이스 프로세서상에서 실행되는 프로세스들 및 규칙들의 형태일 수도 있다. 또한 학습 모듈 (10) 은 초기 학습 루틴들 동안 사용자에게 표시될 수도 있는 트레이닝 명령들 및 학습 텍스트 샘플들을 포함하는, 메모리에 저장될 수 있는 명령어 데이터베이스 (106) 를 구비할 수도 있다.
도 13은 사용자의 키스트로크 서명 데이터를 학습하고, 키스트로크 서명 데이터를 의도된 키들과 상관시키기 위한 예시적인 티칭 프로세스 (300) 를 도시하는 프로세스 흐름도이다. 도 13을 참조하면, 터치 감지 표면 및 디바이스 드라이버가 도 7에 도시된 실시예와 같은 가상 키보드 레이아웃을 생성하고 디스플레이하는 동안 (단계 201), 학습 모듈은 다음 명령어를 위해 명령어 데이터베이스에 액세스할 수도 있다 (단계 325). 액세스된 명령들은 사용자에게 압력 감지 터치 스크린상에서 디스플레이될 수도 있다 (단계 225). 명령어는 중첩 지역 (158) 의 각각의 키에 대해 사용자가 적어도 하나의 키스트로크를 실행할 것을 요구하는 어구를 사용자가 타이핑할 것을 요구할 수 있다. 예를 들어, 사용자는 "The quick brown fox jumped over the lazy dog." 라는 어구를 타이핑하도록 요구될 수도 있다. 이 어구는 로마자 (Roman alphabet) 26 개 글자들의 모두를 적어도 한 번은 포함하고 있기 때문에 선택될 수 있다. 사용자가 각각의 키스트로크를 실행하여 이 어구의 각각의 글자를 타이핑하면, 압력 감지 터치 스크린은 사용자 키스트로크 서명 데이터를 캡처할 수 있다 (단계 230). 키스트로크 서명 데이터는 학습 모듈에 통신될 수 있다 (단계 330). 학습 모듈은 키스트로크 서명 데이터를 명령어 어구의 각각의 글자에 상관시킬 수 있다 (단계 335). 그러면 학습 모듈은 저장된 사용자 키스트로크 서명 데이터 테이블을 예상되는 키에 대한 수신된 키스트로크 서명 데이터로 업데이트할 수 있다 (단계 340). 키스트로크 서명 데이터가 수집되면, 프로세서는 부가적인 키스트로크들이 어구를 완성하기 위해 필요한지를 결정한다 (결정단계 345). 부가적인 키스트로크들이 예상된다면 (즉, 결정단계 345 = 예), 학습 모듈은 다음의 예상되는 키를 위한 키스트로크 서명 데이터를 수신하는 단계 (단계 330) 로 리턴할 수도 있다. 그러나, 마지막의 예상되는 키를 위한 키스트로크 서명 데이터가 수신되었고 업데이트되었다면 (즉, 결정단계 345 = 아니오), 학습 모듈은 부가 명령들이 요구되는지를 결정한다 (결정단계 350). 부가 명령들이 존재한다면 (즉, 결정단계 350 = 예), 학습 모듈은 다음의 명령어를 위해 명령어 데이터베이스에 액세스하기 위해 (단계 325) 리턴할 수도 있다. 부가 명령들이 존재하지 않는다면 (결정단계 350 = 아니오), 터치 감지 표면 및 디바이스 드라이버는 사용자에게 학습 세션이 완료됨을 알리는 메시지를 디스플레이할 수도 있다 (단계 250).
사용자의 키스트로크 서명 데이터가 서명 키스트로크 데이터 테이블에서 업데이트되면, 일 실시형태의 방법은 도 7에 도시된 바와 같은 가상 키보드 레이아웃을 이용하여 사용자의 키스트로크들을 해석하도록 구현될 수도 있다. 도 14는 학습된 키스트로크 서명 데이터를 이용하여 중첩 지역에 있는 키스크로크들을 명확화하기 위해 취해질 수도 있는 단계들을 도시하는 프로세스 흐름도이다. 도 9 및 11을 참조하여 위에서 설명된 프로세스 흐름들처럼, 가상 키보드가 디스플레이되고 (단계 201), 임계치를 초과하는 측정된 압력을 갖는 키스트로크들이 검출된다 (단계 202). 임계치를 초과하는 압력을 갖는 키스트로크가 검출될 때, 압력 감지 터치 스크린은 키스트로크 서명 데이터를 캡처할 수 있다 (단계 215). 이러한 서명 데이터는 예를 들어, 키스트로크의 위치, 키스트로크의 형태, 키스트로크에서 가해진 측정된 압력 등에 관한 데이터를 포함할 수도 있다. 키스트로크 서명 데이터는 모바일 디바이스 프로세서에 통신될 수도 있다 (단계 315). 프로세서는 키스트로크 서명 데이터로부터 키스트로크가 중첩 지역 (158) 에서 발생하였는지를 결정할 수 있다 (결정단계 307). 키스트로크가 중첩 지역 (158) 에 없다면 (즉, 결정단계 307 = 아니오), 프로세서는 모호성 없이 키스트로크 위치를 문자와 상관시키고, 식별된 문자를 입력으로서 수신하고, 식별된 문자의 디스플레이 이미지를 생성할 수도 있다 (단계 320). 디스플레이 이미지는 사용자로의 디스플레이를 위해 터치 감지 표면 및 디바이스 드라이버에 통신될 수 있다 (단계 220).
키스트로크가 중첩 지역에 있는 것으로 결정되면 (즉, 결정단계 307 = 예), 프로세서는 수신된 키스트로크 서명 데이터를 키스트로크 서명 데이터 테이블에 저장된 사용자의 키스트로크 서명 데이터와 비교할 수도 있다 (단계 316). 수신된 키스트로크 서명 데이터 중 저장된 키스트로크 서명 데이터에 가장 가까운 매칭을 결정하고 매칭되는 저장된 서명 데이터에 대응하는 문자 또는 키를 결정하는 것에 의해, 프로세서는 중첩 지역 (158) 에서 키스트로크를 명확화할 수도 있다 (단계 317). 키스트로크가 명확화되고 대응하는 문자가 식별되면, 식별된 문자는 입력으로서 수신될 수 있고, 프로세서는 그 문자의 디스플레이 이미지를 생성할 수 있다 (단계 320). 이 디스플레이 이미지는 사용자로의 디스플레이를 위해 압력 감지 터치 스크린에 통신될 수도 있다 (단계 220).
중첩 지역에서 키스트로크들을 명확화하기 위한 다른 대안적인 실시형태가 도 15에 도시되어 있다. 이 대안적인 실시형태에서, 프로세서는 개별 키스트로크 서명 데이터 값들을 키스트로크 서명 데이터 테이블과 비교함으로써 키스트로크를 명확화하는 것을 시도할 수도 있다. 그러면 키스트로크 명확화 프로세스는 의도된 키가 결정되자마자 종료될 수도 있다. 도 15에 도시된 대안적인 실시형태에서, 프로세서는 단계들 (201, 202, 215 및 315) 뿐만 아니라 결정단계 (307) 를 도 14를 참조하여 위에서 설명된 바와 동일한 방식으로 수행한다. 키스트로크가 중첩 지역에 없다면 (즉, 결정단계 307 = 아니오), 프로세서는 대응하는 문자를 명확화 프로세싱 없이 식별하고, 식별된 문자를 입력으로서 수신하고, 그 문자의 디스플레이 이미지를 생성할 수 있다 (단계 320). 디스플레이 이미지는 사용자로의 디스플레이를 위해 터치 감지 표면 및 디바이스 드라이버에 통신될 수도 있다 (단계 220).
키스트로크가 중첩 지역에 있다면 (즉, 결정단계 307 = 예), 프로세서는 수신된 터치 형태를 키스트로크 서명 데이터 테이블에 저장된 터치 형태들과 비교함으로써 터치 형태에 기초하여 키스트로크를 명확화하는 것을 시도할 수 있다 (단계 355). 프로세서가 검출된 키스트로크 터치 형태를 중첩 지역에 있는 둘 (또는 그 이상의 키들) 중의 하나를 위해 키스트로크 서명 데이터 테이블에 저장된 터치 형태에 매칭시키면, 프로세서는 중첩 지역 (158) 에 있는 키스트로크를 매칭된 형태에 대응하는 문자 또는 키의 키스트로크로서 명확화할 수 있다. 일부 경우들에서는, 키스트로크의 형태는 키스트로크 서명 데이터 테이블에 저장된 특정한 중첩 키들 중의 어느 것을 위한 터치 형태와 매칭되지 않을 수 있다. 이는 사용자에 의한 비정상적인 키스트로크 움직임 또는 사용자가 키스트로크를 실행하는 동안의 디바이스 (151) 의 가능한 움직임 때문일 수 있다. 충분히 매칭되는 터치 형태가 없다면, 프로세서는 긍정적으로 키스트로크를 명확화할 수 없을 수도 있다. 그러므로, 검출된 키스트로크 형태를 키스트로크 서명 데이터 테이블에 저장된 터치 형태들과 매칭시키려는 시도 후, 프로세서는 키스트로크가 명확화되었는지를 결정할 수도 있다 (결정단계 356). 프로세서가 터치 형태에만 기초하여 키스트로크의 위치에서 2 개의 중첩 키들 중의 하나를 선택할 수 있다면 (즉, 결정단계 356 = 예), 프로세서는 추가의 프로세싱 없이 식별된 문자를 입력으로서 수신하고, 식별된 문자의 디스플레이 이미지를 생성할 수도 있다 (단계 320). 디스플레이 이미지는 사용자로의 디스플레이를 위해 터치 감지 표면 및 디바이스 드라이버에 통신될 수도 있다 (단계 220).
프로세서가 터치 형태에만 기초하여 키스트로크를 명확화할 수 없다면 (즉, 결정단계 356 = 아니오), 프로세서는 검출된 키스트로크 압력 측정치를 저장된 키스트로크 서명 데이터의 압력 측정치들에 매칭시키는 것을 시도할 수 있다 (단계 357). 측정된 압력 데이터 및 형태 데이터를 저장된 키스트로크 서명 데이터와 비교함으로써, 프로세서는 다중-변형 (multi-variant) 비교를 수행하여 2 개의 중첩 키들 중의 하나를 가장 가능한 의도된 키 두드림으로서 선택할 수 있다. 일단 프로세서가 키스트로크에 대응하는 문자를 식별하면, 프로세서는 식별된 문자를 입력으로서 수신하고 식별된 문자의 디스플레이 이미지를 생성할 수 있다 (단계 320). 디스플레이 이미지는 사용자로의 디스플레이를 위해 터치 감지 표면 및 디바이스 드라이버에 통신될 수도 있다 (단계 220).
프로세서가 그 서명 데이터를 저장된 키스트로크 서명 데이터와 비교하는 것에 의해 키스트로크를 명확화할 수 없는 경우들에는, 프로세서는 예측식 텍스트 루틴을 적용하여 가장 가능한 의도된 키스트로크를 결정할 수도 있다. 도 16은 이러한 대안적인 실시형태의 방법을 도시하는 프로세스 흐름도이다. 도 16에 도시된 프로세스 흐름은 도 15를 참조하여 위에서 설명된 프로세스 흐름과 유사하며, 따라서 유사한 번호의 단계들의 설명들 또한 적용된다. 측정된 키스트로크 압력을 키스트로크 서명 데이터 테이블에 저장된 키스트로크 서명 압력 데이터와 비교함으로써 키스트로크 명확화를 시도한 후, 프로세서는 키스트로크를 명확화하는 것이 가능했는지를 결정할 수 있다 (결정단계 360). 프로세서가 터치 형태 및 압력 데이터에 기초하여 키스트로크를 명확화할 수 있다면 (즉, 결정단계 360 = 예), 프로세서는 식별된 문자를 입력으로서 수신하며, 식별된 문자를 포함하는 디스플레이 이미지를 생성하고 (단계 320), 이 디스플레이 이미지를 이미지의 디스플레이를 위해 압력 감지 터치 스크린에 통신할 수 있다 (단계 220). 그러나, 프로세서가 여전히 키스트로크를 명확화할 수 없다면 (즉 결정단계 360 = 아니오), 프로세서는 다수의 공지된 예측식 텍스트 루틴들 중의 어느 것을 이행하여 2 개 (또는 그 이상) 의 중첩 키들 사이에서 이전에 입력된 텍스트의 나머지와 가장 잘 매칭되는 문자를 선택할 수 있다 (단계 365). 그 다음 예측된 문자는 검출된 키스트로크와 연관된 입력 문자로서 할당된다 (단계 270). 그러면 프로세서는 식별된 캐릭터를 포함하는 디스플레이 이미지를 생성하고 (단계 320), 이 정보를 이미지를 디스플레이하기 위해 압력 감지 터치 스크린에 통신한다 (단계 220).
도 17은 모바일 디바이스 (151) 상에 디스플레이되는 가상 키패드 레이아웃의 다른 실시형태를 도시한다. 도 17에 도시된 가상 키패드 레이아웃은 왼손 부분 (156) 및 오른손 부분 (157) 사이의 각도가 증가되었다는 것을 제외하면 도 7에 도시된 가상 키패드 레이아웃의 실시형태와 유사하다. 이러한 레이아웃은 상업적으로 입수가능한 인체공학적 "내추럴 스타일 키보드" 레이아웃들과 더 밀접하게 닮아있고 일부 사용자들에게는 더 편안할 수도 있다. 도 17에 도시된 대안적인 가상 키패드 레이아웃을 구현함으로써, 증가된 각도가 사용자의 자연스러운 손의 회내 각도와 더 밀접하게 닮아있을 수도 있으므로 사용자는 더 편안한 데이터 입력 위치를 체험할 수도 있다. 왼손 부분 (156) 및 오른손 부분 (157) 사이의 각도는 더 편안한 손의 위치를 이루고 및/또는 터치 스크린 표면 디스플레이 상에서 서로 중첩되는 키들의 수를 최소화하도록 사용자에 의해 수정될 수도 있다. 왼손 부분 (156) 및 오른손 부분 (157) 사이의 각도의 결과로서, 더 적은 키들이 서로 중첩된다. 예를 들어, 도 7에 도시된 레이아웃의 실시형태에서는, 8개의 키들이 중첩 지역 (158) 내에 위치되어서 2 개의 키들로 된 4개의 세트들이 터치 스크린 표면의 실질적으로 동일한 좌표들에 위치된다. 그 반면, 도 17에 도시된 대안적인 실시형태 레이아웃에서는, 6개의 키들만이 중첩한다. 구체적으로는, "R" 키는 "I" 키와 중첩하며; "T" 키는 "U" 키와 중첩하며; 그리고 "G" 키는 "Y" 키의 적어도 일부와 중첩한다. 도 8-16을 참조하여 설명된 실시형태의 방법들 중의 어느 것이든 중첩 키들 상의 어떤 키스트로크들을 명확화하기 위하여 도 17에 도시된 가상 키패드 레이아웃과 연계하여 사용될 수도 있다.
추가의 실시형태에서, 압력 감지 터치 스크린에 인가된 압력을 측정하는 능력은 능률적인 사용자 인터페이스 디자인들을 가능하게 할 수도 있다. 예를 들어, 주소록 또는 연락처 데이터베이스는 사용자의 가족, 친구들, 사업상 지인들 등에 관한 연락처 정보를 담고 있을 수도 있다. 많은 경우들에서, 각각의 연락처는 다수의 연락 전화번호들 (예컨대, 모바일 디바이스, 집, 사무실, 팩스 등) 뿐만 아니라 이메일 주소들, SMS 주소들 등을 포함할 수도 있다. 대부분의 주소록 애플리케이션들에서 사용자는 연락처 기능 (이를테면 전화 걸기, 이메일 타이핑, 팩스 송신, SMS 타이핑, MMS 송신 등) 을 선택하여 연락처 이름과 통신하는데 사용하기 위하여 일련의 키스트로크들 및/또는 풀 다운 메뉴 선택들을 실행해야할 수도 있다. 특정 연락처만이 단일 연락 번호 또는 이메일 주소 등을 가지는 경우에도, 사용자는 통상적으로 먼저 연락처 이름을 선택한 다음 그 연락처와 통신하기 위해 사용할 임의의 연락 번호/주소를 선택해야 한다. 압력 감지 터치 스크린을 모바일 디바이스 상에 구현하는 것에 의해, 사용자들이 연락처 및 원하는 연락처 기능/주소/번호를 양자를 단일 키스트로크로 선택할 수 있게 하는 실시형태의 사용자 인터페이스가 제공될 수도 있다.
도 18은 주소록 애플리케이션을 위한 예시적인 최상위 메뉴 (top menu) 디스플레이를 도시한다. 이 실시형태에서, 인가된 압력이 측정되고 그 데이터는 다른 요소 또는 기능을 선택하는데 사용된다. 주소록 데이터베이스 내의 각각의 연락처는 다수의 압력 "단축 번호들 (speed dials)"에 할당될 수도 있다. 압력 단축 번호들의 수는 압력 센서의 민감도 (즉, 인가된 가변 압력 레벨들 간을 구별할 수 있는 압력 센서의 정밀도) 뿐만 아니라 터치 스크린 디스플레이 표면에 가해진 압력의 양을 제어하는 사용자의 능력에 따라 변할 수도 있다. 선택된 연락처 이름을 다양한 정도의 압력으로 누름으로써, 사용자는 연락처 이름뿐 아니라 사용자가 선택된 연락처와 통신하는데 사용하기를 원하는 연락처 기능도 선택할 수도 있다. 예를 들어, 모바일 디바이스 주소록 애플리케이션은 사용자들이 연락처 이름당 4개까지의 압력 단축 번호들을 할당할 수 있게 한다. 연락처 이름을 가볍게 누르는 것에 의해, 사용자는 연락처 이름의 모바일 디바이스로의 전화 통화를 개시할 수 있다. 연락처 이름을 약간 세게 누르는 것에 의해, 사용자는 연락처 이름의 기본 이메일 주소로의 이메일 메시지를 개시할 수 있다. 연락처 이름을 훨씬 더 세게 누르는 것에 의해, 사용자는 연락처 이름의 모바일 디바이스로의 SMS 테스트 메시지를 개시할 수도 있다. 끝으로, 연락처 이름을 매우 세게 누르는 것에 의해, 사용자는 연락처 이름의 직장 전화기 (work telephone) 로의 전화 통화를 개시할 수도 있다. 이들 연락처 기능들은 단순히 그 실시형태의 예시인 것으로 여겨진다. 실사용에서 사용자들은 연락처 기능들 및 그들의 가해진 압력 레벨들에 대한 상관관계를 커스터마이징할 수도 있다.
일단 압력 단축번호 세팅들이 확립되고 압력 단축번호 데이터 테이블에 저장되면, 모바일 디바이스는 사용자가 연락처 이름 및 연락처 기능 양자를 단일 키스트로크로 선택할 수 있게 하는, 도 19에 도시된 바와 같은 방법의 일 실시형태를 구현할 수도 있다. 가상 키패드 레이아웃을 생성하고 디스플레이하는 것과 마찬가지로, 터치 감지 표면 및 디바이스 드라이버는 연락처 애플리케이션 최상위 메뉴를 생성하고 디스플레이할 수도 있다 (단계 203). 사용자가 연락처 이름을 터치하는 경우, 터치 감지 표면 및 디바이스 드라이버는 이 터치와 연관된 키스트로크 서명 데이터를 캡처할 수 있다 (단계 215). 미리 설명된 바와 같이, 검출된 키스트로크 서명 데이터는 키스트로크 위치, 형태, 및/또는 압력에 관한 정보를 구비할 수도 있다. 검출된 키스트로크 서명 데이터는 모바일 디바이스 프로세서에 통신될 수도 있다 (단계 315). 모바일 디바이스 프로세서는 검출된 키스트로크 위치를 특정 연락처 레코드와 상관시킬 수 있다 (단계 375). 그런 다음 모바일 디바이스 프로세서는 검출된 키스트로크 압력 데이터를 압력 단축번호 데이터 테이블에 저장된 압력 데이터와 비교하여 대응하는 연락처 기능을 결정할 수 있다 (단계 380). 압력 단축번호 데이터 테이블의 일 예가 도 22에 도시되어 있다. 일단 대응하는 연락처 기능이 식별되면, 프로세서는 선택된 연락처를 위한 연락처 기능을 개시할 수도 있다 (단계 385). 프로세서는 연락처 기능이 개시되었음을 나타내는 디스플레이 이미지를 생성할 수도 있다 (단계 390). 이 디스플레이 이미지는 디스플레이를 위해 압력 감지 터치 스크린에 통신될 수 있다 (단계 290).
도 22는 예시적인 압력 단축번호 데이터 테이블이다. 도 22에 도시된 바와 같이, 다양한 연락처 기능들은 연락처 이름에 가해진 압력의 측정에 응답하여 개시될 수도 있다. 예를 들어, 사용자가 1 뉴턴 (Newton) 과 10 뉴턴 사이의 힘을 터치 스크린에 가한다면, 키스트로크 압력은 음성 통화 기능에 상관될 것이다. 그러므로, 이러한 압력이 측정될 때, 프로세서는 터치되었던 연락처 이름에 대한 상세 연락처 정보에 열거된 기본 전화 번호로의 음성 통화를 개시할 수도 있다. 마찬가지로, 사용자가 10 뉴턴과 20 뉴턴 사이의 힘을 터치 스크린에 가한다면, 키스트로크 압력은 이메일 기능에 상관될 것이다. 그러므로, 이러한 압력이 측정될 때, 프로세서는 터치되었던 연락처 이름을 위한 상세 연락처 정보에 열거된 기본 이메일 주소로의 이메일을 개시할 수 있다. 덧붙여서, 사용자가 20 뉴턴과 30 뉴턴 사이의 힘을 터치 스크린에 가한다면, 키스트로크 압력은 SMS 기능에 상관될 것이다. 그러므로, 이러한 압력이 측정될 때, 프로세서는 터치되었던 연락처 이름에 대한 상세 연락처 정보에 열거된 모바일 디바이스 전화 번호로의 SMS 메시지를 개시할 수도 있다. 또한, 사용자가 30 뉴턴을 초과하는 힘을 터치 스크린에 가한다면, 키스트로크 압력은 보조 전화 번호로의 전화 통화에 상관될 것이다. 그러므로, 이러한 압력이 측정될 때, 프로세서는 터치되었던 연락처 이름에 대한 상세 연락처 정보에 열거된 보조 전화 번호로의 전화 통화를 개시할 수도 있다. 이런 방식으로, 사용자가 원하는 연락처 이름으로의 단일 키스트로크, 즉 터치를 다양한 정도의 압력으로 실행함으로써, 선택된 연락처에 대한 다양한 연락처 기능들을 개시할 수 있다.
도 22에 도시된 압력 단축번호 데이터 테이블은 단지 예시적인 것으로 여겨진다. 압력 단축번호 데이터 테이블의 변형예들이 구현될 수도 있다. 예를 들어, 일부 압력 단축번호 데이터 테이블들은 더 많거나 더 적은 연락처 기능 옵션들을 구비할 수도 있다. 일부 압력 센서들은 다양한 압력 레벨들을 정교하게 구별할 수 있는 것이 아닐 수 있다. 그 결과 더 적은 연락처 기능 옵션들이 제공될 수도 있다. 대안적으로, 사용자들은 높은 반복도로 터치 스크린에 압력을 가하는데 어려움을 겪을 수도 있다. 따라서, 일부 사용자들은 연락처 기능 옵션들 간을 구별하기 위하여 사용자가 단지 세게 또는 부드럽게 누를 수 있도록 하는 더 작은 압력 활성화 연락처 기능 옵션들을 가지기를 원할 수도 있다. 다른 대안적인 실시형태들에서, 개별 압력 단축번호 데이터 테이블이 각각의 연락처를 위해 보유될 수도 있다. 각각의 압력 단축번호 데이터 테이블은 상이한 레벨들의 압력에 대해 상이한 연락처 기능을 개시하도록 맞춤화될 수도 있다. 따라서, 예를 들어, 1 뉴턴과 10 뉴턴 사이의 힘이 제 1 연락처에 가해지면 연락처 이름의 모바일 디바이스로의 전화 통화를 발생하고, 동일한 양의 힘이 제 2 연락처에 가해지면 SMS 메시지가 제 2 연락처 이름의 모바일 디바이스로 어드레싱되게 할 수도 있다.
다른 실시형태에서, 압력 감지 터치 스크린에 있는 압력 센서들은 사용자에게 직감적 볼륨 제어 사용자 인터페이스를 제공하기 위해 이용될 수도 있다. 일부 모바일 디바이스들은 사용자들에게 스피커 기능을 제공하지만, 사용자가 스피커의 오디오 출력을 비공개로 유지하기를 원하는 경우가 있을 수도 있다. 예를 들어, 공공장소에서 전화통화를 할 때, 사용자는 스피커폰 기능을 중지하여 타인들이 엿듣지 못하도록 하는 것을 원할 수도 있다. 이런 경우들에, 사용자는 통상적으로 모바일 디바이스의 스피커를 사용자의 귀에 고정한다. 사용자가 오디오 출력을 명확히 들을 수 없을 때, 사용자는 본능적으로 모바일 디바이스를 사용자의 귀에 더 세게 누른다. 일 실시형태에서, 모바일 디바이스는 사용자의 귀 및/또는 얼굴에 의해 압력 감지 터치 스크린에 가해진 압력을 검출하고, 이에 응답하여, 스피커의 볼륨 출력을 증가시킬 수도 있다.
도 20은 이러한 방법의 일 실시형태를 도시하는 프로세스 흐름도이다. 모바일 디바이스 프로세서는 몇 개의 애플리케이션들의 활동 및 활동도들을 제어하고 감시하는 메인 루프 (301) 를 실행할 수도 있다. 메인 루프 (301) 를 실행하는 동안, 프로세서는 압력 감지 터치 스크린로부터 키스트로크 서명 데이터 (예컨대, 터치 위치, 형태, 압력 등) 를 포함하여, 압력이 압력 감지 터치 스크린에 가해지고 있다는 인터럽트를 수신할 수 있다 (단계 315). 프로세서 (또는 압력 감지 터치 스크린) 는 터치가 압력 감지 터치 스크린상의 의도적인 누름이며 단지 부수적인 터치는 아님을 확인하기 위하여 터치 압력이 임계치를 초과하는지를 결정할 수 있다 (결정단계 391). 터치 압력이 임계치를 초과하지 않으면 (즉, 결정단계 391 = 아니오), 터치는 부수적인 것으로 간주되고 메인 루프 (301) 로 리턴할 수도 있다. 터치 압력이 임계치를 넘으면 (즉, 결정단계 391 = 예), 프로세서는 오디오 드라이버가 사용중인지를 결정한다 (결정단계 392). 오디오 드라이버가 사용중이 아니면 (즉, 결정단계 392 = 아니오), 터치는 일부 다른 사용자 인터페이스 프로세스를 의도하고 있을 수 있다 (단계 395). 그러나, 오디오 드라이버가 사용중이라고 프로세서가 결정하면 (즉, 결정단계 392 = 예), 프로세서는 오디오 드라이버의 볼륨 세팅을 증가시킬 수 있다 (단계 393).
다른 실시형태에서, 압력 감지 터치 스크린에 있는 압력 센서들은 사용자에게 직감적 줌인/줌아웃 이미지 제어 사용자 인터페이스를 제공하기 위해 이용될 수도 있다. 최근의 사용자 인터페이스 개발은 사용자들이 터치 스크린 디스플레이 표면상에 두 손가락들 (통상 엄지 손가락-집게 손가락 조합) 을 얼마간의 거리로 이격되게 배치하고 그 손가락들을 핀칭 모션으로 함께 움직임으로써 줌아웃하게 하는 핀치 제스처를 사용자들에게 제공하고 있다. 터치 스크린 디스플레이는 디스플레이의 스케일을 재교정 (recalibration)함으로써 효과적으로 줌아웃한다. 예를 들어, 지도가 터치 스크린 표면상에 디스플레이되었고 지도의 스케일은 1 인치가 1 마일에 해당하는 것으로 나타내어졌다고 가정한다. 2 개의 손가락들을 1 인치 이격되게 배치하고, 2 개의 손가락들이 이제 1/2 인치만 이격되도록 그 손가락들을 함께 핀칭함으로써, 디스플레이되는 지도의 스케일은 실제로 2 배가 되어 1 인치는 이제 2 마일에 해당하게 될 것이다. 마찬가지로, 사용자는 2 개의 손가락들을 터치 스크린 디스플레이 표면상에 함께 배치하고, 이어서 그 손가락들을 멀어지게 움직임으로써 줌인시킬 수 있다. 지도의 스케일은 지도상의 동일한 거리가 실제 공간에서는 이제 더 적은 거리에 해당하도록 감소될 것이다. 기존의 핀치 제스처들에서의 문제는 1) 터치 스크린 디스플레이의 사이즈 및 2) 사용자들이 그들의 손가락들을 펼 수 있는 거리의 양에 의해 줌 양이 제한된다는 것이다. 많은 경우들에서, 사용자들은 원하는 줌 양이 달성되기까지 단지 핀치 제스처를 반복적으로 수행한다.
일 실시형태 방법에서, 두 손가락 핀치 제스처로 달성되는 줌 양은 사용자가 터치 압력 감지 터치 스크린상에 가하는 압력의 랑에 의해 제어될 수도 있다. 동일한 핀치 제스처를 다양한 정도의 압력으로 수행하는 것에 의해, 사용자는 다양한 양의 줌 배율 (확대율) 로 줌 인 또는 줌 아웃 기능 양자를 개시할 수 있다.
도 21은 이러한 방법의 일 실시형태를 도시하는 프로세스 흐름도이다. 도 20을 참조하여 위에서 설명된 프로세스 흐름과 마찬가지로, 프로세서는 메인 루프 (301) 를 실행할 수 있다. 메인 루프 (301) 의 실행 동안, 프로세서는 키스트로크가 키스트로크 서명 데이터와 함께 형성되었다는 지시를 수신할 수 있다 (단계 315). 프로세서 (또는 압력 감지 터치 스크린) 는 터치가 압력 감지 터치 스크린상의 의도적인 누름이며 단지 부수적인 터치는 아님을 확인하기 위하여 터치 압력이 임계치를 초과하는지를 결정할 수 있다 (결정단계 391). 터치 압력이 임계치를 초과하지 않으면 (즉, 결정단계 391 = 아니오), 터치는 부수적인 것으로 간주되고 메인 루프 (301) 로 리턴할 수도 있다. 터치 압력이 임계치를 초과하면 (즉, 결정단계 391 = 예), 프로세서는 2 개의 손가락들이 압력 감지 터치 스크린을 터치한 결과로서 생기는 다수의 터치 위치들이 검출되었는지를 결정한다 (결정단계 394). 단일 터치 위치만이 검출되면 (즉, 결정단계 394 = 아니오), 터치는 일부 다른 사용자 인터페이스 프로세스에 대하여 의도될 수 있다 (단계 395). 그러나, 프로세서가 다수의 터치들이 검출되었다고 결정하면 (즉, 결정단계 394 = 예), 프로세서는 핀치 줌 기능을 개시할 수도 있다 (단계 396). 단계 (230) 에서 개시된 핀치 줌 기능은 핀치 제스처에서의 손가락들의 움직임에 의존하여 줌인할 것인지 줌아웃할 것인지를 결정할 수도 있다. 프로세서는 핀치 제스처로 인가되는 측정된 압력을 압력 줌 데이터 테이블과 추가로 비교하여 줌 인/아웃 기능에 적용할 배율 계수를 결정할 수도 있다 (단계 397). 압력 줌 데이터 테이블의 일 예가 도 23에 도시되고 이 도면을 참조하여 하기에서 상세히 설명된다. 일단 줌 인 또는 줌 아웃 기능 프로세서에 의해 결정되고 (단계 396), 줌 배율 계수가 키스트로크와 연관된 검출된 압력량을 상관시킴으로써 결정되면 (단계 397), 프로세서는 줌 인 또는 줌 아웃의 상관된 정도를 따라 적절한 디스플레이를 생성할 수 있다 (단계 398).
도 23은 예시적인 압력 줌 데이터 테이블이다. 도 23에 도시된 바와 같이, 다양한 줌 레벨들은 가변 압력 레벨들이 사용자의 2 개의 손가락에 의해 압력 감지 터치 스크린에 가해질 때 줌 인 또는 줌 아웃 기능에 적용될 수도 있다. 예를 들어, 사용자가 1 뉴턴과 10 뉴턴 사이의 힘을 터치 스크린에 가한다면, 그 터치 압력은 1.5 배의 줌 (배율) 과 상관될 것이다. 사용자가 10 뉴턴과 20 뉴턴 사이의 힘을 터치 스크린에 가한다면, 그 터치 압력은 2 배의 줌 (배율) 과 상관될 것이다. 사용자가 20 뉴턴과 30 뉴턴 사이의 힘을 터치 스크린에 가한다면, 그 터치 압력은 5 배의 줌 (배율) 과 상관될 것이다. 사용자가 1 뉴턴과 10 뉴턴 사이의 힘을 터치 스크린에 가한다면, 그 터치 압력은 10 배의 줌 (배율) 과 상관될 것이다.
도 23에 도시된 압력 줌 데이터 테이블은 단지 예시적인 것으로 여겨진다. 압력 줌 데이터 테이블의 변형예들이 구현될 수도 있다. 예를 들어, 일부 압력 줌 데이터 테이블들은 더 많거나 더 적은 레벨들의 배율을 포함할 수도 있다. 일부 압력 센서들은 다양한 레벨의 압력들을 정밀하게 구별할 수 없을 수도 있다. 그 결과 더 적은 배율 레벨의 옵션들이 제시될 수 있다. 대안적으로, 사용자들은 다양한 압력 정도를 터치 스크린에 반복적인 방식으로 가하는데 어려움을 겪을 수도 있다. 따라서, 일부 사용자들은 배율 레벨 옵션들을 구별하기 위하여 사용자가 단지 세게 또는 부드럽게 누를 수도 있도록 하는 더 적은 배율 레벨 옵션들을 가지기를 원할 수도 있다.
앞서 설명된 바와 같이, 사용자는 모바일 디바이스들을 포함한 다양한 m 개 디바이스들을 이용하여 압력 감지 터치 스크린상의 가상 키패드와 상호작용할 수도 있다. 다양한 양태들과 함께 사용하기에 적합한 전형적인 모바일 디바이스들이 도 24에 도시된 구성요소들을 공통으로 가질 것이다. 예를 들어, 예시적인 모바일 디바이스 (1300) 가 프로세서 (1301), 이것에 결합된 내부 메모리 (1302) 및 압력 감지 터치 스크린 (1303) 을 구비할 수도 있다. 덧붙여, 모바일 디바이스 (1300) 는 무선 데이터 링크에 접속되어 전자기 방사를 송신하고 수신하기 위한 안테나 (1304) 및/또는 프로세서 (1301) 에 결합된 셀룰러 전화기 트랜시버 (1305) 를 가질 수도 있다. 일부 구현예들에서, 셀룰러 전화 통신들을 위해 사용되는 트랜시버 (1305) 와 프로세서 (1301) 의 부분들 및 메모리 (1302) 는 총괄하여 무선 인터페이스라고 하는데, 이는 무선 데이터 링크를 통해 데이터 인터페이스를 제공하기 때문이다. 또한 모바일 디바이스들 (1300) 은 사용자 입력들을 수신하기 위해 물리적 키 패드 (1306) 또는 미니어처 키보드 및 메뉴 선택 버튼들 또는 로커 스위치 (rocker) 스위치들 (1307) 을 구비할 수도 있다. 프로세서 (1301) 는 마이크로폰 (1319) 및 스피커 (1318) 에 차례로 접속되는 보코더 (1399) 에 추가로 접속될 수도 있다.
모바일 프로세서 (1301) 는 여기서 설명된 다양한 양태들의 기능들을 포함한 다양한 기능들을 수행하도록 소프트웨어 명령들 (애플리케이션들) 에 의해 구성될 수 있는 임의의 프로그램가능 마이크로프로세서, 마이크로컴퓨터 또는 다중 프로세서 칩 또는 칩들일 수도 있다. 일부 모바일 디바이스들에는, 이를테면 하나의 프로세서가 무선 통신 기능들에 지정되고 하나의 프로세서가 다른 애플리케이션들을 실행하는데 지정되는, 다수의 프로세서들 (1301) 이 제공될 수도 있다. 통상, 소프트웨어 애플리케이션들은 그들이 액세스되어 프로세서 (1301) 에 로딩되기 전에 내부 메모리 (1302) 에 저장될 수도 있다. 일부 모바일 디바이스들에서, 부가 메모리 칩들 (예컨대, 보안 데이터 (SD) 카드) 이 디바이스 (1300) 에 연결되고 프로세서 (1301) 에 결합될 수도 있다. 많은 모바일 디바이스들에서, 내부 메모리 (1302) 는 휘발성 또는 비휘발성 메모리, 이를테면 플래시 메모리, 또는 이것 양자의 혼합체일 수도 있다. 이 설명을 위해, 메모리에 대한 종합적인 언급은 내부 메모리 (1302), 모바일 디바이스에 연결되는 착탈식 메모리, 및 프로세서 (1301) 자체 내의 메모리를 포함하여, 프로세서 (1301) 에 의해 액세스가능한 모든 메모리를 지칭한다.
전술된 방법 설명들 및 프로세스 흐름도들은 구체적인 실시예들로서만 제공되고 다양한 양태들의 단계들이 표시된 순서로 반드시 수행되어야 함을 요구하거나 의미하도록 의도된 것은 아니다. 당업자에 의해 이해될 바와 같이, 전술된 양태들에서 단계들의 순서는 임의의 순서로도 수행될 수 있다. 게다가, 단계 식별자들 및 단어들 이를테면 "그 후", "그러면", "다음에" 등의 언급은 단계들의 순서를 한정하려는 의도는 아니고; 이러한 식별자들 및 단어들은 단지 방법들의 서술을 통해 독자들을 가이드 하는데 사용된다.
본 명세서에 개시된 양태들과 관련하여 설명되는 다양한 예시적인 논리 블럭들, 모듈들, 회로들 및 알고리즘 단계들은 전자 하드웨어, 컴퓨터 소프트웨어 또는 이들의 조합들로 구현될 수도 있다. 하드웨어와 소프트웨어의 상호 교환 가능성을 명확히 설명하기 위해, 다양한 예시적인 컴포넌트들, 블럭들, 모듈들, 회로들 및 단계들이 일반적으로 그들의 기능과 관련하여 앞에서 설명되었다. 상기 기능이 하드웨어에서 구현되는지, 소프트웨어에서 구현되는지의 여부는 전체 시스템에 부과되는 특정 애플리케이션 및 설계 제약들에 따라 결정된다. 당업자는 각각의 특정 애플리케이션에 대하여 다양한 방식들로 설명된 기능을 구현할 수도 있지만, 그러한 구현의 결정들은 본 발명의 사상으로부터 벗어나는 것으로 해석되지 않아야 한다.
본 명세서에서 개시된 양태들과 관련하여 다양하게 설명되는 로직들, 논리 블럭들, 모듈들, 및 회로들을 구현하기 위해 사용되는 하드웨어는 범용 프로세서, 디지털 신호 프로세서 (DSP), 애플리케이션용 집적 회로 (ASIC), 현장 프로그램가능한 게이트 어레이 (FPGA) 또는 다른 프로그램가능 로직 디바이스, 이산 게이트 또는 트랜지스터 로직, 이산 하드웨어 컴포넌트들, 또는 본 명세서에서 설명된 기능들을 수행하도록 설계된 이들의 임의의 조합으로 구현되거나 수행될 수 있다. 범용 프로세서는 마이크로프로세서일 수도 있지만, 대안적으로, 프로세서는 임의의 종래의 프로세서, 제어기, 마이크로제어기, 또는 상태 머신일 수도 있다. 프로세서는 또한 예를 들어, DSP 와 마이크로프로세서의 조합, 복수의 마이크로프로세서들, DSP 코어와 결합된 하나 이상의 마이크로프로세서들, 또는 임의의 다른 구성과 같은 컴퓨팅 디바이스들의 조합으로서 구현될 수도 있다. 대안적으로, 일부 단계들 및 방법들은 주어진 기능에 특정된 회로에 의해 수행될 수도 있다.
하나 이상의 예시적인 양태들에서, 설명되는 기능들은 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 임의의 조합에서 구현될 수도 있다. 소프트웨어에서 구현되는 경우에, 기능들은 컴퓨터로 판독가능한 매체에 하나 이상의 명령들 또는 코드를 통해 저장되거나 송신될 수도 있다. 본 명세서에 개시된 방법 또는 알고리즘의 단계들은 컴퓨터 판독가능 매체 상에 상주할 수도 있는 프로세서 실행가능 소프트웨어 모듈 내에서 구현될 수도 있다. 컴퓨터 판독가능 매체는 하나의 장소에서 또 다른 장소로의 컴퓨터 프로그램의 송신이 가능할 수 있는 임의의 매체를 포함하는 통신 매체 및 컴퓨터 저장 매체 모두를 포함한다. 저장 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 사용가능한 매체가 될 수 있다. 제한되지 않는 예로서, 상기 컴퓨터 판독가능 매체는 RAM, ROM, EEPROM, CD-ROM 또는 다른 광학 디스크 저장장치, 자기 디스크 저장장치 또는 다른 자기 저장 디바이스들, 또는 컴퓨터에 의해 액세스될 수 있는 명령들 또는 데이터 구조들의 형태로 원하는 프로그램 코드 수단들을 전달 또는 저장하기 위해 사용될 수 있는 임의의 다른 매체를 포함할 수 있다. 또한, 임의의 접속장치는 적절히 컴퓨터 판독가능 매체라 지칭된다. 예를 들면, 만약 소프트웨어가 동축 케이블, 광섬유 케이블, 꼬임 쌍선, 디지털 가입자선 (DSL), 또는 적외선, 무선 및 마이크로파와 같은 무선 기술들을 사용하여 웹사이트, 서버 또는 다른 원격 소스로부터 전송되면, 동축 케이블, 광섬유 케이블, 꼬임 쌍선, DSL, 또는 적외선, 무선 및 마이크로파와 같은 무선 기술들은 매체의 정의에 포함된다. 본 명세서에서 사용되는 것과 같은 디스크 (disk)와 디스크 (disc) 는 컴팩트 디스크(CD), 레이저 디스크, 광 디스크, 디지털 휘발성 디스크 (DVD), 플로피 디스크 및 블루-레이 디스크를 포함하며, 이러한 디스크 (disk) 들은 보통 데이터를 자기적으로 재생하는 반면, 디스크 (disc) 들은 레이저를 사용하여 데이터를 광학으로 재생한다. 이들의 조합들은 컴퓨터 판독가능 매체의 범위 내에 포함되어야 한다. 추가로, 방법 또는 알고리즘의 동작들은 컴퓨터 프로그램 제품 내에 통합될 수도 있는 컴퓨터 판독가능 매체와 기계 판독가능 매체 상에 코드들 및 명령들의 하나 또는 임의의 조합 또는 세트로서 상주할 수 있다.
개시된 양태들의 전술된 설명은 당업자가 본 발명을 구현하고 이용하기에 용이하도록 하기 위하여 제공되었다. 이들 양태들에 대한 여러 가지 변형은 당업자에게 자명하며, 여기서 한정된 포괄적인 원리는 본 발명의 사용 없이도 다른 양태들에 적용될 수 있다. 따라서, 본 발명은 설명된 양태들에 한정되는 것이 아니며, 여기에 개시된 원리 및 신규한 특징에 나타낸 가장 넓은 범위에 따른다.

Claims (40)

  1. 삭제
  2. 삭제
  3. 가상 키패드 상의 키스트로크를 명확화하는 (disambiguating) 방법으로서,
    상기 가상 키패드를 디스플레이하는 터치 스크린상에서 정지 (rest) 중인 복수의 손가락끝들의 각각에 대해 기준 터치 위치들을 결정하는 단계;
    상기 가상 키패드를 디스플레이하는 상기 터치 스크린 상의 상기 키스트로크를 검출하는 단계;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 단계;
    상기 검출된 키스트로크가 상기 중첩 지역에서 발생하였다면 상기 터치 스크린 상의 모든 터치들에 대한 현재 위치들을 결정하는 단계;
    상기 복수의 손가락끝들 중 어느 것이 그 기준 터치 위치로부터 벗어났는지를 결정하는 단계; 및
    상기 검출된 키스트로크의 위치 및 상기 기준 터치 위치로부터 벗어난 상기 결정된 터치에 기초하여 상기 키스트로크를 명확화하는 단계를 포함하는, 가상 키패드 상의 키스트로크를 명확화하는 방법.
  4. 가상 키패드 상의 키스트로크를 명확화하는 (disambiguating) 방법으로서,
    상기 가상 키패드를 디스플레이하는 터치 스크린 상의 상기 키스트로크를 검출하는 단계;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 단계;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 단계;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 상기 터치 형태의 배향을 결정하는 단계;
    상기 검출된 키스트로크의 터치 형태의 상기 결정된 배향에 기초하여 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지를 결정하는 단계; 및
    상기 검출된 키스트로크의 위치 및 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지에 기초하여 상기 중첩 지역에서의 상기 검출된 키스트로크에 문자를 할당하는 단계를 포함하는, 가상 키패드 상의 키스트로크를 명확화하는 방법.
  5. 가상 키패드 상의 키스트로크를 명확화하는 (disambiguating) 방법으로서,
    상기 가상 키패드를 디스플레이하는 터치 스크린 상의 상기 키스트로크를 검출하는 단계;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 단계;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 단계;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 형태를 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 터치 형태를 결정하는 단계; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 터치 형태에 대응하는 문자를 할당하는 단계를 포함하는, 가상 키패드 상의 키스트로크를 명확화하는 방법.
  6. 제 5 항에 있어서,
    상기 터치 형태에 기초하여 상기 키스트로크를 명확화하는 단계는,
    상기 검출된 키스트로크에 의해 상기 터치 스크린에 인가된 압력을 측정하는 단계;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 측정된 압력을 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 압력 서명을 결정하는 단계; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 압력 서명에 대응하는 문자를 할당하는 단계를 포함하는, 가상 키패드 상의 키스트로크를 명확화하는 방법.
  7. 제 6 항에 있어서,
    상기 터치 형태에 기초하여 상기 키스트로크를 명확화하는 단계는,
    키스트로크 터치 형태 및 측정된 압력과, 의도된 키 값에 대한 키스트로크 서명 데이터와의 비교들에 기초하여 상기 키스트로크가 명확화될 수 있는지 여부를 결정하는 단계;
    상기 키스트로크가 상기 키스트로크 터치 형태 및 측정된 압력에 기초하여 명확화될 수 없다면, 가능한 의도된 키 값들 사이의 선택을 위해 예측식 텍스트 루틴을 실행하는 단계; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 예측식 텍스트 루틴에 의해 식별된 문자를 할당하는 단계를 포함하는, 가상 키패드 상의 키스트로크를 명확화하는 방법.
  8. 삭제
  9. 삭제
  10. 삭제
  11. 삭제
  12. 삭제
  13. 가상 키패드를 갖는 모바일 디바이스로서,
    상기 가상 키패드를 디스플레이하는 터치 스크린상에서 정지 (rest) 중인 복수의 손가락끝들의 각각에 대해 기준 터치 위치들을 결정하는 수단;
    상기 가상 키패드를 디스플레이하는 상기 터치 스크린 상의 키스트로크를 검출하는 수단;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 수단;
    상기 검출된 키스트로크가 상기 중첩 지역에서 발생하였다면 상기 터치 스크린 상의 모든 터치들에 대한 현재 위치들을 결정하는 수단;
    상기 복수의 손가락끝들 중 어느 것이 그 기준 터치 위치로부터 벗어났는지를 결정하는 수단; 및
    상기 검출된 키스트로크 위치 및 상기 기준 터치 위치로부터 벗어난 상기 결정된 터치에 기초하여 상기 키스트로크를 명확화하는 수단을 포함하는, 모바일 디바이스.
  14. 가상 키패드를 갖는 모바일 디바이스로서,
    상기 가상 키패드를 디스플레이하는 터치 스크린 상의 키스트로크를 검출하는 수단;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 수단;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 수단;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 상기 터치 형태의 배향을 결정하는 수단;
    상기 검출된 키스트로크의 터치 형태의 상기 결정된 배향에 기초하여 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지를 결정하는 수단; 및
    상기 검출된 키스트로크의 위치 및 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지에 기초하여 상기 중첩 지역에서의 상기 검출된 키스트로크에 문자를 할당하는 수단을 포함하는, 모바일 디바이스.
  15. 가상 키패드를 갖는 모바일 디바이스로서,
    상기 가상 키패드를 디스플레이하는 터치 스크린 상의 키스트로크를 검출하는 수단;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 수단;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 수단;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 형태를 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 터치 형태를 결정하는 수단; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 터치 형태에 대응하는 문자를 할당하는 수단을 포함하는, 모바일 디바이스.
  16. 제 15 항에 있어서,
    상기 터치 형태에 기초하여 상기 키스트로크를 명확화하는 수단은,
    상기 검출된 키스트로크에 의해 상기 터치 스크린에 인가된 압력을 측정하는 수단;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 측정된 압력을 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 압력 서명을 결정하는 수단; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 압력 서명에 대응하는 문자를 할당하는 수단을 포함하는, 모바일 디바이스.
  17. 제 16 항에 있어서,
    상기 터치 형태에 기초하여 상기 키스트로크를 명확화하는 수단은,
    키스트로크 터치 형태 및 측정된 압력과, 의도된 키 값에 대한 키스트로크 서명 데이터와의 비교들에 기초하여 상기 키스트로크가 명확화될 수 있는지 여부를 결정하는 수단;
    상기 키스트로크가 상기 키스트로크 터치 형태 및 측정된 압력에 기초하여 명확화될 수 없다면, 가능한 의도된 키 값들 사이의 선택을 위해 예측식 텍스트 루틴을 실행하는 수단; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 예측식 텍스트 루틴에 의해 식별된 문자를 할당하는 수단을 포함하는, 모바일 디바이스.
  18. 삭제
  19. 삭제
  20. 삭제
  21. 삭제
  22. 삭제
  23. 모바일 디바이스로서,
    터치 스크린 디스플레이;
    메모리 유닛; 및
    상기 메모리 유닛과 상기 터치 스크린 디스플레이에 커플링된 프로세서를 포함하고,
    상기 프로세서는,
    가상 키패드를 디스플레이하는 상기 터치 스크린 디스플레이 상에서 정지 (rest) 중인 복수의 손가락끝들의 각각에 대해 기준 터치 위치들을 결정하는 것;
    상기 가상 키패드를 디스플레이하는 상기 터치 스크린 디스플레이 상의 키스트로크를 검출하는 것;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 것;
    상기 검출된 키스트로크가 상기 중첩 지역에서 발생하였다면 상기 터치 스크린 디스플레이 상의 모든 터치들에 대한 현재 위치들을 결정하는 것;
    상기 복수의 손가락끝들 중 어느 것이 그 기준 터치 위치로부터 벗어났는지를 결정하는 것; 및
    상기 검출된 키스트로크 위치 및 상기 기준 터치 위치로부터 벗어난 상기 결정된 터치에 기초하여 상기 키스트로크를 명확화하는 것
    을 포함하는 동작들을 수행하기 위한 소프트웨어 명령들로 구성되는, 모바일 디바이스.
  24. 모바일 디바이스로서,
    터치 스크린 디스플레이;
    메모리 유닛; 및
    상기 메모리 유닛과 상기 터치 스크린 디스플레이에 커플링된 프로세서를 포함하고,
    상기 프로세서는,
    가상 키패드를 디스플레이하는 상기 터치 스크린 디스플레이 상의 키스트로크를 검출하는 것;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 것;
    상기 중첩 지역에서 상기 검출된 키스트로크의 상기 터치 형태의 배향을 결정하는 것;
    상기 검출된 키스트로크의 터치 형태의 상기 결정된 배향에 기초하여 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지를 결정하는 것; 및
    상기 검출된 키스트로크의 위치 및 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지에 기초하여 상기 중첩 지역에서의 상기 검출된 키스트로크에 문자를 할당하는 것
    을 포함하는 동작들을 수행하기 위한 소프트웨어 명령들로 구성되는, 모바일 디바이스.
  25. 모바일 디바이스로서,
    터치 스크린 디스플레이;
    메모리 유닛; 및
    상기 메모리 유닛과 상기 터치 스크린 디스플레이에 커플링된 프로세서를 포함하고,
    상기 프로세서는,
    가상 키패드를 디스플레이하는 상기 터치 스크린 디스플레이 상의 키스트로크를 검출하는 것;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 형태를 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 터치 형태를 결정하는 것; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 터치 형태에 대응하는 문자를 할당하는 것
    을 포함하는 동작들을 수행하기 위한 소프트웨어 명령들로 구성되는, 모바일 디바이스.
  26. 제 25 항에 있어서,
    상기 프로세서는,
    상기 검출된 키스트로크에 의해 상기 터치 스크린 디스플레이에 인가된 압력을 측정하는 것;
    상기 중첩 지역에서 상기 검출된 키스트로크의 측정된 압력을 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 압력 서명을 결정하는 것; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 압력 서명에 대응하는 문자를 할당하는 것
    을 포함하는 추가적인 동작들을 수행하기 위한 소프트웨어 명령들로 구성되는, 모바일 디바이스.
  27. 제 26 항에 있어서,
    상기 프로세서는,
    키스트로크 터치 형태 및 측정된 압력과, 의도된 키 값에 대한 키스트로크 서명 데이터와의 비교들에 기초하여 상기 키스트로크가 명확화될 수 있는지 여부를 결정하는 것;
    상기 키스트로크가 상기 키스트로크 터치 형태 및 측정된 압력에 기초하여 명확화될 수 없다면, 가능한 의도된 키 값들 사이의 선택을 위해 예측식 텍스트 루틴을 실행하는 것; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 예측식 텍스트 루틴에 의해 식별된 문자를 할당하는 것
    을 포함하는 추가적인 동작들을 수행하기 위한 소프트웨어 명령들로 구성되는, 모바일 디바이스.
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 프로세서 실행가능 소프트웨어 명령들을 저장하는 유형의 저장 매체로서,
    상기 프로세서 실행가능 소프트웨어 명령들은 프로세서로 하여금,
    가상 키패드를 디스플레이하는 터치 스크린 상에서 정지 (rest) 중인 복수의 손가락끝들의 각각에 대해 기준 터치 위치들을 결정하는 것;
    상기 가상 키패드를 디스플레이하는 상기 터치 스크린 상의 키스트로크를 검출하는 것;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 것;
    상기 검출된 키스트로크가 상기 중첩 지역에서 발생하였다면 상기 터치 스크린 상의 모든 터치들에 대한 현재 위치들을 결정하는 것;
    상기 복수의 손가락끝들 중 어느 것이 그 기준 터치 위치로부터 벗어났는지를 결정하는 것; 및
    상기 검출된 키스트로크 위치 및 상기 기준 터치 위치로부터 벗어난 상기 결정된 터치에 기초하여 상기 키스트로크를 명확화하는 것
    을 포함하는 동작들을 수행하게 하도록 구성되는, 유형의 저장 매체.
  34. 프로세서 실행가능 소프트웨어 명령들을 저장하는 유형의 저장 매체로서,
    상기 프로세서 실행가능 소프트웨어 명령들은 프로세서로 하여금,
    가상 키패드를 디스플레이하는 터치 스크린 상의 키스트로크를 검출하는 것;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 것;
    상기 터치 형태에 기초하여 상기 키스트로크를 명확화하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 상기 터치 형태의 배향을 결정하는 것;
    상기 검출된 키스트로크의 터치 형태의 상기 결정된 배향에 기초하여 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지를 결정하는 것; 및
    상기 검출된 키스트로크의 위치 및 어느 쪽 손이 상기 검출된 키스트로크를 실행하였는지에 기초하여 상기 중첩 지역에서의 상기 검출된 키스트로크에 문자를 할당하는 것
    을 포함하는 동작들을 수행하게 하도록 구성되는, 유형의 저장 매체.
  35. 프로세서 실행가능 소프트웨어 명령들을 저장하는 유형의 저장 매체로서,
    상기 프로세서 실행가능 소프트웨어 명령들은 프로세서로 하여금,
    가상 키패드를 디스플레이하는 터치 스크린 상의 키스트로크를 검출하는 것;
    상기 검출된 키스트로크가 중첩 지역에서 발생하였는지 여부를 결정하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 터치 형태를 결정하는 것;
    상기 터치 형태에 기초하여 상기 키스트로크를 명확화하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 형태를 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 터치 형태를 결정하는 것; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 터치 형태에 대응하는 문자를 할당하는 것
    을 포함하는 동작들을 수행하게 하도록 구성되는, 유형의 저장 매체.
  36. 제 35 항에 있어서,
    상기 유형의 저장 매체는, 프로세서로 하여금,
    상기 검출된 키스트로크에 의해 상기 터치 스크린에 인가된 압력을 측정하는 것;
    상기 중첩 지역에서의 상기 검출된 키스트로크의 측정된 압력을 저장된 키스트로크 서명 데이터와 비교하여 매칭되는 압력 서명을 결정하는 것; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 매칭된 압력 서명에 대응하는 문자를 할당하는 것
    을 포함하는 추가적인 동작들을 수행하게 하도록 구성된 프로세서 실행가능 소프트웨어 명령들을 갖는, 유형의 저장 매체.
  37. 제 36 항에 있어서,
    상기 유형의 저장 매체는, 프로세서로 하여금,
    키스트로크 터치 형태 및 측정된 압력과, 의도된 키 값에 대한 키스트로크 서명 데이터와의 비교들에 기초하여 상기 키스트로크가 명확화될 수 있는지 여부를 결정하는 것;
    상기 키스트로크가 상기 키스트로크 터치 형태 및 측정된 압력에 기초하여 명확화될 수 없다면, 가능한 의도된 키 값들 사이의 선택을 위해 예측식 텍스트 루틴을 실행하는 것; 및
    상기 중첩 지역에서의 상기 검출된 키스트로크에 상기 예측식 텍스트 루틴에 의해 식별된 문자를 할당하는 것
    을 포함하는 추가적인 동작들을 수행하게 하도록 구성된 프로세서 실행가능 소프트웨어 명령들을 갖는, 유형의 저장 매체.
  38. 삭제
  39. 삭제
  40. 삭제
KR1020127008384A 2009-08-31 2010-08-06 모바일 디바이스들을 위한 압력 감지 사용자 인터페이스 KR101368041B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/551,543 2009-08-31
US12/551,543 US8390583B2 (en) 2009-08-31 2009-08-31 Pressure sensitive user interface for mobile devices
PCT/US2010/044641 WO2011025643A1 (en) 2009-08-31 2010-08-06 Pressure sensitive user interface for mobile devices

Publications (2)

Publication Number Publication Date
KR20120060223A KR20120060223A (ko) 2012-06-11
KR101368041B1 true KR101368041B1 (ko) 2014-02-26

Family

ID=42942052

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020127008384A KR101368041B1 (ko) 2009-08-31 2010-08-06 모바일 디바이스들을 위한 압력 감지 사용자 인터페이스

Country Status (6)

Country Link
US (1) US8390583B2 (ko)
EP (2) EP2473900A1 (ko)
JP (1) JP5486089B2 (ko)
KR (1) KR101368041B1 (ko)
CN (2) CN104965614B (ko)
WO (1) WO2011025643A1 (ko)

Families Citing this family (177)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10203873B2 (en) 2007-09-19 2019-02-12 Apple Inc. Systems and methods for adaptively presenting a keyboard on a touch-sensitive display
US9110590B2 (en) 2007-09-19 2015-08-18 Typesoft Technologies, Inc. Dynamically located onscreen keyboard
US9454270B2 (en) 2008-09-19 2016-09-27 Apple Inc. Systems and methods for detecting a press on a touch-sensitive surface
US10126942B2 (en) 2007-09-19 2018-11-13 Apple Inc. Systems and methods for detecting a press on a touch-sensitive surface
US9489086B1 (en) 2013-04-29 2016-11-08 Apple Inc. Finger hover detection for improved typing
US9018030B2 (en) 2008-03-20 2015-04-28 Symbol Technologies, Inc. Transparent force sensor and method of fabrication
JP4600548B2 (ja) * 2008-08-27 2010-12-15 ソニー株式会社 再生装置、再生方法、およびプログラム
US8988191B2 (en) * 2009-08-27 2015-03-24 Symbol Technologies, Inc. Systems and methods for pressure-based authentication of an input on a touch screen
KR101657963B1 (ko) * 2009-12-08 2016-10-04 삼성전자 주식회사 단말기의 터치 면적 변화율에 따른 운용 방법 및 장치
JP5750875B2 (ja) * 2010-12-01 2015-07-22 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
TW201128478A (en) * 2010-02-12 2011-08-16 Novatek Microelectronics Corp Touch sensing method and system using the same
US20110205157A1 (en) * 2010-02-24 2011-08-25 Walline Erin K System and Method for Information Handling System Touchpad Enablement
US8432362B2 (en) * 2010-03-07 2013-04-30 Ice Computer, Inc. Keyboards and methods thereof
JP2011221640A (ja) * 2010-04-06 2011-11-04 Sony Corp 情報処理装置、情報処理方法およびプログラム
BR122021016044B1 (pt) * 2010-05-08 2022-07-19 Bruin Biometrics, Llc Aparelho para detecção de umidade subepidérmica (sem)
US8918146B2 (en) * 2010-05-10 2014-12-23 Microsoft Corporation Automatic gain control based on detected pressure
US8384566B2 (en) * 2010-05-19 2013-02-26 Mckesson Financial Holdings Pressure-sensitive keyboard and associated method of operation
US9946459B2 (en) * 2010-05-28 2018-04-17 Lenovo (Singapore) Pte. Ltd. Systems and methods for determining intentional touch screen contact
KR101119373B1 (ko) * 2010-07-09 2012-03-06 삼성전기주식회사 하이브리드 터치패널의 작동방법
TWI594128B (zh) 2010-07-10 2017-08-01 鄭尚澈 可更換智慧核心元件之智慧平台
US8963874B2 (en) 2010-07-31 2015-02-24 Symbol Technologies, Inc. Touch screen rendering system and method of operation thereof
US20120036468A1 (en) * 2010-08-03 2012-02-09 Nokia Corporation User input remapping
US20120050335A1 (en) * 2010-08-25 2012-03-01 Universal Cement Corporation Zooming system for a display
JP5732783B2 (ja) * 2010-09-02 2015-06-10 ソニー株式会社 情報処理装置、情報処理装置の入力制御方法及びプログラム
US9104308B2 (en) * 2010-12-17 2015-08-11 The Hong Kong University Of Science And Technology Multi-touch finger registration and its applications
WO2012086208A1 (ja) * 2010-12-22 2012-06-28 京セラ株式会社 電子機器
US8797284B2 (en) * 2011-01-05 2014-08-05 Motorola Mobility Llc User interface and method for locating an interactive element associated with a touch sensitive interface
WO2012095917A1 (ja) * 2011-01-13 2012-07-19 株式会社ニコン 電子機器および電子機器の制御プログラム
WO2012098469A2 (en) 2011-01-20 2012-07-26 Cleankeys Inc. Systems and methods for monitoring surface sanitation
WO2012102049A1 (ja) * 2011-01-27 2012-08-02 京セラ株式会社 電子機器
US10001806B2 (en) 2011-04-20 2018-06-19 Shang-Che Cheng Computing device with two or more display panels
JP5722696B2 (ja) * 2011-05-10 2015-05-27 京セラ株式会社 電子機器、制御方法及び制御プログラム
US8952987B2 (en) * 2011-05-19 2015-02-10 Qualcomm Incorporated User interface elements augmented with force detection
US20140123051A1 (en) * 2011-05-30 2014-05-01 Li Ni Graphic object selection by way of directional swipe gestures
US8587542B2 (en) 2011-06-01 2013-11-19 Motorola Mobility Llc Using pressure differences with a touch-sensitive display screen
US9876669B2 (en) 2011-06-24 2018-01-23 Ice Computer, Inc. Mobile computing resource
US9417754B2 (en) 2011-08-05 2016-08-16 P4tents1, LLC User interface system, method, and computer program product
US9069460B2 (en) 2011-09-12 2015-06-30 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US8976128B2 (en) 2011-09-12 2015-03-10 Google Technology Holdings LLC Using pressure differences with a touch-sensitive display screen
US9262076B2 (en) * 2011-09-12 2016-02-16 Microsoft Technology Licensing, Llc Soft keyboard interface
US20130063366A1 (en) * 2011-09-13 2013-03-14 Google Inc. User inputs of a touch-sensitive device
US8856674B2 (en) 2011-09-28 2014-10-07 Blackberry Limited Electronic device and method for character deletion
US9323379B2 (en) * 2011-12-09 2016-04-26 Microchip Technology Germany Gmbh Electronic device with a user interface that has more than two degrees of freedom, the user interface comprising a touch-sensitive surface and contact-free detection means
US9448651B2 (en) * 2012-01-09 2016-09-20 Google Inc. Intelligent touchscreen keyboard with finger differentiation
EP2634672A1 (en) * 2012-02-28 2013-09-04 Alcatel Lucent System and method for inputting symbols
USRE48963E1 (en) 2012-03-02 2022-03-08 Microsoft Technology Licensing, Llc Connection device for computing devices
US9426905B2 (en) 2012-03-02 2016-08-23 Microsoft Technology Licensing, Llc Connection device for computing devices
US9870066B2 (en) 2012-03-02 2018-01-16 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9064654B2 (en) 2012-03-02 2015-06-23 Microsoft Technology Licensing, Llc Method of manufacturing an input device
US9360893B2 (en) 2012-03-02 2016-06-07 Microsoft Technology Licensing, Llc Input device writing surface
US9298236B2 (en) 2012-03-02 2016-03-29 Microsoft Technology Licensing, Llc Multi-stage power adapter configured to provide a first power level upon initial connection of the power adapter to the host device and a second power level thereafter upon notification from the host device to the power adapter
US9075566B2 (en) 2012-03-02 2015-07-07 Microsoft Technoogy Licensing, LLC Flexible hinge spine
US9460029B2 (en) 2012-03-02 2016-10-04 Microsoft Technology Licensing, Llc Pressure sensitive keys
US8873227B2 (en) 2012-03-02 2014-10-28 Microsoft Corporation Flexible hinge support layer
JP2013198068A (ja) * 2012-03-22 2013-09-30 Ntt Docomo Inc 情報端末及び入力方法
JP2013206180A (ja) * 2012-03-28 2013-10-07 Kyocera Corp 電子機器および表示方法
US9104260B2 (en) * 2012-04-10 2015-08-11 Typesoft Technologies, Inc. Systems and methods for detecting a press on a touch-sensitive surface
CN108052264B (zh) 2012-05-09 2021-04-27 苹果公司 用于移动和放置用户界面对象的设备、方法和图形用户界面
KR101956082B1 (ko) 2012-05-09 2019-03-11 애플 인크. 사용자 인터페이스 객체를 선택하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169845A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for scrolling nested regions
WO2013169846A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying additional information in response to a user contact
WO2013169865A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for moving a user interface object based on an intensity of a press input
WO2013169875A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for displaying content associated with a corresponding affordance
WO2013169842A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for selecting object within a group of objects
CN104508618B (zh) 2012-05-09 2018-01-05 苹果公司 用于针对在用户界面中执行的操作提供触觉反馈的设备、方法和图形用户界面
WO2013169843A1 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for manipulating framed graphical objects
JP6182207B2 (ja) 2012-05-09 2017-08-16 アップル インコーポレイテッド ユーザインタフェースオブジェクトのアクティブ化状態を変更するためのフィードバックを提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
KR101823288B1 (ko) 2012-05-09 2018-01-29 애플 인크. 제스처에 응답하여 디스플레이 상태들 사이를 전이하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
WO2013169851A2 (en) 2012-05-09 2013-11-14 Yknots Industries Llc Device, method, and graphical user interface for facilitating user interaction with controls in a user interface
WO2013169849A2 (en) 2012-05-09 2013-11-14 Industries Llc Yknots Device, method, and graphical user interface for displaying user interface objects corresponding to an application
US20130300590A1 (en) 2012-05-14 2013-11-14 Paul Henry Dietz Audio Feedback
US8816989B2 (en) 2012-05-22 2014-08-26 Lenovo (Singapore) Pte. Ltd. User interface navigation utilizing pressure-sensitive touch
US10031556B2 (en) 2012-06-08 2018-07-24 Microsoft Technology Licensing, Llc User experience adaptation
US9019615B2 (en) 2012-06-12 2015-04-28 Microsoft Technology Licensing, Llc Wide field-of-view virtual image projector
US9836213B2 (en) 2012-07-27 2017-12-05 Symbol Technologies, Llc Enhanced user interface for pressure sensitive touch screen
US8964379B2 (en) 2012-08-20 2015-02-24 Microsoft Corporation Switchable magnetic lock
CN102833418B (zh) * 2012-08-31 2016-08-24 广东欧珀移动通信有限公司 一种rcp通信过程选择联系人方法及移动智能终端
US8952892B2 (en) 2012-11-01 2015-02-10 Microsoft Corporation Input location correction tables for input panels
WO2014074111A1 (en) * 2012-11-09 2014-05-15 Thomson Licensing Handheld display zoom feature
US9880736B2 (en) * 2012-12-03 2018-01-30 Facebook, Inc. Systems and methods for determining a symbol input by a user from two sets of symbols on a multi-layer keyboard
US20140188561A1 (en) * 2012-12-28 2014-07-03 Arbitron Inc. Audience Measurement System, Method and Apparatus with Grip Sensing
KR20170081744A (ko) 2012-12-29 2017-07-12 애플 인크. 다중 접촉 제스처에 대한 촉각적 출력의 발생을 보류하는 디바이스, 방법, 및 그래픽 사용자 인터페이스
KR101958582B1 (ko) 2012-12-29 2019-07-04 애플 인크. 터치 입력에서 디스플레이 출력으로의 관계들 사이에서 전환하기 위한 디바이스, 방법, 및 그래픽 사용자 인터페이스
CN107832003B (zh) 2012-12-29 2021-01-22 苹果公司 用于放大内容的方法和设备、电子设备和介质
KR102301592B1 (ko) 2012-12-29 2021-09-10 애플 인크. 사용자 인터페이스 계층을 내비게이션하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2014105277A2 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for moving a cursor according to a change in an appearance of a control icon with simulated three-dimensional characteristics
WO2014105279A1 (en) 2012-12-29 2014-07-03 Yknots Industries Llc Device, method, and graphical user interface for switching between user interfaces
US9098244B2 (en) * 2013-01-15 2015-08-04 Google Inc. Ignoring tactile input based on subsequent input received from keyboard
CN104049933B (zh) * 2013-03-11 2019-07-26 联想(北京)有限公司 一种信息处理的方法及电子设备
US9304549B2 (en) 2013-03-28 2016-04-05 Microsoft Technology Licensing, Llc Hinge mechanism for rotatable component attachment
US9454251B1 (en) * 2013-06-26 2016-09-27 Google Inc. Methods, systems, and media for controlling a remote device using a touch screen of a mobile device in a display inhibited state
CN104281376A (zh) * 2013-07-04 2015-01-14 福建省辉锐材料科技有限公司 一种移动终端的控制方法及系统
GB2516029A (en) 2013-07-08 2015-01-14 Ibm Touchscreen keyboard
US9483176B2 (en) * 2013-07-08 2016-11-01 Samsung Display Co., Ltd. Method and apparatus to reduce display lag of soft keyboard presses
US10366264B2 (en) 2013-08-09 2019-07-30 Korea Advanced Institute Of Science And Technology System and method for transferring content among devices
CN104423612A (zh) * 2013-09-05 2015-03-18 联想(北京)有限公司 按键识别方法、装置和电子设备
US10289302B1 (en) 2013-09-09 2019-05-14 Apple Inc. Virtual keyboard animation
CN108345390B (zh) * 2013-09-11 2021-11-16 联想(北京)有限公司 一种辅助输入方法、装置及应用其的电子设备
KR101509495B1 (ko) * 2013-10-18 2015-04-09 한국전자통신연구원 키패드의 이동을 통한 보안 키패드 입력 장치 및 방법
US9483118B2 (en) * 2013-12-27 2016-11-01 Rovi Guides, Inc. Methods and systems for selecting media guidance functions based on tactile attributes of a user input
US20150185850A1 (en) * 2013-12-27 2015-07-02 Farzin Guilak Input detection
US9158426B1 (en) * 2014-03-19 2015-10-13 Google Inc. Touch keyboard calibration
CN104123093A (zh) * 2014-06-24 2014-10-29 小米科技有限责任公司 信息处理方法及装置
TW201610412A (zh) * 2014-09-02 2016-03-16 旭硝子股份有限公司 評價基材的操作感的方法及基材
TWI600322B (zh) 2014-09-02 2017-09-21 蘋果公司 用於操作具有整合式相機之電子器件之方法及相關電子器件，以及非暫時性電腦可讀取儲存媒體
US9424048B2 (en) 2014-09-15 2016-08-23 Microsoft Technology Licensing, Llc Inductive peripheral retention device
US10591580B2 (en) 2014-09-23 2020-03-17 Hewlett-Packard Development Company, L.P. Determining location using time difference of arrival
WO2016048313A1 (en) 2014-09-24 2016-03-31 Hewlett-Packard Development Company, L.P. Transforming received touch input
EP3201737B1 (en) * 2014-09-29 2021-10-27 Hewlett-Packard Development Company, L.P. Virtual keyboard
CN105640553A (zh) * 2014-11-28 2016-06-08 富泰华工业（深圳）有限公司 测量体脂的移动装置、系统及方法
US9632664B2 (en) 2015-03-08 2017-04-25 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
US9645732B2 (en) 2015-03-08 2017-05-09 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US10095396B2 (en) 2015-03-08 2018-10-09 Apple Inc. Devices, methods, and graphical user interfaces for interacting with a control object while dragging another object
US10048757B2 (en) 2015-03-08 2018-08-14 Apple Inc. Devices and methods for controlling media presentation
US9990107B2 (en) 2015-03-08 2018-06-05 Apple Inc. Devices, methods, and graphical user interfaces for displaying and using menus
US9785305B2 (en) 2015-03-19 2017-10-10 Apple Inc. Touch input cursor manipulation
US9639184B2 (en) 2015-03-19 2017-05-02 Apple Inc. Touch input cursor manipulation
US10067653B2 (en) 2015-04-01 2018-09-04 Apple Inc. Devices and methods for processing touch inputs based on their intensities
US20170045981A1 (en) 2015-08-10 2017-02-16 Apple Inc. Devices and Methods for Processing Touch Inputs Based on Their Intensities
US9979890B2 (en) 2015-04-23 2018-05-22 Apple Inc. Digital viewfinder user interface for multiple cameras
US10182740B2 (en) 2015-04-24 2019-01-22 Bruin Biometrics, Llc Apparatus and methods for determining damaged tissue using sub-epidermal moisture measurements
CN105100428A (zh) * 2015-06-05 2015-11-25 努比亚技术有限公司 一种联系人显示方法和系统
US10200598B2 (en) 2015-06-07 2019-02-05 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9674426B2 (en) 2015-06-07 2017-06-06 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US9860451B2 (en) 2015-06-07 2018-01-02 Apple Inc. Devices and methods for capturing and interacting with enhanced digital images
US10346030B2 (en) 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
US9891811B2 (en) 2015-06-07 2018-02-13 Apple Inc. Devices and methods for navigating between user interfaces
US9830048B2 (en) 2015-06-07 2017-11-28 Apple Inc. Devices and methods for processing touch inputs with instructions in a web page
CN105100431B (zh) * 2015-06-09 2019-02-05 联想(北京)有限公司 一种控制方法及电子设备
CN105120079A (zh) * 2015-07-22 2015-12-02 努比亚技术有限公司 一种实现联系人信息显示的方法及终端
US10248308B2 (en) * 2015-08-10 2019-04-02 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interfaces with physical gestures
US10235035B2 (en) 2015-08-10 2019-03-19 Apple Inc. Devices, methods, and graphical user interfaces for content navigation and manipulation
US10416800B2 (en) 2015-08-10 2019-09-17 Apple Inc. Devices, methods, and graphical user interfaces for adjusting user interface objects
US9880735B2 (en) 2015-08-10 2018-01-30 Apple Inc. Devices, methods, and graphical user interfaces for manipulating user interface objects with visual and/or haptic feedback
CN105162974B (zh) * 2015-08-19 2016-09-07 努比亚技术有限公司 一种动态显示联系人属性的装置和方法
CN105224216B (zh) * 2015-08-27 2018-07-06 广东欧珀移动通信有限公司 一种用户终端控制方法及用户终端
CN106610730A (zh) * 2015-10-23 2017-05-03 深圳富泰宏精密工业有限公司 电子设备及字元校正方法
US9392460B1 (en) 2016-01-02 2016-07-12 International Business Machines Corporation Continuous user authentication tool for mobile device communications
KR20170085419A (ko) * 2016-01-14 2017-07-24 삼성전자주식회사 터치 입력에 기반한 동작 방법 및 그 전자 장치
US10627948B2 (en) * 2016-05-25 2020-04-21 Microsoft Technology Licensing, Llc Sequential two-handed touch typing on a mobile device
US10009536B2 (en) 2016-06-12 2018-06-26 Apple Inc. Applying a simulated optical effect based on data received from multiple camera sensors
DK179757B1 (en) * 2016-06-12 2019-05-08 Apple Inc. User Interface for Camera Effects
WO2018035729A1 (zh) * 2016-08-24 2018-03-01 北京小米移动软件有限公司 资源转移方法及装置
CN106775084B (zh) * 2016-12-16 2019-04-16 Oppo广东移动通信有限公司 一种触摸屏的防误触方法、装置及移动终端
MX2019004926A (es) 2017-02-03 2019-06-20 Bruin Biometrics Llc Medicion del edema.
KR102283395B1 (ko) 2017-02-03 2021-07-30 브루인 바이오메트릭스, 엘엘씨 당뇨병성 족부 궤양에 대한 감수성의 측정
EP4241670A3 (en) 2017-02-03 2023-12-27 BBI Medical Innovations, LLC Measurement of tissue viability
US10282590B2 (en) 2017-03-31 2019-05-07 International Business Machines Corporation Analyzing writing using pressure sensing touchscreens
US10057197B1 (en) 2017-05-16 2018-08-21 Apple Inc. Messaging system for organizations
CN117519478A (zh) * 2017-05-19 2024-02-06 M·W·墨菲 交错字符选择界面
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US10530770B2 (en) 2017-06-28 2020-01-07 International Business Machines Corporation Pressure-based authentication
WO2019070249A1 (en) * 2017-10-04 2019-04-11 Hewlett-Packard Development Company, L.P. USER INTERFACES WITH STRAIN SENSORS
GB2592547B (en) 2017-11-16 2022-02-23 Bruin Biometrics Llc Strategic treatment of pressure ulcer using sub-epidermal moisture values
WO2019157290A1 (en) 2018-02-09 2019-08-15 Bruin Biometrics, Llc Detection of tissue damage
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
KR102444500B1 (ko) * 2018-03-29 2022-09-20 가부시키가이샤 코나미 데지타루 엔타테인멘토 정보 처리 장치, 및 기록 매체에 저장된 컴퓨터 프로그램
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
CN108803986A (zh) * 2018-05-07 2018-11-13 瑞声科技(新加坡)有限公司 一种移动终端虚拟按键的调整方法及装置
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
GB2591899B (en) 2018-10-11 2022-03-09 Bruin Biometrics Llc Device with disposable element
US11922007B2 (en) * 2018-11-29 2024-03-05 Michael William Murphy Apparatus, method and system for inputting characters to an electronic device
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
CN110727522A (zh) * 2019-09-29 2020-01-24 联想(北京)有限公司 一种控制方法及电子设备
EP4104042A1 (en) 2020-02-10 2022-12-21 FlatFrog Laboratories AB Improved touch-sensing apparatus
US11054973B1 (en) 2020-06-01 2021-07-06 Apple Inc. User interfaces for managing media
US11212449B1 (en) 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
MX2023009108A (es) 2021-02-03 2023-08-09 Bruin Biometrics Llc Métodos de tratamiento de daño tisular inducido por presión en estadio profundo y temprano.
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US20220382374A1 (en) * 2021-05-26 2022-12-01 Da-Yuan Huang Methods, devices, and computer-readable storage media for performing a function based on user input
US11870739B2 (en) * 2022-05-17 2024-01-09 Bank Of America Corporation Auto-adjust app operation in response to data entry anomalies

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080078618A (ko) * 2007-02-23 2008-08-27 박태운 디지털 기기에 사용되는 포인팅장치를 이용한 가상키보드입력시스템
US20080297475A1 (en) * 2005-08-02 2008-12-04 Woolf Tod M Input Device Having Multifunctional Keys

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3727399B2 (ja) * 1996-02-19 2005-12-14 ミサワホーム株式会社 画面表示式キー入力装置
JP2002351600A (ja) * 2001-05-28 2002-12-06 Allied Brains Inc 入力操作支援プログラム
WO2003017244A1 (en) 2001-08-17 2003-02-27 Multidigit, Inc. System and method for selecting actions based on the identification of user's fingers
KR20040083788A (ko) * 2003-03-25 2004-10-06 삼성전자주식회사 제스쳐 커맨드를 이용하여 프로그램을 구동시킬 수 있는휴대용 단말기 및 이를 이용한 프로그램 구동 방법
WO2005008412A2 (en) * 2003-07-09 2005-01-27 Wildseed Ltd. Shared input key method and apparatus
CN100478851C (zh) * 2004-02-10 2009-04-15 刘二中 一种具有键盘输入功能的装置和输入方法
JP2006127488A (ja) * 2004-09-29 2006-05-18 Toshiba Corp 入力装置、コンピュータ装置、情報処理方法及び情報処理プログラム
JP2007128497A (ja) * 2005-10-05 2007-05-24 Sony Corp 表示装置および表示方法
JP5092255B2 (ja) * 2006-03-09 2012-12-05 カシオ計算機株式会社 表示装置
US8059102B2 (en) * 2006-06-13 2011-11-15 N-Trig Ltd. Fingertip touch recognition for a digitizer
WO2007144881A1 (en) * 2006-06-13 2007-12-21 N-Trig Ltd Fingertip touch recognition for a digitizer
JP4897596B2 (ja) * 2007-07-12 2012-03-14 ソニー株式会社 入力装置、記憶媒体、情報入力方法及び電子機器
KR101395780B1 (ko) 2007-07-27 2014-05-16 삼성전자주식회사 촉각 감지를 위한 압력 센서 어레이 장치 및 방법
JP4657265B2 (ja) * 2007-07-30 2011-03-23 京セラ株式会社 文字入力装置及び表示制御方法
JP4600548B2 (ja) * 2008-08-27 2010-12-15 ソニー株式会社 再生装置、再生方法、およびプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080297475A1 (en) * 2005-08-02 2008-12-04 Woolf Tod M Input Device Having Multifunctional Keys
KR20080078618A (ko) * 2007-02-23 2008-08-27 박태운 디지털 기기에 사용되는 포인팅장치를 이용한 가상키보드입력시스템

Also Published As

Publication number Publication date
JP2013503387A (ja) 2013-01-31
US8390583B2 (en) 2013-03-05
KR20120060223A (ko) 2012-06-11
EP2950198A1 (en) 2015-12-02
CN102483666B (zh) 2015-07-08
WO2011025643A1 (en) 2011-03-03
JP5486089B2 (ja) 2014-05-07
EP2473900A1 (en) 2012-07-11
CN104965614A (zh) 2015-10-07
CN104965614B (zh) 2018-04-27
US20110050576A1 (en) 2011-03-03
CN102483666A (zh) 2012-05-30

Similar Documents

Publication Publication Date Title
KR101368041B1 (ko) 모바일 디바이스들을 위한 압력 감지 사용자 인터페이스
US7508324B2 (en) Finger activated reduced keyboard and a method for performing text input
US7694231B2 (en) Keyboards for portable electronic devices
US8281251B2 (en) Apparatus and method for inputting characters/numerals for communication terminal
US20070152980A1 (en) Touch Screen Keyboards for Portable Electronic Devices
US20060176283A1 (en) Finger activated reduced keyboard and a method for performing text input
US9274613B2 (en) Method and apparatus pertaining to dynamically determining entered telephone numbers
CN103324428A (zh) 用于符号输入的电子装置和方法
KR20120006503A (ko) 개선된 텍스트 입력
KR20120007042A (ko) 학습 능력들을 갖춘 가상 키패드 생성기
CN106445369B (zh) 一种输入的方法和装置
KR20110082532A (ko) 다단계 가상 키보드를 가진 통신 디바이스
US20130069881A1 (en) Electronic device and method of character entry
EP2570892A1 (en) Electronic device and method of character entry
KR20110017827A (ko) 터치 감응형 디스플레이를 구비하는 전자 장치 및 이 전자 장치에서의 입력을 용이하게 하는 방법
JP2016218898A (ja) 情報処理装置および情報処理方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161229

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171228

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20190107

Year of fee payment: 6