KR20140148490A

KR20140148490A - 힘 감지 터치 패널의 자동 사용을 위한 장치 및 방법

Info

Publication number: KR20140148490A
Application number: KR1020147031995A
Authority: KR
Inventors: 라그후난단 나가라자 라오; 패트릭 비. 틸리; 아룬 브이. 툰가레; 이 웨이
Original assignee: 모토로라 솔루션즈, 인크.
Priority date: 2012-05-16
Filing date: 2013-04-25
Publication date: 2014-12-31
Also published as: CN104685463A; US20130307788A1; AU2013263247B2; WO2013173037A1; CA2873367A1; AU2013263247A1; EP2850513A1

Abstract

장치 및 방법은 터치 입력으로부터의 명령을 결정한다. 방법은 실행될 애플리케이션을 나타내는 실행중인 애플리케이션 데이터를 결정하는 단계를 포함한다. 방법은, 터치 감지 입력 장치에 의해, 손가락 사용 입력 데이터, 힘 입력 데이터, 제스처 입력 데이터 및 위치 입력 데이터 중의 적어도 하나를 포함하는 터치 입력 데이터를 수신하는 단계를 포함한다. 손가락 사용 입력 데이터는 터치 입력 데이터가 어떻게 입력되는지에 관한 것이다. 힘 입력 데이터는 터치 입력 데이터에서 가해지는 압력에 관한 것이다. 제스처 입력 데이터는 시간 경과에 따른 터치 입력 데이터의 움직임에 관한 것이다. 위치 입력 데이터는 입력 장치 상의 위치에 관한 것이다. 방법은 사용중인 애플리케이션 데이터 및 손가락 사용 입력 데이터, 힘 입력 데이터, 제스처 입력 데이터 및 위치 입력 데이터 중의 적어도 하나에 기초하여 명령을 결정하는 단계를 포함한다.

Description

힘 감지 터치 패널의 자동 사용을 위한 장치 및 방법{DEVICE AND METHOD FOR AUTOMATED USE OF FORCE SENSING TOUCH PANELS}

본 개시물은 일반적으로 힘 감지 터치 패널을 이용하여 모바일 장치의 사용자 인터페이스에 대한 자동 제어를 위한 장치 및 방법에 관한 것으로, 특히, 손가락 이용 입력, 위치 입력, 힘 입력, 제스처 입력 및 사용중인 애플리케이션 입력의 함수로서 다중 터치 입력의 인식에 관한 것이다.

전자 장치는 다양한 상이한 입력 기술을 포함할 수 있다. 예를 들어, 전자 장치는 사용자의 입력을 허용하는 키패드를 포함할 수 있다. 다른 예에서, 전자 장치는 사용자의 입력을 가능하게 하는 터치 센서를 포함할 수 있다. 다른 예에서, 전자 장치는 사용자의 입력을 가능하게 하는 디스플레이의 상부에 배치된 투명 터치 센서를 포함할 수 있다. 제스처 인식은 전자 장치에서 인기를 얻고 있다. 적절히 이용되면, 제스처 인식은 더 빠르고 더 직관적인 명령을 가능하게 한다. 그러나, 제스처 인식은 그와 연관된 본질적인 제한을 갖는다. 정확한 제스처 결정은 이러한 하나의 제한이다. 보편적으로 인식되는 언어 대신에, 표준 제스처 라이브러리는 없다. 더 중요하게, 공통 제스처에 대하여, 상이한 사용자가 상이하게 태스크를 수행한다. 예를 들어, 좌측 슬라이드 제스처에 대하여, 몇몇의 사용자는 먼저 좌측으로 슬라이드한 후 뒤로 후퇴하지만, 다른 사용자는 먼저 우측으로 약간 이동한 후에 좌측으로 슬라이드하는 것을 선호한다. 히든 마코브 모델(hidden Markov model) 및 동적 시간 워핑 방법(dynamic time warping method) 등의 상이한 인식 알고리즘을 이용하여 정확도를 증가시키기 위한 수많은 연구가 수행되어 왔으나 큰 성공은 없었다. 이러한 제한을 극복하는 더 간단한 방법은 혼동을 피하기 위하여 수행되는 제스처의 수를 간단한 제스처로 제한하는 것이다. 그러나, 이것은 방법 자체의 유용성을 제한한다.

일반적인 터치 센서는 다중 터치 또는 힘 감지 능력을 갖는 다양한 터치 패널 기술을 이용할 수 있다. 각각의 터치 패널의 힘 감지 메커니즘이 변경될 수 있다. 터치 센서를 이용하는 전자 장치는 다양한 오퍼레이팅 시스템 중의 하나와 함께 구성될 수 있다. 사용자로부터의 복수의 손가락으로, 무수한 수의 단일 손가락 및 다중 손가락 제스처가 수행될 수 있다. 또한, 터치 센서의 힘 감지 메커니즘 상에서 감지되는 압력 값의 다양한 입도(granularities)에 따라, 압력 레벨과 쌍을 이루는 손가락 제스처의 추가의 조합이 수행될 수 있다. 또한, 손가락을 이용한 공통 제스처는 인가되는 압력의 정도를 변경하면서 사용될 수 있다. 상기에서는 손가락만이 사용되지만, 공통 제스처는 스타일러스, 손바닥 등을 이용하여 수행될 수 있고, 터치 센서는 압력의 정도가 변화하는 더 많은 가능한 터치 센서 입력을 포함할 수 있다. 터치 입력을 결정하는 방법은 모든 개발자 또는 사용자가 이들 제스처를 정의하고 압력 입도 및 동작을 감지하는데 매우 번거롭고, 지루하고 비효율적일 수 있다.

따라서, 힘 감지 터치 패널을 이용하여 모바일 장치의 사용자 입력에 대한 자동 제어를 위한 방법 및 장치가 필요하다.

첨부된 도면은 명세서에 이하의 상세한 설명과 함께 포함되어 명세서의 일부를 형성하고, 청구되는 발명을 포함하는 개념의 실시예를 더 설명하고 이들 실시예의 다양한 원리 및 이점을 설명하며, 동일한 참조 번호는 개별 도면에서 동일 또는 기능적으로 유사한 엘리먼트를 지칭한다.
도 1은 임의의 실시예에 따른 모바일 유닛의 컴포넌트의 블록도.
도 2는 임의의 실시예에 따른 터치 입력을 위한 제스처 라이브러리.
도 3은 임의의 실시예에 따른 터치 입력의 함수로서 명령을 결정하는 방법의 플로우챠트.
숙련된 기술자는 도면 내의 엘리먼트가 간략화 및 명료화를 위하여 도시되고 반드시 일정한 비율로 그려지지 않음을 인식할 것이다. 예를 들어, 본 발명의 실시예의 이해를 개선하기 위하여 도면 내의 엘리먼트의 일부의 치수가 다른 엘리먼트에 대하여 과장될 수 있다.
장치 및 방법 컴포넌트는 도면에서 적절한 곳에서는 종래의 심볼로 표시되었으며, 도면은 본 설명의 이득을 갖는 당업자에게 자명한 세부사항으로 본 개시물을 모호하게 하지 않도록 본 발명의 실시예의 이해와 관련된 특정 세부사항만을 나타내고 있다.

터치 입력으로부터 명령을 결정하는 방법 및 장치. 방법은 전자 장치 상에서 프로세서에 의해 실행되는 애플리케이션을 나타내는 사용중인 애플리케이션 데이터를 결정하는 단계; 상기 전자 장치의 터치 감지 입력 장치에 의해, 적어도 손가락 사용 입력 데이터, 힘 입력 데이터, 제스처 입력 데이터, 및 위치 입력 데이터를 포함하는 터치 입력 데이터를 수신하는 단계 - 상기 손가락 사용 입력 데이터는 터치 입력 데이터가 입력되는 방식을 나타내고, 상기 힘 입력 데이터는 터치 입력 데이터가 입력되는 과정에서 가해지는 압력을 나타내고, 상기 제스처 입력 데이터는 시간 경과에 따른 터치 입력 데이터에 포함되는 움직임을 나타내고, 상기 위치 입력 데이터는 터치 입력이 수신되는 터치 감지 입력 장치 상의 위치를 나타냄 -; 및 상기 사용중인 애플리케이션 데이터 및 상기 손가락 사용 입력 데이터, 상기 힘 입력 데이터, 상기 제스처 입력 데이터 및 상기 위치 입력 데이터 중의 적어도 하나의 함수로서 실행될 명령을 결정하는 단계를 포함한다.

예시적인 실시예는 다음의 설명 및 첨부된 도면을 참조하여 더 잘 이해될 것이며, 첨부 도면에서 동일한 엘리먼트가 동일한 참조 번호로 지시된다. 예시적인 실시예는 터치 입력의 함수로서 명령을 결정하도록 구성된 전자 장치를 기술한다. 특히, 전자 장치는 사용중인 특정 애플리케이션에 대한 명령을 결정하는데 사용되는 적어도 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력을 포함하는 터치 입력을 수신한다. 전자 장치, 그 컴포넌트, 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력을 포함하는 터치 입력, 사용중인 애플리케이션에 대한 관계 및 관련된 방법이 이하에서 더 상세히 기재된다.

도 1은 본 발명의 예시적인 실시예에 따른 전자 장치(100)를 나타낸다. 도시된 바와 같이, 전자 장치(100)는 모바일 폰, 개인 휴대 단말기, 스마트폰, 태블릿, 랩탑, 바코드 리더 등의 임의의 포터블 장치일 수 있다. 그러나, 전자 장치(100)는 손가락 사용 입력, 힘 입력 및 제스처 입력을 포함하는 터치 입력을 수신할 수 있는 임의의 타입의 장치를 나타낼 수 있다. 따라서, 전자 장치(100)는 또한 데스크탑 컴퓨터 등의 넌-포터블 장치를 나타낼 수 있다. 전자 장치(100)는 다양한 컴포넌트를 포함할 수 있다. 도 1에 도시된 바와 같이, 전자 장치(100)는 프로세서(105), 메모리 장치(110), 디스플레이 장치(115), 입출력(I/O) 장치(120), 트랜시버(125) 및 포터블 전원(예를 들어, 배터리) 등의 다른 컴포넌트(130)를 포함할 수 있다.

프로세서(105)는 전자 장치(100)에 종래의 기능을 제공할 수 있다. 예를 들어, MU(100)는 트랜시버(125)를 통해 통신 네트워크에 접속될 때 웹 브라우저를 포함하는 애플리케이션 등의 프로세서(105) 상에 실행되는 복수의 애플리케이션을 포함할 수 있다. 이하에서 더 상세히 설명하는 바와 같이, 프로세서(105)는 또한 터치 입력 데이터를 수신하여 실행될 명령을 결정할 수 있다. 메모리(110)는 또한 전자 장치(100)에 종래의 기능을 제공할 수 있다. 예를 들어, 메모리(110)는 프로세서(105)에 의해 수행된 동작과 관련된 데이터를 저장할 수 있다. 이하에서 더 상세히 설명하는 바와 같이, 메모리(110)는 또한 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력에 더 관련된 터치 입력과 관련된 데이터를 저장할 수 있고, 이들 터치 입력은 사용중인 애플리케이션과 조율되어 실행될 명령을 결정한다. 특히, 제스처 라이브러리가 메모리(110)에 저장될 수 있다. 그러나, 제스처 라이브러리는 마이크로컨트롤러의 로컬 메모리 등의 다른 위치에 저장될 수 있음에 주의해야 한다. 트랜시버(125)는 데이터를 송신 및/또는 수신하도록 구성되는 임의의 종래의 컴포넌트일 수 있다. 그러므로, 트랜시버(125)는 네트워크를 통해 직접 또는 간접적으로 다른 전자 장치와의 통신을 가능하게 할 수 있다.

디스플레이 장치(115)는 사용자에게 데이터를 보여주도록 구성되는 임의의 컴포넌트일 수 있다. 디스플레이 장치(115)는 예를 들어 전자 장치(100)의 사이즈에 맞는 액정 디스플레이(LCD)일 수 있다. I/O 장치(120)는 사용자로부터의 입력을 수신하도록 구성되는 임의의 컴포넌트일 수 있다. 예를 들어, I/O 장치(120)는 키패드(예를 들어, 문자 숫자 키패드, 수치 키패드 등)일 수 있다. I/O 장치(120)는 또한 손가락(들) 또는 스타일러스로 수동으로 사용자가 입력하도록 하는 터치 감지 패드일 수 있다. 특히, I/O 장치(120)가 사용자가 입력할 수 있는 영역을 포함하는 터치 감지 패드일 때 디스플레이 장치(115)가 I/O 장치(120)를 포함할 수 있음에 주의해야 한다. 다른 예에서, I/O 장치(120)는 사용자의 입력을 가능하게 하는 디스플레이(115) 상에 배치된 투명 터치 센서일 수 있다. 본 발명의 예시적인 실시예는 디스플레이 장치(115)가 I/O 장치(120)를 포함할 때를 참조하여 설명할 것이다. 따라서, 터치 입력이 디스플레이 장치(115) 및 I/O 장치(120) 상에 수신되면, 다수의 입도가 결정될 수 있다. 이하에서 더 상세히 설명하는 바와 같이, I/O 장치(120)는 터치 입력 데이터와 함께 가해지는 압력량을 결정하는 힘 센서로 구성될 수 있다. 본 발명의 예시적인 실시예는 전자 장치(100) 상의 하우징의 개별 영역 상에 배치된 개별 I/O 장치(120)에도 사용될 수 있음에 주의해야 한다.

예시적인 실시예에 따르면, 전자 장치(100)는 I/O 장치(120)를 통해 터치 입력을 수신하도록 구성된다. 터치 입력 데이터는 프로세서(105)에 의해 실행되는 현재의 애플리케이션의 기능으로서 더 실행될 해당 명령을 결정하도록 프로세서(105)가 해석하는 몇 개의 컴포넌트를 포함할 수 있다. 상술한 바와 같이, 터치 입력 데이터의 컴포넌트는 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력을 포함할 수 있다. 손가락 사용 입력은 터치 입력 데이터에 대하여 사용자가 I/O 장치(120) 상에 배치한 다수의 손가락에 관한 것일 수 있다. 힘 입력은 I/O 장치(120) 상에 가해지는 압력에 관한 것일 수 있다. 제스처 입력은 초기 배치 및 최종 배치 및 이들 사이의 상대적인 이동 등의 시간 경과에 따른 터치 입력 데이터의 움직임에 관한 것일 수 있다. 위치 입력은 터치 입력이 수신된 I/O 장치(120) 상의 위치(예를 들어, I/O 장치(120)의 상부 영역, I/O 장치의 하부 영역, 등)에 관한 것일 수 있다. 손가락 사용 입력은 단지 예임에 주의해야 한다. 본 발명의 예시적인 실시예에 따라, I/O 장치(120)는 스타일러스로부터의 터치 입력 데이터를 수신하도록 구성될 수 있다. 힘 입력, 제스처 입력 및 위치 입력은 또한 스타일러스의 사용과 함께 포함될 수 있다. 따라서, 손가락 이용 입력에 관한 설명은 사용자가 스타일러스를 이용하여 터치 입력 데이터를 입력하는 경우에도 적용될 수 있다. 터치 입력은 입력 포맷의 타입의 임의의 조합일 수 있음에 주의해야 한다. 예를 들어, 사용자는 손가락(들), 스타일러스, 손바닥 또는 그 임의의 조합을 이용하여 터치 입력할 수 있다.

전자 장치(100)는 제스처 라이브러리로 사전에 프로그래밍되거나 및/또는 수동으로 프로그래밍될 수 있다. 즉, 제스처 라이브러리는 미리 정의된 터치 입력을 포함하는 등 관리자(예를 들어, 소프트웨어 라이브러리 개발자)에 의한, 또는 전자 장치(100)의 사용자에 의한 정의된 터치 입력 또는 그 조합을 포함하지만 사용자에 의해 정의될 변경 또는 추가의 터치 입력을 허용할 수 있다.

도 2는 임의의 예시적인 실시예에 따른 터치 입력에 대한 제스처 라이브러리(200)를 나타낸다. 상술한 바와 같이, 제스처 라이브러리(200)는 터치 입력 데이터로부터의 명령을 정의하는데 사용되는 몇 개의 컴포넌트를 포함한다. 초기 결정은 손가락 사용 입력일 수 있다. 제스처 라이브러리(200)에 도시된 바와 같이, 손가락 사용 입력은 단일 손가락 터치 입력 또는 2개 손가락 터치 입력 중에 있을 수 있다. 후속의 결정은 힘 입력일 수 있다. 힘 입력은 낮은 압력 터치 입력 또는 높은 압력 터치 입력 중에 있을 수 있다. 추가의 결정은 제스처 입력일 수 있다. 제스처 입력은 좌에서 우로의 움직임, 우에서 좌로의 움직임, 및 전후 움직임 중에 있을 수 있다. 손가락 사용 입력, 힘 입력, 및 제스처 입력을 결정함으로써, 제스처 라이브러리(200)는 수행될 명령 또는 동작을 정의한다. 따라서, 도시된 바와 같이, 손가락 사용 입력이 단일 손가락 터치 입력이고, 힘 입력이 낮은 압력 터치 입력이고, 제스처 입력이 좌에서 우로의 움직임일 때, 제스처 라이브러리(200)는 애플리케이션 1이 실행중이면 명령이 동작 1A이고 애플리케이션 N이 실행되면 동작 NA임을 지시한다. 다른 예에서, 손가락 사용 입력이 2개 손가락 터치 입력이고, 힘 입력이 높은 압력 터치 입력이고, 제스처 입력이 전후 움직임일 때, 제스처 라이브러리(200)는 애플리케이션 1이 실행중이면 명령이 동작 1L이고 애플리케이션 N이 실행중이면 동작 NL임을 지시한다.

손가락 사용 입력이 단일 손가락 및 2개 손가락 터치 입력 중에 있다는 것은 단지 예시적인 것임에 주의해야 한다. 제스처 라이브러리(200)는 추가의 타입의 손가락 사용 입력을 포함하도록 손가락 사용 입력을 추가로 정의할 수 있음을 당업자는 이해할 것이다. 예를 들어, 상술한 바와 같이, 손가락 사용 입력은 스타일러스를 이용하는 것과 관련될 수 있다. I/O 장치(120)는 터치 입력의 입도를 결정하도록 구성될 수 있다. 그러므로, 단일 손가락이 사용되면, 실질적으로 원형인 입도의 소정의 영역이 단일 손가락 터치 입력이 사용되는 경우를 지시할 수 있다. 하나보다 많은 손가락이 사용되면, 동시에 존재하는 입도의 소정의 영역이 다중 손가락 터치 입력이 사용되는 경우를 지시할 수 있다. 예를 들어, 2개 손가락이 함께 있을 때 실질적으로 8자 형상을 갖는 길죽한 계란형 입도는 2개 손가락 터치 입력이 사용되는 경우를 나타낼 수 있다. 다른 예에서, 입도의 2개의 개별 영역이 검출되면, 2개 손가락 터치 입력이 결정될 수 있다. 다른 예에서, 입도의 3개의 영역이 검출되면, 3개 손가락 터치 입력이 결정될 수 있다. 스타일러스가 사용되면, 실질적으로 원형이고 단일 손가락 터치 입력의 입도의 범위보다 실질적으로 작은 입도의 소정의 영역은 스타일러스가 이용되는 경우를 지시할 수 있다. 스타일러스의 포인트가 작은 접촉 영역을 갖고 스타일러스를 이용할 때 존재하는 입도의 해당 범위가 또한 작을 수 있다는 것을 당업자는 이해할 것이다. 다른 예에서, 제1 영역이 손가락에 대응하고 제2 영역이 스타일러스에 대응하는 입도의 2개의 개별 영역이 검출되면, 손가락 및 스타일러스에 의한 조합 터치 입력이 결정될 수 있다.

힘 입력이 낮은 압력 또는 높은 압력이라는 것은 단지 예시적인 것임에 주의해야 한다. 제스처 라이브러리(200)는 추가의 타입의 힘 입력을 포함하도록 힘 입력을 추가로 정의할 수 있음을 당업자는 이해할 것이다. 예를 들어, 낮은 압력으로, 낮은 압력을 갖는 단일 손가락 터치 입력의 입도 카운트는 높은 압력을 갖는 단일 손가락 터치 입력보다 실질적으로 작은 범위를 가질 수 있다. 즉, 단일 손가락을 I/O 장치(120) 상에서 더 세게 밀면, 손가락과 I/O 장치(120) 사이의 접촉 영역을 증가시키도록 손가락을 누를 수 있다. 상이한 타입의 힘 입력의 다른 예에서, I/O 장치(120)는 또한 낮은 압력 입력보다 작거나, 높은 압력 입력보다 클 수 있는 힘 입력, 또는 낮은 압력 입력과 높은 압력 입력 사이의 임의의 타입의 힘 입력을 결정하도록 구성될 수 있다. 따라서, 본 발명의 제1 예시적인 실시예에서, 힘 입력의 압력은 손가락과 I/O 장치(120) 사이의 입도 카운트 또는 접촉 영역의 함수로서 결정될 수 있다. 그러므로, 낮은 압력은 높은 압력에 대한 접촉 영역의 제3 범위보다 낮은 중간 압력에 대한 접촉 영역의 제2 범위보다 작은 접촉 영역의 제1 범위를 가질 수 있다.

동일한 압력을 갖는 다중 손가락 터치 입력에 대한 결합된 손가락 사용 입력 및 힘 입력은 단지 예시적인 것임에 추가적으로 주의해야 한다. 본 발명의 예시적인 실시예는 또한 상이한 손가락이 상이한 압력을 제공하는 다중 손가락 터치 입력을 갖는 터치 입력을 수신하도록 구성될 수 있다. 예를 들어, 2개 손가락 터치 입력에서, 하나의 손가락은 낮은 압력을 가할 수 있고 다른 손가락은 높은 압력을 가할 수 있다. 이 방식으로, 제스처 라이브러리(200)는 상이한 압력이 수신되면서 다수의 손가락이 사용될 수 있는 다중 모드 방식으로 사용중인 애플리케이션에 대하여 수행될 명령을 정의하도록 구성될 수 있다.

제스처 입력이 좌에서 우로의 움직임, 우에서 좌로의 움직임 및 전후 움직임이라는 것은 단지 예시적이라는 것에 주의해야 한다. 제스처 라이브러리(200)는 복수의 상이한 타입의 제스처 입력을 추가로 정의할 수 있음을 당업자는 이해할 것이다. 특히, 터치 입력의 임의의 움직임이 제스처 라이브러리(200)로 정의될 수 있다. 예를 들어, 애플리케이션 1은 낮은 압력을 갖는 단일 손가락 터치 입력 및 미리 정의된 제스처 입력이 캐럿(caret) 움직임(즉, 비스듬한 상향 움직임 후 비스듬한 하향 움직임) 등의 특정 문자 또는 숫자 및 대문자 "A"에 대한 것일 수 있도록 숫자 문자 입력을 수신할 수 있다. 다른 예에서, 제스처 라이브러리(200)는 특히 다중 손가락 터치 입력이 수신될 때 상이한 형태의 제스처 입력을 포함할 수 있다. 예를 들어, 2개 손가락 터치 입력에서, 2개 손가락은 초기에 함께 배치될 수 있고, 손가락의 분리는 한 타입의 제스처 입력일 수 있다. 다른 예에서, 2개 손가락 터치 입력에서, 다른 타입의 제스처 입력을 위해 2개 손가락이 처음에 분리되고 그 후 한데 모일 수 있다. 다른 예에서, 제스처 라이브러리(200)는 상대적인 상부 우측 배치로부터 상대적인 하부 좌측 배치, 또는 그 반대의 대각선 움직임 등을 포함할 수 있다.

제스처 라이브러리(200)는 전자 장치(100) 상에 설치된 추가의 애플리케이션이 그 안에 포함될 수 있도록 구성될 수 있음을 당업자는 이해할 것이다. 제스처 라이브러리(200)에 도시된 바와 같이, 각각의 애플리케이션이 손가락 사용 입력, 힘 입력 및 제스처 입력의 함수로서 실행될 미리 정의된 명령 세트를 갖는, N개의 상이한 애플리케이션이 존재할 수 있다. 추가의 애플리케이션(예를 들어, N+1)이 전자 장치 상에 설치되면, 제스처 라이브러리(200)는 N+1 애플리케이션에 대하여 터치 입력이 수신될 때 실행될 명령을 저장하도록 업데이트될 수 있다. 제스처 라이브러리(200)에 이미 저장된 애플리케이션에 대하여 추가의 터치 입력이 추가되거나 제거될 수 있다. 예를 들어, 애플리케이션 1에 대한 전후 움직임으로 높은 압력을 갖는 단일 손가락 터치 입력이 제거될 수 있다. 따라서, 동작 1F가 제거될 수 있다. 다른 예에서, 애플리케이션 1에 대한 손가락 분리 움직임으로 낮은 압력을 갖는 2개 손가락 터치 입력이 추가될 수 있다. 따라서, 동작 1M(미도시)이 애플리케이션 1에 대한 제스처 라이브러리(200)에 추가될 수 있다. 소프트웨어 애플리케이션 모듈이 제스처 라이브러리(200)에 대하여 실행될 수 있다. 소프트웨어 애플리케이션 모듈은 사용자가 명령을 정의하는데 이용가능한 손가락 사용 입력, 힘 입력 및 제스처 입력의 리스트(즉, 라이브러리)를 포함할 수 있다. 예를 들어, 사용자는 손가락 사용 입력, 힘 입력 및 제스처 입력에 의한 새로운 명령을 정의하거나 추가의 손가락 사용 입력, 추가의 힘 입력 및 추가의 제스처 입력으로 실행될 기존 명령을 정의할 수 있다.

손가락 사용 입력, 힘 입력 및 제스처 입력만을 이용하여 명령을 결정하는 것에 대한 제스처 라이브러리(200)는 단지 예시적인 것임에 주의해야 한다. 상술한 바와 같이, 본 발명의 예시적인 실시예는 사용중인 애플리케이션이 터치 입력의 컴포넌트 중의 하나 또는 2개만을 필요로 할때 모든 3개의 입력을 요구하지 않을 수 있거나 수행될 명령을 결정하는 데 위치 입력을 추가로 요구할 수 있다. 따라서, 제스처 라이브러리(200)는 손가락 사용 입력, 힘 입력, 제스처 입력, 위치 입력 및 그 조합의 함수로서 애플리케이션에 대하여 수행될 명령을 추가로 정의할 수 있다.

본 발명의 예시적인 실시예 및 상기 설명으로부터 명백한 바와 같이, 공통 제스처 입력은 상이한 명령과 연관될 수 있다. 특히, 동일한 제스처 입력은 힘 입력, 손가락 사용 입력 및 명령이 입력되는 애플리케이션의 임의의 조합에 기초하여 상이한 명령을 가질 수 있다. 따라서, 다중 모드(multi-modal) 동작이 달성될 수 있다. 특정 예에서, 터치 입력 데이터는 워드 프로세싱 문서(즉, 사용중인 애플리케이션 입력)를 편집하면서 접촉을 끊지 않고 우에서 좌로(즉, 제스처 입력) I/O 장치(120) 상에 가벼운 압력(light pressure)(즉, 힘 입력)으로 단일 손가락 터치 입력(즉, 손가락 사용 입력)을 움직이는 것일 수 있다. 이 터치 입력 데이터는 줄 또는 단락 상의 취소선(strike through)을 나타낼 수 있다. 동일한 터치 입력 데이터가 미디어 플레이어 상에서 수신되면(즉, 사용중인 애플리케이션 입력), 터치 입력 데이터는 되감기(rewind) 기능을 나타낼 수 있다.

본 발명의 예시적인 실시예는 제스처 라이브러리(200)를 개발자의 환경으로 결부시키도록 구성될 수 있음에 주의해야 한다. 즉, 디스플레이(115) 상에 도시된 영역 또는 오브젝트가 힘 입력 등의 터치 입력의 파라미터 중의 하나와 연관될 수 있다. 따라서, 사용중인 애플리케이션은 상이한 명령에 매핑될 수 있는 상이한 타입의 터치 입력을 수신할 수 있는 디스플레이(115) 상의 소정의 영역을 정의할 수 있다. 예를 들어, 디스플레이(115) 상의 영역이 사분면으로 분리되면, 상부 좌측 영역은 제1 명령에 대응하는 터치 입력을 수신하고 상부 우측 영역은 제2 명령에 대응하는 터치 입력을 수신할 수 있다. 그러나, 본 발명의 예시적인 실시예에 따르면, 상부 좌측 영역 및 상부 우측 영역 상에서 수신된 터치 입력은 공통 손가락 사용 입력, 공통 힘 입력 및 공통 제스처 입력 등의 동일한 파라미터를 포함할 수 있다. 그러나, 제스처 라이브러리(200)는 사분면의 함수로서 수행될 명령을 정의할 수 있다. 이 정의는 위치 입력의 서브세트일 수 있음에 주의해야 한다. 이 방식으로, 다중 모드 입력의 추가의 방식이 달성될 수 있다. 디스플레이(115)는 또한 명령을 활성화하는 터치 입력의 파라미터를 표시함으로써 특정 명령에 대한 사용자의 적절한 터치 입력을 돕도록 구성될 수 있다. 예를 들어, 아이콘이 명령에 대한 특정 파라미터와 함께 디스플레이(115) 상에 나타날 수 있다.

도 3은 임의의 실시예에 따라 사용중인 애플리케이션에 대한 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력을 포함하는 터치 입력 데이터의 함수로서 명령을 결정하는 방법(300)의 플로우챠트이다. 방법(300)은 도 1의 I/O 장치(120) 상의 터치 입력 데이터의 수신 및 특히 I/O 장치(120)가 디스플레이 장치(115)와 통합되는 경우에 관한 것이다. 방법(300)은 또한 손가락 터치 입력, 스타일러스 터치 입력, 손바닥 터치 입력 및 그 조합을 포함하는 손가락 사용 입력; 터치 입력에 따라 낮은 압력, 중간 압력, 높은 압력 및 그 조합을 포함하는 힘 입력; I/O 장치(120) 상의 시간 경과에 따라 수행되는 임의의 타입의 제스처를 포함하는 제스처 입력; 및 I/O 장치(120) 상의 임의의 위치를 포함하는 위치 입력의 함수로서 수행될 명령을 정의하는 도 2의 제스처 라이브러리(200) 등의 제스처 라이브러리에 관한 것이다.

단계(305)에서, 프로세서(105)는 사용중인 애플리케이션을 결정한다. 상술한 바와 같이, 실행될 명령은 사용중인 애플리케이션 및 터치 입력 데이터에 기초하여 특정될 수 있다. 따라서, 프로세서(105)는 초기에 이 결정을 수행할 수 있다. 본 발명의 바람직한 예시적인 실시예에서, 사용중인 애플리케이션은 먼저 제스처 라이브러리 상의 명령의 매핑을 간략화하도록 결정될 수 있다. 그러나, 단계(305)는 후술하는 바와 같이 터치 입력 데이터를 수신하고 결정한 후에 방법(300)의 끝에서 수행될 수 있음에 주의해야 한다. 이 방식으로, 터치 입력 데이터의 매핑은 사용중인 애플리케이션으로의 추가의 매핑 전에 발생할 수 있다. 단계(310)에서, 터치 입력 데이터가 I/O 장치(120) 상에서 수신된다.

단계(315)에서, 프로세서(105)는 손가락 사용 입력이 결정되어야 하는지를 결정할 수 있다. 예를 들어, 사용중인 애플리케이션은 손가락 사용 입력이 제스처 라이브러리에서 사용되는지 사용되지 않는지를 나타낼 수 있다. 손가락 사용 입력이 결정되어야 한다면, 방법(300)은 단계(320)로 계속된다. 단계(320)에서, 터치 입력 데이터에 사용되는 다수의 손가락이 결정되어 각각의 손가락 사용 입력에 대한 동작이 결정될 수 있다. 특히, 프로세서(105)는 터치 입력 데이터와 연관된 손가락 사용 입력을 결정한다. 상술한 바와 같이, I/O 장치(120)는 단일 손가락 터치 입력, 다중 손가락 터치 입력, 스타일러스, 손바닥, 그 조합 등으로 수행될 수 있는 터치 입력 데이터를 수신하도록 구성될 수 있다. 그러므로, 프로세서(105)는 손가락 사용 입력이 "한 손가락" 터치 입력, "2개 손가락" 터치 입력 등인지를 결정할 수 있다. 예를 들어, 손가락 사용 입력이 한 손가락 터치 입력이 사용되는 것을 나타내면, 사용중인 애플리케이션 및 한 손가락 터치 입력과 연관된 명령이 결정될 수 있다. 다른 예에서, 손가락 사용 입력이 2개 손가락 터치 입력이 사용되는 것을 나타내면, 사용중인 애플리케이션 및 2개 손가락 터치 입력과 연관된 명령이 결정될 수 있다. 따라서, 제스처 라이브러리(200) 상의 초기의 매핑이 수행될 수 있다. 손가락 사용 입력이 결정되지 않으면(단계 315) 또는 각각의 손가락 사용 입력에 대한 동작이 결정된 후(단계 320), 방법(300)은 단계(325)로 계속된다.

단계(325)에서, 프로세서(105)는 압력 입력이 결정되어야 하는지를 결정한다. 손가락 사용 입력과 실질적으로 유사하게, 사용중인 애플리케이션은 압력 입력이 제스처 라이브러리에서 사용되거나 사용되지 않는 것을 나타낼 수 있다. 압력 입력이 결정되어야 한다면, 방법(300)은 단계(330)로 계속된다. 단계(330)에서, 터치 입력 데이터의 압력량이 결정되어 각각의 압력 입력에 대한 동작이 결정된다. 특히, 프로세서(105)는 터치 입력 데이터와 연관된 힘 입력을 결정한다. 상술한 바와 같이, I/O 장치(120)는 힘 입력의 압력 타입을 결정하는 힘 센서를 포함하도록 구성될 수 있다. 그러므로, 프로세서(105)는 예를 들어 힘 입력이 낮은 또는 높은 압력 입력인지를 결정한다. 예를 들어, 힘 입력이 낮은 압력이 사용된다는 것을 나타내면, 사용중인 애플리케이션 및 낮은 압력 입력과 연관된 명령이 결정된다. 다른 예에서, 힘 입력이 높은 압력이 사용됨을 나타내면, 사용중인 애플리케이션 및 압력 입력과 연관된 명령이 결정된다. 또한, 단계(320)에서 손가락 사용 입력이 결정되면, 사용중인 애플리케이션, 손가락 사용 입력 및 압력 입력의 함수로서 명령의 매핑이 추가로 결정될 수 있다. 따라서, 제스처 라이브러리(200) 상의 추가의 매핑이 수행될 수 있다. 압력 입력이 결정되지 않으면(단계 325) 또는 각각의 압력 입력에 대한 동작이 결정된 후(단계 330), 방법(300)은 단계(335)로 계속된다.

단계(335)에서, 프로세서(105)는 위치 입력이 결정되어야 하는지를 결정한다. 손가락 사용 입력과 실질적으로 유사하게, 사용중인 애플리케이션은 제스처 라이브러리에 위치 입력이 사용되는지 또는 사용되지 않는지를 나타낼 수 있다. 위치 입력이 결정되어야 한다면, 방법(300)은 단계(340)로 계속된다. 단계(340)에서, 터치 입력이 수신되는 I/O 장치(120) 상의 위치가 결정되어 각각의 위치 입력에 대한 동작이 결정된다. 특히, 프로세서(105)는 터치 입력 데이터와 연관된 위치 입력을 결정한다. 상술한 바와 같이, I/O 장치(120)는 I/O 장치(120)의 표면 상의 어느 곳에서나, I/O 장치(120)의 소정의 영역에서, 등등 터치 입력 데이터를 수신하도록 구성될 수 있다. 그러므로, 프로세서(105)는 예를 들어 위치 입력이 I/O 장치(120)의 상부 영역, I/O 장치(120)의 하부 영역, I/O 장치(120)의 좌측 영역, I/O 장치(120)의 우측 영역, I/O 장치(120)의 중간 영역 등에 있는지를 결정한다. 예를 들어, 위치 입력이 I/O 장치(120)이 상부 영역이 사용되는 것을 지시하면, 사용중인 애플리케이션 및 상부 영역에서의 위치 입력과 연관된 명령이 결정된다. 다른 예에서, 위치 입력이 I/O 장치(120)의 하부 영역이 사용되는 것을 나타나면, 사용중인 애플리케이션 및 하부 영역에서의 위치 입력과 연관된 명령이 결정된다. 또한, 손가락 사용 입력, 압력 입력, 또는 양자가 단계 320/330에서 결정되면, 사용중인 애플리케이션, 손가락 사용 입력/압력 입력 및 위치 입력의 함수로서 명령의 매핑이 추가로 결정될 수 있다. 따라서, 제스처 라이브러리(200) 상의 추가의 매핑이 수행될 수 있다. 위치 입력이 결정되지 않으면(단계 335) 또는 각각의 위치 입력에 대한 동작이 결정된 후(단계 340), 방법(300)은 단계(345)로 계속된다.

단계(345)에서, 프로세서(105)는 제스처 입력이 결정되어야 하는지를 결정한다. 손가락 사용 입력과 실질적으로 유사하게, 사용중인 애플리케이션은 제스처 라이브러리에서 제스처 입력이 사용되거나 사용되지 않는지를 지시할 수 있다. 제스처 입력이 사용되어야 한다면, 방법(300)은 단계(350)로 계속된다. 단계(350)에서, 터치 입력 데이터의 제스처가 결정된다. 특히, 프로세서(105)는 터치 입력 데이터와 연관된 제스처 입력을 결정한다. 상술한 바와 같이, I/O 장치(120)는 초기 배치로부터 최종 배치로의 터치 입력 데이터의 시간 경과에 따른 위치 변화를 결정하여 제스처 데이터가 소정 타입의 움직임(예를 들어, 좌에서 우로의 움직임, 우에서 좌로의 움직임, 전후 움직임, 대각선 움직임 등)인지를 결정하도록 구성될 수 있다. 예를 들어, 제스처 입력이 좌에서 우로의 움직임이 사용되는 것을 나타내면, 사용중인 애플리케이션 및 좌에서 우로의 제스처 입력과 연관된 명령이 결정된다. 다른 예에서, 제스처 입력이 대각선 움직임이 사용되는 것을 나타내면, 사용중인 애플리케이션 및 대각선 제스처 입력과 연관된 명령이 결정된다. 또한, 손가락 사용 입력, 압력 입력, 위치 입력 또는 그 임의의 조합이 단계 320/330/340에서 결정되면, 사용중인 애플리케이션, 손가락 사용 입력/압력 입력/위치 입력 및 제스처 입력의 함수로서 명령의 매핑이 추가로 매핑될 수 있다. 따라서, 제스처 라이브러리(200) 상의 추가의 매핑이 수행될 수 있다. 제스처 입력이 결정되면(단계 345) 또는 각각의 제스처 입력에 대한 동작이 결정되면(단계 350), 방법(300)은 단계(355)로 계속된다.

단계(355)에서, 상술한 결정으로부터, 수행될 명령이 제스처 라이브러리 상의 동작의 매핑으로부터 결정될 수 있다. 따라서, 단계(360)에서, 매핑된 동작이 수행될 수 있다.

방법(300)은 단지 예시적인 것이라는 것에 주의해야 한다. 결정 및 명령을 결정하기 위한 매핑의 순서는 다양한 상이한 시퀀스를 이용하여 수행될 수 있다. 상술한 바와 같이, 상이한 시퀀스는 터치 입력 데이터가 제스처 라이브러리(200) 상에 매핑된 후에 최종 단계로서 수행될 사용중인 애플리케이션의 결정을 수반할 수 있다. 다른 예에서, 힘 입력 또는 제스처 입력이 초기에 결정될 수 있다. 따라서, 손가락 사용 입력, 힘 입력, 제스처 입력 및 사용중인 애플리케이션이 결정되는 시퀀스에 관계없이, 명령이 상술한 입력의 조건을 만족하고 사용중인 애플리케이션에 대응하는 명령을 결정하기 위한 제스처 라이브러리(200)로의 매핑이 수행될 수 있다.

방법(300)에 도시된 바와 같이, 수행될 명령을 결정하는데 터치 입력의 임의의 수의 파라미터가 사용될 수 있다. 즉, 사용중인 애플리케이션 파라미터를 이용하여, 수행될 명령을 결정하는데 터치 입력의 임의의 수의 팩터가 사용될 수 있다. 예를 들어, 터치 입력은 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력을 포함할 수 있다. 터치 입력의 이들 팩터 중의 적어도 하나는 수행될 명령을 지시할 수 있다. 따라서, 주어진 사용중인 애플리케이션으로, 명령을 결정하기 위하여 단지 손가락 사용 입력 및 힘 입력이 요구되거나 사용될 수 있다. 다른 예에서, 터치 입력의 4개의 모든 형태가 사용될 수 있고, 4개의 형태 중 3개가 사용될 수 있고, 등등이다. 따라서, 단계 315, 325, 335, 345 중의 적어도 하나가 터치 입력의 특정 입력 파라미터를 이용하는 긍정적 결정을 포함할 수 있다.

본 발명의 예시적인 실시예는 공통 제스처가 다양한 명령에 사용되도록 하는 다중 모드 수단을 제공한다. 전자 장치는 손가락 사용 입력, 힘 입력, 제스처 입력 및 위치 입력 중의 적어도 하나를 포함하는 터치 입력 데이터를 수신하도록 구성될 수 있다. 단일 입력 또는 이들 입력의 조합의 함수로서 그리고 사용중인 애플리케이션에 대해, 제스처 라이브러리 상에 매핑된 소정의 명령이 실행될 수 있다. 손가락 사용 입력은 터치 입력 데이터가 입력되는 방식과 관련될 수 있다. 따라서, 손가락 사용 입력은 단일 손가락 터치 입력, 2개 손가락 터치 입력, 스타일러스 입력, 손바닥 입력, 그 조합 등일 수 있다. 힘 입력은 터치 입력 데이터가 입력될 때 가해지는 압력에 관련될 수 있다. 따라서, 힘 입력은 낮은 압력, 중간 압력 또는 높은 압력일 수 있다. 제스처 입력은 소정 기간에 걸친 I/O 장치 상의 초기 배치로부터 최종 배치까지의 움직임과 관련될 수 있다. 따라서, 제스처 입력은 좌에서 우로의 움직임, 우에서 좌로의 움직임, 다중 손가락 터치 입력에 대한 분리 움직임, 다중 손가락 터치 입력에 대한 모이는(closing) 움직임, 호(arc) 타입 움직임, 각이 있는(angled) 움직임, 대각선 움직임, 임의의 그 조합 등일 수 있다. 위치 입력은 터치 입력이 수신되는 I/O 장치 상의 위치와 관련될 수 있다. 따라서, 위치 입력은 I/O 장치의 상부 영역, 하부 영역, 우측 영역, 좌측 영역 등에 있을 수 있다. 터치 입력 데이터에 대한 상기 타입의 입력의 임의의 조합 및 사용중인 각 애플리케이션에 대한 이들 조합의 매핑을 이용하여, 특정 명령이 수행될 수 있다.

상술한 명세서에서, 특정 실시예가 기재되었다. 그러나, 당업자는 청구범위에 기재된 바와 같은 본 발명의 범위를 벗어나지 않고 다양한 변형과 변경이 가능함을 인식할 것이다. 따라서, 명세서 및 도면은 제한적 의미보다는 설명하기 위한 것이며, 이러한 모든 변경은 본 사상의 범위 내에 포함되는 것으로 의도된다.

이득, 이점, 문제점에 대한 솔루션 및 임의의 이득, 이점 또는 솔루션을 야기할 수 있는 임의의 요소(들)는 임의의 또는 모든 청구범위의 중요하거나, 필요하거나 필수적인 특징으로 해석되지 않는다. 본 발명은 본 출원의 미결시에 수행되는 임의의 보정서를 포함하는 청구범위 및 청구범위의 모든 동등물에 의해 정의된다.

또한, 본 문서에서, 첫번째 및 두번째, 상부 및 하부 등의 상대적 용어는 이러한 엔티티 또는 동작 간의 관계 또는 순서 등을 반드시 필요로 하거나 암시하지 않고 다른 엔티티 또는 동작으로부터 하나의 엔티티 또는 동작을 구별하기 위하여 사용될 수 있다. "구비하다", "구비하는", "갖다", "갖는", "포함하다", "포함하는", "함유하다", "함유하는" 또는 임의의 다른 변형은 배타적이지 않은 포함을 커버하는 것으로 의도되어, 요소의 리스트를 구비하거나, 갖거나, 포함하거나, 함유하는 프로세스, 방법, 물품 또는 장치는 그 요소만을 갖는 것이 아니라 명확히 열거되지 않은 또는 이러한 프로세스, 방법, 물품 또는 장치에 내재적인 다른 요소를 포함할 수 있다. "~을 구비하다", "~을 갖는다", "~을 포함하다", "~을 함유하다"에 선행하는 요소는 더 많은 제한 없이 그 요소를 구비하거나, 갖거나, 포함하거나 함유하는 프로세스, 방법, 물품 또는 장치 내의 추가의 동일한 요소의 존재를 배제하지 않는다. "a" 및 "an" 등의 용어는 다르게 명확히 기재되지 않으면 하나 이상으로서 정의된다. 용어 "실질적으로", "필수적으로", "대략", "약", 또는 그 임의의 다른 버전은 당업자에 의해 이해되는 바와 같이 근접한 것으로 정의되며, 하나의 비제한 실시예에서, 그 용어는 10% 이내, 또 다른 실시예에서, 5% 이내, 또 다른 실시예에서 1% 이내, 또 다른 실시예에서 0.5% 내로 정의될 수 있다. 여기에 지개된 용어 "결합된"은 반드시 직접적이지 않고 반드시 기계적이지 않지만, 접속된 것으로 정의된다. 소정의 방법으로 "구성"된 장치 또는 구조물은 적어도 그 방법으로 구성되지만, 열거되지 않은 방법으로 구성될 수 있다.

임의의 실시예는, 마이크로프로세서, 디지털 신호 프로세서, 맞춤형 프로세서 및 필드 프로그래머블 게이트 어레이(FPGA) 등의 하나 이상의 일반 또는 특수 프로세서(또는 "프로세싱 장치")와, 그 하나 이상의 프로세서가 소정의 넌-프로세서 회로와 결합하여 여기에 기재된 방법의 기능의 일부, 대부분 또는 전부를 구현하도록 제어하는 고유 저장 프로그램 명령(소프트웨어 및 펌웨어를 모두 포함)으로 구성될 수 있다는 것을 알 것이다. 대안으로, 일부 또는 모든 기능은 각각의 기능 또는 기능의 소정의 임의의 조합이 주문 제작된 로직으로서 구현되는 하나 이상의 ASIC(application specific integrated circuit)으로, 또는 프로그램 명령을 저장하지 않은 상태 머신에 의해 구현될 수 있다. 물론, 이들 2개의 어프로치의 조합이 사용될 수 있다.

또한, 실시예는 여기에 기재된 방법을 수행하도록 컴퓨터(예를 들어, 프로세서를 포함)를 프로그래밍하기 위하여 저장된 컴퓨터 판독가능 코드를 갖는 컴퓨터 판독가능 저장 매체로서 구현될 수 있다. 이러한 컴퓨터 판독가능 저장 매체의 예는, 제한되지 않지만, 하드 디스크, CD-ROM, 광 저장 장치, 자기 저장 장치, ROM(Read Only Memory), PROM(Programmable Read Only Memory), EPROM(Erasable Programmable Read Only Memory), EEPROM(Electrically Erasable Programmable Read Only Memory), 및 플래시 메모리를 포함한다. 또한, 통상의 기술자는, 예를 들어 이용가능한 시간, 현재 기술 및 경제적 고려사항에 의해 유발되는 아마도 상당한 노력 및 많은 설계 선택에도 불구하고, 여기에 개시된 개념 및 원리에 의해 가이드될 때, 최소의 실험으로 이러한 소프트웨어 명령 및 프로그램 및 IC를 생성할 수 있을 것이다.

개시물의 요약은 독자가 기술적 개시물의 특성을 빨리 확인할 수 있도록 제공된다. 이는 청구범위의 범위 또는 의미를 해석하거나 제한하는데 사용되지 않는다. 또한, 상술한 상세한 설명에서, 개시물을 간소화할 목적으로 다양한 실시예에서 다양한 특징이 함께 그룹화된 것을 알 수 있다. 본 개시물의 방법은 청구된 실시예가 각 청구항에서 기재된 것보다 더 많은 특징을 필요로 하는 의도를 반영하는 것으로 해석되지 않는다. 오히려, 다음의 청구범위가 반영하는 바와 같이, 본 발명의 대상은 단일 개시 실시예의 모든 특징보다 적다. 따라서, 다음의 청구범위는 이로써 상세한 설명에 포함되며, 각각의 청구항은 개별 청구된 대상으로서 독립적이다.

Claims

사용중인 애플리케이션 데이터를 결정하는 단계(305) - 상기 사용중인 애플리케이션 데이터는 전자 장치(100) 상에서 프로세서(105)에 의해 실행되고 있는 애플리케이션을 나타냄 -,
상기 전자 장치(100)의 터치 감지 입력 장치(120)에 의해, 손가락 사용 입력 데이터, 힘 입력 데이터, 제스처 입력 데이터, 및 위치 입력 데이터를 포함하는 복수의 터치 입력 데이터를 수신하는 단계(310) - 상기 손가락 사용 입력 데이터는 상기 터치 입력 데이터가 입력되는 방식을 나타내고, 상기 힘 입력 데이터는 상기 터치 입력 데이터가 입력되는 과정에서 가해지는 압력을 나타내고, 상기 제스처 입력 데이터는 시간 경과에 따른 상기 터치 입력 데이터에 포함되는 움직임을 나타내고, 상기 위치 입력 데이터는 상기 터치 입력이 수신되는 상기 터치 감지 입력 장치(120) 상의 위치를 나타냄 -, 및
상기 사용중인 애플리케이션 데이터 및 상기 복수의 터치 입력 데이터의 함수로서 실행될 명령을 결정하는 단계
를 포함하고,
상기 명령을 결정하는 단계는,
상기 복수의 터치 입력 데이터 중의 하나의 하나 이상의 명령을 식별하는 단계 - 상기 하나 이상의 명령은 상기 사용중인 애플리케이션 데이터 및 이전에 결정된 하나 이상의 명령에 대한 조합들의 서브세트를 포함함 -, 및
상기 복수의 터치 입력 데이터의 각각에 대한 식별 동작을 순차적으로 반복하는 단계
를 포함하는 방법.
제1항에 있어서,
상기 손가락 사용 입력 데이터의 방식은 한 손가락 터치 입력, 다중 손가락 터치 입력, 스타일러스 입력, 손바닥 입력, 및 그 조합 중의 하나인, 방법.
제1항에 있어서,
상기 힘 입력 데이터의 압력은 낮은 압력, 중간 압력, 및 높은 압력 중의 하나이고, 상기 낮은 압력은 접촉 영역의 제1 범위를 갖고, 상기 중간 압력은 상기 제1 범위보다 큰 접촉 영역의 제2 범위를 갖고, 상기 높은 압력은 상기 제2 범위보다 큰 접촉 영역의 제3 범위를 갖는, 방법.
제1항에 있어서,
상기 제스처 입력 데이터의 움직임은 좌에서 우로의 움직임, 우에서 좌로의 움직임, 전후 움직임, 호(arc) 타입 움직임, 각이 있는(angled) 타입 움직임, 대각선 움직임, 및 그 조합 중의 하나인, 방법.
제1항에 있어서,
상기 사용중인 애플리케이션 데이터에 적용가능한 상기 손가락 사용 입력 데이터, 상기 힘 입력 데이터, 상기 제스처 입력 데이터, 및 상기 위치 입력 데이터의 각 조합이 제스처 라이브러리에 저장되는, 방법.
제5항에 있어서,
상기 명령을 결정하는 단계는,
상기 손가락 사용 입력 데이터와 연관된 복수의 제1 명령을 결정하는 단계(320) - 상기 제1 명령은 상기 사용중인 애플리케이션 데이터에 대한 상기 조합들의 서브세트임 -,
상기 힘 입력 데이터와 연관된 복수의 제2 명령을 결정하는 단계(330) - 상기 제2 명령은 상기 제1 명령의 서브세트임 -,
상기 위치 입력 데이터와 연관된 복수의 제3 명령을 결정하는 단계(340) - 상기 제3 명령은 상기 제2 명령의 서브세트임 -, 및
상기 제스처 입력 데이터와 연관된 명령을 결정하는 단계(350) - 상기 명령은 상기 제3 명령 중의 하나임 -
를 포함하는, 방법.
제1항에 있어서,
상기 터치 감지 입력 장치(120)는 상기 터치 입력 데이터와 연관된 복수의 입도(granularites)를 결정하도록 구성되는 힘 센서를 포함하는, 방법.
제7항에 있어서,
입도의 미리 정해진 범위가 상기 손가락 사용 입력 데이터의 함수로서 상기 힘 입력 데이터를 나타내는, 방법.
제1항에 있어서,
상기 사용중인 애플리케이션 데이터는 상기 터치 입력 데이터를 수신하는 상기 터치 감지 입력 장치(120) 상의 미리 정해진 영역을 정의하는, 방법.
애플리케이션을 실행하도록 구성되는 프로세서(105), 및
손가락 사용 입력 데이터, 힘 입력 데이터, 제스처 입력 데이터, 및 위치 입력 데이터를 포함하는 복수의 터치 입력 데이터를 수신하도록 구성되는 터치 감지 입력 장치(120) - 상기 손가락 사용 입력 데이터는 상기 터치 입력 데이터가 입력되는 방식을 나타내고, 상기 힘 입력 데이터는 상기 터치 입력 데이터가 입력되는 과정에서 가해지는 압력을 나타내고, 상기 제스처 입력 데이터는 시간 경과에 따른 상기 터치 입력 데이터에 포함되는 움직임을 나타내고, 상기 위치 입력 데이터는 상기 터치 입력이 수신되는 상기 터치 감지 입력 장치(120) 상의 위치를 나타냄 -
를 포함하고,
상기 프로세서(105)는 실행되고 있는 상기 애플리케이션의 함수로서 사용중인 애플리케이션 데이터를 결정하도록 구성되고,
상기 프로세서(105)는 상기 사용중인 애플리케이션 데이터 및 상기 복수의 터치 입력 데이터의 함수로서 실행될 명령을 결정하도록 구성되고,
상기 프로세서는,
상기 복수의 터치 입력 데이터 중의 하나의 하나 이상의 명령을 식별하고 - 상기 하나 이상의 명령은 상기 사용중인 애플리케이션 데이터 및 이전에 결정된 하나 이상의 명령에 대한 조합들의 서브세트를 포함함 -,
상기 복수의 터치 입력 데이터의 각각에 대한 식별 동작을 순차적으로 반복하도록
구성되는 장치(100).
제10항에 있어서,
상기 손가락 사용 입력 데이터의 방식은 한 손가락 터치 입력, 2개 손가락 터치 입력, 스타일러스 입력, 손바닥 입력, 및 그 조합 중의 하나인, 장치(100).
제10항에 있어서,
상기 힘 입력 데이터의 압력은 낮은 압력, 중간 압력, 및 높은 압력 중의 하나이고, 상기 낮은 압력은 접촉 영역의 제1 범위를 갖고, 상기 중간 압력은 상기 제1 범위보다 큰 접촉 영역의 제2 범위를 갖고, 상기 높은 압력은 상기 제2 범위보다 큰 접촉 영역의 제3 범위를 갖는, 장치(100).
제10항에 있어서,
상기 제스처 입력 데이터의 움직임은 좌에서 우로의 움직임, 우에서 좌로의 움직임, 전후 움직임, 호(arc) 타입 움직임, 각이 있는(angled) 타입 움직임, 대각선 움직임, 및 그 조합 중의 하나인, 장치(100).
제10항에 있어서,
상기 사용중인 애플리케이션 데이터에 적용가능한 상기 손가락 사용 입력 데이터, 상기 힘 입력 데이터, 상기 제스처 입력 데이터, 및 상기 위치 입력 데이터의 각 조합을 포함하는 제스처 라이브러리를 저장하는 메모리 장치(110)를 더 포함하는, 장치(100).
제14항에 있어서,
상기 프로세서(105)는,
상기 손가락 사용 입력 데이터와 연관된 복수의 제1 명령을 결정하고(320) - 상기 제1 명령은 상기 사용중인 애플리케이션 데이터에 대한 상기 조합들의 서브세트임 -,
상기 힘 입력 데이터와 연관된 복수의 제2 명령을 결정하고(330) - 상기 제2 명령은 상기 제1 명령의 서브세트임 -,
상기 위치 입력 데이터와 연관된 복수의 제3 명령을 결정하고(340) - 상기 제3 명령은 상기 제2 명령의 서브세트임 -,
상기 제스처 입력 데이터와 연관된 명령을 결정하도록 (350) - 상기 명령은 상기 제3 명령 중의 하나임 -
더 구성되는, 장치(100).
제10항에 있어서,
상기 터치 감지 입력 장치(120)는 상기 터치 입력 데이터와 연관된 복수의 입도(granularites)를 결정하도록 구성되는 힘 센서를 포함하는, 장치(100).
제16항에 있어서,
입도의 미리 정해진 범위가 상기 손가락 사용 입력 데이터의 함수로서 상기 힘 입력 데이터를 나타내는, 장치(100).
제1항에 있어서,
상기 사용중인 애플리케이션 데이터는 상기 터치 입력 데이터를 수신하는 상기 터치 감지 입력 장치상의 미리 정해진 영역을 정의하는, 장치(100).
제10항에 있어서,
상기 터치 감지 입력 장치(120)는 디스플레이 장치와 통합된 입출력(I/O) 장치, 상기 장치의 하우징 주변에 배치된 개별 I/O 장치, 및 상기 디스플레이 장치상에 배치된 투명 다중 터치 힘 센서 중의 하나인, 장치(100).
프로세서(105)에 의해 실행가능한 명령의 세트를 포함하는 컴퓨터 판독가능 저장 매체로서,
상기 명령의 세트는,
사용중인 애플리케이션 데이터를 결정하고(305) - 상기 사용중인 애플리케이션 데이터는 전자 장치(100) 상에서 프로세서(105)에 의해 실행되고 있는 애플리케이션을 나타냄 -,
상기 전자 장치(100)의 터치 감지 입력 장치(120)에 의해, 손가락 사용 입력 데이터, 힘 입력 데이터, 제스처 입력 데이터, 및 위치 입력 데이터를 포함하는 복수의 터치 입력 데이터를 수신하고(310) - 상기 손가락 사용 입력 데이터는 상기 터치 입력 데이터가 입력되는 방식을 나타내고, 상기 힘 입력 데이터는 상기 터치 입력 데이터가 입력되는 과정에서 가해지는 압력을 나타내고, 상기 제스처 입력 데이터는 시간 경과에 따른 상기 터치 입력 데이터에 포함되는 움직임을 나타내고, 상기 위치 입력 데이터는 상기 터치 입력이 수신되는 상기 터치 감지 입력 장치(120) 상의 위치를 나타냄 -,
상기 사용중인 애플리케이션 데이터 및 상기 복수의 터치 입력 데이터의 함수로서 실행될 명령을 결정하도록 동작하고,
상기 명령의 세트는,
상기 복수의 터치 입력 데이터 중의 하나의 하나 이상의 명령을 식별하고 - 상기 하나 이상의 명령은 상기 사용중인 애플리케이션 데이터 및 이전에 결정된 하나 이상의 명령에 대한 조합들의 서브세트를 포함함 -,
상기 복수의 터치 입력 데이터의 각각에 대한 식별 동작을 순차적으로 반복하도록 동작하는 컴퓨터 판독가능 저장 매체.