KR102074001B1

KR102074001B1 - 간접 터치 입력 장치를 위한 압력 기반 상호작용 기법

Info

Publication number: KR102074001B1
Application number: KR1020147010992A
Authority: KR
Inventors: 스코트 혼지; 마사히코 가네코; 사라 윌리엄스; 빈센트 볼; 폴 밀샙; 잔-크리스티안 마키윅즈
Original assignee: 마이크로소프트 테크놀로지 라이센싱, 엘엘씨
Priority date: 2011-10-25
Filing date: 2012-10-24
Publication date: 2020-02-05
Also published as: EP2771766A4; EP2771766B1; CN102902414A; EP2771766A1; US8933896B2; JP2014534525A; KR20140084066A; US20130100045A1; WO2013063154A1; CN102902414B

Abstract

간접 상호작용 입력 장치에서, z-정보는 장치를 위한 사용자 상호작용 모델을 정의하는 데에 고려될 수 있다. z-방향으로의 변위에 대한 어떠한 측정값이라도 이러한 정보가 입력 장치로부터 이용될 수 있는 것이면 사용될 수 있다. 압력 데이터가 상호작용의 상태를 정의하는 데 사용될 수 있는데, 여기서 이러한 상태 간의 전환(transitions)은 다양한 임계치에 의해 결정된다. 장치는 원(raw) 또는 표준화된(normalized) 데이터를 제공할 수 있고, 자신의 상태 전환을 특정하는 임계치를 정의하는 상태 정보 또는 데이터를 제공할 수 있다. 이러한 정보는 장치에 의해 제공된 콘택트 포인트의 속성(attribute)으로서 제공될 수 있다. 데이터는 다양한 유사 장치에 대해 표준화될 수 있다. 애플리케이션은 자신의 고유한 목적을 위해 장치로부터의 원 압력 데이터를 사용할 수 있으며, 또는 임계치 및 상태에 따라 압력 데이터를 해석하기 위해 장치 자체의 또는 호스트 운영 체제 소프트웨어에 의존할 수 있다.

Description

간접 터치 입력 장치를 위한 압력 기반 상호작용 기법{PRESSURE-BASED INTERACTION FOR INDIRECT TOUCH INPUT DEVICES}

컴퓨터 시스템의 네비게이션 및 제어를 위해 사용되는 수동 입력 장치는 시스템의 성능 및 사용자의 전체 경험에 대해 중요한 영향력을 가진다. 퍼스널 컴퓨터의 네비게이션 및 제어에 사용되는 여러 종류의 수동 입력 장치가 존재하며, 이들 중 가장 일반적인 것은 단일-포인터 간접 상호작용 장치(예, 마우스 또는 터치패드) 및 직접 상호작용 장치(예, 터치스크린 및 펜과 태블릿 장치)를 포함한다.

대부분의 입력 장치는 버튼 및 추가로 이들의 위치 정보를 포함한다. 예를 들어, 마우스에서는 듀얼-상태 기계식 버튼(dual-state mechanical buttons)이 일반적이다. 또한, 펜 디지타이저(pen digitizer)는 전형적으로 팁 및/또는 스타일러스 배럴(stylus barrel) 내에 압력-응답 장치를 가지며, 이는 팁 및 배럴 압력 값을 각각 전송한다. 펜 디지타이저를 위한 대부분의 소프트웨어 드라이버는 팁-관련 데이터의 처리 중에 마우스 에뮬레이션(mouse emulation) 형식을 구현한다. 또한, 일반적으로 버튼 및 다른 메커니즘은 입력 장치의 독립적인 입력부로서 처리된다.

본 요약은 상세한 설명에서 이하에 추가로 설명되는 개념에 대한 선택사항을 간략한 형태로 소개하도록 제공된다. 본 요약은 청구된 발명의 대상의 핵심 특징 또는 주요 특징을 식별하려는 것이 아니며 청구된 발명의 대상의 범주를 결정하는 데 있어 보조내용으로 사용하려는 것도 아니다.

간접 상호작용 입력 장치(예, 터치 센서)는 복수의 입력 포인트를 제공할 수 있다. 예를 들어, 터치 감지 센서는 사용자가 센서를 터치하고 있는 좌표 공간 내의 둘 이상의 위치를 나타내는 데이터를 제공할 수 있다. 이러한 센서는 모양이 직사각형일 수 있으나 다른 모양을 가질 수도 있다. 센서는 터치패드와 유사하게 보일 수 있으나, 단일 포인트의 모션을 추적하는 대신에, 사용자에 의해 터치된 복수의 포인트를 추적한다. 이러한 복수의 포인트는 디스플레이 상의 복수의 위치에 차례로 매핑된다.

디스플레이로부터의 포인트를 이차원의 장치 좌표에 매핑하는 것과 함께, 또한 추가 차원(additional dimension)(본 명세서에서, z-정보 또는 깊이라 함)이 장치를 위한 사용자 상호작용 모델을 정의하는 데에 고려될 수 있다. z-방향(즉, 콘택트의 평면에 수직인 축 상)의 변위(콘택트에 가해진 압력 등)에 대한 어떠한 측정값도 이러한 정보가 입력 장치로부터 이용될 수 있는 것이면 사용될 수 있다. 압력 데이터가 상호작용의 상태를 정의하는 데 사용될 수 있으며, 이러한 상태 간의 전환(transitions)은 다양한 임계치에 의해 결정된다. 장치는 원(raw) 데이터 또는 표준화된(normalized) 데이터를 제공할 수 있고, 자신의 상태 전환을 특정하는 임계치를 정의하는 상태 정보 또는 데이터를 제공할 수 있다. 이러한 정보는 장치에 의해 제공된 콘택트 포인트의 속성(attribute)으로서 제공될 수 있다. 장치 드라이버, 호스트 운영 체제의 입력 프로세서 또는 애플리케이션이 다양한 유사 장치에 대하여 데이터를 표준화할 수 있다. 애플리케이션은 자신의 고유한 목적을 위해 장치로부터의 원 압력 데이터를 사용할 수 있고, 또는 시스템- 또는 장치-정의 임계치 및 상태에 따라 압력 데이터를 해석하기 위해 장치 자체 또는 호스트 운영 체제 소프트웨어에 의존할 수 있다.

결과적으로, 일 측면에서, 터치 장치에 대한 콘택트 포인트를 기술하는 정보가 메모리에 수신된다. 또한, z-방향 정보는 입력 장치로부터 수신된다. z-방향 정보에 따라 콘택트 포인트와 관련된 동작(behavior)이 장치, 호스트 운영 체제 또는 애플리케이션에 의해 수정되고, 상태 전환 및 기타 다른 상호작용이 이루어질 수 있다.

일 실시예에서, 복수의 임계치가 z-방향 정보에 적용되어 입력 장치의 복수의 상태를 정의한다. 상태는 입력 장치에 적용된 각각의 콘택트에 독립적으로 정의될 수 있다. 대안적으로, 상태가 입력 장치에 대한 모든 콘택트에 대해 정의될 수 있다. 복수의 콘택트의 압력 신호(pressure signal)가 여러 방식으로 단일 시동동작(singular actuation)에 결합될 수 있다. 예를 들어, 최고 압력을 나타내는 콘택트가 상태 전환을 시동(actuating)시키는 데 사용될 수 있다. 모든 콘택트에 대한 평균 압력(예, 평균값)이 상태 전환을 시동시키는 데 사용될 수 있다. 최고 압력을 나타내는 콘택트가 상호작용 상태를 진전시키기(advance) 위해 사용될 수 있고(진입(entry)), 최저 압력의 콘택트가 상호작용 상태를 역행시키기(regress) 위해 사용될 수 있다(이탈(exit)). 복수의 상태는 예를 들면, 아이들 상태(idle state), 호버 상태(hover state) 및 인게이지 상태(engage state)의 시퀀스를 포함할 수 있다. 인게이지 진입 및 인게이지 이탈 임계치는 동일하거나 다른 값일 수 있다. 호버 진입 및 호버 이탈 임계치는 동일하거나 다른 값일 수 있다. 호버 진입 및 호버 이탈 임계치는 제로일 수 있으며, 이는 호버 상태가 생략될 수 있고 아이들과 인게이지 사이의 전환이 단지 콘택트를 적용하거나 제거함으로써 시작될 수 있다는 것을 의미한다. 복수의 상태는 인게이지 잠김 상태(engage locked state)를 포함할 수 있고, 인게이지 잠김 상태는 압력이 특정한 임계치를 초과하는 임의의 다른 상태로부터의 전환에 의해 진입된다. 인게이지 잠김 상태로의 진입 후에, 인게이지 잠김 상태는 임계치 아래에서 다시 임계치 위로의 압력 변화에 의해 이탈된다.

상태를 정의하는 데 사용되는 임계치는 장치에 저장되거나, 장치로부터의 데이터를 사용하는 호스트 운영 체제 또는 애플리케이션에 의해 정의 및 관리될 수 있다. 장치 상태는 장치에 만들어진 콘택트의 리스트 내의 콘택트의 속성일 수 있다. 애플리케이션 또는 호스트 운영 체제는 하나 이상의 상태에 대한 액세스를 금지할 수 있다. z-방향 정보가 복수의 장치에 대해 표준화될 수 있다. z-방향 정보의 변화율(rate of change)이 판정될 수 있고, 입력 장치로부터의 데이터가 z-방향 정보의 변화율에 따라 처리될 수 있다.

애플리케이션은 z-방향 정보의 사용에 참여(opt-in) 및 참여하지 않는 것(opt-out)에 대한 관련 설정을 가질 수 있다. 예를 들어, 애플리케이션은 상태 정보만을 수신할 수 있고, 원 압력 데이터나 표준화된 압력 데이터를 수신할 수 없다. 애플리케이션은 원 z-방향 데이터를 수신할 수 있다. 애플리케이션은 평균화된 z-방향 데이터를 수신할 수 있다. 애플리케이션은 z-방향 정보를 수신할 수 있으나 상태 정보를 수신할 수 없다. z-방향 정보는 압력 데이터를 나타낼 수 있다.

다음의 설명에서, 본 명세서의 일부를 형성하는 첨부된 도면이 참조되며, 도면에는 본 발명의 특정한 예시적인 구현예가 설명을 위해 도시된다. 본 명세서의 범주를 벗어나지 않는 범위에서 다른 실시예가 사용될 수 있으며 구조적 변경이 이루어질 수 있다는 것을 이해할 수 있을 것이다.

도 1은 간접 터치 장치를 사용하는 시스템의 블록도이다.
도 2는 z-정보를 사용하는 예시적인 구현예를 나타내는 상태도(state diagram)이다.
도 3은 z-정보를 사용하는 다른 예시적인 구현예를 나타내는 상태도이다.
도 4는 이러한 시스템이 구현될 수 있는 예시적인 컴퓨팅 장치의 블록도이다.

다음의 섹션은 간접적인 터치 입력 장치가 사용될 수 있는 예시적인 동작 환경을 제공한다.

도 1을 참조하면, 컴퓨터 시스템(100)이 컴퓨터 플랫폼(이에 대한 상세한 내용은 이하에 설명됨)에 연결된 간접 터치 장치(102)를 포함한다. 컴퓨터 플랫폼은 하나 이상의 애플리케이션(108)과 컴퓨터 플랫폼의 자원(예를 들면, 간접 터치 장치를 포함하는 컴퓨터 플랫폼의 주변 장치) 사이의 상호작용을 관리하는 운영 체제를 가진다.

운영 체제 내에서, 터치 데이터(120)가 간접 터치 장치(102)로부터 수신된다. 터치 데이터(120)는 x 및 y 차원의 콘택트 포인트에 관한 정보 및 z-정보를 포함한다. 콘택트 정보는 콘택트 추적 모델(140)에 의해, 설정(144)에 따라 처리되어, 콘택트 정보(142)를 애플리케이션(108)에 제공한다. 일반적으로, 콘택트 정보(142)는 간접 터치 장치(102)에 의해 데이터가 제공되는 각각의 시간 프레임에 대한 콘택트의 리스트를 포함할 수 있다. 각각의 포인트는 임의의 단일 포인트와 유사한 방식으로 (예를 들면, 디스플레이된 아이템의 선택을 위해) 또는 직접 터치 입력 장치로부터의 복수의 포인트와 유사한 방식으로 (예를 들면, 디스플레이된 아이템의 축소 또는 확대), 운영 체제 및/또는 애플리케이션(108)에 의해 처리될 수 있다. 복수의 포인트의 가능한 사용의 범위(디스플레이에 매핑되면)는 본 발명에 대한 제한이 아니다.

간접 터치 장치로부터 수신된 다른 데이터는 z-방향(즉, 콘택트의 평면에 수직인 축 상)의 변위에 대한 측정치(예, 콘택트에 인가된 압력)이다.

이러한 종류의 데이터를 포함하는 입력 장치의 예(제한이 아님)는 센서 버튼을 이용하는 용량성 터치 센서, 콘택트 영역 차이(contact area discrimination)를 이용하는 용량성 터치 센서, 기계식 압력 센서, 이미지 센서(예, 마크로소프트 사의 NECT 시스템), 표면으로부터의 거리를 측정하는 광학 스타일러스, 센서 표면으로부터의 객체의 거리를 광학적으로 측정하는 센서(예, 마이크로소프트 사의 SURFACE 시스템), 삼차원 모션 감지 시스템 및 스퀴즈 기반 입력 장치를 포함한다.

이러한 z-방향 정보는 z-정보 추적 모듈(130)에 의해, 설정(134)에 따라 처리되어 z-정보 및 상태 데이터(132)를 제공한다(이는 애플리케이션(108)에 의해 사용될 수 있음).

z-정보 추적 모듈의 일 구현예에서, 입력 장치와의 상호작용의 상태의 변경을 실현하기 위해 z-방향 변위의 상이한 임계치가 사용된다. 일 예에서, 입력 장치는 세 개의 상태(아이들, 호버 및 인게이지)를 가진다. 상태는 입력 장치로부터 이용가능한 데이터에 따라, 전체 입력 장치에 대해 또는 콘택트마다 정의될 수 있다.

도 2에 도시된 것과 같이, 입력 장치의 상태도는 입력 장치가 초기에 아이들 상태(idle state)에 있다는 것을 나타낸다. 아이들 상태(200)에서, z-방향 정보가 지속적으로 처리되어 제1의 입력 임계치에 대해 평가된다. 신호가 제1 임계치보다 크면, 장치는 호버 상태(202)로 전환한다(204에 나타냄). 호버 상태에서, 신호가 제2의 진입 임계치(entry threshold)보다 크거나 같으면, 장치는 인게이지 상태(engage state)(206)로 전환한다(208에 나타냄). 호버 상태에서, 신호가 제3의 획득 이탈 임계치(acquire exit threshold)보다 작거나 같으면, 장치가 다시 아이들 상태(200)로 전환한다(210에 나타냄). 인게이지 상태에서, 신호가 제로가 아닌, 제4의 인게이지 이탈 임계치보다 작거나 같으면, 장치는 다시 호버 상태(202)로 전환한다(212에 나타냄). 인게이지 이탈 임계치가 제로이고, 인게이지 상태이면, 장치는 콘택트가 센서로부터 완전히 제거될 때까지 그 상태를 유지한다(213에 나타냄). 아이들 상태로부터 호버 상태로의 전환은 콘택트 세션의 시작을 나타내는 반면에, 아이들 상태로의 전환은 콘택트 세션의 종료를 나타낸다.

호버 상태와 인게이지 상태 간의 전환을 유도하는 인게이지 진입 및 인게이지 이탈 임계치는 동일한 값일 수도 있고 상이한 값일 수도 있다. 예를 들어, 증가하는 z 값이 인게이지먼트(engagement)를 나타내는 것으로 가정하면, 인게이지 이탈 임계치(호버 상태로 다시 전환시키기 위한 것)가 인게이지 진입 임계치보다 작을 수 있다. 유사하게, 아이들 및 호버 상태 간의 전환을 유도하는 진입 및 이탈 임계치도 또한 동일한 값일 수도 있고 상이한 값일 수도 있다. 예를 들어, 증가하는 z 값이 인게이지먼트를 나타내는 것으로 가정하면, 이탈 임계치(아이들 상태로 다시 전환시키기 위한 것)는 진입 임계치보다 작을 수 있다. 그러나, 아이들 상태는 장치와의 콘택트가 없거나 단지 부수적임을 나타내기 때문에, 진입 임계치는 일반적으로 제로보다 약간 큰 값이다. 따라서, 이탈 임계치는 콘택트 세션의 종료를 나타내고 일반적으로 제로이다. 호버 및 인게이지 진입 및 이탈 임계치가 제로일 수 있으며, 이는 호버 상태가 생략될 수 있고 아이들 및 인게이지 상태 간의 전환(207에 점선으로 도시됨)이 콘택트의 단순한 적용 또는 제거에 의해 시작될 수 있다는 것을 의미한다.

도 3에 도시된 다른 구현예에서(도 2에 도시된 것과 동일한 참조 번호는 동일한 구성요소를 나타냄), 인게이지 상태가 잠금될 수 있다(실제로, 상태(300)). 이러한 잠김 상태(300)는 압력이 제5의 잠금 진입 임계치(lock entry threshold)(제1 내지 제4 임계치보다 큼)를 초과하는 경우에 임의의 다른 상태로부터의 전환(302, 304, 306)에 의해 진입될 수 있다. 잠김 상태로의 진입 후에, 잠김 상태는 예를 들면, 제5 임계치보다 작은 값에서 제5 임계치보다 큰 값으로의 압력의 또 다른 변화에 의해 이탈될 수 있다. 잠김 상태에서 인게이지 상태로의 전환(308)이 이루어진다.

장치가 설치되는 경우에, 장치를 이용하는 사용자 경험을 정의하는 데 사용되는 임계치(도 1의 설정(134))가 장치에서 사용될 수 있고, 컴퓨터 시스템으로 제공될 수 있으며, 또는 장치 드라이버, 호스트 운영 체제, 또는 애플리케이션에 의해 관리될 수 있다. 장치 드라이버, 호스트 운영 체제의 입력 프로세서 또는 애플리케이션(들)(이들로 원 압력 데이터가 라우팅됨)은 장치 상태 및 장치 상태 간 전환을 관리하고 추적할 수 있고, z-정보 추적 모듈(도의 130)을 구현할 수 있다. 장치 상태는 다른 애플리케이션으로 제공되는 콘택트의 리스트(도 1의 142) 내의 콘택트의 속성일 수 있다. 이러한 장치 드라이버 또는 호스트 운영 체제의 입력 프로세서는 이용가능한 전환을 제한하는 입력을 애플리케이션으로부터 수신하도록 구성될 수 있다. 예를 들어, 애플리케이션은 애플리케이션 내의 일부 상태(예를 들면, 잠김 상태)로의 전환이 차단되도록 장치 드라이버 또는 운영 시스템 입력 프로세서에 지시할 수 있다. 장치 상태에 대한 임계치가 애플리케이션에 의해 정의될 수 있고 이는 통상적인 사용자 경험이 애플리케이션에 의해 정의되도록 한다.

장치의 상태가 입력 장치상의 모든 콘택트에 대해 정의되는 경우에, 복수의 콘택트와 관련된 z-정보가 여러 방식으로 단일 시동동작(actuation)에 결합될 수 있다. 예를 들어, 최고 압력을 나타내는 콘택트가 상태 전환을 시동시키기 위해 사용될 수 있다. 모든 콘택트에 대한 평균 압력(예, 평균값)이 상태 전환을 시동시키는 데 사용될 수 있다. 상호작용 상태를 진전시키기 위해(진입) 최고 압력을 나타내는 콘택트가 사용될 수 있고, 상호작용 상태를 역행시키기 위해(이탈) 최저 압력을 가진 콘택트가 사용될 수 있다.

복수의 상이한 유형의 장치로부터 입력을 수신할 수 있는 소프트웨어 레이어를 통해 동작(behaviors)이 정의되는 경우에, 상태 변경을 위한 임계치가 표준화된 장치 데이터에 관하여 설정될 수 있다. 장치 데이터 표준화는 일반적으로 장치로부터의 입력의 범위를 표준화된 범위에 비선형 매핑하는 것(nonlinear mapping)을 포함한다. 일 실시예에서, 호스트 기반 소프트웨어(예, 다른 애플리케이션에 대한 서비스로서 이용가능한 장치 드라이버 또는 사용자 레벨 프로세스)가 장치로부터 데이터를 수신하고 이를 표준화한다. 표준화된 압력 데이터는 다른 애플리케이션으로 제공되는 콘택트의 리스트 내의 콘택트의 속성일 수 있다.

또한, 애플리케이션은 z-방향 데이터(예, 압력 데이터)의 사용에 참여하거나 참여하지 않도록 인에이블될 수 있다. 일 실시예에서, 애플리케이션이 참여하면, 애플리케이션은 상태 정보만을 수신하고 원 압력 데이터나 표준화된 압력 데이터를 수신하지 않는다. 다른 구현에서, 애플리케이션은 원 압력 데이터를 수신한다. 다른 구현예에서, 애플리케이션은 평준화된 압력 데이터를 수신한다. 다른 구현예에서는, 단지 압력 데이터만이 수신되고, 상태 정보는 수신되지 않는다.

또한, 다른 동작이 z 방향으로의 시간에 대한 변위(예, 차압(differential presssure)에 기초하여 정의될 수 있다. 세그먼트화된 선형 변환 계산이 z 방향 변위 또는 속도를 나타내는 입력에 적용되어 이를 출력 응답에 매핑할 수 있다. 출력 응답은 다양한 컨트롤(예, 볼륨, 셔틀, 줌 속도(zoom velocity)) 중 임의의 것 또는 다른 애플리케이션-정의된 동작일 수 있다. 이러한 매핑은 하나의 입력 포인트(예, 최소 크기 차(smallest magnitude differential)를 가진 입력 포인트)의 차이 값에 기초하여 입력 포인트 그룹으로부터 수행될 수 있다. 또는, 이러한 매핑은 각각의 입력 포인트에 대해 독립적으로 수행될 수 있다. 복수의 손가락 조작에 대한 대안으로서 압력을 통해 단일 콘택트에서의 가속화된 조작(manipulation)에 대한 하나의 가능한 응용예는 차량 운행 중의 핸드 헬드 컴퓨터의 세이프 오퍼레이션(safe operation)이다. 다른 응용예는 복수의, 압력-변조 오퍼레이션을 동시에 수행할 수 있는 것이다. 일 예는 비디오 게임에서 발포 및 전방 이동 동작의 속도를 동시에 변경하기 위해 하나의 손의 두 개의 손가락을 사용하는 것이다. 다른 예로서, 콘택트의 압력의 고속 증가가 가상 3D 공간에서의 비디오 셔틀링(video shuttling), 볼륨 증가, 줌인(zoom in) 또는 전방 네비게이션을 가속화할 수 있다.

지금까지 예시적인 구현예를 설명하였으나, 이러한 시스템이 동작하도록 설계된 컴퓨팅 환경이 지금부터 설명될 것이다. 다음의 설명은 이러한 시스템이 구현될 수 있는 적합한 컴퓨팅 환경에 대한 간략하고 일반적인 설명을 제공하기 위한 것이다. 시스템은 수많은 범용 또는 전용 컴퓨팅 하드웨어 구성을 이용하여 구현될 수 있다. 적합할 가능성이 있는 공지된 컴퓨팅 장치의 예(이에 제한되는 것이 아님)는 퍼스널 컴퓨터, 서버 컴퓨터, 핸드헬드 또는 랩톱 장치(예를 들면, 미디어 플레이어, 노트북 컴퓨터, 셀룰러 폰, PDA, 보이스 레코더), 멀티프로세서 시스템, 마이크로프로세서 기반 시스템, 셋톱 박스, 게임 콘솔, 프로그램가능한 가전 기기, 네트워크 PC, 미니컴퓨터, 메인프레임 컴퓨터, 전술한 시스템 또는 장치 중 임의의 것을 포함하는 분산형 컴퓨팅 환경 등을 포함한다.

도 4는 적합한 컴퓨팅 시스템 환경의 예를 도시한다. 컴퓨팅 시스템 환경은 단지 적합한 컴퓨팅 환경의 일 예이고, 이러한 컴퓨팅 환경의 사용 또는 기능성의 측면에 관한 임의의 제한을 하려는 것이 아니다. 컴퓨팅 환경은 예시적인 동작 환경에서 설명된 컴포넌트 중 임의의 컴포넌트 또는 이들의 조합에 관한 임의의 의존성이나 필요조건을 가지는 것으로 해석되어서는 안된다.

도 4를 참조하면, 예시적인 컴퓨팅 환경은 컴퓨팅 머신(400)과 같은 컴퓨팅 머신을 포함한다. 컴퓨팅 머신의 가장 기본적인 구성에서, 컴퓨팅 머신(400)은 일반적으로 적어도 하나의 프로세싱 유닛(402)과 메모리(404)를 포함한다. 컴퓨팅 장치는 컴퓨팅 장치는 복수의 프로세싱 유닛 및/또는 그래픽 프로세싱 유닛(420)과 같은 추가적인 코-프로세싱 유닛을 포함할 수 있다. 컴퓨팅 장치의 정확한 구성 및 유형에 따라, 메모리(404)는 휘발성(예, RAM), 비-휘발성(예, ROM, 플래시 메모리, 등) 또는 이 둘의 몇몇 조합일 수 있다. 이러한 가장 기본적인 구성은 도 4에 점선(406)으로 도시되어 있다. 추가적으로, 컴퓨팅 머신(400)은 또한 추가적인 특징들/기능성을 가질 수 있다. 예를 들어, 컴퓨팅 머신(400)은 또한 자기 또는 광 디스크 또는 테이프를 포함하지만, 이에만 제한되는 것이 아닌, 추가 저장소(이동식 및/또는 비이동식)를 포함할 수 있다. 그러한 추가 저장소는 도 4에 이동식 저장소(408) 및 비이동식 저장소(410)로 도시된다. 컴퓨터 저장 매체는 컴퓨터 프로그램 명령어, 프로그램 모듈, 데이터 구조 또는 그 외 다른 데이터와 같은 정보의 저장을 위한 임의의 방법이나 기술에 의해 구현되는 휘발성 및 비휘발성, 이동식 및 비이동식 매체를 포함한다. 메모리(404), 이동식 저장소(408) 및 비이동식 저장소(410)는 모두 컴퓨터 저장 매체의 예이다. 컴퓨터 저장 매체에는 RAM, ROM, EEPROM, 플래시 메모리 또는 다른 메모리 기술, CD-ROM, 디지털 다기능 디스크(DVD) 또는 다른 광 저장 장치, 자기 카세트, 자기 테이프, 자기 디스크 저장 장치 또는 다른 자기 저장 장치, 또는 원하는 정보를 저장하기 위해 사용될 수 있고 컴퓨팅 머신(400)에 의해 액세스될 수 있는 임의의 다른 매체가 포함되지만, 이에 제한되지 않는다. 임의의 그러한 컴퓨터 저장 매체는 컴퓨팅 머신(400)의 일부일 수 있다.

컴퓨팅 머신(400)은 또한 장치가 다른 장치들과 통신하는 것을 가능하게 하는 통신 연결부(들)(412)를 포함할 수 있다. 통신 연결부(들)(412)는 통신 매체의 일 예이다. 통신 매체는 통상적으로 반송파 또는 그 외 다른 전송 메커니즘과 같은 변조된 데이터 신호의 형태로 컴퓨터 프로그램 명령어, 데이터 구조, 프로그램 모듈 또는 다른 데이터를 운반하며, 임의의 정보 전달 매체를 포함한다. "변조된 데이터 신호"는 자신의 특성 중 하나 이상의 정보를 신호 내에 인코딩하는 방식으로 설정되거나 변화된 신호를 의미하며, 이에 따라 신호의 수신 장치의 구성이나 상태를 변화시킨다. 제한이 아닌 예시로서, 통신 매체는 유선 네트워크 또는 직접-유선 커넥션과 같은 유선 매체와, 음향, RF, 적외선 및 다른 무선 매체와 같은 무선 매체를 포함한다.

컴퓨팅 머신(400)은 키보드, 마우스, 펜, 카메라, 터치 입력 장치 등과 같은 다양한 입력 장치(들)(414)를 구비할 수 있다. 디스플레이, 스피커, 프린터 등과 같은 출력 장치(들)(416)도 또한 포함될 수 있다. 이들 장치 모두는 해당 기술 분야에 잘 알려져 있으므로 여기서 길게 논의할 필요는 없다.

시스템은 컴퓨터 머신에 의해 처리되는 프로그램 모듈과 같은 컴퓨터-실행가능 명령어 및/또는 컴퓨터-해석 명령어를 포함하여, 소프트웨어의 일반적인 맥락으로 구현될 수 있다. 일반적으로, 프로그램 모듈은 프로세싱 유닛에 의해 처리되는 경우에 프로세싱 유닛으로 하여금 특정 태스크를 수행하거나 특정 추상적인 데이터 타입을 구현하도록 지시하는 루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조, 등을 포함한다. 이러한 시스템은 통신 네트워크를 통해 연결되어 있는 원격 프로세싱 장치들에 의해 태스크가 수행되는 분산형 컴퓨팅 환경에서 실현될 수 있다. 분산형 컴퓨팅 환경에서, 프로그램 모듈은 메모리 저장 장치를 포함하는, 로컬 및 원격 컴퓨터 저장 매체 모두에 배치될 수 있다.

첨부된 청구범위의 전제부의 용어 "제조품(article of manufacture)", "프로세스", "머신" 및 "물질의 조합"은 특허법에서 이들 용어의 사용에 의해 정의되는 특허가능한 발명 대상의 범위 내에 포함되는 발명 대상으로 청구범위를 제한하려는 것이다.

본 명세서에서 기술된 전술한 다른 실시예들 중 임의의 것 또는 모든 것은 추가적인 혼합 실시예들을 형성하기 위하여 원하는 임의의 조합으로 사용될 수 있다. 첨부된 청구범위에서 한정된 발명 주제는 위에서 기술된 특정 구현예들로 제한되어야 할 필요가 없다는 점이 이해되어야 한다. 전술한 특정 구현예들은 오직 예시로서만 개시된다.

Claims

메모리에서, 터치 장치에 대한 콘택트 포인트를 기술하는 정보를 수신하는 단계와,
상기 메모리에서, 상기 터치 장치로부터 z-방향 정보를 수신하는 단계와,
상기 메모리에서, 상기 z-방향 정보에 복수의 임계치를 적용하는 것에 의해, 상기 z-방향 정보에 따라 상기 콘택트 포인트와 관련된 상태 정보를 생성하는 단계 - 상기 복수의 임계치는 복수의 상태를 정의하고, 상기 복수의 상태는 적어도 아이들 상태(idle state), 인게이지 상태로의 진입을 위한 제 1 임계치와 연관된 상기 인게이지 상태, 및 인게이지 잠김 상태(engage locked state)로의 진입을 위한 제 2 임계치와 연관된 상기 인게이지 잠김 상태를 포함하며, 상기 제 2 임계치는 상기 제 1 임계치를 초과함 - 를 포함하되,
상기 인게이지 잠김 상태는 상기 z-방향 정보가 상기 제 2 임계치를 초과할 때, 임의의 다른 상태로부터의 전환(transitions)에 의해 진입되고,
상기 인게이지 잠김 상태로의 진입 후에, 상기 인게이지 잠김 상태는 상기 제 2 임계치 아래에서 상기 제 2 임계치 위로의 상기 z-방향 정보의 변화에 의해 이탈되고,
상기 생성된 상태 정보는 상기 터치 장치에 대한 상기 콘택트 포인트의 리스트 내의 상기 콘택트 포인트 중 하나 이상의 콘택트 포인트의 속성인
컴퓨터로 구현되는 방법.
제1항에 있어서,
상기 z-방향 정보는 상기 터치 장치에 대한 각 콘택트 포인트와 연관되고, 상기 상태 정보는 상기 터치 장치에 대한 각 콘택트 포인트에 대해 생성되는
컴퓨터로 구현되는 방법.
제1항에 있어서,
상기 z-방향 정보는 상기 터치 장치에 대한 각 콘택트 포인트와 연관되고, 상기 상태 정보는 상기 콘택트 포인트로부터 상기 z-방향 정보를 결합함으로써 전체로서 상기 터치 장치에 대해 생성되는
컴퓨터로 구현되는 방법.
제1항에 있어서,
상기 복수의 상태는 호버 상태(hover state)로의 진입을 위한 제 3 임계치와 연관된 상기 호버 상태를 더 포함하되,
상기 제 3 임계치는 상기 제 1 임계치 및 상기 제 2 임계치보다 낮은
컴퓨터로 구현되는 방법.
제4항에 있어서,
상기 호버 상태는 상기 호버 상태를 이탈하기 위한 제 5 임계치와 연관되고,
상기 제 5 임계치는 상기 제 3 임계치와 상이한
컴퓨터로 구현되는 방법.
제1항에 있어서,
상기 인게이지 상태는 상기 인게이지 상태를 이탈하기 위한 제 4 임계치와 연관되고, 상기 제 2 임계치는 상기 제 4 임계치와 상이한
컴퓨터로 구현되는 방법.
제1항에 있어서,
상기 복수의 임계치는 상기 터치 장치에 저장된 상기 복수의 상태를 정의하는데 사용되는
컴퓨터로 구현되는 방법.
제1항에 있어서,
상기 복수의 상태를 정의하는 상기 복수의 임계치는 상기 터치 장치로부터 데이터를 사용하는 애플리케이션에 의해 정의되는
컴퓨터로 구현되는 방법.
삭제
제1항에 있어서,
상기 z-방향 정보의 변화율(rate of change)을 판정하는 단계와,
상기 z-방향 정보의 상기 변화율에 따라 상기 터치 장치로부터 상기 콘택트 포인트를 처리하는 단계를 더 포함하는
컴퓨터로 구현되는 방법.
시스템으로서,
메모리와,
상기 메모리와 통신하는 프로세서를 포함하되,
상기 프로세서는,
상기 메모리에서 터치 장치에 대한 콘택트 포인트를 기술하는 정보를 수신하는 단계와,
상기 메모리에서 상기 터치 장치로부터 z-방향 정보를 수신하는 단계와,
상기 메모리에서 상기 z-방향 정보에 복수의 임계치를 적용하는 것에 의해 상기 z-방향 정보에 따라 상기 콘택트 포인트와 관련된 상태 정보를 생성하는 단계 - 상기 복수의 임계치는 복수의 상태를 정의하고, 상기 복수의 상태는 적어도 아이들 상태, 인게이지 상태로의 진입을 위한 제 1 임계치와 연관된 상기 인게이지 상태, 및 인게이지 잠김 상태로의 진입을 위한 제 2 임계치와 연관된 상기 인게이지 잠김 상태를 포함하고, 상기 제 2 임계치는 상기 제 1 임계치를 초과함 -
를 수행하도록 구성되되,
상기 인게이지 잠김 상태는 상기 z-방향 정보가 상기 제 2 임계치를 초과할 때, 임의의 다른 상태로부터의 전환에 의해 진입되고,
상기 인게이지 잠김 상태로의 진입 후에, 상기 인게이지 잠김 상태는 상기 제 2 임계치 아래에서 상기 제 2 임계치 위로의 상기 z-방향 정보의 변화에 의해 이탈되고,
상기 생성된 상태 정보는 상기 터치 장치에 대한 상기 콘택트 포인트의 리스트 내의 상기 콘택트 포인트 중 하나 이상의 콘택트 포인트의 속성인
시스템.
제11항에 있어서,
상기 z-방향 정보는 상기 터치 장치에 대한 각 콘택트 포인트와 연관되고, 상기 상태 정보는 상기 터치 장치에 대한 각 콘택트 포인트에 대해 생성되는
시스템.
제11항에 있어서,
상기 z-방향 정보는 상기 터치 장치에 대한 각 콘택트 포인트와 연관되고, 상기 상태 정보는 상기 콘택트 포인트로부터 상기 z-방향 정보를 결합함으로써 전체로서 상기 터치 장치에 대해 생성되는
시스템.
제11항에 있어서,
상기 복수의 상태는 호버 상태로의 진입을 위한 제 3 임계치와 연관된 상기 호버 상태를 포함하되,
상기 제 3 임계치는 상기 제 1 임계치 및 상기 제 2 임계치보다 낮은
시스템.
제14항에 있어서,
상기 호버 상태는 상기 호버 상태를 이탈하기 위한 제 5 임계치와 연관되고,
상기 제 5 임계치는 상기 제 3 임계치와 상이한
시스템.
터치 장치를 구비한 컴퓨터 시스템으로서,
상기 터치 장치로부터 데이터를 수신하기 위한 입력부 및 상기 터치 장치에 대한 콘택트 포인트를 기술하는 정보를 메모리에 제공하는 출력부를 갖는 콘택트 추적 모듈과,
상기 터치 장치로부터 데이터를 수신하기 위한 입력부 및 복수의 임계치에 따라 z-방향 정보에 따른 상기 콘택트 포인트와 관련된 상태 정보를 상기 메모리에 제공하는 출력부를 갖는 z-정보 추적 모듈 - 상기 복수의 임계치는 복수의 상태를 정의하고, 상기 복수의 상태는 적어도 아이들 상태, 인게이지 상태로의 진입을 위한 제 1 임계치와 연관된 상기 인게이지 상태, 인게이지 잠김 상태로의 진입을 위한 제 2 임계치와 연관된 상기 인게이지 잠김 상태를 포함하고, 상기 제 2 임계치는 상기 제 1 임계치를 초과함 - 을 포함하되,
상기 인게이지 잠김 상태는 상기 z-방향 정보가 상기 제 2 임계치를 초과할 때, 임의의 다른 상태로부터의 전환에 의해 진입되고,
상기 인게이지 잠김 상태로의 진입 후에, 상기 인게이지 잠김 상태는 상기 제 2 임계치 아래에서 상기 제 2 임계치 위로의 상기 z-방향 정보의 변화에 의해 이탈되고,
상기 상태 정보는 상기 터치 장치에 대한 상기 콘택트 포인트의 리스트 내의 상기 콘택트 포인트 중 하나 이상의 콘택트 포인트의 속성인
컴퓨터 시스템.
제16항에 있어서,
상기 z-방향 정보는 상기 터치 장치에 대한 각 콘택트 포인트와 연관되고, 상기 상태 정보는 상기 터치 장치에 대한 각 콘택트 포인트에 대해 생성되는
컴퓨터 시스템.
제16항에 있어서,
상기 z-방향 정보는 상기 터치 장치에 대한 각 콘택트 포인트와 연관되고, 상기 상태 정보는 상기 콘택트 포인트로부터 상기 z-방향 정보를 결합함으로써 전체로서 상기 터치 장치에 대해 생성되는
컴퓨터 시스템.
제16항에 있어서,
상기 복수의 상태는 호버 상태로의 진입을 위한 제 3 임계치와 연관된 상기 호버 상태를 포함하되,
상기 제 3 임계치는 상기 제 1 임계치 및 상기 제 2 임계치보다 낮은
컴퓨터 시스템.
제19항에 있어서,
상기 호버 상태는 상기 호버 상태를 이탈하기 위한 제 5 임계치와 연관되고,
상기 제 5 임계치는 상기 제 3 임계치와 상이한
컴퓨터 시스템.