KR20170081281A - 재배치가능한 터치면 상의 제스처 방위의 검출 - Google Patents

재배치가능한 터치면 상의 제스처 방위의 검출 Download PDF

Info

Publication number
KR20170081281A
KR20170081281A KR1020177017932A KR20177017932A KR20170081281A KR 20170081281 A KR20170081281 A KR 20170081281A KR 1020177017932 A KR1020177017932 A KR 1020177017932A KR 20177017932 A KR20177017932 A KR 20177017932A KR 20170081281 A KR20170081281 A KR 20170081281A
Authority
KR
South Korea
Prior art keywords
touch
touch surface
gesture
finger
orientation
Prior art date
Application number
KR1020177017932A
Other languages
English (en)
Inventor
웨인 칼 웨스터만
Original Assignee
애플 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 애플 인크. filed Critical 애플 인크.
Publication of KR20170081281A publication Critical patent/KR20170081281A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

재배치가능한 터치면 상에서 행해진 제스처의 방위의 검출이 개시된다. 몇몇 실시예들에서, 방법은, 터치 감응 디바이스의 터치면 상에서 행해진 제스처의 방위를 검출하는 단계, 및 검출된 제스처의 방위에 기초하여 터치면이 재배치되었는지 여부를 판정하는 단계를 포함할 수 있다. 다른 실시예들에서, 방법은, 터치 감응 디바이스의 터치면 상에서 행해진 제스처의 터치 이미지에서 캡처된 터치 위치들의 둘레에 윈도우를 설정하는 단계, 윈도우에서의 제스처의 방위를 검출하는 단계, 및 검출된 제스처의 방위에 기초하여 터치면이 재배치되었는지 여부를 판정하는 단계를 포함할 수 있다. 터치면의 픽셀 좌표들은 재배치에 대응하도록 변경될 수 있다.

Description

재배치가능한 터치면 상의 제스처 방위의 검출{DETECTION OF GESTURE ORIENTATION ON REPOSITIONABLE TOUCH SURFACE}
이것은 일반적으로 터치면들에 관한 것으로, 보다 상세하게는 터치면의 재배치(repositioning)를 나타내는 터치면 상에서 행해진 제스처의 방위(orientation)를 검출하는 것에 관한 것이다.
버튼이나 키, 마우스, 트랙볼, 조이스틱, 터치 센서 패널, 터치 스크린 등과 같이, 컴퓨팅 시스템에서 동작들을 수행하기 위한 많은 타입의 입력 디바이스들이 현재 이용가능하다. 특히, 터치 스크린들과 같은 터치 감응 디바이스들은 그것들의 하강세의 가격뿐만 아니라 그것들의 동작의 용이함 및 다재다능함 때문에 점점 더 대중화되고 있다. 터치 감응 디바이스는 터치 감응 표면을 갖는 클리어 패널일 수 있는 터치 센서 패널, 및 터치 감응 표면이 디스플레이 디바이스의 뷰잉가능 영역의 적어도 일부를 커버할 수 있도록 패널 뒤에 부분적으로 또는 완전히 배치될 수 있는 액정 디스플레이(LCD)와 같은 디스플레이 디바이스를 포함할 수 있다. 터치 감응 디바이스는 사용자가 디스플레이 디바이스에 의해 디스플레이되는 사용자 인터페이스(UI)에 의해 종종 지시된 위치에서 손가락, 스타일러스 또는 다른 물체를 이용하여 터치 센서 패널의 터치 감응 표면을 터치함으로써 다양한 기능들을 수행하게 할 수 있다. 일반적으로, 터치 감응 디바이스는 터치 이벤트 및 터치 센서 패널 상의 터치 이벤트의 포지션을 인식할 수 있고, 컴퓨팅 시스템은 그 다음에 터치 이벤트의 시점에 나타나는 디스플레이에 따라 터치 이벤트를 해석할 수 있고, 그 후에 터치 이벤트에 기초하여 하나 이상의 동작들을 수행할 수 있다.
컴퓨팅 시스템은 터치 이벤트의 포지션을 인식하는 것을 돕기 위해서 터치 센서 패널의 터치 감응 표면에 좌표계를 맵핑할 수 있다. 터치 감응 디바이스들이 이동형일 수 있으며, 이들 디바이스들 내의 터치 센서 패널들의 방위가 변경될 수 있기 때문에, 움직임 및/또는 방위 변경이 존재하는 경우에 좌표계에 불일치들(inconsistencies)이 나타날 수 있어, 그에 따라 포지션 인식 및 후속하는 디바이스 성능에 악영향을 미칠 수 있다.
이것은 터치면이 재배치되었는지 여부를 판정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출하는 것에 관한 것이다. 그렇게 하기 위해서, 터치 감응 디바이스의 터치면 상에서 행해진 제스처의 방위가 검출될 수 있고, 검출된 제스처 방위에 기초하여 터치면이 재배치되었는지 여부에 대한 판정이 이루어질 수 있다. 부가적으로 또는 대안적으로, 터치 감응 디바이스의 터치면 상에서 행해진 제스처의 터치 이미지에서 캡처된 터치 위치들의 둘레에 윈도우가 설정될 수 있고, 윈도우에서의 제스처의 방위가 검출될 수 있고, 검출된 제스처 방위에 기초하여 터치면이 재배치되었는지 여부에 대한 판정이 이루어질 수 있다. 터치면이 재배치되었는지 여부를 판정하는 능력은 유리하게는 디바이스 움직임에 상관없이 정확한 터치 위치들을 제공할 수 있다. 부가적으로, 디바이스는 상이한 포지션들에서 강건하게 수행할 수 있다.
도 1은 다양한 실시예들에 따른 예시적인 터치면을 도시한다.
도 2는 다양한 실시예들에 따른 예시적인 터치면(그 위에서 제스처가 행해짐)을 도시한다.
도 3a 내지 도 3i는 다양한 실시예들에 따른 터치면 상에서 행해진 제스처들에 대한 예시적인 터치 위치들을 도시한다.
도 4는 다양한 실시예들에 따른 터치면의 180° 재배치를 결정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출하는 예시적인 방법을 도시한다.
도 5a 및 도 5b는 다양한 실시예들에 따른 터치면의 재배치를 결정하는데 이용될 수 있는 터치면 상에서 행해진 제스처들에 대한 터치 위치들 사이의 예시적인 벡터들을 도시한다.
도 6a 내지 도 6d는 다양한 실시예들에 따른 터치면의 재배치를 결정하기 위해서 터치면 상에서 행해진 모호한 제스처들에 대한 터치 위치들 사이의 예시적인 벡터들을 도시한다.
도 7은 다양한 실시예들에 따른 터치면의 90° 재배치를 결정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출하는 예시적인 방법을 도시한다.
도 8은 다양한 실시예들에 따른 터치면의 재배치를 결정하는데 이용될 수 있는 터치면 상에서 행해진 제스처들에 대한 터치 위치들의 둘레의 예시적인 윈도우를 도시한다.
도 9는 다양한 실시예들에 따른 터치면의 재배치를 결정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출할 수 있는 예시적인 컴퓨팅 시스템을 도시한다.
다음의 다양한 실시예들의 설명에서, 그 부분을 형성하며, 실시될 수 있는 특정 실시예들을 예로서 도시하는 첨부 도면들에 대한 참조가 이루어진다. 다양한 실시예들의 범위로부터 벗어나지 않고, 다른 실시예들이 이용될 수 있으며 구조적 변경들이 이루어질 수 있다는 것을 이해해야 한다.
이것은 터치면이 재배치되었는지 여부를 판정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출하는 것에 관한 것이다. 몇몇 실시예들에서, 방법은, 터치 감응 디바이스의 터치면 상에서 행해진 제스처의 방위를 검출하는 단계, 및 검출된 제스처 방위에 기초하여 터치면이 재배치되었는지 여부를 판정하는 단계를 포함할 수 있다. 다른 실시예들에서, 방법은, 터치 감응 디바이스의 터치면 상에서 행해진 제스처의 터치 이미지에서 캡처된 터치 위치들의 둘레에 윈도우를 설정하는 단계, 윈도우에서의 제스처의 방위를 검출하는 단계, 및 검출된 제스처 방위에 기초하여 터치면이 재배치되었는지 여부를 판정하는 단계를 포함할 수 있다.
터치 감응 디바이스의 터치면이 재배치되었는지 여부를 판정하는 능력은 유리하게는 디바이스의 움직임에 상관없이 정확한 터치 위치들을 제공할 수 있다. 부가적으로, 디바이스는 상이한 포지션들에서 강건하게 수행할 수 있다.
도 1은 다양한 실시예들에 따른 예시적인 재배치가능한 터치면을 도시한다. 도 1의 예에서, 터치 감응 디바이스(100)의 터치면(110)은 터치 픽셀들(126)의 위치들에 대응하는 좌표 쌍들(coordinate pairs)을 가질 수 있다. 터치 픽셀들(126)은 각각의 터치 픽셀 위치에서 별개의 터치 센서들(예를 들어, 별개의 용량성, 저항성, 힘, 광학 또는 그와 같은 센서들)을 표현할 수 있거나, 또는 (예를 들어, 표면 탄성파, 빔 브레이크(beam-break), 카메라, 저항성 또는 용량성 플레이트, 또는 그와 같은 감지 기술들을 이용하여) 터치들이 검출될 수 있는 터치면의 위치들을 표현할 수 있다는 것에 주목해야 한다. 이 예에서, 터치면(110)의 좌측 상부 코너에 있는 픽셀(126)은 좌표 (0, 0)을 가질 수 있고, 터치면의 우측 하부 코너에 있는 픽셀은 좌표 (xn, ym)을 가질 수 있고, 여기서 n, m은 각각 픽셀들의 로우들 및 칼럼들의 번호들일 수 있다. 터치면(110)은 재배치가능할 수 있다. 예를 들어, 터치면(110)은, 좌측 상부 코너에 있는 픽셀(126)이 우측 상부 코너로 재배치되도록 +90°만큼 재배치될 수 있다. 터치면(110)은, 좌측 상부 코너에 있는 픽셀(126)이 우측 하부 코너로 재배치되도록 180°만큼 재배치될 수 있다. 터치면(110)은, 좌측 상부 코너에 있는 픽셀(126)이 좌측 하부 코너로 재배치되도록 -90°만큼 재배치될 수 있다. 실행되는 애플리케이션 및 디바이스에 대한 사용자의 필요 및 편의에 따라 다른 재배치가 또한 가능하다.
간단함을 위해, (재배치에 상관없이) 터치면의 좌측 상부 코너에 있는 픽셀(126)에는 항상 좌표 쌍 (0, 0)이 할당될 수 있고, 우측 하부 코너에 있는 픽셀에는 항상 좌표 쌍 (xn, ym)이 할당될 수 있다. 이와 같이, 터치면(110)이 재배치되는 경우, 픽셀들의 오리지널 좌표 쌍은 더 이상 적용되지 않고, 재배치된 터치면(110)에서의 픽셀들의 새로운 포지션들에 대응하도록 변경되어야 한다. 예를 들어, 터치면(110)이 +90°만큼 재배치되어, 좌측 상부 코너에 있는 픽셀(126)이 우측 상부 코너로 이동하게 되는 경우에는, 픽셀의 좌표 쌍 (0, 0)은 (0, ym)으로 변경될 수 있다. 유사하게, 터치면(110)이 180°만큼 재배치되어, 좌측 상부 코너에 있는 픽셀(126)이 우측 하부 코너로 이동하게 되는 경우에는, 픽셀의 좌표 쌍 (0, 0)은 (xn, ym)으로 변경될 수 있다. 좌표 쌍들을 변경하는 방법을 결정하기 위해서, 먼저 터치면이 어떻게 재배치되었는지에 대한 결정이 이루어질 수 있다. 다양한 실시예들에 따르면, 이러한 결정은 후술되는 바와 같이 터치면 상에서 행해진 제스처의 방위에 기초할 수 있다.
터치면이 데카르트 좌표들을 갖는 것으로 예시되어 있지만, 다양한 실시예들에 따라 다른 좌표들(예를 들어, 극좌표들)도 이용될 수 있다는 것을 이해해야 한다.
도 2는 다양한 실시예들에 따른 예시적인 터치면(그 위에서 제스처가 행해짐)을 도시한다. 도 2의 예에서, 사용자는, 사용자의 손(220)의 손가락들이 터치면에 걸쳐 펼쳐지는 터치 감응 디바이스(200)의 터치면(210) 상에서 제스처를 행할 수 있다.
도 3a 내지 도 3i는 다양한 실시예들에 따른 터치면 상에서 행해진 제스처들에 대한 예시적인 터치 위치들을 도시한다. 터치 위치들은 제스처들을 캡처하는 터치 이미지들에 예시되어 있다. 도 3a는 도 2의 손 제스처의 터치 이미지에서의 터치 위치들을 도시한다. 여기서, 엄지 손가락, 집게 손가락, 중지 손가락, 약지 손가락 및 새끼 손가락의 터치 위치들(301 내지 305)은 각각 터치 이미지(320)에 걸쳐 펼쳐진다. 도 3b는 4개의 손가락의 터치 위치들이 수평으로 정렬되는 손 제스처의 터치 위치들(301 내지 305)을 도시한다. 도 3c는 엄지 손가락과 4개의 손가락이 함께 가까이 있는 터치 위치들(301 내지 305)을 도시한다. 도 3d는 엄지 손가락 및 새끼 손가락 터치 위치들이 수평으로 정렬되도록 손이 우측으로 약간 회전되는 터치 위치들(301 내지 305)을 도시한다. 도 3e는 손가락들이 터치면의 최상부에 더 가까우며 엄지 손가락이 터치면 상에서 더 낮도록 손이 좌측으로 회전되는 터치 위치들(301 내지 305)을 도시한다. 도 3f는 모든 5개의 터치 위치들이 수평으로 정렬되는 터치 위치들(301 내지 305)을 도시한다. 도 3g는 엄지 손가락이 4개의 손가락 아래에 접어 넣어진 터치 위치들(301 내지 305)을 도시한다. 도 3h는 집게 손가락과 새끼 손가락은 펼쳐지며 중지 손가락과 약지 손가락은 구부러지는 터치 위치들(301 내지 305)을 도시한다. 도 3i는 엄지 손가락이 구부러진 중지 손가락 및 약지 손가락 아래에 접어 넣어진 것을 제외하고는 도 3h의 터치 위치들과 유사한 터치 위치들(301 내지 305)을 도시한다. 다른 터치 위치들도 가능하다. 제스처들의 방위는 터치 이미지들에서의 터치 위치들로부터 결정될 수 있고, 터치면이 재배치되었는지 여부를 판정하는데 이용될 수 있다.
도 4는 다양한 실시예들에 따른 터치면의 180° 재배치를 결정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출하는 예시적인 방법을 도시한다. 도 4의 예에서, 터치면 상에서 행해진 제스처의 터치 이미지가 캡처될 수 있고, 터치 이미지에서의 터치 위치들이 식별될 수 있다. 터치면 상의 최좌측 터치 위치 및 최우측 터치 위치로부터 베이스 벡터(base vector)가 결정될 수 있다(405). 몇몇 실시예들에서, 최좌측 터치 위치가 베이스 벡터 엔드포인트로서 지정될 수 있다. 다른 실시예들에서, 최우측 터치 위치가 베이스 벡터 엔드포인트로서 지정될 수 있다. 베이스 벡터는 임의의 알려진 벡터 계산 기법들을 이용하여 최좌측 터치 위치와 최우측 터치 위치 사이에 형성될 수 있다. 대부분의 경우에, 이들 터치 위치들은 엄지 손가락 및 새끼 손가락 터치들에 대응한다. 그렇지 않은 경우에는, 나중에 설명되는 바와 같이 부가적인 로직이 실행될 수 있다. 지정된 베이스 벡터 엔드포인트와 터치면 상의 나머지 터치 위치들 사이에 손가락 벡터들이 결정될 수 있다(410). 예를 들어, 베이스 벡터 엔드포인트가 엄지 손가락 터치 위치에 대응하고, 다른 베이스 벡터 포인트가 새끼 손가락 터치 위치에 대응하는 경우, 엄지 손가락 터치 위치와 집게 손가락 터치 위치 사이에 제1 손가락 벡터가 형성될 수 있고; 엄지 손가락 터치 위치와 중지 손가락 터치 위치 사이에 제2 손가락 벡터가 형성될 수 있으며; 엄지 손가락 터치 위치와 약지 손가락 터치 위치 사이에 제3 손가락 벡터가 형성될 수 있다. 손가락 벡터들은 임의의 알려진 벡터 계산 기법들을 이용하여 형성될 수 있다.
도 5a 및 도 5b는 다양한 실시예들에 따른 터치면의 재배치를 결정하는데 이용될 수 있는 터치면 상에서 행해진 제스처들에 대한 터치 위치들 사이의 예시적인 베이스 및 손가락 벡터들을 도시한다. 도 5a의 예는 도 3a의 터치 위치들 사이의 베이스 및 손가락 벡터들을 도시한다. 여기서, 베이스 벡터(515)는 벡터 엔드포인트로서 최좌측 위치를 가지면서 최좌측 터치 위치(엄지 손가락 위치(501))와 최우측 터치 위치(새끼 손가락 위치(505)) 사이에 형성될 수 있다. 손가락 벡터(512)는 벡터 엔드포인트로서 최좌측 터치 위치를 가지면서 최좌측 터치 위치와 인접하는 터치 위치(집게 손가락 위치(502)) 사이에 형성될 수 있다. 손가락 벡터(513)는 벡터 엔드포인트로서 최좌측 터치 위치를 가지면서 최좌측 터치 위치와 그 다음의 터치 위치(중지 손가락 위치(503)) 사이에 형성될 수 있다. 손가락 벡터(514)는 벡터 엔드포인트로서 최좌측 터치 위치를 가지면서 최좌측 터치 위치와 그 다음의 터치 위치(약지 손가락 위치(504)) 사이에 형성될 수 있다.
도 5a의 예에서, 터치 이미지의 좌측 상부 코너에 있는 오리지널 픽셀이 좌표 쌍 (0, 0)을 유지하며 우측 하부 코너에 있는 오리지널 픽셀이 좌표 쌍 (xn, ym)을 유지하도록 터치면은 재배치되지 않았다. 터치 위치들(501 내지 505)은 볼록한 방위를 갖는다. 이 예에서, 제스처는 오른손으로 행해진다. 유사한 왼손 제스처는 유사한 볼록한 방위를 갖는 좌우가 뒤바뀐 터치 위치들을 갖는다.
도 5b의 예는, 터치면이 180°만큼 재배치되었지만 픽셀 좌표들은 그에 따라 변경되지 않은 경우의 도 3a의 터치 위치들 사이의 베이스 및 손가락 벡터들을 도시한다. 따라서, 픽셀 좌표 (0, 0)에 대하여, 터치 위치들은 오목한 방위를 가지면서 터치 이미지에서 뒤집힌 것으로 보일 수 있다. 이와 같이, 벡터들은 아래로 지향될 수 있다. 베이스 벡터(515)는 벡터 엔드포인트로서 최좌측 위치를 가지면서 최좌측 터치 위치(새끼 손가락 위치(505))와 최우측 터치 위치(엄지 손가락 위치(501)) 사이에 형성될 수 있다. 손가락 벡터(512)는 벡터 엔드포인트로서 최좌측 터치 위치를 가지면서 최좌측 터치 위치와 인접하는 터치 위치(약지 손가락 위치(504)) 사이에 형성될 수 있다. 손가락 벡터(513)는 벡터 엔드포인트로서 최좌측 터치 위치를 가지면서 최좌측 터치 위치와 그 다음의 터치 위치(중지 손가락 위치(503)) 사이에 형성될 수 있다. 손가락 벡터(514)는 벡터 엔드포인트로서 최좌측 터치 위치를 가지면서 최좌측 터치 위치와 그 다음의 터치 위치(집게 손가락 위치(502)) 사이에 형성될 수 있다. 이 예에서, 제스처는 오른손으로 행해진다. 유사한 왼손 제스처는 유사한 오목한 방위를 갖는 좌우가 뒤바뀐 터치 위치들을 갖는다.
다시 도 4를 참조하면, 각각의 손가락 벡터와 베이스 벡터 사이에 외적들이 계산될 수 있다(415). 외적들의 합은 다음과 같이 터치 위치들의 방위를 나타내기 위해 계산될 수 있다(420). 합이 미리 결정된 포지티브 임계값을 초과하는지 여부에 대한 판정이 이루어질 수 있다(425). 몇몇 실시예들에서, 임계값은 +50㎠로 설정될 수 있다. 합이 미리 결정된 포지티브 임계값을 초과하는 경우에는, 이것은 터치 위치들의 방위가 픽셀 좌표들에 대하여 포지티브(또는 볼록)임을 나타낼 수 있는데, 이는 도 5a에서와 같이 터치면이 재배치되지 않았음을 나타낸다.
합이 포지티브 임계값을 초과하지 않는 경우에는, 합이 미리 결정된 네거티브 임계값 미만인지 여부에 대한 판정이 이루어질 수 있다(430). 몇몇 실시예들에서, 임계값은 -50㎠로 설정될 수 있다. 합이 미리 결정된 네거티브 임계값 미만인 경우에는, 이것은 터치 위치들의 방위가 픽셀 좌표들에 대하여 네거티브(또는 오목)임을 나타낼 수 있는데, 이는 도 5b에서와 같이 터치면이 180°만큼 재배치되었음을 나타낸다. 터치면이 재배치된 경우, 픽셀 좌표들은 180°만큼 회전될 수 있다(435). 예를 들어, 터치면의 좌측 상부 코너에서의 픽셀 좌표 (0, 0)은 터치면의 우측 하부 코너에서의 픽셀 좌표 (xn, ym)이 될 수 있고, 반대로 될 수도 있다.
합이 네거티브 임계값 미만이 아닌 경우에는, 방위는 정확히 규정될 수 없고, 픽셀 좌표들은 변경되지 않은 채로 유지된다.
픽셀 좌표들이 유지되거나 변경된 후에, 터치면은 터치면 애플리케이션들의 필요에 따라 사용자에 의한 다른 터치들 및/또는 제스처들을 위해 이용가능할 수 있다.
도 4의 방법은 여기서 예시된 것으로 한정되지는 않고, 터치면의 재배치를 결정하는데 이용될 수 있는 터치면 상에서 행해진 제스처의 방위를 검출하기 위한 부가적인 그리고/또는 다른 로직을 포함할 수 있다는 것을 이해해야 한다.
예를 들어, 몇몇 실시예들에서, 터치면을 터치하는 손가락들이 특정 거리보다 많이 이동하는 경우, 이것은 손가락들이 터치면의 재배치를 결정하기 위해 제스처하고 있지 않다는 표시일 수 있다. 몇몇 실시예들에서, 거리는 2㎝로 설정될 수 있다. 따라서, 도 4의 방법은 추가 프로세싱 없이 중단될 수 있다.
다른 실시예들에서, 손가락들이 특정 시간 내에 터치면을 탭(tap)한 다음에 리프트 오프(lift off)하는 경우, 이것은 손가락들이 터치면의 재배치를 결정하기 위해 제스처하고 있다는 표시일 수 있다. 몇몇 실시예들에서, 탭-리프트 시간은 0.5s로 설정될 수 있다. 따라서, 도 4의 방법은 실행될 수 있다.
몇몇 제스처들은, 도 4의 방법을 이용한 터치면 재배치가 어려울 수 있도록 모호할 수 있다. 도 3f에 예시된 제스처는 이러한 모호함의 일례이다. 터치 위치들이 수평으로 정렬되기 때문에, 결정된 베이스 및 손가락 벡터들은 또한 도 6a에 예시된 바와 같이 수평으로 정렬될 수 있다. 그 결과, 계산된 외적들은 0이고, 그것들의 합은 0이다. 0의 합은 미리 결정된 포지티브 임계값보다 작고, 미리 결정된 네거티브 임계값보다 커서, 방위가 정확히 규정될 수 없을 가능성이 있기 때문에, 도 4의 방법은 추가 프로세싱 없이 중단될 수 있다.
모호한 제스처의 다른 예가 도 3g에 예시되어 있다. (엄지 손가락보다는) 집게 손가락이 최좌측 터치 위치에 있기 때문에, 결정된 베이스 및 손가락 벡터들은 도 6b에 도시된 바와 같이 벡터 엔드포인트들로서 집게 손가락 터치 위치로 형성될 수 있다. 그 결과, 몇몇 계산된 외적들은 포지티브이고, 다른 것들은 네거티브이다. 도 6b의 예에서, 베이스 벡터(615)에 대한 손가락 벡터(613)의 외적 및 베이스 벡터(615)에 대한 손가락 벡터(614)의 외적은 포지티브이고, 베이스 벡터(615)에 대한 손가락 벡터(612)의 외적은 네거티브이다. 이것은 잘못된 보다 작은 외적들의 합을 초래할 수 있는데, 이는 방위가 정확히 규정될 수 없고 픽셀 좌표들이 변경되지 않은 채로 유지되도록 포지티브 임계값과 네거티브 임계값 사이에 있을 수 있다. 이 제스처 모호함을 처리하기 위해서, 도 4의 방법은 부가적인 로직을 포함할 수 있다. 예를 들어, 외적들이 계산된 후에, 외적들 모두가 포지티브인지 또는 네거티브인지에 대한 판정이 이루어질 수 있다. 그렇지 않으면, 도 4의 방법은 추가 프로세싱 없이 중단될 수 있다.
대안적으로, 도 3g의 제스처 모호함을 처리하기 위해서, 도 4의 방법은 의도된 바와 같이 집게 손가락 터치 위치보다는 엄지 손가락 터치 위치를 포함하도록 베이스 벡터를 재선택하기 위한 부가적인 로직을 포함할 수 있다. 일반적으로, 엄지 손가락 터치 위치는 제스처 중에 다른 손가락들보다 더 큰 터치면을 터치하는 엄지 손가락에 의해 터치 위치들 중에서 가장 높은 이심률(eccentricity)을 가질 수 있다. 따라서, 도 4의 방법에서 베이스 벡터가 결정된 후에, 가장 높은 이심률을 갖는 터치 위치가 임의의 알려진 적합한 기법을 이용하여 식별될 수 있다. 식별된 터치 위치가 베이스 벡터의 부분이 아닌 경우, 베이스 벡터는 최좌측 터치 위치 또는 최우측 터치 위치를 식별된 엄지 손가락 터치 위치로 대체하도록 재선택될 수 있다. 결과적인 베이스 벡터는 식별된 터치 위치(즉, 엄지 손가락 터치 위치)와 대체되지 않은 베이스 벡터 터치 위치(즉, 새끼 손가락 터치 위치) 사이에 형성될 수 있다. 도 4의 방법은 그 다음에 식별된 터치 위치와 나머지 터치 위치들 사이의 손가락 벡터들을 결정하는 것을 진행할 수 있고, 여기서 식별된 터치 위치는 손가락 벡터들의 엔드포인트일 수 있다.
대안적으로, 도 3g의 제스처 모호함을 처리하기 위해서, 도 4의 방법은 베이스 벡터에 대한 집게 손가락 선택을 적게 가중화함으로써 픽셀 좌표들이 잘못 변경될 가능성을 감소시키기 위한 부가적인 로직을 포함할 수 있다. 그렇게 하기 위해서, 도 4의 방법에서 외적들이 계산된 후에, 임의의 알려진 적합한 기법을 이용하여 베이스 벡터 터치 위치들 중에서 더 높은 이심률 터치 위치가 결정될 수 있다. 일반적으로, 베이스 벡터의 집게 손가락 터치 위치는 베이스 벡터의 새끼 손가락 터치 위치보다 더 높은 이심률을 가질 수 있는데, 그 이유는 집게 손가락 끝의 더 큰 사이즈가 터치 이미지 상의 더 큰 터치 위치를 생성하기 때문이다. 나머지 터치 위치들 중에서 가장 높은 이심률 터치 위치가 또한 임의의 알려진 적합한 기법을 이용하여 결정될 수 있다. 전술한 바와 같이, 엄지 손가락 터치 위치는 가장 높은 이심률을 가질 수 있다. 결정된 베이스 벡터의 더 높은 이심률 터치 위치와 나머지 터치 위치들의 결정된 이심률 터치 위치 사이의 비율이 컴퓨팅될 수 있다. 이 비율은 계산된 외적들 각각에 대해 가중치로서 적용될 수 있으며, 그에 따라 외적들의 합을 감소시킨다. 그 결과, 합은 미리 결정된 포지티브 임계값보다 작고, 미리 결정된 네거티브 임계값보다 클 수 있어, 방위는 정확히 규정될 수 없고, 픽셀 좌표들은 변경되지 않은 채로 유지된다.
모호한 제스처의 다른 예가 도 3h에 예시되어 있다. 중지 손가락 및 약지 손가락이 구부러져 있기 때문에, 그것들의 손가락 벡터들은 도 6c에 도시된 바와 같이 베이스 벡터에 가깝거나 그와 정렬될 수 있다. 그 결과, 그것들의 손가락 벡터들(613, 614)의 크기들은 집게 손가락에 대한 손가락 벡터(612)의 크기와 비교하여 작을 수 있다. 이 제스처 모호함을 처리하기 위해서, 도 4의 방법은 이 제스처의 식별 시에 중단하기 위한 부가적인 로직을 포함할 수 있다. 그렇게 하기 위해서, 도 4의 방법에서 베이스 및 손가락 벡터들이 결정된 후에, 손가락 벡터들의 크기들은 임의의 알려진 적합한 기법에 따라 계산될 수 있고, 가장 큰 것으로부터 가장 작은 것으로 순위가 매겨질 수 있다. 가장 큰 크기와 그 다음의 가장 큰 크기 사이의 제1 비율이 컴퓨팅될 수 있다. 그 다음의 가장 큰 크기와 가장 작은 크기 사이의 제2 비율이 또한 컴퓨팅될 수 있다. 제1 비율이 작고 제2 비율이 큰 경우, 제스처는 도 3h의 제스처 또는 유사한 모호한 제스처로서 식별될 수 있다. 따라서, 도 4의 방법은 추가 프로세싱 없이 중단될 수 있다.
모호한 제스처의 다른 예가 도 3i에 예시되어 있다. 이 제스처는 엄지 손가락이 손가락들 아래에 접어 넣어진 것을 제외하고는 도 3h의 제스처와 유사하다. 엄지 손가락이 접어 넣어져 있기 때문에, 집게 손가락 터치 위치는 도 6d에 도시된 바와 같이 베이스 벡터를 형성하는 최좌측 위치일 수 있다. 전술한 바와 같이, 베이스 벡터는 엄지 손가락 터치 위치를 포함하도록 재선택될 수 있다. 이것은, 중지 및 약지 손가락 벡터들이 재선택된 베이스 벡터에 가깝거나 그에 정렬되게 할 수 있다. 이러한 이유로, 손가락 벡터들의 크기 순위에 대하여 전술한 바와 같이, 도 4의 방법은 추가 프로세싱 없이 중단될 수 있다.
대안적으로, 도 3i의 제스처 모호함을 처리하기 위해서, 전술한 바와 같이, 베이스 벡터의 부분으로서 집게 손가락의 선택은 덜 가중화될 수 있으며, 이는 픽셀 좌표들이 잘못 변경될 가능성을 감소시킨다.
모호한 그리고/또는 다른 제스처들을 처리하기 위해서 대안적인 그리고/또는 부가적인 로직이 도 4의 방법에 적용될 수 있다는 것을 이해해야 한다.
도 7은 다양한 실시예들에 따른 터치면의 ±90° 재배치를 결정하기 위해서 터치면 상에서 행해진 제스처의 방위를 검출하는 예시적인 방법을 도시한다. 도 7의 예에서, 터치면 상에서 행해진 제스처의 터치 이미지가 캡처될 수 있고, 터치 이미지에서의 터치 위치들이 식별될 수 있다. 터치면 상에서 행해진 제스처의 터치 이미지에서의 터치 위치들의 둘레에 윈도우가 설정될 수 있다(705).
도 8은 터치면의 재배치를 결정하는데 이용될 수 있는 터치 이미지에서의 터치 위치들의 둘레의 예시적인 윈도우를 도시한다. 여기서, 터치 이미지(820)는 픽셀 좌표 (0, 0)이 이미지의 좌측 상부 코너에 있는 픽셀 좌표계를 포함한다. 이미지(820)는 터치면 상의 제스처에 의해 행해진 터치 위치들의 둘레의 윈도우(845)를 도시한다. 사용자는 터치면을 +90° 회전시켰고, 수직 포지션의 손으로 표면을 터치하고 있다. 그러나, 픽셀 좌표들이 터치면 재배치로 변경되지 않았기 때문에, 터치 이미지(820)는 수평 포지션에서 표면을 터치하는 손을 도시한다.
다시 도 7을 참조하면, 윈도우 높이가 윈도우 폭보다 큰지 여부에 대한 판정이 이루어질 수 있다(710). 윈도우 높이가 윈도우 폭보다 큰 경우에는, 도 8에서와 같이, 이것은 터치면이 ±90°만큼 회전되었다는 표시일 수 있다. 윈도우 높이가 윈도우 폭보다 크지 않은 경우에는, 방법은 중단될 수 있다.
엄지 손가락 위치가 벡터 엔드포인트들에 대해 지정될 수 있도록 엄지 손가락 터치 위치가 윈도우의 최상부에 있는지 또는 바닥부에 있는지에 대한 판정이 이루어질 수 있다(715). 이 판정은 임의의 알려진 적합한 기법을 이용하여 이루어질 수 있다. 베이스 벡터는 결정된 엄지 손가락 터치 위치와 윈도우의 반대측에 있는 터치 위치(즉, 새끼 손가락 터치 위치) 사이에 결정될 수 있다(720). 엄지 손가락 터치 위치가 윈도우의 최상부에 있는 경우에는, 베이스 벡터는 윈도우의 맨 아래의 터치 위치로 형성될 수 있다. 반대로, 엄지 손가락 터치 위치가 윈도우의 바닥부에 있는 경우에는, 베이스 벡터는 윈도우의 맨 위의 터치 위치로 형성될 수 있다. 손가락 벡터들은 결정된 엄지 손가락 위치와 나머지 터치 위치들 사이에 결정될 수 있다(725).
각각의 손가락 벡터와 베이스 벡터 사이에 외적들이 계산될 수 있다(730). 외적들의 합은 다음과 같이 터치 위치들의 방위를 나타내기 위해 계산될 수 있다(735). 합이 미리 결정된 포지티브 임계값을 초과하는지 여부에 대한 판정이 이루어질 수 있다(740). 몇몇 실시예들에서, 임계값은 +50㎠로 설정될 수 있다. 합이 미리 결정된 포지티브 임계값을 초과하는 경우에는, 이것은 터치 위치들의 방위가 픽셀 좌표들에 대하여 포지티브(또는 볼록)임을 나타낼 수 있는데, 이는 터치면이 +90°만큼 재배치되었음을 나타낸다. 따라서, 픽셀 좌표들은 +90°만큼 변경될 수 있다(745). 예를 들어, 터치면의 좌측 상부 코너에 있는 픽셀 좌표 (0, 0)은 터치면의 우측 상부 코너에 있는 픽셀 좌표 (0, ym)이 될 수 있다.
합이 포지티브 임계값을 초과하지 않는 경우에는, 합이 미리 결정된 네거티브 임계값 미만인지 여부에 대한 판정이 이루어질 수 있다(750). 몇몇 실시예들에서, 임계값은 -50㎠로 설정될 수 있다. 합이 미리 결정된 네거티브 임계값 미만인 경우에는, 이것은 터치 위치들의 방위가 픽셀 좌표들에 대하여 네거티브(또는 오목)임을 나타낼 수 있는데, 이는 터치면이 -90°만큼 재배치되었음을 나타낸다. 따라서, 픽셀 좌표들은 -90°만큼 변경될 수 있다(755). 예를 들어, 터치면의 좌측 상부 코너에 있는 픽셀 좌표 (0, 0)은 터치면의 좌측 하부 코너에 있는 픽셀 좌표 (xn, 0)이 될 수 있다.
합이 네거티브 임계값 미만이 아닌 경우에는, 방위는 정확히 규정될 수 없고, 픽셀 좌표들은 변경되지 않은 채로 유지된다.
픽셀 좌표들이 변경되거나 유지된 후에, 터치면은 터치면 애플리케이션들의 필요에 따라 사용자에 의한 다른 터치들 및/또는 제스처들을 위해 이용가능할 수 있다.
도 7의 방법은 여기에 예시된 것으로 한정되지는 않고, 터치면의 재배치를 결정하는데 이용될 수 있는 터치면 상에서 행해진 제스처의 방위를 검출하기 위한 부가적인 그리고/또는 다른 로직을 포함할 수 있다는 것을 이해해야 한다. 예를 들어, 도 7의 방법은 전술한 바와 같이 모호한 그리고/또는 다른 제스처들을 처리하기 위한 부가적인 로직을 포함할 수 있다.
본 명세서에 설명된 방법들은 다섯 손가락 제스처를 이용하지만, 다양한 실시예들에 따라 터치면의 재배치를 결정하기 위해서 터치면 상에서 행해진 제스처들에서 임의의 개수의 손가락들이 이용될 수 있다는 것을 이해해야 한다. 재배치를 결정하기 위한 제스처들은 본 명세서에 예시된 것으로 한정되지는 않는다는 것을 또한 이해해야 한다. 예를 들어, 제스처는 초기에 재배치를 결정한 다음에 애플리케이션의 실행을 트리거하는데 이용될 수 있다.
도 9는 본 명세서에 설명된 다양한 실시예들에 따른 예시적인 컴퓨팅 시스템(900)을 도시한다. 도 9의 예에서, 컴퓨팅 시스템(900)은 터치 컨트롤러(906)를 포함할 수 있다. 터치 컨트롤러(906)는, ARM968 프로세서들 또는 유사한 기능 및 능력들을 갖는 다른 프로세서들과 같은 하나 이상의 메인 프로세서들을 포함할 수 있는, 하나 이상의 프로세서 서브시스템들(902)을 포함할 수 있는 단일 ASIC(application specific integrated circuit)일 수 있다. 그러나, 다른 실시예들에서, 프로세서 기능은 대신에 상태 머신과 같은 전용 로직에 의해 구현될 수 있다. 프로세서 서브시스템들(902)은 또한 RAM(random access memory) 또는 다른 타입의 메모리나 스토리지, 워치독 타이머들 등과 같은 주변 장치들(도시되지 않음)을 포함할 수 있다. 터치 컨트롤러(906)는 또한 하나 이상의 감지 채널들(도시되지 않음)의 터치 신호들(903), 센서(911)와 같은 다른 센서들로부터의 다른 신호들 등과 같은 신호들을 수신하기 위한 수신 섹션(907)을 포함할 수 있다. 터치 컨트롤러(906)는 또한 멀티스테이지 벡터 복조 엔진과 같은 복조 섹션(909), 패널 스캔 로직(910), 및 패널을 구동하기 위해 터치 센서 패널(924)에 자극 신호들(916)을 송신하기 위한 송신 섹션(914)을 포함할 수 있다. 패널 스캔 로직(910)은 RAM(912)에 액세스하고, 자율적으로 감지 채널들로부터 데이터를 판독하고, 감지 채널들에 대해 제어를 제공할 수 있다. 또한, 패널 스캔 로직(910)은, 터치 센서 패널(924)의 로우들에 선택적으로 적용될 수 있는 다양한 주파수들 및 위상들에서 자극 신호들(916)을 발생시키도록 송신 섹션(914)을 제어할 수 있다.
터치 컨트롤러(906)는 또한 송신 섹션(914)을 위한 공급 전압을 발생시키는데 이용될 수 있는 충전 펌프(charge pump)(915)를 포함할 수 있다. 자극 신호들(916)은 충전 펌프(915)를 형성하기 위해 2개의 전하 저장 디바이스들(예를 들어, 캐패시터들)을 함께 캐스케이딩함으로써 최대 전압보다 높은 진폭들을 가질 수 있다. 따라서, 자극 전압은 단일 캐패시터가 핸들링할 수 있는 전압 레벨(예를 들어, 3.6V)보다 더 높을 수 있다(예를 들어, 6V). 도 9는 송신 섹션(914)과 별개로 충전 펌프(915)를 도시하지만, 충전 펌프는 송신 섹션의 부분일 수 있다.
터치 센서 패널(924)은 로우 트레이스들(row traces)(예를 들어, 구동 라인들) 및 칼럼 트레이스들(column traces)(예를 들어, 감지 라인들)을 갖는 용량성 감지 매체를 갖는 재배치가능한 터치면을 포함할 수 있지만, 다른 감지 매체 및 다른 물리적 구성들이 또한 이용될 수 있다. 로우 및 칼럼 트레이스들은 ITO(Indium Tin Oxide) 또는 ATO(Antimony Tin Oxide)와 같은 실질적으로 투명한 도전성 매체로부터 형성될 수 있지만, 구리와 같은 다른 투명한 그리고 불-투명한(non-transparent) 재료들도 이용될 수 있다. 트레이스들은 또한 인간의 눈에 실질적으로 투명할 수 있는 얇은 불-투명한 재료들로부터 형성될 수 있다. 몇몇 실시예들에서, 로우 및 칼럼 트레이스들은 서로 수직일 수 있지만, 다른 실시예들에서 다른 비-데카르트 방위들(non-Cartesian orientations)도 가능하다. 예를 들어, 극좌표계에서, 감지 라인들은 동심원들일 수 있고, 구동 라인들은 방사상으로 연장되는 라인들일 수 있다(또는 그 반대일 수 있다). 따라서, 본 명세서에서 이용된 바와 같은 "로우" 및 "칼럼"이라는 용어들은 직교 격자들뿐만 아니라, 제1 및 제2 치수들(dimensions)을 갖는 다른 기하학적 구성들의 교차하거나 인접하는 트레이스들(예를 들어, 극좌표 배열의 동심 및 방사상 라인들)을 포함하는 것으로 의도된다는 것을 이해해야 한다. 로우들 및 칼럼들은 예를 들어 실질적으로 투명한 유전체 재료에 의해 분리되는 실질적으로 투명한 기판의 단일 측면 상에, 기판의 반대 측면들 상에, 유전체 재료에 의해 분리되는 2개의 별개의 기판들 상에 형성되거나 할 수 있다.
트레이스들이 서로의 위 및 아래로 지나가거나(교차함) 또는 인접하는 경우(그러나 서로 직접적으로 전기적 접촉을 하지 않음), 트레이스들은 본질적으로 2개의 전극들을 형성할 수 있다(3개 이상의 트레이스가 또한 교차할 수 있음). 로우 및 칼럼 트레이스들의 각각의 교점 또는 이웃은 용량성 감지 노드를 표현할 수 있고, 픽처 요소(픽셀)(926)로서 간주될 수 있는데, 이는 특히 터치 센서 패널(924)이 터치의 "이미지"를 캡처하는 것으로서 간주되는 경우에 유용할 수 있다. (다시 말하면, 터치 이벤트가 터치 센서 패널의 각각의 터치 센서에서 검출되었는지 여부를 터치 컨트롤러(906)가 판정한 후에, 터치 이벤트가 발생한 멀티-터치 패널에서의 터치 센서들의 패널은 터치의 "이미지"(예를 들어, 패널을 터치하는 손가락들의 패턴)로서 간주될 수 있다.) 로우와 칼럼 전극들 사이의 캐패시턴스는, 주어진 로우가 직류(DC) 전압 레벨들에 유지되는 경우에는 표유 캐패시턴스(stray capacitance) Cstray로서 그리고 주어진 로우가 교류(AC) 신호로 자극되는 경우에는 상호 신호 캐패시턴스(mutual signal capacitance) Csig로서 나타날 수 있다. 터치 센서 패널 근처 또는 위의 손가락이나 다른 물체의 존재는 Csig의 함수일 수 있는 터치되는 픽셀들에 존재하는 신호 전하 Qsig에 대한 변화들을 측정함으로써 검출될 수 있다. 신호 전하 Qsig는 또한 접지에 대한 손가락 또는 다른 물체의 캐패시턴스 Cbody의 함수일 수 있다.
컴퓨팅 시스템(900)은, 프로세서 서브시스템들(902)로부터 출력들을 수신하고, 커서 또는 포인터와 같은 물체의 이동, 스크롤링 또는 패닝(panning), 제어 설정들의 조정, 파일 또는 문서 열기, 메뉴 보기, 선택하기, 명령어들의 실행, 호스트 디바이스에 연결된 주변 디바이스를 동작시키기, 전화 통화에 답하기, 전화 통화하기, 전화 통화 종료하기, 볼륨 또는 오디오 설정들을 변경하기, 주소들, 자주 다이얼링된 번호들, 수신 통화들, 부재중 통화들과 같은 전화 통신에 관련된 정보를 저장하기, 컴퓨터 또는 컴퓨터 네트워크에 로그온하기, 컴퓨터 또는 컴퓨터 네트워크의 제한된 영역들에 대한 액세스를 인가된 개인들에 허용하기, 컴퓨터 데스크톱의 사용자의 선호 구성과 연관된 사용자 프로파일을 로딩하기, 웹 콘텐츠에 대한 액세스를 허용하기, 특정 프로그램 론칭하기, 및/또는 메시지의 암호화나 디코딩 등을 포함하지만 이것들로 한정되지는 않는 동작들을 출력들에 기초하여 수행하기 위한 호스트 프로세서(928)를 더 포함할 수 있다. 호스트 프로세서(928)는 또한 패널 프로세싱에 관련되지 않을 수 있는 부가적인 기능들을 수행할 수 있고, 프로그램 스토리지(932), 및 디바이스의 사용자에게 UI를 제공하기 위한 LCD 디스플레이와 같은 디스플레이 디바이스(930)에 연결될 수 있다. 몇몇 실시예들에서, 호스트 프로세서(928)는 도시된 바와 같이 터치 컨트롤러(906)와 별개의 컴포넌트일 수 있다. 다른 실시예들에서, 호스트 프로세서(928)는 터치 컨트롤러(906)의 부분으로서 포함될 수 있다. 또 다른 실시예들에서, 호스트 프로세서(928)의 기능들은 프로세서 서브시스템(902)에 의해 수행될 수 있고/있거나, 터치 컨트롤러(906)의 다른 컴포넌트들 사이에 분산될 수 있다. 터치 센서 패널(924)과 함께 디스플레이 디바이스(930)는, 터치 센서 패널 아래에 부분적으로 또는 완전히 위치하는 경우에 또는 터치 센서 패널과 통합되는 경우에 터치 스크린과 같은 터치 감응 디바이스를 형성할 수 있다.
터치 센서 패널(924)과 같은 터치면의 재배치를 결정하기 위한 제스처 방위의 검출은 다양한 실시예들에 따라 서브시스템(902)의 프로세서, 호스트 프로세서(928), 상태 머신과 같은 전용 로직, 또는 이들의 임의의 조합에 의해 수행될 수 있다.
전술한 기능들 중 하나 이상은 예를 들어 메모리(예를 들어, 주변 장치들 중 하나)에 저장되고 프로세서 서브시스템(902)에 의해 실행되거나 또는 프로그램 스토리지(932)에 저장되고 호스트 프로세서(928)에 의해 실행되는 펌웨어에 의해 수행될 수 있다는 것에 주목한다. 또한, 펌웨어는, 명령어 실행 시스템, 장치 또는 디바이스로부터 명령어들을 인출하고 명령어들을 실행할 수 있는 컴퓨터 기반 시스템, 프로세서 포함 시스템 또는 다른 시스템과 같은, 명령어 실행 시스템, 장치 또는 디바이스에 의해 또는 그와 접속하여 이용하기 위한 임의의 컴퓨터 판독가능 저장 매체 내에서 저장되고/되거나 전송될 수 있다. 본 문헌의 콘텍스트에서, "컴퓨터 판독가능 저장 매체"는 명령어 실행 시스템, 장치 또는 디바이스에 의해 또는 그와 접속하여 이용하기 위한 프로그램을 포함하거나 저장할 수 있는 임의의 매체일 수 있다. 컴퓨터 판독가능 저장 매체는 전자, 자기, 광학, 전자기, 적외선 또는 반도체 시스템, 장치 또는 디바이스, 휴대용 컴퓨터 디스켓(자기), RAM(random access memory)(자기), ROM(read-only memory)(자기), EPROM(erasable programmable read-only memory)(자기), CD, CD-R, CD-RW, DVD, DVD-R 또는 DVD-RW와 같은 휴대용 광학 디스크, 또는 콤팩트 플래시 카드, 보안 디지털 카드, USB 메모리 디바이스, 메모리 스틱 등과 같은 플래시 메모리를 포함할 수 있지만, 이들에 한정되지는 않는다.
또한, 펌웨어는, 명령어 실행 시스템, 장치 또는 디바이스로부터 명령어들을 인출하고 명령어들을 실행할 수 있는 컴퓨터 기반 시스템, 프로세서 포함 시스템 또는 다른 시스템과 같은, 명령어 실행 시스템, 장치 또는 디바이스에 의해 또는 그와 접속하여 이용하기 위한 임의의 전송 매체(transport medium) 내에서 전파될 수 있다. 본 문헌의 콘텍스트에서, "전송 매체"는 명령어 실행 시스템, 장치 또는 디바이스에 의해 또는 그와 접속하여 이용하기 위한 프로그램을 통신, 전파 또는 전송할 수 있는 임의의 매체일 수 있다. 전송 매체는 전자, 자기, 광학, 전자기 또는 적외선 유선 또는 무선 전파 매체를 포함할 수 있지만, 이들에 한정되지는 않는다.
터치 센서 패널은 도 9에 설명된 바와 같이 터치로 한정되지는 않고, 다양한 실시예들에 따른 근접 패널(proximity panel) 또는 임의의 다른 패널일 수 있다는 것을 이해해야 한다. 또한, 본 명세서에 설명된 터치 센서 패널은 멀티-터치 센서 패널일 수 있다.
또한, 컴퓨팅 시스템은 도 9의 컴포넌트들 및 구성으로 한정되지는 않고, 다양한 실시예들에 따라 재배치가능한 터치면들에 대한 제스처 방위를 검출할 수 있는 다양한 구성들에서의 다른 그리고/또는 부가적인 컴포넌트들을 포함할 수 있다는 것을 이해해야 한다.
실시예들은 첨부 도면들을 참조하여 완전히 설명되었지만, 다양한 변경들 및 수정들이 당업자에게 명백해질 것이라는 것에 주목해야 한다. 이러한 변경들 및 수정들은 첨부된 특허청구범위에 의해 정의된 바와 같이 다양한 실시예들의 범위 내에 포함되는 것으로서 이해되어야 한다.

Claims (1)

  1. 제1항에 기재된 장치.
KR1020177017932A 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출 KR20170081281A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/609,982 US20110102333A1 (en) 2009-10-30 2009-10-30 Detection of Gesture Orientation on Repositionable Touch Surface
US12/609,982 2009-10-30
PCT/US2010/053440 WO2011053496A1 (en) 2009-10-30 2010-10-20 Detection of gesture orientation on repositionable touch surface

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020147002821A Division KR20140022477A (ko) 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출

Publications (1)

Publication Number Publication Date
KR20170081281A true KR20170081281A (ko) 2017-07-11

Family

ID=43417100

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020147002821A KR20140022477A (ko) 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출
KR1020127010642A KR101521337B1 (ko) 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출
KR1020177017932A KR20170081281A (ko) 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020147002821A KR20140022477A (ko) 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출
KR1020127010642A KR101521337B1 (ko) 2009-10-30 2010-10-20 재배치가능한 터치면 상의 제스처 방위의 검출

Country Status (5)

Country Link
US (1) US20110102333A1 (ko)
EP (1) EP2494431A1 (ko)
KR (3) KR20140022477A (ko)
CN (2) CN102597942A (ko)
WO (1) WO2011053496A1 (ko)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US20120060127A1 (en) * 2010-09-06 2012-03-08 Multitouch Oy Automatic orientation of items on a touch screen display utilizing hand direction
US8593421B2 (en) 2011-03-22 2013-11-26 Adobe Systems Incorporated Local coordinate frame user interface for multitouch-enabled devices
US8553001B2 (en) * 2011-03-22 2013-10-08 Adobe Systems Incorporated Methods and apparatus for determining local coordinate frames for a human hand
US9671954B1 (en) * 2011-07-11 2017-06-06 The Boeing Company Tactile feedback devices for configurable touchscreen interfaces
US20130019201A1 (en) * 2011-07-11 2013-01-17 Microsoft Corporation Menu Configuration
WO2013076824A1 (ja) * 2011-11-22 2013-05-30 パイオニア株式会社 タッチパネル装置における情報処理方法、および、タッチパネル装置
US8796566B2 (en) 2012-02-28 2014-08-05 Grayhill, Inc. Rotary pushbutton and touchpad device and system and method for detecting rotary movement, axial displacement and touchpad gestures
US9494973B2 (en) * 2012-05-09 2016-11-15 Blackberry Limited Display system with image sensor based display orientation
TW201349046A (zh) * 2012-05-30 2013-12-01 Cross Multimedia Inc 觸控感應輸入系統
US9632606B1 (en) * 2012-07-23 2017-04-25 Parade Technologies, Ltd. Iteratively adjusting estimated touch geometries of estimated touches to sequential estimated actual touches
KR101495591B1 (ko) * 2013-10-08 2015-02-25 원투씨엠 주식회사 정전식 터치 인증 방법
KR101507595B1 (ko) * 2013-08-29 2015-04-07 유제민 제스처를 이용한 기능 실행 방법 및 이를 위한 휴대용 전자 장치
KR102206053B1 (ko) * 2013-11-18 2021-01-21 삼성전자주식회사 입력 도구에 따라 입력 모드를 변경하는 전자 장치 및 방법
US10817172B2 (en) * 2015-03-27 2020-10-27 Intel Corporation Technologies for graphical user interface manipulations using multi-finger touch interactions
WO2017151136A1 (en) * 2016-03-03 2017-09-08 Hewlett-Packard Development Company, L.P. Input axis rotations
US11797100B1 (en) * 2022-09-23 2023-10-24 Huawei Technologies Co., Ltd. Systems and methods for classifying touch events based on relative orientation

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4561066A (en) * 1983-06-20 1985-12-24 Gti Corporation Cross product calculator with normalized output
US5483261A (en) * 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5488204A (en) * 1992-06-08 1996-01-30 Synaptics, Incorporated Paintbrush stylus for capacitive touch sensor pad
US5880411A (en) * 1992-06-08 1999-03-09 Synaptics, Incorporated Object position detector with edge motion feature and gesture recognition
US5825352A (en) * 1996-01-04 1998-10-20 Logitech, Inc. Multiple fingers contact sensing method for emulating mouse buttons and mouse operations on a touch sensor pad
US5835079A (en) * 1996-06-13 1998-11-10 International Business Machines Corporation Virtual pointing device for touchscreens
US6310610B1 (en) * 1997-12-04 2001-10-30 Nortel Networks Limited Intelligent touch display
US7663607B2 (en) * 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6323846B1 (en) * 1998-01-26 2001-11-27 University Of Delaware Method and apparatus for integrating manual input
US6188391B1 (en) * 1998-07-09 2001-02-13 Synaptics, Inc. Two-layer capacitive touchpad and method of making same
JP2003173237A (ja) * 2001-09-28 2003-06-20 Ricoh Co Ltd 情報入出力システム、プログラム及び記憶媒体
US6690387B2 (en) * 2001-12-28 2004-02-10 Koninklijke Philips Electronics N.V. Touch-screen image scrolling system and method
US20030184525A1 (en) * 2002-03-29 2003-10-02 Mitac International Corp. Method and apparatus for image processing
US11275405B2 (en) * 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
US7814419B2 (en) * 2003-11-26 2010-10-12 Nokia Corporation Changing an orientation of a user interface via a course of motion
US20050219558A1 (en) * 2003-12-17 2005-10-06 Zhengyuan Wang Image registration using the perspective of the image rotation
US7728821B2 (en) * 2004-08-06 2010-06-01 Touchtable, Inc. Touch detecting interactive display
JP2006072872A (ja) * 2004-09-06 2006-03-16 Matsushita Electric Ind Co Ltd 携帯型情報処理装置、情報処理装置の画面回転方法および合成データ回転方法
CN101180599A (zh) * 2005-03-28 2008-05-14 松下电器产业株式会社 用户界面系统
JP4309871B2 (ja) * 2005-06-14 2009-08-05 株式会社東芝 情報処理装置、方法及びプログラム
WO2007082037A2 (en) * 2006-01-10 2007-07-19 Cirque Corporation Touchpad control of character actions in a virtual environment using gestures
US9075441B2 (en) * 2006-02-08 2015-07-07 Oblong Industries, Inc. Gesture based control using three-dimensional information extracted over an extended depth of field
FR2898833B1 (fr) * 2006-03-23 2008-12-05 Conception & Dev Michelin Sa Liaison au sol pour vehicule
JP2008052062A (ja) * 2006-08-24 2008-03-06 Ricoh Co Ltd 表示装置、表示装置の表示方法、プログラム及び記録媒体
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US7978182B2 (en) * 2007-01-07 2011-07-12 Apple Inc. Screen rotation gestures on a portable multifunction device
US8125458B2 (en) * 2007-09-28 2012-02-28 Microsoft Corporation Detecting finger orientation on a touch-sensitive device
US20090101415A1 (en) * 2007-10-19 2009-04-23 Nokia Corporation Apparatus, method, computer program and user interface for enabling user input
US20090174679A1 (en) * 2008-01-04 2009-07-09 Wayne Carl Westerman Selective Rejection of Touch Contacts in an Edge Region of a Touch Surface

Also Published As

Publication number Publication date
KR20120056889A (ko) 2012-06-04
CN107741824B (zh) 2021-09-10
WO2011053496A1 (en) 2011-05-05
US20110102333A1 (en) 2011-05-05
CN102597942A (zh) 2012-07-18
KR20140022477A (ko) 2014-02-24
CN107741824A (zh) 2018-02-27
KR101521337B1 (ko) 2015-05-18
EP2494431A1 (en) 2012-09-05

Similar Documents

Publication Publication Date Title
KR101521337B1 (ko) 재배치가능한 터치면 상의 제스처 방위의 검출
US8446374B2 (en) Detecting a palm touch on a surface
US10359884B2 (en) Ground detection for touch sensitive device
US9904410B2 (en) Touch-sensitive button with two levels
EP2359224B1 (en) Generating gestures tailored to a hand resting on a surface
US20170371511A1 (en) Speed/positional mode translations
US8928635B2 (en) Active stylus
US8054300B2 (en) Capacitive sensor panel having dynamically reconfigurable sensor size and shape
US9569045B2 (en) Stylus tilt and orientation estimation from touch sensor panel images
EP2168033A2 (en) Techniques for reducing jitter for taps
US9690417B2 (en) Glove touch detection
US8947378B2 (en) Portable electronic apparatus and touch sensing method
US11614839B2 (en) Balanced mutual capacitance systems and methods

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
E902 Notification of reason for refusal