KR100260866B1 - 터치스크린포인팅디바이스의분리를위한방법및시스템 - Google Patents

터치스크린포인팅디바이스의분리를위한방법및시스템 Download PDF

Info

Publication number
KR100260866B1
KR100260866B1 KR1019970042565A KR19970042565A KR100260866B1 KR 100260866 B1 KR100260866 B1 KR 100260866B1 KR 1019970042565 A KR1019970042565 A KR 1019970042565A KR 19970042565 A KR19970042565 A KR 19970042565A KR 100260866 B1 KR100260866 B1 KR 100260866B1
Authority
KR
South Korea
Prior art keywords
finger
pointing device
user
virtual pointing
touchscreen
Prior art date
Application number
KR1019970042565A
Other languages
English (en)
Other versions
KR19980032331A (ko
Inventor
조니 엠. 쉬에
Original Assignee
포만 제프리 엘
인터내셔널 비지네스 머신즈 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 포만 제프리 엘, 인터내셔널 비지네스 머신즈 코포레이션 filed Critical 포만 제프리 엘
Publication of KR19980032331A publication Critical patent/KR19980032331A/ko
Application granted granted Critical
Publication of KR100260866B1 publication Critical patent/KR100260866B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04801—Cursor retrieval aid, i.e. visual aspect modification, blinking, colour changes, enlargement or other visual cues, for helping user do find the cursor in graphical user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

장치, 방법 및 메모리는 적어도 터치스크린을 갖는 컴퓨터 시스템을 지시하여 가상 포인팅 디바이스의 적어도 일부를 분리(breakaway)한다. 상기 방법은 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하는 것을 포함하고, 제1 커서는 상기 가상 포인팅 디바이스와 연관되어 있다. 상기 방법은 또한 가상 포인팅 디바이스의 적어도 제1 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스의 검출에 응답하여, 터치스크린 상을 따라 손가락 또는 스타일러스가 이동함에 따라 가상 포인팅 디바이스의 제1 부분만을 분리하는 것을 포함한다. 적어도 제1 기능은 상기 제1 부분과 연관되어 있다.

Description

터치스크린 포인팅 디바이스의 분리를 위한 방법 및 시스템{Breakaway Touchscreen Pointing Device}
본 발명은 포인팅 디바이스 및 포인터(pointing devices and pointers)에 관한 것으로, 더 상세하게는 제한없이 터치스크린 시스템 상에서 사용하기 위한 포인팅 디바이스에 관한 것이다.
종래, 사용자는 "마우스"를 사용하여 데스크톱 및 그 컴퓨터 시스템의 오퍼레이팅 시스템과 인터페이스한다. 마우스는 유선 또는 적외선 신호에 의해 컴퓨터 시스템에 접속된 특수한 하드웨어 입력 디바이스이다. 전형적으로, 상기 마우스는 그 상부에 하나 이상의 푸시 버튼과 그 바닥에 컴퓨터 시스템 옆의 표면을 따라 롤(roll along a surface)하도록 설계된 롤러를 갖는다. 사용자가 마우스의 롤러를 표면 위에서 이동할 때, 컴퓨터 시스템의 디스플레이 상에 위치된 마우스 포인터는 마우스의 롤러의 이동을 트랙(tracks)한다. 사용자가 포인터를 오브젝트의 위와 같은 소정의 위치에 위치시키면, 사용자는 마우스가 프로그램되어 있는 방식에 따라 오브젝트를 불러 들이거나 오픈(invoke or open the object)하기 위해 마우스 푸시 버튼중 하나를 클릭하거나 또는 여러번 클릭한다.
사용자는 마우스 및 마우스 포인터의 동작을 커스텀화(customize)할 수 있다. 종래의 일부 오퍼레이팅 시스템에 의해 유지되는 커스텀화 메뉴를 통해, 사용자는 예를 들어 하나의 기능(a first function)을 불러오기 위해 한 마우스 버튼의 한번의 클릭의 지정(the assignment of a single click of a first moue button)과, 다른 기능(a second function)을 불러오기 위해 다른 마우스 버튼의 한번의 클릭의 지정을 커스텀화할 수 있다. 또한, 사용자는 마우스 포인터를 디스플레이 스크린 상에 나타내는 것을 커스텀화할 수 있다. 예를 들어, 한 사용자는 마우스 포인터가 작은 화살표로 표시되기를 선호하는 반면에, 다른 사용자는 마우스 포인터가 깜박이는 큰 화살표로 표시되기를 선호할 수 있다. 이와 유사하게, 일부 사용자는 고속의 마우스 포인터(즉, 마우스 롤러를 적게 움직여도 마우스 포인터가 크게 이동하는)를 선호하는 반면에, 다른 사용자는 저속의 마우스 포인터를 선호할 수 있다. 이와 같은 특징은 마우스 포인터의 "민감도(sensitivity)"라고 불리운다.
이와 같은 유형의 마우스 및 마우스 포인터 동작이 각각의 개별적인 사용자를 위해 커스텀화될 수 있다. 그러나, 대부분의 오퍼레이팅 시스템은 한 시스템 상에서 오로지 하나의 사용자를 위해서만 커스텀화를 제공할 수 있다. 따라서, 다수-사용자 시스템의 경우, 사용자는 이전의 셋팅으로부터 마우스를 다시 커스텀화하여야만 한다. 이것은 전형적으로 사용자가 버튼 동작을 특수한 기능에 맵핑하는 마우스 셋팅 화일 또는 국부 데이타베이스(the user editing a mouse setting file or local database)를 편집하는 것을 포함한다. X11과 같은 일부 시스템은 이것을 수행하기 위한 특수한 init 화일을 갖는다.
종래의 마우스는 몇 가지 단점 및 한계가 있다. 예를 들어, 마우스는 손이 매우 작거나 매우 큰 사람 모두가 마우스를 적절히 사용할 수 없도록 부피가 크고,크기가 고정되어 있으며, 컴퓨터 시스템에 영구히 고정되어 있지 않으며, 부식되며,마우스를 사용하는 사용자가 특수한 마우스 동작(즉, 어떤 마우스 버튼과 몇 번의 클릭으로 기능이 호출되는 가)을 알 것을 필요로 한다. 따라서, 많은 고객 지향시스템(즉, ATM 머신)과 다수-사용자 시스템은 마우스를 사용하지 않는다. 대신에, 다수-사용자 시스템의 추세는 터치스크린을 사용하는 것이다.
종래의 터치스크린에서는 종래의 마우스 및 마우스 포인터 대신에 사용자의 손가락 또는 포인팅 디바이스 (예를 들면, 스타일러스(stylus))를 사용할 수 있게 한다. 예를 들어, 종래의 터치스크린은 열에 민감하고(heat sensitive), 소리에 민감하며, 압력에 민감하거나 또는 이동에 민감한 그리드/검출기를 이용하여 터치스크린 상에 놓인 손, 손가락, 또는 스타일러스를 검출한다. 그러나, 종래의 터치스크린은 몇 가지 한계와 단점이 있다. 예를 들어, 마우스 포인터와는 달리, 손가락은 크기가 다르며, 따라서, 데스크톱은 가장 큰 손가락을 수용하기 위해 연속하는 오브젝트 아이콘과 텍스트를 멀리 떨어져 위치시켜야만 한다. 또한, 사용자는 종래의 마우스와 마우스 포인터에서 발견되는 것과 같은 커스텀화 특징을 선택할 수 없다. 더우기, 하나의 포인팅 디바이스와 커서만이 존재하기 때문에, 컷(cut) 및 페이스트와 같은 임의의 기능을 터치스크린으로 수행하기가 힘들다.
따라서, 오브젝트 아이콘이 상호 가까이 놓이는 것을 가능하게 하며 사용자 커스텀화를 가능하게 하면서 터치스크린 기술을 이용하는 새로운 포인팅 디바이스의 요구가 절실하다. 사용자 커스텀화는 포인팅 디바이스를 몇개의 브랜치(branches)로 스플릿/분리(split/breakway)하는 능력을 가지며, 이로 인해 컷과 페이스트와 같은 기능이 보다 용이하게 수행되게 한다.
장치, 방법 및 메모리는 적어도 터치스크린을 갖는 컴퓨터 시스템을 지시하여 가상 포인팅 디바이스의 하나 이상의 일부를 분리(breakaway)한다. 상기 방법은 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하는 제1 단계를 구비한다. 상기 가상 포인팅 디바이스는 기능을 호출하도록 설계된 활성화된 영역인 하나 이상의 손가락 지문 (또는 스타일러스) 터치패드로서 간주될 수 있다. 디스플레이되고 가상 포인팅 디바이스와 연관된 커서는 예를 들면 오브젝트 아이콘 상에 위치될 수 있다. 사용자가 손가락 지문 영역을 불러 들이면, 상기 손가락 지문 영역과 연관된 기능이 오브젝트 아이콘으로 향해질 것이다. 따라서, 상기 방법은 또한 가상 포인팅 디바이스의 적어도 제1 부분 (예를 들면, 손가락 지문 영역) 상에 놓인 적어도 하나의 손가락 또는 스타일러스의 검출에 응답하여, 터치스크린을 따른 손가락 또는 스타일러스의 움직임에 따라 가상 포인팅 디바이스의 제1 부분만을 분리하는 제2 단계를 구비하고, 이때에 적어도 제1 기능은 제1 부분과 연관되어 있다.
도 1은 본 발명과 함께 사용하기 위한 종래의 하드웨어 구성을 도시하는 도면.
도 2는 본 발명에 따른 가상 포인팅 디바이스(a virtual pointing device)를 도시하는 도면.
도 3은 본 발명에 따른 단계들을 수행하기 위한 순서도 형태의 세부 논리도.
도 4는 도 2에 도시된 가상 포인팅 디바이스의 변형도.
도 5는 도 2에 도시된 가상 포인팅 디바이스의 다른 도면.
도 6은 본 발명에 따른 가상 포인팅 디바이스의 특성을 정의하기 위한 메뉴도.
도 7은 본 발명에 따른 형태 메뉴(a shape menu), 기능 정의 메뉴(define functionality menu), 및 포인터 정의 메뉴(define pointer menu)를 도시하는 도면.
도 8은 본 발명에 따른 단계들을 수행하기 위한 순서도 형태의 세부 논리도.
도 9는 본 발명에 따른 단계들을 수행하기 위한 순서도 형태의 세부 논리도.
도 10은 사용자의 손가락에 의해 폴더 오브젝트(folder object) 위의 그 현재 위치로 드래그되었던 분리 손가락 지문 터치패드(breakaway fingerprint touchpad)를 도시하는 도면.
도 11은 스플릿 포인터 기능(split pointer functionality)을 구현하는 이벤트-구동 순서도의 형태의 상세 논리도.
도 12는 가상 포인팅 디바이스 상으로 다시 합체(regrown)되어, 분리 손가락 지문을 교체하는 손가락 지문 터치패드를 도시하는 도면.
<도면의 주요 부분에 대한 부호의 설명>
12 : 시스템 버스
100 : 컴퓨팅 시스템
200 : 터치스크린
210 : 손바닥 지문 영역
215 : 엄지 손가락 지문 영역
215, 220, 230, 235, 240, 280, 420, 430, 435, 440, 1020, 1200 : 손가락 지문 영역
250, 450 : 포인터
422 : 오브젝트 아이콘
600 : 디스플레이 주 메뉴
620 : 형태 메뉴
640 : 스플릿 포인터 버튼
1000 : 가상 포인팅 디바이스
1022 : 커서
1030 : 폴더 오브젝트
1060 : 중지 버튼
바람직한 실시예는 터치스크린을 이용하며, 도 1에 도시된 컴퓨팅 시스템(100)과 같은 임의의 적당한 하드웨어 컨피그레이션에서 또는 선택적으로 랩톱 또는 노트패드 컴퓨팅 시스템에서 실시될 수 있다. 컴퓨팅 시스템(100)은 표준 마이크로프로세서와 같은 임의의 적당한 중앙 처리 장치(10), 및 시스템 버스(12)를 거쳐 상호 접속된 임의의 수의 다른 오브젝트를 구비한다. 예시하기 위해, 컴퓨팅 시스템(100)은 판독 전용 메모리(ROM)(16), 랜덤 액세스 메모리(RAM)(14), 및 I/O 어댑터(18)를 거쳐 시스템 버스(12)에 접속된 주변 메모리 디바이스(즉, 디스크 또는 테이프 드라이브(20))와 같은 메모리를 포함한다. 컴퓨팅 시스템(100)은 시스템 버스(12)를 종래의 터치스크린 디스플레이 디바이스(38)에 접속시키기 위한 터치스크린 디스플레이 어댑터(36)를 더 구비한다. 또한, 사용자 인터페이스 어댑터(22)는 시스템 버스(12)를 키보드(24), 스피커(28), 마우스(26) 및 터치패드(32) (도시되지 않음)와 같은 다른 사용자 제어장치에 접속시킬 수 있다.
본 기술 분야의 숙련자는 종래의 터치스크린의 동작 방법, 종래의 터치스크린 디바이스 드라이버와 오퍼레이팅 시스템의 통신 방법, 및 사용자가 터치스크린을 이용하여 그래픽 사용자 인터페이스에서 오브젝트의 조작을 초기화시키는 종래 방법을 익히 알고 있다. 예를 들어, 터치스크린 기술은 컴퓨터 스크린을 덮는 가요성 멤브레인(a flexible membrane) 내부에 위치된 전자 센서, 적외선 신호의 그리드, 또는 유리 또는 플라스틱을 통해 반사된 음파의 변화를 감지함으로서 접촉(touch)을 검출하는 방법을 포함한다. 현재의 터치스크린 기술을 사용하여, 사용자는 터치스크린을 접촉한 다음, 손가락을 풀다운 메뉴 아래로 드래그하여 해당 메뉴 내의 오브젝트를 선택함으로서 풀 다운 메뉴의 디스플레이를 초기화시킬 수 있다.
바람직한 실시예의 그래픽 사용자 인터페이스(GUI)와 오퍼레이팅 시스템은 컴퓨터 판독가능 매체 내에 놓이며, 하나 이상의 사용자 또는 한 사용자로 하여금 터치스크린 디스플레이 디바이스 상에 디스플레이된 오브젝트 아이콘과 텍스트의 조작을 초기화시킬 수 있게 하는 터치스크린 디바이스 드라이버를 구비한다. ROM(16), RAM(14), 디스크 및/또는 테이프 드라이브(20)(즉, 자기 디스켓, 자기 테이프, CD-ROM, 광 디스크 또는 다른 적당한 기억 매체)와 같은 임의의 적당한 컴퓨터 판독가능 매체는 GUI와 오퍼레이팅 시스템을 보유할 수 있다.
바람직한 실시예에서, COSETM(커먼 오퍼레이팅 시스템 인바이런먼트) 데스크톱 GUI는 사용자를 AIXTM오퍼레이팅 시스템에 인터페이스한다. GUI는 상기 오퍼레이팅 시스템에 일체화되어 내장된 것으로 간주될 수 있다. 선택적으로, 임의의 적당한 오퍼레이팅 시스템 또는 테스크톱 환경이 이용될 수 있다. 다른 GUI 및/또는 오퍼레이팅 시스템의 예는 X11TM(X 윈도우) 그래픽 사용자 인터페이스, Sun의 SolarisTM오퍼레이팅 시스템, 및 Microsoft의 Window 95TM오퍼레이팅 시스템을 포함한다. 설명의 편의상, GUI와 오퍼레이팅 시스템이 단지 CPU(10)를 지시하고 명령하지만, GUI와 오퍼레이팅 시스템은 다음과 같은 특징 및 기능을 수행하는 것으로 기술될 것이다.
도 2를 참조하면, 터치스크린(200)은 예를 들어, 손바닥과 손가락 지문의 열, 압력 또는 소리에 민감한 종래의 적당한 임의의 터치스크린을 포함한다. 본 예에서, 사용자는 그/그녀의 우측 손(도시되지 않음)을 터치스크린(200) 상에 놓는다. 설명의 편의상, 비록 임의의 적당한 터치스크린 기술이 사용될 수 있지만, 바람직한 실시예는 소리 패턴을 검출하는 터치스크린을 사용하는 것으로 설명될 것이다. 그/그녀의 손을 터치스크린(200) 상에 놓는 사용자에 응답하여, 터치스크린(200)은 손바닥 지문 영역(210), 엄지 손가락 지문 영역(215), 손가락 지문 영역(220, 230, 235, 및 240) 및 영역(280)으로부터의 소리를 포함하여 사용자 손의 소리 패턴을 검출한다. 선택적으로, 단지 손의 일부(즉, 손가락만) 및/또는 독특한 물체(즉, 스타일러스)가 손 지문을 검출하는데 대체될 수 있다. 더우기, 하나 이상의 손 또는 물체가 한번에 검출될 수 있다.
터치스크린(200)이 도 2에 도시된 것과 유사한 하나 이상의 손/손가락 패턴을 검출하면, OS는 사용자(들)을 식별하려고 시도한다. 이렇게 하기 위해, OS는 손바닥 지문 영역(210)의 X, Y좌표와 손바닥 지문 영역(210)의 X, Y 선단을 따라 손바닥 지문 영역(210)으로부터 각각의 손가락 지문 영역(215, 220, 230 및 240)의 거리를 측정한다. OS는 손바닥 지문 영역(210)의 최좌측 및 최상부 지점의 교차점을 제1 기준점(255)으로 정의한다. OS는 엄지 손가락 지문(215)에서 상기 제1 기준점(255)까지 가장 긴 거리를 측정한다. 이와 유사하게, OS는 각각 손가락 지문 영역(220 및 230)에서 제1 기준점(255)까지 가장 긴 거리를 측정한다.
동일한 방식으로, OS는 손바닥 지문 영역(210)의 최우측 및 최상부 지점의 교차점을 제2 기준점(260)으로 정의하고, 이로 인해 손가락 지문 영역(240)에서 제2 기준점(260)까지 가장 긴 거리가 결정된다. 마지막으로, OS는 손바닥 지문 영역(210)의 X 및 Y 좌표(265 및 270)를 측정한다. 보다 정확히 하기 위해, 각 손가락 지문의 크기가 측정될 수 있다.
다음에, OS는 상기 손지문에 대해 저장된 신원이 존재하는 지를 판단하기 위해 새로이 결정된 측정값이 임의의 기존 측정값과 일치시키기 위해 메모리에 저장된 사용자 화일 데이타베이스(도시되지 않음)를 검색한다. 더 상세하게, OS는 네개의 거리 측정값과 손바닥 지문(210)의 X, Y 좌표를 사용자 화일 데이타베이스에 저장된 임의의 기존 측정값과 비교한다. 그러나, 본 기술 분야의 숙련자는 본 발명의 영역과 정신을 벗어나지 않고 특정 사용자(또는 사용자의 물체)의 손지문(또는 물체 지문)을 식별하는데 무수히 많은 수단이 존재한다는 것을 알 것이다. 예시 목적으로, 단지 손바닥 지문 영역(210)의 폭만이 일치가 존재하였는 지를 판단하는데 사용될 수 있다.
만일 OS가 사용자가 정의한(또는 디폴트) 허용가능한 공차(본 발명에 설명됨)내에서 일치를 발견하면, OS는 존재한다면 선정된 커스텀화 특징을 위해 사용자 화일을 판독하고, 상기 선정된 커스텀화 특징을 이용하여 터치스크린(200) 상에 위치된 손(또는 손의 일부) 밑에 가상 포인팅 디바이스(a virtual pointing device)를 생성한다. 부수적으로, 본 기술 분야의 숙련자는 가상 포인팅 디바이스의 다음에 디스플레이된 사용자 신원확인(id) 레이블 또는 가상 포인팅 디바이스의 특정 컬러 쉐이딩을 통해 사용자 일치의 보조적인 확인이 이루어질 수 있다는 것을 알 수 있다. 따라서, 예를 들어, 사용자의 엄지 손가락(즉, 엄지 손가락 지문 영역(215)), 손가락(즉, 손가락 지문 영역(220, 230, 235 및 240)), 및 손바닥(즉, 손바닥 지문 영역(210)) 밑의 터치스크린(200)의 영역이 "활성화(activated)"되고, 따라서 그와 같이 "활성화된" 영역의 사용자 손가락, 엄지 손가락, 및/또는 손바닥의 임의의 정의된 움직임이 임의의 기능을 불러 오게 한다. 그러나, 만일 OS가 손지문을 인식하지 못하면, OS는 기능의 디폴트 세트를 사용하여 손 또는 손의 일부 밑에 디폴트 가상 포인팅 디바이스를 구축할 수 있거나 또는 사용자는 커스텀화된 가상 포인팅 디바이스(본 발명에 서술됨)를 생성할 수 있다.
도 5는 사용자(들)가 가상 포인팅 디바이스(들)를 이동시키고 동작시키는 방법을 도시한다. 사용자의 손이 터치스크린(200)과 실질적으로 접촉하도록 사용자가 그/그녀의 손을 터치스크린(200) 위에서 슬라이드(slides)함에 따라, OS는 터치스크린(200) 상의 사용자의 이동하는 손의 위치를 검출하고, 이에 응답하여 가상 포인팅 디바이스의 "활성화된" 영역을 손(또는 손의 일부) 밑에 있는 영역으로 연속적으로 재정의한다. 따라서, 가상 포인팅 디바이스는 사용자 손의 이동과 함께 및 그것에 따라 이동한다. 예를 들어, 만일 "활성화된" 영역이 터치스크린 픽셀 좌표[X1, Y1, X2, Y2, X3, Y3 및 X4, Y4](도시되지 않음) 내에 포함된 영역으로서 초기에 정의되고 사용자가 해당 영역에서 터치스크린 픽셀 좌표[X5, Y5, X6, Y6, X7, Y7 및 X8, Y8]로 손가락을 이동시키면, "활성화된" 영역은 그와 같이 새로운 좌표로 이동한다.
OS는 포인터(250)가 가상 포인팅 디바이스와 일렬로 이동하도록 포인터(250)를 가상 포인팅 디바이스의 활성화된 영역(이 경우, 손가락 지문 영역(230) 위) 근처에 위치시킨다. 따라서, 사용자는 포인터(250)가 소정의 오브젝트 아이콘 위에 위치하도록 예를 들어, 가상 포인팅 디바이스 즉, 포인터(205)를 이동시킬 수 있다. 선택적으로, 사용자는 그의 손을 단순히 들어 소정의 위치에 놓을 수 있는데, 이로 인해 OS는 새로운 위치(본 발명에 서술됨)에서 사용자의 손 밑에 가상 포인팅 디바이스를 재생성할 것이다.
사용자는 사용자의 손가락, 엄지 손가락 및/또는 손바닥의 이동을 통해 가상 포인팅 디바이스를 동작시킨다. 예시로, 사용자는 그/그녀의 엄지 손가락을 든 다음 상기 엄지 손가락을 임의의 소정 시간(즉, 2초)내에 엄지 손가락 지문 영역(215) 위에 다시 놓음 ("한번의 클릭킹(a single clicking)"이라고 함)으로서 포인터(250) 밑에 위치된 오브젝트 아이콘에 초점을 집중시키는 "포커스 기능(focus function)(245)"을 불러 올 수 있다. 이와 유사하게, 사용자는 그/그녀의 세번째 손가락을 들어 임의의 소정 시간 내에 세번째 손가락 지문 영역(235) 위에 다시 놓음으로서 "페이스트(paste)" 기능을 불러 올 수 있다.
각각의 손가락, 손바닥, 및 엄지 손가락 동작 및 연관된 기능/명령은 특정하게 정의되고 특정 기능(본 발명에서 상세히 서술됨)을 불러 오기 위해 나중에 재정의될 수 있다. OS는 손가락 동작(즉, 한번의 클릭(a single click)을 표현하는 "(1)"; 두번의 클릭(a double click)을 표현하는 "(2)" 등)과 대응하는 기능/명령(즉, 포커스(focus)(245), 오픈(open)(257), 선택후 해제(select until release)(259), 페이스트(paste)(261) 및 디폴트 메뉴(default menu)(263))을 가리키기 위해, 각각의 손가락 지문/엄지 손가락 지문 영역 위에 다이얼로그(a dialog)를 디스플레이한다.
디폴트 기능/명령, 손가락 동작 및 포인터는 다음과 같이 바람직한 실시예에 정의된다. 엄지 손가락 영역(215) 위에서 엄지 손가락을 한번 클릭하면 OS는 포인터(250) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 상에 포커스 기능(245)을 불러 온다. 손가락 지문(220) 상에서 손가락을 한번 클릭하거나 또는 엄지 손가락 지문 영역(215)을 두번 클릭하면 OS는 포인터(250) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 상에 오픈 기능(230)을 불러 온다. 손가락 지문 영역(230)상에서 한번 클릭함으로서 포인터(250) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 상에 선택후 해제 기능(259)을 불러오는 한편, 손가락 지문 영역(235)을 한번 클릭함으로서 포인터(240) 밑에 위치된 임의의 오브젝트 아이콘 또는 텍스트 위에 페이스트 기능(261)을 불러온다. 마지막으로, 손가락 지문 영역(240)을 한번 클릭하면 디폴트 메뉴 기능(263)을 불러온다. 디폴트 포인터(250)는 화살표 형태이고 손가락 지문 영역(230) 근처에 배치된다. 그러나, 본 기술 분야의 숙련자는 디폴트 기능, 포인터 위치, 및/또는 손가락 동작(즉, 여러번 클럭)의 임의의 조합이 디폴트 가상 포인팅 디바이스를 정의하는데 사용될 수 있다는 것을 용이하게 알 수 있다. 또한, 두개 이상의 손가락을 동시에 한번 클릭(또는 여러번 클릭)함으로서 기능/명령을 불러 올 수 있다.
도 3은 바람직한 실시예를 구현하기 위한 세부 논리를 포함하는 순서도를 도시한다. 302에서, 터치스크린(200)은 손지문(또는 물체) 또는 선택적으로 손지문의 일부로부터 소리/열/압력 등을 검출한다. 306에서, OS는 손지문을 판독하고 이전에 서술되고 도 2에 도시된 측정값을 계산한다. 310에서, OS는 손지문 측정을 위해 데이타베이스의 사용자 화일을 검색한다. 312에서, 만일 OS가 10%의 디폴트 허용값(이는 나중에 사용자에 의해 바뀔 수 있다.) 내에서 기존의 임의의 손지문 측정값을 찾으면, 320에서, OS는 해당 사용자 화일에 있는 모든 정보를 판독하고, 322에서, 사용자 화일에서 발견된 선정된 특성에 근거하여 사용자의 손(또는 손의 일부) 밑의 터치스크린 상에 가상 포인팅 디바이스를 그린다. 부수적으로, 미래에, 만일 임의의 오브젝트 및/또는 텍스트가 가상 포인팅 디바이스에 의해 선택되었으면, 이들은 가상 포인팅 디바이스(본 발명에서 서술됨)에 대해 그 이전 위치에 대한 위치에 그려질 것이다. 333에서, OS는 사용자 일치가 정확한 지에 대한 확인을 요청한다. 만일 사용자가 가상 포인팅 디바이스를 계속 사용하면, 이때 OS는 이와 같은 사용을 확인(confirmation)으로 해석한다. OS는 가상 포인팅 디바이스에 다음에 사용자 신원확인 레이블을 디스플레이하거나 또는 선택적으로, 가상 포인팅 디바이스를 특정 컬러 쉐이딩으로 디스플레이할 수 있다. 그렇지 않고, 만일 정당한 사용자가 아닌 것으로 간주되면, 제어는 310으로 복귀하고, 여기서 OS는 다른 가능한 일치를 위해 데이타베이스를 검색한다.
324에서, OS는 예를 들어, 터치스크린 상의 손가락 지문(들), 손바닥 지문 또는 손지문을 검출하는데 실패하는 경우와 같이 4초 이상 동안 임의의 지속적인 비정상적인 동작 또는 정의되지 않은 동작이 존재하는 지를 판단한다. 만일 OS가 비정상적인 어떠한 동작도 존재하지 않음을 검출하면, OS는 326에서(도 9를 참조) 작업 이벤트 루프(work event loop)를 수행하고, 제어는 324로 복귀한다. 도 9를 참조하면, 902에서, OS는 터치스크린에 걸쳐 손의 어떠한 이동이 발생하였는 지를 판단하고, 만일 그렇다면 904에서, OS는 손의 이동에 따라 가상 포인팅 디바이스를 이동시킨다. 906에서, OS는 기능/명령을 불러오기 위해 손가락 또는 엄지 손가락의 이동이 발생하였는 지를 판단하고, 만일 그렇다면, 908에서, OS는 포인터 밑에 위치된 임의의 오브젝트/텍스트 상에 해당 기능/명령을 불러 온다. 제어는 324로 복귀한다.
도 3의 324로 돌아가, 만일 OS가 임의의 시간(즉, 4초) 동안 비정상적인 동작 또는 정의되지 않은 동작을 검출하면, 328에서, OS는 손바닥이 터치스크린에 남아 있는 동안, 모든 손가락이 터치스크린으로부터 들어 올려져 있는 지를 판단한다. 선택적으로, 본 기술 분야의 숙련자는 많은 다른 표시기가 손가락 지문이 터치스크린과 접촉하는 동안 일단의 손가락이 들어 올려져 있는 지 또는 손바닥이 들어 올려져 있는 지를 판단하는 것과 같이 "모든 손가락이 들어 올려져 있는" 표시기를 대신할 수 있다는 것을 알 수 있다. 만일 OS가 모든 손가락이 터치스크린으로부터 들어 올려져 있다고 판단하면, 330에서, OS는 가상 포인팅 디바이스의 재커스텀화를 제공하도록 사용자를 프롬프트하는 주 메뉴(600)(본 발명에 서술된 도 6을 참조)를 디스플레이한다. 344에서, OS는 330에서 이루어진 임의의 변화에 따라 새로운 가상 포인팅 디바이스를 디스플레이하고 제어를 324로 복귀한다.
328로 돌아가, 손바닥이 터치스크린과 접촉을 유지하는 동안 만일 모든 손가락이 들어 올려진 것으로 검출되지 않았다면, 342에서, 제어는 도 8로 향한다. 도 8로 돌아가, 810에서, OS는 모든 손(또는 물체)이 터치스크린으로부터 들어 올려졌는 지를 판단한다. 만일 모든 손이 터치스크린으로부터 들어 올려져 있지 않았지만, 일단의 손가락, 엄지 손가락 및/또는 손바닥(그 동작은 대응하는 정의된 기능를 갖지 않는다.)을 들어 올리는 것과 같이 비정상적이거나 또는 정의되지 않은 동작이 발생하였다면, 제어는 814로 향하고, 여기서 OS는 사용자 화일에 근거하여 손밑에 가상 포인팅 디바이스를 다시 그린다. 이는 사용자에게 바로 조금전의 손/손가락 동작이 정의되지 않은 기능을 갖는다는 것을 가리킨다. 만일 모든 손이 터치스크린으로부터 들어 올려졌다면, 811에서, OS는 임의의 시간 주기 동안(즉, 5초) 그 현재 위치에서 터치스크린 상에 가상 포인팅 디바이스를 계속 디스플레이하지만, 명확한 하이버네이트된 상태(in an obvious hibernated state)에서는 손가락 지문과 손바닥 지문 영역이 터치스크린 상에 반투명한 영역(translucent areas)으로 보일 것이라는 것을 의미한다. 가상 포인팅 디바이스가 명확히 하이버네이트된 상태에 있을 때, 활성화될 때까지 (즉, 본 발명에 서술된 하이버네이션으로부터 끌어 내어진) 어떠한 기능도 호출될 수 없다. 812에서, OS는 그 제거를 검출하는 5초 이내에 손이 터치스크린 상에 다시 놓여졌는 지를 판단한다. 만일 손이 5초 이내에 터치스크린 상에 다시 놓여져 있지 않으면, 제어는 826(본 발명에 서술됨)로 향한다. 그러나, 만일 OS가 5초 이내에 터치스크린 상에 다시 놓여져 있는 것을 검출하면, 816에서, OS는 하나 이상의 가상 포인팅 디바이스가 동시에 사용되고 있는 지, 그리고 만일 그렇다면, 만일 하나 이상의 사용자가 터치스크린 상에 다시 손이 놓여졌을 때 그/그녀의 손을 터치스크린으로부터 들어 올려졌는 지를 판단한다. 만일 그렇지 않으면, 814에서, 제어는 도 3의 322로 돌아가고, 그로 인해 OS는 다시 놓여진 손 밑에 사용자 화일에 의해 식별된 가상 포인팅을 활성화시켜 이동시킨다. 부수적으로, 만일 임의의 오브젝트 및/또는 텍스트가 손이 들어 올려졌을 때 가상 포인팅 디바이스에 의해 선택되었다면, 이들은 가상 포인팅 디바이스(본 발명에 서술됨)의 그 이전 위치에 대한 위치에서 다시 그려질 것이다.
만일 하나 이상의 사용자가 그/그녀의 손을 터치스크린으로 부터 동시에 들어 올려졌다면, 820에서, OS는 다시 놓여진 손의 손지문을 판독하고, 이전에 서술되고 도 2에 도시된 측정값을 계산한다. 822에서, OS는 손 측정 일치를 위해 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스의 사용자 화일을 검색한다. 만일 일치가 발견되지 않으면, 823에서, OS는 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스중 한 디바이스의 사용자 식별을 위해 사용자 화일 데이타 베이스를 검색한다. 이때 만일 OS가 그/그녀가 사용자 식별에 의해 식별된 사용자인 지를 사용자에게 문의하는 다이얼로그(도시되지 않음)를 디스플레이한다. 만일 사용자가 825에서 그/그녀가 사용자 식별에 의해 식별되었다는 것을 가리키면, 제어는 도 3의 322로 복귀되고, 이로 인해 OS는 다시 놓여진 손 밑으로 사용자 화일에 의해 식별된 가상 포인팅 디바이스를 이동시키고, 만일 임의의 오브젝트 및/또는 텍스트가 가상 포인팅 디바이스에 의해 선택되었다면, 이들은 가상 포인팅 디바이스(본 발명에서 서술됨)의 그 이전 위치에 대한 위치에서 다시 그려질 것이다. 그러나, 만일 사용자가 825에서 식별이 사용자를 식별하지 않는다는 것을 가리키면, OS는 상기 식별이 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스의 최종 사용자 화일인 지를 판단한다. 만일 그렇지 않으면, 제어는 823으로 돌아가고, 여기서 OS는 검출되어 들어 올려진 손을 갖는 가상 포인팅 디바이스의 다음 사용자 화일을 검색한다. 이 프로세스는 사용자와 사용자 식별 간의 일치, 따라서 검출되어 들어 올려진 손을 갖는 대응하는 가상 포인팅 디바이스가 발견될 때까지 반복된다. 만일 OS가 최종 사용자 화일을 검색하고 어떠한 일치도 발견되지 않으면, 839에서, 제어는 도 3의 310으로 돌아가고, 여기서 OS는 사용자 손을 위해 모든 사용자 화일을 검색한다.
812로 돌아가, 만일 손이 5초 이내에 터치스크린 상에 다시 놓여지지 않았다면, 826에서, OS는 명확한 하이버네이트된 상태에서 가상 포인팅 디바이스를 계속 디스플레이하고, 828에서, 사용자가 중지하기를 원하면 다이얼로그(도시되지 않음)에서 사용자를 프롬프트한다. 만일 사용자가 중지하기를 원하면, 제어는 OS가 디스플레이로부터 가상 포인팅 디바이스를 제거하는 830으로 향한다. 만일 사용자가 중지하기를 원하지 않으면, 832에서, OS는 마우스를 "히든 하이버네이션(hidden hibernation)" 상태에 놓는데, 이는 명확한 하이버네이트된 상태(즉, 반투명한)로 터치스크린 상에 디스플레이된 마우스 이미지가 시간에 따라 소멸되기 시작하지만, 사용자가 다음에 터치스크린을 접촉할 때 바로 활성화될 수 있다. 따라서, OS는 가상 포인팅 디바이스를 명확한 하이버네이션(즉, 반투명 형태로 디스플레이된)에서 히든 하이버네이션으로 변환한다. 사용자가 할당한 시간(즉, 30분)후에, OS는 상기 시간 지연을 가상 포인팅 디바이스가 더 이상 필요없다는 것을 의미하는 것으로 해석한다. 836에서, 만일 OS가 30분 이내에 터치스크린 상에 놓인 손을 검출하면, 840에서, OS는 가상 포인팅 디바이스를 히든 하이버네이션으로 부터 끌어 내어 그것을 손 밑에 다시 그리고, 제어는 도 3의 324로 돌아간다. 그렇지 않으면, OS는 메모리(즉, RAM)로부터 현재 히든 하이버네이션 상태에 있는 가상 포인팅 디바이스를 제거한다.
도 3의 312로 돌아가, OS는 터치스크린 상에 놓인 측정된 손과 임의의 기존의 사용자 화일 간에 일치가 발견되었는 지를 판단한다. 만일 OS가 문제가 되는 손지문에 거의 일치하는 손지문 측정값을 갖는 몇몇 사용자 화일을 검출하면, 316에서, OS는 가장 가깝게 일치하는 그와 같은 사용자를 도시하는 터치스크린 상의 드롭 다운 메뉴(drop down menu) (도시되지 않음)에 디스플레이한다. 318에서, OS는 드롭 다운 메뉴로부터 사용자 신원의 일치 또는 어떠한 일치도 발견되지 않았다는 것을 가리키는 선택을 사용자가 선택(다른 손을 사용하여)하기를 대기한다. 만일 일치가 발견되면, 제어는 320 (이전에 서술됨)으로 향한다. 만일 어떠한 일치도 발견되지 않으면, 제어는 314로 향하고, 여기서 OS는 그/그녀가 커스텀화된 가상 포인팅 디바이스를 생성하기를 원하는 지를 가리키기 위해 사용자에게 문의하는 메뉴(도 5의 510을 참조)를 터치스크린 상에 디스플레이한다. 만일 사용자가 커스텀화된 가상 포인팅 디바이스 생성하기를 원하지 않으면, OS는 터치스크린 상에 그/그녀의 손을 놓도록 사용자를 프롬프트하고, 이에 응답하여, OS는 도 5에 도시된 바와 같이 사용자의 손 밑에 이전에 서술된 바와 같이 디폴트 손가락/손바닥 동작 및 손가락 지문 기능를 갖는 포괄적인(generic) 가상 포인팅 디바이스를 구축하고, 제어는 324로 진행된다.
만일 사용자가 커스텀화된 가상 포인팅 디바이스를 생성하기를 원하면, 332에서, OS는 사용자 화일을 오픈한다. 334에서, OS는 손가락 지문 및 손바닥 지문의 크기를 사용자 화일에 저장한다. 336에서, OS는 제1 기준점 (본 발명에 서술되고 도 2에 도시됨)과 첫번째 세개의 손가락의 각 손가락 지문까지 가장 먼 지점 간의 거리를 계산한다. 부수적으로, OS는 제2 기준점과 그로부터 네번째 손가락 지문까지의 거리를 계산할 수 있다. 338에서, OS는 사용자 식별을 위해 사용자를 프롬프트하며, 가상 포인팅 디바이스 형태, 포인터 위치, 동작 및 민감도, 및 손가락 지문 기능 (본 발명에 서술되고 도 6에 도시됨)와 같은 가상 포인팅 디바이스 특성을 입력하도록 사용자를 프롬프트하는 주 메뉴(600)를 디스플레이한다. 340에서, OS는 모든 정보를 사용자 화일에 저장한다. 제어는 322로 향하고, 여기서 OS는 사용자 화일에 저장된 정보에 근가하여 손 밑(또는 손의 일부)에 가상 포인팅 디바이스를 그린다.
324에서, OS는 임의의 비정상적인 동작이 발생하였는 지를 판단한다. 만일 그렇다면, 328에서, OS는 손의 모든 손가락이 터치스크린으로부터 들어 올려졌는 지를 판단한다. 만일 그렇다면, 330에서, OS는 도 6에 도시된 바와 같이 주 메뉴(600)를 디스플레이하여, 가상 포인팅 디바이스의 임의의 커스텀화를 제공하기 위해 사용자를 프롬프트한다.
도 6으로 돌아가, OS가 주 메뉴(600)를 디스플레이한 후, 사용자는 그/그녀의 손을 터치스크린으로부터 제거할 수 있다. 만일 사용자가 형태 버튼(620)을 선택하면, 사용자로 하여금 가상 포인팅 디바이스의 형태를 정의/재정의할 수 있게 하는 "형태" 메뉴가 나타난다 (도 7의 700을 참조). 도 7의 형태 메뉴(700)로 돌아가, OS는 사용자에게 몇 가지 옵션을 디스플레이한다. 예를 들어, 사용자는 가상 포인팅 디바이스를 이동시키기 위해 손가락만이 터치스크린과 접촉될 필요가 있는 "손가락 전용(fingers only)" 가상 포인팅 디바이스 (본 발명에 서술된 도 4를 참조) 또는 가상 포인팅 디바이스를 이동시키기 위해 엄지 손가락과 손바닥만이 터치스크린과 접촉될 필요가 있는 손바닥 및 엄지 손가락 전용 가상 포인팅 디바이스를 선택할 수 있다. 후자의 경우, 손가락의 이동은 지정된 기능일 수 없다. 부수적으로, "엄지 손가락과 동시에 하나의 손가락" 또는 "손바닥" 가상 포인팅 디바이스가 생성될 수 있다. 그러나, OS가 손바닥이 터치스크린과 접촉하도록 유지하면서 모든 손가락을 들어 올림으로서 주 메뉴(600)(도 6을 참조)를 불러 들이기 때문에, 만일 사용자가 손바닥을 포함하지 않는 새로운 가상 포인팅 디바이스를 정의하면, 사용자는 나중에 해당 특수 가상 포인팅 디바이스의 기능를 다시 프로그램할 수 없다. 그 보다는, 사용자는 새로운 디바이스를 생성하기 위해 포괄적인 가상 포인팅 디바이스로 시작하여야만 할 것이다. 선택적으로, 본 발명의 영역을 벗어나지 않고 주 메뉴(600)를 활성화시키기 위해 다른 기법이 사용될 수 있다.
사용자는 디폴트 정확도 공차를 10％에서 다수의 미리 프로그램된 값으로 바꿀 수 있다. 이렇게 하기 위해, 사용자는 정확도 버튼(702)를 누르고, 이에 응답하여 값(즉, 4％, 8％, 20％)의 드롭-다운 리스트가 사용자의 선택을 위해 나타날 것이다. 사용자는 버튼(704)를 눌러 모든 선택을 입력/저장한다. 이에 응답하여, 도 6에 도시된 주 메뉴(600)가 다시 나타난다.
도 6으로 돌아가, 만일 사용자가 기능 정의 버튼(625)를 선택하면, 사용자로 하여금 손가락 지문/손바닥 지문 영역의 기능를 정의/재정의할 수 있게 하는 "기능 정의" 메뉴가 나타난다. 특히, 도 7의 기능 정의 메뉴(730)는 사용자가 적당한 손가락 가까이에 있는 연관된 버튼을 눌러 각각의 손가락 지문과 엄지 손가락 지문 영역의 기능을 바꿀 수 있게 한다. 예를 들어, 사용자가 버튼(732)을 누르면, 이는 그/그녀가 두번째 손가락(즉, 손가락 지문 영역(230))의 기능를 바꾸기를 원한다는 것을 가리킨다. 이에 응답하여, OS는 메모리에 저장된 선정된 기능의 드롭-다운 리스트(740)를 디스플레이한다. 사용자가 오픈 기능(742)을 선택하였으면, 이에 응답하여 OS는 다른 드롭-다운 리스트(746)를 디스플레이한다. 사용자는 오픈 기능을 불러 들이기 위해 두번째 손가락을 두번 클릭(744)하는 것을 선택하였다. 다음에 사용자는 저장 버튼(748)를 눌러 엔트리를 사용자 화일에 저장한다. 이에 응답하여, 도 6에 도시된 주 메뉴(600)가 나타난다. 그러나, 본 기술 분야의 숙련자는 이와 같은 바람직한 실시예의 정신과 영역을 벗어나지 않고 손가락 동작 및 손가락 지문 영역 기능에서의 다른 변화가 이루어질 수 있다는 것을 알 수 있다.
도 6으로 돌아가, 만일 사용자가 포인터 정의 버튼(630)을 선택하면, 사용자로 하여금 가상 포인팅 디바이스 상에 형태, 민감도, 및 위치를 정의/재정의할 수 있게 하는 "포인터 정의" 메뉴가 나타난다. 도 7의 포인터 정의 메뉴(760)으로 돌아가, 사용자는 포인터와 관련된 다수의 선택을 갖는다. 예를 들어, 사용자는 작은, 중간 또는 큰 화살표, 및/또는 깜박이는 화살표를 선택할 수 있다. 사용자는 또한 작거나 큰 포인터 민감도, 및 가상 포인팅 디바이스에 대한 포인터의 위치를 선택할 수 있다. 예를 들어, 포인터는 세번째 손가락 위에(디폴트 위치), 첫번째 손가락 또는 손바닥 밑에 놓일 수 있다. 그러나, 본 기술 분야의 숙련자는 본 바람직한 실시예의 영역과 정신을 벗어나지 않고 포인터 동작에서 많은 변화가 이루어질 수 있다는 것을 용이하게 알 수 있다. 사용자는 저장 버튼(762)을 눌러 엔트리를 저장하고, 이에 응답하여 주 메뉴(600)가 나타난다.
도 6을 돌아가, 만일 사용자가 스플릿 포인터 버튼(640)을 선택하면, GUI는 사용자가 가상 포인팅 디바이스의 일부를 스플릿 오프/분리(split off/breakaway)한 다음 가상 포인팅 디바이스로 포인팅 디바이스의 상기 일부를 합체하거나 또는 재결합(re-grow or re-unite)시킬 수 있게 하는 "스플릿 포인터(split pointer)" 메뉴를 디스플레이한다. 도 11은 "분리" 가상 포인팅 디바이스를 구현하기 위한 이벤트-구동 순서도의 형태인 상세 논리도를 도시한다. 이 순서도는 도 3에 도시된 상세 논리도의 단계 (330)에 일체로 될 수 있다. 단계(330)는 사용자에게 분리/스플릿 포인팅 디바이스를 생성하는 것을 포함하여, 가상 포인팅 디바이스의 기능/특징을 정의하거나 또는 재정의하는 기회를 제공한다. 1100에서, GUI는 사용자가 주 메뉴 (도 6에 도시됨)로부터 스플릿 포인팅 디바이스 버튼(640)을 선택하였는 지를 결정한다. 만일 사용자가 스플릿 포인터 버튼(640)을 선택하지 않는 경우, 제어는 1120으로 진행하고, 최후에는 1190으로 진행하는데, 여기서 GUI는 주 메뉴 (도 6에 도시됨)로 복귀하여 이를 디스플레이한다.
만일 사용자가 스플릿 포인터 버튼(640)을 선택하면, 1102에서, GUI는 터치스크린 상에, GUI가 가상 포인팅 디바이스에 대해 임의의 분리 손가락 지문 영역을 합체하여야 하는 지를 사용자에게 문의하는 "합체 스플릿 포인터(re-grow split pointer)" 메뉴 (도시되지 않음)를 디스플레이한다. GUI는, 사용자가 GUI와 같이 각각 가상 포인팅 디바이스에 대해 분리 손가락 지문을 합체할 것인 지 여부를 나타내는 "예" 또는 "아니오" (본 발명에 상세히 설명됨)를 사용자가 선택하기를 대기한다. 1104에서, GUI는 터치스크린 상에 가상 포인팅 디바이스를 디스플레이한다 (예를 들면, 도 5의 손가락 지문 영역(215, 220, 230, 235, 및 240) 또는 도 10의 가상 포인팅 디바이스(1000)을 참조). 제어는 1120으로 진행된다.
1120에서, GUI는, GUI가 VPD를 디스플레이하기 시작한 이래, 30초 이내에 (선택적으로, 시간적인 제한이 없을 수도 있다) 사용자가 가상 포인팅 디바이스 (VPD) (1000) (도 10에 도시됨)의 하나 이상의 손가락 지문 영역에 접촉하였는 지를 판단한다. 만일 그렇지 않다면, 제어는 1140으로 진행된다. 만일 그렇다면, 1130에서, GUI는 접촉된 것, 따라서 그것/그들을 깜박거리게 하고 새로운 커서를 그것/그들 위에 놓음으로써 선택된 손가락 지문 영역(들)을 하이라이트한다. 따라서, 사용자가 하나 이상의 손가락 지문 영역을 분리하기 시작하면, GUI는 각각의 선택된 손가락 지문 영역 위에 새로운 커서를 디스플레이한다. 그러나, 본 기술 분야의 숙련자는, 특정한 손가락 지문이 가상 포인팅 디바이스로부터 분리하도록 선택되었다는 것을 가리키는데에는 많은 종류의 표시기가 사용될 수 있다는 것을 용이하게 알 수 있을 것이다. 제어는 1140으로 진행된다.
1140에서, GUI는, 사용자가 손가락 지문 영역을 마지막으로 선택한 후 30초 (선택적으로, 시간 제한이 없을 수도 있다)이내에 선택된 손가락 지문 영역 상에 손가락 (또는 스타일러스)을 다시 놓았는 지를 판단하고, 만일 그렇다면, GUI는 해당 손가락의 이동을 모니터한다. 따라서, 사용자는 손가락 지문 영역 위에 손가락 (또는 스타일러스)을 놓고 상기 손가락을 원하는 위치로 이동시킴으로써 한번에 선택된 손가락 지문 영역을 분리하기 시작할 수 있다. 선택적으로, 사용자는 두개의 손가락 지문 영역 위에 두개의 손가락 (즉, 각각에 대해 한번)을 놓음으로써 두개 이상의 손가락 지문 영역을 동시에 분리할 수 있다. 만일 GUI가 선택된 손가락 지문 영역 상에 놓이거나 또는 다시 놓인 손가락을 검출하지 못하면, 제어는 1170으로 진행된다.
만일 GUI가 선택된 손가락 지문 영역 상의 적어도 한 영역 위에 있는 손가락의 열/소리/압력을 검출하였다면, 1150에서, GUI는 터치스크린을 따라 손가락의 이동에 따라 손가락 지문 영역과 커서를 이동시킨다. 도 10은 사용자의 손가락 (도시되지 않음)에 의해 폴더 오브젝트(1030) 위의 그 현재 위치로 드래그되었던 분리 손가락 지문 영역(1020)과 새로이 생성된 커서(1022)을 도시한다. 사용자가 그/그녀의 손가락을 그로부터 제거하면 손가락 지문 영역(1020)은 계속 깜박거린다.
도 11로 돌아가, 1160에서, 사용자가 1102에서 "합체 스플릿 손가락 옵션"을 이전에 선택하였다면 GUI는 임의의 분리 손가락 지문 영역(들) 대신에 새로운 교체 손가락 지문 영역을 드로우(draws)한다. 도 12는 분리 손가락 지문 영역(1020)을 교체하기 위해 가상 포인팅 디바이스(1250) 상에 합체되고 있는 손가락 지문 영역(1200)을 도시한다. 제어는 1170으로 진행된다.
1170에서, GUI는, 사용자가 분리 손가락 지문 영역을 포함하여 임의의 손가락 지문 영역을 불러 들였는 지 (즉, 한번 클릭함, 두번 클릭함)를 판단한다. 1172에서, GUI는 손가락 지문 영역과 연관된 동작/기능을 수행한다. 예를 들면, 도 10을 참조하면, 사용자가 이전에 "컷(cut)" 손가락 지문 영역(1052)을 두번 클릭하여, 문서의 내용(1050)을 "컷" 버퍼 (도시되지 않음)에 위치시켰기 때문에, 만일 사용자가 손가락 지문 영역(1020)을 두번 클릭하면, 문서의 내용(1050)은 문서(103)로 페이스트될 것이다. 1174에서, 만일 불러 들여진 손가락 지문 영역이 분리 손가락 지문 영역이었다면, GUI는 분리 손가락 지문 영역을 VPD와 다시 결합하거나, 또는 사용자가 이전에 "합체" 옵션을 선택하였다면, 분리 손가락 지문 영역을 삭제한다. 선택적으로, GUI는, 사용자가 예를 들면 분리 손가락 지문 영역을 세번 클릭함으로써 그/그녀가 종료하였다는 것을 가리킬 때까지 분리 손가락 지문 영역과 커서를 계속 디스플레이할 수 있디. 만일 손가락 지문 영역이 분리되는 영역이 아니었다면, 제어는 즉시 1180으로 진행된다.
1180에서, GUI는, 사용자가 취소 버튼(1030)을 선택하였는 지를 판단한다. 만일 그렇지 않으면, 제어는 1190으로 진행된다. 만일 그렇다면, GUI는 마지막 이벤트를 취소(undoes)하거나, 또는 적당하다면, 주 메뉴(도 6)를 디스플레이한다. 예를 들면, 1120에서, 만일 사용자가 잘못하여 손가락 지문 영역을 선택하였다면, 사용자는 해당 선택을 취소하기 위해 취소를 선택할 수 있다. 다른 실시예로, 1100에서, 만일 사용자가 잘못하여 스플릿 포인터 옵션을 선택하였다면, 사용자는 주 메뉴를 디스플레이하기 위해 취소 버튼을 선택할 수 있다. 그러나, 본 기술 분야의 숙련자는 본 발명의 정신을 벗어나지 않고 본 실시예에서 임의의 유형의 적당한 에러 교정이 이용될 수 있다는 것을 용이하게 알 수 있을 것이다. 제어는 1190으로 진행된다.
1190에서, GUI는, 사용자가 중지 버튼(1060)을 선택하였는 지, 1100에서 스플릿 포인터 옵션을 선택하지 않았는 지 또는 설정된 시간내에 선택하였는 지를 판단한다. 만일 이들 이벤트중 임의의 이벤트가 발생하면, GUI는 주 메뉴로 복귀하고 이를 디스플레이한다. 만일 그렇지 않으면, 제어는 1100에서 이벤트-구동 순서도의 시작으로 복귀한다.
마지막으로, 도 6으로 돌아가, 사용자는 저장/빠져나옴 버튼(635)을 눌러 저장하고 빠져나오며, 취소 버튼(615)을 눌러 모든 변경을 취소하고 디폴트 가상 포인팅 디바이스로 돌아가기 위한 옵션을 갖는다.
도 4로 돌아가, 제2 실시예에서, OS는 선정된 표준 크기의 손가락 지문 영역(420, 430, 435 및 440)과 포인터(450)를 활성화되지 않은(또는 "명확히 하이버네이트된"으로 불리우는) 가상 포인팅 디바이스로 디스플레이한다. 가상 포인팅 디바이스의 손가락 지문 영역은 오브젝트 아이콘이 그들을 통해 보여질 수 있도록 반투명하다. 가상 포인팅 디바이스를 활성화시키기 위해, 사용자는 하나 이상의 손가락을 터치스크린(400) 상의 손가락 지문 영역(420, 430, 435 및 440) 위에 놓는다. 일단 활성화되면, OS는 디폴트 기능 (즉, 각각의 손가락 지문 영역 위에 디스플레이된 디폴트 기능)을 각각의 손가락 지문 영역에 할당한다.
하나 이상의 손가락 지문 영역 위에 놓인 손가락을 검출하는 것에 응답하여, OS는 손가락 지문 영역(들)을 손가락 지문 영역 상에 놓인 손가락의 크기에 맞게 크기를 다시 조정(resizes)한다. 따라서, 예를 들면, 만일 손가락이 손가락 지문 영역보다 작으면, 해당 손가락 지문 영역은 손가락의 크기에 맞게 축소될 것이다. 이와 반대로, 만일 손가락이 손가락 지문 영역보다 크면, 손가락 지문 영역은 손가락의 크기에 맞게 확대될 것이다.
선택적으로, OS가 하나 이상의 반투명 손가락 지문 영역(420, 430, 435 및 440) 위에서 소리 패턴(또는 열, 압력 등)을 검출하면, OS는 그 위에 손가락이 놓여 있는 가상 포인팅 디바이스의 그와 같은 영역만을 활성화시킨다. 이 경우, OS는 디폴트 기능(즉, 각 손가락 지문 영역 위에 디스플레이된 디폴트 기능)을 손가락이 그것 위에 놓인 각각의 손가락 지문 영역에 할당한다. 그러나, 손가락이 그들 위에 놓이지 않은 손가락 지문 영역은 활성화되지 않을 것이며, 따라서 이들이 활성화될 때까지 그들에게 할당된 디폴트 기능을 가지지 않을 것이다. 각각의 손가락 지문 영역은 어느 때나 활성화 될 수 있다.
사용자가 그/그녀의 손가락을 터치스크린(400)위에서 슬라이드함에 따라, OS는 사용자가 이동하는 손가락 밑의 터치스크린 픽셀 좌표를 검출하고, 이에 응답하여, 가상 포인팅 디바이스의 "활성화된" 영역을 손가락 밑의 터치스크린으로 연속적으로 재정의한다. 따라서, 가상 포인팅 디바이스는 사용자의 손가락의 이동과 함께 그리고 그것에 따라 이동한다. 그러나, 모든 손가락 지문 영역이 일시에 활성화될 수 없는 동안, 모든 손가락 지문 영역은 하나의 오브젝트로서 함께 이동할 것이다.
OS는 포인터(450)가 가상 포인팅 디바이스의 이동에 따라 움직이도록 손가락 지문 영역(420) 근처에 포인터(450)를 위치시킨다. 따라서, 예를 들어, 사용자는 포인터(450)가 소정의 오브젝트 아이콘 위에 놓이도록 가상 포인팅 디바이스를 이동시킬 수 있다. 선택적으로, 사용자는 그 손을 단순히 들어 올려 소정의 위치에 위치시키고, 이로 인해 OS는 새로운 위치에서 사용자의 손가락 밑에 가상 포인팅 디바이스를 재생성할 수 있다. 선택적으로, 손이 들어 올려졌던 때에 가상 포인팅 디바이스에 의해 선택된 임의의 오브젝트 또는 텍스트도 역시 새로운 위치에서 다시 그려질 것이다.
본 예에서, 사용자는 그/그녀의 첫번째 손을 손가락 지문 영역(420) 위에 위치시켜 가상 포인팅 디바이스의 해당 영역을 활성화시켰다. 만일 사용자가 가상 포인팅 디바이스의 손가락 지문 영역들 간의 거리의 크기를 다시 조정하기를 원하면, 사용자는 단지 개별적인 손가락을 하나씩 디스플레이된 각각의 손가락 지문 영역에 놓고(이로 인해, 그들을 활성화시킴), 다음에 가상 포인팅 디바이스의 손가락 지문 영역 간의 간격을 커스텀화하기 위해 적당하게 각 손가락을 바깥쪽/안쪽으로 또는 위쪽/아래쪽으로 슬라이드한다. 이와 같은 방식으로, 사용자는 가상 포인팅 디바이스의 형태/크기를 그/그녀의 손의 형태/크기에 맞게 커스텀화한다. 그러나, 사용자는 그/그녀가 그것을 사용할 때마다 가상 포인팅 디바이스의 형태/크기를 액티브하게 커스텀화하여야 한다.
일단 사용자가 소정의 오브젝트 아이콘(422) 위에 포인터(450)를 위치시키면, 사용자는 예를 들면 손가락 지문 영역(420) 위에서 그의 첫번째 손가락을 한번 클릭하여 초점을 오브젝트 아이콘(422)으로 운반할 수 있다. 그러나, 포괄적인 기능(또는 이전에 설정된 기능)만이 본 실시예에 사용될 수 있다.
비록 본 발명이 특정 실시예를 참조로 도시되고 서술되었지만, 본 기술 분야의 숙련자는 첨부된 특허청구의 범위에 의해서만 한정되는 본 발명의 정신과 영역으로 부터 일탈하지 않고, 형태 및 세부사항에 있어 상기 및 다른 변화가 이루어질 수 있다는 것을 알 수 있을 것이다.
본 발명에 따른 가상 포인팅 디바이스 장치 및 방법은 적어도 터치스크린을 갖는 컴퓨터 시스템을 지시하여 가상 포인팅 디바이스의 하나 이상의 일부를 분리(breakaway)하는 것이 가능한 사용자 커스텀화를 가능하게 하여 컷과 페이스트와 같은 기능이 보다 용이하게 수행되게 한다.

Claims (14)

  1. 적어도 터치스크린을 갖는 컴퓨터 시스템이 가상 포인팅 디바이스(a virtual pointing device)의 적어도 일부를 분리(breakaway)하도록 하기 위한 방법에 있어서,
    (a) 상기 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하는 단계, 및
    (b) 상기 가상 포인팅 디바이스의 적어도 제1 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제1 부분만을 분리하고 상기 터치스크린을 따라 상기 손가락 또는 스타일러스가 이동함에 따라서 이동하는 제2 커서를 생성하는 단계 - 적어도 제1 기능이 상기 제1 부분과 연관됨 -
    를 포함하는 방법.
  2. 제1항에 있어서,
    상기 단계 (b)는 상기 제1 부분 상의 손가락 또는 스타일러스로부터의 소리, 열, 또는 압력을 검출하는 단계를 포함하는 방법.
  3. 제1항에 있어서,
    상기 가상 포인팅 디바이스의 제2 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제2 부분만을 분리하는 단계 - 적어도 제2 기능이 상기 제2 부분과 연관됨 - , 및
    상기 제2 부분 및 손가락 또는 스타일러스에 따라 이동하는 제3 커서를 생성하는 단계
    를 더 포함하는 방법.
  4. 제1항에 있어서,
    상기 손가락 또는 스타일러스로서 상기 제1 부분을 활성화시키는 것에 응답하여, 상기 제2 커서 밑에 놓여진 적어도 하나의 오브젝트 위에 제1 기능을 불러들이는 단계
    를 더 포함하는 방법.
  5. 제3항에 있어서,
    상기 손가락 또는 스타일러스로서 상기 제2 부분을 활성화시키는 것에 응답하여, 상기 제3 커서 밑에 놓여진 적어도 하나의 오브젝트 위에 제2 기능을 불러들이는 단계를 더 포함하는 방법.
  6. 제1항에 있어서,
    상기 제1 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체(re-grow)하는 단계를 더 포함하고, 상기 새로운 부분은 그와 연관된 제1 기능을 갖는 방법.
  7. 제3항에 있어서,
    상기 제2 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체(re-grow)하는 단계를 더 포함하고, 상기 새로운 부분은 그와 연관된 제2 기능을 갖는 방법.
  8. 적어도 프로세서, 메모리, 및 터치스크린을 갖는, 가상 포인팅 디바이스(a virtual pointing device)의 적어도 일부를 분리(breakaway)하기 위한 컴퓨터 시스템에 있어서,
    상기 터치스크린 상에 가상 포인팅 디바이스를 디스플레이하기 위한 수단 - 제1 커서가 상기 가상 포인팅 디바이스와 연관됨 - , 및
    상기 가상 포인팅 디바이스의 적어도 제1 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제1 부분만을 분리하고 상기 터치 스크린을 따라 상기 손가락 또는 스타일러스가 이동함에 따라서 이동하는 제2 커서를 생성하기 위한 수단 - 적어도 제1 기능이 상기 제1 부분과 연관됨 -
    을 포함하는 시스템.
  9. 제8항에 있어서,
    상기 제1 부분 상의 상기 손가락 또는 스타일러스로부터의 소리, 열, 또는 압력을 검출하기 위한 수단을 포함하는 시스템.
  10. 제8항에 있어서,
    상기 가상 포인팅 디바이스의 적어도 제2 부분 상에 놓인 적어도 하나의 손가락 또는 스타일러스를 검출하는 것에 응답하여, 상기 터치스크린을 따라 손가락 또는 스타일러스가 이동함에 따라서 상기 가상 포인팅 디바이스의 상기 제2 부분만을 분리하기 위한 수단 - 적어도 제2 기능이 상기 제2 부분과 연관됨 - , 및
    상기 제2 부분 및 손가락 또는 스타일러스에 따라 움직하는 제3 커서를 생성하기 위한 수단
    을 더 포함하는 시스템.
  11. 제8항에 있어서,
    상기 손가락 또는 스타일러스로서 상기 제1 부분을 활성화시키는 것에 응답하여, 제2 커서 밑에 놓여진 적어도 하나의 오브젝트 위에 제1 기능을 불러들이기 위한 수단을 더 포함하는 시스템.
  12. 제10항에 있어서,
    상기 손가락 또는 스타일러스로서 상기 제2 부분을 활성화시키는 것에 응답하여, 제3 커서 밑에 놓여진 적어도 하나의 오브젝트 위에 제2 기능을 불러들이기 위한 수단을 더 포함하는 시스템.
  13. 제8항에 있어서,
    상기 제1 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체(re-grow)하기 위한 수단을 더 포함하고, 상기 새로운 부분은 그와 연관된 제1 기능을 갖는 시스템.
  14. 제10항에 있어서,
    상기 제2 부분 대신에 상기 가상 포인팅 디바이스에 새로운 부분을 합체(re-grow)하기 위한 수단을 더 포함하고, 상기 새로운 부분은 그와 연관된 제2 기능을 갖는 시스템.
KR1019970042565A 1996-10-04 1997-08-29 터치스크린포인팅디바이스의분리를위한방법및시스템 KR100260866B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/726,002 US5870083A (en) 1996-10-04 1996-10-04 Breakaway touchscreen pointing device
US8/726,002 1996-10-04

Publications (2)

Publication Number Publication Date
KR19980032331A KR19980032331A (ko) 1998-07-25
KR100260866B1 true KR100260866B1 (ko) 2000-07-01

Family

ID=24916814

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019970042565A KR100260866B1 (ko) 1996-10-04 1997-08-29 터치스크린포인팅디바이스의분리를위한방법및시스템

Country Status (2)

Country Link
US (1) US5870083A (ko)
KR (1) KR100260866B1 (ko)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6107997A (en) * 1996-06-27 2000-08-22 Ure; Michael J. Touch-sensitive keyboard/mouse and computing device using the same
US6072482A (en) * 1997-09-05 2000-06-06 Ericsson Inc. Mouse mode manager and voice activation for navigating and executing computer commands
EP2256605B1 (en) * 1998-01-26 2017-12-06 Apple Inc. Method and apparatus for integrating manual input
US6610917B2 (en) 1998-05-15 2003-08-26 Lester F. Ludwig Activity indication, external source, and processing loop provisions for driven vibrating-element environments
US7506270B1 (en) * 2000-08-14 2009-03-17 Microsoft Corporation Methods and arrangements for selective placement of movable objects within a graphical user interface
US7730401B2 (en) * 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US7515135B2 (en) * 2004-06-15 2009-04-07 Research In Motion Limited Virtual keypad for touchscreen display
US7586481B1 (en) * 2005-05-10 2009-09-08 Apple Inc. Display-pointer visibility
US20070257891A1 (en) * 2006-05-03 2007-11-08 Esenther Alan W Method and system for emulating a mouse on a multi-touch sensitive surface
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US8842074B2 (en) 2006-09-06 2014-09-23 Apple Inc. Portable electronic device performing similar operations for different gestures
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US7864163B2 (en) 2006-09-06 2011-01-04 Apple Inc. Portable electronic device, method, and graphical user interface for displaying structured electronic documents
US7956849B2 (en) 2006-09-06 2011-06-07 Apple Inc. Video manager for portable multifunction device
US8130203B2 (en) 2007-01-03 2012-03-06 Apple Inc. Multi-touch input discrimination
US7855718B2 (en) 2007-01-03 2010-12-21 Apple Inc. Multi-touch input discrimination
US8269727B2 (en) 2007-01-03 2012-09-18 Apple Inc. Irregular input identification
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US20090128504A1 (en) * 2007-11-16 2009-05-21 Garey Alexander Smith Touch screen peripheral device
US8345014B2 (en) 2008-07-12 2013-01-01 Lester F. Ludwig Control of the operating system on a computing device via finger angle using a high dimensional touchpad (HDTP) touch user interface
US8564555B2 (en) * 2009-04-30 2013-10-22 Synaptics Incorporated Operating a touch screen control system according to a plurality of rule sets
US20110148436A1 (en) * 2009-12-18 2011-06-23 Synaptics Incorporated System and method for determining a number of objects in a capacitive sensing region using signal grouping
US20110148438A1 (en) * 2009-12-18 2011-06-23 Synaptics Incorporated System and method for determining a number of objects in a capacitive sensing region using a shape factor
US8386965B2 (en) * 2010-01-15 2013-02-26 Apple Inc. Techniques and systems for enhancing touch screen device accessibility through virtual containers and virtually enlarged boundaries
US8402533B2 (en) 2010-08-06 2013-03-19 Google Inc. Input to locked computing device
KR101220633B1 (ko) * 2011-03-04 2013-01-10 한국과학기술원 소리를 이용한 터치세기 검출방법, 이를 위한 입력장치 및 사용자 단말
US8766936B2 (en) 2011-03-25 2014-07-01 Honeywell International Inc. Touch screen and method for providing stable touches
US9513799B2 (en) 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
KR101219676B1 (ko) 2011-08-23 2013-01-09 (주)아이티버스 전자기기 구동장치 및 그 구동방법
DE112012003889T5 (de) * 2011-10-11 2014-06-05 International Business Machines Corporation Verfahren, Vorrichtung und Computerprogramm, die zum Zeigen auf ein Objekt dienen
CH705918A2 (de) * 2011-12-19 2013-06-28 Ralf Trachte Feld-Analysen für flexible Computer-Eingabe.
US9116611B2 (en) 2011-12-29 2015-08-25 Apple Inc. Devices, methods, and graphical user interfaces for providing multitouch inputs and hardware-based features using a single touch input
US9733707B2 (en) 2012-03-22 2017-08-15 Honeywell International Inc. Touch screen display user interface and method for improving touch interface utility on the same employing a rules-based masking system
US20130285942A1 (en) * 2012-04-26 2013-10-31 Acer Incorporated Touch detection method and touch control device using the same
US9423871B2 (en) 2012-08-07 2016-08-23 Honeywell International Inc. System and method for reducing the effects of inadvertent touch on a touch screen controller
TWI489337B (zh) * 2012-11-23 2015-06-21 義隆電子股份有限公司 具虛擬功能鍵之觸控面板的製造方法、干涉判斷方法及觸控裝置
CN103853370B (zh) * 2012-12-04 2017-01-25 北京富纳特创新科技有限公司 触摸式鼠标垫及其应用方法
US9128580B2 (en) 2012-12-07 2015-09-08 Honeywell International Inc. System and method for interacting with a touch screen interface utilizing an intelligent stencil mask
DE102014208222A1 (de) * 2014-04-30 2015-11-05 Siemens Aktiengesellschaft Verfahren zum Abrufen von Anwendungsbefehlen, Recheneinheit und medizinisches Bildgebungssystem
US9961239B2 (en) 2015-06-07 2018-05-01 Apple Inc. Touch accommodation options
US11334197B2 (en) * 2015-07-27 2022-05-17 Jordan A. Berger Universal keyboard
CN107578030B (zh) * 2017-09-21 2021-03-02 中新国际电子有限公司 一种利用主动式触控笔传输指纹信息的方法及系统
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4914624A (en) * 1988-05-06 1990-04-03 Dunthorn David I Virtual button for touch screen
US5327161A (en) * 1989-08-09 1994-07-05 Microtouch Systems, Inc. System and method for emulating a mouse input device with a touchpad input device
EP0450196B1 (en) * 1990-04-02 1998-09-09 Koninklijke Philips Electronics N.V. Data processing system using gesture-based input data
US5428367A (en) * 1991-07-08 1995-06-27 Mikan; Peter J. Computer mouse simulator having see-through touchscreen device and external electronic interface therefor
US5376946A (en) * 1991-07-08 1994-12-27 Mikan; Peter J. Computer mouse simulator device
US5335557A (en) * 1991-11-26 1994-08-09 Taizo Yasutake Touch sensitive input control device
US5483261A (en) * 1992-02-14 1996-01-09 Itu Research, Inc. Graphical input controller and method with rear screen image detection
US5621438A (en) * 1992-10-12 1997-04-15 Hitachi, Ltd. Pointing information processing apparatus with pointing function
US5621434A (en) * 1993-08-11 1997-04-15 Object Technology Licensing Corp. Cursor manipulation system and method

Also Published As

Publication number Publication date
US5870083A (en) 1999-02-09
KR19980032331A (ko) 1998-07-25

Similar Documents

Publication Publication Date Title
KR100260866B1 (ko) 터치스크린포인팅디바이스의분리를위한방법및시스템
KR100260867B1 (ko) 터치스크린포인팅디바이스의분리및합체를위한방법및시스템
KR100259452B1 (ko) 터치스크린용 가상 포인팅 디바이스
KR100255284B1 (ko) 가상 포인팅 디바이스를 생성하기 위한 컴퓨터 장치, 컴퓨터 시스템의 지시 방법 및 컴퓨터 사용가능 매체를 구비한 제조 물품
KR100255285B1 (ko) 가상 포인팅 디바이스를 생성하기 위한 컴퓨터 시스템, 컴퓨터 시스템의 지시 방법, 및 컴퓨터 사용가능 매체를 구비한 제조 물품
US5748184A (en) Virtual pointing device for touchscreens
US5764222A (en) Virtual pointing device for touchscreens
US5933134A (en) Touch screen virtual pointing device which goes into a translucent hibernation state when not in use
JP3504462B2 (ja) ポインティング・デバイス生成指示方法及びコンピュータ・システム
US5790104A (en) Multiple, moveable, customizable virtual pointing devices
US5874948A (en) Virtual pointing device for touchscreens
US5812118A (en) Method, apparatus, and memory for creating at least two virtual pointing devices
US9459700B2 (en) Keyboard with ntegrated touch surface
US7760187B2 (en) Visual expander
EP0827064B1 (en) Selection device for touchscreen systems
RU2559749C2 (ru) Система ввода информации касанием с тремя состояниями
KR20100018883A (ko) 전자기기의 사용자 인터페이스 방법 및 장치
US20140298275A1 (en) Method for recognizing input gestures
KR20170071460A (ko) 즐겨찾기모드 조작방법 및 이를 수행하는 터치 스크린을 포함하는 장치
WO2012170410A1 (en) Keyboard with integrated touch surface

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20040216

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee