KR20150083378A - 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법 - Google Patents

멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법 Download PDF

Info

Publication number
KR20150083378A
KR20150083378A KR1020140003037A KR20140003037A KR20150083378A KR 20150083378 A KR20150083378 A KR 20150083378A KR 1020140003037 A KR1020140003037 A KR 1020140003037A KR 20140003037 A KR20140003037 A KR 20140003037A KR 20150083378 A KR20150083378 A KR 20150083378A
Authority
KR
South Korea
Prior art keywords
nodes
threshold
node
touch information
task box
Prior art date
Application number
KR1020140003037A
Other languages
English (en)
Inventor
오윤석
김지훈
심상현
Original Assignee
삼성전기주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전기주식회사 filed Critical 삼성전기주식회사
Priority to KR1020140003037A priority Critical patent/KR20150083378A/ko
Priority to US14/251,978 priority patent/US20150193071A1/en
Publication of KR20150083378A publication Critical patent/KR20150083378A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G06F3/04186—Touch location disambiguation
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47K—SANITARY EQUIPMENT NOT OTHERWISE PROVIDED FOR; TOILET ACCESSORIES
    • A47K10/00—Body-drying implements; Toilet paper; Holders therefor
    • A47K10/24—Towel dispensers, e.g. for piled-up or folded textile towels; Toilet-paper dispensers; Dispensers for piled-up or folded textile towels provided or not with devices for taking-up soiled towels as far as not mechanically driven
    • A47K10/32—Dispensers for paper towels or toilet-paper
    • A47K10/42—Dispensers for paper towels or toilet-paper dispensing from a store of single sheets, e.g. stacked
    • A47K10/421—Dispensers for paper towels or toilet-paper dispensing from a store of single sheets, e.g. stacked dispensing from the top of the dispenser
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47K—SANITARY EQUIPMENT NOT OTHERWISE PROVIDED FOR; TOILET ACCESSORIES
    • A47K10/00—Body-drying implements; Toilet paper; Holders therefor
    • A47K10/16—Paper towels; Toilet paper; Holders therefor
    • A47K10/18—Holders; Receptacles
    • A47K10/20—Holders; Receptacles for piled sheets
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65D—CONTAINERS FOR STORAGE OR TRANSPORT OF ARTICLES OR MATERIALS, e.g. BAGS, BARRELS, BOTTLES, BOXES, CANS, CARTONS, CRATES, DRUMS, JARS, TANKS, HOPPERS, FORWARDING CONTAINERS; ACCESSORIES, CLOSURES, OR FITTINGS THEREFOR; PACKAGING ELEMENTS; PACKAGES
    • B65D83/00—Containers or packages with special means for dispensing contents
    • B65D83/08—Containers or packages with special means for dispensing contents for dispensing thin flat articles in succession
    • B65D83/0805—Containers or packages with special means for dispensing contents for dispensing thin flat articles in succession through an aperture in a wall
    • B65D83/0811—Containers or packages with special means for dispensing contents for dispensing thin flat articles in succession through an aperture in a wall with means for assisting dispensing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47K—SANITARY EQUIPMENT NOT OTHERWISE PROVIDED FOR; TOILET ACCESSORIES
    • A47K10/00—Body-drying implements; Toilet paper; Holders therefor
    • A47K10/24—Towel dispensers, e.g. for piled-up or folded textile towels; Toilet-paper dispensers; Dispensers for piled-up or folded textile towels provided or not with devices for taking-up soiled towels as far as not mechanically driven
    • A47K10/32—Dispensers for paper towels or toilet-paper
    • A47K2010/3233—Details of the housing, e.g. hinges, connection to the wall
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B65—CONVEYING; PACKING; STORING; HANDLING THIN OR FILAMENTARY MATERIAL
    • B65D—CONTAINERS FOR STORAGE OR TRANSPORT OF ARTICLES OR MATERIALS, e.g. BAGS, BARRELS, BOTTLES, BOXES, CANS, CARTONS, CRATES, DRUMS, JARS, TANKS, HOPPERS, FORWARDING CONTAINERS; ACCESSORIES, CLOSURES, OR FITTINGS THEREFOR; PACKAGING ELEMENTS; PACKAGES
    • B65D2231/00—Means for facilitating the complete expelling of the contents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법에 관한 것으로, 본 발명에 따른 일 실시예는 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득하는 단계, 상기 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스를 설정하는 단계, 상기 태스크 박스에 포함되는 상기 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 제 2 임계 노드를 선정하는 단계, 상기 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득하는 단계 및 상기 피크 노드의 개수를 계산하는 단계를 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법을 제공할 수 있다.

Description

멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법{Device and Method for recognizing gesture by multi-touch information}
본 발명은 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법에 관한 것이다.
터치 센서를 사용하는 전자기기의 사용이 급격하게 증가하면서 손가락을 사용해 터치스크린을 제어하는 기술이 발달했다. 터치스크린에서 손가락 한 개를 이용한 제스쳐 및 손가락 다수를 사용하는 제스쳐을 발생시켜 터치스크린을 제어하는 방법이 있지만, 다수의 손가락을 사용해서 제스쳐를 발생시키기 위해서 다수의 손가락을 구분하고 동일 손가락을 인식하는 등 멀티 터치 알고리즘을 사용해서 제스쳐를 인식하고 있다.
종래의 멀티 터치 algorithm은 labeling(터치를 그룹화 하는 알고리즘), multi-touch detection(watershed등과 같이 근접한 터치를 분리하는 알고리즘), tracking(이전 frame과 현재 frame에서 동일한 터치를 찾아 각 터치의 ID를 부여하는 알고리즘)등과 같은 복잡한 데이터 처리의 algorithm 절차를 거친 이후에 multi-touch gesture가 가능했다. 전자기기의 소형화로 전지가 작아지고 있지만, 화면은 커지면서 처리해야 하는 데이터량은 늘어나기 때문에 저전력으로 동작하는 것이 중요해지고 있다.
대한민국 공개특허 : 제1020130087868호
본 발명의 일 실시예가 해결하고자 하는 과제는 종래의 방법과 비교하여 처리 속도가 더 빠르고 SNR이 나쁜 상황에서도 동작이 가능한 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법을 제공하는 데 있다.
본 발명의 다른 실시예가 해결하고자 하는 과제는 섬세한 확대 및 축소, 회전 제스쳐를 발생시킬 수 있는 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법을 제공하는 데 있다.
본 발명에 따른 일 실시예는 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득하는 단계, 상기 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스를 설정하는 단계, 상기 태스크 박스에 포함되는 상기 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 제 2 임계 노드를 선정하는 단계, 상기 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득하는 단계 및 상기 피크 노드의 개수를 계산하는 단계를 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법을 제공할 수 있다.
일 실시예에 있어서, 상기 노드 값은 정전용량의 변화 값일 수 있고, 상기 태스크 박스는 직사각형일 수 있다.
다른 실시예에 있어서, 상기 태스크 박스를 설정하는 단계는 상기 하나 이상의 제 1 임계 노드 각각을 지나는 수평선을 설정하는 단계, 상기 하나 이상의 제 1 임계 노드 각각을 지나는 수직선을 설정하는 단계, 상기 수직선과 상기 수평선으로 이루어지는 직사각형 중 넓이가 가장 큰 직사각형을 획득하는 단계 및 상기 넓이가 가장 큰 직사각형을 태스크 박스로 선정하는 단계를 포함할 수 있다.
또 다른 실시예에 있어서, 상기 태스크 박스의 무게중심을 계산하는 단계 및 상기 무게중심의 이동방향 및 이동길이 중 선택되는 하나 이상에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 피크 노드의 개수를 계산하는 단계 이후 상기 피크 노드의 개수가 변경된 것을 검출하는 단계 및 상기 피크 노드의 개수의 변경에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 피크 노드의 개수를 계산하는 단계 이후 상기 피크 노드들 사이의 거리가 변경된 것을 검출하는 단계 및 상기 피크 노드들 사이의 거리의 변경에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 태스크 박스의 가로 길이 및 세로의 길이를 측정하는 단계, 상기 가로 길이 및 상기 세로 길이의 변화를 검출하는 단계 및 상기 변화에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
본 발명에 따른 다른 실시예는 멀티 터치 정보를 이용한 제스쳐 인식 장치로서, 적어도 하나의 프로세서, 멀티 터치 정보 감지 스크린 및 프로그램 명령어들을 포함하는 메모리를 포함하고, 상기 프로그램 명령어들은, 상기 멀티 터치 정보 감지 스크린에 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득하는 단계, 상기 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스를 설정하는 단계, 상기 태스크 박스에 포함되는 상기 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 제 2 임계 노드를 선정하는 단계, 상기 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득하는 단계 및 상기 피크 노드의 개수를 계산하는 단계를 상기 적어도 하나의 프로세서에 의해 실행될 수 있는 멀티 터치 정보를 이용한 제스쳐 인식 장치를 제공할 수 있다.
일 실시예에 있어서, 상기 노드 값은 정전용량의 변화 값이고, 상기 태스크 박스는 직사각형일 수 있다.
다른 실시예에 있어서, 상기 태스크 박스를 설정하는 단계는 상기 하나 이상의 제 1 임계 노드 각각을 지나는 수평선을 설정하는 단계, 상기 하나 이상의 제 1 임계 노드 각각을 지나는 수직선을 설정하는 단계, 상기 수직선과 상기 수평선으로 이루어지는 직사각형 중 넓이가 가장 큰 직사각형을 획득하는 단계 및 상기 넓이가 가장 큰 직사각형을 태스크 박스로 선정하는 단계를 포함할 수 있다.
또 다른 실시예에 있어서, 상기 프로그램 명령어들은 상기 태스크 박스의 무게중심을 계산하는 단계 및 상기 무게중심의 이동방향에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 프로그램 명령어들은 상기 피크 노드의 개수를 계산하는 단계 이후 상기 피크 노드의 개수가 변경된 것을 검출하는 단계 및 상기 변경에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
또 다른 실시예에 있어서, 상기 프로그램 명령어들은 상기 태스크 박스의 가로 길이 및 세로의 길이를 측정하는 단계, 상기 가로 길이 및 상기 세로 길이의 변화를 검출하는 단계 및 상기 변화에 상응하는 제스쳐를 발생시키는 단계를 더 포함할 수 있다.
본 발명에 따른 또 다른 실시예는 멀티 터치 정보를 이용한 제스쳐 인식 장치를 포함하는 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 텔레매틱스 단말기(Telematics Terminal), 노트북 컴퓨터(Notebook Computer), 디지털방송용 단말기, 개인 정보 단말기(Personal Digital Assistant: PDA), 와이브로 단말기(Wibro Terminal), IPTV(Internet Protocol Television) 단말기, AVN(Audio Video Navigation) 단말기, PMP(Portable Multimedia Player) 및 네비게이션 단말기(차량 네비게이션 장치)(Navigation Terminal) 중 선택되는 어느 하나의 단말기를 제공할 수 있다.
본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법은 종래의 방법과 비교하여 처리 속도가 더 빠르고 SNR이 나쁜 상황에서도 동작이 가능하다.
본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법은 섬세한 확대 및 축소, 회전 제스쳐를 발생시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법을 나타낸 순서도이다.
도 2는 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법의 태스크 박스를 설정하는 방법을 나타낸 것이다.
도 3은 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법의 제 2 임계 노드를 선정하는 방법을 나타낸 것이다.
도 4는 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법의 피크 노드의 개수와 피크 노드 사이의 길이에 따른 제스쳐 인식 방법을 나타낸 것이다.
도 5는 본 발명의 일 실시예에 따른 태스크 박스의 무게중심을 이용한 멀티 터치 정보를 이용한 제스쳐 인식 방법을 나타낸 것이다.
도 6은 본 발명의 일 실시예에 따른 태스크 박스의 가로 길이와 세로 길이의 변화에 따른 제스쳐 인식방법을 나타낸 것이다.
도 7은 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 장치를 나타낸 것이다.
본 발명의 목적 및 효과, 그리고 그것들을 달성하기 위한 기술적 구성들은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다.
그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있다. 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
이하, 첨부한 도면들을 참조하여, 본 발명의 실시예들을 보다 상세하게 설명하고자 한다.
도 1은 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법을 나타낸 순서도이다.
도 1을 참조하면, 단계 S101에서 멀티 터치 정보 감지 스크린(MTS)에 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득할 수 있다. 여기서, 노드 값은 정전용량의 변화 값을 포함할 수 있다.
잠시, 도 2를 참조하면, 멀티 터치 정보 감지 스크린(MTS)을 격자 무늬로 나타냈고, 터치 된 포인트의 정전용량의 변화를 숫자로서 나타냈다. 여기서, 나타낸 숫자는 본 발명의 이해를 돕기 위해 편의상 설정한 것으로, 특별한 단위를 가지는 것은 아니고, 본 발명의 권리범위를 제시한 숫자로 한정하는 것도 아니다.
만약, 제 1 임계값을 60으로 설정하면 도 2에 나타낸 400개의 노드 중 멀티 터치 정보 감지 스크린(MTS)에 터치 된 포인트의 노드 값이 60 이상인 노드를 획득할 수 있다. 좌측 상단에서 11개의 노드를 획득하고, 좌측 하단에서 8개의 노드를 획득하고, 우측 중단에서 11개의 노드를 획득할 수 있다.
단계 S102에서 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스(TB)를 설정할 수 있다. 여기서, 태스크 박스(TB)는 제 1 임계 노드를 모두 포함할 수 있다.
태스크 박스(TB)를 설정하기 위해, 하나 이상의 제 1 임계 노드 각각을 지나는 수평선을 설정하고, 하나 이상의 제 1 임계 노드 각각을 지나는 수직선을 설정하면, 수직선과 수평선으로 이루어지는 복수의 직사각형을 얻을 수 있다.
복수의 직사각형 중 넓이가 가장 큰 직사각형을 획득하면, 제 1 임계 노드 모두를 포함하는 태스크 박스(TB)를 획득할 수 있다. 일 실시예에 있어서, 태스크 박스(TB)는 정사각형이 될 수도 있고, 직사각형이 될 수도 있다. 도 2에서 태스크 박스(TB)는 RV1, RV2, RV3 및 RV4을 꼭지점으로 하는 정사각형을 확인할 수 있다.
단계 S103에서 태스크 박스(TB)에 포함되는 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 하나 이상의 제 2 임계 노드를 선정할 수 있다.
도 3을 참조하면, 제 2 임계값을 80으로 설정했을 때, 좌측 상단에서 8개의 제 2 임계 노드(노드 값이 100인 노드 1개, 노드 값이 90인 노드 4개 및 노드 값이 80인 노드 3개)를 획득하고, 좌측 하단에서 2개의 제 2 임계 노드(노드 값이 90인 노드 1개, 노드 값이 80인 노드 1개)를 획득하고, 우측 중단에서 5개의 제 2 임계 노드(노드 값이 90인 노드 1개, 노드 값이 80인 노드 4개)를 획득할 수 있다.
단계 S104에서 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득할 수 있다. 도 3의 좌측 상단에서 8개의 제 2 임계 노드(노드 값이 100인 노드 1개, 노드 값이 90인 노드 4개 및 노드 값이 80인 노드 3개) 중에서 주변 노드(노드 값이 90인 노드 4개 및 노드 값이 80인 노드 3개)와 비교하여 가장 큰 노드 값을 가지는 피크 노드(노드 값이 100인 노드 1개)(PN1)를 획득할 수 있다.
또한, 좌측 하단에서 2개의 제 2 임계 노드(노드 값이 90인 노드 1개, 노드 값이 80인 노드 1개) 중에서 주변 노드(노드 값이 80인 노드 1개)와 비교하여 가장 큰 노드 값을 가지는 피크 노드(노드 값이 90인 노드 1개)(PN2)를 획득할 수 있다.
또한, 우측 중단에서 5개의 제 2 임계 노드(노드 값이 90인 노드 1개, 노드 값이 80인 노드 4개) 중에서, 주변 노드(노드 값이 80인 노드 4개)와 비교하여 가장 큰 노드 값을 가지는 피크 노드(노드 값이 90인 노드 1개)(PN3)를 획득할 수 있다.
단계 S105에서 피크 노드(PN1, PN2, PN3)의 개수를 계산할 수 있다. 도 3에서 피크 노드(PN1, PN2, PN3)의 개수는 3개임을 알 수 있다.
또한, 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법은 단계 S105에서 계산한 피크 노드(PN1, PN2, PN3)의 개수에 상응하는 제스쳐를 발생시킬 수 있다.
일 실시예에 있어서, 피크 노드(PN1, PN2, PN3)의 개수를 계산하는 단계 이후에 피크 노드(PN1, PN2, PN3)의 개수가 변경된 것을 검출하고, 피크 노드(PN1, PN2, PN3)의 개수의 변경에 상응하는 제스쳐를 발생시킬 수도 있다. 여기서, 피크 노드(PN1, PN2, PN3)의 개수는 증가할 수도 있고, 감소할 수도 있다.
다른 실시예에서, 피크 노드(PN1, PN2, PN3)의 개수를 계산하는 단계 이후 피크 노드(PN1, PN2, PN3)들 사이의 거리가 변경된 것을 검출하고, 피크 노드(PN1, PN2, PN3)들 사이의 거리의 변경에 상응하는 제스쳐를 발생시킬 수도 있다. 여기서, 피크 노드(PN1, PN2, PN3)들 사이의 길이는 증가할 수도 있고, 감소할 수도 있다.
도 4의 (a)에 나타낸 것처럼, 3개의 피크 노드(PN1, PN2, PN3)를 계산하고, 도 4의 (b)에 나타낸 것처럼, 3개의 피크 노드(PN1, PN2, PN3)들 사이의 거리가 변경된 것을 검출할 수 있다. 이때, 피크 노드(PN1, PN2, PN3)들 사이의 거리의 변경에 상응하는 제스쳐를 발생시킬 수 있다. 도 4의 (c)에 나타낸 것처럼, 피크 노드(PN1, PN2, PN3)를 그대로 두고, 새로운 피크 노드(PN4)를 검출할 수 있다. 이때, 피크 노드(PN1, PN2, PN3, PN4)의 개수의 변경에 상응하는 제스쳐를 발생시킬 수 있다.
도 5는 본 발명의 일 실시예에 따른 태스크 박스(TB)의 무게중심을 이용한 멀티 터치 정보를 이용한 제스쳐 인식 방법을 나타낸 것이다.
도 5를 참조하면, 태스크 박스(TB)의 무게중심(G)을 계산하고, 무게중심(G)의 이동방향 및 이동길이에 따라서 제스쳐를 발생시킬 수 있다. 도 5의 (a)에 나타낸 것처럼, 태스크 박스(TB)의 무게중심은 태스크 박스(TB)의 대각선(DG1, DG2)이 만나는 교차점이 될 수 있다. 도 5의 (b)에 나타낸 것처럼, 피크 노드(PN1, PN2, PN3, PN4)가 움직이면, 태스크 박스(TB)도 이동을 하게 되고, 태스크 박스(TB)가 이동하면, 태스크 박스(TB)의 무게중심(G)도 이동을 하게 된다. 무게중심(G)이 무게중심(G2)으로 이동한 방향에 상응하는 제스쳐를 발생시킬 수 있으며, 무게중심(G)이 무게중심(G2)으로 이동한 길이에 상응하는 제스쳐를 발생시킬 수도 있다.
도 6은 본 발명의 일 실시예에 따른 태스크 박스의 가로 길이와 세로 길이의 변화에 따른 제스쳐 인식방법을 나타낸 것이다.
도 6의 (a)에서 피크 노드(PN1, PN2, PN3)를 포함하는 태스크 박스(TB)를 확인할 수 있다. 도 6의 (b)에서 피크 노드(PN1, PN2, PN3)가 이동하면 새로운 태스크 박스(TB)가 형성된다.
피크 노드(PN1, PN2, PN3)가 이동하기 전에 태스크 박스(TB)의 가로 길이 및 세로의 길이를 측정하고, 태스크 박스(TB)의 가로 길이 및 태스크 박스(TB)의 세로 길이의 변화를 검출하여, 변화에 상응하는 제스쳐를 발생시킬 수 있다.
본 발명에 따른 일 실시예는 멀티 터치 정보를 이용한 제스쳐 인식 방법을 수행하는 컴퓨터가 읽을 수 있는 프로그램이 기록된 기록 매체를 제공할 수 있다. 여기에서 개시된 실시예들과 결합하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로, 프로세서에 의해서 실행된 소프트웨어 모듈에서, 또는 상기 두 가지의 결합에서 직접 구현될 수 있다.
여기에서 개시된 실시예들과 결합하여 설명된 방법 또는 알고리즘의 단계들은 하드웨어로, 프로세서에 의해서 실행된 소프트웨어 모듈에서, 또는 상기 두 가지의 결합에서 직접 구현될 수 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터들, 하드 디스크, 탈부착 가능 디스크, CD-ROM, 또는 본 발명이 속한 기술분야에서 알려진 어떤 다른 형상의 저장 매체에 상주할 수 있다. 예시적인 저장 매체는 상기 프로세서와 결합할 수 있을 것이며, 그래서 상기 프로세서가 상기 저장 매체로부터 정보를 읽고 그리고 정보를 그 저장 매체에 쓸 수 있도록 한다.
대안적으로, 저장 매체는 프로세서에 통합될 수 있다. 프로세서 및 저장 매체는 ASIC 내에 상주할 수 있을 것이다. ASIC은 사용자 단말 내에 위치할 수 있다. 대안적으로, 프로세서 및 저장 매체는 사용자 단말 내 별도의 컴포넌트들로서 상주할 수 있다.
상기에서 설명된 모든 프로세스들은 하나 또는 그 이상의 범용 또는 특수 목적 컴퓨터들이나 프로세서들에 의해서 실행된 소프트웨어 코드 모듈들 내에서 구현될 수 있을 것이며, 그리고 그 소프트웨어 코드 모듈들을 경유하여 완전히 자동화될 수 있다. 코드 모듈들은 임의 유형의 컴퓨터-독출가능 매체 또는 다른 컴퓨터 저장 디바이스 또는 저장 디바이스들의 집합 상에 저장될 수 있을 것이다. 상기 방법들 중 몇몇 또는 모두는 전문화된 컴퓨터 하드웨어 내에서 대안으로 구현될 수 있다.
여기에서 설명된 모든 방법들 및 태스크들은 컴퓨터 시스템에 의해서 실행되고 충분히 자동화될 수 있다. 컴퓨터 시스템은 설명된 기능들을 수행하기 위해서 네트워크를 통해서 통신하고 그리고 상호 동작하는 다중의 개별 컴퓨터들 또는 컴퓨팅 디바이스들(예를 들면, 물리적인 서버들, 워크스테이션들, 저장 어레이들 등)을 포함할 수 있다.
컴퓨팅 디바이스 각각은 메모리 또는 비-일시적 컴퓨터-독출가능 저장 매체에 저장된 프로그램 명령어들 또는 모듈들을 실행시키는 프로세서(또는 다중 프로세서들 또는 회로 또는 회로들의 집합, 예를 들면 모듈)를 포함할 수 있다.
여기에서 설명된 다양한 기능들 중 몇몇 또는 모두는 컴퓨터 시스템의 애플리케이션-특정 회로 (예를 들면, ASIC들 또는 FPGA들)로 구현될 수 있지만, 그 설명된 다양한 기능들은 그런 프로그램 명령어들로 구현될 수 있을 것이다. 컴퓨터 시스템이 여러 컴퓨팅 디바이스들을 포함할 때에, 이 디바이스들은 같은 장소에 배치되는 것이 필요한 것은 아니지만, 같이 배치될 수 있을 것이다. 상기 개시된 방법들 및 태스크들의 결과들은 솔리드 스테이트 메모리 칩들 및/또는 자기 디스크들과 같은 변환 물리 저장 디바이스들에 의해서 상이한 상태로 영구적으로 저장될 수 있다.
도 7은 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 장치를 나타낸 블럭도이다.
도 7을 참조하면, 본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 장치(600)는 프로세서(610), 멀티 터치 정보 감지 스크린(620) 및 메모리(630)를 포함할 수 있다.
멀티 터치 정보 감지 스크린(620)은 터치 정보를 입력받을 수 있다. 여기서, 멀티 터치 정보 감지 스크린(620)은 정전 용량의 변화 또는 압력의 변화를 통해 터치 여부를 인식할 수 있는 수단이면 가능하다. 메모리(630)는 멀티 터치 정보를 이용하여 제스쳐를 인식하는 프로그램 명령어들을 저장할 수 있고, 프로세서(630)는 멀티 터치 정보를 이용하여 제스쳐를 인식하는 프로그램 명령어들을 실행할 수 있다.
여기서, 프로그램 명령어들은 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득하는 단계, 상기 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스를 설정하는 단계, 상기 태스크 박스에 포함되는 상기 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 제 2 임계 노드를 선정하는 단계, 상기 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득하는 단계 및 상기 피크 노드의 개수를 계산하는 단계를 수행하는 프로그램 명령어들을 포함할 수 있다.
본 명세서에서 설명되는 멀티 터치 정보를 이용한 제스쳐 인식 방법을 포함하는 애플리케이션의 실시예들은 다양한 다른 디바이스들과 상호작용할 수 있는 하나 이상의 컴퓨터 시스템에서 실행될 수 있다.
일 실시예에서, 컴퓨터 시스템은 휴대용 디바이스, 개인용 컴퓨터 시스템, 데스크탑 컴퓨터, 랩탑, 노트북 또는 넷북 컴퓨터, 메인프레임 컴퓨터 시스템, 핸드헬드 컴퓨터, 워크스테이션, 네트워크 컴퓨터, 카메라, 셋톱 박스, 이동 디바이스, 소비자 디바이스, 비디오 게임 콘솔, 핸드헬드 비디오 게임 디바이스, 애플리케이션 서버, 저장 디바이스, 스위치, 모뎀, 라우터와 같은 주변 디바이스, 또는 일반적으로 임의 타입의 컴퓨팅 또는 전자 디바이스를 포함하지만, 이에 한정되지 않는 임의의 다양한 타입의 디바이스일 수 있다.
컴퓨터 시스템은 입출력(I/O) 인터페이스를 통해 시스템 메모리에 결합 된 하나 이상의 프로세서를 포함할 수 있다. 컴퓨터 시스템은 I/O 인터페이스에 결합된 유선 및/또는 무선 네트워크 인터페이스를 더 포함할 수 있으며, 커서 제어 디바이스, 키보드, 디스플레이(들) 및 멀티터치 인에이블드 디바이스와 같은 멀티터치 인터페이스와 같은 하나 이상의 입출력 디바이스를 포함할 수 있다.
일 실시예에 있어서, 컴퓨터 시스템의 단일 인스턴스를 이용하여 구현될 수 있는 반면, 다른 실시예에서는 다수의 그러한 시스템, 또는 컴퓨터 시스템을 구성하는 다수의 노드가 실시예들의 상이한 부분들 또는 인스턴스들을 호스트하도록 구성될 수 있다. 예를 들어, 일부 요소들은 다른 요소들을 구현하는 노드들과 다른 컴퓨터 시스템의 하나 이상의 노드들을 통해 구현될 수 있다.
다양한 실시예에서, 컴퓨터 시스템은 하나의 프로세서를 포함하는 유니프로세서 시스템 또는 여러 개의 프로세서(예로서, 2개, 4개, 8개 또는 다른 적절한 수)를 포함하는 멀티프로세서 시스템일 수 있다. 프로세서들은 명령어들을 실행할 수 있는 임의의 적절한 프로세서일 수 있다. 예를 들어, 다양한 실시예들에서, 프로세서들은 x86, PowerPC, SPARC 또는 MIPS 명령어 세트 아키텍처(ISA) 또는 임의의 다른 적절한 ISA와 같은 임의의 다양한 ISA를 구현하는 범용 또는 내장 프로세서들일 수 있다. 멀티프로세서 시스템들에서, 프로세서들의 각각은 반드시가 아니라 일반적으로 동일 ISA로 구현될 수 있다.
일 실시예에 있어서, 적어도 하나의 프로세서는 그래픽 처리 유닛일 수 있다. 그래픽 처리 유닛, 즉 GPU는 개인용 컴퓨터, 워크스테이션, 게임 콘솔 또는 다른 컴퓨팅 또는 전자 디바이스를 위한 전용 그래픽 렌더링 디바이스로서 간주될 수 있다. 현대의 GPU들은 컴퓨터 그래픽의 조작 및 표시에 있어서 매우 효율적일 수 있으며, 이들의 고도의 병렬 구조는 이들이 소정 범위의 복잡한 그래픽 알고리즘들에 대해 통상의 CPU들보다 효과적이게 할 수 있다. 예를 들어, 그래픽 프로세서는 호스트 중앙 처리 유닛(CPU)을 이용하여 스크린에 직접 그리는 것보다 훨씬 더 빠르게 그래픽 프리미티브 연산들을 실행하는 방식으로 다수의 그래픽 프리미티브 연산을 구현할 수 있다.
다양한 실시예에 있어서, 본 명세서에서 개시되는 방법들 및 기술들은 그러한 GPU들 중 하나에서 실행되거나 둘 이상에서 병렬로 실행되도록 구성되는 프로그램 명령어들에 의해 적어도 부분적으로 구현될 수 있다. GPU는 프로그래머들이 GPU의 기능을 호출할 수 있게 하는 하나 이상의 애플리케이션 프로그래머 인터페이스(API)를 구현할 수 있다. 적절한 GPU들은 NVIDIA 사, ATI 테크놀로지스(AMD) 등과 같은 판매자들로부터 구매 가능할 수 있다.
시스템 메모리는 프로세서에 의해 액세스 가능한 프로그램 명령어들 및/또는 데이터를 저장하도록 구성될 수 있다. 다양한 실시예들에서, 시스템 메모리는 정적 랜덤 액세스 메모리(SRAM), 동기식 동적 RAM(SDRAM), 비휘발성/플래시 타입 메모리 또는 임의의 다른 타입의 메모리와 같은 임의의 적절한 메모리 기술을 이용하여 구현될 수 있다.
본 발명의 일 실시예에 따른 멀티 터치 정보를 이용한 제스쳐 인식 방법을 구현하는 애플리케이션의 실시예들에 대해 전술한 것들과 같은 원하는 기능들을 구현하는 프로그램 명령어들 및 데이터는 시스템 메모리 내에 프로그램 명령어들 및 데이터 저장소로서 각각 저장될 수 있다.
다른 실시예들에서, 프로그램 명령어들 및/또는 데이터는 수신되거나 송신되거나 또는 상이한 타입의 컴퓨터 액세스 가능 매체들 상에 또는 시스템 메모리 또는 컴퓨터 시스템으로부터 분리된 유사한 매체들 상에 저장될 수 있다. 일반적으로, 컴퓨터 액세스 가능 매체는 자기 또는 광학 매체들, 예로서 I/O 인터페이스를 통해 컴퓨터 시스템에 결합된 디스크 또는 CD/DVD-ROM과 같은 저장 매체들 또는 메모리 매체들을 포함할 수 있다. 컴퓨터 액세스 가능 매체를 통해 저장된 프로그램 명령어들 및 데이터는 네트워크 인터페이스를 통해 구현될 수 있는 바와 같은 네트워크 및/또는 무선 링크와 같은 통신 매체를 통해 운반될 수 있는 전기, 전자기 또는 디지털 신호들과 같은 송신 매체들 또는 신호들에 의해 전송될 수 있다.
일 실시예에서, I/O 인터페이스는 프로세서, 시스템 메모리 및 네트워크 인터페이스 또는 입출력 디바이스들과 같은 다른 주변 인터페이스들을 포함하는 디바이스 내의 임의의 주변 디바이스들 간의 I/O 트래픽을 조정하도록 구성될 수 있다. 일부 실시예들에서, I/O 인터페이스는 하나의 컴포넌트(예로서, 시스템 메모리)로부터의 데이터 신호들을 다른 컴포넌트(예로서, 프로세서)에 의한 사용에 적합한 포맷으로 변환하기 위해 임의의 필요한 프로토콜, 타이밍 또는 기타 데이터 변환들을 수행할 수 있다.
일 실시예에서, I/O 인터페이스는 예를 들어 주변 컴포넌트 상호접속(PCI) 버스 표준 또는 유니버설 직렬 버스(USB) 표준의 변형과 같은 다양한 타입의 주변 버스들을 통해 부착된 디바이스들에 대한 지원을 포함할 수 있다. 일부 실시예들에서, I/O 인터페이스의 기능은 예를 들어 노스 브리지 및 사우스 브리지와 같은 둘 이상의 개별 컴포넌트로 분할될 수 있다. 게다가, 일부 실시예들에서, 시스템 메모리에 대한 인터페이스와 같은 I/O 인터페이스의 기능의 일부 또는 전부는 프로세서 내에 직접 통합될 수 있다.
네트워크 인터페이스는 컴퓨터 시스템과 다른 컴퓨터 시스템들과 같은 네트워크에 부착된 다른 디바이스들 사이에서 또는 컴퓨터 시스템의 노드들 사이에서 데이터가 교환되게 하도록 구성될 수 있다.
다양한 실시예들에서, 네트워크 인터페이스는 예를 들어 임의의 적절한 타입의 이더넷 네트워크와 같은 유선 또는 무선 범용 데이터 네트워크들을 통해; 아날로그 음성 네트워크들 또는 디지털 광섬유 통신 네트워크 들과 같은 통신/전화 네트워크들을 통해; 광섬유 채널 SAN들과 같은 저장 영역 네트워크들을 통해; 또는 임의의 다른 적절한 타입의 네트워크 및/또는 프로토콜을 통해 통신을 지원할 수 있다.
입출력 디바이스들은 일부 실시예들에서 하나 이상의 디스플레이 단말기, 키보드, 키패드, 터치패드, 스캐닝 디바이스, 음성 또는 광학 인식 디바이스, 또는 하나 이상의 컴퓨터 시스템에 의한 데이터 입력 및 검색에 적합한 임의의 다른 디바이스들을 포함할 수 있다. 다수의 입출력 디바이스가 컴퓨터 시스템 내에 존재할 수 있거나, 컴퓨터 시스템의 다양한 노드 상에 분산될 수 있다.
일 실시예에서, 유사한 입출력 디바이스들이 컴퓨터 시스템으로부터 분리될 수 있거나, 유선 또는 무선 접속을 통해, 이를테면 네트워크 인터페이스를 통해 컴퓨터 시스템의 하나 이상의 노드와 상호작용할 수 있다.
컴퓨터 시스템 및 디바이스들은 컴퓨터, 개인용 컴퓨터 시스템, 데스크탑 컴퓨터, 랩탑, 노트북 또는 넷북 컴퓨터, 메인프레임 컴퓨터 시스템, 핸드헬드 컴퓨터, 워크스테이션, 네트워크 컴퓨터, 카메라, 셋톱 박스, 이동 디바이스, 네트워크 디바이스, 인터넷 기구, PDA, 무선 전화, 페이저, 소비자 디바이스, 비디오 게임 콘솔, 핸드헬드 비디오 게임 디바이스, 애플리케이션 서버, 저장 디바이스, 스위치, 모뎀, 라우터와 같은 주변 디바이스, 또는 일반적으로 임의 타입의 컴퓨팅 또는 전자 디바이스를 포함하는, 지시된 기능들을 수행할 수 있는 하드웨어 또는 소프트웨어의 임의 조합을 포함할 수 있다.
컴퓨터 시스템은 다른 디바이스들에 접속될 수 있거나, 그 대신에 독립 시스템으로서 동작할 수도 있다. 또한, 컴포넌트들에 의해 제공되는 기능은 일부 실시예들에서 더 적은 컴포넌트들 내에 결합되거나 추가적인 컴포넌트들 내에 분산될 수 있다. 유사하게, 일부 실시예들에서, 컴포넌트들 중 일부 컴포넌트의 기능은 제공되지 않을 수 있고 및/또는 다른 추가 기능이 이용 가능할 수 있다.
다양한 아이템들이 사용되고 있는 동안에 메모리 내에 또는 저장소 상에 저장되지만, 이러한 아이템들 또는 이들의 부분들은 메모리 관리 및 데이터 보전의 목적들을 위해 메모리와 다른 저장 디바이스들 사이에서 전송될 수 있다는 것을 이 분야의 기술자들은 알 수 있다. 대안적으로 다른 실시예들에서, 소프트웨어 컴포넌트들 중 일부 또는 전부는 다른 디바이스 상의 메모리에서 실행되고, 컴퓨터간 통신을 통해 컴퓨터 시스템과 통신할 수 있다.
시스템 컴포넌트들 또는 데이터 구조들의 일부 또는 전부는 또한 그의 다양한 예들이 위에서 설명된 적절한 드라이브에 의해 판독될 컴퓨터 액세스 가능 매체 또는 휴대용 물건 상에(예로서, 명령어들 또는 구조화된 데이터로서) 저장될 수 있다. 일부 실시예들에서, 컴퓨터 시스템으로부터 분리된 컴퓨터 액세스 가능 매체 상에 저장된 명령어들은 네트워크 및/또는 무선 링크와 같은 통신 매체를 통해 운반되는 전기, 전자기 또는 디지털 신호들과 같은 송신 매체들 또는 신호들을 통해 컴퓨터 시스템으로 전송될 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
600 : 멀티 터치 정보를 이용한 제스쳐 인식 장치
610 : 프로세서
620 : 멀티 정보 감지 스크린
630 : 메모리
MTS : 멀티 터치 정보 감지 스크린
TB : 태스크 박스
PN : 피크 노드

Claims (15)

  1. 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득하는 단계;
    상기 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스를 설정하는 단계;
    상기 태스크 박스에 포함되는 상기 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 제 2 임계 노드를 선정하는 단계;
    상기 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득하는 단계; 및
    상기 피크 노드의 개수를 계산하는 단계;
    를 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  2. 제 1 항에 있어서,
    상기 노드 값은 정전용량의 변화 값인 것을 특징으로 하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  3. 제 1 항에 있어서,
    상기 태스크 박스는 직사각형인 것을 특징으로 하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  4. 제 1 항에 있어서,
    상기 태스크 박스를 설정하는 단계;는
    상기 하나 이상의 제 1 임계 노드 각각을 지나는 수평선을 설정하는 단계;
    상기 하나 이상의 제 1 임계 노드 각각을 지나는 수직선을 설정하는 단계;
    상기 수직선과 상기 수평선으로 이루어지는 직사각형 중 넓이가 가장 큰 직사각형을 획득하는 단계; 및
    상기 넓이가 가장 큰 직사각형을 태스크 박스로 선정하는 단계;
    를 포함하는 것을 특징으로 하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  5. 제 1 항에 있어서,
    상기 태스크 박스의 무게중심을 계산하는 단계; 및
    상기 무게중심의 이동방향 및 이동길이 중 선택되는 하나 이상에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  6. 제 1 항에 있어서,
    상기 피크 노드의 개수를 계산하는 단계; 이후
    상기 피크 노드의 개수가 변경된 것을 검출하는 단계; 및
    상기 피크 노드의 개수의 변경에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  7. 제 1 항에 있어서,
    상기 피크 노드의 개수를 계산하는 단계; 이후
    상기 피크 노드들 사이의 거리가 변경된 것을 검출하는 단계; 및
    상기 피크 노드들 사이의 거리의 변경에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  8. 제 1 항에 있어서,
    상기 태스크 박스의 가로 길이 및 세로의 길이를 측정하는 단계;
    상기 가로 길이 및 상기 세로 길이의 변화를 검출하는 단계; 및
    상기 변화에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 방법.
  9. 멀티 터치 정보를 이용한 제스쳐 인식 장치로서,
    적어도 하나의 프로세서;
    멀티 터치 정보 감지 스크린; 및
    프로그램 명령어들을 포함하는 메모리;
    를 포함하고,
    상기 프로그램 명령어들은,
    상기 멀티 터치 정보 감지 스크린에 터치 된 포인트 중에서 제 1 임계값 이상의 노드 값을 가지는 하나 이상의 제 1 임계 노드를 획득하는 단계;
    상기 하나 이상의 제 1 임계 노드를 모두 포함하는 태스크 박스를 설정하는 단계;
    상기 태스크 박스에 포함되는 상기 하나 이상의 제 1 임계 노드 중에서 제 2 임계값 이상의 노드 값을 가지는 제 2 임계 노드를 선정하는 단계;
    상기 제 2 임계 노드 중에서 주변 노드와 비교하여 가장 큰 노드 값을 가지는 피크 노드를 획득하는 단계; 및
    상기 피크 노드의 개수를 계산하는 단계;
    를 상기 적어도 하나의 프로세서에 의해 실행될 수 있는 멀티 터치 정보를 이용한 제스쳐 인식 장치.
  10. 제 9 항에 있어서,
    상기 노드 값은 정전용량의 변화 값이고,
    상기 태스크 박스는 직사각형인 것을 특징으로 하는 멀티 터치 정보를 이용한 제스쳐 인식 장치.
  11. 제 9 항에 있어서,
    상기 태스크 박스를 설정하는 단계;는
    상기 하나 이상의 제 1 임계 노드 각각을 지나는 수평선을 설정하는 단계;
    상기 하나 이상의 제 1 임계 노드 각각을 지나는 수직선을 설정하는 단계;
    상기 수직선과 상기 수평선으로 이루어지는 직사각형 중 넓이가 가장 큰 직사각형을 획득하는 단계; 및
    상기 넓이가 가장 큰 직사각형을 태스크 박스로 선정하는 단계;
    를 포함하는 것을 특징으로 하는 멀티 터치 정보를 이용한 제스쳐 인식 장치.
  12. 제 9 항에 있어서,
    상기 프로그램 명령어들은
    상기 태스크 박스의 무게중심을 계산하는 단계; 및
    상기 무게중심의 이동방향에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 장치.
  13. 제 9 항에 있어서,
    상기 프로그램 명령어들은
    상기 피크 노드의 개수를 계산하는 단계; 이후
    상기 피크 노드의 개수가 변경된 것을 검출하는 단계; 및
    상기 변경에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 장치.
  14. 제 9 항에 있어서,
    상기 프로그램 명령어들은
    상기 태스크 박스의 가로 길이 및 세로의 길이를 측정하는 단계;
    상기 가로 길이 및 상기 세로 길이의 변화를 검출하는 단계; 및
    상기 변화에 상응하는 제스쳐를 발생시키는 단계;
    를 더 포함하는 멀티 터치 정보를 이용한 제스쳐 인식 장치.
  15. 제 9 항의 멀티 터치 정보를 이용한 제스쳐 인식 장치를 포함하는 휴대 단말기(Portable Terminal), 이동 단말기(Mobile Terminal), 텔레매틱스 단말기(Telematics Terminal), 노트북 컴퓨터(Notebook Computer), 디지털방송용 단말기, 개인 정보 단말기(Personal Digital Assistant: PDA), 와이브로 단말기(Wibro Terminal), IPTV(Internet Protocol Television) 단말기, AVN(Audio Video Navigation) 단말기, PMP(Portable Multimedia Player) 및 네비게이션 단말기(차량 네비게이션 장치)(Navigation Terminal) 중 선택되는 어느 하나의 단말기.

KR1020140003037A 2014-01-09 2014-01-09 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법 KR20150083378A (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140003037A KR20150083378A (ko) 2014-01-09 2014-01-09 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법
US14/251,978 US20150193071A1 (en) 2014-01-09 2014-04-14 Device and method for recognizing gesture using multi-touch information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140003037A KR20150083378A (ko) 2014-01-09 2014-01-09 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법

Publications (1)

Publication Number Publication Date
KR20150083378A true KR20150083378A (ko) 2015-07-17

Family

ID=53495149

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140003037A KR20150083378A (ko) 2014-01-09 2014-01-09 멀티 터치 정보를 이용한 제스쳐 인식 장치 및 제스쳐 인식 방법

Country Status (2)

Country Link
US (1) US20150193071A1 (ko)
KR (1) KR20150083378A (ko)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7719523B2 (en) * 2004-08-06 2010-05-18 Touchtable, Inc. Bounding box gesture recognition on a touch detecting interactive display
US20100315372A1 (en) * 2009-06-12 2010-12-16 Stmicroelectronics Asia Pacific Pte Ltd. Touch coordinate calculation for a touch-sensitive interface
US20120019453A1 (en) * 2010-07-26 2012-01-26 Wayne Carl Westerman Motion continuation of touch input

Also Published As

Publication number Publication date
US20150193071A1 (en) 2015-07-09

Similar Documents

Publication Publication Date Title
US10275113B2 (en) 3D visualization
CN101131620B (zh) 感测多触点的移动的设备、方法和介质及移动设备
JP5340088B2 (ja) 情報処理方法及び装置
JP6099234B2 (ja) プロセッサグラフィックスを用いた並行タッチポイント検出
CN109739223B (zh) 机器人避障控制方法、装置、终端设备及存储介质
CN103679788B (zh) 一种移动终端中3d图像的生成方法和装置
US20160349983A1 (en) Terminal screen shot method and terminal
US20120192116A1 (en) Pinch Zoom Velocity Detent
US10126873B2 (en) Stroke continuation for dropped touches on electronic handwriting devices
US20140108993A1 (en) Gesture keyboard with gesture cancellation
US20140327641A1 (en) Disambiguating intentional and incidental contact and motion in multi-touch pointing devices
JP2013513185A (ja) タッチパネル関心領域レポーティング方式
US20120249599A1 (en) Method of identifying a multi-touch scaling gesture and device using the same
AU2014201249B2 (en) Method for controlling display function and an electronic device thereof
US20150286283A1 (en) Method, system, mobile terminal, and storage medium for processing sliding event
JP2014517975A (ja) 対象のあいまい性の除去及び修正
CN105892877A (zh) 多指并拢或打开手势的识别方法、装置及终端设备
US20140331145A1 (en) Enhancing a remote desktop with meta-information
KR102096070B1 (ko) 터치 인식 개선 방법 및 그 전자 장치
CN112214156B (zh) 一种触控屏放大镜调用方法、装置、电子设备及存储介质
US20170139537A1 (en) System and method for determining a number of users and their respective positions relative to a device
US20180253229A1 (en) Electronic device, control method, and medium
EP3425593A1 (en) Highly parallelizable algorithm for detecting intersections of shapes
JP6212201B2 (ja) マルチフィンガータッチインタラクション中のパンおよびスケーリングの検出
KR102130361B1 (ko) 시나리오에 따라 그래픽 처리 해상도를 변경하기 위한 방법 및 휴대용 전자 디바이스

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination