KR101718070B1 - 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법 - Google Patents

제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법 Download PDF

Info

Publication number
KR101718070B1
KR101718070B1 KR1020150162259A KR20150162259A KR101718070B1 KR 101718070 B1 KR101718070 B1 KR 101718070B1 KR 1020150162259 A KR1020150162259 A KR 1020150162259A KR 20150162259 A KR20150162259 A KR 20150162259A KR 101718070 B1 KR101718070 B1 KR 101718070B1
Authority
KR
South Korea
Prior art keywords
gesture
touch
input
touch inputs
combination
Prior art date
Application number
KR1020150162259A
Other languages
English (en)
Inventor
이창일
김홍식
Original Assignee
주식회사 한컴플렉슬
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 한컴플렉슬 filed Critical 주식회사 한컴플렉슬
Priority to US15/529,986 priority Critical patent/US10540088B2/en
Priority to PCT/KR2016/008712 priority patent/WO2017047929A1/ko
Application granted granted Critical
Publication of KR101718070B1 publication Critical patent/KR101718070B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0412—Digitisers structurally integrated in a display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/04166—Details of scanning methods, e.g. sampling time, grouping of sub areas or time sharing with display driving
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04104—Multi-touch detection in digitiser, i.e. details about the simultaneous detection of a plurality of touching locations, e.g. multiple fingers or pen and finger

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법이 개시된다. 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법은 둘 이상의 제스처들이 순차적으로 조합된 복수의 선정된 제스처 조합들과 그에 대응하는 명령어들이 저장된 명령어 데이터베이스를 유지하고 있다가, 터치스크린 상에 사용자에 의해서 둘 이상의 터치 입력이 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력에 따른 제스처 조합을 확인한 후 상기 명령어 데이터베이스로부터 상기 제스처 조합에 대응하는 명령어를 추출하여 그에 대응하는 이벤트를 실행함으로써, 기존의 터치스크린 장치가 하나의 터치 입력에 대해서만 이벤트를 실행하는 것과 달리, 둘 이상의 다양한 터치 입력에 따른 다양한 이벤트들을 실행할 수 있어서, 마치 단축키의 역할을 수행하는 것과 같이 터치 입력만으로 터치스크린 장치에 대한 수많은 제어 동작을 구현해 낼 수 있어, 사용자의 편의를 도모할 수 있다.

Description

제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법{TOUCHSCREEN DEVICE FOR EXECUTING AN EVENT BASED ON A COMBINATION OF GESTURES AND OPERATING METHOD THEREOF}
본 발명의 실시예들은 터치스크린 장치에서 사용자의 터치 입력에 기초하여 다양한 제어 동작을 수행할 수 있도록 하는 기법에 대한 기술과 관련된다.
최근, 스마트폰이나 태블릿 PC와 같은 휴대가 가능한 스마트기기가 널리 보급됨에 따라, 이러한 스마트기기에서 활용할 수 있는 다양한 어플리케이션들이 출시되고 있다.
특히, 이러한 스마트기기들은 보통 터치스크린을 탑재하고 있는 경우가 많다는 점에서 사용자의 터치 입력을 기반으로 하는 인터페이스를 제공하는 어플리케이션들이 많이 등장하고 있다.
터치스크린이 탑재된 스마트기기에서 사용자의 터치 입력을 인식하여 수행할 수 있는 동작 중에는 사용자의 터치 입력의 이동 궤적을 추적하여 화면이 스크롤되도록 하는 기능이나 멀티 터치 입력에 기초하여 화면의 확대 또는 축소가 가능하도록 하는 기능 등이 있다.
보통, 터치스크린이 탑재된 터치스크린 장치들은 사용자에 의해 입력되는 하나의 터치 입력에 기초하여 해당 터치 입력에 따른 동작을 수행하는 것으로 설계되는 경우가 많다.
이로 인해, 사용자가 터치스크린 상에 터치 입력을 인가해서 상기 터치 입력에 기초하여 터치스크린 장치를 제어할 수 있는 기능으로는 스크롤 기능이나, 페이지 넘김과 같은 기능 정도로 개수의 한계가 존재할 수밖에 없다.
물론, 두 접점에 인가되는 멀티 터치를 인식하여 해당 멀티 터치에 따라 화면을 확대 또는 축소시키는 기능들도 도입되고 있지만, 터치 입력에 따른 제스처 동작이 무한히 존재하는 것이 아니라 한정적인 개수만 존재하기 때문에 기존의 터치 입력에 따른 제어 기법은 많은 기능을 제공하는데 한계가 존재한다.
이로 인해서, 사용자가 터치스크린 장치에서 특정 이벤트를 실행시키기 위해서는 터치스크린 장치에 설치된 어플리케이션에서 제공하는 소정의 제어 메뉴에 들어간 후 해당 메뉴에서 관련 이벤트 실행을 위한 명령어를 실행시켜야 하는 불편함이 존재하였다.
만약, 사용자가 단축키를 사용하는 것처럼, 특정 터치 입력을 인가하는 것만으로 터치스크린 장치에서 제공하는 다양한 이벤트들을 실행시킬 수 있다면, 사용자의 편의가 도모될 수 있을 것이지만, 전술한 바와 같이, 기존의 터치스크린 장치들은 단순히 하나의 터치 입력 또는 간단한 멀티 터치에 대응하는 간단한 이벤트만 실행할 수 있는 것으로 개발되어 있기 때문에 터치 입력을 기초로 다양한 이벤트들을 실행시키는데 한계가 존재하였다.
따라서, 터치스크린 장치에서 사용자가 터치스크린 상에 인가하는 터치 입력에 기초하여 상기 터치스크린 장치가 다양한 동작을 수행할 수 있도록 지원하는 터치 인터페이싱 기법에 대한 연구가 필요하다.
본 발명에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법은 둘 이상의 제스처들이 순차적으로 조합된 복수의 선정된 제스처 조합들과 그에 대응하는 명령어들이 저장된 명령어 데이터베이스를 유지하고 있다가, 터치스크린 상에 사용자에 의해서 둘 이상의 터치 입력이 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력에 따른 제스처 조합을 확인한 후 상기 명령어 데이터베이스로부터 상기 제스처 조합에 대응하는 명령어를 추출하여 그에 대응하는 이벤트를 실행함으로써, 기존의 터치스크린 장치가 하나의 터치 입력에 대해서만 이벤트를 실행하는 것과 달리, 둘 이상의 다양한 터치 입력에 따른 다양한 이벤트들을 실행할 수 있어서, 마치 단축키의 역할을 수행하는 것과 같이 터치 입력만으로 터치스크린 장치에 대한 수많은 제어 동작을 구현해 낼 수 있도록 한다.
본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치는 복수의 선정된(predetermined) 제스처 조합들 - 상기 제스처 조합은 둘 이상의 제스처들이 순차적으로 조합된 것을 의미함 - 과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있는 명령어 데이터베이스, 터치스크린 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인하는 터치 확인부, 상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 제1 명령어를 추출하는 명령어 추출부 및 상기 추출된 제1 명령어에 따른 이벤트를 실행하는 이벤트 실행부를 포함한다.
또한, 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법은 복수의 선정된 제스처 조합들 - 상기 제스처 조합은 둘 이상의 제스처들이 순차적으로 조합된 것을 의미함 - 과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있는 명령어 데이터베이스를 유지하는 단계, 터치스크린 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인하는 단계, 상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 제1 명령어를 추출하는 단계 및 상기 추출된 제1 명령어에 따른 이벤트를 실행하는 단계를 포함한다.
본 발명에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법은 둘 이상의 제스처들이 순차적으로 조합된 복수의 선정된 제스처 조합들과 그에 대응하는 명령어들이 저장된 명령어 데이터베이스를 유지하고 있다가, 터치스크린 상에 사용자에 의해서 둘 이상의 터치 입력이 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력에 따른 제스처 조합을 확인한 후 상기 명령어 데이터베이스로부터 상기 제스처 조합에 대응하는 명령어를 추출하여 그에 대응하는 이벤트를 실행함으로써, 기존의 터치스크린 장치가 하나의 터치 입력에 대해서만 이벤트를 실행하는 것과 달리, 둘 이상의 다양한 터치 입력에 따른 다양한 이벤트들을 실행할 수 있어서, 마치 단축키의 역할을 수행하는 것과 같이 터치 입력만으로 터치스크린 장치에 대한 수많은 제어 동작을 구현해 낼 수 있어, 사용자의 편의를 도모할 수 있다.
도 1은 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 구조를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작을 설명하기 위한 도면이다.
도 3은 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법을 도시한 순서도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하에서, 본 발명에 따른 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 구조를 도시한 도면이다.
도 1을 참조하면, 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)는 명령어 데이터베이스(111), 터치 확인부(112), 명령어 추출부(113) 및 이벤트 실행부(114)를 포함한다.
명령어 데이터베이스(111)에는 복수의 선정된(predetermined) 제스처 조합들과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있다.
이때, 본 발명의 일실시예에 따르면, 명령어 데이터베이스(111)에는 하기의 표 1과 같이 정보가 저장되어 있을 수 있다.
복수의 선정된 제스처 조합들 명령어
제스처 조합의 명칭 제스처 조합 방식
제스처 조합 1 제스처 1+제스처 2 명령어 1
제스처 조합 2 제스처 3+제스처 4+제스처 5 명령어 2
제스처 조합 3 제스처 1+제스처 2+제스처 4 명령어 3
... ... ...
여기서, 상기 제스처 조합은 둘 이상의 제스처들이 순차적으로 조합된 것을 의미하는 것으로, 예컨대, 원형을 그리는 제스처, 왼쪽에서 오른쪽으로 이동하는 제스처, 위쪽에서 아래쪽으로 이동하는 제스처를 순차적으로 조합하는 것과 같이, 둘 이상의 제스처들을 순차적으로 조합해 둔 것을 의미한다.
관련해서, 상기 표 1의 실시예에서 "제스처 조합 1"은 "제스처 1"과 "제스처 2"를 순차적으로 조합한 제스처 조합을 의미하고, "제스처 조합 2"는 "제스처 3", "제스처 4", "제스처 5"를 순차적으로 조합한 제스처를 의미하며, "제스처 조합 3"은 "제스처 1", "제스처 2", "제스처 4"를 순차적으로 조합한 제스처를 의미한다.
터치 확인부(112)는 터치스크린 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인한다.
명렁어 추출부(113)는 명령어 데이터베이스(111)로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 제1 명령어를 추출한다.
그리고, 이벤트 실행부(114)는 상기 추출된 제1 명령어에 따른 이벤트를 실행한다.
예컨대, 상기 선정된 시간을 "1초"라고 하고, 상기 터치스크린 상에 "터치 입력 1"과 "터치 입력 2"가 1초 이내의 간격으로 입력되었다고 하는 경우, 터치 확인부(112)는 "터치 입력 1"과 "터치 입력 2"에 대응하는 제스처를 기초로 "터치 입력 1"과 "터치 입력 2"에 따른 제1 제스처 조합을 확인할 수 있다.
만약, "터치 입력 1"에 대응하는 제스처가 "제스처 1"이고, "터치 입력 2"에 대응하는 제스처가 "제스처 2"인 경우, 터치 확인부(112)는 "터치 입력 1"과 "터치 입력 2"에 따른 상기 제1 제스처 조합으로 "제스처 1"과 "제스처 2"가 순차적으로 조합된 제스처 조합을 확인할 수 있다.
이때, 명령어 추출부(113)는 상기 표 1과 같은 명령어 데이터베이스(111)로부터 상기 제1 제스처 조합인 "제스처 1"과 "제스처 2"가 순차적으로 조합된 제스처 조합인 "제스처 조합 1"에 대응되어 저장되어 있는 제1 명령어로 "명령어 1"을 추출할 수 있다.
그러고 나서, 이벤트 실행부(114)는 상기 추출된 "명령어 1"에 따른 이벤트를 실행함으로써, 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)가 "명령어 1"에 따른 동작을 수행하도록 제어할 수 있다.
결국, 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)는 둘 이상의 제스처들이 순차적으로 조합된 복수의 선정된 제스처 조합들과 그에 대응하는 명령어들이 저장된 명령어 데이터베이스(111)를 유지하고 있다가, 터치스크린 상에 사용자에 의해서 둘 이상의 터치 입력이 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력에 따른 제스처 조합을 확인한 후 명령어 데이터베이스(111)로부터 상기 제스처 조합에 대응하는 명령어를 추출하여 그에 대응하는 이벤트를 실행함으로써, 기존의 터치스크린 장치가 하나의 터치 입력에 대해서만 이벤트를 실행하는 것과 달리, 둘 이상의 다양한 터치 입력에 따른 다양한 이벤트들을 실행할 수 있어서, 마치 단축키의 역할을 수행하는 것과 같이 터치 입력만으로 터치스크린 장치에 대한 수많은 제어 동작을 구현해 낼 수 있어, 사용자의 편의를 도모할 수 있다.
본 발명의 일실시예에 따르면, 터치 확인부(112)는 제스처 조합 생성부(115)를 포함할 수 있고, 명령어 추출부(113)는 판단부(116) 및 추출부(117)를 포함할 수 있다.
제스처 조합 생성부(115)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성하고, 상기 각 터치 입력에 대응하는 제스처 정보를 기초로 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성한다.
이때, 판단부(116)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 추가 터치 입력이 입력되지 않으면, 명령어 데이터베이스(111) 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는지 여부를 판단할 수 있다.
그리고, 추출부(117)는 명령어 데이터베이스(111) 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는 것으로 판단된 경우, 명령어 데이터베이스(111)로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 상기 제1 명령어를 추출할 수 있다.
또한, 본 발명의 일실시예에 따르면, 터치 확인부(112)는 자유선 표시부(118) 및 자유선 제거부(119)를 더 포함할 수 있다.
자유선 표시부(118)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적한 후 상기 각 터치 입력의 궤적에 따른 자유선들을 생성하여 상기 터치스크린 상에 표시한다.
자유선 제거부(119)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 추가 터치 입력이 입력되지 않으면, 상기 터치스크린 상에 표시되고 있는 상기 자유선들을 제거한다.
관련하여, 도 2를 참조하여 본 발명에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)의 동작을 보다 상세히 설명하기로 한다.
도 2는 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)의 동작을 설명하기 위한 도면이다.
우선, 명령어 데이터베이스(111)에는 상기 표 1과 같이 복수의 선정된 제스처 조합들과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있다고 가정한다.
이때, 터치 확인부(112)는 터치스크린(210) 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인할 수 있다.
이와 관련해서, 제스처 조합 생성부(115)는 터치스크린(210) 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성할 수 있다.
관련해서, 상기 선정된 시간을 "1초"라고 가정하고, 도 2에 도시된 바와 같이, 터치스크린(210) 상에 원형을 그리는 터치 입력 1(211)이 입력되고, 1초 이내에 왼쪽에서 오른쪽으로 이동하는 터치 입력 2(212)가 연속해서 입력되었다고 하는 경우, 제스처 조합 생성부(115)는 터치스크린(210) 상에 터치 입력 1(211)이 입력될 때, 터치 입력 1(211)의 궤적을 추적하여 터치 입력 1(211)의 궤적으로 기초로 터치 입력 1(211)에 대응하는 제스처 정보로 "원형을 그리는 제스처"라는 제스처 정보를 생성할 수 있고, 터치스크린(210) 상에 터치 입력 2(212)가 입력될 때, 터치 입력 2(212)의 궤적을 추적하여 터치 입력 2(212)의 궤적으로 기초로 터치 입력 2(212)에 대응하는 제스처 정보로 "왼쪽에서 오른쪽으로 이동하는 제스처"라는 제스처 정보를 생성할 수 있다. 여기서, 편의상 "원형을 그리는 제스처"를 "제스처 1"이라고 명하고, "왼쪽에서 오른쪽으로 이동하는 제스처"를 "제스처 2"라고 명하기로 하자.
그러고 나서, 제스처 조합 생성부(115)는 "제스처 1"과 "제스처 2"에 대한 정보를 기초로 터치 입력 1(211)과 터치 입력 2(212)에 따른 제스처 조합으로 제1 제스처 조합을 생성할 수 있는데, 본 실시예에서 제스처 조합 생성부(115)는 "제스처 1"과 "제스처 2"가 순차적으로 조합된 제스처 조합인 "제스처 조합 1"을 생성할 수 있다.
이때, 자유선 표시부(118)는 터치스크린(210) 상에 터치 입력 1(211)과 터치 입력 2(212)가 1초 이내의 간격으로 입력될 때마다, 터치 입력 1(211)과 터치 입력 2(212)의 궤적을 추적한 후 터치 입력 1(211)에 대응하는 자유선 및 터치 입력 2(212)에 대응하는 자유선을 생성하여 도 2에 도시된 바와 같이, 터치스크린(210) 상에 각 자유선을 표시할 수 있다.
이렇게, 터치스크린(210) 상에 터치 입력 1(211)과 터치 입력 2(212)가 1초 이내의 간격으로 입력된 이후 1초 이내에 추가 터치 입력이 입력되지 않으면, 명령어 추출부(113)에 포함된 판단부(116)는 명령어 데이터베이스(111) 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 "제스처 조합 1"이 존재하는지 여부를 판단할 수 있다.
이와 동시에, 자유선 제거부(119)는 터치스크린(210) 상에 터치 입력 1(211)과 터치 입력 2(212)가 1초 이내의 간격으로 입력된 이후 1초 이내에 추가 터치 입력이 입력되지 않으면, 터치스크린(210) 상에 표시되고 있는 각 자유선들을 모두 제거할 수 있다.
이렇게, 본 발명에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)는 자유선 표시부(118)를 포함함으로써, 사용자가 자신이 터치스크린(210) 상에 어떠한 터치 입력을 인가하고 있는지 파악할 수 있도록 함과 동시에 자유선 제거부(119)를 더 포함함으로써, 자유선이 제거될 때, 둘 이상의 터치 입력에 대한 인가가 완료되고, 명령어가 실행되는 시점이 언제인지를 파악할 수 있도록 지원할 수 있다.
표 1의 예에서는 명령어 데이터베이스(111) 상에 상기 "제스처 조합 1"이 존재하기 때문에 추출부(117)는 명령어 데이터베이스(111)로부터 상기 "제스처 조합 1"에 대응되어 저장되어 있는 명령어인 "명령어 1"을 추출할 수 있다.
그러고 나서, 이벤트 실행부(114)는 상기 추출된 "명령어 1"에 따른 이벤트를 실행할 수 있다.
본 발명의 일실시예에 따르면, 제스처 조합 생성부(115)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성한 후 상기 각 터치 입력에 대응하는 제스처 정보를 메모리 큐(Queue)에 순차적으로 저장하는 큐 저장부(120) 및 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장되면, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 메모리 큐에서의 저장 순서에 따라 조합하여 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 조합 생성부(121)를 포함할 수 있다.
관련해서, 도 2의 실시예에서, 큐 저장부(120)는 터치스크린(210) 상에 터치 입력 1(211)이 입력될 때, 터치 입력 1(211)에 대응하는 제스처 정보인 "제스처 1"을 생성한 후 상기 메모리 큐에 저장할 수 있고, 터치스크린(210) 상에 터치 입력 2(212)가 입력될 때, 터치 입력 2(212)에 대응하는 제스처 정보인 "제스처 2"를 생성한 후 상기 메모리 큐에 추가로 저장할 수 있다.
그러고 나서, 조합 생성부(121)는 상기 메모리 큐에 저장되어 있는 "제스처 1"과 "제스처 2"에 대한 정보를 상기 메모리 큐에서의 저장 순서에 따라 "제스처 1"과 "제스처 2" 순으로 조합하여 "제스처 조합 1"을 생성할 수 있다.
이때, 본 발명의 일실시예에 따르면, 터치 확인부(112)는 입력 취소부(122)를 더 포함할 수 있다.
입력 취소부(122)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내의 간격으로 터치 입력에 대한 취소 명령의 실행을 위해 미리 설정된 제1 취소 제스처 정보에 대응하는 제1 취소 터치 입력이 입력될 때마다, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장된 순서와 반대되는 순서로 하나씩 삭제할 수 있다.
예컨대, 도 2에 도시된 실시예에 같이, 터치스크린(210) 상에 터치 입력 1(211)과 터치 입력 2(212)가 1초 이내의 간격으로 입력됨에 따라 상기 메모리 큐 상에 "제스처 1"과 "제스처 2"에 대한 정보가 순차적으로 저장된 상태에서 터치스크린(210) 상에 터치 입력 2(212)가 입력된 이후 1초 이내에 터치 입력에 대한 취소 명령의 실행을 위해 미리 설정된 제1 취소 제스처 정보에 대응하는 제1 취소 터치 입력이 입력된 경우, 입력 취소부(122)는 상기 제1 취소 터치 입력에 기초하여 상기 메모리 큐로부터 "제스처 2"에 대한 정보를 삭제할 수 있다.
그러고 나서, 터치스크린(210) 상에 상기 제1 취소 터치 입력이 입력된 이후 다시 1초 이내에 상기 제1 취소 터치 입력이 재입력되면, 입력 취소부(122)는 상기 재입력된 제1 취소 터치 입력에 기초하여 상기 메모리 큐로부터 "제스처 1"에 대한 정보도 삭제할 수 있다.
만약, 상기 제1 취소 터치 입력에 기초하여 상기 메모리 큐로부터 "제스처 2"에 대한 정보가 삭제된 이후 1초 이내에 사용자가 터치스크린(210) 상에 상기 제1 취소 터치 입력을 추가로 입력하는 것이 아니라 소정의 "터치 입력 3"을 추가로 입력하게 된 경우, 큐 저장부 (120)는 상기 "터치 입력 3"의 궤적을 추적하여 상기 "터치 입력 3"의 궤적을 기초로 상기 "터치 입력 3"에 대응하는 제스처 정보를 생성한 후 상기 "터치 입력 3"에 대응하는 제스처 정보인 "제스처 3"이라는 제스처 정보를 상기 메모리 큐에 추가로 저장할 수 있다. 이렇게 되면, 상기 메모리 큐에는 "제스처 1"과 "제스처 3"에 대한 제스처 정보가 저장되어 있게 된다.
결국, 본 발명에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)는 사용자가 둘 이상의 터치 입력을 인가할 때, 이미 입력된 터치 입력을 취소하고 싶으면, 터치스크린(210) 상에 상기 제1 취소 터치 입력을 인가하는 방법으로 이미 입력된 터치 입력을 하나씩 취소시킬 수 있도록 지원함으로써, 이벤트 실행을 위한 터치 입력 자체를 수정할 수 있도록 지원할 수 있다.
또한, 본 발명의 일실시예에 따르면, 입력 취소부(122)는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 둘 이상의 터치 입력 전체에 대한 입력 취소 명령의 실행을 위해 미리 설정된 제2 취소 제스처 정보에 대응하는 제2 취소 터치 입력이 입력되면, 상기 제2 취소 터치 입력에 기초하여 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 모두 삭제할 수 있다.
예컨대, 도 2에 도시된 실시예에 같이, 터치스크린(210) 상에 터치 입력 1(211)과 터치 입력 2(212)가 1초 이내의 간격으로 입력됨에 따라 상기 메모리 큐 상에 "제스처 1"과 "제스처 2"에 대한 정보가 순차적으로 저장된 상태에서 터치스크린(210) 상에 터치 입력 2(212)가 입력된 이후 1초 이내에 모든 터치 입력에 대한 취소 명령의 실행을 위해 미리 설정된 제2 취소 제스처 정보에 대응하는 제2 취소 터치 입력이 입력된 경우, 입력 취소부(122)는 상기 제2 취소 터치 입력에 기초하여 상기 메모리 큐로부터 "제스처 1"과 "제스처 2"에 대한 정보 모두를 삭제할 수 있다.
이를 통해, 사용자는 자신이 입력한 둘 이상의 터치 입력 모두를 취소하고 싶은 경우, 간단하게 터치스크린(210) 상에 상기 제2 취소 터치 입력을 입력하는 것만으로 상기 둘 이상의 터치 입력 모두를 취소시킨 후 새롭게 이벤트 실행을 위한 터치 입력들을 다시 인가할 수 있다.
도 3은 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법을 도시한 순서도이다.
단계(S310)에서는 복수의 선정된 제스처 조합들(상기 제스처 조합은 둘 이상의 제스처들이 순차적으로 조합된 것을 의미함)과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있는 명령어 데이터베이스를 유지한다.
단계(S320)에서는 터치스크린 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인한다.
단계(S330)에서는 상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 제1 명령어를 추출한다.
단계(S340)에서는 상기 추출된 제1 명령어에 따른 이벤트를 실행한다.
이때, 본 발명의 일실시예에 따르면, 단계(S320)에서는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성하고, 상기 각 터치 입력에 대응하는 제스처 정보를 기초로 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 단계를 포함할 수 있다.
이때, 단계(S330)에서는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 추가 터치 입력이 입력되지 않으면, 상기 명령어 데이터베이스 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는지 여부를 판단하는 단계 및 상기 명령어 데이터베이스 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는 것으로 판단된 경우, 상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 상기 제1 명령어를 추출하는 단계를 포함할 수 있다.
또한, 본 발명의 일실시예에 따르면, 단계(S320)에서는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적한 후 상기 각 터치 입력의 궤적에 따른 자유선들을 생성하여 상기 터치스크린 상에 표시하는 단계 및 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 추가 터치 입력이 입력되지 않으면, 상기 터치스크린 상에 표시되고 있는 상기 자유선들을 제거하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일실시예에 따르면, 상기 제1 제스처 조합을 생성하는 단계는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성한 후 상기 각 터치 입력에 대응하는 제스처 정보를 메모리 큐에 순차적으로 저장하는 단계 및 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장되면, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 메모리 큐에서의 저장 순서에 따라 조합하여 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 단계를 포함할 수 있다.
이때, 본 발명의 일실시예에 따르면, 단계(S320)에서는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내의 간격으로 터치 입력에 대한 취소 명령의 실행을 위해 미리 설정된 제1 취소 제스처 정보에 대응하는 제1 취소 터치 입력이 입력될 때마다, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장된 순서와 반대되는 순서로 하나씩 삭제하는 단계를 더 포함할 수 있다.
또한, 본 발명의 일실시예에 따르면, 단계(S320)에서는 상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 둘 이상의 터치 입력 전체에 대한 입력 취소 명령의 실행을 위해 미리 설정된 제2 취소 제스처 정보에 대응하는 제2 취소 터치 입력이 입력되면, 상기 제2 취소 터치 입력에 기초하여 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 모두 삭제할 수 있다.
이상, 도 3을 참조하여 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법에 대해 설명하였다. 여기서, 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법은 도 1과 도 2를 이용하여 설명한 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치(110)의 동작에 대한 구성과 대응될 수 있으므로, 이에 대한 보다 상세한 설명은 생략하기로 한다.
본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법은 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램으로 구현될 수 있다.
또한, 본 발명의 일실시예에 따른 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 본 발명에서는 구체적인 구성 요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해져서는 아니되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
110: 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치
111: 명령어 데이터베이스 112: 터치 확인부
113: 명령어 추출부 114: 이벤트 실행부
115: 제스처 조합 생성부 116: 판단부
117: 추출부 118: 자유선 표시부
119: 자유선 제거부 120: 큐 저장부
121: 조합 생성부 122: 입력 취소부

Claims (14)

  1. 복수의 선정된(predetermined) 제스처 조합들 - 상기 제스처 조합은 둘 이상의 제스처들이 순차적으로 조합된 것을 의미함 - 과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있는 명령어 데이터베이스;
    터치스크린 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인하는 터치 확인부;
    상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 제1 명령어를 추출하는 명령어 추출부; 및
    상기 추출된 제1 명령어에 따른 이벤트를 실행하는 이벤트 실행부
    를 포함하고,
    상기 터치 확인부는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성하고, 상기 각 터치 입력에 대응하는 제스처 정보를 기초로 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 제스처 조합 생성부
    를 포함하며,
    상기 제스처 조합 생성부는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성한 후 상기 각 터치 입력에 대응하는 제스처 정보를 메모리 큐(Queue)에 순차적으로 저장하는 큐 저장부; 및
    상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장되면, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 메모리 큐에서의 저장 순서에 따라 조합하여 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 조합 생성부
    를 포함하고,
    상기 명령어 추출부는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 추가 터치 입력이 입력되지 않으면, 상기 명령어 데이터베이스 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는지 여부를 판단하는 판단부; 및
    상기 명령어 데이터베이스 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는 것으로 판단된 경우, 상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 상기 제1 명령어를 추출하는 추출부
    를 포함하고,
    상기 터치 확인부는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내의 간격으로 터치 입력에 대한 취소 명령의 실행을 위해 미리 설정된 제1 취소 제스처 정보에 대응하는 제1 취소 터치 입력이 입력될 때마다, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장된 순서와 반대되는 순서로 하나씩 삭제하는 입력 취소부
    를 더 포함하는 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치.
  2. 삭제
  3. 제1항에 있어서,
    상기 터치 확인부는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적한 후 상기 각 터치 입력의 궤적에 따른 자유선들을 생성하여 상기 터치스크린 상에 표시하는 자유선 표시부; 및
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 추가 터치 입력이 입력되지 않으면, 상기 터치스크린 상에 표시되고 있는 상기 자유선들을 제거하는 자유선 제거부
    를 더 포함하는 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치.
  4. 삭제
  5. 삭제
  6. 제1항에 있어서,
    상기 입력 취소부는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 둘 이상의 터치 입력 전체에 대한 입력 취소 명령의 실행을 위해 미리 설정된 제2 취소 제스처 정보에 대응하는 제2 취소 터치 입력이 입력되면, 상기 제2 취소 터치 입력에 기초하여 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 모두 삭제하는 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치.
  7. 복수의 선정된(predetermined) 제스처 조합들 - 상기 제스처 조합은 둘 이상의 제스처들이 순차적으로 조합된 것을 의미함 - 과 상기 복수의 선정된 제스처 조합들 각각에 대응하는 명령어가 저장되어 있는 명령어 데이터베이스를 유지하는 단계;
    터치스크린 상에 둘 이상의 터치 입력이 순차적으로 선정된 시간 이내의 간격으로 입력되면, 상기 둘 이상의 터치 입력 각각에 대응하는 제스처를 기초로 상기 둘 이상의 터치 입력에 따른 제1 제스처 조합을 확인하는 단계;
    상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 제1 명령어를 추출하는 단계; 및
    상기 추출된 제1 명령어에 따른 이벤트를 실행하는 단계
    를 포함하고,
    상기 제1 제스처 조합을 확인하는 단계는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성하고, 상기 각 터치 입력에 대응하는 제스처 정보를 기초로 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 단계
    를 포함하며,
    상기 제1 제스처 조합을 생성하는 단계는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적하여 상기 각 터치 입력의 궤적을 기초로 상기 각 터치 입력에 대응하는 제스처 정보를 생성한 후 상기 각 터치 입력에 대응하는 제스처 정보를 메모리 큐(Queue)에 순차적으로 저장하는 단계; 및
    상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장되면, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 메모리 큐에서의 저장 순서에 따라 조합하여 상기 둘 이상의 터치 입력에 따른 상기 제1 제스처 조합을 생성하는 단계
    를 포함하고,
    상기 제1 명령어를 추출하는 단계는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 추가 터치 입력이 입력되지 않으면, 상기 명령어 데이터베이스 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는지 여부를 판단하는 단계; 및
    상기 명령어 데이터베이스 상에 저장되어 있는 상기 복수의 선정된 제스처 조합들 중 상기 제1 제스처 조합이 존재하는 것으로 판단된 경우, 상기 명령어 데이터베이스로부터 상기 제1 제스처 조합에 대응되어 저장되어 있는 상기 제1 명령어를 추출하는 단계
    를 포함하고,
    상기 제1 제스처 조합을 확인하는 단계는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내의 간격으로 터치 입력에 대한 취소 명령의 실행을 위해 미리 설정된 제1 취소 제스처 정보에 대응하는 제1 취소 터치 입력이 입력될 때마다, 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보가 상기 메모리 큐에 저장된 순서와 반대되는 순서로 하나씩 삭제하는 단계
    를 더 포함하는 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법.
  8. 삭제
  9. 제7항에 있어서,
    상기 제1 제스처 조합을 확인하는 단계는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력될 때마다, 각 터치 입력의 궤적을 추적한 후 상기 각 터치 입력의 궤적에 따른 자유선들을 생성하여 상기 터치스크린 상에 표시하는 단계; 및
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 추가 터치 입력이 입력되지 않으면, 상기 터치스크린 상에 표시되고 있는 상기 자유선들을 제거하는 단계
    를 더 포함하는 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법.
  10. 삭제
  11. 삭제
  12. 제7항에 있어서,
    상기 제1 제스처 조합을 확인하는 단계는
    상기 터치스크린 상에 상기 둘 이상의 터치 입력이 순차적으로 상기 선정된 시간 이내의 간격으로 입력된 이후 상기 선정된 시간 이내에 상기 둘 이상의 터치 입력 전체에 대한 입력 취소 명령의 실행을 위해 미리 설정된 제2 취소 제스처 정보에 대응하는 제2 취소 터치 입력이 입력되면, 상기 제2 취소 터치 입력에 기초하여 상기 메모리 큐에 저장되어 있는 상기 둘 이상의 터치 입력 각각에 대응하는 제스처 정보를 모두 삭제하는 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치의 동작 방법.
  13. 제7항, 제9항 또는 제12항 중 어느 한 항의 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능 기록 매체.
  14. 제7항, 제9항 또는 제12항 중 어느 한 항의 방법을 컴퓨터와의 결합을 통해 실행시키기 위한 저장매체에 저장된 컴퓨터 프로그램.
KR1020150162259A 2015-09-17 2015-11-19 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법 KR101718070B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/529,986 US10540088B2 (en) 2015-09-17 2016-08-08 Touch screen device capable of executing event based on gesture combination and operating method thereof
PCT/KR2016/008712 WO2017047929A1 (ko) 2015-09-17 2016-08-08 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20150131469 2015-09-17
KR1020150131469 2015-09-17

Publications (1)

Publication Number Publication Date
KR101718070B1 true KR101718070B1 (ko) 2017-03-20

Family

ID=58502926

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150162259A KR101718070B1 (ko) 2015-09-17 2015-11-19 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법

Country Status (2)

Country Link
US (1) US10540088B2 (ko)
KR (1) KR101718070B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102203951B1 (ko) * 2020-10-07 2021-01-18 김병수 리모트컨트롤 시스템

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11281302B2 (en) * 2018-05-18 2022-03-22 Steven Reynolds Gesture based data capture and analysis device and system
CN111273815B (zh) * 2020-01-16 2022-12-02 业成科技（成都）有限公司 手势触控方法和手势触控系统
EP4160377A4 (en) * 2020-07-31 2023-11-08 Guangdong Oppo Mobile Telecommunications Corp., Ltd. GESTURE CONTROL METHOD AND ASSOCIATED DEVICE
US11366529B1 (en) 2021-07-14 2022-06-21 Steven Reynolds Gesture based data capture and analysis device and system with states, confirmatory feedback and timeline
CN113791699A (zh) * 2021-09-17 2021-12-14 联想(北京)有限公司 一种电子设备操纵方法以及电子设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101275040B1 (ko) * 2012-12-06 2013-06-17 주식회사 한글과컴퓨터 자유선 입력 기반의 전자 문서 구동 장치 및 방법
KR20140069359A (ko) * 2009-06-10 2014-06-09 닛본 덴끼 가부시끼가이샤 전자 기기, 제스처 처리 방법, 및 제스처 처리 프로그램
KR20140083303A (ko) * 2012-12-26 2014-07-04 전자부품연구원 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7886236B2 (en) * 2003-03-28 2011-02-08 Microsoft Corporation Dynamic feedback for gestures
US8014607B2 (en) * 2007-03-23 2011-09-06 Palo Alto Research Center Incorporated Method and apparatus for creating and editing node-link diagrams in pen computing systems
US8390577B2 (en) 2008-07-25 2013-03-05 Intuilab Continuous recognition of multi-touch gestures
US8749497B2 (en) * 2008-12-12 2014-06-10 Apple Inc. Multi-touch shape drawing
US8310461B2 (en) * 2010-05-13 2012-11-13 Nuance Communications Inc. Method and apparatus for on-top writing
WO2012024442A2 (en) * 2010-08-17 2012-02-23 Google Inc. Touch-based gesture detection for a touch-sensitive device
KR101977613B1 (ko) * 2011-01-05 2019-05-14 삼성전자주식회사 입력 장치의 입력 오류를 정정하기 위한 방법 및 장치
KR101436587B1 (ko) 2012-12-26 2014-09-03 전자부품연구원 투 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140069359A (ko) * 2009-06-10 2014-06-09 닛본 덴끼 가부시끼가이샤 전자 기기, 제스처 처리 방법, 및 제스처 처리 프로그램
KR101275040B1 (ko) * 2012-12-06 2013-06-17 주식회사 한글과컴퓨터 자유선 입력 기반의 전자 문서 구동 장치 및 방법
KR20140083303A (ko) * 2012-12-26 2014-07-04 전자부품연구원 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102203951B1 (ko) * 2020-10-07 2021-01-18 김병수 리모트컨트롤 시스템
WO2022075644A1 (ko) * 2020-10-07 2022-04-14 김병수 리모트컨트롤 시스템

Also Published As

Publication number Publication date
US20170336963A1 (en) 2017-11-23
US10540088B2 (en) 2020-01-21

Similar Documents

Publication Publication Date Title
KR101718070B1 (ko) 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법
US20190155570A1 (en) Equal Access to Speech and Touch Input
US9665276B2 (en) Character deletion during keyboard gesture
AU2013222958B2 (en) Method and apparatus for object size adjustment on a screen
KR101768897B1 (ko) 터치 입력에 기초한 개체의 이동 또는 복사가 가능한 터치스크린 장치 및 그 동작 방법
CN105302784A (zh) 复制/剪切和粘贴数据的方法和系统
US20140055390A1 (en) Method for changing display range and electronic device thereof
MX2014002955A (es) Entrada de formula para dispositivos de presentacion limitada.
CN103809871A (zh) 应用程序图标的处理方法和移动终端
JP2016531352A (ja) 入力システムをアップデートする方法、デバイス、プログラム及びデバイス
CN105786338A (zh) 一种文本框编辑方法及装置
KR101171164B1 (ko) 터치스크린 장치 및 터치스크린 개체 선택 제어 방법
KR102144351B1 (ko) 전자 문서에 대한 손쉬운 언두 처리를 지원하는 전자 단말 장치 및 그 동작 방법
EP2708999A2 (en) Method for editing display information and electronic device thereof
US20150338945A1 (en) Information processing device and information updating program
KR101718071B1 (ko) 선택적 자유선 입력이 가능한 터치스크린 장치 및 상기 터치스크린 장치의 선택적 자유선 입력 지원 방법
KR101494653B1 (ko) 제어 명령 자동 완성 기반의 전자 문서 편집 장치 및 방법
US20160292140A1 (en) Associative input method and terminal
US20150046855A1 (en) Electronic apparatus, control method for electronic apparatus, and program
KR101505900B1 (ko) 전자 문서의 출력이 가능한 터치스크린 장치 및 상기 터치스크린 장치의 분할 화면 제어 방법
KR101915789B1 (ko) 가상키보드를 통해 손쉬운 문자 입력을 지원하는 터치스크린 전자 장치 및 그 동작 방법
KR102174497B1 (ko) 커서 제어 방법, 장치, 프로그램 및 컴퓨터 판독가능 기록매체
WO2017047929A1 (ko) 제스처 조합 기반의 이벤트 실행이 가능한 터치스크린 장치 및 그 동작 방법
CN104516620A (zh) 一种定位方法以及一种电子设备
KR101464739B1 (ko) 가상 콘트롤 출력 지원 기반의 터치스크린 장치 및 상기 터치스크린 장치의 가상 콘트롤 출력 지원 방법

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20200206

Year of fee payment: 4