KR20100110568A - 휴대단말에서 제스처를 이용한 기능 실행 방법 - Google Patents

휴대단말에서 제스처를 이용한 기능 실행 방법 Download PDF

Info

Publication number
KR20100110568A
KR20100110568A KR1020090028965A KR20090028965A KR20100110568A KR 20100110568 A KR20100110568 A KR 20100110568A KR 1020090028965 A KR1020090028965 A KR 1020090028965A KR 20090028965 A KR20090028965 A KR 20090028965A KR 20100110568 A KR20100110568 A KR 20100110568A
Authority
KR
South Korea
Prior art keywords
gesture
input
mode
function
user
Prior art date
Application number
KR1020090028965A
Other languages
English (en)
Other versions
KR101593598B1 (ko
Inventor
김희운
이명로
김유란
이선영
권중헌
김현경
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020090028965A priority Critical patent/KR101593598B1/ko
Priority to PCT/KR2010/001805 priority patent/WO2010114251A2/en
Priority to US12/731,542 priority patent/US20100257447A1/en
Publication of KR20100110568A publication Critical patent/KR20100110568A/ko
Application granted granted Critical
Publication of KR101593598B1 publication Critical patent/KR101593598B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Abstract

본 발명은 휴대단말에서 특정 기능키 또는 멀티터치를 활용한 인터랙션을 통한 제스처 입력모드 활성화를 통해 사용자 제스처를 입력받고, 입력되는 사용자 제스처에 따른 휴대단말의 해당 기능을 바로 실행할 수 있는 휴대단말에서 제스처를 이용한 기능 실행 방법에 관한 것으로 이러한 본 발명은 휴대단말의 기능 실행 방법에 있어서, 사용자 요청에 대응하는 임의의 모드를 수행하는 과정; 상기 임의의 모드 수행 중에 사용자 요청에 응답하여, 상기 제스처 입력모드를 활성화하는 과정; 상기 제스처 입력모드에서 사용자 제스처를 입력받는 과정; 상기 사용자 제스처에 대응하는 기능을 실행하는 과정을 포함한다.
휴대단말, 제스처, 터치스크린, 멀티터치, 터치패드

Description

휴대단말에서 제스처를 이용한 기능 실행 방법{METHOD FOR ACTIVATING FUNCTION OF PORTABLE TERMINAL USING USER GESTURE IN PORTABLE TERMINAL}
본 발명은 휴대단말의 기능 실행 방법에 관한 것으로, 특히 터치스크린/터치패드를 구비하는 휴대단말에서 사용자의 제스처 입력을 인식하고, 상기 사용자의 제스처에 대응하는 기능을 바로 실행할 수 있는 휴대단말의 제스처를 이용한 기능 실행 방법에 관한 것이다.
최근 들어, 통신 기술의 급속한 발전으로 인해, 휴대단말에서의 기능이 점차 확대되고 있으며, 이에 맞추어 보다 다양한 사용자인터페이스(UI, User Interface) 및 그를 이용한 다양한 기능이 제공되고 있다.
특히, 터치스크린(Touch-screen)을 구비하는 휴대단말에서는 특정 기능을 실행시키기 위해서, 상기 휴대단말의 터치스크린을 통해 제공되는 특화된 아이콘(icon)을 이용하거나, 별도의 메뉴 버튼 등을 이용하여 희망하는 특정 옵션(option)을 활성화하여 해당 기능을 선택하는 방식을 사용하고 있다.
그러나 터치스크린을 구비하는 휴대단말에서 상기와 같은 기능 실행 방식은, 휴대단말에 특화된 아이콘을 이용하는 경우에는 해당 아이콘의 터치(touch)를 위해 큰 이미지를 사용하기 때문에, 화면상의 제약으로 더 많은 정보를 표시하기 어려운 문제점이 있다. 또한 상기 메뉴 버튼 등을 이용하여 기능을 실행하는 방식은 해당 기능을 실행하기 위해서 여러 번의 메뉴 선택 절차 등을 수행함에 따라 사용자에게 불편함을 주는 문제점이 있다.
따라서 터치스크린을 구비하는 휴대단말에서 특정 기능 실행을 위해 그의 수행 절차를 간소화하거나, 또는 터치스크린을 기능을 활용하여 특정 기능 실행을 간편하게 실행하기 위한 방안들의 필요성이 대두되고 있다.
본 발명의 목적은 휴대단말의 다양한 기능들을 보다 편리하고 간편하게 실행할 수 있는 방법을 제공함에 있다.
본 발명의 다른 목적은 휴대단말의 특정 기능 실행을 위해 메뉴 버튼 등에 의한 진입을 생략하고, 터치스크린 상에서 사용자 제스처를 인식하여 해당 사용자 제스처에 대응하는 기능을 바로 실행할 수 있는 방법을 제공함에 있다.
본 발명의 또 다른 목적은 터치스크린 또는 터치패드를 구비하는 휴대단말에서 사용자 제스처 입력에 따라 미리 설정되는 다양한 기능들 중 적어도 하나를 간편하게 실행할 수 있는 방법을 제공함에 있다.
본 발명의 또 다른 목적은 사용자 제스처에 따른 기능 실행이 가능한 사용자 제스처 정보 및 그에 매핑(mapping)된 기능 정보를 표시하고, 설정된 특정 제스처 입력 시 해당 제스처에 매핑된 기능을 바로 실행할 수 있는 방법을 제공함에 있다.
상기와 같은 목적들을 달성하기 위한 본 발명의 실시 예에 따른 방법은, 휴대단말의 기능 실행 방법에 있어서, 사용자 요청에 대응하는 임의의 모드를 수행하는 과정과; 상기 임의의 모드 수행 중에 사용자 요청에 응답하여, 상기 제스처 입력모드를 활성화하는 과정과; 상기 제스처 입력모드에서 사용자 제스처를 입력받는 과정과; 상기 사용자 제스처에 대응하는 기능을 실행하는 과정을 포함한다.
상기와 같은 목적들을 달성하기 위한 본 발명의 실시 예에 따른 방법은, 휴 대단말의 기능 실행 방법에 있어서, 임의의 모드 수행 중에, 휴대단말의 특정 영역에서 제스처 입력모드 활성화를 위한 입력이벤트를 입력받는 과정과; 상기 입력이벤트가 입력되고 있는 동안 미리 정의된 사용자 제스처를 입력받는 과정과; 상기 사용자 제스처에 대응하는 기능 정보를 체크하고, 상기 기능 정보에 따른 기능을 실행하는 과정을 포함한다.
상술한 바와 같이 본 발명에서 제안하는 휴대단말에서 제스처를 이용한 기능 실행 방법에 따르면, 휴대단말의 기능 실행 시 간소화된 기능 실행 절차에 따른 편리함을 제공할 수 있다. 본 발명에 따르면, 제스처 모드 전환키를 이용하거나, 또는 멀티터치 방식을 활용에 의한 제스처 입력모드에서, 터치스크린 또는 터치패드에 발생하는 사용자 제스처에 대응하는 임의의 기능/어플리케이션을 간편하고 빠르게 실행할 수 있으며, 이에 따라 사용자의 휴대단말 이용에 따른 편의성을 제공할 수 있다.
또한 본 발명에 따르면, 휴대단말의 제스처 입력모드에 의한 기능 실행의 편의성을 위해, 제스처 모드 전환키 또는 멀티터치 방식에 의한 인터랙션이 발생할 시, 기능 실행을 위해 미리 설정된 제스처 정보 및 그에 매핑된 기능 정보를 대기화면(현재 수행 중인 모드의 화면데이터) 상에 제공함으로써, 기능 실행을 위한 제스처 및 그에 따른 기능을 사용자가 직관적으로 인지할 수 있다.
또한 본 발명에 따르면, 휴대단말이 임의의 모드를 수행하는 중에 제스처 입력모드로 진입할 시, 이전에 수행하던 상기 임의의 모드를 유지할 수 있다. 즉, 상 기 임의의 모드에 따른 화면데이터를 그대로 유지하는 상태에서 사용자 제스처를 입력받을 수 있다. 이에 따라, 사용자가 현재 화면데이터 상에 숙지하면서 희망하는 기능 실행에 따른 진행 절차를 보다 직관적으로 인지할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명한다. 이때, 첨부된 도면에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한, 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다.
제안하는 본 발명은 휴대단말의 기능 실행 방법에 관한 것이다. 특히, 본 발명의 실시 예에서는 터치스크린(Touch-screen) 또는 터치패드(Touch-pad) 상에 입력되는 사용자 제스처(gesture)를 이용하여 휴대단말의 다양한 기능을 간편하게 실행할 수 있는 방법에 관한 것이다. 이때, 본 발명의 실시 예에 따른 상기 제스처는 미리 설정된 특정 패턴(예컨대, 도형 형태)에 따라 이루어지는 사용자의 입력 동작을 나타낸다.
본 발명의 실시 예에 따르면, 휴대단말에서 임의의 모드를 수행하는 중에, 제스처 입력모드를 위한 요청이 있을 시 상기 임의의 모드를 유지하는 상태에서 상기 제스처 입력모드를 활성화하고, 상기 제스처 입력모드에서 입력되는 사용자 제스처를 인식하고, 상기 인식하는 사용자 제스처에 대응하는 특정 기능을 바로 실행할 수 있다. 본 발명의 실시 예에 따르면, 제스처 입력모드 실행을 위해 별도로 구비되는 특정 기능키를 이용하여 상기 제스처 입력모드를 활성화하거나, 또는 멀티 터치 방식을 이용하여 상기 제스처 입력모드를 활성화할 수 있다.
그러면 이하, 본 발명의 실시 예에 따른 터치스크린 또는 터치패드를 구비하는 휴대단말에서, 사용자 제스처를 이용하여 휴대단말의 기능을 실행하는 방법 및 이를 위한 휴대단말에 대하여 살펴보기로 한다. 하지만, 본 발명의 휴대단말 및 그의 동작이 하기에서 기술하는 내용에 한정되는 것은 아니므로, 하기의 실시 예에 의거하여 다양한 실시 예들에 적용할 수 있음에 유의하여야 한다. 또한, 이하에서는 본 발명의 휴대단말이 터치스크린을 구비하고, 상기 터치스크린에 의하여 사용자 제스처를 입력받는 경우를 대표적인 예시로서 설명한다. 하지만, 본 발명의 실시 예에 따르면 사용자 제스처를 터치패드에 의하여 입력받을 수도 있으며, 따라서 이하에서는 생략하지만, 본 발명의 휴대단말은 터치패드를 더 포함하거나, 터치스크린에 대체되는 터치패드로 이루어질 수 있음은 물론이다.
도 1a 및 도 1b는 본 발명의 실시 예에 따른 휴대단말 및 제스처 입력모드 활성화를 위한 동작을 설명하기 위해 개략적으로 도시한 도면들이다.
상기 도 1a는 본 발명의 휴대단말이 제스처 입력모드 활성화를 위한 기능키(200)를 포함하고, 상기 기능키(200)에 의하여 제스처 입력모드를 활성화하는 동작 설명을 위한 도면이다. 상기 도 1b는 본 발명의 휴대단말이 제스처 입력모드 활성화를 위한 별도의 기능키가 생략되고, 멀티터치 방식을 이용하여 제스처 입력모드를 활성화하는 동작 설명을 위한 도면이다.
이하, 본 발명의 실시 예에서는 상기 도 1a 및 도 1b와 같이 동작을 구분하여 설명하지만, 본 발명의 휴대단말은 상기 도 1a와 같이 기능키(200)를 포함하면 서도, 상기 도 1b와 같이 멀티터치 방식에 의하여 동작할 수도 있음은 물론이다. 이하에서는, 상기 기능키(200)를 제스처 모드 전환키라 칭하기로 한다.
상기 도 1a를 참조하면, 휴대단말은 특정 모드 수행에 따른 화면데이터(100)를 표시하는 중에, 사용자로부터 제스처 모드 전환키(200)에 대한 입력을 감지할 수 있다. 즉, 사용자는 제스처를 이용한 기능 실행을 위해 상기 제스처 모드 전환키(200)에 입력이벤트를 발생할 수 있다. 여기서, 상기 입력이벤트는 본 발명의 제스처 입력 방식에 따라 탭앤홀드(Tap&Hold) 이벤트 및 탭(Tap) 이벤트일 수 있다.
먼저, 상기 제스처 입력 방식이 상기 제스처 모드 전환키(200)를 누른 상태에서 제스처를 입력하는 방식인 경우 상기 입력이벤트는 탭앤홀드 이벤트일 수 있다. 사용자는 탭앤홀드 이벤트 입력을 통해 제스처 입력모드를 활성화 요청하고, 휴대단말은 상기 탭앤홀드 이벤트 입력을 감지할 시 제스처 입력모드를 활성화한다. 이때, 상기 휴대단말은 상기 수행 중인 특정 모드의 상기 화면데이터(100) 표시를 유지하는 상태에서 사용자 제스처 입력을 위한 제스처 입력모드를 활성화 할 수 있다. 이후, 사용자는 상기 제스처 입력모드 활성화 시 상기 제스처 모드 전환키(200) 상에 탭앤홀드 이벤트가 입력된 상태에서 터치스크린 상에 제스처 입력을 수행한다. 그러면 휴대단말은 상기 제스처 입력에 대응하는 기능을 판단하고, 이후 판단하는 해당 기능을 실행한다. 여기서, 상기 제스처 입력모드의 해제는 상기 탭앤홀드 이벤트를 상기 제스처 모드 전환키(200)에서 릴리즈하는 경우일 수 있다. 또는 설정 방식에 따라 상기 제스처 입력모드가 활성화된 상태에서 미리 설정된 소정 시간 내에 사용자 제스처 입력이 없을 경우 상기 제스처 입력모드를 해제할 수 도 있다.
다음으로, 상기 제스처 입력 방식이 상기 제스처 모드 전환키(200) 상에 한 번의 입력으로 제스처 입력모드를 활성화하는 방식인 경우 상기 입력이벤트는 탭 이벤트일 수 있다. 사용자는 탭 이벤트 입력을 통해 제스처 입력모드를 활성화 요청하고, 휴대단말은 상기 탭 이벤트 입력을 감지할 시 제스처 입력모드를 활성화한다. 이때, 상기 휴대단말은 상기 수행 중인 특정 모드의 화면데이터(100) 표시를 유지하는 상태에서 사용자 제스처 입력을 위한 제스처 입력모드를 활성화 할 수 있다. 이후, 사용자는 상기 제스처 입력모드 활성화 시 상기 터치스크린 상에 제스처 입력을 수행한다. 그러면 휴대단말은 상기 제스처 입력에 대응하는 기능을 판단하고, 이후 판단하는 해당 기능을 실행한다. 여기서, 상기 제스처 입력모드의 해제는 상기 제스처 모드 전환키(200)에 다시 탭 이벤트를 입력하는 경우일 수 있다. 즉, 토글 방식에 대응하여 제스처 입력모드를 활성화하거나 해제할 수 있다. 또는 설정 방식에 따라 상기 제스처 입력모드가 활성화된 상태에서 미리 설정된 소정 시간 내에 사용자 제스처 입력이 없을 경우 상기 제스처 입력모드를 해제할 수도 있다.
상기 도 1b를 참조하면, 휴대단말은 특정 모드 수행에 따른 화면데이터(100)를 표시하는 중에, 사용자로부터 제스처 입력모드 활성화를 위한 입력을 감지할 수 있다. 즉, 사용자는 제스처를 이용한 기능 실행을 위해 참조부호 300에 나타낸 바와 같이, 상기 화면데이터(100)의 빈 영역에 입력이벤트를 발생할 수 있다. 여기서, 상기 입력이벤트는 본 발명의 제스처 입력 방식에 따라 탭앤홀드(Tap&Hold) 이벤트 및 탭(Tap) 이벤트일 수 있다.
먼저, 상기 제스처 입력 방식이 상기 화면데이터(100)의 빈 영역(300)을 누른 상태에서 제스처를 입력하는 방식인 경우 상기 입력이벤트는 탭앤홀드 이벤트일 수 있다. 사용자는 탭앤홀드 이벤트 입력을 통해 제스처 입력모드를 활성화 요청하고, 휴대단말은 상기 탭앤홀드 이벤트 입력을 감지할 시 제스처 입력모드를 활성화한다. 이때, 상기 휴대단말은 상기 수행 중인 특정 모드의 상기 화면데이터(100) 표시를 유지하는 상태에서 사용자 제스처 입력을 위한 제스처 입력모드를 활성화 할 수 있다. 이후, 사용자는 상기 제스처 입력모드 활성화 시 상기 화면데이터(100)의 빈 영역(300) 상에 상기 탭앤홀드 이벤트가 입력된 상태에서 터치스크린 상에 제스처 입력을 수행한다. 그러면 휴대단말은 상기 제스처 입력에 대응하는 기능을 판단하고, 이후 판단하는 해당 기능을 실행한다. 여기서, 상기 제스처 입력모드의 해제는 상기 탭앤홀드 이벤트를 터치스크린에서 릴리즈하는 경우일 수 있다. 또는 설정 방식에 따라 상기 제스처 입력모드가 활성화된 상태에서 미리 설정된 소정 시간 내에 사용자 제스처 입력이 없을 경우 상기 제스처 입력모드를 해제할 수도 있다.
다음으로, 상기 제스처 입력 방식이 상기 화면데이터(100)의 빈 영역(300) 상에 한 번의 입력(예컨대, 설정된 시간 이상 롱 프레스 입력)으로 제스처 입력모드를 활성화하는 방식인 경우 상기 입력이벤트는 탭 이벤트일 수 있다. 사용자는 탭 이벤트 입력을 통해 제스처 입력모드를 활성화 요청하고, 휴대단말은 상기 탭 이벤트 입력을 감지할 시 제스처 입력모드를 활성화한다. 이때, 상기 휴대단말은 상기 수행 중인 특정 모드의 화면데이터(100) 표시를 유지하는 상태에서 사용자 제 스처 입력을 위한 제스처 입력모드를 활성화 할 수 있다. 이후 사용자는 상기 제스처 입력모드 활성화 시 상기 터치스크린 상에 제스처 입력을 수행한다. 그러면 휴대단말은 상기 제스처 입력에 대응하는 기능을 판단하고, 이후 판단하는 해당 기능을 실행한다. 여기서, 상기 제스처 입력모드의 해제는 참조부호 300의 예시와 같이 상기 화면데이터(100)의 빈 영역에 다시 탭 이벤트(예컨대, 설정된 시간 이상 롱 프레스 입력)를 입력하는 경우일 수 있다. 즉, 토글 방식에 대응하여 제스처 입력모드를 활성화하거나 해제할 수 있다. 또는 설정 방식에 따라 상기 제스처 입력모드가 활성화된 상태에서 미리 설정된 소정 시간 내에 사용자 제스처 입력이 없을 경우 상기 제스처 입력모드를 해제할 수도 있다.
이상에서 살펴본 바와 같이 본 발명의 실시 예에 따르면, 제스처 모드 전환키(200) 또는 화면데이터(100)의 빈 영역(300)을 이용하여 제스처 입력모드를 활성화할 수 있다. 이때, 상기 제스처 입력모드 활성화 후 제스처 입력을 위한 방법으로, 상기 모드 전환키(200) 또는 화면데이터(100)의 빈 영역(300)을 누른 상태 즉, 탭&홀드 이벤트가 발생하는 상태에서 제스처를 입력하거나, 또는 상기 모드 전환키(200) 또는 화면데이터(100)의 빈 영역(300)에 한 번의 입력 즉, 탭 이벤트를 발생한 후 제스처를 입력할 수 있다. 이하에서는, 본 발명의 동작을 설명함에 있어서, 제스처 입력모드 활성화 및 사용자 제스처를 입력하는 동작이 상기 탭앤홀드 이벤트 즉, 상기 모드 전환키(200) 또는 화면데이터(100)의 빈 영역(300)이 눌려진 상태에서 제스처가 입력되는 경우를 예시로서 설명한다. 그러면 이하, 전술한 바와 같은 본 발명의 사용자 제스처를 이용한 휴대단말의 기능을 실행을 위한 제어 방법 에 대하여 살펴보기로 한다.
도 2는 본 발명의 실시 예에 따른 휴대단말에서 제스처를 이용한 기능 실행을 위한 제어 방법을 도시한 도면이다.
상기 도 1a 내지 도 2를 참조하면, 먼저 휴대단말은 특정 모드 수행(S201단계) 중에, 인터럽트 발생을 감지할 수 있다(S203단계). 그러면 상기 휴대단말은 상기 인터럽트가 제스처 입력모드 활성화를 위한 요청인지 여부를 판별한다(S205단계). 예를 들면, 상기 휴대단말은 상기 인터럽트가 제스처 모드 전환키(200) 또는 상기 특정 모드 수행에 따라 표시 중인 화면데이터의 일 영역에 발생하는 탭&홀드 이벤트인지 여부를 판별할 수 있다.
다음으로, 상기 S205단계의 판별결과, 상기 인터럽트가 제스처 입력모드 활성화를 위한 인터럽트가 아니면, 상기 휴대단말은 상기 인터럽트에 따른 해당 동작을 수행할 수 있다(S207단계). 예를 들면, 상기 인터럽트가 특정 메뉴 요청일 시 요청되는 해당 메뉴를 표시하거나, 또는 상기 인터럽트가 특정 아이콘에 대한 입력일 시 해당 아이콘에 대응하는 어플리케이션 또는 기능을 실행할 수 있다.
다음으로, 상기 S205단계의 판별결과, 상기 인터럽트가 제스처 입력모드 활성화를 위한 인터럽트이면, 상기 휴대단말은 제스처 입력모드를 활성화하고(S209단계), 사용자의 입력 즉, 제스처 입력을 대기한다(S211단계). 이때, 상기 휴대단말은 상기 특정 모드 수행에 따른 화면데이터의 표시는 유지하는 상태에서 상기 제스처 입력모드를 활성화하고, 사용자의 제스처 입력을 위한 레이어(layer)를 형성할 수 있다.
다음으로, 상기 휴대단말은 상기 제스처 입력모드 활성화 후 미리 설정된 시간만큼 사용자 입력을 대기할 수 있다. 즉, 상기 휴대단말은 상기 입력 대기(S211단계)동안 제스처 입력 여부를 판별한다(S213단계). 이때, 사용자로부터 제스처 입력이 감지되지 않으면, 상기 휴대단말은 설정 시간의 경과 여부를 확인할 수 있다(S215단계). 만약, 설정 시간이 경과하지 않은 경우, 상기 휴대단말은 상기 S211단계로 진행하여 사용자 입력을 계속하여 대기할 수 있다.
반면, 설정 시간이 경과하는 경우, 상기 휴대단말은 상기 S209단계에서 활성화는 제스처 입력모드를 해제하고(S217단계), 상기 수행 중이던 특정 모드를 활성화할 수 있다(S219단계). 이후, 상기 휴대단말은 해당 동작을 수행할 수 있다(S221단계). 예를 들면, 상기 휴대단말은 상기 제스처 입력모드 해제 후, 사용자로부터 제스처 입력모드의 재요청이 있을 경우, 전술한 과정을 다시 수행할 수 있다. 또는 상기 휴대단말은 상기 특정 모드 수행 중에 발생하는 사용자의 입력에 대응하는 동작을 수행할 수도 있다.
다음으로, 상기 휴대단말은 사용자로부터 제스처 입력을 감지하면, 사용자로부터 입력되는 상기 제스처를 판별한다(S223단계, S225단계). 즉, 상기 휴대단말은 상기 입력되는 제스처가 설정된 제스처에 대응하는지 판별한다. 이때, 상기 휴대단말에는 제스처 정보와 해당 제스처 정보에 대응하는 기능 정보가 미리 설정되어 저장될 수 있다. 이러한 제스처 정보 및 그에 매핑되는 기능 정보는 사용자 설정에 따라 하나 또는 다수개가 설정될 수 있다. 상기 제스처 정보는 미리 설정된 특정 패턴(예컨대, 도형 형태)에 따라 이루어지는 사용자의 입력 동작을 나타낼 수 있 다. 이러한 제스처 정보 및 기능 정보의 예시가 하기 <표 1>에 나타나 있으며, 이러한 제스처 정보 및 기능 정보는 미리 정의되거나 사용자에 의해 다양하게 설정될 수 있다.
Figure 112009020282928-PAT00001
상기 <표 1>은 사용자의 입력 제스처에 대한 정의를 나타낸 것으로, 사용자는 상기와 같은 각 제스처들 중 어느 하나의 제스처 입력을 통해, 그에 매핑된 해당 기능 또는 어플리케이션 등을 바로 실행할 수 있다. 이러한 제스처 정보, 기능 정보 및 그들의 매핑정보는 반드시 상기 <표 1>의 예시에 한정되는 것은 아니다. 따라서 제스처 정보, 기능 정보 및 그들의 매핑정보는 사용자 설정(편집/추가/삭제)에 따르거나, 이러한 기능을 제공하는 관련 서버(예컨대, 제조사/통신사 서버)로부터 다운로드 받을 수 있다. 이하에서는 제스처 정보, 기능 정보 및 그들의 매핑정보를 통칭해서 제스처 설정정보라 칭하기로 한다.
이러한 제스처 설정정보는 다른 휴대단말과의 송수신이 가능하여, 서로 간에 공유도 가능함은 물론이다. 또한, 본 발명의 실시 예에 따르면, 휴대단말이 특정 모드 수행 중에 제스처 입력모드 활성화 시 설정된 제스처 설정정보를 사용자가 직관적으로 인지할 수 있도록, 상기 제스처 설정정보를 수행 중인 특정 모드의 화면데이터 상에 표시할 수도 있음은 물론이다.
다시 상기 도 2를 참조하면, 상기 제스처 판별결과, 상기 입력되는 사용자의 제스처가 상기 <표 1>과 같이 미리 설정된 제스처 중 어느 하나에 대응할 시, 즉, 상기 입력되는 사용자의 제스처에 따른 패턴(도형 형태)이 미리 설정된 제스처에 따른 어느 하나의 패턴(도형 형태)에 일치할 시, 상기 휴대단말은 상기 입력되는 제스처에 대응하는 기능을 실행한다(S227단계). 이러한 기능 실행에 대한 동작 예시에 대해서는 후술하기로 한다.
다음으로, 상기 휴대단말은 상기 제스처에 따른 기능 실행 후 제스처 입력모드의 종료 여부를 판별할 수 있다(S229단계). 상기 제스처 입력모드의 종료 여부 판별은 전술한 바와 같이, 다음 제스처 입력이 설정시간 경과 시까지 입력되지 않거나, 사용자로부터 제스처 입력모드의 해제 요청이 있거나, 또는 제스처 입력모드 활성화를 위해 입력된 탭앤홀드 이벤트가 릴리즈 되는 경우 등이 발생할 시 제스처 입력모드 종료로 판단할 수 있다. 이때, 제스처 입력모드 종료를 감지하면, 상기 휴대단말은 상기 S217단계로 진행하여 전술한 과정을 수행할 수 있다.
다음으로, 제스처 입력모드의 종료가 아니면, 상기 휴대단말은 사용자로부터 요청되는 해당 동작을 수행할 수 있다(S231단계). 예를 들면, 상기 제스처에 대응하는 기능 실행 후, 상기 기능에 연속되는 기능 실행을 위한 사용자의 다른 제스처 입력을 인식하고, 그에 대응하는 기능을 수행할 수 있다.
한편, 상기에서 입력되는 제스처가 설정된 제스처에 대응하지 않으면, 상기 휴대단말은 사용자의 제스처 입력을 오류로 처리하고(S233단계), 설정 동작을 수행할 수 있다(S235단계). 예를 들면, 제스처 입력 오류에 따른 오류 알림정보를 팝업 등을 이용하여 제공하거나, 상기 오류 알림정보 제공 후 새로운 제스처 입력을 대기하거나, 상기 오류 알림정보 제공 후 설정된 제스처 설정정보를 표시하거나, 제스처 정보 및 기능 정보의 설정 여부를 확인하는 등의 동작을 수행할 수 있다.
도 3은 본 발명의 실시 예에 따른 휴대단말에서 사용자의 제스처에 따른 기능 실행 방법을 도시한 도면이다.
상기 도 1a 내지 도 3을 참조하면, 먼저 휴대단말은 전술한 바와 같이, 제스처 입력모드 요청을 감지하면(S301단계), 특정 모드 수행에 따른 화면데이터를 유지하는 상태에서 사용자의 제스처 입력을 위한 레이어를 생성한다(S303단계). 이어서, 상기 휴대단말은 사용자의 제스처 입력을 대기하고(S305단계), 상기 입력 대기 중에 사용자로부터 제스처 입력이 시작되는지 여부를 체크한다(S307단계).
다음으로, 사용자로부터 제스처 입력이 시작되면, 상기 휴대단말은 상기 제스처의 이동에 따른 패턴을 인식하고(S309단계), 상기 제스처의 릴리즈 여부를 판별한다(S311단계). 만약, 상기 제스처가 릴리즈되지 않으면, 상기 휴대단말은 상기 S309단계로 진행하여 상기 제스처의 패턴 인식에 따른 프로세싱을 계속하여 수행한다.
반면, 상기 제스처가 릴리즈되면, 상기 휴대단말은 상기 제스처가 릴리즈되는 시점에서 시간을 카운트한다(S313단계). 즉, 상기 휴대단말은 상기 제스처의 릴리즈 후 연속되게 입력되는 제스처가 있는지 여부를 판별할 수 있는데, 이때, 상기 휴대단말은 상기 연속되게 입력되는 제스처가 설정된 시간 내에 이루어지는 것인지 여부를 판별할 수 있다. 따라서 상기 휴대단말은 설정된 시간 내에 새로운 제스처가 입력되면 상기 새로운 제스처를 이전에 입력된 제스처에 연속되게 입력되는 하나의 제스처로 인식하고, 만약, 설정된 시간이 경과하면 상기 제스처에 따른 해당 기능을 실행하게 된다.
예를 들어, 상기 <표 1>의 예시를 참조하여 살펴보면, 사용자의 제스처가 "A" 도형과 같은 패턴을 가지는 경우, 사용자는 "
Figure 112009020282928-PAT00002
"와 같은 제스처를 입력한 후 "-"를 입력하여 상기 "A" 도형과 같은 패턴의 제스처를 완성할 수 있다. 따라서 휴대단말은 상기 "
Figure 112009020282928-PAT00003
"의 제스처 입력 후 릴리즈가 발생하더라도, 설정된 시간이 경과하기 이전에 발생하는 "-"를 연속된 제스처로 인지하고, 최종적으로 "A"와 같이 인식하게 된다. 만약, 상기 "
Figure 112009020282928-PAT00004
"의 제스처 입력 후 설정된 시간이 경과하는 경우, 상기 휴대단말은 제스처 "
Figure 112009020282928-PAT00005
"에 따른 기능 정보를 판별하고, 상기 제스처 "
Figure 112009020282928-PAT00006
"에 매핑된 기능 정보가 존재할 시 상기 제스처 "
Figure 112009020282928-PAT00007
"에 매핑된 해당 기능을 실행하게 된다.
다시 상기 도 3을 참조하면, 상기 휴대단말은 상기 시간 카운트에 따라 설정된 시간의 초과 여부를 판별하고(S315단계), 만약 시간이 초과하는 경우 상기에서 입력되는 제스처의 패턴에 다른 기능을 판단하고(S317단계), 그에 따른 기능을 실행한다(S319단계).
다음으로, 상기 휴대단말은 상기 시간 카운트에 따라 설정된 시간이 초과하지 않은 경우, 새로운 제스처의 입력 여부를 판별한다(S321단계). 즉, 상기 제스처의 릴리즈 이후 연속되는 새로운 제스처가 입력되는지 여부를 판별한다.
만약, 새로운 제스처의 입력이 없으면, 상기 휴대단말은 상기 S313단계로 진행하여 상기의 과정을 수행할 수 있다. 반면, 새로운 제스처의 입력이 있으면, 상기 휴대단말은 상기 새로운 제스처를 이전에 입력된 제스처에 연속된 제스처로 인식 즉, 하나의 제스처로 인식한다(S323단계). 이후, 상기 휴대단말은 상기 새로운 제스처의 릴리즈 여부를 판별(S325단계)하고, 상기 새로운 제스처가 릴리즈될 시, 상기 S313단계로 진행하여 상기의 과정을 수행할 수 있다. 이후, 상기 휴대단말은 상기 이전에 입력된 제스처와, 상기 제스처에 연속되게 입력되는 제스처를 하나의 도형 형태를 가지는 패턴으로 인식하고, 그에 매핑된 기능 정보를 검색하여 해당 기능을 실행할 수 있다.
이상에서는 본 발명의 실시 예에 따른 휴대단말에서 제스처 입력모드 활성화 후 사용자 제스처를 이용하여 휴대단말의 기능을 실행하고, 상기 기능 실행을 위한 제어 동작에 대하여 살펴보았다. 다음으로 이하에서는, 상기 도 1a 내지 도 3을 참조하여 살펴본 바와 같은 본 발명의 실시 예에 따른 동작 화면 예시들에 대하여 살펴보기로 한다. 하지만, 본 발명의 화면 예시가 하기에서 기술하는 내용에 한정되는 것은 아니므로, 하기의 실시 예에 의거하여 다양한 실시 예들에 적용할 수 있음에 유의하여야 한다.
도 4a 및 도 4b는 본 발명의 실시 예에 따른 휴대단말에서 제스처를 이용한 기능 실행 동작을 설명하기 위한 화면 예시를 도시한 도면이다. 특히, 상기 도 4a 및 도 4b에서는 휴대단말에 별도로 구비되는 제스처 모드 전환키(200)를 이용하여 제스처 입력모드를 활성화하는 경우의 동작 예시를 나타낸다.
상기 도 4a 및 도 4b를 참조하면, 먼저 사용자는 휴대단말에서 특정 모드를 수행할 수 있다. 상기 도 4a 및 도 4b에서는 상기 특정 모드가 전자메일을 확인하는 모드인 것을 예시로 설명한다. 따라서 상기 휴대단말은 상기 전자메일 확인에 따른 해당 화면데이터(100)를 표시할 수 있다.
다음으로, 사용자는 상기 전자메일 확인 중에 상기 전자메일의 화면데이터(100)의 내용을 선택하여 복사하기 위해 제스처 입력모드를 활성화할 수 있다. 이를 위해, 사용자는 참조부호 S410에 나타낸 바와 같이 제스처 모드 전환키(200)를 이용하여 탭앤홀드 이벤트를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 제스처 모드 전환키(200)에 발생하는 탭앤홀드 이벤트를 감지하고, 그에 따라 상기 화면데이터(100)를 유지하는 상태에서 제스처 입력모드를 활성화할 수 있다.
다음으로, 사용자는 상기 제스처 모드 전환키(200)에 탭앤홀드 이벤트를 입력한 상태에서, 참조부호 S420에 나타낸 바와 같이 희망하는 기능 실행을 위한 제스처를 입력할 수 있다. 상기 도 4a의 참조부호 S420에서는 사용자의 상기 희망하는 기능이 영역 선택 기능이고, 상기 영역 선택 기능 실행을 위한 제스처 패턴이 "A"인 것으로 가정한다. 따라서 사용자는 상기 제스처 모드 전환키(200)에 탭앤홀드 이벤트를 입력한 상태에서 "A"와 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "A"의 제스처를 인식하고, 상기 "A" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 영역 선택 기능임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 영역 선택 기능을 실행하여 상기 제스처가 발생된 영역의 오브젝트를 선택한다. 상기 영역의 오브젝트가 선택되는 경우의 화면 예시가 참조부호 S430에 나타나 있다. 상기 참조부호 S430에 나타낸 바와 같이 상기 제스처가 발생된 영역이 하이라이트로 전환됨을 알 수 있다. 이를 통해 사용자 요청에 따른 기능이 실행되었음을 직관적으로 제공할 수 있다.
다음으로, 사용자는 상기 참조부호 S430과 같은 상태에서, 희망하는 기능 실행을 위한 제스처를 입력할 수 있다. 상기 도 4a의 참조부호 S430에서는 사용자의 상기 희망하는 기능이 복사 기능이고, 상기 복사 기능 실행을 위한 제스처 패턴이 "C"인 것으로 가정한다. 따라서 사용자는 상기 제스처 모드 전환키(200)에 탭앤홀드 이벤트를 입력한 상태에서 "C"와 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "C"의 제스처를 인식하고, 상기 "C" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 복사 기능임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 복사 기능을 실행하여 상기 참조부호 S420 및 참조부호 S430에서 선택된 영역의 오브젝트를 복사한다. 이때, 상기 도 4a 및 도 4b에서는 생략하였으나, 상기 복사하는 오브젝트에 대한 정보는 클립보드와 같이 상기 휴대단말의 특정 저장영역에 임시 저장될 수 있다.
한편, 사용자는 상기 참조부호 S420 및/또는 참조부호 S430과 같은 상태에서 상기 제스처 모드 전환키(200)에 발생한 탭앤홀드 이벤트를 릴리즈할 수 있는데, 이러한 경우 상기 휴대단말은 제스처 입력모드를 해제하고, 상기 참조부호 S410과 같이 제스처 입력모드 활성화 이전의 상태로 전환할 수 있다.
다음으로, 사용자는 상기 참조부호 S430과 같은 상태에서, 희망하는 어플리케이션 실행을 위한 제스처를 입력할 수 있다. 상기 도 4b의 참조부호 S440에서는 사용자의 상기 희망하는 어플리케이션이 메시지 작성을 위한 어플리케이션(메시지 어플리케이션)이고, 상기 어플리케이션 실행을 위한 제스처 패턴이 "M"인 것으로 가정한다. 따라서 사용자는 상기 제스처 모드 전환키(200)에 탭앤홀드 이벤트를 입력한 상태에서 "M"과 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "M"의 제스처를 인식하고, 상기 "M" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 메시지 작성을 위한 어플리케이션 실행임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 메시지 작성을 위한 어플리케이션을 실행하여 참조부호 S450과 같이 해당 어플리케이션의 화면데이터(150)를 제공할 수 있다. 이때, 상기 도 4a 및 도 4b에서는 생략하였으나, 상기 메시지 작성을 위한 어플리케이션은 멀티태스킹(multitasking) 기능에 의하여 수행될 수 있다. 따라서 현재 표시되는 화면데이터(150)는 상기 메시지 작성을 위한 어플리케이션의 화면데이터일 수 있으나, 화면데이터(150)의 이면에는 상기 전자메일에 대응하는 화면데이터(100)가 제공되고 있을 수 있다.
다음으로, 사용자는 상기 참조부호 S450과 같은 상태에서, 희망하는 기능 실행을 위한 제스처를 입력할 수 있다. 상기 도 4b의 참조부호 S450에서는 사용자의 상기 희망하는 기능이 붙여넣기 기능이고, 상기 붙여넣기 기능 실행을 위한 제스처 패턴이 "V"인 것으로 가정한다. 따라서 사용자는 상기 제스처 모드 전환키(200)에 탭앤홀드 이벤트를 입력한 상태에서 "V"와 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "V"의 제스처를 인식하고, 상기 "V" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 붙여넣기 기능임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 붙여넣기 기능을 실행하여 참조부호 S420 및 참조부호 S430에서 선택 및 복사된 오브젝트를 붙여넣기 한다. 상기 붙여넣기 기능 실행에 따른 결과 화면 예시가 참조부호 S460에 나타나 있다.
이와 같이, 사용자는 상기에서 선택되어 복사된 오브젝트가 포함된 메시지를 작성할 수 있으며, 참조부호 S460과 같은 상태에서 설정된 특정 제스처 입력을 통해 상기와 같이 작성되는 메시지를 특정 수신 휴대단말로 전송하는 절차를 더 수행할 수도 있다. 또한 사용자는 상기 참조부호 S460과 같은 상태에서 상기 제스처 모드 전환키(200)에 발생한 탭앤홀드 이벤트를 릴리즈할 수 있는데, 이러한 경우 상기 휴대단말은 제스처 입력모드를 해제하고, 멀티태스킹에 의한 상기 메시지 어플리케이션을 뒤로 하고, 상기 참조부호 S410과 같은 화면을 제공하거나, 또는 상기 참조부호 S460과 같이 상기 메시지 어플리케이션에 의한 메시지 작성 모드를 제공할 수도 있다.
한편, 상기 도 4a 및 도 4b에서는 생략하였으나, 예를 들어 상기 참조부호 S410과 같은 상태에서, 상기 제스처 모드 전환키(200)에 탭앤홀드 이벤트가 발생할 시, 상기 휴대단말은 설정 방식에 따라 상기 <표 1>에서 살펴본 바와 같은 미리 설정된 제스처 설정정보를 화면데이터(100) 상에 오버레이 형태로 제공할 수도 있음은 물론이다. 이를 통해, 사용자는 수행하고자 하는 제스처의 형태 및 그에 매핑된 기능 정보를 직관적으로 인지하여 해당 동작을 수행할 수 있다.
도 5a 및 도 5b는 본 발명의 실시 예에 따른 휴대단말에서 제스처를 이용한 기능 실행 동작을 설명하기 위한 다른 화면 예시를 도시한 도면이다. 특히, 상기 도 5a 및 도 5b에서는 휴대단말의 터치스크린의 일 영역 및 상기 일 영역의 탭앤홀드 이벤트와 제스처 입력을 인식할 수 있는 멀티터치 방식을 이용하여 제스처 입력모드를 활성화하는 경우의 동작 예시를 나타낸다.
상기 도 5a 및 도 5b를 참조하면, 먼저 사용자는 휴대단말에서 특정 모드를 수행할 수 있다. 상기 도 5a 및 도 5b에서는 상기 도 4a 및 도 4b에서와 같이 상기 특정 모드가 전자메일을 확인하는 모드인 것을 예시로 설명한다. 따라서 상기 휴대단말은 상기 전자메일 확인에 따른 해당 화면데이터(100)를 표시할 수 있다.
다음으로, 사용자는 상기 전자메일 확인 중에 상기 전자메일의 화면데이터(100)의 내용을 선택하여 복사하기 위해 제스처 입력모드를 활성화할 수 있다. 이를 위해, 사용자는 참조부호 S510에 나타낸 바와 같이 터치스크린의 일 영역(300) 즉, 상기 화면데이터(100)의 빈 영역(300)을 이용하여 탭앤홀드 이벤트를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 화면데이터(100)의 빈 영역(300)에 발생하는 탭앤홀드 이벤트를 감지하고, 그에 따라 상기 화면데이터(100)를 유지하는 상태에서 제스처 입력모드를 활성화할 수 있다.
다음으로, 사용자는 상기 화면데이터(100)의 빈 영역(300)에 탭앤홀드 이벤트를 입력한 상태에서, 참조부호 S520에 나타낸 바와 같이 희망하는 기능 실행을 위한 제스처를 입력할 수 있다. 상기 도 5a의 참조부호 S520에서는 사용자의 상기 희망하는 기능이 영역 선택 기능이고, 상기 영역 선택 기능 실행을 위한 제스처 패턴이 "A"인 것으로 가정한다. 따라서 사용자는 상기 화면데이터(100)의 빈 영역(300)에 탭앤홀드 이벤트를 입력한 상태에서 "A"와 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "A"의 제스처를 인식하고, 상기 "A" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 영역 선택 기능임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 영역 선택 기능을 실행하여 상기 제스처가 발생된 영역의 오브젝트를 선택한다. 상기 영역의 오브젝트가 선택되는 경우의 화면 예시가 참조부호 S530에 나타나 있다. 상기 참조부호 S530에 나타낸 바와 같이 상기 제스처가 발생된 영역이 하이라이트로 전환됨을 알 수 있다. 이를 통해 사용자 요청에 따른 기능이 실행되었음을 직관적으로 제공할 수 있다.
다음으로, 사용자는 상기 참조부호 S530과 같은 상태에서, 희망하는 기능 실행을 위한 제스처를 입력할 수 있다. 상기 도 5a의 참조부호 S530에서는 사용자의 상기 희망하는 기능이 복사 기능이고, 상기 복사 기능 실행을 위한 제스처 패턴이 "C"인 것으로 가정한다. 따라서 사용자는 상기 화면데이터(100)의 빈 영역(300)에 탭앤홀드 이벤트를 입력한 상태에서 "C"와 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "C"의 제스처를 인식하고, 상기 "C" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 복사 기능임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 복사 기능을 실행하여 상기 참조부호 S520 및 참조부호 S530에서 선택된 영역의 오브젝트를 복사한다. 이때, 상기 도 5a 및 도 5b에서는 생략하였으나, 상기 복사하는 오브젝트에 대한 정보는 클립보드와 같이 상기 휴대단말의 특정 저장영역에 임시 저장될 수 있다.
한편, 사용자는 상기 참조부호 S520 및/또는 참조부호 S530과 같은 상태에서 상기 화면데이터(100)의 빈 영역(300)에 발생한 탭앤홀드 이벤트를 릴리즈할 수 있는데, 이러한 경우 상기 휴대단말은 제스처 입력모드를 해제하고, 상기 참조부호 S510과 같이 제스처 입력모드 활성화 이전의 상태로 전환할 수 있다.
다음으로, 사용자는 상기 참조부호 S530과 같은 상태에서, 희망하는 어플리케이션 실행을 위한 제스처를 입력할 수 있다. 상기 도 5b의 참조부호 S540에서는 사용자의 상기 희망하는 어플리케이션이 메시지 작성을 위한 어플리케이션이고, 상기 어플리케이션 실행을 위한 제스처 패턴이 "M"인 것으로 가정한다. 따라서 사용자는 상기 화면데이터(100)의 빈 영역(300)에 탭앤홀드 이벤트를 입력한 상태에서 "M"과 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "M"의 제스처를 인식하고, 상기 "M" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 메시지 작성을 위한 어플리케이션 실행임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 메시지 작성을 위한 어플리케이션을 실행하여 참조부호 S550과 같이 해당 어플리케이션의 화면데이터(150)를 제공할 수 있다. 이때, 상기 도 5a 및 도 5b에서는 생략하였으나, 상기 메시지 작성을 위한 어플리케이션은 멀티태스킹 기능에 의하여 수행될 수 있다. 따라서 현재 표시되는 화면데이터(150)는 상기 메시지 작성을 위한 어플리케이션의 화면데이터일 수 있으나, 상기 화면데이터(150)의 이면에는 상기 전자메일에 대응하는 화면데이터(100)가 제공되고 있을 수 있다.
다음으로, 사용자는 상기 참조부호 S550과 같은 상태에서, 희망하는 기능 실행을 위한 제스처를 입력할 수 있다. 상기 도 5b의 참조부호 S550에서는 사용자의 상기 희망하는 기능이 붙여넣기 기능이고, 상기 붙여넣기 기능 실행을 위한 제스처 패턴이 "V"인 것으로 가정한다. 따라서 사용자는 상기 화면데이터(150)의 빈 영역(300)에 탭앤홀드 이벤트를 입력한 상태에서 "V"와 같은 제스처를 입력할 수 있다. 그러면, 상기 휴대단말은 상기 "V"의 제스처를 인식하고, 상기 "V" 제스처에 대응하는 기능 정보를 판단하고, 상기 기능 정보가 붙여넣기 기능임을 식별할 수 있다. 이어서, 상기 휴대단말은 상기 붙여넣기 기능을 실행하여 참조부호 S520 및 참조부호 S530에서 선택 및 복사된 오브젝트를 붙여넣기 한다. 상기 붙여넣기 기능 실행에 따른 결과 화면 예시가 참조부호 S560에 나타나 있다.
이와 같이, 사용자는 상기에서 선택되어 복사된 오브젝트가 포함된 메시지를 작성할 수 있으며, 참조부호 S560과 같은 상태에서 설정된 특정 제스처 입력을 통해 상기와 같이 작성되는 메시지를 특정 수신 휴대단말로 전송하는 절차를 더 수행할 수도 있다. 또한 사용자는 상기 참조부호 S560과 같은 상태에서 상기 화면데이터(150)의 빈 영역(300)에 발생한 탭앤홀드 이벤트를 릴리즈할 수 있는데, 이러한 경우 상기 휴대단말은 제스처 입력모드를 해제하고, 멀티태스킹에 의한 상기 메시지 어플리케이션을 뒤로 하고, 상기 참조부호 S510과 같은 화면을 제공하거나, 또는 상기 참조부호 S560과 같이 상기 메시지 어플리케이션에 의한 메시지 작성 모드를 제공할 수도 있다.
한편, 상기 도 5a 및 도 5b에서는 생략하였으나, 예를 들어 상기 참조부호 S510과 같은 상태에서, 상기 화면데이터(100)의 빈 영역(300)에 탭앤홀드 이벤트가 발생할 시, 상기 휴대단말은 설정 방식에 따라 상기 <표 1>에서 살펴본 바와 같은 미리 설정된 제스처 설정정보를 화면데이터(100) 상에 오버레이 형태로 제공할 수도 있음은 물론이다. 이를 통해, 사용자는 수행하고자 하는 제스처의 형태 및 그에 매핑된 기능 정보를 직관적으로 인지하여 해당 동작을 수행할 수 있다.
이상에서는 도 4a 내지 도 5b를 설명함에 있어서, 제스처 입력모드를 위한 탭앤홀드 이벤트가 입력된 상태에서 사용자의 제스처를 입력하는 동작을 예시로 설명하였으나, 본 발명이 반드시 이에 한정되는 것은 아니다. 즉, 제스처 입력모드 활성화를 위한 제스처 모드 전환키(200)의 토글 방식과 같이 탭 이벤트에 따라 제스처 입력모드를 활성화/비활성화 전환할 수도 있다. 예를 들면, 제스처 모드 전환키(200)에 탭 이벤트가 발생할 시 제스처 입력모드를 활성화하고, 상기 제스처 입력모드에서 제스처 입력에 따른 기능 실행 후, 다시 상기 제스처 모드 전환키(200)에 탭 이벤트가 발생할 시 상기 제스처 입력모드를 비활성화할 수 있다.
또한, 상기 도 4a 및 도 4b의 참조부호 S410 내지 참조부호 S460 및 도 5a 및 도 5b의 참조부호 S510 내지 참조부호 S560과 같이, 사용자 제스처 입력 및 그에 따른 기능을 실행함에 있어서 순차적인 과정으로 설명하였으나, 전술한 과정들은 제스처 입력모드에서 제스처 입력에 따른 기능 실행 후 제스처 입력모드를 해제하고, 이후 사용자 요청에 따른 임의의 동작을 수행하다가, 다시 제스처 입력모드를 활성화하여 임의의 제스처 입력 및 그에 따른 기능을 실행할 수도 있음은 물론이다. 예를 들면, 전술한 도 5a의 참조부호 S530과 같이 화면데이터의 복사 후에 제스처 입력모드를 해제하고, 사용자 요청에 따른 임의의 동작을 수행하고, 이후 사용자 요청에 따라 제스처 입력모드를 활성화한 후 전술한 도 5b의 참조부호 S540과 같은 과정을 수행할 수 있음은 물론이다.
또한, 이상에서와 같이 본 발명의 동작을 수행하는 휴대단말은 다양한 통신 시스템들에 대응하는 통신 프로토콜들(communication protocols)에 의거하여 동작하는 모든 형태의 이동통신 단말기를 비롯하여, 터치스크린 또는 터치패드를 구비하는 PMP(Portable Multimedia Player), 디지털방송 플레이어, PDA(Personal Digital Assistant), 휴대게임단말 및 스마트 폰(Smart Phone) 등 모든 정보통신기기와 멀티미디어기기 및 그에 대한 응용기기를 포함할 수 있다.
또한, 본 발명의 실시 예에 따른 사용자 제스처를 입력받는 입력수단으로 터치스크린을 이용하는 것을 대표적인 예시로 설명하였으나, 본 발명에 따르면 사용자 제스처 입력을 위한 입력수단은 터치패드를 이용할 수도 있음은 물론이다. 아울러, 본 발명의 휴대단말이 터치스크린 및 터치패드 모두를 포함할 시 본 발명의 사용자 제스처는 상기 터치스크린 및 터치패드 중 적어도 하나로부터 입력될 수 있음은 물론이다. 또한, 제스처 입력모드 활성화를 위한 입력이벤트에 대해서도, 상기 터치패드를 활용할 수 있음에 유의하여야 한다.
한편, 이상에서 살펴본 바와 같은 본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
도 1a 및 도 1b는 본 발명의 실시 예에 따른 휴대단말 및 제스처 입력모드 활성화를 위한 동작을 설명하기 위해 개략적으로 도시한 도면들,
도 2는 본 발명의 실시 예에 따른 휴대단말에서 제스처를 이용한 기능 실행을 위한 제어 방법을 도시한 도면,
도 3은 본 발명의 실시 예에 따른 휴대단말에서 사용자의 제스처에 따른 기능 실행 방법을 도시한 도면,
도 4a 및 도 4b는 본 발명의 실시 예에 따른 휴대단말에서 제스처를 이용한 기능 실행 동작을 설명하기 위한 화면 예시를 도시한 도면,
도 5a 및 도 5b는 본 발명의 실시 예에 따른 휴대단말에서 제스처를 이용한 기능 실행 동작을 설명하기 위한 다른 화면 예시를 도시한 도면.

Claims (15)

  1. 휴대단말의 기능 실행 방법에 있어서,
    사용자 요청에 대응하는 임의의 모드를 수행하는 과정과,
    상기 임의의 모드 수행 중에 사용자 요청에 응답하여, 상기 제스처 입력모드를 활성화하는 과정과,
    상기 제스처 입력모드에서 사용자 제스처를 입력받는 과정과,
    상기 사용자 제스처에 대응하는 기능을 실행하는 과정을 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  2. 제1항에 있어서, 상기 활성화하는 과정은,
    상기 임의의 모드 수행 중에 제스처 입력모드 활성화를 위한 입력이벤트를 입력받는 과정과,
    상기 입력이벤트에 대응하여 상기 수행하는 임의의 모드를 유지하는 상태에서, 상기 제스처 입력모드를 활성화하는 과정을 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  3. 제2항에 있어서, 상기 입력이벤트는,
    상기 휴대단말에 형성되는 제스처 모드 전환키에 발생하는 입력이벤트인 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  4. 제2항에 있어서, 상기 입력이벤트는,
    상기 휴대단말에 형성되는 터치스크린의 일 영역에 발생하는 입력이벤트인 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  5. 제2항에 있어서, 상기 입력받는 과정은,
    상기 입력이벤트에 따라 상기 제스처 입력모드를 활성화하고, 상기 입력이벤트가 입력된 상태에서 상기 사용자 제스처를 입력받는 과정을 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  6. 제2항에 있어서, 상기 입력받는 과정은,
    상기 입력이벤트에 따라 상기 제스처 입력모드를 활성화하고, 상기 입력이벤트가 릴리즈된 상태에서 상기 사용자 제스처를 입력받는 과정을 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  7. 휴대단말의 기능 실행 방법에 있어서,
    임의의 모드 수행 중에, 휴대단말의 특정 영역에서 제스처 입력모드 활성화를 위한 입력이벤트를 입력받는 과정과,
    상기 입력이벤트가 입력되고 있는 동안 미리 정의된 사용자 제스처를 입력받는 과정과,
    상기 사용자 제스처에 대응하는 기능 정보를 체크하고, 상기 기능 정보에 따른 기능을 실행하는 과정을 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  8. 제7항에 있어서, 상기 입력이벤트는,
    상기 휴대단말에 형성되는 제스처 모드 전환키 또는 상기 휴대단말에 형성되는 터치스크린 중 어느 하나에서 발생하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  9. 제8항에 있어서, 상기 입력이벤트는,
    상기 제스처 모드 전환키 상에 입력되는 탭앤홀드 이벤트이고,
    상기 제스처 모드 전환키 상에 상기 탭앤홀드 이벤트가 입력되는 동안 사용 자 제스처가 입력되면, 상기 사용자 제스처에 따른 해당 기능을 실행하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  10. 제8항에 있어서, 상기 입력이벤트는,
    상기 터치스크린 상에 입력되는 탭앤홀드 이벤트이고,
    상기 터치스크린 상에서 상기 탭앤홀드 이벤트가 입력되는 동안 사용자 제스처가 입력되면, 상기 사용자 제스처에 따른 해당 기능을 실행하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  11. 제8항에 있어서,
    상기 입력이벤트에 따른 제스처 입력모드 활성화 시, 상기 휴대단말에 표시 중인 화면데이터 상에 제스처 입력을 위한 레이어를 생성하는 과정을 더 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  12. 제9항에 있어서,
    상기 입력이벤트에 따른 제스처 입력모드 활성화 시, 상기 임의의 모드 수행에 따른 화면데이터의 표시를 유지하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  13. 제12항에 있어서,
    상기 화면데이터의 표시를 유지하는 상태에서 상기 사용자 제스처를 입력받는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  14. 제13항에 있어서,
    상기 사용자 제스처에 대응하는 특정 어플리케이션 실행 시, 상기 어플리케이션에 따른 화면데이터를 표시하는 과정을 더 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
  15. 제8항에 있어서,
    상기 입력이벤트의 릴리즈 시 상기 활성화한 제스처 입력모드를 해제하는 과정을 포함하는 것을 특징으로 하는 휴대단말의 기능 실행 방법.
KR1020090028965A 2009-04-03 2009-04-03 휴대단말에서 제스처를 이용한 기능 실행 방법 KR101593598B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020090028965A KR101593598B1 (ko) 2009-04-03 2009-04-03 휴대단말에서 제스처를 이용한 기능 실행 방법
PCT/KR2010/001805 WO2010114251A2 (en) 2009-04-03 2010-03-24 Electronic device and method for gesture-based function control
US12/731,542 US20100257447A1 (en) 2009-04-03 2010-03-25 Electronic device and method for gesture-based function control

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090028965A KR101593598B1 (ko) 2009-04-03 2009-04-03 휴대단말에서 제스처를 이용한 기능 실행 방법

Publications (2)

Publication Number Publication Date
KR20100110568A true KR20100110568A (ko) 2010-10-13
KR101593598B1 KR101593598B1 (ko) 2016-02-12

Family

ID=42827173

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090028965A KR101593598B1 (ko) 2009-04-03 2009-04-03 휴대단말에서 제스처를 이용한 기능 실행 방법

Country Status (3)

Country Link
US (1) US20100257447A1 (ko)
KR (1) KR101593598B1 (ko)
WO (1) WO2010114251A2 (ko)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140007607A (ko) * 2012-07-09 2014-01-20 삼성전자주식회사 휴대 단말기의 부가 기능 운용 방법 및 장치
WO2014014292A1 (ko) * 2012-07-18 2014-01-23 Park Chul 터치패널을 갖는 개인휴대단말기의 작동방법
KR20140072752A (ko) * 2012-12-05 2014-06-13 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
KR20200070221A (ko) * 2018-12-06 2020-06-17 강태호 터치 패턴을 이용하여 기기를 제어하는 스마트 리모컨 및 스마트 리모컨의 제어 방법
KR20200070220A (ko) * 2018-12-06 2020-06-17 강태호 터치 인터페이스 장치 및 제어 방법
KR20200090711A (ko) * 2012-06-11 2020-07-29 삼성전자주식회사 모바일 디바이스 및 그 제어 방법
US11284251B2 (en) 2012-06-11 2022-03-22 Samsung Electronics Co., Ltd. Mobile device and control method thereof
US11521201B2 (en) 2012-06-11 2022-12-06 Samsung Electronics Co., Ltd. Mobile device and control method thereof

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110283195A1 (en) * 2010-05-11 2011-11-17 Microsoft Corporation Device theme matching
US20110283241A1 (en) * 2010-05-14 2011-11-17 Google Inc. Touch Gesture Actions From A Device's Lock Screen
EP2579139A1 (en) * 2010-06-01 2013-04-10 Nec Corporation Terminal, process selection method, control program, and recording medium
TW201209694A (en) * 2010-08-26 2012-03-01 Chi Mei Comm Systems Inc Electronic device and method for operating on a user interface
FR2967101B1 (fr) * 2010-11-10 2017-04-21 Valeo Systemes Thermiques Facade de controle electronique pour vehicule automobile
WO2012115647A1 (en) * 2011-02-24 2012-08-30 Empire Technology Development Llc Key input error reduction
US9094813B2 (en) * 2011-04-02 2015-07-28 Open Invention Network, Llc System and method for redirecting content based on gestures
GB2490108B (en) * 2011-04-13 2018-01-17 Nokia Technologies Oy A method, apparatus and computer program for user control of a state of an apparatus
US9746995B2 (en) 2011-07-14 2017-08-29 Microsoft Technology Licensing, Llc Launcher for context based menus
CN102890610B (zh) * 2011-07-18 2017-10-17 中兴通讯股份有限公司 带有触摸屏的终端处理文档的方法和带有触摸屏的终端
KR101859100B1 (ko) * 2011-07-19 2018-05-17 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
KR101863926B1 (ko) * 2011-07-19 2018-06-01 엘지전자 주식회사 이동 단말기 및 그 제어방법
KR101844903B1 (ko) * 2011-08-31 2018-04-04 삼성전자 주식회사 데이터 복합 기록 지원 방법 및 이를 지원하는 단말기
KR101719994B1 (ko) * 2011-09-07 2017-03-27 엘지전자 주식회사 이동단말기 및 그 제어방법
US9584992B2 (en) * 2011-11-04 2017-02-28 Facebook, Inc. Low power high frequency social updates for mobile devices
US9594504B2 (en) * 2011-11-08 2017-03-14 Microsoft Technology Licensing, Llc User interface indirect interaction
US9524097B2 (en) * 2011-12-22 2016-12-20 International Business Machines Corporation Touchscreen gestures for selecting a graphical object
EP2798452A4 (en) 2011-12-28 2015-09-09 Intel Corp HYBRID MOBILE INTERACTIONS FOR NATIVE APPS AND WEB APPS
CN102541603B (zh) * 2011-12-28 2015-12-02 华为终端有限公司 一种应用程序启动方法、系统及终端设备
TW201335774A (zh) * 2012-02-16 2013-09-01 Chi Mei Comm Systems Inc 文字編輯方法及系統
KR101322952B1 (ko) * 2012-02-24 2013-10-29 주식회사 팬택 휴대용 단말기에서 동작인식의 처리를 관리하는 장치 및 방법
CN102662576B (zh) * 2012-03-29 2015-04-29 华为终端有限公司 基于触摸的信息发送方法及装置
KR101370830B1 (ko) * 2012-04-25 2014-03-25 한국과학기술연구원 사용자 인터페이스 구현 시스템 및 구현 방법
KR101412808B1 (ko) * 2012-05-30 2014-06-27 삼성전기주식회사 전자 기기 및 그 동작 방법
US20140007019A1 (en) * 2012-06-29 2014-01-02 Nokia Corporation Method and apparatus for related user inputs
KR101392936B1 (ko) * 2012-06-29 2014-05-09 한국과학기술연구원 사용자 맞춤형 인터페이스 시스템 및 그 구현 방법
CN102739873B (zh) * 2012-07-13 2017-01-18 上海触乐信息科技有限公司 便携式终端设备滑行操作辅助信息输入控制功能的系统及方法
US9563674B2 (en) 2012-08-20 2017-02-07 Microsoft Technology Licensing, Llc Data exploration user interface
US10001897B2 (en) 2012-08-20 2018-06-19 Microsoft Technology Licensing, Llc User interface tools for exploring data visualizations
KR102007749B1 (ko) * 2012-08-29 2019-08-06 삼성전자주식회사 단말에서의 화면 녹화 방법 및 장치와 그 방법에 대한 프로그램 소스를 저장한 기록 매체
FR2995704B1 (fr) * 2012-09-19 2015-12-25 Inst Nat De Sciences Appliquees Methode de selection de mode d'interactivite
KR102058990B1 (ko) * 2012-09-19 2019-12-24 엘지전자 주식회사 모바일 디바이스 및 그 제어 방법
US9792035B2 (en) * 2012-10-09 2017-10-17 Mastercard International Incorporated System and method for payment using a mobile device
US9529439B2 (en) * 2012-11-27 2016-12-27 Qualcomm Incorporated Multi device pairing and sharing via gestures
CN102981768B (zh) * 2012-12-04 2016-12-21 中兴通讯股份有限公司 一种在触屏终端界面实现悬浮式全局按钮的方法及系统
US20140160054A1 (en) * 2012-12-06 2014-06-12 Qualcomm Incorporated Anchor-drag touch symbol recognition
EP2741476A1 (en) * 2012-12-10 2014-06-11 Telefonaktiebolaget L M Ericsson (publ) Mobile device and method of operation
US9658716B2 (en) * 2013-02-12 2017-05-23 Shenzhen Seefaa Scitech Co., Ltd. Method and device of deactivating portion of touch screen to prevent accidental activation
US10078437B2 (en) 2013-02-20 2018-09-18 Blackberry Limited Method and apparatus for responding to a notification via a capacitive physical keyboard
JP5621866B2 (ja) * 2013-03-12 2014-11-12 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理方法、およびそのプログラム
US9690476B2 (en) * 2013-03-14 2017-06-27 Blackberry Limited Electronic device and method of displaying information in response to a gesture
CN103279296A (zh) * 2013-05-13 2013-09-04 惠州Tcl移动通信有限公司 一种基于智能终端的笔画命令操作处理方法及其系统
US20140340317A1 (en) * 2013-05-14 2014-11-20 Sony Corporation Button with capacitive touch in a metal body of a user device and power-saving touch key control of information to display
KR20150004713A (ko) * 2013-07-03 2015-01-13 삼성전자주식회사 사용자 디바이스에서 어플리케이션 연동 방법 및 장치
KR20150032101A (ko) * 2013-09-17 2015-03-25 삼성전자주식회사 영상표시장치 및 영상표시방법
EP3091815B1 (en) * 2013-12-31 2019-07-31 Yulong Computer Telecommunication Scientific (Shenzhen) Co. Ltd. Operation control method and terminal
KR20150081840A (ko) 2014-01-07 2015-07-15 삼성전자주식회사 디스플레이장치 및 그 제어방법
KR102214437B1 (ko) 2014-01-10 2021-02-10 삼성전자주식회사 컴퓨팅 디바이스에서 컨텐츠 복사 실행 방법, 컨텐츠 붙여넣기 실행 방법 및 컴퓨팅 디바이스
US20150248545A1 (en) * 2014-03-03 2015-09-03 Samer Al-Jamal Sign shortcut
US10416871B2 (en) 2014-03-07 2019-09-17 Microsoft Technology Licensing, Llc Direct manipulation interface for data analysis
WO2015180067A1 (zh) * 2014-05-28 2015-12-03 华为技术有限公司 一种播放媒体的方法及终端
US11494056B1 (en) 2014-08-29 2022-11-08 Open Invention Network Llc Dynamic document updating application interface and corresponding control functions
JP6491326B2 (ja) 2014-09-19 2019-03-27 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． アプリケーションプログラムを実行するための方法および装置
KR20160034776A (ko) 2014-09-22 2016-03-30 삼성전자주식회사 디바이스 및 상기 디바이스의 제어 방법
CN105824542A (zh) * 2015-01-07 2016-08-03 阿里巴巴集团控股有限公司 启动应用程序功能的方法及装置
CN106293113A (zh) * 2015-05-29 2017-01-04 敖青 一种交互式字符输入系统及其交互方法
US20180225020A1 (en) * 2015-10-30 2018-08-09 Hewlett-Packard Development Company, L.P. Touch device
KR102567958B1 (ko) * 2016-11-10 2023-08-17 삼성디스플레이 주식회사 표시 장치, 표시 장치의 제어 방법, 및 단말

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060242607A1 (en) * 2003-06-13 2006-10-26 University Of Lancaster User interface
US20070242056A1 (en) * 2006-04-12 2007-10-18 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
KR100782075B1 (ko) * 2006-12-01 2007-12-04 삼성전자주식회사 휴대 단말에서 화면 전환 장치 및 방법
US20080046425A1 (en) * 2006-08-15 2008-02-21 N-Trig Ltd. Gesture detection for a digitizer

Family Cites Families (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5252951A (en) * 1989-04-28 1993-10-12 International Business Machines Corporation Graphical user interface with gesture recognition in a multiapplication environment
US5946406A (en) * 1991-06-17 1999-08-31 Microsoft Corporation Method and system for data entry of handwritten symbols
US5848187A (en) * 1991-11-18 1998-12-08 Compaq Computer Corporation Method and apparatus for entering and manipulating spreadsheet cell data
US5481278A (en) * 1992-10-21 1996-01-02 Sharp Kabushiki Kaisha Information processing apparatus
US6938220B1 (en) * 1992-10-21 2005-08-30 Sharp Kabushiki Kaisha Information processing apparatus
JP3025121B2 (ja) * 1992-12-24 2000-03-27 キヤノン株式会社 情報処理方法及び装置
US5677710A (en) * 1993-05-10 1997-10-14 Apple Computer, Inc. Recognition keypad
US5764794A (en) * 1993-10-27 1998-06-09 Perlin; Kenneth Method and apparatus for electronically storing alphanumeric characters
US6137908A (en) * 1994-06-29 2000-10-24 Microsoft Corporation Handwriting recognition system simultaneously considering shape and context information
US6057845A (en) * 1997-11-14 2000-05-02 Sensiva, Inc. System, method, and apparatus for generation and recognizing universal commands
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US7840912B2 (en) * 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US7158871B1 (en) * 1998-05-07 2007-01-02 Art - Advanced Recognition Technologies Ltd. Handwritten and voice control of vehicle components
US6421453B1 (en) * 1998-05-15 2002-07-16 International Business Machines Corporation Apparatus and methods for user recognition employing behavioral passwords
US6222465B1 (en) * 1998-12-09 2001-04-24 Lucent Technologies Inc. Gesture-based computer interface
US6552719B2 (en) * 1999-01-07 2003-04-22 Microsoft Corporation System and method for automatically switching between writing and text input modes
DE10011645A1 (de) * 2000-03-10 2001-09-13 Ego Elektro Geraetebau Gmbh Berührungsschalter mit einem LC-Display
US7158913B2 (en) * 2001-01-31 2007-01-02 Mobigence, Inc. Automatic activation of touch sensitive screen in a hand held computing device
US7730401B2 (en) * 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US7068256B1 (en) * 2001-11-20 2006-06-27 Palm, Inc. Entering and exiting power modes and activating hand writing presentation display triggered by electronic muscle material
US20030137495A1 (en) * 2002-01-22 2003-07-24 Palm, Inc. Handheld computer with pop-up user interface
US7170430B2 (en) * 2002-03-28 2007-01-30 Michael Goodgoll System, method, and computer program product for single-handed data entry
US7466307B2 (en) * 2002-04-11 2008-12-16 Synaptics Incorporated Closed-loop sensor on a solid-state object position detector
US20030214531A1 (en) * 2002-05-14 2003-11-20 Microsoft Corporation Ink input mechanisms
US7925987B2 (en) * 2002-05-14 2011-04-12 Microsoft Corporation Entry and editing of electronic ink
US7251367B2 (en) * 2002-12-20 2007-07-31 International Business Machines Corporation System and method for recognizing word patterns based on a virtual keyboard layout
US7886236B2 (en) * 2003-03-28 2011-02-08 Microsoft Corporation Dynamic feedback for gestures
US7164410B2 (en) * 2003-07-28 2007-01-16 Sig G. Kupka Manipulating an on-screen object using zones surrounding the object
US7055110B2 (en) * 2003-07-28 2006-05-30 Sig G Kupka Common on-screen zone for menu activation and stroke input
US20050212760A1 (en) * 2004-03-23 2005-09-29 Marvit David L Gesture based user interface supporting preexisting symbols
US7301529B2 (en) * 2004-03-23 2007-11-27 Fujitsu Limited Context dependent gesture response
WO2006017079A2 (en) * 2004-07-09 2006-02-16 Gesturerad, Inc. Gesture-based reporting method and system
US8335694B2 (en) * 2004-07-09 2012-12-18 Bruce Reiner Gesture-based communication and reporting system
TWI291161B (en) * 2004-07-15 2007-12-11 N trig ltd Automatic switching for a dual mode digitizer
US7508324B2 (en) * 2004-08-06 2009-03-24 Daniel Suraqui Finger activated reduced keyboard and a method for performing text input
KR101034439B1 (ko) * 2005-01-25 2011-05-12 엘지전자 주식회사 터치 스크린 패턴 인식 기반의 멀티미디어 기기제어방법과 장치
US7477233B2 (en) * 2005-03-16 2009-01-13 Microsoft Corporation Method and system for providing modifier key behavior through pen gestures
US20060267967A1 (en) * 2005-05-24 2006-11-30 Microsoft Corporation Phrasing extensions and multiple modes in one spring-loaded control
US20070152983A1 (en) * 2005-12-30 2007-07-05 Apple Computer, Inc. Touch pad with symbols based on mode
WO2007082037A2 (en) * 2006-01-10 2007-07-19 Cirque Corporation Touchpad control of character actions in a virtual environment using gestures
KR101327581B1 (ko) * 2006-05-24 2013-11-12 엘지전자 주식회사 터치스크린 장치 및 이의 작동방법
US20090278806A1 (en) * 2008-05-06 2009-11-12 Matias Gonzalo Duarte Extended touch-sensitive control area for electronic device
US20070263932A1 (en) * 2006-05-12 2007-11-15 Waterloo Maple Inc. System and method of gesture feature recognition
KR100756986B1 (ko) * 2006-08-18 2007-09-07 삼성전자주식회사 휴대용 단말기의 입력 모드 변경 장치 및 방법
US20080104547A1 (en) * 2006-10-25 2008-05-01 General Electric Company Gesture-based communications
US20080114614A1 (en) * 2006-11-15 2008-05-15 General Electric Company Methods and systems for healthcare application interaction using gesture-based interaction enhanced with pressure sensitivity
US20080114615A1 (en) * 2006-11-15 2008-05-15 General Electric Company Methods and systems for gesture-based healthcare application interaction in thin-air display
US7694240B2 (en) * 2006-11-22 2010-04-06 General Electric Company Methods and systems for creation of hanging protocols using graffiti-enabled devices
US20100097639A1 (en) * 2006-11-24 2010-04-22 Nam Yeon Lee Space Context Copy/Paste Method and System, and Space Copier
US20080155480A1 (en) * 2006-11-27 2008-06-26 Sourcecode Technology Holding, Inc. Methods and apparatus for generating workflow steps using gestures
US8970503B2 (en) * 2007-01-05 2015-03-03 Apple Inc. Gestures for devices having one or more touch sensitive surfaces
KR20080073872A (ko) * 2007-02-07 2008-08-12 엘지전자 주식회사 터치 스크린을 구비한 이동통신 단말기 및 이를 이용한정보 입력 방법
US8060841B2 (en) * 2007-03-19 2011-11-15 Navisense Method and device for touchless media searching
JP4560062B2 (ja) * 2007-03-29 2010-10-13 株式会社東芝 筆跡判定装置、方法およびプログラム
US8860683B2 (en) * 2007-04-05 2014-10-14 Cypress Semiconductor Corporation Integrated button activation sensing and proximity sensing
KR101379995B1 (ko) * 2007-04-17 2014-04-02 엘지전자 주식회사 단말기 및 그 표시방법
US7835999B2 (en) * 2007-06-27 2010-11-16 Microsoft Corporation Recognizing input gestures using a multi-touch input device, calculated graphs, and a neural network with link weights
KR101453909B1 (ko) * 2007-07-30 2014-10-21 엘지전자 주식회사 터치스크린을 이용하는 휴대 단말기 및 그 제어방법
WO2009017125A1 (ja) * 2007-07-30 2009-02-05 Kyocera Corporation 入力装置
US9261979B2 (en) * 2007-08-20 2016-02-16 Qualcomm Incorporated Gesture-based mobile interaction
CN107102723B (zh) * 2007-08-20 2019-12-06 高通股份有限公司 用于基于手势的移动交互的方法、装置、设备和非暂时性计算机可读介质
KR101422837B1 (ko) * 2007-10-02 2014-08-13 엘지전자 주식회사 터치스크린 장치 및 이의 문자 입력 방법
JP2009110286A (ja) * 2007-10-30 2009-05-21 Toshiba Corp 情報処理装置、ランチャー起動制御プログラムおよびランチャー起動制御方法
US8020119B2 (en) * 2007-12-14 2011-09-13 Microsoft Corporation Engine support for parsing correction user interfaces
US8423076B2 (en) * 2008-02-01 2013-04-16 Lg Electronics Inc. User interface for a mobile device
US20090262085A1 (en) * 2008-04-21 2009-10-22 Tomas Karl-Axel Wassingbo Smart glass touch display input device
US8514251B2 (en) * 2008-06-23 2013-08-20 Qualcomm Incorporated Enhanced character input using recognized gestures
KR101404367B1 (ko) * 2008-07-15 2014-06-20 임머숀 코퍼레이션 메시지 콘텐츠를 진동촉각 메시징을 위한 가상 물리적 속성들로 맵핑하기 위한 시스템 및 방법
US8427424B2 (en) * 2008-09-30 2013-04-23 Microsoft Corporation Using physical objects in conjunction with an interactive surface
US20100097322A1 (en) * 2008-10-16 2010-04-22 Motorola, Inc. Apparatus and method for switching touch screen operation
US20100100854A1 (en) * 2008-10-16 2010-04-22 Dell Products L.P. Gesture operation input system
TW201030569A (en) * 2009-02-11 2010-08-16 Compal Electronics Inc Operating method for touch pad with multi-function mode, integrating system thereof, and computer program product using the method thereof
KR20100093293A (ko) * 2009-02-16 2010-08-25 주식회사 팬택 터치 기능을 갖는 이동 단말기 및 그 이동 단말기의 터치 인식 방법
KR101633332B1 (ko) * 2009-09-30 2016-06-24 엘지전자 주식회사 단말기 및 그 제어 방법
WO2011066343A2 (en) * 2009-11-24 2011-06-03 Next Holdings Limited Methods and apparatus for gesture recognition mode control
JP5547466B2 (ja) * 2009-12-15 2014-07-16 京セラ株式会社 携帯電子機器及び携帯電子機器の制御方法
US8686955B2 (en) * 2010-03-11 2014-04-01 Apple Inc. Device, method, and graphical user interface for performing character entry
US8744528B2 (en) * 2011-05-16 2014-06-03 Lg Electronics Inc. Gesture-based control method and apparatus of an electronic device
KR101929301B1 (ko) * 2012-08-20 2019-03-12 삼성전자 주식회사 필기 제스처 인식을 통한 휴대단말의 기능 실행 제어 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060242607A1 (en) * 2003-06-13 2006-10-26 University Of Lancaster User interface
US20070242056A1 (en) * 2006-04-12 2007-10-18 N-Trig Ltd. Gesture recognition feedback for a dual mode digitizer
US20080046425A1 (en) * 2006-08-15 2008-02-21 N-Trig Ltd. Gesture detection for a digitizer
KR100782075B1 (ko) * 2006-12-01 2007-12-04 삼성전자주식회사 휴대 단말에서 화면 전환 장치 및 방법

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200090711A (ko) * 2012-06-11 2020-07-29 삼성전자주식회사 모바일 디바이스 및 그 제어 방법
US11017458B2 (en) 2012-06-11 2021-05-25 Samsung Electronics Co., Ltd. User terminal device for providing electronic shopping service and methods thereof
US11284251B2 (en) 2012-06-11 2022-03-22 Samsung Electronics Co., Ltd. Mobile device and control method thereof
US11521201B2 (en) 2012-06-11 2022-12-06 Samsung Electronics Co., Ltd. Mobile device and control method thereof
KR20140007607A (ko) * 2012-07-09 2014-01-20 삼성전자주식회사 휴대 단말기의 부가 기능 운용 방법 및 장치
WO2014014292A1 (ko) * 2012-07-18 2014-01-23 Park Chul 터치패널을 갖는 개인휴대단말기의 작동방법
KR20140072752A (ko) * 2012-12-05 2014-06-13 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
KR20200070221A (ko) * 2018-12-06 2020-06-17 강태호 터치 패턴을 이용하여 기기를 제어하는 스마트 리모컨 및 스마트 리모컨의 제어 방법
KR20200070220A (ko) * 2018-12-06 2020-06-17 강태호 터치 인터페이스 장치 및 제어 방법

Also Published As

Publication number Publication date
KR101593598B1 (ko) 2016-02-12
US20100257447A1 (en) 2010-10-07
WO2010114251A2 (en) 2010-10-07
WO2010114251A3 (en) 2010-12-09

Similar Documents

Publication Publication Date Title
KR101593598B1 (ko) 휴대단말에서 제스처를 이용한 기능 실행 방법
US11269575B2 (en) Devices, methods, and graphical user interfaces for wireless pairing with peripheral devices and displaying status information concerning the peripheral devices
US10616416B2 (en) User interface for phone call routing among devices
EP2732364B1 (en) Method and apparatus for controlling content using graphical object
KR102108439B1 (ko) 휴대 장치 및 휴대 장치의 사용 제한 방법
EP2667293B1 (en) Mobile terminal and control method thereof
KR102020345B1 (ko) 터치스크린을 구비하는 단말에서 홈 화면의 구성 방법 및 장치
EP2437148B1 (en) Mobile terminal and control method of the mobile terminal
KR20130006905A (ko) 이동 단말기 및 그 제어방법
WO2019128923A1 (zh) 一种控制被选中对象在应用界面中显示的方法及终端设备
KR20130133980A (ko) 터치스크린을 가진 단말에서 오브젝트 이동 방법 및 장치
KR20140030387A (ko) 컨텐츠 활용 기능 지원 방법 및 이를 지원하는 단말기
US20200379946A1 (en) Device, method, and graphical user interface for migrating data to a first device during a new device set-up workflow
WO2022022566A1 (zh) 图形码识别方法、装置和电子设备
KR101842198B1 (ko) 이동 단말기 및 그 제어방법
KR20150051409A (ko) 전자 장치 및 이의 어플리케이션 실행 방법
US11460971B2 (en) Control method and electronic device
KR102380209B1 (ko) 휴대 장치 및 휴대 장치의 사용 제한 방법
KR102248483B1 (ko) 휴대 장치 및 휴대 장치의 사용 제한 방법
US20220360659A1 (en) Mobile terminal and method for controlling the same
KR20150073081A (ko) 전자기기 및 전자기기의 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee