KR20100052746A - 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템 - Google Patents

제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템 Download PDF

Info

Publication number
KR20100052746A
KR20100052746A KR1020080111587A KR20080111587A KR20100052746A KR 20100052746 A KR20100052746 A KR 20100052746A KR 1020080111587 A KR1020080111587 A KR 1020080111587A KR 20080111587 A KR20080111587 A KR 20080111587A KR 20100052746 A KR20100052746 A KR 20100052746A
Authority
KR
South Korea
Prior art keywords
application
gesture
event
mobile terminal
command
Prior art date
Application number
KR1020080111587A
Other languages
English (en)
Other versions
KR101019335B1 (ko
Inventor
유윤관
Original Assignee
주식회사 팬택
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=42166306&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=KR20100052746(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by 주식회사 팬택 filed Critical 주식회사 팬택
Priority to KR1020080111587A priority Critical patent/KR101019335B1/ko
Priority to US12/477,579 priority patent/US8893052B2/en
Priority to JP2009202219A priority patent/JP2010118042A/ja
Publication of KR20100052746A publication Critical patent/KR20100052746A/ko
Application granted granted Critical
Publication of KR101019335B1 publication Critical patent/KR101019335B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72442—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for playing music files
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Abstract

본 발명은 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처(gesture)를 식별하고, 상기 제스처에 대응하는 명령 이벤트를 이용하여 이동단말에서 구동되는 백그라운드 어플리케이션에 대한 제어를 간편하게 수행할 수 있는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템에 관한 것이다. 본 발명에 따르는 제스처를 이용한 이동단말의 어플리케이션 제어 방법은 실행이 유지되는 제1 어플리케이션과 상이한 제2 어플리케이션을 실행하는 단계와, 상기 제2 어플리케이션의 실행 중 발생하는 접촉 신호에 따른 제스처를 식별하는 단계와, 상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계, 및 상기 확인된 명령 이벤트를 상기 제1 어플리케이션에 전달하여 상기 제1 어플리케이션을 제어하는 단계를 포함하는 것을 특징으로 한다.
제스처, 명령 이벤트, 접촉 신호, 어플리케이션

Description

제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템{METHOD AND SYSTEM FOR CONTROLLING APPLICATION OF MOBILE TERMINAL USING GESTURE}
본 발명은 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처(gesture)를 식별하고, 상기 제스처에 대응하는 명령 이벤트를 이용하여 이동단말에서 구동되는 백그라운드 어플리케이션에 대한 제어를 간편하게 수행할 수 있는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템에 관한 것이다.
무선통신기술의 개발이 급속히 진행됨에 따라 이동단말에 대한 수요가 확대되면서 종래의 음성 통화나 간단한 문자서비스 기능에서 벗어나 무선인터넷 서비스와 문서 작성 및 편집 기능이 가능한 고기능 이동단말이 개발되고 있다.
이러한 이동단말에는 음성 또는 영상 통화를 수행하는 어플리케이션, SMS 또는 MMS와 같은 메시지 송수신 어플리케이션, 메일 클라이언트, 이동단말의 바탕화면에 대기화면을 노출하는 어플리케이션, 사진 촬영 어플리케이션, 사진을 디스플레이하는 어플리케이션, 미디어 파일을 재생시키는 미디어 플레이어, 위성/지상파 DMB방송을 보여주는 어플리케이션, 게임 어플리케이션 등의 다양하고 편리한 기능을 제공하는 어플리케이션이 포함되고 있다. 또한, 와이브로(WiBro), WCDMA, HSDPA 등의 3세대 이동통신 서비스가 상용화됨에 따라 무선 인터넷 서비스를 제공하는 모바일 인터넷 브라우저와 같은 어플리케이션이 탑재되고 있다.
이에 따라, 이동단말에 다양하게 포함되는 복수의 어플리케이션을 함께 실행시켜 이용하려는 요구가 발생되고 있으며, 현재 이동단말에서는 일부의 어플리케이션 간의 멀티 플레이가 가능해졌다. 예컨대, 사용자는 이동단말의 미디어 플레이어를 실행시켜 음악을 듣는 중에 메시지가 수신되는 경우, 이동단말의 메시지 송수신 어플리케이션을 실행시켜 수신된 메시지를 확인할 수 있다.
이때, 상기 미디어 플레이어는 이동단말에서 실행 중이지만 화면 상에 디스플레이 되지는 않는 백그라운드 어플리케이션(Background Application)이 되고, 상기 메시지 송수신 어플리케이션은 실행에 따라 화면 상에 디스플레이 되는 포어그라운드 어플리케이션(Foreground Application)이 된다.
종래 이동단말에서는 포어그라운드 어플리케이션에 대한 제어를 바로 수행할 수는 있으나, 백그라운드 어플리케이션에 대한 제어를 바로 수행할 수 있는 방법이 없었다. 즉, 상기 이동단말에서 백그라운드로 실행중인 상기 미디어 플레이어에 대한 제어를 수행하기 위해서는 포어그라운드로 실행중인 상기 메시지 송수신 어플리케이션을 백그라운드로 실행시키거나 종료하고, 제어하려는 미디어 플레이어를 화면 상에 디스플레이 해야만 이동단말에 대한 조작을 통해 직접 제어를 수행할 수 있었다.
본 발명은 상기와 같은 문제점을 해결하기 위하여 안출된 것으로서, 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처를 식별하고, 상기 제스처에 대응하는 명령 이벤트를 이용하여 이동단말에서 구동되는 백그라운드 어플리케이션에 대한 제어를 간편하게 수행할 수 있는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 이동단말에 구비된 키패드를 통한 키입력 없이, 디스플레이 화면에 대한 접촉을 감지하여 연관된 제스처를 식별 함으로써, 이동단말에서 구동되는 특정 어플리케이션에 대해, 상기 제스처와 대응하는 명령 이벤트에 따라 간편하게 제어를 수행할 수 있는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 이동단말에서 실행 중이지만 화면 상에 디스플레이 되지 않는 백그라운드 어플리케이션에 대해, 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처를 이용하여 손쉽게 제어할 수 있는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 이동단말에서 실행 중인 백그라운드 어플리케이션을 포어그라운드 어플리케이션으로 실행시키지 않고도, 제스처를 이용하여 편리하게 제어할 수 있는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다. 즉, 본 발명은 이동단말에서 구동되는 특정 어플리케이션 을 디스플레이 화면 상에 띄우지 않고도 제스처를 이용하여 바로 제어할 수 있도록 사용자 편리성을 제공하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 특정 제스처가 성공했을 경우만 반응하도록 하여 이동단말이 닫혀 있는 상태에서도 한번에 제어 할 수 있도록 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다.
또한, 본 발명은 제스처를 명령 이벤트와 대응하여 이벤트 테이블에 등록하기 위한 인터페이스를 제공 함으로써, 인터페이스를 통해 사용자가 자주 이용하는 제스처 또는 인지하기 편한 제스처를 등록할 수 있도록 하여, 이동단말에서 실행되는 특정 어플리케이션에 대한 제어를 보다 편리하게 수행할 수 있도록 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템을 제공하는 것을 목적으로 한다.
상기와 같은 본 발명의 목적을 달성하기 위하여, 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법은 실행이 유지되는 제1 어플리케이션과 상이한 제2 어플리케이션을 실행하는 단계와, 상기 제2 어플리케이션의 실행 중 발생하는 접촉 신호에 따른 제스처를 식별하는 단계와, 상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계, 및 상기 확인된 명령 이벤트를 상기 제1 어플리케이션에 전달하여 상기 제1 어플리케이션을 제어하는 단계를 포함하는 것을 특징으로 한다.
또한, 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법은, 서로 상이한 복수의 어플리케이션을 실행하는 단계와, 디스플레이 화면에서 발생하는 접촉 신호에 기초하여, 상기 복수의 어플리케이션 중에서 대상 어플리케이션을 결정하는 단계와, 상기 접촉 신호에 따른 제스처를 식별하는 단계와, 상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계, 및 상기 확인된 명령 이벤트를 상기 대상 어플리케이션에 전달하여, 상기 대상 어플리케이션을 제어하는 단계를 포함하는 것을 특징으로 한다.
본 발명에 따르면, 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처를 식별하고, 상기 제스처에 대응하는 명령 이벤트를 이용하여 이동단말에서 구동되는 백그라운드 어플리케이션에 대한 제어를 간편하게 수행할 수 있게 된다.
또한, 본 발명에 따르면, 이동단말에 구비된 키패드를 통한 키입력 없이, 디스플레이 화면에 대한 접촉을 감지하여 연관된 제스처를 식별 함으로써, 이동단말에서 구동되는 특정 어플리케이션에 대해, 상기 제스처와 대응하는 명령 이벤트에 따라 간편하게 제어를 수행할 수 있게 된다.
또한, 본 발명에 따르면, 이동단말에서 실행 중이지만 화면 상에 디스플레이 되지 않는 백그라운드 어플리케이션에 대해, 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처를 이용하여 손쉽게 제어할 수 있게 된다.
또한, 본 발명에 따르면, 이동단말에서 실행 중인 백그라운드 어플리케이션을 포어그라운드 어플리케이션으로 실행시키지 않고도, 제스처를 이용하여 편리하 게 제어할 수 있게 된다. 즉, 본 발명은 이동단말에서 구동되는 특정 어플리케이션을 디스플레이 화면 상에 띄우지 않고도 제스처를 이용하여 바로 제어 가능하도록 사용자 편리성을 제공할 수 있게 된다.
또한, 본 발명에 따르면, 특정 제스처가 성공했을 경우만 반응하도록 하여 이동단말이 닫혀 있는 상태에서도 한번에 제어 할 수 있게 된다.
또한, 본 발명은 제스처를 명령 이벤트와 대응하여 이벤트 테이블에 등록하기 위한 인터페이스를 제공 함으로써, 인터페이스를 통해 사용자가 자주 이용하는 제스처 또는 인지하기 편한 제스처를 등록할 수 있도록 하여, 이동단말에서 실행되는 특정 어플리케이션에 대한 제어를 보다 편리하게 수행할 수 있게 된다.
이하, 첨부된 도면을 참조하여, 본 발명에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템에 대하여 상세히 설명한다.
본 발명의 제스처를 이용한 이동단말의 어플리케이션 제어 시스템은 상기 이동단말의 외부 또는 내부에 포함되어 설치될 수 있다. 단, 본 명세서에서는, 설명의 편의를 위해 본 발명의 어플리케이션 제어 시스템이 상기 이동단말의 내부에 구현되는 것을 한정하여 설명한다.
일반적으로 제스처는 말의 효과를 더하기 위한 몸짓이나 손짓을 일컫는 사전적 의미로 사용되지만, 본 발명에서 사용되는 "제스처"는 이동단말의 디스플레이 화면에서 접촉 신호가 발생함에 따라 식별되는 일종의 이미지로서, 디스플레이 화면에서 상기 접촉 신호를 발생시킨 포인터(pointer)가 이동한 궤적과 허용된 범위 내에서 일치하는 이미지로 사전에 사용자에 의해 입력될 수 있다. 여기서 상기 포인터는 디스플레이 화면 상에 접촉한 펜(pen)이나 사용자의 손가락을 따라 이동할 수 있다. 참고로, 도 4의 410에는 명령 이벤트에 대응하여 등록 가능한 제스처 리스트가 도시되어 있다.
도 1은 본 발명에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템의 구성을 도시한 도면이다.
본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템(100)은 어플리케이션 실행 수단(110), 제스처 식별 수단(120), 명령 이벤트 확인 수단(130), 어플리케이션 제어 수단(140), 등록 수단(150), 이벤트 테이블(160), 및 디스플레이 화면(170)을 포함하여 구성될 수 있다.
상기 등록 수단(150)은 디스플레이 화면(170)에 인터페이스를 제공하여, 상기 인터페이스를 통해 입력되는 제스처를, 상기 인터페이스와 연관된 명령 이벤트와 대응하여 이벤트 테이블(160)에 등록하는 기능을 한다.
여기서 상기 명령 이벤트는 이동단말에서 실행되는 어플리케이션에 대해 수행할 제어 동작을 지시할 수 있다. 예컨대, 상기 명령 이벤트는 미디어(mp3, 동영상 등)을 재생하는 어플리케이션 '뮤직 플레이어'와 관련하여, 재생 개시 이벤트, 재생 중지 이벤트, 다음 리스트 선택 이벤트, 이전 리스트 선택 이벤트, 재생음 업 이벤트 또는 재생음 다운 이벤트 등을 포함할 수 있다.
상기 등록 수단(150)은 각각의 명령 이벤트와 연관되는 인터페이스를 통해 입력되는 제스처를, 각각의 명령 이벤트와 대응하여 이벤트 테이블(160)에 등록할 수 있다.
도 4 내지 도 5는 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 명령 이벤트와 대응하여 제스처를 등록하는 일례들을 도시한 도면이다.
도 4의 (ⅰ)은 명령 이벤트 '재생 개시 이벤트'와 대응하는 제스처를 등록하는 일례를 도시하고 있다.
예컨대, 상기 등록 수단(150)은 어플리케이션 '뮤직 플레이어'에 대해, 미디어의 '재생 개시 이벤트'(430)에 관한 인터페이스를 도 4의 (ⅰ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(410)를 포함할 수 있으며, 제스처 리스트(410)에 대한 선택(420)에 따라 지정되는 제스처가 '재생 개시 이벤트'(430)와 대응하여 이벤트 테이블(160)에 등록될 수 있다.
도 4의 (ⅱ)는 명령 이벤트 '재생 중지 이벤트'와 대응하는 제스처를 등록하는 일례를 도시하고 있다.
예컨대, 상기 등록 수단(150)은 어플리케이션 '뮤직 플레이어'에 대해, 미디어의 '재생 중지 이벤트'(440)에 관한 인터페이스를 도 4의 (ⅱ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(410)를 포함할 수 있으며, 제스처 리스트(410)에 대한 선택(420)에 따라 지정되는 제스처가 '재생 중지 이벤트'(440)와 대응하여 이벤트 테이블(160)에 등록될 수 있다.
이때, 동일한 제스처가 '재생 개시 이벤트'(430) 및 '재생 중지 이벤트'(440)와 같이 서로 상이한 명령 이벤트에 대응하여 등록된 경우, 상기 제스처는 토글(toggle)로서 적용될 수 있다.
도 5의 (ⅰ)은 명령 이벤트 '다음곡 선택 이벤트'와 대응하는 제스처를 등록하는 일례를 도시하고 있다.
예컨대, 상기 등록 수단(150)은 어플리케이션 '뮤직 플레이어'에 대해, 미디어의 '다음곡 선택 이벤트'(530)에 관한 인터페이스를 도 5의 (ⅰ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(510)를 포함할 수 있으며, 제스처 리스트(510)에 대한 선택(520)에 따라 지정되는 제스처가 '다음곡 선택 이벤트'(530)와 대응하여 이벤트 테이블(160)에 등록될 수 있다.
도 5의 (ⅱ)는 명령 이벤트 '이전곡 선택 이벤트'와 대응하는 제스처를 등록하는 일례를 도시하고 있다.
예컨대, 상기 등록 수단(150)은 어플리케이션 '뮤직 플레이어'에 대해, 미디어의 '이전곡 선택 이벤트'(550)에 관한 인터페이스를 도 5의 (ⅱ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(510)를 포함할 수 있으며, 제스처 리스트(510)에 대한 선택(540)에 따라 지정되는 제스처가 '이전곡 선택 이벤트'(550)와 대응하여 이벤트 테이블(160)에 등록될 수 있다.
또한, 이동단말에는 다양한 어플리케이션(예컨대, 뮤직 플레이어, 메시지 송 수신 프로그램 등)이 포함되며, 상기 등록 수단(150)은 각각의 어플리케이션에 대한 실행 이벤트와 연관되는 인터페이스를 통해 입력되는 제스처를, 각각의 어플리케이션과 대응하여 이벤트 테이블(160)에 등록할 수 있다.
도 6은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 어플리케이션 실행 이벤트와 대응하여 제스처를 등록하는 일례들을 도시한 도면이다.
도 6의 (ⅰ)은 명령 이벤트 '뮤직 플레이어' 실행 이벤트와 대응하는 제스처를 등록하는 일례를 도시하고 있다.
예컨대, 상기 등록 수단(150)은 '뮤직 플레이어' 실행 이벤트(630)에 관한 인터페이스를 도 6의 (ⅰ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(610)를 포함할 수 있으며, 제스처 리스트(610)에 대한 선택(620)에 따라 지정되는 제스처가 '뮤직 플레이어' 실행 이벤트(630)와 대응하여 이벤트 테이블(160)에 등록될 수 있다.
도 6의 (ⅱ)는 명령 이벤트 '홀드 어플리케이션' 실행 이벤트와 대응하는 제스처를 등록하는 일례를 도시하고 있다.
예컨대, 상기 등록 수단(150)은 '홀드 어플리케이션' 실행 이벤트(650)에 관한 인터페이스를 도 6의 (ⅱ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(610)를 포함할 수 있으며, 제스처 리스트(610)에 대한 선택(640)에 따라 지정되는 제스처가 '홀드 어플리케이션' 실행 이벤트(650)와 대응하여 이벤트 테이블(160)에 등록될 수 있다. 여기서 '홀드 어 플리케이션(hold application)'은 터치 스크린이 구비된 휴대 단말기에서 불필요한 터치로 인해 발생하는 휴대 단말기의 오작동을 방지하기 위해 터치 스크린을 사용하지 않을 시 상기 터치 스크린을 대기 상태로 설정하기 위한 어플리케이션을 의미할 수 있다.
이와 같이, 어플리케이션 실행 이벤트와 연관되는 인터페이스를 통해 입력되는 제스처는 각 어플리케이션의 식별 정보로서, 각 어플리케이션과 대응하여 이벤트 테이블(160)에 등록될 수 있다.
도 7은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 이벤트 테이블의 일례를 도시한 도면이다.
상기 이벤트 테이블(160)은 도 7에 도시된 바와 같이 어플리케이션 '뮤직 플레이어, 홀드 어플리케이션' 별로, 명령 이벤트에 대응하는 제스처를 등록할 수 있다.
상기 어플리케이션 실행 수단(110)은 제1 어플리케이션의 실행이 유지되는 조건에서, 상기 제1 어플리케이션과 상이한 제2 어플리케이션을 실행하는 기능을 한다.
예컨대, 상기 어플리케이션 실행 수단(110)은 '뮤직 플레이어'(즉, 제1 어플리케이션)를 실행시켜 미디어를 재생하는 중에, 수신된 메시지를 확인하기 위한 '메시지 송수신 프로그램'(즉, 제2 어플리케이션)을 실행할 수 있다.
또 달리, 상기 어플리케이션 실행 수단(110)은 '뮤직 플레이어'(즉, 제1 어플리케이션)를 실행시켜 미디어를 재생하는 중에, '홀드 어플리케이션'(즉, 제2 어 플리케이션)을 실행할 수 있다.
이때, 상기 '뮤직 플레이어'(즉, 제1 어플리케이션)는 이동단말에서 실행 중이지만 화면 상에 디스플레이 되지 않을 수 있는 백그라운드 어플리케이션이 되고, 상기 메시지 송수신 프로그램이나 상기 '홀드 어플리케이션'(즉, 제2 어플리케이션)은 화면 상에 디스플레이 될 수 있는 포어그라운드 어플리케이션이 된다.
또한, 상기 어플리케이션 실행 수단(110)은 어플리케이션 실행 이벤트와 관련한 제스처가 식별되는 경우, 상기 제1 어플리케이션 또는 상기 제2 어플리케이션을 실행할 수 있다.
도 2는 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 제스처를 이용하여 제1 어플리케이션을 실행하는 일례를 도시한 도면이다.
예컨대, 도 2의 (ⅰ)과 같이, 어플리케이션이 실행되지 않은 이동단말에서, '뮤직 플레이어' 실행 이벤트(220)와 관련한 제스처(210)가 식별되는 경우, 상기 어플리케이션 실행 수단(110)은 도 2의 (ⅱ)와 같이 제1 어플리케이션 '뮤직 플레이어'를 실행할 수 있다.
도 3은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 제1 어플리케이션의 실행 중에, 제스처를 이용하여 제2 어플리케이션을 실행하는 일례를 도시한 도면이다.
도 3의 (ⅰ)과 같이, 제1 어플리케이션 '뮤직 플레이어'가 실행되는 조건에서, 디스플레이 화면(170)으로, '홀드 어플리케이션' 실행 이벤트(320)와 관련한 제스처(310)가 식별되는 경우, 상기 어플리케이션 실행 수단(110)은 도 3의 (ⅱ)와 같이 제2 어플리케이션 '홀드 어플리케이션'을 포어그라운드 어플리케이션으로 실행할 수 있다. 이때, 상기 어플리케이션 실행 수단(110)은 실행 중인 제1 어플리케이션 '뮤직 플레이어'를 도 3의 (330)과 같이, 이동단말의 백그라운드 어플리케이션으로 실행할 수 있다.
이때, 상기 제2 어플리케이션은 자동으로 실행되거나, 하드 키 입력으로 실행되거나, 터치 버튼 입력으로도 실행될 수도 있다.
상기 제스처 식별 수단(120)은 상기 디스플레이 화면(170)에서 발생하는 접촉 신호에 따른 제스처를 식별하는 기능을 한다.
즉, 상기 제스처 식별 수단(120)은 상기 접촉 신호로부터, 상기 디스플레이 화면(170)에 접촉하는 포인터가 상기 디스플레이 화면(170) 상을 이동한 궤적을 분석하여, 상기 분석된 궤적과 허용된 범위 내에서 일치하는 제스처를, 상기 이벤트 테이블(160)에서 식별할 수 있다.
상기 궤적에 대한 분석에 있어서, 상기 제스처 식별 수단(120)은 필기 인식 모듈을 이용하여 상기 궤적을, 문자로서 분석할 수 있다. 즉, 본 발명에서는 접촉하는 포인터가 디스플레이 화면(170)을 이동하면서 생성한 궤적을, 의미있는 문자(도형, 기호, 숫자 포함)로 인식 함으로써, 이동단말의 사용자가 원하는 다양한 제어 명령 하달이 가능하도록 하는 환경을 마련한다. 이를 통해, 본 발명에 의해서는, 사용자가 입력한 문자와 관련한 명령어를 백그라운드 어플리케이션으로 전달 함으로써, 보다 복잡하면서도 보다 정밀한 명령으로, 백그라운드 어플리케이션에 대한 제어를 가능하게 한다.
상기 명령 이벤트 확인 수단(130)은 상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 기능을 하고, 상기 어플리케이션 제어 수단(140)은 상기 확인된 명령 이벤트를 상기 제1 어플리케이션에 전달하여 상기 제1 어플리케이션을 제어하는 기능을 한다.
즉, 상기 명령 이벤트 확인 수단(130)은 상기 이벤트 테이블(160)에서 상기 식별된 제스처에 대응하여 등록된 명령 이벤트를 확인할 수 있다. 예를 들어, 상기 명령 이벤트 확인 수단(130)은 상기 제1 어플리케이션이 미디어 플레이어일 경우, 상기 미디어 플레이어에 의한 미디어의 재생 개시/중지 이벤트, 상기 미디어의 재생음 업/다운 이벤트, 또는 재생되는 미디어의 선택 이벤트 중 적어도 하나를, 상기 명령 이벤트로서 확인할 수 있다.
도 8 내지 도 10은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 제스처를 이용하여 이동단말에서 백그라운드 어플리케이션으로 실행 중인 제1 어플리케이션을 제어하는 일례들을 도시한 도면이다.
도 8의 (ⅰ)에는 제스처를 이용하여 이동단말에서 백그라운드로 실행 중인 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생을 중지하도록 제어하는 과정이 도시되어 있다.
예컨대, 도 8의 (ⅰ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(810)를 상 기 이벤트 테이블(160)에서 식별한다. 또한, 명령 이벤트 확인 수단(130)은 식별된 제스처(810)에 대응하는 미디어의 '재생 중지 이벤트'(820)를 확인한다. 더불어, 어플리케이션 제어 수단(140)은 '재생 중지 이벤트'(820)을 '뮤직 플레이어'에 전달하여 상기 '재생 중지 이벤트'(820)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생을 중지하도록 제어할 수 있다(830).
도 8의 (ⅱ)에는 제스처를 이용하여 이동단말에서 백그라운드로 실행 중인 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생을 개시하도록 제어하는 과정이 도시되어 있다.
예컨대, 도 8의 (ⅱ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(840)를 상기 이벤트 테이블(160)에서 식별한다. 또한 명령 이벤트 확인 수단(130)은 식별된 제스처(840)에 대응하는 미디어의 '재생 개시 이벤트'(850)를 확인한다. 더불어, 어플리케이션 제어 수단(140)은 '재생 개시 이벤트'(850)을 '뮤직 플레이어'에 전달하여 상기 '재생 개시 이벤트'(850)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생을 개시하도록 제어할 수 있다(860).
도 9의 (ⅰ)에는 제스처를 이용하여 이동단말에서 백그라운드로 실행 중인 제1 어플리케이션 '뮤직 플레이어'에서 다음 미디어를 재생하도록 제어하는 과정이 도시되어 있다.
예컨대, 도 9의 (ⅰ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(910)를 상기 이벤트 테이블(160)에서 식별한다. 또한, 명령 이벤트 확인 수단(130)은 식별된 제스처(910)에 대응하는 미디어의 '다음곡 선택 이벤트'(920)를 확인한다. 더불어, 어플리케이션 제어 수단(140)은 '다음곡 선택 이벤트'(920)을 '뮤직 플레이어'에 전달하여 상기 '다음곡 선택 이벤트'(920)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 현재 재생 중인 미디어의 다음곡 '노바디- 원더걸스'를 재생하도록 제어할 수 있다(930).
도 9의 (ⅱ)에는 제스처를 이용하여 이동단말에서 백그라운드로 실행 중인 제1 어플리케이션 '뮤직 플레이어'에서 이전 미디어를 재생하도록 제어하는 과정이 도시되어 있다.
예컨대, 도 9의 (ⅱ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(940)를 상기 이벤트 테이블(160)에서 식별한다. 또한, 명령 이벤트 확인 수단(130)은 식별된 제스처(940)에 대응하는 미디어의 '이전곡 선택 이벤트'(950)를 확인한다. 더불어, 어플리케이션 제어 수단(140)은 '이전곡 선택 이벤트'(950)을 '뮤직 플레이어'에 전달하여, 상기 '이전곡 선택 이벤트'(950)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 현재 재생 중인 미디어의 이전곡 'lesson- 이효리'를 재생하도록 제어할 수 있다(960).
도 10의 (ⅰ)에는 제스처를 이용하여 이동단말에서 백그라운드로 실행 중인 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생음을 업(up)하도록 제어하는 과정이 도시되어 있다.
예컨대, 도 10의 (ⅰ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(1010)를 상기 이벤트 테이블(160)에서 식별한다. 또한, 명령 이벤트 확인 수단(130)은 식별된 제스처(1010)에 대응하는 미디어의 '재생음 증가 이벤트'(1020)를 확인한다. 더불어, 어플리케이션 제어 수단(140)은 '재생음 증가 이벤트'(1020)을 '뮤직 플레이어'에 전달하여, 상기 '재생음 증가 이벤트'(1020)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 현재 재생 중인 미디어의 재생음을 업(up)하도록 제어할 수 있다(1030).
도 10의 (ⅱ)에는 제스처를 이용하여 이동단말에서 백그라운드로 실행 중인 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생음을 다운(-> 감소)(down)하도록 제어하는 과정이 도시되어 있다.
예컨대, 도 10의 (ⅱ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(1040)를 상기 이벤트 테이블(160)에서 식별한다. 또한, 명령 이벤트 확인 수단(130)은 식별된 제스처(1040)에 대응하는 미디어의 '재생음 감소 이벤트'(1050)를 확인한다. 더불어, 어플리케이션 제어 수단(140)은 '재생음 감소 이벤트'(1050)을 '뮤직 플레이어'에 전달하여, 상기 '재생음 감소 이벤트'(1050)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 현재 재생 중인 미디어의 재생음을 다운(down)하도록 제어할 수 있다(1060).
상술한 도 8 내지 도 10에서는, 백그라운드 어플리케이션으로 실행되는 '뮤직 플레이어'에 대한 본 발명의 제어 일례를 이동단말의 디스플레이 화면으로 시각화하여 예시하고 있으나, 이는 발명의 이해 편의를 위한 것이며, 실제 구현에서 백그라운드 어플리케이션에 대한 제어 모습은, 포어그라운드 어플리케이션의 실행 등으로 인해, 디스플레이 화면으로 시각화되지 않을 수도 있다.
또한, 상기 접촉 신호는 상기 제1 어플리케이션에 관한 식별 정보를 포함하고, 상기 명령 이벤트 확인 수단(130)은 상기 식별 정보에 의해 구분되는 이벤트 테이블(160)에서, 상기 제스처에 대응하는 등록된 명령 이벤트를 확인할 수 있다. 즉, 제스처 식별 수단(120)은 디스플레이 화면(170)에서 발생한 접촉 신호로부터, 제스처의 식별 외에도, 제어하려는 제1 어플리케이션에 관한 식별 정보를 확인할 수 있다. 이에 따라, 명령 이벤트 확인 수단(130)은 상기 식별정보를 이용하여 제1 어플리케이션과 연관된 이벤트 테이블을 확인하고, 확인된 이벤트 테이블에서 상기 식별된 제스처에 대응하는 명령 이벤트를 확인할 수 있다.
또한, 상기 어플리케이션 제어 수단(140)은 호 요청 신호의 수신에 따라, 상기 제1 어플리케이션의 실행을 중지하거나, 상기 제1 어플리케이션으로의 상기 확인된 명령 이벤트 전달을 중지할 수 있다.
즉, 어플리케이션 제어 수단(140)은 이동단말에서 음성 통화/영상 통화가 요청되는 경우, 통화 연결에 따라, 백그라운드 어플리케이션으로 실행중인 '뮤직 플레이어'나 '메시지 송수신 프로그램'과 같은 제1 어플리케이션을 일시 중지하거나, 제스처에 의한 제1 어플리케이션의 제어가 구현되지 않도록 할 수 있다. 그리고, 어플리케이션 제어 수단(140)은 통화 종료에 따라, 제1 어플리케이션을 일시 중지된 지점부터 백그라운드 어플리케이션으로 재실행할 수 있다.
따라서, 본 발명에 따르면, 특정 제스처가 성공했을 경우만 반응하도록 하여 이동단말이 닫혀 있는 상태에서도 어플리케이션에 대한 제어를 수행할 수 있게 된다.
또는, 본 발명의 다른 실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템(100)은 어플리케이션 실행 수단(110), 제스처 식별 수단(120), 명령 이벤트 확인 수단(130), 어플리케이션 제어 수단(140), 및 디스플레이 화면(170)을 포함하여 구성될 수 있다.
상기 어플리케이션 실행 수단(110)은 서로 상이한 복수의 어플리케이션을 실행하고, 디스플레이 화면(170)에서 발생하는 접촉 신호에 기초하여, 상기 복수의 어플리케이션 중에서 대상 어플리케이션을 결정하는 기능을 한다.
상기 어플리케이션 실행 수단(110)은 이동단말에서 복수의 어플리케이션을 실행하고, 디스플레이 화면(170)에서 발생하는 접촉 신호로부터 식별 정보를 확인하여 상기 복수의 어플리케이션 중에서 대상 어플리케이션을 결정할 수 있다.
여기서 식별 정보는 실행되는 복수의 어플리케이션 중에서, 이동단말의 사용 자가 제어하고자 하는 특정의 어플리케이션을 특정하기 위한 정보일 수 있다.
예컨대, '뮤직 플레이어, 메시지 송수신 프로그램'이 실행되고 있는 조건에서, 접촉 신호로서 쌍원 '◎'이 발생되는 경우, 어플리케이션 실행 수단(110)은 쌍원 '◎'으로부터 제어 대상이 되는 대상 어플리케이션을 '메시지 송수신 프로그램'으로 결정할 수 있다.
상기 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처를 식별하는 기능을 한다.
즉, 제스처 식별 수단(120)은 상기 접촉 신호로부터, 디스플레이 화면(170)에 접촉하는 포인터가 상기 디스플레이 화면(170) 상을 이동한 궤적을 분석하여, 상기 분석된 궤적과 허용된 범위 내에서 일치하는 제스처 '◎'를, 상기 이벤트 테이블(160)에서 식별할 수 있다.
상기 명령 이벤트 확인 수단(130)은 상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 기능을 하고, 상기 어플리케이션 제어 수단(140)은 상기 확인된 명령 이벤트를 상기 대상 어플리케이션에 전달하여, 상기 대상 어플리케이션을 제어하는 기능을 한다.
예컨대, 명령 이벤트 확인 수단(130)은 상기 식별된 제스처 '◎'에 대응하는 '보내기/받기 실행 이벤트'를 확인하고, 어플리케이션 제어 수단(140)은 ' 보내기/받기 실행 이벤트'를 대상 어플리케이션으로 결정된 '메시지 송수신 프로그램'에 전달 함으로써, ' 메시지 송수신 프로그램' 신규 메일을 보내기/받기가 실행되도록 제어할 수 있다.
따라서, 본 발명에 따르면, 이동단말에 구비된 키패드를 통한 키입력 없이, 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처를 식별하고, 상기 제스처에 대응하는 명령 이벤트를 이용하여 이동단말에서 구동되는 백그라운드 어플리케이션에 대한 제어를 간편하게 수행할 수 있게 된다.
또한, 본 발명에 따르면, 이동단말에서 실행 중인 백그라운드 어플리케이션을 포어그라운드 어플리케이션으로 실행시키지 않고도, 제스처를 이용하여 편리하게 제어할 수 있게 된다. 즉, 본 발명은 이동단말에서 구동되는 특정 어플리케이션을 디스플레이 화면 상에 띄우지 않고도 제스처를 이용하여 바로 제어 가능하도록 사용자 편리성을 제공할 수 있게 된다.
또한, 본 발명은 제스처를 명령 이벤트와 대응하여 이벤트 테이블에 등록하기 위한 인터페이스를 제공 함으로써, 인터페이스를 통해 사용자가 자주 이용하는 제스처 또는 인지하기 편한 제스처를 등록할 수 있도록 하여, 이동단말에서 실행되는 특정 어플리케이션에 대한 제어를 보다 편리하게 수행할 수 있게 된다.
도 11은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법의 순서를 도시한 흐름도이다.
상기 제스처를 이용한 이동단말의 어플리케이션 제어 방법은 본 발명의 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에 의해 구현될 수 있다. 또한, 이하 도 11 내지 도 12의 설명에서는 상술한 도 1을 함께 참조하여 도 11을 설명하여 발명의 이해를 도모한다.
단계 S1110에서 상기 어플리케이션 제어 시스템은 디스플레이 화면(170)에 인터페이스를 제공하여, 상기 인터페이스를 통해 입력되는 제스처를, 상기 인터페이스와 연관된 명령 이벤트와 대응하여 이벤트 테이블(160)에 등록한다.
예컨대, 상기 등록 수단(150)은 어플리케이션 '뮤직 플레이어'에 대해, 미디어의 '재생 개시 이벤트'(430)에 관한 인터페이스를 도 4의 (ⅰ)과 같이 디스플레이 화면(170)에 제공할 수 있다. 상기 인터페이스는 등록 가능한 제스처 리스트(410)를 포함할 수 있으며, 제스처 리스트(410)에 대한 선택(420)에 따라 지정되는 제스처가 '재생 개시 이벤트'(430)와 대응하여 이벤트 테이블(160)에 등록될 수 있다.
단계 S1120에서 상기 어플리케이션 제어 시스템은 제1 어플리케이션을 실행하고, 단계 S1130에서 상기 어플리케이션 제어 시스템은 실행이 유지되는 제1 어플리케이션과 상이한 제2 어플리케이션을 실행할 수 있다. 이때, 상기 어플리케이션 제어 시스템은, 제1 어플리케이션을 백그라운드 어플리케이션으로 설정하고, 제2 어플리케이션을 포어그라운드 어플리케이션으로 설정할 수 있다.
예컨대, 도 2의 (ⅰ)과 같이, 어플리케이션이 실행되지 않은 이동단말에서, '뮤직 플레이어' 실행 이벤트(220)와 관련한 제스처(210)가 식별되는 경우, 상기 어플리케이션 실행 수단(110)은 도 2의 (ⅱ)와 같이 제1 어플리케이션 '뮤직 플레이어'를 실행하여 디스플레이 화면(170)에 표시할 수 있다.
이때, 도 3의 (ⅰ)과 같이, 제1 어플리케이션 '뮤직 플레이어'가 수행되는 조건에서, 디스플레이 화면(170)에서, '홀드 어플리케이션' 실행 이벤트(320)와 관련한 제스처(310)가 식별되는 경우, 상기 어플리케이션 실행 수단(110)은 도 3의 (ⅱ)와 같이 제2 어플리케이션 '홀드 어플리케이션'을 실행할 수 있다. 이때, 상기 어플리케이션 실행 수단(110)은 실행 중인 제1 어플리케이션 '뮤직 플레이어'를 도 3의 (330)과 같이, 이동단말의 백그라운드 어플리케이션으로 실행할 수 있다.
이때, 상기 제2 어플리케이션은 자동으로 실행되거나, 하드 키 입력으로 실행되거나, 터치 버튼 입력으로도 실행될 수도 있다.
단계 S1140에서 상기 어플리케이션 제어 시스템은 디스플레이 화면(170)에서 접촉 신호가 발생하는지 판단하고, 상기 판단 결과, 디스플레이 화면(170)에서 접촉 신호가 발생하는 것으로 판단되는 경우, 단계 S1150에서 상기 어플리케이션 제어 시스템은 상기 접촉 신호에 따른 제스처를 식별한다.
단계 S1160에서 상기 어플리케이션 제어 시스템은 식별된 제스처에 대응하는 명령 이벤트를 확인하고, 단계 S1170에서 상기 어플리케이션 제어 시스템은 확인된 명령 이벤트를 이용하여 상기 제1 어플리케이션을 제어한다.
예컨대, 도 8의 (ⅰ)에 도시된 어플리케이션 '뮤직 플레이어'가 백그라운드 어플리케이션으로 실행되는 이동단말의 디스플레이 화면(170)에서, 접촉 신호가 발생 함에 따라, 제스처 식별 수단(120)은 상기 접촉 신호에 따른 제스처(810)를 상기 이벤트 테이블(160)에서 식별하고, 명령 이벤트 확인 수단(130)은 식별된 제스처(810)에 대응하는 미디어의 '재생 중지 이벤트'(820)를 확인하여, 어플리케이션 제어 수단(140)은 '재생 중지 이벤트'(820)에 따라 제1 어플리케이션 '뮤직 플레이어'에서 미디어의 재생을 중지하도록 제어할 수 있다(830).
이에 따라, 본 발명에 따르면, 이동단말에 구비된 키패드를 통한 키입력 없 이, 디스플레이 화면에서 발생하는 접촉 신호에 따른 제스처를 식별하고, 상기 제스처에 대응하는 명령 이벤트를 이용하여 이동단말에서 구동되는 백그라운드 어플리케이션에 대한 제어를 간편하게 수행할 수 있게 된다.
도 12는 본 발명의 다른 실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법의 순서를 도시한 흐름도이다.
단계 S1210에서 상기 어플리케이션 제어 시스템은 디스플레이 화면(170)에 인터페이스를 제공하여, 상기 인터페이스를 통해 입력되는 제스처를, 상기 인터페이스와 연관된 명령 이벤트와 대응하여 등록하는 이벤트 테이블(160)을 유지한다.
단계 S1220에서 상기 어플리케이션 제어 시스템은 서로 상이한 복수의 어플리케이션을 실행하고, 단계 S1230에서 상기 어플리케이션 제어 시스템은 디스플레이 화면(170)에서 접촉 신호가 발생하는지 판단한다.
상기 판단 결과, 디스플레이 화면(170)에서 접촉 신호가 발생하는 것으로 판단되는 경우, 단계 S1240에서 상기 어플리케이션 제어 시스템은 상기 접촉 신호에 기초하여, 상기 복수의 어플리케이션 중에서 대상 어플리케이션을 결정한다.
예컨대, 상기 어플리케이션 실행 수단(110)은 이동단말에서 복수의 어플리케이션 '뮤직 플레이어, 메시지 송수신 프로그램'을 실행하고, 디스플레이 화면(170)에서 발생하는 접촉 신호로부터 식별 정보를 확인하여 상기 복수의 어플리케이션 중에서 대상 어플리케이션 '뮤직 플레이어'를 결정할 수 있다.
이때, 상기 어플리케이션 실행 수단(110)은 상기 결정된 대상 어플리케이션 '뮤직 플레이어'를 백그라운드로 실행하고, 그 이외의 어플리케이션 '메시지 송수 신 프로그램'을 디스플레이 화면(170)에 표시할 수 있다.
단계 S1250 내지 S1270에서 상기 어플리케이션 제어 시스템은 상기 접촉 신호에 따른 제스처를 식별하고(단계 S1250), 상기 식별된 제스처에 대응하는 명령 이벤트를 확인하고(단계 S1260), 상기 확인된 명령 이벤트를 이용하여 상기 결정된 대상 어플리케이션을 제어한다(단계 S1270).
예컨대, 명령 이벤트 확인 수단(130)은 상기 식별된 제스처에 대응하는 미디어의 '재생 중지 이벤트'를 확인하고, 어플리케이션 제어 수단(140)은 '재생 중지 이벤트'에 따라 대상 어플리케이션으로 결정된 '뮤직 플레이어'에서 미디어의 재생을 중지하도록 제어할 수 있다.
따라서, 본 발명은 이동단말에서 구동되는 특정 어플리케이션을 디스플레이 화면 상에 띄우지 않고도 제스처를 이용하여 바로 제어 가능하도록 사용자 편리성을 제공할 수 있게 된다.
또한, 본 발명의 실시예들은 다양한 컴퓨터로 구현되는 동작을 수행하기 위한 프로그램 명령을 포함하는 컴퓨터 판독 가능 매체를 포함한다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매 체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
지금까지 본 발명에 따른 구체적인 실시예에 관하여 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서는 여러 가지 변형이 가능함은 물론이다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템의 구성을 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 제스처를 이용하여 제1 어플리케이션을 실행하는 일례를 도시한 도면이다.
도 3은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 제1 어플리케이션의 실행 중에, 제스처를 이용하여 제2 어플리케이션을 실행하는 일례를 도시한 도면이다.
도 4 내지 도 5는 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 명령 이벤트와 대응하여 제스처를 등록하는 일례들을 도시한 도면이다.
도 6은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 어플리케이션 실행 이벤트와 대응하여 제스처를 등록하는 일례들을 도시한 도면이다.
도 7은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 이벤트 테이블의 일례를 도시한 도면이다.
도 8 내지 도 10은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 시스템에서 제스처를 이용하여 이동단말에서 백그라운드(background)로 실행 중인 제1 어플리케이션을 제어하는 일례들을 도시한 도면이 다.
도 11은 본 발명의 일실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법의 순서를 도시한 흐름도이다.
도 12는 본 발명의 다른 실시예에 따른 제스처를 이용한 이동단말의 어플리케이션 제어 방법의 순서를 도시한 흐름도이다.
<도면의 주요 부분에 대한 부호의 설명>
100: 제스처를 이용한 이동단말의 어플리케이션 제어 시스템
110: 어플리케이션 실행 수단
120: 제스처 식별 수단
130: 명령 이벤트 확인 수단
140: 어플리케이션 제어 수단
150: 등록 수단
160: 이벤트 테이블
170: 디스플레이 화면

Claims (18)

  1. 실행이 유지되는 제1 어플리케이션과 상이한 제2 어플리케이션을 실행하는 단계;
    상기 제2 어플리케이션의 실행 중 발생하는 접촉 신호에 따른 제스처를 식별하는 단계;
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계; 및
    상기 확인된 명령 이벤트를 상기 제1 어플리케이션에 전달하여 상기 제1 어플리케이션을 제어하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  2. 제1항에 있어서,
    상기 접촉 신호에 따른 제스처를 식별하는 단계는,
    상기 접촉 신호로부터, 디스플레이 화면에 접촉하는 포인터가 상기 디스플레이 화면 상을 이동한 궤적을 분석하는 단계; 및
    상기 분석된 궤적과 허용된 범위 내에서 일치하는 제스처를, 이벤트 테이블에서 식별하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  3. 제2항에 있어서,
    상기 디스플레이 화면 상을 이동한 궤적을 분석하는 단계는,
    필기 인식 모듈을 이용하여 상기 궤적을, 문자로서 분석하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  4. 제1항에 있어서,
    디스플레이 화면에 인터페이스를 제공하는 단계; 및
    상기 인터페이스를 통해 입력되는 제스처를, 상기 인터페이스와 연관된 명령 이벤트와 대응하여 이벤트 테이블에 등록하는 단계
    를 더 포함하고,
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계는,
    상기 이벤트 테이블에서 상기 식별된 제스처에 대응하여 등록된 명령 이벤트를 확인하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  5. 제1항에 있어서,
    상기 접촉 신호는 상기 제1 어플리케이션에 관한 식별 정보를 포함하고,
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계는,
    상기 식별 정보에 의해 구분되는 이벤트 테이블에서, 상기 제스처에 대응하는 등록된 명령 이벤트를 확인하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  6. 제1항에 있어서,
    상기 제1 어플리케이션이 미디어 플레이어일 경우,
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계는,
    상기 미디어 플레이어에 의한 미디어의 재생 개시/중지 이벤트, 상기 미디어의 재생음 업/다운 이벤트, 또는 재생되는 미디어의 선택 이벤트 중 적어도 하나를, 상기 명령 이벤트로서 확인하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  7. 제1항에 있어서,
    호 요청 신호의 수신에 따라,
    상기 제1 어플리케이션의 실행을 중지하거나, 또는 상기 제1 어플리케이션으로의 상기 확인된 명령 이벤트 전달을 중지하는 단계
    를 더 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이 션 제어 방법.
  8. 제1항에 있어서,
    어플리케이션 실행 이벤트와 관련한 제스처가 식별되는 경우,
    상기 제1 어플리케이션 또는 상기 제2 어플리케이션을 실행하는 단계
    를 더 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  9. 서로 상이한 복수의 어플리케이션을 실행하는 단계;
    디스플레이 화면에서 발생하는 접촉 신호에 기초하여, 상기 복수의 어플리케이션 중에서 대상 어플리케이션을 결정하는 단계;
    상기 접촉 신호에 따른 제스처를 식별하는 단계;
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 단계; 및
    상기 확인된 명령 이벤트를 상기 대상 어플리케이션에 전달하여, 상기 대상 어플리케이션을 제어하는 단계
    를 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 방법.
  10. 실행이 유지되는 제1 어플리케이션과 상이한 제2 어플리케이션을 실행하는 어플리케이션 실행 수단;
    상기 제2 어플리케이션의 실행 중 발생하는 접촉 신호에 따른 제스처를 식별하는 제스처 식별 수단;
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 명령 이벤트 확인 수단; 및
    상기 확인된 명령 이벤트를 상기 제1 어플리케이션에 전달하여 상기 제1 어플리케이션을 제어하는 어플리케이션 제어 수단
    을 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  11. 제10항에 있어서,
    상기 제스처 식별 수단은,
    상기 접촉 신호로부터, 디스플레이 화면에 접촉하는 포인터가 상기 디스플레이 화면 상을 이동한 궤적을 분석하고, 상기 분석된 궤적과 허용된 범위 내에서 일치하는 제스처를, 이벤트 테이블에서 식별하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  12. 제11항에 있어서,
    상기 제스처 식별 수단은,
    필기 인식 모듈을 이용하여 상기 궤적을, 문자로서 분석하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  13. 제10항에 있어서,
    디스플레이 화면에 인터페이스를 제공하고, 상기 인터페이스를 통해 입력되는 제스처를, 상기 인터페이스와 연관된 명령 이벤트와 대응하여 이벤트 테이블에 등록하는 등록 수단
    을 더 포함하고,
    상기 명령 이벤트 확인 수단은,
    상기 이벤트 테이블에서 상기 식별된 제스처에 대응하여 등록된 명령 이벤트를 확인하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  14. 제10항에 있어서,
    상기 접촉 신호는 상기 제1 어플리케이션에 관한 식별 정보를 포함하고,
    상기 명령 이벤트 확인 수단은,
    상기 식별 정보에 의해 구분되는 이벤트 테이블에서, 상기 제스처에 대응하는 등록된 명령 이벤트를 확인하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  15. 제10항에 있어서,
    상기 제1 어플리케이션이 미디어 플레이어일 경우,
    상기 명령 이벤트 확인 수단은,
    상기 미디어 플레이어에 의한 미디어의 재생 개시/중지 이벤트, 상기 미디어의 재생음 업/다운 이벤트, 또는 재생되는 미디어의 선택 이벤트 중 적어도 하나를, 상기 명령 이벤트로서 확인하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  16. 제10항에 있어서,
    호 요청 신호의 수신에 따라,
    상기 어플리케이션 제어 수단은,
    상기 제1 어플리케이션의 실행을 중지하거나, 또는 상기 제1 어플리케이션으로의 상기 확인된 명령 이벤트 전달을 중지하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  17. 제10항에 있어서,
    어플리케이션 실행 이벤트와 관련한 제스처가 식별되는 경우,
    상기 어플리케이션 실행 수단은,
    상기 제1 어플리케이션 또는 상기 제2 어플리케이션을 실행하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
  18. 서로 상이한 복수의 어플리케이션을 실행하고, 디스플레이 화면에서 발생하 는 접촉 신호에 기초하여, 상기 복수의 어플리케이션 중에서 대상 어플리케이션을 결정하는 어플리케이션 실행 수단;
    상기 접촉 신호에 따른 제스처를 식별하는 제스처 식별 수단;
    상기 식별된 제스처에 대응하는 명령 이벤트를 확인하는 명령 이벤트 확인 수단; 및
    상기 확인된 명령 이벤트를 상기 대상 어플리케이션에 전달하여, 상기 대상 어플리케이션을 제어하는 어플리케이션 제어 수단
    을 포함하는 것을 특징으로 하는 제스처를 이용한 이동단말의 어플리케이션 제어 시스템.
KR1020080111587A 2008-11-11 2008-11-11 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템 KR101019335B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020080111587A KR101019335B1 (ko) 2008-11-11 2008-11-11 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템
US12/477,579 US8893052B2 (en) 2008-11-11 2009-06-03 System and method for controlling mobile terminal application using gesture
JP2009202219A JP2010118042A (ja) 2008-11-11 2009-09-02 ジェスチャを用いた移動端末のアプリケーション制御システムおよびアプリケーション制御方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080111587A KR101019335B1 (ko) 2008-11-11 2008-11-11 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템

Publications (2)

Publication Number Publication Date
KR20100052746A true KR20100052746A (ko) 2010-05-20
KR101019335B1 KR101019335B1 (ko) 2011-03-07

Family

ID=42166306

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080111587A KR101019335B1 (ko) 2008-11-11 2008-11-11 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템

Country Status (3)

Country Link
US (1) US8893052B2 (ko)
JP (1) JP2010118042A (ko)
KR (1) KR101019335B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101384054B1 (ko) * 2013-07-02 2014-04-28 이용환 부가 기능 실행 중 음악을 재생하기 위한 전자기기 및 그 제어방법
KR20140111526A (ko) * 2013-03-11 2014-09-19 삼성전자주식회사 다중 입력 제어 방법 및 시스템과 이를 지원하는 전자 장치
KR20140142546A (ko) * 2013-06-04 2014-12-12 삼성전자주식회사 전자 기기 및 그의 애플리케이션 제어 방법
WO2021201490A1 (ko) * 2020-03-31 2021-10-07 삼성전자 주식회사 백 그라운드 어플리케이션의 제어 방법 및 이를 지원하는 전자 장치

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080168402A1 (en) 2007-01-07 2008-07-10 Christopher Blumenberg Application Programming Interfaces for Gesture Operations
US8645827B2 (en) 2008-03-04 2014-02-04 Apple Inc. Touch event model
US8566045B2 (en) 2009-03-16 2013-10-22 Apple Inc. Event recognition
JP5458783B2 (ja) * 2009-10-01 2014-04-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9268404B2 (en) * 2010-01-08 2016-02-23 Microsoft Technology Licensing, Llc Application gesture interpretation
JP5413673B2 (ja) * 2010-03-08 2014-02-12 ソニー株式会社 情報処理装置および方法、並びにプログラム
US20120005632A1 (en) * 2010-06-30 2012-01-05 Broyles Iii Paul J Execute a command
US8727611B2 (en) 2010-11-19 2014-05-20 Nest Labs, Inc. System and method for integrating sensors in thermostats
CN102467327A (zh) * 2010-11-10 2012-05-23 上海无戒空间信息技术有限公司 手势对象的生成、编辑方法和音频数据的操作方法
US8195313B1 (en) 2010-11-19 2012-06-05 Nest Labs, Inc. Thermostat user interface
KR101645685B1 (ko) * 2010-12-20 2016-08-04 애플 인크. 이벤트 인식
TWI546700B (zh) * 2011-01-13 2016-08-21 宏達國際電子股份有限公司 手持電子裝置及其控制方法與電腦程式產品
WO2012114760A1 (ja) * 2011-02-23 2012-08-30 京セラ株式会社 タッチセンサを備えた電子機器
US8997171B2 (en) 2011-08-19 2015-03-31 Microsoft Technology Licensing, Llc Policy based application suspension and termination
KR101962445B1 (ko) * 2011-08-30 2019-03-26 삼성전자 주식회사 터치 스크린을 갖는 휴대 단말기 및 그의 사용자 인터페이스 제공 방법
US8578394B2 (en) * 2011-09-09 2013-11-05 Microsoft Corporation Exempting applications from suspension
US20130106707A1 (en) * 2011-10-26 2013-05-02 Egalax_Empia Technology Inc. Method and device for gesture determination
US9817479B2 (en) 2012-02-24 2017-11-14 Nokia Technologies Oy Method and apparatus for interpreting a gesture
US9377946B2 (en) * 2012-03-19 2016-06-28 Panasonic Intellectual Property Management Co., Ltd. On-board apparatus
CN102662592B (zh) * 2012-04-16 2017-10-10 中兴通讯股份有限公司 一种数据输出方法及装置
US10585553B2 (en) 2012-12-06 2020-03-10 Samsung Electronics Co., Ltd. Display device and method of controlling the same
KR102102438B1 (ko) * 2012-12-06 2020-04-20 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US20140172539A1 (en) * 2012-12-14 2014-06-19 Apple Inc. Media station with custom bumper
US20140282272A1 (en) * 2013-03-15 2014-09-18 Qualcomm Incorporated Interactive Inputs for a Background Task
US9053476B2 (en) 2013-03-15 2015-06-09 Capital One Financial Corporation Systems and methods for initiating payment from a client device
KR102203885B1 (ko) * 2013-04-26 2021-01-15 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
USD742893S1 (en) * 2013-06-09 2015-11-10 Apple Inc. Display screen or portion thereof with graphical user interface
CN103309618A (zh) * 2013-07-02 2013-09-18 姜洪明 移动操作系统
US11199906B1 (en) * 2013-09-04 2021-12-14 Amazon Technologies, Inc. Global user input management
KR20150030406A (ko) 2013-09-12 2015-03-20 삼성전자주식회사 키 입력 또는 그의 조합을 이용하여 애플리케이션을 제어하는 방법 및 장치
JP6120754B2 (ja) * 2013-11-27 2017-04-26 京セラドキュメントソリューションズ株式会社 表示入力装置およびそれを備えた画像形成装置
EP2930604B1 (en) * 2014-04-11 2018-11-07 Nokia Technologies OY Causing feedback to a user input
CN105094659A (zh) * 2014-05-19 2015-11-25 中兴通讯股份有限公司 一种基于手势对应用程序进行操作的方法及终端
CN105208056B (zh) * 2014-06-18 2020-07-07 腾讯科技（深圳）有限公司 信息交互的方法及终端
JP6379822B2 (ja) * 2014-08-01 2018-08-29 ヤマハ株式会社 入力装置及び電子機器
CN105893066A (zh) * 2014-12-19 2016-08-24 上海涌杰信息科技有限公司 一种基于安卓系统的移动终端恢复的控制方法
US20160210109A1 (en) * 2015-01-19 2016-07-21 Mediatek Inc. Method for controlling audio playing of an electronic device, and associated apparatus and associated computer program product
US10346030B2 (en) * 2015-06-07 2019-07-09 Apple Inc. Devices and methods for navigating between user interfaces
EP3136215A1 (en) * 2015-08-28 2017-03-01 Nokia Technologies Oy Responding to user input
CN105094625A (zh) * 2015-09-30 2015-11-25 联想(北京)有限公司 信息处理方法、装置及电子设备
US10897531B2 (en) 2017-04-11 2021-01-19 Huawei Technologies Co., Ltd. Message obtaining method and apparatus
USD841677S1 (en) 2017-06-04 2019-02-26 Apple Inc. Display screen or portion thereof with graphical user interface
USD873284S1 (en) 2017-09-09 2020-01-21 Apple Inc. Electronic device with graphical user interface
USD987669S1 (en) 2017-09-11 2023-05-30 Apple Inc. Electronic device with graphical user interface
US10924476B2 (en) * 2017-11-29 2021-02-16 Ncr Corporation Security gesture authentication
USD880495S1 (en) 2018-06-03 2020-04-07 Apple Inc. Electronic device with graphical user interface
CN109215650A (zh) * 2018-09-17 2019-01-15 珠海格力电器股份有限公司 一种基于终端界面识别的语音控制方法、系统及智能终端
USD962244S1 (en) 2018-10-28 2022-08-30 Apple Inc. Electronic device with graphical user interface
CN116804892A (zh) * 2022-03-16 2023-09-26 华为技术有限公司 一种基于摄像组件的通用型设备控制方法、设备及系统

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6212541B1 (en) * 1994-10-24 2001-04-03 Microsoft Corporation System and method for switching between software applications in multi-window operating system
JPH09305300A (ja) 1996-05-15 1997-11-28 Mitsubishi Electric Corp アプリケーション制御装置
GB9701793D0 (en) * 1997-01-29 1997-03-19 Gay Geoffrey N W Means for inputting characters or commands into a computer
US7840912B2 (en) * 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
US8479122B2 (en) * 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US6249606B1 (en) * 1998-02-19 2001-06-19 Mindmaker, Inc. Method and system for gesture category recognition and training using a feature vector
US6204852B1 (en) * 1998-12-09 2001-03-20 Lucent Technologies Inc. Video hand image three-dimensional computer interface
US6964023B2 (en) * 2001-02-05 2005-11-08 International Business Machines Corporation System and method for multi-modal focus detection, referential ambiguity resolution and mood classification using multi-modal input
KR100372092B1 (ko) * 2001-02-06 2003-02-14 주식회사 우리기술 바탕화면 동영상 매체재생기 및 이를 이용한 바탕화면의동영상 처리방법과 상기 매체재생기 또는 방법을실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수있는 기록매체
JP2003162355A (ja) 2001-11-26 2003-06-06 Sony Corp タスクの表示切り替え方法及び携帯機器及び携帯通信機器
US20040023646A1 (en) * 2002-07-31 2004-02-05 Satoshi Inami Information processing terminal and information processing method
JP2006527439A (ja) * 2003-06-13 2006-11-30 ユニヴァーシティ オブ ランカスター ユーザインタフェース
US20050212760A1 (en) * 2004-03-23 2005-09-29 Marvit David L Gesture based user interface supporting preexisting symbols
US7519223B2 (en) * 2004-06-28 2009-04-14 Microsoft Corporation Recognizing gestures and using gestures for interacting with software applications
US7665031B2 (en) * 2004-12-08 2010-02-16 Microsoft Corporation Method and system of taskbar button interfaces
US7683889B2 (en) * 2004-12-21 2010-03-23 Microsoft Corporation Pressure based selection
KR101034439B1 (ko) * 2005-01-25 2011-05-12 엘지전자 주식회사 터치 스크린 패턴 인식 기반의 멀티미디어 기기제어방법과 장치
EP1851750A4 (en) * 2005-02-08 2010-08-25 Oblong Ind Inc SYSTEM AND METHOD FOR CONTROL SYSTEM BASED ON GESTURES
WO2006105686A1 (en) * 2005-04-06 2006-10-12 Eidgenössische Technische Hochschule Zürich Method of executing an application in a mobile device
US7703039B2 (en) * 2005-12-08 2010-04-20 Adobe Systems Incorporated Methods and apparatus for displaying information
KR20070113025A (ko) * 2006-05-24 2007-11-28 엘지전자 주식회사 터치스크린 장치 및 이의 작동방법
KR20080009415A (ko) * 2006-07-24 2008-01-29 엘지전자 주식회사 백그라운드 태스크 제어 방법 및 이를 수행하기 위한이동통신 단말기
US7769363B2 (en) 2006-08-01 2010-08-03 Chew Gregory T H User-initiated communications during multimedia content playback on a mobile communications device
US8316324B2 (en) * 2006-09-05 2012-11-20 Navisense Method and apparatus for touchless control of a device
KR100783552B1 (ko) * 2006-10-11 2007-12-07 삼성전자주식회사 휴대 단말기의 입력 제어 방법 및 장치
US8214768B2 (en) * 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
JP4866262B2 (ja) 2007-02-16 2012-02-01 ソフトバンクモバイル株式会社 操作入力処理方法及び携帯型情報処理装置
JP4888183B2 (ja) 2007-03-23 2012-02-29 富士通東芝モバイルコミュニケーションズ株式会社 情報処理装置
US8650030B2 (en) * 2007-04-02 2014-02-11 Google Inc. Location based responses to telephone requests
KR101565768B1 (ko) * 2008-12-23 2015-11-06 삼성전자주식회사 휴대단말의 잠금 모드 해제 방법 및 장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140111526A (ko) * 2013-03-11 2014-09-19 삼성전자주식회사 다중 입력 제어 방법 및 시스템과 이를 지원하는 전자 장치
KR20140142546A (ko) * 2013-06-04 2014-12-12 삼성전자주식회사 전자 기기 및 그의 애플리케이션 제어 방법
KR101384054B1 (ko) * 2013-07-02 2014-04-28 이용환 부가 기능 실행 중 음악을 재생하기 위한 전자기기 및 그 제어방법
WO2021201490A1 (ko) * 2020-03-31 2021-10-07 삼성전자 주식회사 백 그라운드 어플리케이션의 제어 방법 및 이를 지원하는 전자 장치

Also Published As

Publication number Publication date
US8893052B2 (en) 2014-11-18
US20100122167A1 (en) 2010-05-13
JP2010118042A (ja) 2010-05-27
KR101019335B1 (ko) 2011-03-07

Similar Documents

Publication Publication Date Title
KR101019335B1 (ko) 제스처를 이용한 이동단말의 어플리케이션 제어 방법 및 시스템
US10866785B2 (en) Equal access to speech and touch input
US10140014B2 (en) Method and terminal for activating application based on handwriting input
KR102089444B1 (ko) 음성 인식 기능을 지원하는 전자 기기의 음성 입력 제어 방법 및 장치 장치
AU2013200153B2 (en) Method and apparatus for executing a user function using voice recognition
US20160328205A1 (en) Method and Apparatus for Voice Operation of Mobile Applications Having Unnamed View Elements
US11749276B2 (en) Voice assistant-enabled web application or web page
KR20140026966A (ko) 펜 기능 운용 방법 및 시스템
JP2018077867A (ja) 携帯端末機のユーザインターフェース提供方法および装置
EP2835798B1 (en) Interfacing device and method for supporting speech dialogue service
TW201635134A (zh) 一種語音控制方法及裝置
CN110090444B (zh) 游戏中行为记录创建方法、装置、存储介质及电子设备
US11238858B2 (en) Speech interactive method and device
KR20130133980A (ko) 터치스크린을 가진 단말에서 오브젝트 이동 방법 및 장치
CN109165052B (zh) 应用场景的交互处理方法、装置及终端、系统、存储介质
WO2019200588A1 (zh) 一种应用退出时的显示方法及终端
JP2016531352A (ja) 入力システムをアップデートする方法、デバイス、プログラム及びデバイス
EP4130960A1 (en) Ui control generation and trigger methods, and terminal
AU2015271922B2 (en) Method and apparatus for executing a user function using voice recognition
WO2023040692A1 (zh) 语音控制方法、装置、设备及介质
WO2014103355A1 (ja) 情報処理装置、情報処理方法及びプログラム
KR101081126B1 (ko) 이동 통신 단말기의 키패드 설정 방법 및 시스템
CN112306352A (zh) 用于处理信息的系统、方法和装置
KR20080077469A (ko) 키유저 인터페이싱 방법 및 키유저 인터페이싱 시스템

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140128

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150203

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160201

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170727

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20200203

Year of fee payment: 10