KR20120139252A - Motion user interface - Google Patents

Motion user interface Download PDF

Info

Publication number
KR20120139252A
KR20120139252A KR1020110058957A KR20110058957A KR20120139252A KR 20120139252 A KR20120139252 A KR 20120139252A KR 1020110058957 A KR1020110058957 A KR 1020110058957A KR 20110058957 A KR20110058957 A KR 20110058957A KR 20120139252 A KR20120139252 A KR 20120139252A
Authority
KR
South Korea
Prior art keywords
image
terminal
command
mobile terminal
recognizing
Prior art date
Application number
KR1020110058957A
Other languages
Korean (ko)
Inventor
서동아
Original Assignee
서동아
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 서동아 filed Critical 서동아
Priority to KR1020110058957A priority Critical patent/KR20120139252A/en
Publication of KR20120139252A publication Critical patent/KR20120139252A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005—Input arrangements through a video camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)

Abstract

PURPOSE: A portable terminal image recognition input user interface is provided to offer a convenient user interface environment by inputting a command to a portable terminal. CONSTITUTION: When an image recognition camera of portable terminal(110) recognizes a specific image, an image recognition sensing unit(111) recognizes images. A determination unit(112) compares the specific image with a specific pattern stored in the portable terminal. When the specific image is matched with the specific pattern, a command or input processing unit(113) inputs a command to the portable terminal. [Reference numerals] (111) Image sensing unit; (112) Determination unit; (113) Command or input processing unit

Description

모바일 단말기 화상인식 입력 사용자 인터페이스 {Motion User Interface}Mobile terminal image recognition input user interface {Motion User Interface}

사용자가 모바일 단말기의 버튼을 누르지 않고, 모바일 단말기에 명령 또는 입력을 쉽고 편리하게 하는 방법이 제공된다.A method for easily and conveniently providing commands or inputs to a mobile terminal without a user pressing a button on the mobile terminal is provided.

모바일 단말기 기술이 발전해 가면서 사용자의 편의를 고려한 유저 인터페이스(User Interface:UI)를 채용한 모바일 단말기가 출시되고 있다. 모바일 단말기 화면을 터치 스크린으로 구현하여, 모바일 단말기 사용자가 직접 모바일 단말기 화면에 손을 터치 함으로써, 모바일 단말기의 여러 기능을 제어할 수 있는 것 등이 있다.With the development of mobile terminal technology, mobile terminals adopting a user interface (UI) in consideration of user convenience have been released. By implementing the mobile terminal screen as a touch screen, the mobile terminal user can directly control the various functions of the mobile terminal by touching a hand on the mobile terminal screen.

하지만, 모바일 단말기의 디스플레이에 사용자가 직접 터치하여 사용함으로써 여러가지 단점이 있다. 일반적으로 모바일 단말기의 디스플레이는 사용자가 터치를 하면 지문등이 남게 되어 모바일 단말기의 디스플레이를 닦어 가면서 사용하게 된다.However, there are various disadvantages by using the user directly touching the display of the mobile terminal. In general, the display of the mobile terminal is used while wiping the display of the mobile terminal is left fingerprints, etc. when the user touches.

따라서, 모바일 단말기의 디스플레이의 단점을 고려하여, 사용자에게 편리한 유저 인터페이스를 제공하는데 연구가 필요하다. 특히, 최근에는 음성명령과 함께 많은 연구가 진행되고 있다.Therefore, in view of the shortcomings of the display of the mobile terminal, research is required to provide a user-friendly user interface. In particular, a lot of research has recently been conducted with voice commands.

모바일 단말기의 화상인식 카메라를 사용하여 모바일 단말기에 명령 또는 입력을 할 수 있는 모바일 단말기를 개시함으로써, 모바일 단말기의 버튼을 누르지 않고, 모바일 단말기에 명령 또는 입력을 할수 있는 편리한 사용자 인터페이스 환경을 제공하고자 한다.By providing a mobile terminal capable of commanding or inputting a mobile terminal using an image recognition camera of the mobile terminal, a user interface environment for providing a command or input to a mobile terminal without pressing a button of the mobile terminal is provided. .

본 발명의 일실시예에 따른 모바일 단말기는 모바일 단말기의 화상인식 카메라가 행동 또는 화면을 감지부, 인식된 화상이 어떤 명령인지 판단하는 판단부, 상기 모바일 단말기에 명령 또는 입력을 하는 처리부를 포함한다.According to an embodiment of the present invention, a mobile terminal includes a unit for detecting an action or a screen by an image recognition camera of the mobile terminal, a determination unit for determining which command is a recognized image, and a processor for performing a command or input to the mobile terminal. .

또한, 본 발명의 일실시예에 따른 모바일 단말기에 화상인식 명령 또는 입력 방법은 모발일 단말기가 화상을 감지하는 단계, 상기 감지된 화상이 어떤 명령인지 판다하는 단계, 상기 모바일 단말기에 명령 또는 입력을 하는 단계를 포함한다.In addition, the image recognition command or input method to the mobile terminal according to an embodiment of the present invention, the mobile terminal detecting the image, the step of judging what command the detected image, the command or input to the mobile terminal It includes a step.

모바일 단말기가 화상을 감지하여 모말일 단말기에 명령 또는 입력을 할 수 있는 모바일 단말기 및 모마일 단말기의 명령 또는 입력 방법을 개시함으로써, 모바일 단말기의 버튼이나 화면을 터치하지 않고, 모바일 단말기에 명령 또는 입력을 할 수 있는 편리한 사용자 인터페이스 환경을 제공할 수 있다.By initiating a command or input method of a mobile terminal and a mobile terminal that the mobile terminal can detect an image and make a command or input to the mobile terminal, the command or input to the mobile terminal without touching a button or a screen of the mobile terminal It can provide a convenient user interface environment.

도 1은 본 발명의 일실시예에 따른 모바일 단말기의 구조를 도시한 도면이다.
도 2는 본 발명의 일실시예에 따른 모바일 단말기의 명령 또는 입력 UI 방법을 도시한 순서도 이다.1 is a view showing the structure of a mobile terminal according to an embodiment of the present invention.
2 is a flowchart illustrating a command or input UI method of a mobile terminal according to an embodiment of the present invention.

이하에서는 첨부된 도면을 참조하여, 본 발명의 실시예를 상세히 설명하기로 한다.Hereinafter, with reference to the accompanying drawings, it will be described embodiments of the present invention;

도 1은 본 발명의 일실시예에 따른 모바일 단말기의 구조를 도시한 도면이다.1 is a view showing the structure of a mobile terminal according to an embodiment of the present invention.

모바일 단말기(110)는 화상 인식 감지부(111), 판단부(112) 및 명령 또는 입력 처리부(113)를 포함할 수 있다.The mobile terminal 110 may include an image recognition detector 111, a determiner 112, and a command or input processor 113.

화상 인식 감지부(111)는 모바일 단말기(110) 사용자가 모바일 단말기(110)의 화상인식 카메라에 특정 화상이 인식되면, 모바일 단말기(110)가 화상을 인식 감지한다.When the user of the mobile terminal 110 recognizes a specific image by the image recognition camera of the mobile terminal 110, the image recognition detecting unit 111 detects and recognizes the image.

판단부(112)는 화상 인식 감지부(111)에서 감지한 모바일 단말기(110)에 저장된 특정 패턴과 일치하는지 판단한다.The determination unit 112 determines whether it matches a specific pattern stored in the mobile terminal 110 detected by the image recognition detection unit 111.

만약, 판단부(112)에서 모바일 단말기(110)에 저장된 특정 패턴과 일치한다고 판단하였다면, 명령 또는 입력 처리부(113)는 모바일 단말기(110)에 저장된 명령 또는 입력을 한다.If it is determined that the determination unit 112 matches the specific pattern stored in the mobile terminal 110, the command or input processing unit 113 performs a command or input stored in the mobile terminal 110.

도 2는 본 발명의 일실시예에 따른 모바일 단말기의 화면 전환 방법을 도시한 순서도이다.2 is a flowchart illustrating a screen switching method of a mobile terminal according to an embodiment of the present invention.

단계(S210)에서는 모바일 단말기가 화상인 인식한다.In step S210, the mobile terminal recognizes that the image.

단계(S220)에서는 단계(S210)에서 감지된 화상과 저장된 패턴과 비교한다.In step S220, the image detected in step S210 is compared with the stored pattern.

단계(S230)에서는 단계(S420)의 비교 결과 상기 감지된 화상과 저장된 패턴이 일치 하는지 판단한다.In operation S230, as a result of the comparison of operation S420, it is determined whether the detected image matches the stored pattern.

만약, 단계(S230)의 판단 결과, 상기 감지된 화상이 상기 저장된 패턴과 일치 하지 않는 것으로 판단된 경우, 본과정을 종료한다.If it is determined in step S230 that the detected image does not match the stored pattern, the process ends.

하지만, 단계(S230)의 판단 결과, 상기 감지된 화상이 상기 저장된 패턴과 일치 하는 것으로 판단된 경우, 단계(S240)에서 모바일 단말기에 명령 또는 입력을 한다.However, when it is determined in step S230 that the detected image matches the stored pattern, a command or input is made to the mobile terminal in step S240.

본 발명에 따른 모바일 단말기의 화면 전환 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media),플롭티컬디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들 어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The screen switching method of the mobile terminal according to the present invention can be implemented in the form of program instructions that can be executed by various computer means and recorded in a computer readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination. The program instructions recorded on the medium may be those specially designed and constructed for the present invention or may be available to those skilled in the art of computer software. Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks such as floppy disks. Magneto-optical media, and hardware devices specifically configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include machine code, such as produced by a compiler, as well as high-level language code that can be executed by a computer using an interpreter. The hardware device described above may be configured to operate as one or more software modules to perform the operations of the present invention, and vice versa.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이가능하다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible.

그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Therefore, the scope of the present invention should not be limited to the described embodiments, but should be defined not only by the claims below but also by the equivalents of the claims.

110: 모바일 단말기
111: 화상 인식 감지부
112: 판단부
113: 명령 또는 입력 처리부110: mobile terminal
111: image recognition detector
112: judgment
113: command or input processing unit

Claims (11)

단말기에 화상을 인지하는 카메라;
상기 카메라가 특정 행동이나 형상을 인지하는 경우, 상기 단말기에 명령을 입력 하는 것을 포함하는 특징으로 하는 단말기A camera for recognizing an image on the terminal;
When the camera recognizes a specific action or shape, the terminal comprising inputting a command to the terminal 제 1항에 있어서
상기 화상을 인지하는 카메라는,
사람 또는 사물을 인지하여, 단말기에 명령을 입력하는 것을 특징으로 갖는 단말기The method of claim 1, wherein
The camera that recognizes the image,
Recognizing a person or thing, the terminal characterized in that for inputting a command to the terminal 제 1항에 있어서
상기 화상을 인지하는 카메라는,
상기 단말기의 세로 방향을 기준 축으로 하여, 전면 또는 후면에 위치하여 화상을 인지하는 것을 특징으로 하는 단말기The method of claim 1, wherein
The camera that recognizes the image,
Terminals characterized in that the image is located on the front or rear with respect to the longitudinal direction of the terminal as a reference axis 제 2항에 있어서
상기 화상을 인지하는 카메라는,
사람의 모습 또는 행동 전체를 인지하거나, 특정 부위만의 행동을 인지하는 것을 특징으로 하는 단말기The method according to claim 2, wherein
The camera that recognizes the image,
A terminal characterized by recognizing the whole person's appearance or behavior, or recognizing a specific part of the behavior 제 2항에 있어서
상기 화상을 인지하는 카메라는,
사물의 고정된 형상이나, 움직이는 모습을 인지하여 것을 특징으로 갖는 단말기The method according to claim 2, wherein
The camera that recognizes the image,
A terminal having a feature of recognizing a fixed shape or a moving state of an object 단말기에 화상을 인지하는 단계;
상기 카메라가 특정 행동이나 형상을 인지하는 경우, 상기 단말기에 명령을 입력 하는 단계를 포함하는 특징으로 하는 단말기의 명령 입력 방법Recognizing an image on the terminal;
When the camera recognizes a specific action or shape, inputting a command to the terminal; 제 6항에 있어서
상기 화상을 인지하는 단계는,
사람 또는 사물을 인지하여, 단말기에 명령을 입력하는 것을 특징으로 갖는 단말기의 명령 입력 방법The method of claim 6, wherein
Recognizing the image,
Recognizing a person or a thing, the command input method of the terminal, characterized in that for inputting a command to the terminal 제 6항에 있어서
상기 화상을 인지하는 단계는,
상기 단말기의 세로 방향을 기준 축으로 하여, 전면 또는 후면에 위치하여 화상을 인지하는 것을 특징으로하는 단말기의 명령 입력 방법The method of claim 6, wherein
Recognizing the image,
Command input method of the terminal, characterized in that the image is located on the front or rear with respect to the longitudinal direction of the terminal as a reference axis 제 6항에 있어서
상기 화상을 인지하는 단계는,
사람의 모습 또는 행동 전체를 인지하거나, 특정 부위만의 행동을 인지하는 것을 특징으로 하는 단말기의 명령 입력 방법The method of claim 6, wherein
Recognizing the image,
Command input method of the terminal, characterized in that it recognizes the entire person's appearance or behavior, or recognizes only a specific part of the behavior 제 6항에 있어서
상기 화상을 인지하는 단계는,
사물의 고정된 형상이나, 움직이는 모습을 인지하여 것을 특징으로 갖는 단말기의 명령 입력 방법The method of claim 6, wherein
Recognizing the image,
Command input method of a terminal having a feature of recognizing a fixed shape or a moving state of an object 제 6항 내지 제 10항 중 어느 한 항의 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능 기록매체.A computer-readable recording medium having recorded thereon a program for performing the method of any one of claims 6 to 10.
KR1020110058957A 2011-06-17 2011-06-17 Motion user interface KR20120139252A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110058957A KR20120139252A (en) 2011-06-17 2011-06-17 Motion user interface

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110058957A KR20120139252A (en) 2011-06-17 2011-06-17 Motion user interface

Publications (1)

Publication Number Publication Date
KR20120139252A true KR20120139252A (en) 2012-12-27

Family

ID=47905766

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110058957A KR20120139252A (en) 2011-06-17 2011-06-17 Motion user interface

Country Status (1)

Country Link
KR (1) KR20120139252A (en)

Similar Documents

Publication Publication Date Title
KR102230630B1 (en) Rapid gesture re-engagement
KR102446392B1 (en) Electronic device and method for recognizing voice of speech
US20130211843A1 (en) Engagement-dependent gesture recognition
KR101978687B1 (en) Method for inputting a character in touch screen terminal and apparatus thereof
JP5950597B2 (en) Information processing apparatus and control method thereof
KR102080183B1 (en) Electronic device and method for unlocking in the electronic device
US8655416B2 (en) User interface for a portable device including detecting close proximity of an ear to allow control of an audio application with a touchscreen
US20130222287A1 (en) Apparatus and method for identifying a valid input signal in a terminal
US20120290291A1 (en) Input processing for character matching and predicted word matching
KR102186393B1 (en) Method for processing input and an electronic device thereof
US9218811B2 (en) Electronic device and method for managing voice entered text using gesturing
KR20160009344A (en) Method and apparatus for recognizing whispered voice
US9423883B2 (en) Electronic apparatus and method for determining validity of touch key input used for the electronic apparatus
KR20120025904A (en) Method and apparatus of recognizing gesture with untouched way
KR20120080070A (en) Electronic device controled by a motion, and control method thereof
JP5639489B2 (en) Information processing apparatus, control method therefor, program, and storage medium
KR20140131061A (en) Method of operating touch screen and electronic device thereof
US20170192465A1 (en) Apparatus and method for disambiguating information input to a portable electronic device
WO2016069217A1 (en) Gesture recognition using gesture elements
US20160034027A1 (en) Optical tracking of a user-guided object for mobile platform user input
JP2014518486A (en) CHARACTER INPUT DEVICE, CHARACTER INPUT METHOD, AND STORAGE MEDIUM
US20140180698A1 (en) Information processing apparatus, information processing method and storage medium
JP2007102369A (en) Gesture recognition device and gesture recognition method
KR20120139252A (en) Motion user interface
KR20140011921A (en) Apparatus and method for controlling operation mode of device using gesture cognition

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination