KR20140034666A - Control device based on non-motion signal and motion signal, and device control method thereof - Google Patents

Control device based on non-motion signal and motion signal, and device control method thereof Download PDF

Info

Publication number
KR20140034666A
KR20140034666A KR1020120147157A KR20120147157A KR20140034666A KR 20140034666 A KR20140034666 A KR 20140034666A KR 1020120147157 A KR1020120147157 A KR 1020120147157A KR 20120147157 A KR20120147157 A KR 20120147157A KR 20140034666 A KR20140034666 A KR 20140034666A
Authority
KR
South Korea
Prior art keywords
signal
operation signal
specific
input
user
Prior art date
Application number
KR1020120147157A
Other languages
Korean (ko)
Other versions
KR101474873B1 (en
Inventor
박경민
유은지
윤태은
최훈
이칠우
Original Assignee
전남대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 전남대학교산학협력단 filed Critical 전남대학교산학협력단
Publication of KR20140034666A publication Critical patent/KR20140034666A/en
Application granted granted Critical
Publication of KR101474873B1 publication Critical patent/KR101474873B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

The present invention relates to a control device based on a non-motion signal and a motion signal, and a method of controlling the same device. The method includes the following steps of: registering a non-motion signal input based on a button input, a key input or a touch input and setting a control instruction for controlling an application program by receiving a specific non-motion signal and a specific motion signal after a motion signal input based on a user motion is registered; and when an input signal corresponding to a specific non-motion signal is input, sensing the user motion to generate a motion sensing signal, comparing the motion sensing signal with a specific motion signal to confirm whether the motion sensing signal is matched with the specific motion signal and controlling the application program according to the control instruction. Thus, inaccuracy caused by controlling the application program of a terminal based on a user motion may be greatly removed. [Reference numerals] (S1) Register non-motion signal; (S2) Register motion signal; (S3) Select specific non-motion signal; (S4) Select specific motion signal; (S5) Set selected signal as control instruction; (S6) Input signal corresponding to specific non-motion signal; (S7) Sense user motion to generate motion sensing signal; (S8) Compare motion sensing signal with specific motion signal to confirm matching; (S9) Control application program

Description

비동작 신호 및 동작 신호에 기반한 제어 장치 및 그 장치 제어 방법 {Control device based on non-motion signal and motion signal, and device control method thereof}[0001] The present invention relates to a control device based on non-operating signals and motion signals, and a device control method based on non-operating signals and motion signals,

본 발명은 장치의 제어 기술과 관련한 것으로, 더욱 상세하게는 단말의 버튼, 키, 터치 스크린 등을 이용하여 입력되는 비동작 신호와 사용자의 동작을 감지하여 입력되는 동작 신호를 이용하여 단말 등의 장치를 제어할 수 있는 비동작 신호 및 동작 신호에 기반한 제어 장치 및 그 장치 제어 방법에 관한 것이다.The present invention relates to a control technology of a device, and more particularly, to a control technique of a device such as a terminal or the like by using a non-operation signal input by using a button, a key, A non-operation signal and an operation signal based on the non-operation signal and the operation signal, and a method of controlling the apparatus.

휴대폰, 컴퓨터 등의 단말은 데이터 처리 능력 및 통신 능력 등의 향상과 함께 다양한 기능을 하나의 단말에 통합하여 수행할 수 있는 통합 기기로 발전하고 있다. 이러한 통합 기기의 일 예로서 스마트폰이 널리 보급되고 있으며, 스마트폰은 휴대성, 이동성, PC에 필적하는 성능 등으로 인해, 언제 어디서나 사용자가 원하는 동작을 수행할 수 있는 필수 기기로 발전하고 있다.Mobile phones and computers are being developed as integrated devices capable of integrating various functions into one terminal while improving data processing capability and communication ability. As an example of such an integrated device, smart phones are widely used, and smart phones are becoming essential devices for users to perform desired operations anytime and anywhere due to portability, mobility, and performance comparable to PCs.

이러한 단말은 그 종류에 따라, 키패드, 터치스크린, 마우스, 키보드 등으로 용용 프로그램을 제어하여 실행하는데, 특정 응용 프로그램을 실행하기 위해서는 실행파일을 직접 찾아 실행하거나 아이콘 등을 일일이 찾아 터치해주어야 한다.Such a terminal controls and executes an application program using a keypad, a touch screen, a mouse, a keyboard, or the like. In order to execute a specific application program, an executable file must be directly found and executed.

그런데 단말을 이러한 방식으로 일일이 조작해 주는 것은 번거로워 좀 더 용이하게 단말의 각 응용 프로그램을 제어할 수 있는 방안이 요청된다.However, it is troublesome to manipulate the terminal in this manner, and a method of controlling each application program of the terminal is requested more easily.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은, 버튼 입력, 키 입력 또는 터치 입력을 기반으로 한 비동작 신호와, 사용자 동작을 기반으로 한 동작 신호를 이용하여, 단말의 응용 프로그램을 용이하게 제어할 수 있는 비동작 신호 및 동작 신호에 기반한 제어 장치 및 그 장치 제어 방법을 제공하기 위한 것이다.It is an object of the present invention to solve the above problems and to provide an apparatus and a method for operating an application program of a terminal using an operation signal based on a non-operation signal based on a button input, a key input or a touch input, A control device based on non-operation signals and operation signals that can be controlled, and a device control method thereof.

상기와 같은 목적을 달성하기 위한 본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법은, 버튼 입력, 키 입력 또는 터치 입력을 기반으로 비동작 신호를 입력받아 등록하고, 사용자 동작을 기반으로 동작 신호를 입력받아 등록하는 등록 단계, 상기 비동작 신호 중 특정 비동작 신호를 선택받고, 상기 동작 신호 중 특정 동작 신호를 선택받아, 응용 프로그램을 제어하기 위한 제어 명령으로 설정하는 설정 단계, 상기 특정 비동작 신호에 대응하는 입력 신호를 입력받으면, 사용자 동작을 감지하여 동작 감지 신호를 생성하고, 상기 동작 감지 신호와 상기 특정 동작 신호를 비교하여 매칭되는지 확인하는 확인 단계, 및 확인 결과 상기 동작 감지 신호와 상기 특정 동작 신호가 매칭되면, 상기 제어 명령에 따라 상기 응용 프로그램을 제어하는 제어 단계를 포함하는 것을 특징으로 한다.According to an aspect of the present invention, there is provided a device control method based on non-operation signals and operation signals, comprising: receiving a non-operation signal based on a button input, a key input, A setting step of selecting a specific non-operation signal among the non-operation signals, selecting a specific operation signal among the operation signals, and setting the control command as a control command for controlling an application program; The method comprising the steps of: receiving an input signal corresponding to an operation signal, generating an operation detection signal by sensing a user operation; comparing the operation detection signal with the specific operation signal to determine whether the operation signal is matched; If the specific operation signal is matched, the controller controls the application program according to the control command. Characterized in that it comprises a first stage.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 비동작 신호 또는 상기 특정 비동작 신호에 대응하는 입력 신호는, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력되는 것을 특징으로 한다.In the apparatus control method based on the non-operating signal and the operating signal according to the present invention, the non-operating signal or the input signal corresponding to the specific non-operating signal may include at least one of an input signal of a specific button, a specific key input signal, A touch signal for a fixed area, a touch signal for a fixed number of times, a touch signal for a certain combination, a touch signal having a certain range of intensity, or a touch signal for a predetermined time range .

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 동작 신호 또는 상기 동작 감지 신호는, 가속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 중 적어도 하나를 이용하여 입력받거나 감지하는 것을 특징으로 한다.In the apparatus control method based on the non-operation signal and the operation signal of the present invention, the operation signal or the motion detection signal may include at least one of an acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, And receives or receives input.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 등록 단계는, 상기 비동작 신호 또는 상기 동작 신호를 등록하기 전에, 기 등록된 신호와의 중복 여부를 판단하여, 판단 결과 중복되는 경우 중복 사실을 출력하고, 판단 결과 중복되지 않는 경우 등록하는 것을 특징으로 한다.In the device control method based on the non-operating signal and the operating signal of the present invention, the registering step may determine whether the pre-registered signal is overlapped with the pre-registered signal before registering the non-operating signal or the operating signal, A duplication fact is output, and when duplication is not found, the duplication is registered.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 등록 단계는, 상기 비동작 신호 또는 상기 동작 신호에 명칭이나 설명을 부여하여 등록하는 것을 특징으로 한다.In the device control method based on the non-operating signal and the operating signal of the present invention, the registering step registers the non-operating signal or the operating signal by giving a name or description to the non-operating signal or the operating signal.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 제어 명령은, 상기 응용 프로그램을 실행하기 위한 것이거나, 상기 응용 프로그램 중 특정 기능을 실행하기 위한 것이거나, 복수의 상기 응용 프로그램을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 중 특정 응용 프로그램과 다른 응용 프로그램의 기능을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 각각의 기능을 순차적으로 실행하기 위한 것임을 특징으로 한다.In the apparatus control method based on the non-operating signal and the operating signal of the present invention, the control command may be for executing the application program, for executing a specific function among the application programs, And sequentially executing the functions of a plurality of the application programs and sequentially executing the functions of the plurality of application programs, do.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 설정 단계는, 상기 제어 명령에 명칭이나 설명을 부여하여 설정하는 것을 특징으로 한다.In the apparatus control method based on the non-operating signal and the operating signal of the present invention, the setting step is characterized by giving a name or description to the control command.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 확인 단계는, 상기 특정 동작 신호와 상기 동작 감지 신호를 DTW(Dynamic Time Warping) 알고리즘을 이용해 비교하는 것을 특징으로 한다.In the device control method based on the non-operating signal and the operating signal of the present invention, the checking step compares the specific operating signal and the motion sensing signal using a dynamic time warping (DTW) algorithm.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 확인 단계는, 상기 특정 동작 신호에 포함된 순차적인 사용자 동작 변화 패턴을, 상기 동작 감지 신호에 포함된 순차적인 사용자 동작 변화 패턴과 비교하는 것을 특징으로 한다.In the device control method based on the non-operation signal and the operation signal of the present invention, it is preferable that the checking step comprises: sequentially detecting a sequential user operation change pattern included in the specific operation signal, .

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 확인 단계는, 사용자 동작의 변화 방향, 사용자 동작의 변화 강도 및 사용자 동작의 변화 비율 중 하나 이상의 사용자 동작 변화 패턴을 비교하는 것을 특징으로 한다.In the apparatus control method based on the non-operating signal and the operating signal of the present invention, the checking step may include comparing one or more user's operation change patterns among a changing direction of a user's operation, a changing intensity of a user's operation, .

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 확인 단계는, 상기 특정 동작 신호와 상기 동작 감지 신호에서, 변화율이 일정치 이상의 신호를 추출하여 비교하는 것을 특징으로 한다.In the apparatus control method based on the non-operating signal and the operating signal of the present invention, the checking step extracts and compares signals having a rate of change equal to or greater than a predetermined value in the specific operating signal and the operating sensing signal.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 등록 단계는, 상기 특정 동작 신호의 종류 정보를 더 등록하고, 상기 확인 단계는, 상기 특정 동작 신호의 종류에 대응하는 신호를 상기 동작 감지 신호에서 추출하여 비교하는 것을 특징으로 한다.In the device control method based on the non-operating signal and the operating signal of the present invention, the registering step further registers the type information of the specific operating signal, and the checking step comprises: And extracts and compares the motion detection signal with the motion detection signal.

본 발명의 비동작 신호 및 동작 신호에 기반한 장치 제어 방법에 있어서, 상기 확인 단계는, 상기 특정 비동작 신호와 함께 제어 명령으로 설정된 복수의 특정 동작 신호를 조회하여, 상기 동작 감지 신호와 일정치 이상의 매칭률을 가지는 상기 특정 동작 신호를 확인하는 것을 특징으로 한다.In the device control method based on the non-operating signal and the operating signal of the present invention, the checking step may include: inquiring a plurality of specific operating signals set as a control command together with the specific non-operating signal, And the specific operation signal having the matching rate is confirmed.

상기와 같은 목적을 달성하기 위한 본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치는, 정보 표현을 위한 표시부, 버튼 입력, 키 입력 또는 터치 입력을 위한 입력부, 사용자 동작을 감지하는 센서부, 상기 입력부를 통해 입력된 비동작 신호를 저장하고, 상기 센서부에서 감지한 동작에 따라 입력된 동작 신호를 저장하는 신호 저장부, 응용 프로그램의 저장을 위한 응용 프로그램 저장부, 상기 비동작 신호 중에서 선택된 특정 비동작 신호와, 상기 동작 신호 중에서 선택된 특정 동작 신호를 포함하여, 상기 응용 프로그램을 제어하기 위해 설정된 제어 명령을 저장하는 제어 명령 저장부, 상기 입력부를 이용하여 상기 비동작 신호를 입력 받아 상기 신호 저장부에 저장하고, 상기 센서부를 통하여 상기 동작 신호를 입력 받아 상기 신호 저장부에 저장하며, 상기 표시부에 상기 비동작 신호 및 상기 동작 신호의 정보를 표시하여 상기 특정 비동작 신호 및 상기 특정 동작 신호를 선택 받아, 상기 응용 프로그램을 제어하기 위한 상기 제어 명령으로 설정하여 상기 제어 명령 저장부에 저장하고, 상기 입력부를 통해 상기 특정 비동작 신호에 대응하는 입력 신호를 입력받으면, 상기 센서부를 이용해 사용자 동작을 감지하여 동작 감지 신호를 생성하고, 상기 동작 감지 신호와 상기 특정 동작 신호를 비교하여 매칭되는지 확인하며, 상기 확인한 결과 상기 동작 감지 신호와 상기 특정 동작 신호가 매칭되면, 상기 제어 명령에 따라 상기 응용 프로그램을 제어하는 제어부를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a control apparatus based on non-operating signals and operation signals, the control apparatus comprising: a display unit for displaying information, an input unit for a button input, a key input or a touch input, A signal storage unit for storing a non-operation signal input through an input unit and storing an operation signal input according to an operation sensed by the sensor unit, an application program storage unit for storing an application program, A control command storage unit for storing a control command for controlling the application program, including a non-operation signal and a specific operation signal selected from the operation signal; a control command storage unit for receiving the non-operation signal using the input unit, And outputs the operation signal to the signal storage unit And displays the information on the non-operation signal and the operation signal on the display unit, selects the specific non-operation signal and the specific operation signal, sets the control operation command for controlling the application program, When the input unit receives the input signal corresponding to the specific non-operation signal through the input unit, generates a motion sensing signal by sensing the user's motion using the sensor unit, and compares the motion sensing signal with the specific motion signal And a control unit for controlling the application program according to the control command when the operation detection signal matches the specific operation signal.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 입력부는, 버튼, 키패드, 키보드, 마우스, 터치 패드, 터치 스크린 또는 정보 입력 패널 중 하나 이상을 포함하고, 상기 비동작 신호 또는 상기 특정 비동작 신호에 대응하는 입력 신호는, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력되는 것을 특징으로 한다.The control unit may include at least one of a button, a keypad, a keyboard, a mouse, a touchpad, a touch screen, or an information input panel, and the non- The input signal corresponding to the specific non-operation signal includes an input signal of a specific button, a specific key input signal, a predetermined number of key input signals, a key input signal of a certain combination, a touch signal for a certain region, A touch signal of a certain range, a touch signal of a certain range of time, or a touch signal of a predetermined time range.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 센서부는, 사용자 동작을 감지하는 가속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 중 적어도 하나를 포함하는 것을 특징으로 한다.The control unit may include at least one of an acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, an optical sensor, or a camera for detecting a user's operation .

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 비동작 신호 또는 상기 동작 신호를 저장하기 전에, 상기 신호 저장부에 기 저장된 신호와의 중복 여부를 판단하여, 판단 결과 중복되는 경우 상기 표시부에 중복 사실을 출력하고, 판단 결과 중복되지 않는 경우 상기 신호 저장부에 저장하는 것을 특징으로 한다.In the control device based on the non-operating signal and the operating signal of the present invention, the controller determines whether or not the signal stored in the signal storing unit overlaps with the previously stored signal before storing the non-operating signal or the operating signal, And outputs the redundancy to the display unit when the result is duplicated, and stores the redundancy in the signal storage unit if the result is not duplicated.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 신호 저장부에 상기 비동작 신호 또는 상기 동작 신호에 대한 명칭이나 설명을 더 저장하는 것을 특징으로 한다.In the control device based on the non-operating signal and the operating signal of the present invention, the control unit may further store a name or a description of the non-operating signal or the operating signal in the signal storing unit.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어 명령은, 상기 응용 프로그램을 실행하기 위한 것이거나, 상기 응용 프로그램 중 특정 기능을 실행하기 위한 것이거나, 복수의 상기 응용 프로그램을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 중 특정 응용 프로그램과 다른 응용 프로그램의 기능을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 각각의 기능을 순차적으로 실행하기 위한 것임을 특징으로 한다.In the control device based on the non-operating signal and the operating signal of the present invention, the control command may be for executing the application program, for executing a specific function among the application programs, And sequentially executing the functions of the specific application program and the application programs of the plurality of application programs or sequentially executing the functions of the plurality of application programs, .

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 제어 명령 저장부에 상기 제어 명령에 대한 명칭이나 설명을 더 저장하는 것을 특징으로 한다.In the control device based on the non-operation signal and the operation signal of the present invention, the control unit further stores a name or a description of the control command in the control command storage unit.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 특정 동작 신호와 상기 동작 감지 신호를 DTW(Dynamic Time Warping) 알고리즘을 이용해 비교하는 것을 특징으로 한다.In the control device based on the non-operation signal and the operation signal of the present invention, the controller compares the specific operation signal and the motion detection signal using a dynamic time warping (DTW) algorithm.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 특정 동작 신호에 포함된 순차적인 사용자 동작 변화 패턴을, 상기 동작 감지 신호에 포함된 순차적인 사용자 동작 변화 패턴과 비교하는 것을 특징으로 한다.In the control device based on the non-operation signal and the operation signal of the present invention, the controller may compare the sequential user operation change pattern included in the specific operation signal with a sequential user operation change pattern included in the operation detection signal .

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 사용자 동작의 변화 방향, 사용자 동작의 변화 강도 및 사용자 동작의 변화 비율 중 하나 이상의 사용자 동작 변화 패턴을 비교하는 것을 특징으로 한다.In the control device based on the non-operation signal and the operation signal of the present invention, the control unit compares at least one of the user operation change patterns among the change direction of the user operation, the change intensity of the user operation, do.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 특정 동작 신호와 상기 동작 감지 신호에서, 변화율이 일정치 이상의 신호를 추출하여 비교하는 것을 특징으로 한다.In the control device based on the non-operating signal and the operating signal of the present invention, the control section extracts and compares signals having a rate of change equal to or greater than a predetermined value in the specific operating signal and the operating sensing signal.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 신호 저장부에 상기 특정 동작 신호의 종류 정보를 더 저장하고, 상기 특정 동작 신호의 종류에 대응하는 신호를 상기 동작 감지 신호에서 추출하여 상기 특정 동작 신호와 비교하는 것을 특징으로 한다.In the control device based on the non-operation signal and the operation signal of the present invention, the control unit further stores the type information of the specific operation signal in the signal storage unit, and transmits a signal corresponding to the type of the specific operation signal to the operation Extracts the signal from the detection signal, and compares the signal with the specific operation signal.

본 발명의 비동작 신호 및 동작 신호에 기반한 제어 장치에 있어서, 상기 제어부는, 상기 특정 비동작 신호와 함께 제어 명령으로 설정된 복수의 특정 동작 신호를 조회하여, 상기 동작 감지 신호와 일정치 이상의 매칭률을 가지는 상기 특정 동작 신호를 확인하는 것을 특징으로 한다.In the control device based on the non-operation signal and the operation signal of the present invention, the control unit inquires a plurality of specific operation signals set by the control command together with the specific non-operation signal, And the specific operation signal having the specific operation signal is confirmed.

본 발명은 비동작 신호 및 동작 신호에 기반한 장치 제어 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능 기록매체를 제공한다.The present invention provides a computer-readable recording medium on which a program for performing a device control method based on a non-operating signal and an operating signal is recorded.

본 발명에 따른 비동작 신호 및 동작 신호에 기반한 제어 장치 및 그 장치 제어 방법에 따르면 다음과 같은 효과를 기대할 수 있다.According to the control device and the device control method based on the non-operation signal and the operation signal according to the present invention, the following effects can be expected.

첫째, 사용자가 편의에 따라 설정한 다양한 방법으로, 응용 프로그램이나 해당 응용 프로그램의 기능을 제어할 수 있어 제어의 편의성이 증진된다.First, the convenience of the control can be improved because the functions of the application program or the application program can be controlled by various methods set by the user according to the convenience.

둘째, 정확한 입력 신호인 비동작 신호를 제어 명령에 포함시켜, 사용자의 동작을 기반으로 단말의 응용 프로그램을 제어함으로써 발생하는 제어의 부정확성을 획기적으로 제거할 수 있다.Second, the inactivity of the control generated by controlling the application program of the terminal based on the user's operation can be drastically eliminated by including the non-operating signal, which is an accurate input signal, into the control command.

셋째, 다양한 응용 프로그램이나 각 응용 프로그램의 기능을 선별하여, 하나의 제어 명령으로 제어할 수 있어 사용자 편의가 증진된다.Third, various application programs and functions of each application program can be selected and controlled by a single control command, thereby improving user convenience.

도 1은 본 발명의 일 실시예에 따른 제어 장치의 구성도이다.
도 2는 본 발명의 일 실시예에 따라 비동작 신호를 등록하여 제어 명령으로 설정하는 모습을 나타낸 예시도이다.
도 3은 본 발명의 일 실시예에 따라 동작 신호를 등록하여 제어 명령으로 설정하는 모습을 나타낸 예시도이다.
도 4는 본 발명의 일 실시예에 따라 제어의 대상인 응용 프로그램의 기능을 선택하는 모습을 나타낸 예시도이다.
도 5는 본 발명의 일 실시예에 따른 제어 방법의 흐름도이다.1 is a configuration diagram of a control apparatus according to an embodiment of the present invention.
2 is a diagram illustrating an example in which a non-operation signal is registered and set as a control command according to an embodiment of the present invention.
FIG. 3 is a diagram illustrating an example in which an operation signal is registered and set as a control command according to an embodiment of the present invention.
4 is a diagram illustrating an example of selecting a function of an application program to be controlled according to an embodiment of the present invention.
5 is a flowchart of a control method according to an embodiment of the present invention.

하기의 설명에서는 본 발명의 실시예를 이해하는데 필요한 부분만이 설명되며, 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.In the following description, only parts necessary for understanding the embodiments of the present invention will be described, and the description of other parts will be omitted so as not to obscure the gist of the present invention.

이하에서 설명되는 본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니 되며, 발명자는 그 자신의 발명을 가장 최선의 방법으로 설명하기 위해 용어의 개념으로 적절하게 정의할 수 있다는 원칙에 입각하여 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 바람직한 실시예에 불과할 뿐이고, 본 발명의 기술적 사상을 모두 대변하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.The terms and words used in the present specification and claims should not be construed as limited to ordinary or dictionary meanings and the inventor is not limited to the meaning of the terms in order to describe his invention in the best way. It should be interpreted as meaning and concept consistent with the technical idea of the present invention. Therefore, the embodiments described in the present specification and the configurations shown in the drawings are merely preferred embodiments of the present invention, and are not intended to represent all of the technical ideas of the present invention, so that various equivalents And variations are possible.

본 발명은 단말 등의 장치를 제어함에 있어, 버튼 입력, 키 입력 또는 터치 입력을 기반으로한 비동작 신호와, 사용자 동작을 기반으로한 동작 신호를 함께 이용함으로써, 제어의 정확성과 편의성을 제공하는 제어 장치 및 그 장치 제어 방법에 관한 것이다. 이하, 첨부된 도면을 참조하여 본 발명의 실시예를 보다 상세하게 설명하기로 한다.The present invention relates to an apparatus and method for controlling an apparatus such as a terminal and providing an accuracy and a convenience of control by using a non-operation signal based on a button input, a key input or a touch input and an operation signal based on a user operation And a method of controlling the apparatus. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 제어 장치(100)의 구성도이다. 본 실시예의 제어 장치(100)는 컴퓨터, 노트북, 휴대폰, 스마트폰, 가전기기 등에 위치하여, 사용자의 비동작 신호 및 동작 신호의 입력에 따라 응용 프로그램을 제어하는 역할을 한다.1 is a configuration diagram of a control apparatus 100 according to an embodiment of the present invention. The controller 100 of the present embodiment is located in a computer, a notebook computer, a mobile phone, a smart phone, a home appliance, or the like, and controls an application program according to input of a non-operation signal and an operation signal of the user.

도 1을 참조하면, 제어 장치(100)는 표시부(10), 입력부(20), 센서부(30), 신호 저장부(40), 응용 프로그램 저장부(50), 제어 명령 저장부(60) 및 제어부(70)를 포함한다.1, the control device 100 includes a display unit 10, an input unit 20, a sensor unit 30, a signal storage unit 40, an application program storage unit 50, a control command storage unit 60, And a control unit 70.

표시부(10)는 각종 정보를 사용자가 시청각적으로 인식할 수 있도록 표현하는 역할을 하며, 이를 위한 디스플레이 장치를 포함한다.The display unit 10 displays a variety of information so that the user can visually recognize the information, and includes a display device for the display.

표시부(10)는 LCD(Liquid Crystal Display) 등의 액정이나, 터치 스크린, 스피커 등의 출력 장비를 포함할 수 있다.The display unit 10 may include a liquid crystal display such as an LCD (Liquid Crystal Display) or an output device such as a touch screen or a speaker.

입력부(20)는 사용자가 버튼 입력, 키 입력 또는 터치 입력 등 비동작 신호를 입력하기 위한 입력 장치를 포함한다. 예를 들어 입력부(20)는 버튼, 키패드, 키보드, 마우스, 터치 패드, 터치 스크린 또는 정보 입력 패널 등의 입력 장비를 포함할 수 있으며, 터치 스크린은 입력 장비로서의 기능과 출력 장비로서의 기능을 동시에 수행할 수 있다.The input unit 20 includes an input device for a user to input a non-operation signal such as a button input, a key input, or a touch input. For example, the input unit 20 may include an input device such as a button, a keypad, a keyboard, a mouse, a touch pad, a touch screen, or an information input panel, and the touch screen simultaneously performs a function as an input device and a function as an output device can do.

센서부(30)는 사용자의 동작을 감지하여 동작 신호를 입력하기 위한 감지 장치를 포함한다. 센서부(30)는 예를 들어, 가속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 등의 감지 장비를 포함한다.The sensor unit 30 includes a sensing device for sensing an operation of a user and inputting an operation signal. The sensor unit 30 includes, for example, an acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, an optical sensor, or a camera.

이때, 센서부(30)는 가속도 센서, 중력 센서, 자이로 센서, 토크 센서 등을 이용하여 제어 장치(100)가 구비된 단말의 움직임이나 회전을 감지할 수 있다. 또한 압력 센서를 이용하여 사용자가 가하는 압력을 측정할 수 있고, 광 센서를 이용하여서는 적외선 등의 광을 조사하고 반사광이 측정되기까지의 시간에 따라 사용자의 움직임을 감지할 수 있으며, 카메라를 이용하여서는 연속되는 이미지의 화상 비교를 통해 사용자의 손동작, 머리 동작, 몸체 동작, 눈동자 움직임 등을 감지할 수 있다.At this time, the sensor unit 30 can detect movement or rotation of the terminal equipped with the control device 100 using an acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, or the like. In addition, it is possible to measure the pressure applied by the user by using the pressure sensor. By using the optical sensor, it is possible to detect the movement of the user according to the time until the reflected light is measured by irradiating light such as infrared rays. By comparing images of successive images, it is possible to detect the user's hand movements, head movements, body movements, pupil movements, and the like.

본 발명에서 동작 신호는 사용자의 제스처에 기반한 신호를 의미하고, 이는 제어 장치(100)의 센서부(30)가 사용자의 움직임을 감지하거나, 사용자의 동작에 따른 단말 자체의 움직임을 감지하여 생성한 신호를 의미한다. 그리고 비동작 신호는 제어 장치(100)의 입력부(20)에 구비된 버튼, 키, 터치 스크린 등을 이용하여 입력된 신호를 의미한다.In the present invention, the operation signal refers to a signal based on the gesture of the user, and the sensor unit 30 of the controller 100 senses the movement of the user, Signal. The non-operation signal means a signal input using a button, a key, a touch screen, or the like provided in the input unit 20 of the control device 100.

본 발명에서 동작 신호와 비동작 신호를 구분하는 이유는, 동작 신호의 경우 센서부(30)의 성능에 따라 그 정확성이 떨어질 수 있고, 사용자가 의도하지 않은 동작이 동작 신호로 입력될 수 있으므로, 동작 신호와 비동작 신호가 함께 입력된 경우에만 제어 장치(100)가 특정 응용 프로그램의 제어 동작을 수행하도록 하여 제어의 정확성을 향상하기 위함이다.The reason for distinguishing between the operation signal and the non-operation signal in the present invention is that the accuracy of the operation signal may be deteriorated according to the performance of the sensor unit 30 and an operation that is not intended by the user may be input as the operation signal, Only when the operation signal and the non-operation signal are inputted together, the control device 100 performs the control operation of the specific application program to improve the accuracy of the control.

예를 들어, 스마트폰이 좌우로 흔들리는 경우 특정 동작을 수행하도록 설정된 경우를 가정하면, 사용자가 주머니에 스마트폰을 넣고 걷는 경우 발생하는 흔들림이, 해당 동작을 수행하기 위한 것으로 인식되어 오작동이 발생할 수 있다.For example, assuming that the smartphone is set to perform a specific operation when the smartphone is shaken to the left or to the right, a shake that occurs when the user walks the smartphone in the pocket is recognized as performing the corresponding operation, have.

이러한 점을 개선하기 위해, 본 실시예의 제어 장치(100)는 비동작 신호와 동작 신호가 함께 입력된 경우에만 특정 동작을 수행하도록 설정된다. 예를 들어, 스마트폰의 베젤에 위치한 버튼을 누름에 따라 입력되는 비동작 신호 및 스마트폰을 좌우로 흔드는 경우 입력되는 동작 신호에 따라 스마트폰이 특정 동작을 수행하도록 설정할 수 있으며, 이에 따라 사용자의 동작에 기반한 제어 오류를 현저히 개선할 수 있다. 이 경우 설정에 따라 비동작 신호가 입력되는 도중에 동작 신호가 입력되도록 할 수 있고, 비동작 신호가 입력된 후 일정 시간 이내에 동작 신호가 입력되도록 할 수도 있다.To improve this point, the control apparatus 100 of this embodiment is set to perform a specific operation only when the non-operation signal and the operation signal are input together. For example, it is possible to set the smartphone to perform a specific operation according to a non-operation signal input by pressing a button located on the bezel of the smart phone and an operation signal input when the smart phone is shaken to the left or right. The control error based on the operation can be remarkably improved. In this case, the operation signal may be input during the non-operation signal input according to the setting, and the operation signal may be inputted within a predetermined time after the non-operation signal is input.

예를 들어, PC의 사용자가 마우스의 휠 버튼을 눌러 비동작 신호를 입력하고, 눈동자를 원형으로 돌려 동작 신호를 입력하면, 음원 재생 프로그램을 실행하거나, 음원 재생 프로그램의 볼륨을 조정하도록 할 수 있다. 이와 같은 본 발명의 특징은 예를 들어, 사용자가 이미지 편집 프로그램 등을 실행하여 작업을 수행하는 도중, PC의 화면에 표현되는 내용을 변경함이 없이, 별도의 음원 재생 프로그램을 제어할 수 있음을 의미하며, 본 발명의 이러한 기술적 특징은 사용자가 다양한 응용 프로그램을 손쉽게 제어할 수 있는 환경을 제공한다.For example, when a user of the PC inputs a non-operation signal by pressing a wheel button of a mouse and inputs an operation signal by rotating the pupil in a circular form, the user can execute the sound reproduction program or adjust the volume of the sound reproduction program . The feature of the present invention is that, for example, a user can control a separate sound reproduction program without changing the contents displayed on the screen of the PC during the execution of an image editing program or the like This technical feature of the present invention provides an environment in which a user can easily control various application programs.

신호 저장부(40)는 입력부(20)를 통해 입력된 비동작 신호를 저장하고, 센서부(30)에서 감지한 동작에 따라 입력된 동작 신호를 저장하는 역할을 하는 저장소이다.The signal storage unit 40 stores the non-operation signal inputted through the input unit 20 and stores the operation signal inputted according to the operation sensed by the sensor unit 30. [

응용 프로그램 저장부(50)는 제어 장치(100)가 구비된 단말에서 실행되는 응용 프로그램의 저장소이다.The application program storage unit 50 is a storage of application programs executed in the terminal equipped with the control device 100. [

제어 명령 저장부(60)는 응용 프로그램 저장부(50)에 저장된 응용 프로그램을 제어하기 위해 설정된 제어 명령을 저장하는 저장소이다. 이때, 제어 명령은, 신호 저장부(40)에 저장된 비동작 신호 중에서 선택된 특정 비동작 신호와, 신호 저장부(40)에 저장된 동작 신호 중에서 선택된 특정 동작 신호를 포함하여 구성된다.The control command storage unit 60 stores a control command set to control an application program stored in the application program storage unit 50. [ At this time, the control command includes a specific non-operation signal selected from the non-operation signals stored in the signal storage unit 40 and a specific operation signal selected from the operation signals stored in the signal storage unit 40.

제어부(70)는 표시부(10), 입력부(20), 센서부(30), 신호 저장부(40), 응용 프로그램 저장부(50) 및 제어 명령 저장부(60)를 포함한 제어 장치(100)의 동작을 전반적으로 제어하는 역할을 하며, 이를 위한 연산 장치를 포함할 수 있다.The control unit 70 includes a control unit 100 including a display unit 10, an input unit 20, a sensor unit 30, a signal storage unit 40, an application program storage unit 50, and a control command storage unit 60. [ And may include a computing device for this purpose.

본 실시예에서 제어부(70)는 입력부(20)를 이용하여 버튼 입력, 키 입력 또는 터치 입력 등의 비동작 신호를 입력 받아 신호 저장부(40)에 저장하고, 센서부(30)를 통하여 사용자 동작에 따른 동작 신호를 입력 받아 신호 저장부(40)에 저장하는 과정을 통해, 하나 이상의 비동작 신호와 동작 신호를 등록한다.The control unit 70 receives the non-operation signals such as the button input, the key input or the touch input by using the input unit 20 and stores the received non-operation signals in the signal storage unit 40, And registers the at least one non-operation signal and the operation signal in a process of receiving the operation signal according to the operation and storing the received operation signal in the signal storage unit 40.

이때, 제어부(70)가 입력부(20)를 통해 입력 받는 비동작 신호는, 예를 들어, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력될 수 있다.The non-operation signal received by the control unit 70 through the input unit 20 may include, for example, an input signal of a specific button, a specific key input signal, a predetermined number of key input signals, A predetermined number of touch signals, a predetermined combination of touch signals, a touch signal having a certain range of strength, or a touch signal for a predetermined time range.

그리고 제어부(70)가 센서부(30)를 통해 입력 받는 동작 신호는, 센서부(30)의 센싱 장비를 이용해 감지한 사용자의 동작이나, 제어 장치(100)가 위치한 단말의 움직임에 따라 입력된 것일 수 있다.The operation signal received by the controller 70 through the sensor unit 30 is input to the sensor unit 30 in response to the operation of the user sensed by using the sensing unit of the sensor unit 30, Lt; / RTI >

이때, 제어부(70)는 신호 저장부(40)에 비동작 신호 또는 동작 신호를 저장하기 전에, 신호 저장부(40)에 기 저장된 신호와의 중복 여부를 판단하여, 판단 결과 중복되지 않는 경우에만 저장 동작을 수행할 수 있다. 만일 중복되는 경우라면, 제어부(70)는 표시부(10)에 중복 사실을 출력하여 사용자가 인지하도록 할 수 있다.At this time, before storing the non-operation signal or the operation signal in the signal storage unit 40, the control unit 70 determines whether the signal is stored in the signal storage unit 40, A storage operation can be performed. If they are duplicated, the control unit 70 may output a duplicate fact to the display unit 10 so that the user can recognize the duplication.

그리고 제어부(70)는 비동작 신호 및 동작 신호를 신호 저장부(40)에 저장하는 경우, 사용자 입력에 따라 각각의 신호에 명칭이나 설명을 부가하여 저장할 수 있다. 이를 통해 사용자가 각각의 비동작 신호나 동작 신호를 용이하게 구분 인식 할 수 있다.When the non-operation signal and the operation signal are stored in the signal storage unit 40, the controller 70 may add a name or a description to each signal according to a user input. Thus, the user can easily distinguish the non-operation signal or the operation signal from each other.

이후 제어부(70)는 표시부(10)에 저장된 비동작 신호 및 동작 신호의 정보를 표시하고, 이중 특정 비동작 신호와 동작 신호를 선택받아 특정 응용 프로그램을 제어하기 위한 제어 명령으로 설정하고, 해당 제어 명령의 정보를 제어 명령 저장부(60)에 저장한다. 즉, 제어 명령은 응용 프로그램 저장부(50)에 저장된 응용 프로그램을 제어하기 위한 명령 세트로서, 특정 비동작 신호와 특정 동작 신호를 포함하여 설정된다.Thereafter, the control unit 70 displays the information of the non-operation signal and the operation signal stored in the display unit 10, sets the specific non-operation signal and the operation signal as a control command for controlling a specific application program, And stores the information of the command in the control command storage unit 60. [ That is, the control command is a set of instructions for controlling an application program stored in the application program storage unit 50, and is set to include a specific non-operation signal and a specific operation signal.

예를 들어, 제어 명령은, 특정 응용 프로그램을 실행하기 위한 것이거나, 응용 프로그램의 특정 기능을 실행하기 위한 것이거나, 복수의 응용 프로그램을 순차적으로 실행하기 위한 것이거나, 복수의 응용 프로그램 중 특정 응용 프로그램과 다른 응용 프로그램의 기능을 순차적으로 실행하기 위한 것이거나, 복수의 응용 프로그램 각각의 기능을 순차적으로 실행하기 위한 것일 수 있다.For example, the control command may be for executing a specific application program, for executing a specific function of an application program, for sequentially executing a plurality of application programs, or for executing a specific application among a plurality of application programs For sequentially executing functions of a program and other application programs, or for sequentially executing functions of a plurality of application programs.

예를 들어, 이러한 제어 명령은, 카메라 프로그램을 실행하거나 종료하는 것일 수 있고, 카메라 프로그램 실행하고 이어서 해당 카메라 프로그램에서 촬영 타이머 기능을 실행하는 것을 수 있으며, 카메라 프로그램을 실행하여 촬영하고 이어서 별도의 이메일 프로그램을 실행하여 특정 계정으로 촬영한 사진을 전송하는 것일 수도 있다. 이렇듯 본 발명의 제어 명령은 단일 프로그램 뿐만 아니라 복수의 프로그램을 연계하여 실행하거나 기능을 실행하기 위한 명령어로 설정될 수 있다.For example, such a control command may be to execute or terminate a camera program, to execute a camera program and then to execute a shooting timer function in the camera program, You can also run a program to transfer pictures taken with a specific account. As described above, the control command of the present invention can be set not only as a single program but also as a command for executing a plurality of programs in conjunction with each other or executing a function.

이때, 제어부(70)는 사용자 입력 등에 따라, 제어 명령에 대한 명칭이나 설명과 함께, 해당 제어 명령을 제어 명령 저장부(60)에 저장할 수 있다.At this time, the control unit 70 may store the control command in the control command storage unit 60 together with the name and the description of the control command in accordance with user input or the like.

이후 제어부(70)는 입력부(20)를 통해 제어 명령으로 설정된 특정 비동작 신호에 대응하는 입력 신호를 입력받으면, 센서부(30)를 이용해 사용자 동작을 감지하여 동작 감지 신호를 생성한다. Thereafter, when the control unit 70 receives the input signal corresponding to the specific non-operation signal set as the control command through the input unit 20, the controller 70 detects the user's operation using the sensor unit 30 and generates a motion detection signal.

이때, 제어부(70)가 입력부(20)를 통해 입력 받는 입력 신호는, 예를 들어, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력될 수 있다.At this time, the input signal received by the control unit 70 through the input unit 20 includes, for example, an input signal of a specific button, a specific key input signal, a predetermined number of key input signals, A predetermined number of touch signals, a certain combination of touch signals, a touch signal having a certain range of strength, or a touch signal for a predetermined time range.

또한 제어부(70)는 센서부(30)에 포함된 속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 등의 감지 장비를 이용하여 사용자의 동작을 감지하고, 동작 감지 신호를 생성할 수 있다.The controller 70 senses the operation of the user using a sensing device such as a speed sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, an optical sensor, or a camera included in the sensor unit 30, Lt; / RTI >

그리고 제어부(70)는 이렇게 생성한 동작 감지 신호를, 해당 특정 비동작 신호와 함께 제어 명령으로 설정된 특정 동작 신호와 비교하여 서로 매칭되는지 확인한다. 그리고 제어부(70)가 확인한 결과 해당 특정 동작 신호와 동작 감지 신호가 매칭되면, 제어부(70)는 제어 명령에 따라 응용 프로그램을 제어한다.Then, the controller 70 compares the generated operation detection signal with the specific operation signal set as the control command together with the specific non-operation signal to check whether they match each other. If the specific operation signal and the motion detection signal are matched as a result of checking by the controller 70, the controller 70 controls the application program according to the control command.

예를 들어, 특정 응용 프로그램을 제어하기 위해, 터치 스크린을 한 번 터치하는 비동작 신호와, 사람이 고개를 가로젓는 동작 신호를 제어 명령으로 설정한 경우를 가정하자. 이 경우 사용자가 입력부(20)의 터치 스크린을 한 번 터치하면, 제어부(70)는 센서부(30)의 카메라를 가동하여 사용자의 동작을 촬영하고 픽셀 화소의 변화에 따라 동작을 감지한다. 그리고 사람이 고개를 가로젓는 동작과 유사한 동작 신호가 감지되면, 해당 제어 명령이 입력된 것으로 판단할 수 있다.For example, in order to control a specific application program, it is assumed that a non-operation signal that touches the touch screen once and a motion signal that the person transversely shakes the head are set as control commands. In this case, if the user touches the touch screen of the input unit 20 once, the controller 70 activates the camera of the sensor unit 30 to photograph the operation of the user and detect the operation according to the change of the pixel pixel. When an operation signal similar to the operation of straddling the head of a person is detected, it can be determined that the corresponding control command is input.

이때, 제어부(70)는 DTW(Dynamic Time Warping) 알고리즘을 이용하여, 동작 감지 신호와 특정 동작 신호를 비교할 수 있다.At this time, the control unit 70 can compare the operation detection signal with the specific operation signal using a DTW (Dynamic Time Warping) algorithm.

DTW 알고리즘은 시간축 상에서의 비선형 신축을 허용하는 패턴 매칭 알고리즘으로서, 이를 이용하면 패턴의 시퀀스를 시간의 길이를 고려하지 않고 인식할 수 있다.The DTW algorithm is a pattern matching algorithm that allows nonlinear expansion and contraction on the time axis. This allows the sequence of patterns to be recognized without considering the length of time.

이 경우 제어부(70)는 특정 동작 신호에 포함된 순차적인 사용자 동작 변화 패턴을, 동작 감지 신호에 포함된 수차적인 사용자 동작 변화 패턴과 비교하여 매칭 여부를 확인할 수 있다. 이때, 제어부(70)는 예를 들어, 사용자 동작의 변화 방향, 사용자 동작의 변화 강도 및 사용자 동작의 변화 비율 중 하나 이상의 사용자 동작 변화 패턴을 비교하여 매칭 여부를 확인할 수 있다.In this case, the controller 70 may compare the sequential user operation change pattern included in the specific operation signal with the aberration user operation change pattern included in the operation detection signal to confirm whether or not the matching is performed. At this time, the control unit 70 may compare at least one of the user operation change patterns, for example, the change direction of the user's operation, the change intensity of the user's operation, and the change rate of the user's operation.

또한 제어부(70)는 특정 동작 신호와 동작 감지 신호에서 변화율이 일정치 이상의 신호를 추출하여 비교할 수 있다. 이를 통해, 사용자가 의도하지 않은 신호를 배제하고, 유효 신호만을 매칭 여부 확인에 이용할 수 있다.Further, the control unit 70 can extract and compare the signal with a predetermined rate of change in the specific operation signal and the motion detection signal. This allows the user to exclude unintended signals and use only valid signals to verify matching.

본 실시예에서 제어부(70)는 신호 저장부(40)에 특정 동작 신호의 종류 정보를 더 저장하고, 해당 특정 동작 신호의 종류에 대응하는 신호를 동작 감지 신호에서 추출하여 상기 특정 동작 신호와 비교할 수 있다. 예를 들어, 신호 저장부(40)에 저장된 특정 동작 신호가 일정치 이상의 압력 신호인 경우, 제어부(70)는 동작 감지 신호에서 다른 제스처와 관련한 신호를 배제하고 압력과 관계된 신호만을 추출하여 비교 과정을 진행할 수 있다. 마찬가지로 신호 저장부(40)에 저장된 특정 동작 신호가 제어 장치(100)를 구비한 단말을 상하로 왕복 이동시키는 동작 신호인 경우, 제어부(70)는 단말의 상하 운동을 제외한 다른 방향으로의 동작 신호를 제외하고 비교 과정을 진행할 수 있다.In the present embodiment, the controller 70 further stores the type information of the specific operation signal in the signal storage unit 40, extracts a signal corresponding to the type of the specific operation signal from the operation detection signal, . For example, when the specific operation signal stored in the signal storage unit 40 is a pressure signal equal to or greater than a predetermined value, the controller 70 excludes signals related to other gestures from the operation detection signal, extracts only signals related to the pressure, . Similarly, when the specific operation signal stored in the signal storage unit 40 is an operation signal for reciprocating the terminal including the control apparatus 100 up and down, the control unit 70 determines that the operation signal in the other direction The comparison process can be performed.

또한 본 실시예에서 제어부(70)는 신호 저장부(40)에 특정 비동작 신호와 함께 복수의 특정 동작 신호를 복수의 제어 명령으로 설정할 수 있다. 이 경우 제어부(70)는 동작 감지 신호와 일정치 이상의 매칭률을 가지는 특정 동작 신호를 확인하여, 확인된 특정 동작 신호가 포함된 제어 명령을 수행할 수 있다.Also, in this embodiment, the control unit 70 can set a plurality of specific operation signals as a plurality of control commands in the signal storage unit 40 together with a specific non-operation signal. In this case, the controller 70 can confirm a specific operation signal having a match rate equal to or higher than a predetermined value with the operation sense signal, and can execute a control command including the specific operation signal.

본 발명의 일 실시예에 따라 제어 장치(100)가 제어 명령을 설정하는 모습에 대해서는 도 2 내지 도 4를 참조하여 좀 더 상세하게 설명하기로 한다.The manner in which the control apparatus 100 sets the control command according to an embodiment of the present invention will be described in more detail with reference to FIG. 2 to FIG.

도 2는 본 발명의 일 실시예에 따른 제어 장치(100)가, 비동작 신호를 등록하여 제어 명령으로 설정하는 모습을 나타낸 예시도이고, 도 3은 본 발명의 일 실시예에 따른 제어 장치(100)가 동작 신호를 등록하여 제어 명령으로 설정하는 모습을 나타낸 예시도이며, 도 4는 본 발명의 일 실시예에 따른 제어 장치(100)가 제어의 대상인 응용 프로그램의 기능을 선택하는 모습을 나타낸 예시도이다.FIG. 2 is a diagram illustrating an example in which a controller 100 according to an embodiment of the present invention registers a non-operation signal and sets the control command as a control command. FIG. 3 is a block diagram of a control apparatus FIG. 4 is a diagram illustrating a state in which the controller 100 selects a function of an application program to be controlled, according to an embodiment of the present invention. Fig.

도 2 내지 도 4는 제어 장치(100)가 구비된 단말의 디스플레이 화면을 나타내며, 비동작 신호 및 동작 신호를 등록하여 제어 명령으로 설정하기 위한 프로그램의 시각적 출력 형태를 도시하고 있다. 다만, 도 2 내지 도 4에 도시된 실시예는 본 발명의 설명을 위해 임의로 구성한 것에 불과하며, 본 발명에서는 실시예에 따라 화면에 표현되는 정보의 종류나 형태가 변경될 수 있다.2 to 4 show a display screen of a terminal equipped with the control apparatus 100, and show a visual output form of a program for registering non-operation signals and operation signals and setting them as control commands. However, the embodiments shown in FIGS. 2 to 4 are merely constructed for explaining the present invention. In the present invention, the types and forms of information displayed on the screen can be changed according to the embodiment.

도 2를 참조하면, 도 2(a)는 기 등록된 비동작 신호를 선택하기 위한 화면을 나타낸다. 도 2(a)에서는 '화면 터치'로 명명된 비동작 신호와, '# 키'로 명명된 비동작 신호를 선택할 수 있으며, 하단에는 '비동작 신호 등록'이라는 메뉴가 존재하여 사용자가 새로운 비동작 신호를 등록하도록 지원한다. 이때, '화면 터치'로 명명된 비동작 신호와, '# 키'로 명명된 비동작 신호는 제어 장치(100)가 기본 제공하는 비동작 신호일 수 있고, 사용자가 기 등록한 비동작 신호일 수도 있다.Referring to FIG. 2, FIG. 2 (a) shows a screen for selecting a previously registered non-operation signal. In FIG. 2A, a non-operation signal named 'screen touch' and a non-operation signal named '# key' can be selected, and a menu called 'non-operation signal registration' And to register the operation signal. At this time, the non-operation signal named 'touch screen' and the non-operation signal named '# key' may be non-operation signals provided by the control device 100, or non-operation signals previously registered by the user.

도 2(b)는 사용자가 도 2(a)의 '비동작 신호 등록' 메뉴를 선택하여, 새로운 비동작 신호를 입력해 줄 것을 요청하는 메시지가 출력된 상태를 나타낸다.2B shows a state in which a message requesting the user to input a new non-operation signal is output by selecting the 'non-operation signal registration' menu of FIG. 2 (a).

도 2(c)는 사용자가 새로운 비동작 신호인 '베젤 버튼 1'을 등록한 상태를 나타낸다. 즉, 도 2(b)와 같이 화면이 출력된 상태에서 사용자가 단말의 특정 베젤 버튼을 눌러 비동작 신호를 입력하고, 해당 비동작 신호의 명칭을 '베젤 버튼 1'으로 입력하면, 도 2(c)와 같이 '베젤 버튼 1'의 비동작 신호가 저장되어 등록된다.2C shows a state in which the user has registered a new non-operation signal 'bezel button 1'. 2 (b), when the user inputs a non-operation signal by pressing a specific bezel button of the terminal and inputs the name of the non-operation signal as a bezel button 1, the non-operation signal of the bezel button 1 is stored and registered.

도 2(d)는 사용자가 제어 명령에 사용할 비동작 신호로 '베젤 버튼 1'을 선택한 모습을 나타낸다.2 (d) shows the user selecting the 'bezel button 1' as the non-operation signal to be used for the control command.

도 3을 참조하면, 도 3(a)는 기 등록된 동작 신호를 선택하기 위한 화면을 나타낸다. 도 3(a)에서는 '단말 흔들기'로 명명된 비동작 신호와, '가로로 긋기'로 명명된 동작 신호를 선택할 수 있으며, 하단에는 '동작 신호 등록'이라는 메뉴가 존재하여 사용자가 새로운 동작 신호를 등록하도록 지원한다. 이때, '단말 흔들기'로 명명된 비동작 신호와, '가로로 긋기'로 명명된 동작 신호는 제어 장치(100)가 기본 제공하는 동작 신호일 수 있고, 사용자가 기 등록한 동작 신호일 수도 있다.Referring to FIG. 3, FIG. 3A shows a screen for selecting an already registered operation signal. In FIG. 3A, a non-operation signal named 'terminal shaking' and an operation signal named 'flushing' can be selected. In the lower part, there is a menu called 'register operation signal' . At this time, the non-operation signal named 'terminal shaking' and the operation signal named 'flip' may be an operation signal provided by the control device 100, or may be an operation signal registered by the user.

도 3(b)는 사용자가 도 3(a)의 '동작 신호 등록' 메뉴를 선택하여, 새로운 동작 신호를 입력해 줄 것을 요청하는 메시지가 출력된 상태를 나타낸다.3B shows a state in which a message requesting the user to input a new operation signal is output by selecting the 'operation signal registration' menu of FIG. 3 (a).

도 3(c)는 사용자가 새로운 동작 신호인 '세로로 긋기'를 등록한 상태를 나타낸다. 즉, 도 3(b)와 같이 화면이 출력된 상태에서 사용자가 단말을 상하로 왕복하여 움직이면, 제어 장치(100)는 대응하는 단말의 움직임을 감지해 동작 신호를 입력받고, 사용자로부터 해당 동작 신호의 명칭으로 '세로로 긋기'를 입력받으며, 그 결과 도 3(c)와 같이 '세로로 긋기'의 비동작 신호가 저장되어 등록된다.3 (c) shows a state in which the user registers a new operation signal 'vertical flicker'. 3 (b), when the user moves the terminal vertically, the control apparatus 100 senses the movement of the corresponding terminal and receives an operation signal, As a result, the non-operation signal of 'vertical flushing' is stored and registered as shown in FIG. 3 (c).

도 3(d)는 사용자가 제어 명령에 사용할 동작 신호로 '세로로 긋기'를 선택한 모습을 나타내며, 이때 대응하는 비동작 신호로 '베젤 버튼 1'이 선택되어 있음을 확인할 수 있다.FIG. 3 (d) shows a state in which the user selects 'vertical flicking' as an operation signal to be used in the control command, and it can be confirmed that the 'bezel button 1' is selected as the corresponding non-operation signal.

도 4를 참조하면, 도 4(a)는 '베젤 버튼 1'의 비동작 신호와 '세로로 긋기'의 동작 신호로 이루어진 제어 명령에 따라 제어될 응용 프로그램을 선택하기 위한 화면을 나타낸다. 도 4(a)에서는 'APP 실행'의 응용 프로그램과, '기능 ON/OFF'의 응용 프로그램을 선택할 수 있다. 이때, 'APP 실행'의 응용 프로그램과, '기능 ON/OFF'의 응용 프로그램은 프로그램 제공자가 설정한 프로그램 명칭일 수 있고, 사용자가 임의로 지정한 명칭일 수 있다.Referring to FIG. 4, FIG. 4 (a) shows a screen for selecting an application program to be controlled according to a control command composed of a non-operation signal of the bezel button 1 and an operation signal of a vertical flip operation. In FIG. 4 (a), an application program of 'APP execution' and an application program of 'function ON / OFF' can be selected. At this time, the application program of 'APP execution' and the application program of 'function ON / OFF' may be a program name set by the program provider, and may be a name arbitrarily designated by the user.

도 4(b)는 사용자가 도 3(a)의 'APP 실행' 응용 프로그램을 선택한 결과, 세부 프로그램으로 '메신저', '음원 재생', '카메라'의 응용 프로그램을 선택할 수 있는 상태를 나타낸다.4B shows a state in which the user can select an application program of 'Messenger', 'Play sound source', or 'Camera' as a detailed program as a result of selecting the 'APP execution' application program of FIG.

도 4(c)는 사용자가 도 4(b)에서 '음원 재생' 응용 프로그램을 선택하여, 해당 '음원 재생' 응용 프로그램의 세부 기능을 선택할 수 있는 상태를 나타낸다. 이때 선택할 수 있는 '음원 재생' 응용 프로그램의 기능은 '이전 곡 선택', '다음 곡 선택', '일시정지' 등이 있다.4 (c) shows a state in which the user can select the detailed function of the 'sound source reproduction' application program by selecting the 'sound source reproduction' application program in FIG. 4 (b). At this time, 'Sound Recording' application programs that can be selected are 'Select Previous Song', 'Select Next Song', 'Pause' and so on.

도 4(d)는 도 4(c)에서 사용자가 '일시정지' 기능을 선택하여, 제어 명령이 '음원 재생' 응용 프로그램의 '일시정지' 기능을 제어하기 위한 명령어로 설정된 상태를 나타낸다.4 (d) shows a state in which the user selects the 'pause' function and the control command is set as a command for controlling the 'pause' function of the 'sound source playback' application program in FIG. 4 (c).

도 2 내지 도 4에서는 단일 응용 프로그램의 특정 기능을 실행하기 위해 제어 명령을 설정하는 예를 도시하였지만, 본 발명의 기술적 범위는 이에 한정되는 것이 아니다. 즉 본 발명에서는 단일 응용 프로그램을 실행하는 경우, 복수의 응용 프로그램을 연계하여 실행하는 경우, 복수의 응용 프로그램의 기능들을 연계하여 실행하는 경우 등 각각의 제어 명령에 따라 응용 프로그램을 제어하기 위한 다양한 실시예가 존재할 수 있고, 이 모든 기술적 사상은 본 발명의 기술적 범위에 포함된다.Although FIGS. 2 to 4 show an example of setting a control command to perform a specific function of a single application program, the technical scope of the present invention is not limited thereto. That is, according to the present invention, when executing a single application program, when a plurality of application programs are executed in conjunction with each other, when a plurality of application programs are linked and executed, And all such technical ideas are included in the technical scope of the present invention.

본 발명의 일 실시예에 따라 제어 명령을 설정하고 응용 프로그램을 제어하는 과정에 대해서는 도 5를 참조하여 좀 더 상세하게 설명하기로 한다.A process of setting a control command and controlling an application program according to an embodiment of the present invention will be described in more detail with reference to FIG.

도 5는 본 발명의 일 실시예에 따른 제어 방법의 흐름도이다.5 is a flowchart of a control method according to an embodiment of the present invention.

도 5를 참조하면, 본 실시예의 제어 장치는 버튼 입력, 키 입력 또는 터치 입력을 기반으로 비동작 신호를 입력받아 등록하고(S1), 사용자 동작을 기반으로 동작 신호를 입력받아 등록한다(S2).5, the controller of the present embodiment receives and registers a non-operation signal based on a button input, a key input, or a touch input (S1), receives an operation signal based on a user operation, .

단계(S1)에서 제어 장치가 입력 받는 비동작 신호는, 예를 들어, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력된 것을 수 있다. 이때 제어 장치는, 예를 들어 버튼, 키패드, 키보드, 마우스, 터치 패드, 터치 스크린 또는 정보 입력 패널 등의 입력 장치를 이용해 비동작 신호를 입력받을 수 있다.The non-operation signal received by the control device in step S1 includes, for example, an input signal of a specific button, a specific key input signal, a predetermined number of key input signals, a certain combination of key input signals, , A predetermined number of touch signals, a certain combination of touch signals, a touch signal having a certain range of strength, or a touch signal for a predetermined time range. At this time, the control device can receive a non-operation signal using an input device such as a button, a keypad, a keyboard, a mouse, a touch pad, a touch screen, or an information input panel.

또한 단계(S2)에서 제어 장치가 입력 받는 동작 신호는, 예를 들어, 가속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 등의 감지 장비 이용해 감지한 사용자의 동작이나 단말의 움직임에 따라 입력된 것일 수 있다.The operation signal received by the controller in step S2 may be a motion of a user sensed by using a sensing device such as an acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, an optical sensor, May be input according to the motion of the user.

단계(S1)에서 제어 장치가 입력받은 비동작 신호 및 단계(S2)에서 제어 장치가 입력받은 동작 신호는 제어 장치 내부의 저장소에 저장되는데, 이때 제어 장치는 기 저장된 신호와의 중복 여부를 판단하여 중복되지 않는 경우에만 저장 동작을 수행할 수 있다. 이때, 중복되는 경우라면 제어 장치는 중복 사실을 시청각적으로 출력하여 사용자에게 알림으로서, 다른 비동작 신호나 동작 신호를 입력하도록 유도할 수 있다.The non-operation signal input by the control device in step S1 and the operation signal input by the control device in step S2 are stored in a storage in the control device. The control device determines whether the non- The storage operation can be performed only when no duplication occurs. At this time, if they are overlapped, the control device can audibly output the redundant facts and guide the user to input another non-operation signal or operation signal as a notification.

이후 제어 장치는 단계(S1)에서 저장한 비동작 신호의 정보 및 단계(S2)에서 저장한 동작 신호의 정보를 화면 등에 출력하고, 이를 확인한 사용자의 입력에 따라 특정 비동작 신호를 선택받고(S3), 특정 동작 신호를 선택 받는다(S4).Thereafter, the control device outputs the information of the non-operation signal stored in step S1 and the information of the operation signal stored in step S2 on a screen or the like, selects a specific non-operation signal according to the user's input, , A specific operation signal is selected (S4).

그리고 제어 장치는 단계(S3)에서 선택받은 특정 비동작 신호와, 단계(S4)에서 선택받은 특정 동작 신호를 응용 프로그램을 제어하기 위한 제어 명령으로 설정한다(S5).Then, the controller sets the specific non-operation signal selected in step S3 and the specific operation signal selected in step S4 as a control command for controlling the application program (S5).

단계(S5)에서 설정되는 제어 명령은 제어 장치가 속한 단말의 특정 응용 프로그램을 제어하기 위한 명령 세트이며, 예를 들어, 특정 응용 프로그램을 실행하기 위한 것이거나, 응용 프로그램의 특정 기능을 실행하기 위한 것이거나, 복수의 응용 프로그램을 순차적으로 실행하기 위한 것이거나, 복수의 응용 프로그램 중 특정 응용 프로그램과 다른 응용 프로그램의 기능을 순차적으로 실행하기 위한 것이거나, 복수의 응용 프로그램 각각의 기능을 순차적으로 실행하기 위한 것일 수 있다.The control command set in step S5 is a set of instructions for controlling a specific application program of a terminal to which the control device belongs. For example, the control command is for executing a specific application program, Or sequentially executing a plurality of application programs, or sequentially executing functions of a specific application program and another application program among a plurality of application programs, or sequentially executing functions of a plurality of application programs . ≪ / RTI >

단계(S5)의 제어 장치는, 사용자 입력 등에 따라 제어 명령에 대한 명칭이나 설명을 부가하여, 해당 제어 명령의 정보와 함께 저장할 수 있다.The control device of step S5 may add a name or a description of the control command in accordance with the user input and store it together with the information of the control command.

이후, 제어 장치는 사용자로부터 버튼 입력, 키 입력, 터치 입력 등을 이용해, 단계(S5)에서 설정된 제어 명령에 속한 특정 비동작 신호에 대응하는 입력 신호를 입력 받는다(S6).Thereafter, the control device receives an input signal corresponding to a specific non-operation signal belonging to the control command set in step S5, using a button input, a key input, a touch input, or the like (S6).

단계(S6)에서 제어 장치가 입력 받는 입력 신호는, 예를 들어, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력될 수 있다.The input signal received by the control device in step S6 includes, for example, an input signal of a specific button, a specific key input signal, a predetermined number of key input signals, a certain combination key input signal, A predetermined number of touch signals, a predetermined combination of touch signals, a touch signal having a certain range of strength, or a touch signal for a predetermined time range.

단계(S6)에서 특정 비동작 신호에 대응하는 입력 신호를 입력받은 제어 장치는, 속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 등의 감지 장비를 이용하여 사용자의 동작이나 단말의 움직임을 감지하고, 감지 결과에 따라 동작 감지 신호를 생성한다(S7).In step S6, the control device that receives the input signal corresponding to the specific non-operation signal receives the operation signal of the user using a sensing device such as a speed sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, Or the movement of the terminal, and generates an operation detection signal according to the detection result (S7).

그리고 제어 장치는 단계(S5)에서 설정한 제어 명령에 포함된 특정 동작 신호와, 단계(S7)에서 생성한 동작 감지 신호를 비교하여 매칭 여부를 확인한다(S8).In step S8, the control device compares the specific operation signal included in the control command set in step S5 with the motion detection signal generated in step S7, and confirms whether or not the motion detection signal is matched.

단계(S8)의 제어 장치는, 예를 들어, 시간축 상에서의 비선형 신축을 허용하는 패턴 매칭 알고리즘인 DTW(Dynamic Time Warping) 알고리즘을 이용하여, 동작 감지 신호와 특정 동작 신호를 비교하고 매칭 여부를 확인할 수 있다.The control device of step S8 compares the motion detection signal with a specific motion signal using a DTW (Dynamic Time Warping) algorithm, which is a pattern matching algorithm that permits non-linear expansion and contraction on the time axis, .

또한 단계(S8)의 제어 장치는, 예를 들어, 특정 동작 신호에 포함된 순차적인 사용자 동작 변화 패턴을, 동작 감지 신호에 포함된 수차적인 사용자 동작 변화 패턴과 비교하여 매칭 여부를 확인할 수 있다. 이때 제어 장치는 사용자 동작의 변화 방향, 사용자 동작의 변화 강도 및 사용자 동작의 변화 비율 중 하나 이상의 사용자 동작 변화 패턴을 비교하여 매칭 여부를 확인할 수 있다.In addition, the controller of step S8 may check whether the sequential user operation change pattern included in the specific operation signal is matched with the aberration user operation change pattern included in the operation detection signal, for example. At this time, the controller can compare one or more user operation change patterns among the change direction of the user operation, the change intensity of the user operation, and the change rate of the user operation, thereby confirming whether or not the matching is performed.

더하여 단계(S8)의 제어 장치는, 특정 동작 신호와 동작 감지 신호에서 변화율이 일정치 이상의 신호를 추출하여 비교할 수 있고, 이에 따라 사용자가 의도하지 않은 신호를 배제하고, 유효 신호만을 매칭 여부 확인에 이용할 수 있다.In addition, the control device of step S8 can extract and compare the signal with a predetermined rate of change in the specific operation signal and the motion detection signal, thereby excluding the signal that is not intended by the user, Can be used.

그리고 단계(S8)의 제어 장치는, 특정 동작 신호의 종류 정보를 더 저장하고, 해당 특정 동작 신호의 종류에 대응하는 신호를 동작 감지 신호에서 추출하여 상기 특정 동작 신호와 비교하는 방식으로 매칭 여부를 확인할 수도 있다.The controller of the step S8 further stores the type information of the specific operation signal, extracts a signal corresponding to the type of the specific operation signal from the operation detection signal, and compares the type with the specific operation signal. You can also check.

단계(S8)에서 동작 감지 신호와 특정 동작 신호가 매칭됨을 확인한 제어 장치는, 제어 명령에 대응하는 응용 프로그램을 제어한다(S9).In step S8, the control device confirms that the operation detection signal and the specific operation signal are matched, and controls the application program corresponding to the control command (S9).

만일 제어 장치가 특정 비동작 신호와 함께 복수의 특정 동작 신호를 복수의 제어 명령으로 설정한 경우라면, 단계(S9)의 제어 장치는 동작 감지 신호와 일정치 이상의 매칭률을 가지는 특정 동작 신호를 확인하여, 확인된 특정 동작 신호가 포함된 제어 명령을 수행할 수 있다.If the control device sets a plurality of specific operation signals together with a specific non-operation signal as a plurality of control instructions, the control device of step S9 confirms a specific operation signal having a matching rate equal to or higher than a predetermined value, So that the control command including the identified specific operation signal can be executed.

본 발명의 실시예에 따른 제어 방법은 다양한 컴퓨터 수단을 통하여 판독 가능한 프로그램 형태로 구현되어 컴퓨터로 판독 가능한 기록매체에 기록될 수 있다. The control method according to an embodiment of the present invention may be implemented in a form of a program readable by various computer means and recorded in a computer-readable recording medium.

한편, 본 명세서와 도면에 개시된 실시예들은 이해를 돕기 위해 특정 예를 제시한 것에 지나지 않으며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형예들이 실시 가능하다는 것은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게는 자명한 것이다. 또한, 본 명세서와 도면에서 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다.On the other hand, the embodiments disclosed in the specification and drawings are merely presented specific examples to aid understanding, and are not intended to limit the scope of the present invention. It will be apparent to those skilled in the art that other modifications based on the technical idea of the present invention are possible in addition to the embodiments disclosed herein. Furthermore, although specific terms are used in this specification and the drawings, they are used in a generic sense only to facilitate the description of the invention and to facilitate understanding of the invention, and are not intended to limit the scope of the invention.

10: 표시부
20: 입력부
30: 센서부
40: 신호 저장부
50: 응용 프로그램 저장부
60: 제어 명령 저장부
70: 제어부
100: 제어 장치10:
20: input unit
30: sensor unit
40: Signal storage unit
50: Application program storage
60: Control command storage section
70:
100: Control device

Claims (27)

버튼 입력, 키 입력 또는 터치 입력을 기반으로 비동작 신호를 입력받아 등록하고, 사용자 동작을 기반으로 동작 신호를 입력받아 등록하는 등록 단계;
상기 비동작 신호 중 특정 비동작 신호를 선택받고, 상기 동작 신호 중 특정 동작 신호를 선택받아, 응용 프로그램을 제어하기 위한 제어 명령으로 설정하는 설정 단계;
상기 특정 비동작 신호에 대응하는 입력 신호를 입력받으면, 사용자 동작을 감지하여 동작 감지 신호를 생성하고, 상기 동작 감지 신호와 상기 특정 동작 신호를 비교하여 매칭되는지 확인하는 확인 단계; 및
확인 결과 상기 동작 감지 신호와 상기 특정 동작 신호가 매칭되면, 상기 제어 명령에 따라 상기 응용 프로그램을 제어하는 제어 단계;
를 포함하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.A registration step of receiving and registering a non-operation signal based on a button input, a key input, or a touch input, and receiving and registering an operation signal based on a user operation;
A setting step of selecting a specific non-operation signal among the non-operation signals, selecting a specific operation signal among the operation signals, and setting the selected operation signal as a control command for controlling an application program;
Receiving an input signal corresponding to the specific non-operation signal, generating an operation detection signal by sensing a user operation, comparing the operation detection signal with the specific operation signal, and confirming whether the operation signal is matched; And
A control step of controlling the application program according to the control command when the operation detection signal matches the specific operation signal;
Device control method based on the non-operation signal and the operation signal comprising a. 제1항에 있어서,
상기 비동작 신호 또는 상기 특정 비동작 신호에 대응하는 입력 신호는,
특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력되는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein the non-operating signal or the input signal corresponding to the specific non-
A certain number of key input signals, a predetermined number of key input signals, a certain combination of key input signals, a touch signal for a certain area, a certain number of touch signals, a certain combination of touch signals, Wherein the input signal is input according to a touch signal or a touch signal for a predetermined time range. 제1항에 있어서,
상기 동작 신호 또는 상기 동작 감지 신호는,
가속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 중 적어도 하나를 이용하여 입력받거나 감지하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein the operation signal or the motion detection signal includes:
Wherein at least one of an acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, an optical sensor or a camera is used to receive or sense the input signal. 제1항에 있어서,
상기 등록 단계는,
상기 비동작 신호 또는 상기 동작 신호를 등록하기 전에, 기 등록된 신호와의 중복 여부를 판단하여, 판단 결과 중복되는 경우 중복 사실을 출력하고, 판단 결과 중복되지 않는 경우 등록하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
The registration step,
Wherein the non-operation signal or the operation signal is registered before the registration of the non-operation signal or the operation signal, and when the determination result is duplicated, the duplication fact is outputted, A device control method based on signals and motion signals. 제1항에 있어서,
상기 등록 단계는,
상기 비동작 신호 또는 상기 동작 신호에 명칭이나 설명을 부여하여 등록하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
The registration step,
Wherein the non-operation signal or the operation signal is registered by assigning a name or a description to the non-operation signal or the operation signal. 제1항에 있어서,
상기 제어 명령은,
상기 응용 프로그램을 실행하기 위한 것이거나, 상기 응용 프로그램 중 특정 기능을 실행하기 위한 것이거나, 복수의 상기 응용 프로그램을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 중 특정 응용 프로그램과 다른 응용 프로그램의 기능을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 각각의 기능을 순차적으로 실행하기 위한 것임을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
The control command includes:
A program for executing a specific function among the application programs, a program for sequentially executing a plurality of the application programs, a program for executing a specific function among the plurality of application programs, And sequentially executing the functions of the plurality of application programs, or sequentially executing the functions of the plurality of application programs. 제1항에 있어서,
상기 설정 단계는,
상기 제어 명령에 명칭이나 설명을 부여하여 설정하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein, in the setting step,
Wherein the control command is given a name or a description and is set. 제1항에 있어서,
상기 확인 단계는,
상기 특정 동작 신호와 상기 동작 감지 신호를 DTW(Dynamic Time Warping) 알고리즘을 이용해 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein,
Wherein the specific operation signal and the motion detection signal are compared using a DTW (Dynamic Time Warping) algorithm. 제1항에 있어서,
상기 확인 단계는,
상기 특정 동작 신호에 포함된 순차적인 사용자 동작 변화 패턴을, 상기 동작 감지 신호에 포함된 순차적인 사용자 동작 변화 패턴과 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein,
Wherein the sequential user operation change pattern included in the specific operation signal is compared with a sequential user operation change pattern included in the operation detection signal. 제9항에 있어서,
상기 확인 단계는,
사용자 동작의 변화 방향, 사용자 동작의 변화 강도 및 사용자 동작의 변화 비율 중 하나 이상의 사용자 동작 변화 패턴을 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.10. The method of claim 9,
Wherein,
Wherein the comparing means compares at least one of a user's operation change pattern, a change direction of the user's operation, a change intensity of the user's operation, and a change rate of the user's operation, based on the non-operation signal and the operation signal. 제1항에 있어서,
상기 확인 단계는,
상기 특정 동작 신호와 상기 동작 감지 신호에서, 변화율이 일정치 이상의 신호를 추출하여 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein,
And extracting and comparing signals having a rate of change equal to or greater than a predetermined value in the specific operation signal and the operation detection signal, based on the non-operation signal and the operation signal. 제1항에 있어서,
상기 등록 단계는, 상기 특정 동작 신호의 종류 정보를 더 등록하고,
상기 확인 단계는, 상기 특정 동작 신호의 종류에 대응하는 신호를 상기 동작 감지 신호에서 추출하여 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
The registering step further registers the type information of the specific operation signal,
Wherein the checking step comprises extracting a signal corresponding to the type of the specific operation signal from the motion detection signal and comparing the extracted signal with the operation detection signal. 제1항에 있어서,
상기 확인 단계는,
상기 특정 비동작 신호와 함께 제어 명령으로 설정된 복수의 특정 동작 신호를 조회하여, 상기 동작 감지 신호와 일정치 이상의 매칭률을 가지는 상기 특정 동작 신호를 확인하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 장치 제어 방법.The method of claim 1,
Wherein,
And a specific operation signal having a matching rate equal to or higher than a predetermined value with the operation detection signal is inquired for a specific operation signal set as a control instruction together with the specific non- Based device control method. 정보 표현을 위한 표시부;
버튼 입력, 키 입력 또는 터치 입력을 위한 입력부;
사용자 동작을 감지하는 센서부;
상기 입력부를 통해 입력된 비동작 신호를 저장하고, 상기 센서부에서 감지한 동작에 따라 입력된 동작 신호를 저장하는 신호 저장부;
응용 프로그램의 저장을 위한 응용 프로그램 저장부;
상기 비동작 신호 중에서 선택된 특정 비동작 신호와, 상기 동작 신호 중에서 선택된 특정 동작 신호를 포함하여, 상기 응용 프로그램을 제어하기 위해 설정된 제어 명령을 저장하는 제어 명령 저장부;
상기 입력부를 이용하여 상기 비동작 신호를 입력 받아 상기 신호 저장부에 저장하고, 상기 센서부를 통하여 상기 동작 신호를 입력 받아 상기 신호 저장부에 저장하며, 상기 표시부에 상기 비동작 신호 및 상기 동작 신호의 정보를 표시하여 상기 특정 비동작 신호 및 상기 특정 동작 신호를 선택 받아, 상기 응용 프로그램을 제어하기 위한 상기 제어 명령으로 설정하여 상기 제어 명령 저장부에 저장하고, 상기 입력부를 통해 상기 특정 비동작 신호에 대응하는 입력 신호를 입력받으면, 상기 센서부를 이용해 사용자 동작을 감지하여 동작 감지 신호를 생성하고, 상기 동작 감지 신호와 상기 특정 동작 신호를 비교하여 매칭되는지 확인하며, 상기 확인한 결과 상기 동작 감지 신호와 상기 특정 동작 신호가 매칭되면, 상기 제어 명령에 따라 상기 응용 프로그램을 제어하는 제어부;
를 포함하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.A display for displaying information;
An input unit for button input, key input or touch input;
A sensor unit for sensing a user operation;
A signal storage unit for storing a non-operation signal input through the input unit and storing an operation signal input according to an operation sensed by the sensor unit;
An application storage unit for storing an application program;
A control command storage unit for storing a control command for controlling the application program, including a specific non-operation signal selected from the non-operation signals and a specific operation signal selected from the operation signals;
Receiving the non-operating signal by using the input unit, storing the non-operating signal in the signal storing unit, receiving the operating signal through the sensor unit, storing the received operating signal in the signal storing unit, and displaying the non-operating signal and the operating signal Operation signal and the specific operation signal, sets the control command for controlling the application program and stores the control command in the control command storage unit, and outputs the specific non-operation signal and the specific operation signal to the control command storage unit And a controller for detecting a user operation using the sensor unit to generate an operation detection signal and comparing the operation detection signal with the specific operation signal to check whether the corresponding operation signal is matched, When the specific operation signal is matched, A control unit for controlling the program;
Control device based on the non-operation signal and the operation signal comprising a. 제14항에 있어서,
상기 입력부는, 버튼, 키패드, 키보드, 마우스, 터치 패드, 터치 스크린 또는 정보 입력 패널 중 하나 이상을 포함하고,
상기 비동작 신호 또는 상기 특정 비동작 신호에 대응하는 입력 신호는, 특정 버튼의 입력 신호, 특정 키 입력 신호, 일정 횟수의 키 입력 신호, 일정 조합의 키 입력 신호, 일정 영역에 대한 터치 신호, 일정 횟수의 터치 신호, 일정 조합의 터치 신호, 일정 범위의 세기를 가진 터치 신호, 또는 일정 시간 범위 동안의 터치 신호에 따라 입력되는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
Wherein the input unit includes at least one of a button, a keypad, a keyboard, a mouse, a touchpad, a touch screen, or an information input panel,
The non-operation signal or the input signal corresponding to the specific non-operation signal may include at least one of an input signal of a specific button, a specific key input signal, a predetermined number of key input signals, a key input signal of a certain combination, Wherein the control signal is input according to a touch signal of a predetermined number of times, a touch signal of a certain combination, a touch signal of a predetermined range of intensity, or a touch signal of a predetermined time range. 제14항에 있어서,
상기 센서부는,
사용자 동작을 감지하는 가속도 센서, 중력 센서, 자이로 센서, 토크 센서, 압력 센서, 광 센서 또는 카메라 중 적어도 하나를 포함하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The sensor unit includes:
An acceleration sensor, a gravity sensor, a gyro sensor, a torque sensor, a pressure sensor, an optical sensor, or a camera for detecting user's motion. 제14항에 있어서,
상기 제어부는,
상기 비동작 신호 또는 상기 동작 신호를 저장하기 전에, 상기 신호 저장부에 기 저장된 신호와의 중복 여부를 판단하여, 판단 결과 중복되는 경우 상기 표시부에 중복 사실을 출력하고, 판단 결과 중복되지 않는 경우 상기 신호 저장부에 저장하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
Wherein the control unit determines whether the signal stored in the signal storage unit is overlapped with the signal stored before the non-operation signal or the operation signal is stored, and outputs the redundancy to the display unit when the determination result indicates that the signal is redundant. And the signal is stored in a signal storage unit. 제14항에 있어서,
상기 제어부는,
상기 신호 저장부에 상기 비동작 신호 또는 상기 동작 신호에 대한 명칭이나 설명을 더 저장하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
Wherein the non-operation signal and the operation signal are stored in the signal storage unit. 제14항에 있어서,
상기 제어 명령은,
상기 응용 프로그램을 실행하기 위한 것이거나, 상기 응용 프로그램 중 특정 기능을 실행하기 위한 것이거나, 복수의 상기 응용 프로그램을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 중 특정 응용 프로그램과 다른 응용 프로그램의 기능을 순차적으로 실행하기 위한 것이거나, 복수의 상기 응용 프로그램 각각의 기능을 순차적으로 실행하기 위한 것임을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control command includes:
A program for executing a specific function among the application programs, a program for sequentially executing a plurality of the application programs, a program for executing a specific function among the plurality of application programs, And sequentially executing the functions of the plurality of application programs, or sequentially executing the functions of the plurality of application programs based on the non-operating signal and the operating signal. 제14항에 있어서,
상기 제어부는,
상기 제어 명령 저장부에 상기 제어 명령에 대한 명칭이나 설명을 더 저장하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
Wherein the controller further stores a name or a description of the control command in the control command storage unit based on the non-operation signal and the operation signal. 제14항에 있어서,
상기 제어부는,
상기 특정 동작 신호와 상기 동작 감지 신호를 DTW(Dynamic Time Warping) 알고리즘을 이용해 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
Wherein the specific operation signal and the motion detection signal are compared using a DTW (Dynamic Time Warping) algorithm. 제14항에 있어서,
상기 제어부는,
상기 특정 동작 신호에 포함된 순차적인 사용자 동작 변화 패턴을, 상기 동작 감지 신호에 포함된 순차적인 사용자 동작 변화 패턴과 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
Wherein the sequential user operation change pattern included in the specific operation signal is compared with a sequential user operation change pattern included in the operation detection signal. 제22항에 있어서,
상기 제어부는,
사용자 동작의 변화 방향, 사용자 동작의 변화 강도 및 사용자 동작의 변화 비율 중 하나 이상의 사용자 동작 변화 패턴을 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.The method of claim 22,
The control unit,
Wherein the comparison unit compares at least one of the user operation change patterns, the change direction of the user operation, the change intensity of the user operation, and the change ratio of the user operation based on the non-operation signal and the operation signal. 제14항에 있어서,
상기 제어부는,
상기 특정 동작 신호와 상기 동작 감지 신호에서, 변화율이 일정치 이상의 신호를 추출하여 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
And extracts and compares signals having a rate of change equal to or greater than a predetermined value in the specific operation signal and the operation detection signal, based on the non-operation signal and the operation signal. 제14항에 있어서,
상기 제어부는,
상기 신호 저장부에 상기 특정 동작 신호의 종류 정보를 더 저장하고, 상기 특정 동작 신호의 종류에 대응하는 신호를 상기 동작 감지 신호에서 추출하여 상기 특정 동작 신호와 비교하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
Wherein the type of the specific operation signal is further stored in the signal storage unit and a signal corresponding to the type of the specific operation signal is extracted from the operation detection signal and is compared with the specific operation signal. A control device based on an operating signal. 제14항에 있어서,
상기 제어부는,
상기 특정 비동작 신호와 함께 제어 명령으로 설정된 복수의 특정 동작 신호를 조회하여, 상기 동작 감지 신호와 일정치 이상의 매칭률을 가지는 상기 특정 동작 신호를 확인하는 것을 특징으로 하는 비동작 신호 및 동작 신호에 기반한 제어 장치.15. The method of claim 14,
The control unit,
And a specific operation signal having a matching rate equal to or higher than a predetermined value with the operation detection signal is inquired for a specific operation signal set as a control instruction together with the specific non- Based control device. 제1항 내지 제13항 중 어느 한 항에 따른 방법을 수행하는 프로그램을 기록한 컴퓨터 판독 가능 기록매체.A computer-readable recording medium having recorded thereon a program for performing the method according to any one of claims 1 to 13.
KR1020120147157A 2012-09-12 2012-12-17 Control device based on non-motion signal and motion signal, and device control method thereof KR101474873B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20120101090 2012-09-12
KR1020120101090 2012-09-12

Publications (2)

Publication Number Publication Date
KR20140034666A true KR20140034666A (en) 2014-03-20
KR101474873B1 KR101474873B1 (en) 2014-12-19

Family

ID=50645044

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120147157A KR101474873B1 (en) 2012-09-12 2012-12-17 Control device based on non-motion signal and motion signal, and device control method thereof

Country Status (1)

Country Link
KR (1) KR101474873B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112582063A (en) * 2019-09-30 2021-03-30 长沙昱旻信息科技有限公司 BMI prediction method, device, system, computer storage medium, and electronic apparatus

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100634530B1 (en) 2004-10-05 2006-10-16 삼성전자주식회사 Method and apparatus for character input and function selection by combining user's key input and motion

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112582063A (en) * 2019-09-30 2021-03-30 长沙昱旻信息科技有限公司 BMI prediction method, device, system, computer storage medium, and electronic apparatus

Also Published As

Publication number Publication date
KR101474873B1 (en) 2014-12-19

Similar Documents

Publication Publication Date Title
EP3461291B1 (en) Implementation of a biometric enrollment user interface
KR102578253B1 (en) Electronic device and method for acquiring fingerprint information thereof
KR102127308B1 (en) Operation method and apparatus using fingerprint identification, and mobile terminal
KR102003255B1 (en) Method and apparatus for processing multiple inputs
US10416777B2 (en) Device manipulation using hover
KR102255774B1 (en) Interacting with a device using gestures
US9665276B2 (en) Character deletion during keyboard gesture
US20130211843A1 (en) Engagement-dependent gesture recognition
KR102318610B1 (en) Mobile device and displaying method thereof
KR20160058117A (en) Systems and methods for providing response to user input using information about state changes predicting future user input
TW201602893A (en) Method for providing auxiliary information and touch control display apparatus using the same
US10572134B2 (en) Method and system for providing prototyping tool, and non-transitory computer-readable recording medium
KR102521192B1 (en) Electronic apparatus and operating method thereof
CN107924286B (en) Electronic device and input method of electronic device
US20170047065A1 (en) Voice-controllable image display device and voice control method for image display device
KR20140055880A (en) Method and apparatus for controlling virtual screen
CN109828672A (en) It is a kind of for determining the method and apparatus of the human-machine interactive information of smart machine
CN103761041A (en) Information processing method and electronic device
CN106200900A (en) Based on identifying that the method and system that virtual reality is mutual are triggered in region in video
KR20140009687A (en) Method for processing composite inputs using macro function and device thereof
KR101474873B1 (en) Control device based on non-motion signal and motion signal, and device control method thereof
US20140168106A1 (en) Apparatus and method for processing handwriting input
US9536526B2 (en) Electronic device with speaker identification, method and storage medium
TW201621651A (en) Mouse simulation system and method
KR20100011336A (en) Information processing apparatus and method for moving image thereof

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant