KR20120000807A - Apparatus for controlling digital device based on motion recognition and method thereof - Google Patents

Apparatus for controlling digital device based on motion recognition and method thereof Download PDF

Info

Publication number
KR20120000807A
KR20120000807A KR1020100061271A KR20100061271A KR20120000807A KR 20120000807 A KR20120000807 A KR 20120000807A KR 1020100061271 A KR1020100061271 A KR 1020100061271A KR 20100061271 A KR20100061271 A KR 20100061271A KR 20120000807 A KR20120000807 A KR 20120000807A
Authority
KR
South Korea
Prior art keywords
motion
digital device
motion recognition
recognized
control
Prior art date
Application number
KR1020100061271A
Other languages
Korean (ko)
Inventor
이형수
강현규
김순태
Original Assignee
주식회사 셀런
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 셀런 filed Critical 주식회사 셀런
Priority to KR1020100061271A priority Critical patent/KR20120000807A/en
Publication of KR20120000807A publication Critical patent/KR20120000807A/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PURPOSE: A digital device control apparatus is provided to process the motion of a user as an input signal by providing a motion recognizing lock canceling function. CONSTITUTION: A control unit(160) controls a digital device(200) according to the recognized motion of a motion recognition unit(140). In case the motion recognition unit recognizes a first motion among plural motions, the control unit stops the control of the digital device according to the recognized motion. In case a second motion is recognized among plural motions, the control unit performs the control of the digital device according to the recognized motion.

Description

모션 인식을 이용한 디지털 디바이스 제어 장치 및 제어 방법 {Apparatus for controlling digital device based on motion recognition and method thereof}Apparatus for controlling digital device based on motion recognition and method

본 발명은 디지털 디바이스의 제어 방법 및 장치에 관한 것으로, 특히 모션 인식을 이용한 디지털 디바이스의 제어 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for controlling a digital device, and more particularly, to a method and apparatus for controlling a digital device using motion recognition.

셋톱박스, 디지털 TV와 같은 디지털 디바이스의 제어를 용이하게 하기 위하여 대부분의 디바이스에는 리모컨이 함께 제공되고 있다. 또한, 디지털 디바이스의 기능이 다양해 지면서, 디지털 디바이스의 기능을 보다 효과적으로 제어 및 활용하고 사용자의 사용 편의성을 높이기 위하여 리모컨 등과 같은 제어 수단 역시 다양하게 변형이 시도되고 있다.In order to facilitate control of digital devices such as set-top boxes and digital TVs, most devices are provided with a remote controller. In addition, as the functions of the digital device are diversified, various control means such as a remote controller are also attempted in order to more effectively control and utilize the functions of the digital device and to increase user convenience.

예를 들어, 리모컨의 내부에 자이로 센서를 내장하여 단순한 키 입력이 아닌 리모컨의 움직임에 의해 사용자의 입력을 전달할 수 있으며, 게임기 역시 자이로 센서와 같은 모션 인식 센서를 내장함으로써 다양한 유형의 게임이 가정 내에서 가능하도록 하고 있다. 또한, PC 제어를 위한 기존의 마우스 역시 무선 마우스를 넘어 에어 마우스와 같이 사용자가 마우스를 공중에서 움직이는 동작을 인식하여 사용자 입력을 전달하고, PC의 동작을 제어하는 기술도 선보이고 있다.For example, a built-in gyro sensor inside the remote control can transmit user input by the movement of the remote control rather than a simple key input, and the game machine also incorporates a motion recognition sensor such as a gyro sensor to enable various types of games in the home. Is made possible by In addition, the existing mouse for controlling the PC also goes beyond the wireless mouse, like the air mouse, the user recognizes the movement of the mouse in the air to deliver the user input, and technology to control the operation of the PC is also being introduced.

한편, 홈 네트워크의 중심이라 할 수 있는 셋톱박스의 경우 역시 그 동작을 제어하는 리모컨에 대해 다양한 시도가 이루어지고 있는데, 자이로 센서를 내장하거나 Zigbee를 장착하여 데이터를 전송하는 등의 시도가 이루어지고 있다.On the other hand, in the case of a set-top box, which is the center of a home network, various attempts have been made on a remote controller that controls its operation. An attempt has been made to transmit data by embedding a gyro sensor or installing a Zigbee. .

그러나, 종래의 셋톱박스에 적용된 리모컨 등 제어 장치의 경우에는 특정 장치를 사용자가 손에 쥔 상태에서만 제어가 가능한 제한이 있었다.However, in the case of a control device such as a remote control applied to a conventional set-top box, there is a limit that can be controlled only when a user holds a specific device in his hand.

또한, 셋톱박스 이외의 다른 디지털 디바이스, 예를 들어 게임기의 경우 사용자의 모션을 인식하여 게임을 진행하는 방법이 시도되고 있으나, 이 경우 디지털 디바이스 내에 모션 인식을 위한 구성이 내장되어 있어, 해당 디지털 디바이스에만 사용할 수 있을 뿐 다른 디지털 디바이스에는 사용할 수 없는 한계가 있었다. 따라서, 이러한 모션 인식 기술에 대하여 셋톱박스 등 장치로 확장하여 적용하는데 곤란함이 있었다.In addition, in the case of a digital device other than the set-top box, for example, a game machine, a method of proceeding a game by recognizing a user's motion has been attempted. In this case, a configuration for motion recognition is built in the digital device. There is a limit that can only be used for other digital devices. Therefore, there is a difficulty in applying such motion recognition technology to devices such as set-top boxes.

본 발명은 상기와 같은 종래의 문제점을 해결하기 위한 것으로서, 본 발명의 목적은 사용자의 손 동작 등과 같은 모션을 인식하여 디지털 디바이스 예를 들어 셋톱 박스나 디지털 TV의 동작을 제어할 수 있는 모션 인식을 이용한 디지털 디바이스 제어 장치 및 방법을 제공하는 것이다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and an object of the present invention is to recognize a motion such as a user's hand motion and to recognize a motion of a digital device, for example, a set-top box or a digital TV. It is to provide a digital device control apparatus and method.

이와 같은 과제를 해결하기 위해서 본 발명의 일 실시예에 따른 모션 인식을 이용한 디지털 디바이스의 제어 장치는 복수개의 모션을 인식하는 모션 인식부, 및In order to solve the above problems, a control device of a digital device using motion recognition according to an embodiment of the present invention includes a motion recognition unit for recognizing a plurality of motions, and

상기 모션 인식부에서 인식된 모션에 따라 상기 디지털 디바이스를 제어하는 제어부를 포함하며, 상기 제어부는 상기 모션 인식부가 상기 복수개의 모션들 중 제1 모션을 인식하는 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 중지하고, 이후 상기 복수개의 모션들 중 제2 모션이 인식된 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 수행하는 것을 특징으로 한다.And a controller configured to control the digital device according to the motion recognized by the motion recognizer, wherein the controller recognizes a motion recognized by the motion recognizer when the motion recognizer recognizes a first motion among the plurality of motions. And controlling the digital device according to the motion recognized by the motion recognizing unit when the second motion among the plurality of motions is recognized thereafter.

상기 과제를 달성하기 위한 본 발명에 따른 모션 인식을 이용한 디지털 디바이스 제어 장치에서는 상기 제1 모션은 모션 인식 기능 잠금 동작에 대응하는 모션이며, 상기 제2 모션은 모션 인식 기능 잠금 해제에 대응하는 모션인 것을 특징으로 한다.In the digital device control apparatus using motion recognition according to the present invention for achieving the above object, the first motion is a motion corresponding to the motion recognition function lock operation, the second motion is a motion corresponding to the unlocking motion recognition function It is characterized by.

상기 과제를 달성하기 위한 본 발명에 따른 모션 인식을 이용한 디지털 디바이스 제어 장치에서는 상기 모션 인식부가 상기 제1 모션을 인식하는 경우, 상기 제어부는 현재 상태를 모션 인식에 따른 디지털 디바이스의 제어를 중지하는 모션 인식 기능 잠금 상태로 설정하는 것을 특징으로 한다.In the apparatus for controlling a digital device using motion recognition according to the present invention for achieving the above object, when the motion recognition unit recognizes the first motion, the controller stops controlling the digital device according to the motion recognition based on the current state. Characterized in that the recognition function lock state.

상기 과제는 사용자의 모션을 인식하고, 상기 인식된 모션이 복수개의 모션들 중 제1 모션인 경우 현재 상태를 모션 기능 잠금 상태로 설정하고 사용자 모션에 따른 상기 디지털 디바이스의 제어를 중지하며, 이후 상기 복수개의 모션들 중 제2 모션이 인식되면 모션 인식 기능 잠금 상태를 해제하고 인식된 사용자 모션에 대응하여 상기 디지털 디바이스의 제어를 수행하는 것을 특징으로 하는 모션 인식을 이용한 디지털 디바이스의 제어 방법에 의해서 달성될 수 있다.The task is to recognize the motion of the user, if the recognized motion is the first of the plurality of motions set the current state to the motion function lock state and stop the control of the digital device according to the user motion, and then When the second motion of the plurality of motions is recognized, the motion recognition function lock state is released and the control method of the digital device using motion recognition, characterized in that for performing the control of the digital device in response to the recognized user motion. Can be.

상기 과제는 복수개의 모션을 인식하는 모션 인식부 및 상기 모션 인식부에서 인식된 모션에 따라 상기 디지털 디바이스를 제어하는 제어부를 포함하며, 상기 제어부는 상기 모션 인식부가 상기 복수개의 모션들 중 제1 모션을 인식하는 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 중지하고, 이후 상기 복수개의 모션들 중 제2 모션이 인식된 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 수행하는 것을 특징으로 하는 모션 인식을 이용하여 제어되는 디지털 디바이스에 의해 달성될 수 있다.The task may include a motion recognition unit for recognizing a plurality of motions and a control unit for controlling the digital device according to the motions recognized by the motion recognition unit, wherein the control unit includes a first motion among the plurality of motions. Stops controlling the digital device according to the motion recognized by the motion recognition unit, and subsequently recognizes the digital device according to the motion recognized by the motion recognition unit when a second motion among the plurality of motions is recognized. It can be achieved by a digital device controlled using motion recognition, characterized in that the control of the.

이와 같이 본 발명에 따른 모션 인식을 이용한 디지털 디바이스 제어 장치 및 방법의 경우 모션 인식 잠금 및 해제 기능을 제공함으로써, 사용자의 일상적인 행동을 입력 신호로 처리하여 셋톱 박스, 디지털 TV 등과 같은 디지털 디바이스가 오동작하는 것을 방지할 수 있다는 효과가 있다.As described above, the apparatus and method for controlling a digital device using motion recognition according to the present invention provides a motion recognition lock and unlock function, thereby processing a user's daily behavior as an input signal, thereby causing a digital device such as a set-top box or a digital TV to malfunction. There is an effect that can be prevented.

도 1은 본 발명의 일 실시예에 따른 디지털 디바이스 제어 장치를 도시하는 블록도이다.
도 2는 본 발명의 또 다른 실시예에 따른 디지털 디바이스 제어 장치 및 디지털 디바이스를 도시하는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 디지털 디바이스 제어 방법을 도시하는 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 디지털 디바이스 제어 방법을 도시하는 흐름도이다.
도 5는 또 다른 실시예에 따른 디지털 디바이스 제어 장치를 도시하는 블록도이다.
도 6는 본 발명의 모션 인식에 적용되는 예시적인 사용자 모션을 나타내는 도면이다.
도 7는 본 발명의 모션 인식에 적용되는 예시적인 사용자 모션 및 이에 대응하는 디지털 디바이스의 제어 동작을 나타내는 도면이다.
도 8은 도 4의 디지털 디바이스 제어 장치의 제어부의 일 실시예를 나타내는 블록도이다. 1 is a block diagram illustrating a digital device control apparatus according to an embodiment of the present invention.
2 is a block diagram illustrating a digital device control apparatus and a digital device according to another embodiment of the present invention.
3 is a flowchart illustrating a digital device control method according to an embodiment of the present invention.
4 is a flowchart illustrating a digital device control method according to an embodiment of the present invention.
5 is a block diagram illustrating a digital device control apparatus according to another embodiment.
6 is a diagram illustrating an exemplary user motion applied to motion recognition of the present invention.
7 is a diagram illustrating an exemplary user motion applied to motion recognition of the present invention and a control operation of a digital device corresponding thereto.
8 is a block diagram illustrating an embodiment of a control unit of the digital device control apparatus of FIG. 4.

도 1은 본 발명에 따른 일 실시예를 도시하는 도면이다. 본 발명의 일 실시예에 따른 모션 인식을 이용한 디지털 디바이스의 제어 장치(100)는 영상 센서(120), 모션 인식부(140), 및 제어부(160)를 포함한다.1 is a diagram illustrating an embodiment according to the present invention. The apparatus 100 for controlling a digital device using motion recognition according to an embodiment of the present invention includes an image sensor 120, a motion recognition unit 140, and a controller 160.

영상 센서(120)는 사용자의 모션을 입력 받는다.The image sensor 120 receives a motion of the user.

모션 인식부(140)는 영상 센서(120)에 의해 입력된 사용자의 모션을 인식한다. The motion recognition unit 140 recognizes the motion of the user input by the image sensor 120.

제어부(160)는 모션 인식부(140)에서 인식된 신호에 따라 디지털 디바이스(200)를 제어한다. 제어부(160)는 모션 인식부(140)에서 인식된 신호가 복수개의 모션들 중 모션 인식 기능에 대한 잠금을 나타내는 모션 인식 기능 잠금 해제를 나타내는 특정 모션을 인식하는 경우, 모션 인식 기능의 상태를 잠금 상태로 설정하고, 모션 인식부(140)에서 인식된 모션에 따른 디지털 디바이스(200)의 제어를 중지한다. 이후, 모션 인식 기능 잠금 해제를 나타내는 특정 모션을 인식하는 경우, 모션 인식 기능의 잠금 상태를 해제하고 모션 인식부(140)에서 인식된 모션에 따라 디지털 디바이스(200)의 제어한다. 이들 특정 모션들은 동일한 모션이거나, 또는 서로 상이한 모션일 수 있다.The controller 160 controls the digital device 200 according to the signal recognized by the motion recognition unit 140. The controller 160 locks the state of the motion recognition function when the signal recognized by the motion recognition unit 140 recognizes a specific motion indicating unlocking the motion recognition function indicating lock of the motion recognition function among the plurality of motions. A state is set, and the control of the digital device 200 according to the motion recognized by the motion recognition unit 140 is stopped. Subsequently, when recognizing a specific motion indicating unlocking the motion recognition function, the locked state of the motion recognition function is released and the digital device 200 controls the motion according to the motion recognized by the motion recognition unit 140. These particular motions may be the same motion or different motions from each other.

제어부(160)는 사용자가 정해진 동작, 예를 들어 손을 반시계 방향으로 세바퀴 회전시키는 경우, 제어부(160)는 이를 모션 인식 기능 잠금 신호로 인식하고, 이후 사용자가 볼륨 업/다운 또는 트릭 플레이 등에 해당하는 모션을 한 것으로 모션 인식부(140)가 인식하더라도, 이에 대응하는 제어 신호를 디지털 디바이스(200)로 전송하지 않는다. When the user rotates the hand three times in a counterclockwise direction, for example, when the user rotates the hand three times in a counterclockwise direction, the controller 160 recognizes this as a motion recognition function lock signal, and then the user increases or decreases the volume up / down or trick play. Even if the motion recognition unit 140 recognizes that the motion corresponding to the motion is performed, the control signal corresponding thereto is not transmitted to the digital device 200.

한편, 제어부(160)는 사용자가 또 다른 동작, 예를 들어 손을 시계방향으로 세바퀴 회전시키는 경우, 제어부(160)는 이를 모션 인식 기능 잠금 해제 신호로 인식하여, 잠금 상태를 해제함으로써 이후 사용자가 볼륨 업/다운 또는 트릭 플레이 등에 해당하는 모션을 한 것으로 모션 인식부(140)가 인식하는 경우, 이에 대응하는 제어 신호를 디지털 디바이스(200)로 전송한다. On the other hand, when the user rotates another hand, for example, three turns of the clockwise direction, the controller 160 recognizes this as a motion recognition function unlocking signal, and releases the locked state. When the motion recognition unit 140 recognizes that the motion corresponds to volume up / down or trick play, the control signal is transmitted to the digital device 200.

이때, 선택적으로 모션 인식 기능 잠금 방법은 제어 장치(100)에 잠금/해제 스위치와 같은 별도의 잠금/해제 수단을 구비하여 구현하는 것도 가능하다.In this case, the motion recognition function locking method may optionally be implemented by providing a separate lock / release means such as a lock / release switch in the control device 100.

제어 장치(100)는 도 1과 같이 외장형으로 구성되어, 제어 장치(100)가 외부의 디지털 디바이스(200)에 제어 신호를 전송하여 디지털 디바이스(200)를 제어하도록 할 수 있다. 또한, 도 2과 같이 디지털 디바이스(200)에 내장되어, 디지털 디바이스(200)를 제어하도록 하는 것도 가능하다. The control device 100 may be configured to be external as shown in FIG. 1 so that the control device 100 may transmit a control signal to an external digital device 200 to control the digital device 200. In addition, as shown in FIG. 2, the digital device 200 may be controlled to control the digital device 200.

한편, 본 발명에 따른 모션인식을 통한 디지털 디바이스 제어 장치는 외장형으로 구성되어 디지털 디바이스에 착탈 가능한 형태로 구성할 수 있다. 특히, 제어 장치의 인터페이스부를 USB 등과 같이 디지털 디바이스에 일반적으로 적용되는 입출력 인터페이스로 구성함으로써, 제어 장치를 디지털 디바이스, 옐르 들어 셋톱 박스의 입출력 단자에 연결하여, 사용자의 모션 인식을 통해 입력된 신호를 셋톱 박스에 전달함으로써, 종래의 다양한 셋톱 박스에 채용이 가능한 제어 장치를 구현할 수 있다.On the other hand, the digital device control apparatus through motion recognition according to the present invention can be configured in a form that is detachable to the digital device is configured external. In particular, by configuring the interface unit of the control device as an input / output interface generally applied to a digital device such as a USB, the control device is connected to an input / output terminal of a digital device, for example, a set-top box, so that a signal input through motion recognition of a user is received. By transmitting to the set-top box, it is possible to implement a control device that can be employed in a variety of conventional set-top boxes.

따라서, 본 발명에 따른 디지털 디바이스 제어 장치는 기존의 다양한 종류의 디지털 디바이스의 입출력 인터페이스와 연결하여 활용이 가능하다.Therefore, the digital device control apparatus according to the present invention can be utilized in connection with the input and output interface of the existing various types of digital devices.

또한, 선택적으로 본 발명에 따른 모션 인식을 통한 디지털 디바이스 제어 장치는 디지털 디바이스의 핵심적인 최소한의 동작만을 모션 인식을 통해 제어하고 기존의 리모컨과 병행하여 사용하도록 구성할 수도 있다.In addition, the digital device control apparatus through the motion recognition according to the present invention may optionally be configured to control only the minimal minimum operation of the digital device through the motion recognition and use in parallel with the existing remote control.

예를 들어, 디지털 디바이스의 기본적인 동작 제어나 문자 입력 등은 기존의 리모컨을 통해 제어하고, IPTV나 VOD 시청시 채널 업/다운 (channel up/down), 볼륨 업/다운(volume up/down), 빨리감기/되감기(FF/REW) 등과 같은 트릭플레이 등 핵심적인 동작만을 모션인식을 통해 제어하도록 할 수 있다. For example, the basic operation control and text input of the digital device can be controlled through the existing remote control, and the channel up / down, volume up / down, volume up / down, Only core motions such as trick play such as fast forward / rewind (FF / REW) can be controlled through motion recognition.

이 경우, 사용자가 손을 위로 올리면 볼륨 업(volume up), 손을 아래로 내리면 볼륨 다운(volume down), 손을 시계방향으로 돌리면 빨리 감기(FF), 반시계방향으로 돌리면 되감기(REW)와 같이 직관적인 동작을 디지털 디바이스의 제어 동작으로 설정할 수 있다.In this case, when the user raises the hand up, the volume is up, volume is down when the hand is down, fast forwards when the hand is turned clockwise (FF), and rewinds when it is turned counterclockwise. Likewise, an intuitive operation can be set as a control operation of the digital device.

또한, 본 실시예에서는 사용자의 모션을 인식하여 디지털 디바이스를 제어하는 것을 설명하였지만, 선택적으로 오디오 센서를 사용하여 사용자의 소리, 예를 들어 박수 회수에 따라 디지털 디바이스를 제어하고, 특정 패턴에 따라 잠금/해제 기능을 설정하도록 하는 것도 가능하다.In addition, the present embodiment has been described to control the digital device by recognizing the motion of the user, but optionally using an audio sensor to control the digital device according to the user's sound, for example the number of claps, and lock according to a specific pattern It is also possible to set the on / off function.

도 3은 본 발명의 일 실시예에 따른 디지털 디바이스 제어 방법을 설명하기 위한 흐름도이다.3 is a flowchart illustrating a digital device control method according to an embodiment of the present invention.

단계 310에서는 사용자의 모션을 입력 받는다.In step 310, the user's motion is input.

단계 320에서는 입력된 사용자의 모션을 인식한다. In step 320, the input motion of the user is recognized.

단계 330에서는 인식된 사용자의 모션이 모션 인식 기능 잠금 동작에 해당하는 모션인지 여부를 결정한다. 인식된 모션이 모션 인식 기능 잠금 동작에 해당하는 경우 단계 340으로 진행하고, 인식된 모션이 모션 인식 기능 잠금 동작에 해당하지 않는 경우 단계 350으로 진행한다. In operation 330, it is determined whether the recognized user motion is a motion corresponding to a motion recognition function locking operation. If the recognized motion corresponds to the motion recognition function lock operation, the process proceeds to step 340. If the recognized motion does not correspond to the motion recognition function lock operation, the process proceeds to step 350.

단계 340에서는 모션 인식 기능 잠금 동작에 해당하는 모션인 경우, 이후 모션 인식 기능 잠금 해제 동작에 해당하는 모션이 인식될 때 까지 인식된 모션에 따른 디지털 디바이스 제어를 중지한다.In operation 340, in the case of a motion corresponding to the motion recognition function locking operation, the control of the digital device according to the recognized motion is stopped until the motion corresponding to the motion recognition function unlocking operation is recognized.

단계 350에서는 인식된 모션에 따라 디지털 디바이스 제어를 수행한다.In operation 350, digital device control is performed according to the recognized motion.

도 4은 본 발명의 또 다른 실시예에 따른 디지털 디바이스 제어 방법을 설명하기 위한 흐름도이다.4 is a flowchart illustrating a digital device control method according to another embodiment of the present invention.

단계 410에서는 사용자의 모션을 입력 받는다.In step 410, the user's motion is input.

단계 420에서는 현재 상태가 모션 인식 기능 잠금 상태인지 여부를 확인한다. 모션 인식 기능 잠금 상태가 아닌 경우 단계 430으로 진행하고, 모션 인식 기능 잠금 상태인 경우 단계 440으로 진행한다.In operation 420, it is determined whether the current state is a motion recognition function lock state. If the motion recognition function is not locked, the process proceeds to step 430. If the motion recognition function is locked, the process proceeds to step 440.

단계 430에서는 인식된 모션에 따라 디지털 디바이스 제어를 수행한다.In operation 430, digital device control is performed according to the recognized motion.

단계 440에서는 인식된 모션이 모션 인식 기능 잠금 해제에 해당하는 모션인지 여부를 결정한다. 인식된 모션이 모션 인식 기능 잠금 해제에 해당하는 모션인 경우 단계 450으로 진행하고, 모션 인식 기능 잠금 해제에 해당하지 않는 모션인 경우 단계 460으로 진행한다.In operation 440, it is determined whether the recognized motion is a motion corresponding to unlocking a motion recognition function. If the recognized motion is a motion corresponding to unlocking the motion recognition function, the flow proceeds to step 450, and if the motion does not correspond to unlocking the motion recognition function, the flow proceeds to step 460.

단계 450에서는 현재의 모션 인식 기능 잠금 상태를 잠금 상태 해제로 갱신한다.In step 450, the current motion recognition function lock status is updated to unlock status.

단계 460에서는 현재의 모션 인식 기능 잠금 상태를 유지한다. In step 460, the current motion recognition function is locked.

도 5은 본 발명에 따른 또 다른 실시예를 도시하는 도면이다. 본 발명의 일 실시예에 따른 모션 인식을 이용한 디지털 장치의 제어 장치(500)는 영상 센서(520), 패턴 결정부(542) 및 패턴 저장부(544)를 포함하는 모션 인식부(540), 및 제어부(560)를 포함한다.5 is a diagram showing another embodiment according to the present invention. The control device 500 of the digital apparatus using motion recognition according to an embodiment of the present invention includes a motion recognition unit 540 including an image sensor 520, a pattern determination unit 542, and a pattern storage unit 544. And a controller 560.

영상 센서(520)는 사용자의 모션을 입력 받는다.The image sensor 520 receives a user's motion.

모션 인식부(540)는 영상 센서(520)에 의해 입력된 사용자의 모션을 인식한다. The motion recognition unit 540 recognizes the motion of the user input by the image sensor 520.

패턴 저장부(544)는 본 발명의 모션 인식에 적용되는 예시적인 사용자 모션을 나타내는 도 6에 도시된 바와 같이 디지털 디바이스 제어에 사용되는 사용자의 특정 모션들에 대응하는 동작들이 저장되어 있다.The pattern storage unit 544 stores operations corresponding to specific motions of a user used for digital device control as shown in FIG. 6, which shows an exemplary user motion applied to motion recognition of the present invention.

패턴 결정부(542)는 영상 센서(520)에 의해 인식된 사용자의 모션과 패턴 저장부(544)에 저장된 복수개의 특정 패턴의 모션을 비교하여, 사용자의 모션에 대응하는 특정 패턴이 있는지 여부를 결정한다. 영상 센서(520)에 의해 인식된 사용자의 모션과 패턴 저장부(544)에 저장된 특정 패턴이 매칭하는 경우, 특정 패턴에 대응하는 정보를 제어부(560)로 전송한다.The pattern determiner 542 compares the motion of the user recognized by the image sensor 520 with the motions of a plurality of specific patterns stored in the pattern storage unit 544 to determine whether there is a specific pattern corresponding to the motion of the user. Decide When the motion of the user recognized by the image sensor 520 and the specific pattern stored in the pattern storage unit 544 match, information corresponding to the specific pattern is transmitted to the controller 560.

제어부(560)는 모션 인식부(540)에서 인식된 모션에 따라 디지털 디바이스(600)를 제어한다. The controller 560 controls the digital device 600 according to the motion recognized by the motion recognizer 540.

예를 들어, 모션 인식부(540)에서 인식된 모션에 따라 디지털 디바이스(600)를 제어할 때, 모션 인식부(540)에서 인식된 모션이 손을 위로 올리는 동작이면 도 7에 도시된 바와 같이 볼륨 업에 해당하는 동작으로 판단하여 디지털 디바이스를 제어하여 볼륨이 올라가도록 제어한다.For example, when controlling the digital device 600 according to the motion recognized by the motion recognizer 540, if the motion recognized by the motion recognizer 540 raises a hand, as shown in FIG. 7. It determines that the operation corresponds to the volume up and controls the digital device to increase the volume.

제어부(560)는 모션 인식부(540)에서 인식된 신호가 복수개의 모션들 중 모션 인식 기능에 대한 잠금을 나타내는 모션 인식 기능 잠금 해제를 나타내는 특정 모션을 인식하는 경우, 모션 인식 기능의 상태를 잠금 상태로 설정하고, 모션 인식부(540)에서 인식된 모션에 따른 디지털 디바이스(600)의 제어를 중지한다. 이후, 모션 인식 기능 잠금 해제를 나타내는 특정 모션을 인식하는 경우, 모션 인식 기능의 잠금 상태를 해제하고 모션 인식부(540)에서 인식된 모션에 따라 디지털 디바이스(600)의 제어한다. 이들 특정 모션들은 동일한 모션이거나, 또는 서로 상이한 모션일 수 있다.The controller 560 locks the state of the motion recognition function when the signal recognized by the motion recognition unit 540 recognizes a specific motion indicating unlocking the motion recognition function indicating lock of the motion recognition function among the plurality of motions. A state is set, and the control of the digital device 600 according to the motion recognized by the motion recognition unit 540 is stopped. Subsequently, when recognizing a specific motion indicating unlocking the motion recognition function, the locked state of the motion recognition function is released and the digital device 600 is controlled according to the motion recognized by the motion recognition unit 540. These particular motions may be the same motion or different motions from each other.

예를 들어, 본 발명의 모션 인식에 적용되는 예시적인 사용자 모션 및 이에 대응하는 디지털 디바이스의 제어 동작을 나타내는 도 7에 도시된 바와 같이, 모션 인식부(540)에서 인식된 모션이 모션 인식 기능 잠금에 해당하는 동작, 즉 손을 반시계 방향으로 세바퀴 회전시키는 것인 경우, 제어부(560)는 이를 모션 인식 기능 잠금 신호로 인식한다. 이후 사용자가 볼륨 업/다운 또는 트릭 플레이 등에 해당하는 모션을 한 것으로 모션 인식부(540)가 인식하더라도, 이에 대응하는 제어 신호를 디지털 디바이스(600)로 전송하지 않는다. For example, as shown in FIG. 7 illustrating an exemplary user motion applied to motion recognition of the present invention and a control operation of a digital device corresponding thereto, the motion recognized by the motion recognition unit 540 is locked to the motion recognition function. If the operation corresponds to, for example, turning the hand three times in the counterclockwise direction, the controller 560 recognizes this as a motion recognition function lock signal. Thereafter, even if the motion recognition unit 540 recognizes that the user performs a motion corresponding to volume up / down or trick play, the corresponding control signal is not transmitted to the digital device 600.

한편, 모션 인식부에서 인식된 모션이 모션 인식 기능 해제에 해당하는 동작, 즉 손을 시계방향으로 세바퀴 회전시키는 경우, 제어부(560)는 이를 모션 인식 기능 잠금 해제 신호로 인식하여, 잠금 상태를 해제함으로써 이후 사용자가 볼륨 업/다운 또는 트릭 플레이 등에 해당하는 모션을 한 것으로 모션 인식부(140)가 인식하는 경우, 이에 대응하는 제어 신호를 디지털 디바이스(200)로 전송한다. Meanwhile, when the motion recognized by the motion recognition unit corresponds to an operation corresponding to releasing the motion recognition function, that is, the hand is rotated three wheels in the clockwise direction, the controller 560 recognizes this as the motion recognition function unlocking signal and recognizes the locked state. When the motion recognition unit 140 recognizes that the user has performed a motion corresponding to volume up / down or trick play, the control signal is transmitted to the digital device 200.

제어부(560)는 도 8에 도시된 바와 같이, 제어 신호 생성부(562)와 인터페이스부(564)로 구성될 수 있다. 제어 신호 생성부 (562)는 모션 인식부(540)에서 인식된 신호에 기초하여 디지털 디바이스를 제어하기 위한 제어 신호를 생성한다. 예를 들어, 모션 인식부(540)에서 인식된 모션이 사용자가 손을 위로 올리는 동작이면 볼륨 업에 대응하는 제어 신호를 생성한다. 또한, 모션 인식부(540)에서 인식된 모션이 모션 인식 기능 잠금에 해당하는 모션이면, 모션 인식부(540)로부터 모션 인식 기능 해제에 해당하는 모션을 나타내는 신호가 입력될 때 까지 제어 신호를 생성하지 않는다. 모션 인식부(540)로부터 모션 인식 기능 해제에 해당하는 신호가 입력되고, 그 이후 예를 들어 손을 아래로 내리는 동작에 해당하는 신호가 입력되면 볼륨 다운에 대응하는 제어 신호를 생성한다. As illustrated in FIG. 8, the controller 560 may include a control signal generator 562 and an interface 564. The control signal generator 562 generates a control signal for controlling the digital device based on the signal recognized by the motion recognition unit 540. For example, if the motion recognized by the motion recognition unit 540 is an operation of raising a user's hand up, a control signal corresponding to the volume up is generated. In addition, if the motion recognized by the motion recognition unit 540 is a motion corresponding to the motion recognition function lock, the control signal is generated until a signal indicating a motion corresponding to the release of the motion recognition function is input from the motion recognition unit 540. I never do that. When a signal corresponding to releasing the motion recognition function is input from the motion recognition unit 540, and then a signal corresponding to an operation of lowering a hand, for example, generates a control signal corresponding to the volume down.

인터페이스부(164)는 제어 신호 생성부 (162)에서 생성된 신호를 디지털 디바이스로 전송한다.The interface unit 164 transmits the signal generated by the control signal generator 162 to the digital device.

이와 같이, 본 발명에 따른 모션 인식을 통한 디지털 디바이스 제어 장치의 경우 모션 인식 잠금 방법을 제공함으로써, 사용자의 일상적인 행동을 입력신호로 처리하여 셋톱 박스와 같은 디지털 디바이스가 오동작하는 것을 방지할 수 있다. 예를 들어 사용자가 VOD를 시청하던 중 가족과 대화하면서 무의식 중에 손을 위로 올릴 경우 볼륨이 올라가는 경우가 발생하지 않도록 하는 것이 가능하다.As such, in the digital device control apparatus through motion recognition according to the present invention, by providing a motion recognition lock method, it is possible to prevent a digital device such as a set-top box from malfunctioning by processing a user's daily behavior as an input signal. . For example, if a user raises his hand while unconscious while talking to a family while watching a VOD, it is possible to prevent the volume from increasing.

이상 설명한 바와 같은 방법은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고, 상기 기록 재생 방법을 구현하기 위한 기능적인(function) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다. The method as described above can also be embodied as computer readable code on a computer readable recording medium. The computer-readable recording medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may be implemented in the form of a carrier wave (for example, transmission via the Internet) . The computer readable recording medium can also be distributed over network coupled computer systems so that the computer readable code is stored and executed in a distributed fashion. In addition, functional programs, codes, and code segments for implementing the recording / reproducing method can be easily inferred by programmers in the art to which the present invention belongs.

이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.So far I looked at the center of the preferred embodiment for the present invention. Those skilled in the art will appreciate that the present invention can be implemented in a modified form without departing from the essential features of the present invention. Therefore, the disclosed embodiments should be considered in an illustrative rather than a restrictive sense. The scope of the present invention is shown in the claims rather than the foregoing description, and all differences within the scope will be construed as being included in the present invention.

100: 모션 인식을 이용한 디지털 디바이스의 제어 장치
120: 영상 센서
140: 모션 인식부
160: 제어부
200: 디지털 디바이스100: control device of digital device using motion recognition
120: image sensor
140: motion recognition unit
160:
200: digital device

Claims (5)

모션 인식을 이용한 디지털 디바이스의 제어 장치에 있어서,
복수개의 모션을 인식하는 모션 인식부, 및
상기 모션 인식부에서 인식된 모션에 따라 상기 디지털 디바이스를 제어하는 제어부를 포함하며,
상기 제어부는 상기 모션 인식부가 상기 복수개의 모션들 중 제1 모션을 인식하는 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 중지하고, 이후 상기 복수개의 모션들 중 제2 모션이 인식된 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 수행하는 것을 특징으로 하는 제어 장치.In the control device of a digital device using motion recognition,
A motion recognition unit for recognizing a plurality of motions, and
And a controller for controlling the digital device according to the motion recognized by the motion recognition unit.
The controller stops controlling the digital device according to the motion recognized by the motion recognition unit when the motion recognition unit recognizes a first motion of the plurality of motions, and then the second motion of the plurality of motions And if it is recognized, controlling the digital device according to the motion recognized by the motion recognition unit. 제1항에 있어서,
상기 제1 모션은 모션 인식 기능 잠금 동작에 대응하는 모션이며, 상기 제2 모션은 모션 인식 기능 잠금 해제에 대응하는 모션인 것을 특징으로 하는 제어 장치.The method of claim 1,
And the first motion is a motion corresponding to the motion recognition function lock operation, and the second motion is a motion corresponding to the motion recognition function lock operation. 제1항에 있어서, 상기 모션 인식부가 상기 제1 모션을 인식하는 경우, 상기 제어부는 현재 상태를 모션 인식에 따른 디지털 디바이스의 제어를 중지하는 모션 인식 기능 잠금 상태로 설정하는 것을 특징으로 하는 제어 장치.The control apparatus of claim 1, wherein when the motion recognition unit recognizes the first motion, the controller sets a current state to a motion recognition function locked state for stopping control of the digital device according to motion recognition. . 모션 인식을 이용한 디지털 디바이스의 제어 방법에 있어서,
사용자의 모션을 인식하고,
상기 인식된 모션이 복수개의 모션들 중 제1 모션인 경우 현재 상태를 모션 기능 잠금 상태로 설정하고 사용자 모션에 따른 상기 디지털 디바이스의 제어를 중지하며, 이후 상기 복수개의 모션들 중 제2 모션이 인식되면 모션 인식 기능 잠금 상태를 해제하고 인식된 사용자 모션에 대응하여 상기 디지털 디바이스의 제어를 수행하는 것을 특징으로 하는 제어 방법.In the control method of a digital device using motion recognition,
Recognize your motion,
If the recognized motion is the first motion among the plurality of motions, set the current state to the motion function lock state and stop the control of the digital device according to the user motion, and then the second motion among the plurality of motions is recognized. And releases the motion recognition function lock state and controls the digital device in response to the recognized user motion. 모션 인식을 이용하여 제어되는 디지털 디바이스에 있어서,
복수개의 모션을 인식하는 모션 인식부 및
상기 모션 인식부에서 인식된 모션에 따라 상기 디지털 디바이스를 제어하는 제어부를 포함하며,
상기 제어부는 상기 모션 인식부가 상기 복수개의 모션들 중 제1 모션을 인식하는 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 중지하고, 이후 상기 복수개의 모션들 중 제2 모션이 인식된 경우 상기 모션 인식부에서 인식된 모션에 따른 상기 디지털 디바이스의 제어를 수행하는 것을 특징으로 하는 디지털 디바이스.In a digital device controlled using motion recognition,
Motion recognition unit for recognizing a plurality of motions and
And a controller for controlling the digital device according to the motion recognized by the motion recognition unit.
The controller stops controlling the digital device according to the motion recognized by the motion recognition unit when the motion recognition unit recognizes a first motion of the plurality of motions, and then the second motion of the plurality of motions And if it is recognized, controlling the digital device according to the motion recognized by the motion recognition unit.
KR1020100061271A 2010-06-28 2010-06-28 Apparatus for controlling digital device based on motion recognition and method thereof KR20120000807A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100061271A KR20120000807A (en) 2010-06-28 2010-06-28 Apparatus for controlling digital device based on motion recognition and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100061271A KR20120000807A (en) 2010-06-28 2010-06-28 Apparatus for controlling digital device based on motion recognition and method thereof

Publications (1)

Publication Number Publication Date
KR20120000807A true KR20120000807A (en) 2012-01-04

Family

ID=45608578

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100061271A KR20120000807A (en) 2010-06-28 2010-06-28 Apparatus for controlling digital device based on motion recognition and method thereof

Country Status (1)

Country Link
KR (1) KR20120000807A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017065321A1 (en) 2015-10-12 2017-04-20 주식회사 네오펙트 Initial configuration system, initial configuration method and initial configuration program for attachment location of measurement sensor device
KR20190046243A (en) 2017-10-25 2019-05-07 에이케이시스 주식회사 Apparatus for controlling based on motion recognition system
US10713479B2 (en) 2014-08-07 2020-07-14 Starship Vending-Machine Corp. Motion recognition method and motion recognition device for recognizing motion of user received via NUI device by comparing with preset comparison target information

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10713479B2 (en) 2014-08-07 2020-07-14 Starship Vending-Machine Corp. Motion recognition method and motion recognition device for recognizing motion of user received via NUI device by comparing with preset comparison target information
WO2017065321A1 (en) 2015-10-12 2017-04-20 주식회사 네오펙트 Initial configuration system, initial configuration method and initial configuration program for attachment location of measurement sensor device
US10314522B2 (en) 2015-10-12 2019-06-11 Neofect Co., Ltd. System, method, and program for initializing attachment location of measurement sensor
US11051721B2 (en) 2015-10-12 2021-07-06 Neofect Co., Ltd. System, method, and program for initializing attachment location of measurement sensor
KR20190046243A (en) 2017-10-25 2019-05-07 에이케이시스 주식회사 Apparatus for controlling based on motion recognition system

Similar Documents

Publication Publication Date Title
US8847881B2 (en) Gesture and voice recognition for control of a device
CN104471992B (en) The energy efficient of content on wireless connection transmits
US8705872B2 (en) Systems and methods for hand gesture control of an electronic device
US8780278B2 (en) Motion-sensing remote control
EP3008909B1 (en) Methods, systems, and media for controlling audio of an hdmi audio system
CN105359199A (en) Methods, systems, and media for controlling a remote device using a touchscreen of a mobile device in a display inhibited state
JP2019161638A (en) Method for switching control modes of smart tv, equipment and computer program
BR112015004721B1 (en) SYSTEM TO CONTROL THE OPERATION OF A PLURALITY OF APPLIANCES
JP2008219777A (en) Video playback apparatus, control object device, video playback control method, and program
US9210357B1 (en) Automatically pairing remote
JP2007184746A (en) Remote control system, apparatus to remotely be controlled, and computer system
US20150020098A1 (en) Electronic device system
JP2006324922A (en) Remote operation apparatus, apparatus control device and remote operation method
CN102647523A (en) Remote control realization system and remote control realization method of intelligent mobile terminal and mobile terminal camera
KR20120000807A (en) Apparatus for controlling digital device based on motion recognition and method thereof
CN107071541A (en) The method and apparatus managed for peripheral context
US9196155B2 (en) Remote control device, information processing apparatus, information processing system, and remote control method
KR101852482B1 (en) Image processing appratus and software upgrade method for performing operation according to force input and software upgrade
JP2009027637A (en) Electronic device, remote controller, transmission/reception system, and control method of electronic device
CN101193230A (en) Device and method for providing best user interface
CN105142034A (en) Method for realizing screen saver and screen locking function of set top box
US20140108949A1 (en) Method and apparatus for providing a real-time customized layout
CN103581419A (en) Mobile communication device and control method thereof
JP2006222613A (en) Remote controller and controlled device, and control system
WO2015018329A1 (en) Remote control

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
NORF Unpaid initial registration fee