KR20120107279A - Hand free control apparatus and method for operating electric/electronic device based on recognition of user movement - Google Patents

Hand free control apparatus and method for operating electric/electronic device based on recognition of user movement Download PDF

Info

Publication number
KR20120107279A
KR20120107279A KR1020110024869A KR20110024869A KR20120107279A KR 20120107279 A KR20120107279 A KR 20120107279A KR 1020110024869 A KR1020110024869 A KR 1020110024869A KR 20110024869 A KR20110024869 A KR 20110024869A KR 20120107279 A KR20120107279 A KR 20120107279A
Authority
KR
South Korea
Prior art keywords
user
hands
predetermined value
movement
free control
Prior art date
Application number
KR1020110024869A
Other languages
Korean (ko)
Other versions
KR101237947B1 (en
Inventor
정선규
박영철
Original Assignee
휴롭 주식회사
박영철
한국외국어대학교 연구산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 휴롭 주식회사, 박영철, 한국외국어대학교 연구산학협력단 filed Critical 휴롭 주식회사
Priority to KR1020110024869A priority Critical patent/KR101237947B1/en
Publication of KR20120107279A publication Critical patent/KR20120107279A/en
Application granted granted Critical
Publication of KR101237947B1 publication Critical patent/KR101237947B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04Q—SELECTING
    • H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means

Abstract

PURPOSE: A hands-free control apparatus and method thereof are provided to enable a user to remotely operate an electronic apparatus by recognizing motions of the user. CONSTITUTION: A control unit(110) analyzes signals from an image sensor. The control unit creates a predetermined value corresponding to a blinking pattern. The blinking pattern is related to the eyes of a user. The control unit can transmit the predetermined value to an interworking apparatus using a wired or a wireless interface. [Reference numerals] (100) Hands-free control apparatus; (110) Control unit; (120) Gyro sensor; (130) Image sensor; (140) Wired Interface; (150) Wireless interface; (160) Selection unit; (200) Interface unit; (210) Control unit; (220) Wired interface; (230) Wireless interface; (240) Apparatus driving unit; (250) Key input unit; (AA) Wire/Wireless

Description

사용자의 행동을 인식하여 전기 전자 기기를 작동시키는 핸즈프리 제어 장치 및 방법{Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement}Hand Free Control Apparatus and Method for Operating Electric / Electronic Device Based on Recognition of User Movement}

본 발명은 핸즈프리 제어 장치 및 방법에 관한 것으로서, 특히, 헬멧(안전모) 등을 착용하고 작업 중인 사용자 등 양손 또는 양발을 사용하여 전기전자 기기를 자유롭게 사용할 수 없는 사용자가 손, 머리, 발, 또는 눈을 움직일 때 이러한 사용자의 행동을 인식하여 원격의 전기 전자 기기를 작동시킬 수 있는 핸즈프리 제어 장치 및 방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a hands-free control device and method, and more particularly, to a user who is unable to freely use an electronic device using both hands or both feet, such as a user who is wearing a helmet (safety helmet) or the like. The present invention relates to a hands-free control device and a method for recognizing such user's behavior when operating a remote electric and electronic device.

일반적으로 산업현장에서 작업지시 및 업무를 공유하기 위해 통신장비(무전기/TRS 등)를 들고 교신을 하거나, 외부에서 걸려오는 전화를 받거나, 운반기계나 장치 등을 조작하기 위해서는 부득이 하게 손으로 조작하게 되고, 이때 위험 상황에 대한 대처 능력이 떨어져 재산피해 및 인명사고가 자주 발생하는 문제가 있다. In general, in order to share work orders and tasks at industrial sites, people must communicate by hand to communicate with communication equipment (radio / TRS, etc.), receive calls from outside, or operate transporting machines or devices. In this case, the ability to cope with the dangerous situation is poor, there is a problem that often occurs property damage and casualties.

또한, 아웃도어 환경에서 바이크, 자전거, 암벽등반, 패러글라이딩과 같은 레저 활동을 하다보면 운전을 하거나, 밧줄을 잡아 주거나, 비행 조정을 위해 양손이 자유롭지 않은 상황에서 통신장비 및 안전장치 등을 조작하는데 어려움이 있어 위험에 많이 노출되어 있다. In addition, leisure activities such as bikes, bicycles, rock climbing and paragliding in outdoor environments can be used to operate communication equipment and safety devices while driving, holding ropes, or freeing hands for flight control. Difficulties expose you to a lot of risk.

따라서, 양손이 자유롭지 않은 상황에서 작업효율을 높이고 안전성을 확보하기 위해서는 통신장비 및 안전장치를 자유롭게 제어할 수 있는 방법이 절실히 필요하다. 전기 전자 기기와 유선 또는 무선으로 연결된 소형 제어 단말을 이용해 원격으로 기기를 조정하거나 제어할 수 있지만 이와 같은 경우에도 양손이나 양발이 자유롭지 않으면 정확한 조작이 안되어 작업효율을 떨어뜨리고 위험에 노출될 수 있으므로 개선이 요구되고 있다.Therefore, in order to increase work efficiency and secure safety in a situation where both hands are not free, a method for freely controlling communication equipment and safety devices is urgently needed. You can control or control the device remotely by using a small control terminal connected to electric and electronic devices by wire or wireless.However, even if the hands or feet are not free, even in this case, accurate operation may not be possible, which may reduce work efficiency and expose you to danger. This is required.

따라서, 본 발명은 상술한 문제점을 해결하기 위한 것으로서, 본 발명의 목적은, 손 또는 발을 사용하여 전기전자 기기를 자유롭게 사용할 수 없는 사용자가, 밴드 형태로 손, 머리, 발 등의 신체에 장착하거나 헬멧에 장착한 행동 인식 수단을 이용해 손, 머리, 발 또는 눈을 움직일 때 이러한 사용자의 행동을 인식하여 원격의 전기 전자 기기를 작동시킴으로써, 핸즈프리 형으로 원격의 전기 전자 기기를 작동시킬 수 있는 핸즈프리 제어 장치 및 방법을 제공하는 데 있다.Accordingly, the present invention is to solve the above-described problems, an object of the present invention, the user who can not freely use the electrical and electronic equipment using the hands or feet, mounted on the body of the hands, head, feet, etc. in the form of a band Hands-free, hands-free operation of remote electronics by recognizing the user's behavior when moving hands, heads, feet or eyes using a gesture recognition device attached to the helmet It is to provide a control apparatus and method.

예를 들어, 손으로 직접 기기를 조작하지 않고 원격에서 사용자가 손으로 8자를 그리거나, 발로 차는 행동을 하거나, 머리를 끄떡거리거나, 눈을 감고 뜨는 등의 행동을 인식하여, 제어 신호를 유무선으로 전달함으로써, 이동통신 단말기의 통화 키를 누르거나, 인터컴 통신 기기의 PTT 버튼을 누르거나, 재생기의 다음곡 버튼을 누르는 것과 같은 기능을 실현할 수 있는 핸즈프리 제어 장치 및 방법을 제공하는 데 있다.For example, you can remotely control control signals by recognizing actions such as hand drawing, kicking, head-nosing, eyes closed, etc. The present invention provides a hands-free control device and method capable of realizing a function such as pressing a call key of a mobile communication terminal, pressing a PTT button of an intercom communication device, or pressing a next song button of a player.

먼저, 본 발명의 특징을 요약하면, 본 발명의 일면에 따른, 유선 또는 무선으로 연동 기기와 연결된 핸즈프리 제어장치는, 자이로 센서 또는 이미지 센서를 동작시키는 선택부; 및 상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하고, 해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하는 제어부를 포함하고, 상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 한다.First, to summarize the features of the present invention, in accordance with an aspect of the present invention, the hands-free control device connected to the interlocking device by wire or wireless, the selection unit for operating a gyro sensor or an image sensor; And analyzing a signal from the gyro sensor to generate a predetermined value corresponding to a movement pattern related to a user's movement, or analyzing the signal from the image sensor to determine a predetermined value corresponding to a blink pattern related to a user's eye blink. And a control unit for generating the predetermined value and transmitting the predetermined value to the companion device through a wired interface through a wired communication method or by transmitting to the companion device through a wireless interface through a short range wireless communication method, wherein the companion device corresponds to the predetermined value. And remotely control the companion device to operate a key input to perform a function corresponding to the key input.

상기 사용자의 움직임과 관련된 움직임 패턴은, 상기 핸즈프리 제어 장치가 사용자의 손이나 손가락, 발, 또는 머리에 밴드 형태로 장착되는 형태에 따라, 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴을 포함한다.The movement pattern related to the movement of the user may be a movement pattern of a hand or a finger, a movement pattern of a foot, or a movement of a head according to a form in which the hands-free control device is mounted in a band form on the user's hand, finger, foot, or head. Contains a pattern.

상기 사용자의 눈의 깜박임과 관련된 깜박임 패턴은, 상기 핸즈프리 제어 장치가 사용자가 착용한 헬멧(또는 안전모)에 장착될 때, 사용자의 한쪽 눈, 또는 양쪽 눈의 깜박임 패턴을 포함한다.The blink pattern associated with the blink of the user's eyes includes a blink pattern of one or both eyes of the user when the hands-free control device is mounted on the helmet (or helmet) worn by the user.

상기 근거리 무선 통신 방식은, 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식을 포함한다.The short range wireless communication scheme includes Bluetooth, Zigbee, or Near Field Communication (NFC).

그리고 본 발명의 다른 일면에 따른, 핸즈프리 제어 방법은, 자이로 센서 또는 이미지 센서를 동작시키는 선택적으로 동작시키고, 상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하며, 해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하되, 상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 한다.And according to another aspect of the invention, the hands-free control method, selectively operating the gyro sensor or the image sensor, and analyzes the signal from the gyro sensor to generate a predetermined value corresponding to the movement pattern associated with the user's movement Alternatively, the signal from the image sensor may be analyzed to generate a predetermined value corresponding to the blinking pattern related to the blinking of the user's eyes, and the predetermined value may be transmitted to the companion device through a wired interface to a companion device or a wireless interface. Transmitting to a companion device through a short range wireless communication method, wherein the companion device operates a key input corresponding to the predetermined value to remotely control the companion device to perform a function corresponding to the key input. do.

본 발명에 따른 핸즈프리 제어 장치 및 방법에 따르면, 양손이나 발을 자유롭게 사용할 수 없는 산업현장이나 레저분야에서 기기를 이용해 통신을 하거나 안전장치를 조작하기 위해 부득이 하게 기기 조작이 필요한 경우에 사용자가 밴드 형태 또는 헬멧에 장착된 행동 인식 수단을 통해 약속된 행동을 함으로써, 원격의 기기를 핸즈프리 형으로 작동시킬 수 있다.According to the hands-free control device and method according to the present invention, when the user inevitably needs to operate a device in order to communicate or use a device in an industrial site or leisure field where both hands or feet cannot be freely used, the user may form a band. Or, by performing a promised action through a gesture recognition device mounted on the helmet, the remote device can be operated hands-free.

예를 들어, 손으로 직접 기기를 조작하지 않고 원격에서 사용자가 손으로 8자를 그리거나, 발로 차는 행동을 하거나, 머리를 끄떡거리거나, 눈을 감고 뜨는 등의 행동을 인식하여, 제어 신호를 유무선으로 전달함으로써, 이동통신 단말기의 통화 키를 누르거나, 인터컴 통신 기기의 PTT 버튼을 누르거나, 재생기의 다음곡 버튼을 누르는 것과 같은 기능을 실현할 수 있다.For example, you can remotely control control signals by recognizing actions such as hand drawing, kicking, head-nosing, eyes closed, etc. By transmitting to the mobile communication terminal, it is possible to realize a function such as pressing a call key of a mobile communication terminal, pressing a PTT button of an intercom communication device, or pressing a next song button of a player.

도1은 본 발명의 일실시예에 따른 핸즈프리 제어 장치를 인터컴 기기 등 연동 기기의 작동에 적용한 일례이다.
도 2는 본 발명의 일실시예에 따른 핸즈프리 제어 장치를 헬멧에 장착하여 연동 기기의 작동에 적용한 일례이다.
도 3은 본 발명의 일실시예에 따른 핸즈프리 제어 장치와 연동 기기의 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 따른 핸즈프리 제어 장치의 자이로 센서의 동작을 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 따른 핸즈프리 제어 장치의 이미지 센서의 동작을 설명하기 위한 도면이다.1 is an example in which the hands-free control device according to an embodiment of the present invention is applied to an operation of an interlock device such as an intercom device.
2 is an example in which the hands-free control device according to an embodiment of the present invention is mounted on a helmet and applied to the operation of an interlock device.
3 is a view for explaining the configuration of the hands-free control device and the companion device according to an embodiment of the present invention.
4 is a view for explaining the operation of the gyro sensor of the hands-free control device according to an embodiment of the present invention.
5 is a view for explaining the operation of the image sensor of the hands-free control device according to an embodiment of the present invention.

이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the preferred embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout.

도1은 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)를 인터컴 기기 등 연동 기기(200)의 작동에 적용한 일례이다.1 is an example of applying the hands-free control device 100 according to an embodiment of the present invention to the operation of the companion device 200 such as an intercom device.

본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)는, 자이로 센서를 포함할 수 있으며, 핸즈프리 제어 장치(100) 또는 자이로 센서 부분을 사용자의 손 또는 손가락에 밴드 형태로 장착하여, 사용자가 손으로 8자를 그리는 등 미리 정해진 움직임 패턴으로 핸즈프리 제어 장치(100) 또는 자이로 센서 부분을 움직임으로써, 핸즈프리 제어 장치(100)가 해당 패턴에 대응된 미리 정해진 디지털 제어값을 연동 기기(200)로 전송하여, 손으로 직접 연동 기기(200)의 키입력을 조작하지 않고도 원격에서 해당 키입력에 대응된 기능을 수행하도록 할 수 있다. The hands-free control device 100 according to an embodiment of the present invention may include a gyro sensor, and the hands-free control device 100 or the gyro sensor portion is mounted on the user's hand or finger in the form of a band, so that the user has a hand. By moving the hands-free control device 100 or the gyro sensor part in a predetermined movement pattern such as drawing eight characters, the hands-free control device 100 transmits a predetermined digital control value corresponding to the pattern to the companion device 200. It is possible to perform a function corresponding to the corresponding key input remotely without directly operating the key input of the companion device 200 by hand.

예를 들어, 연동 기기(200)가 인터컴(Intercom) 기기인 경우에, 상대방 인터컴 기기와 음성 신호를 송수신하기 위한 PTT(Push-to-Talk) 버튼을 구비하며, 사용자는 핸즈프리 제어 장치(100) 또는 자이로 센서 부분을 미리 정해진 움직임 패턴으로 움직임으로써, 인터컴 기기(200)는 PTT(Push-to-Talk) 버튼이 눌러진 것과 같은 기능을 수행할 수 있다. For example, when the companion device 200 is an intercom device, the companion device 200 may include a push-to-talk (PTT) button for transmitting and receiving a voice signal with the counterpart intercom device, and the user may have a hands-free control device 100. Alternatively, by moving the gyro sensor portion in a predetermined movement pattern, the intercom device 200 may perform a function such as pressing a push-to-talk button.

여기서, 핸즈프리 제어 장치(100)와 연동되는 통신 기기(200)는 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식 등 근거리 무선 통신 방식으로 신호를 주고 받을 수 있다. 이외에도, 경우에 따라서는 핸즈프리 제어 장치(100)와 연동되는 연동 기기(200)는 서로 케이블로 연결되어 필요한 필요한 신호를 주고 받을 수도 있다. Here, the communication device 200 interoperating with the hands-free control device 100 may transmit and receive signals in a short range wireless communication method such as Bluetooth, Zigbee, or NFC (Near Field Communication). In addition, in some cases, the interlocking device 200 interoperating with the hands-free control device 100 may be connected to each other via a cable to exchange necessary signals.

또한, 위에서, 핸즈프리 제어 장치(100)가 사용자의 손/손가락에 착용되는 경우를 예로 들어 설명하였으나, 이에 한정되지 않으며, 경우에 따라서는, 발, 또는 머리에 밴드 형태로 장착될 수도 있고, 이때에는 발의 움직임 패턴, 또는 머리의 움직임 패턴에 따라서도 핸즈프리 제어 장치(100)가 해당 패턴에 대응된 미리 정해진 디지털 제어값을 통신 기기(200)로 전송하여, 손으로 직접 연동 기기(200)의 키입력을 조작하지 않고도 원격에서 해당 키입력에 대응된 기능을 수행하도록 할 수 있다.In addition, while the hands-free control device 100 is described as an example of being worn on a user's hand / finger, the present invention is not limited thereto. In some cases, the hands-free control device 100 may be mounted in the form of a band on the foot or the head. Also, according to the movement pattern of the foot or the movement pattern of the head, the hands-free control device 100 transmits a predetermined digital control value corresponding to the pattern to the communication device 200, and directly by hand the key of the companion device 200. It is possible to perform a function corresponding to the corresponding key input remotely without manipulating the input.

도 2는 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)를 헬멧(또는 안전모)에 장착하여 연동 기기(200)의 작동에 적용한 일례이다.2 is an example in which the hands-free control device 100 according to an embodiment of the present invention is mounted on a helmet (or hard hat) and applied to the operation of the companion device 200.

예를 들어, 핸즈프리 제어 장치(100)가 사용자가 착용한 헬멧(또는 안전모)의 위치 중 사용자의 눈과 가까운 부분에 장착된 경우에, 이때에는 사용자의 한쪽 눈, 또는 양쪽 눈의 깜박임 패턴에 따라서도 핸즈프리 제어 장치(100)가 해당 패턴에 대응된 미리 정해진 디지털 제어값을 연동 기기(200)로 전송하여, 손으로 직접 연동 기기(200)의 키입력을 조작하지 않고도 원격에서 해당 키입력에 대응된 기능을 수행하도록 할 수 있다.For example, when the hands-free control device 100 is mounted on the part of the helmet (or helmet) worn by the user close to the eyes of the user, the hands-free control device 100 according to the blink pattern of one or both eyes of the user Also, the hands-free control device 100 transmits a predetermined digital control value corresponding to the pattern to the companion device 200 so as to remotely respond to the corresponding key input without directly manipulating key input of the companion device 200 by hand. Can be used to perform a function.

도 1 및 도 2에서 핸즈프리 제어 장치(100)는 인터컴 기기의 PTT(Push-to-Talk) 버튼을 동작시키는 것으로 예로 들어 설명하였지만, 이에 한정되지 않으며, 연동 기기(200)로서, 스마트폰(Smart phone), 또는 셀룰러폰(Cellular phone), 디지탈 TRS (Trunked Radio System), 피씨에스폰(PCS phone: Personal Communications Services phone), 동기식/비동기식 IMT-2000(International Mobile Telecommunication-2000), 개인용 디지털 보조기(PDA:Personal Digital Assistant), 왑폰(WAP phone:Wireless application protocol phone), 모바일 게임기(mobile play-station), 기타 PMP(Portable Multimedia Player) 등 휴대 단말의 통화 키, 재생 키, 녹음 키 등을 동작시킬 수도 있으며, 이외에도 노트북 PC, 데스크탑 PC, 팜 PC(Palm Personal Computer) 등이나, 경우에 따라 다른 가정용 또는 산업용 다양한 전기 전자 기기에 구비된 키 입력을 핸즈프리 제어 장치(100)가 대신하도록 할 수 있다. 1 and 2, the hands-free control device 100 is described as an example of operating a push-to-talk (PTT) button of an intercom device, but is not limited thereto. phone, or cellular phone, digital TRS (Trunked Radio System), PCS (Personal Communications Services phone), synchronous / asynchronous IMT-2000 (International Mobile Telecommunication-2000), personal digital assistant ( It is possible to operate call keys, playback keys, recording keys, etc. of mobile terminals such as PDA: Personal Digital Assistant, WAP phone: Wireless application protocol phone, mobile play-station, and other portable multimedia player. In addition, the hands-free control device 100 may substitute key inputs provided in a notebook PC, a desktop PC, a Palm PC, or other various home or industrial electronic devices. It may be so.

이와 같이 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)는 사용자가 손/손가락, 발, 머리 또는 헬멧 등에 장착되어, 사용자가 손으로 8자를 그리거나, 발로 차는 행동을 하거나, 머리를 끄떡거리거나, 눈을 감고 뜨는 등의 행동을 인식하여, 제어 신호를 유무선으로 통신되는 연동 기기(200)로 전달함으로써, 연동 기기(200)인 이동통신 단말기의 통화 키를 누르거나, 연동 기기(200)인 인터컴 통신 기기의 PTT 버튼을 누르거나, 연동 기기(200)인 재생기의 다음곡 버튼을 누르는 것과 같은 기능을 실현할 수 있도록 하였다. 이와 같은 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)는 양손이나 발을 자유롭게 사용할 수 없는 산업현장이나 레저분야에서 연동 기기(200)를 이용해 통신을 하거나 안전장치를 조작하기 위해 부득이 하게 기기 조작이 필요한 경우에 미리 약속된 행동을 함으로써, 원격의 기기(200)를 핸즈프리 형으로 작동시킬 수 있게 된다.As such, the hands-free control device 100 according to an embodiment of the present invention is mounted on a user's hand / finger, foot, head, or helmet, such that the user draws eight characters by hand, kicks or kicks his head. By recognizing an action such as walking away or closing eyes, the control signal is transmitted to the companion device 200 which is wired or wirelessly communicated, so that a call key of the mobile communication terminal that is the companion device 200 is pressed or the companion device 200 is closed. Press the PTT button of the intercom communication device or press the next song button of the player, which is the companion device 200 ,. Such hands-free control device 100 according to an embodiment of the present invention is inevitably used to communicate or operate a safety device using the interlocking device 200 in an industrial field or leisure field where both hands or feet cannot be freely used. When the operation is required, by performing a predetermined action, the remote device 200 can be operated hands-free.

이하, 도 3 내지 도 5를 참조하여, 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)와 연동 기기(200) 간의 동작을 좀 더 자세히 설명한다. 3 to 5, the operation between the hands-free control device 100 and the companion device 200 according to an embodiment of the present invention will be described in more detail.

도 3을 참조하면, 핸즈프리 제어 장치(100)는 제어부(110), 자이로 센서(120), 이미지 센서(130), 유선 인터페이스(140), 무선 인터페이스(150) 및 선택부(160)를 포함한다. 또한, 연동 기기(200)는 제어부(210), 유선 인터페이스(220), 무선 인터페이스(230), 기기 동작부(240), 및 키 입력부(250)를 포함한다. Referring to FIG. 3, the hands-free control device 100 includes a controller 110, a gyro sensor 120, an image sensor 130, a wired interface 140, a wireless interface 150, and a selector 160. . In addition, the companion device 200 includes a control unit 210, a wired interface 220, a wireless interface 230, a device operation unit 240, and a key input unit 250.

핸즈프리 제어 장치(100)의 제어부(110)는 자이로 센서(120), 이미지 센서(130), 유선 인터페이스(140), 무선 인터페이스(150) 및 선택부(160)의 전반적인 제어를 담당하는 프로세서에 해당한다. The controller 110 of the hands-free control device 100 corresponds to a processor that is responsible for overall control of the gyro sensor 120, the image sensor 130, the wired interface 140, the wireless interface 150, and the selector 160. do.

자이로 센서(120)는 각속도 센서로서 움직임에 따라 해당 방향을 알 수 있게 하는 전기적 신호를 발생할 수 있다. 이미지 센서(130)는 CMOS, 또는 CCD 센서 형태 일 수 있으며, 영상을 촬영하여 해당 전기적 신호를 발생할 수 있다. The gyro sensor 120 is an angular velocity sensor and may generate an electrical signal that enables the user to know a corresponding direction according to the movement. The image sensor 130 may be in the form of a CMOS or CCD sensor, and may take an image to generate a corresponding electrical signal.

선택부(160)는 사용자의 선택에 따라 자이로 센서(120) 또는 이미지 센서(130)를 동작시킨다. 선택부(160)는 버튼, 키, 스위치 형태일 수 있으며, 사용자의 선택에 따라 선택부(160)에 설정된 형태에 따라 자이로 센서(120)만 동작하거나 이미지 센서(130)만 동작하거나 두 센서가 모두 동작하도록 할 수 있다.The selector 160 operates the gyro sensor 120 or the image sensor 130 according to a user's selection. The selector 160 may be in the form of a button, a key, or a switch, and according to a user's selection, only the gyro sensor 120 may operate or only the image sensor 130 may operate, or both sensors may operate according to a form set in the selector 160. You can make everything work.

사용자가 핸즈프리 제어 장치(100)를 손이나 손가락, 발, 또는 머리에 밴드 형태로 장착하고, 움직임에 따라 제어부(110)는 자이로 센서(120)로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성할 수 있다. The user mounts the hands-free control device 100 in the form of a band on a hand, finger, foot, or head, and according to the movement, the controller 110 analyzes a signal from the gyro sensor 120 and applies the movement pattern related to the movement of the user. The corresponding predetermined value can be generated.

예를 들어, 제어부(110) 또는 제어부(110)와 연결된 저장 수단(도시 되지 않음)은 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 디지털 제어값을 저장할 수 있다. 이에 따라 제어부(110)는 사용자의 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴에 대응된 미리 정해진 값을 생성할 수 있다. 예를 들어, 사용자가 핸즈프리 제어 장치(100)를 손이나 손가락에 장착한 경우에, 손이나 손가락의 움직임 패턴은, 원 그리기, 8자 그리기, 기타 텍스트나 기호를 그리기 등일 수 있으며, 제어부(110)는 이에 대응된 미리 정해진 제어값을 선택하여 출력할 수 있다. 또한, 사용자가 핸즈프리 제어 장치(100)를 발에 장착한 경우에, 발의 움직임 패턴은, 차기, 원 그리기, 8자 그리기, 기타 텍스트나 기호를 그리기 등일 수 있으며, 제어부(110)는 이에 대응된 미리 정해진 제어값을 선택하여 출력할 수 있다. 또한, 사용자가 핸즈프리 제어 장치(100)를 머리에 장착한 경우에, 머리의 움직임 패턴은, 상하 끄덕이기, 가로 젓기 등일 수 있으며, 제어부(110)는 이에 대응된 미리 정해진 제어값을 선택하여 출력할 수 있다.For example, the controller 110 or a storage means (not shown) connected to the controller 110 may store a predetermined digital control value corresponding to a movement pattern related to a user's movement. Accordingly, the controller 110 may generate a predetermined value corresponding to the movement pattern of the user's hand or finger, the movement pattern of the foot, or the movement pattern of the head. For example, when the user mounts the hands-free control device 100 on a hand or a finger, the movement pattern of the hand or the finger may be a circle drawing, an eight-character drawing, another text or a symbol, and the control unit 110. ) May select and output a predetermined control value corresponding thereto. In addition, when the user mounts the hands-free control device 100 on the foot, the movement pattern of the foot may be a kick, a circle drawing, an eight-character drawing, drawing other text or symbols, and the control unit 110 corresponds to this. A predetermined control value can be selected and output. In addition, when the user mounts the hands-free control device 100 to the head, the movement pattern of the head may be nodding up and down, horizontal rowing, and the like, and the controller 110 selects and outputs a predetermined control value corresponding thereto. can do.

도 4와 같이, 자이로 센서(120)는 3차원 방향에 대하여 각각 설치되어 좀 더 정밀하게 사용자의 움직임에 따라 해당 방향을 알 수 있게 하는 전기적 신호를 발생할 수 있으며, 경우에 따라서는 자이로 센서(120)가 동작할 때 가속도 센서(미도시)가 더 동작하도록 하여 더 정밀하게 사용자의 움직임에 대한 인식을 하도록 할 수 있다. 가속도 센서가 추가적으로 사용되는 경우에, 제어부(110)는 자이로 센서(120)의 방향 관련 신호와 가속도 센서(미도시)의 방향과 속도(또는 속도 변화)에 관련한 신호를 조합하여 사용자의 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴에 대응된 미리 정해진 값을 생성할 수 있다.As shown in FIG. 4, the gyro sensor 120 may be installed with respect to a three-dimensional direction, respectively, to generate an electrical signal that enables the user to know a corresponding direction more precisely according to a user's movement. In some cases, the gyro sensor 120 may be used. ), The acceleration sensor (not shown) may be further operated to recognize the user's movement more precisely. When an acceleration sensor is additionally used, the controller 110 combines a direction related signal of the gyro sensor 120 and a signal related to the direction and speed (or speed change) of the acceleration sensor (not shown) to the user's hand or finger. A predetermined value corresponding to the movement pattern of the foot, the movement pattern of the foot, or the movement pattern of the head may be generated.

한편, 사용자가 핸즈프리 제어 장치(100)를 사용자가 착용한 헬멧(또는 안전모)에 장착되어 동작할 때, 사용자가 눈을 깜박임에 따라 제어부(110)는 이미지 센서(130)로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성할 수 있다.On the other hand, when the user operates the hands-free control device 100 mounted on the helmet (or helmet) worn by the user, the controller 110 analyzes a signal from the image sensor 130 as the user blinks. A predetermined value corresponding to a blinking pattern related to blinking of an eye may be generated.

예를 들어, 제어부(110) 또는 제어부(110)와 연결된 저장 수단(도시 되지 않음)은 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 디지털 제어값을 저장할 수 있다. 이에 따라 제어부(110)는 깜박임 에 대응된 미리 정해진 값을 생성할 수 있다.For example, the controller 110 or a storage means (not shown) connected to the controller 110 may store a predetermined digital control value corresponding to a blink pattern associated with blinking of the user's eyes. Accordingly, the controller 110 may generate a predetermined value corresponding to the blinking.

도 5의 (A)와 같이 오른쪽 눈이 깜박임, 도 5의 (B)와 같이 왼쪽 눈이 깜박임, 도 5의 (C)와 같이 양쪽 눈이 깜박임 등과 이들의 연속 동작 등으로 구분하여, 제어부(110)는 해당 눈의 깜박임에 대응된 미리 정해진 디지털 제어값을 생성할 수 있다.The right eye blinks as shown in FIG. 5A, the left eye blinks as shown in FIG. 5B, and both eyes blink as shown in FIG. 110 may generate a predetermined digital control value corresponding to the blink of the eye.

이와 같이 제어부(110)가 해당 움직임 또는 깜박임 패턴에 따라 생성한 미리 정해진 디지털 제어값을, 유선 인터페이스(140)를 통해 시리얼 통신 방식 등의 유선 통신 방식으로 연동 기기(200)의 유선 인터페이스(220)로 전송할 수 있으며, 또는 무선 인터페이스(150)를 통해 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식 등 근거리 무선 통신 방식으로 연동 기기(200)의 무선 인터페이스(230)로 전송할 수 있다. The wired interface 220 of the companion device 200 is connected to the predetermined digital control value generated by the controller 110 according to the movement or blinking pattern in a wired communication method such as a serial communication method through the wired interface 140. Or, it may be transmitted to the wireless interface 230 of the companion device 200 in a short-range wireless communication method such as Bluetooth, Zigbee, or NFC (Near Field Communication) method through the wireless interface 150.

한편, 연동 기기(200)의 제어부(210)는 유선 인터페이스(220) 또는 무선 인터페이스(230)로 수신되는 제어부(110)로부터의 제어값에 따라, 해당 상응하는 키입력을 동작시켜 해당 키입력에 대응된 기능을 수행하도록 기기동작부(240)를 제어할 수 있다. 예를 들어, 연동 기기(200)의 키입력부(250)는 이동통신 단말기의 통화키, 시작키, 화살표키, 또는 인터컴 통신 기기의 PTT 키, 재생기의 재생키, 화살표키 등 각종 전기 전자기기에 사용되는 온/오프 키나 기타 동작을 위한 키일 수 있다. Meanwhile, the controller 210 of the companion device 200 operates a corresponding key input according to a control value received from the wired interface 220 or the wireless interface 230 to operate on the corresponding key input. The device operation unit 240 may be controlled to perform a corresponding function. For example, the key input unit 250 of the companion device 200 may be connected to various electric and electronic devices such as a call key, a start key, an arrow key, or a PTT key of an intercom communication device, a play key, and an arrow key of an intercom communication device. It may be an on / off key used or a key for other operations.

이에 따라 연동 기기(200)의 기기동작부(240)는 키입력부(250)를 조작할 때 해당 기능을 동작할 수도 있지만, 핸즈프리장치(100)의 제어부(110)에서 전송되는 사용자의 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 머리의 움직임 패턴, 또는 눈의 깜박임 패턴 등에 대응된 미리 정해진 디지털 제어값에 따라, 제어부(210)가 해당 기능, 즉, 이동통신 단말기의 통화키, 시작키, 화살표키, 또는 인터컴 통신 기기의 PTT 키, 재생기의 재생키, 화살표키 등이나 기타 각종 전기 전자기기에 사용되는 온/오프 키나 기타 동작을 위한 키에 대응된 동작을 하도록 기기동작부(240)를 제어할 수 있다. Accordingly, although the device operating unit 240 of the companion device 200 may operate the corresponding function when the key input unit 250 is operated, the user's hand or finger transmitted from the control unit 110 of the hands free device 100 may be used. According to a predetermined digital control value corresponding to the movement pattern of the foot, the movement pattern of the foot, the movement pattern of the head, or the blinking pattern of the eyes, the controller 210 controls the corresponding function, that is, the call key, the start key, and the arrow of the mobile communication terminal. The device operating unit 240 is controlled to perform an operation corresponding to a key, a PTT key of an intercom communication device, a playback key of a player, an arrow key, or the like, or other keys used for various electrical and electronic devices. can do.

이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.

핸즈프리 제어 장치(100)
연동 전기기기(200)
자이로 센서(120)
이미지 센서(130)Hands Free Control Device (100)
Interlocking Electrical Equipment (200)
Gyro Sensor (120)
Image sensor 130

Claims (5)

유선 또는 무선으로 연동 기기와 연결된 핸즈프리 제어장치에 있어서,
자이로 센서 또는 이미지 센서를 동작시키는 선택부; 및
상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하고, 해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하는 제어부를 포함하고,
상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 하는 핸즈프리 제어 장치.In the hands-free control device connected to the linked device by wire or wireless,
A selection unit for operating a gyro sensor or an image sensor; And
Analyze the signal from the gyro sensor to generate a predetermined value corresponding to the movement pattern related to the user's movement, or analyze the signal from the image sensor to generate a predetermined value corresponding to the blink pattern related to the user's eye blink And, the control unit for transmitting the predetermined value to the companion device in a wired communication method through a wired interface or a short range wireless communication method through a wireless interface,
And a remote control of the interlocking device such that the companion device operates a key input corresponding to the predetermined value to perform a function corresponding to the key input. 제1항에 있어서,
상기 사용자의 움직임과 관련된 움직임 패턴은, 상기 핸즈프리 제어 장치가 사용자의 손이나 손가락, 발, 또는 머리에 밴드 형태로 장착되는 형태에 따라, 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴을 포함하는 것을 특징으로 하는 핸즈프리 제어 장치.The method of claim 1,
The movement pattern related to the movement of the user may be a movement pattern of a hand or a finger, a movement pattern of a foot, or a movement of a head according to a form in which the hands-free control device is mounted in a band form on the user's hand, finger, foot, or head. Hands-free control device comprising a pattern. 제1항에 있어서,
상기 사용자의 눈의 깜박임과 관련된 깜박임 패턴은, 상기 핸즈프리 제어 장치가 사용자가 착용한 헬멧(또는 안전모)에 장착될 때, 사용자의 한쪽 눈, 또는 양쪽 눈의 깜박임 패턴을 포함하는 것을 특징으로 하는 핸즈프리 제어 장치.The method of claim 1,
The blinking pattern related to the blinking of the eyes of the user may include a blinking pattern of one or both eyes of the user when the hands-free control device is mounted on a helmet (or a hard hat) worn by the user. controller. 제1항에 있어서,
상기 근거리 무선 통신 방식은, 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식을 포함하는 것을 특징으로 하는 핸즈프리 제어 장치.The method of claim 1,
The short range wireless communication method may include a Bluetooth, ZigBee, or NFC (Near Field Communication) method. 자이로 센서 또는 이미지 센서를 동작시키는 선택적으로 동작시키고,
상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하며,
해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하되,
상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 하는 핸즈프리 제어 방법.Selectively operating the gyro sensor or image sensor,
Analyze the signal from the gyro sensor to generate a predetermined value corresponding to the movement pattern related to the user's movement, or analyze the signal from the image sensor to generate a predetermined value corresponding to the blink pattern related to the user's eye blink ,
The predetermined value is transmitted to the companion device through a wired interface through a wired communication method, or through the wireless interface through a short range wireless communication method through a wired interface.
And a remote control of the interlocking device such that the companion device operates a key input corresponding to the predetermined value to perform a function corresponding to the key input.
KR1020110024869A 2011-03-21 2011-03-21 Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement KR101237947B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020110024869A KR101237947B1 (en) 2011-03-21 2011-03-21 Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110024869A KR101237947B1 (en) 2011-03-21 2011-03-21 Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement

Publications (2)

Publication Number Publication Date
KR20120107279A true KR20120107279A (en) 2012-10-02
KR101237947B1 KR101237947B1 (en) 2013-03-05

Family

ID=47279300

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110024869A KR101237947B1 (en) 2011-03-21 2011-03-21 Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement

Country Status (1)

Country Link
KR (1) KR101237947B1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101400365B1 (en) * 2012-10-19 2014-05-27 주식회사 케이티 System and method for setting hands free
KR20150022855A (en) * 2012-05-23 2015-03-04 퀄컴 인코포레이티드 Systems and methods for establishing a group communication based on motion of a mobile device
US9392421B2 (en) 2012-05-23 2016-07-12 Qualcomm Incorporated Systems and methods for group communication using a mobile device with mode depending on user proximity or device position
US9560099B2 (en) 2012-05-23 2017-01-31 Qualcomm Incorporated Systems and methods for group communication using a mobile device using motion and voice activate controls
US9674694B2 (en) 2012-05-23 2017-06-06 Qualcomm Incorporated Systems and methods for group communication using a mobile device with mode transition based on motion
KR20220028213A (en) * 2020-08-28 2022-03-08 한국생산기술연구원 Method and Apparatus for Meal Assistance Using Wearable Apparatus

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160147546A (en) * 2015-06-15 2016-12-23 주식회사 케이엠더블유 Electronic device and method for controlling industrial communication device, and industrial communication device thereof
KR102096804B1 (en) 2016-12-29 2020-04-03 주식회사 인바디 Wearable computing device and operating method thereof

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3487237B2 (en) * 1999-08-27 2004-01-13 日本電気株式会社 Pointing device and computer system using the same
KR100793834B1 (en) * 2006-12-06 2008-01-11 한국과학기술연구원 Apparatus and method for controlling electronic appliances based on hand gesture recognition

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150022855A (en) * 2012-05-23 2015-03-04 퀄컴 인코포레이티드 Systems and methods for establishing a group communication based on motion of a mobile device
US9392421B2 (en) 2012-05-23 2016-07-12 Qualcomm Incorporated Systems and methods for group communication using a mobile device with mode depending on user proximity or device position
US9560099B2 (en) 2012-05-23 2017-01-31 Qualcomm Incorporated Systems and methods for group communication using a mobile device using motion and voice activate controls
US9674694B2 (en) 2012-05-23 2017-06-06 Qualcomm Incorporated Systems and methods for group communication using a mobile device with mode transition based on motion
US9912706B2 (en) 2012-05-23 2018-03-06 Qualcomm Incorporated Systems and methods for group communication using a mobile device using motion and voice activate controls
US10142802B2 (en) 2012-05-23 2018-11-27 Qualcomm Incorporated Systems and methods for establishing a group communication based on motion of a mobile device
US10187759B2 (en) 2012-05-23 2019-01-22 Qualcomm Incorporated Systems and methods for group communication using a mobile device with mode depending on user proximity or device position
KR101400365B1 (en) * 2012-10-19 2014-05-27 주식회사 케이티 System and method for setting hands free
KR20220028213A (en) * 2020-08-28 2022-03-08 한국생산기술연구원 Method and Apparatus for Meal Assistance Using Wearable Apparatus

Also Published As

Publication number Publication date
KR101237947B1 (en) 2013-03-05

Similar Documents

Publication Publication Date Title
KR101237947B1 (en) Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement
US10509469B2 (en) Devices for controlling computers based on motions and positions of hands
US20170193813A1 (en) Smart home control using modular sensing device
US10019067B2 (en) Method and apparatus for performing communication service based on gesture
US20100090949A1 (en) Method and Apparatus for Input Device
US7643850B2 (en) Cellular communication terminals and methods that sense terminal movement for cursor control
EP3037946A1 (en) Remote controller, information processing method and system
EP3007030B1 (en) Portable device and control method via gestures
KR101234578B1 (en) Remote controller and system using motion recognition and remote controlling method thereof
JP6508061B2 (en) INFORMATION PROCESSING APPARATUS, INFORMATION PROCESSING METHOD, AND PROGRAM
CN101581990A (en) Electronic equipment as well as wearable pointing device and method applied to same
KR101928971B1 (en) A wearable device for controlling an electronic device based on hand motion and method for controlling the wearable device thereof
CN102800178A (en) Control method of remote control toy
WO2007065734A2 (en) Acceleration reference devices, cellular communication terminal systems, and methods that sense terminal movement for cursor control
CN104597971B (en) A kind of wearable computer
KR102314710B1 (en) System sign for providing language translation service for the hearing impaired person
US10921882B1 (en) Human-machine interaction method, system and apparatus for controlling an electronic device
WO2017166715A1 (en) Treadmill
TWI547831B (en) An input device with a Bluetooth module and a method of operating the same
KR102336982B1 (en) Mobile terminal and method for controlling the same
KR101183864B1 (en) Hub system for supporting voice/data share among wireless communication stations and method thereof
WO2020181960A1 (en) Wearable controller and use method thereof
CN101732862B (en) Double-controller combination
JP5921047B2 (en) User interface device
KR101366173B1 (en) A phoning finger mouse interlocked with smart glasses

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170202

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee