KR101237947B1 - Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement - Google Patents
Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement Download PDFInfo
- Publication number
- KR101237947B1 KR101237947B1 KR1020110024869A KR20110024869A KR101237947B1 KR 101237947 B1 KR101237947 B1 KR 101237947B1 KR 1020110024869 A KR1020110024869 A KR 1020110024869A KR 20110024869 A KR20110024869 A KR 20110024869A KR 101237947 B1 KR101237947 B1 KR 101237947B1
- Authority
- KR
- South Korea
- Prior art keywords
- key
- user
- hands
- companion device
- free control
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04Q—SELECTING
- H04Q9/00—Arrangements in telecontrol or telemetry systems for selectively calling a substation from a main station, in which substation desired apparatus is selected for applying a control signal thereto or for obtaining measured values therefrom
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Selective Calling Equipment (AREA)
- Telephone Function (AREA)
Abstract
본 발명은 헬멧(안전모) 등을 착용하고 작업 중인 사용자 등 양손 또는 양발을 사용하여 전기전자 기기를 자유롭게 사용할 수 없는 사용자가 손, 머리, 발, 또는 눈을 움직일 때 이러한 사용자의 행동을 인식하여 원격의 전기 전자 기기를 작동시킬 수 있는 핸즈프리 제어 장치 및 방법에 관한 것이다. 본 발명의 일면에 따른, 유선 또는 무선으로 연동 기기와 연결된 핸즈프리 제어장치는, 자이로 센서 또는 이미지 센서를 동작시키는 선택부; 및 상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하고, 해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하는 제어부를 포함하고, 상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 한다.The present invention recognizes the behavior of such a user when the user who cannot use the electronic and electronic device freely using both hands or both feet, such as a user who is wearing a helmet (hat) and moves the hand, head, foot, or eyes, A hands-free control device and method capable of operating an electrical and electronic device of the same. In accordance with an aspect of the present invention, a hands-free control device connected to a companion device by wire or wirelessly includes: a selection unit configured to operate a gyro sensor or an image sensor; And analyzing a signal from the gyro sensor to generate a predetermined value corresponding to a movement pattern related to a user's movement, or analyzing the signal from the image sensor to determine a predetermined value corresponding to a blink pattern related to a user's eye blink. And a control unit for generating the predetermined value and transmitting the predetermined value to the companion device through a wired interface through a wired communication method or by transmitting to the companion device through a wireless interface through a short range wireless communication method, wherein the companion device corresponds to the predetermined value. And remotely control the companion device to operate a key input to perform a function corresponding to the key input.
Description
본 발명은 핸즈프리 제어 장치 및 방법에 관한 것으로서, 특히, 헬멧(안전모) 등을 착용하고 작업 중인 사용자 등 양손 또는 양발을 사용하여 전기전자 기기를 자유롭게 사용할 수 없는 사용자가 손, 머리, 발, 또는 눈을 움직일 때 이러한 사용자의 행동을 인식하여 원격의 전기 전자 기기를 작동시킬 수 있는 핸즈프리 제어 장치 및 방법에 관한 것이다. BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a hands-free control device and method, and more particularly, to a user who is unable to freely use an electronic device using both hands or both feet, such as a user who is wearing a helmet (safety helmet) or the like. The present invention relates to a hands-free control device and a method for recognizing such user's behavior when operating a remote electric and electronic device.
일반적으로 산업현장에서 작업지시 및 업무를 공유하기 위해 통신장비(무전기/TRS 등)를 들고 교신을 하거나, 외부에서 걸려오는 전화를 받거나, 운반기계나 장치 등을 조작하기 위해서는 부득이 하게 손으로 조작하게 되고, 이때 위험 상황에 대한 대처 능력이 떨어져 재산피해 및 인명사고가 자주 발생하는 문제가 있다. In general, in order to share work orders and tasks at industrial sites, people must communicate by hand to communicate with communication equipment (radio / TRS, etc.), receive calls from outside, or operate transporting machines or devices. In this case, the ability to cope with the dangerous situation is poor, there is a problem that often occurs property damage and casualties.
또한, 아웃도어 환경에서 바이크, 자전거, 암벽등반, 패러글라이딩과 같은 레저 활동을 하다보면 운전을 하거나, 밧줄을 잡아 주거나, 비행 조정을 위해 양손이 자유롭지 않은 상황에서 통신장비 및 안전장치 등을 조작하는데 어려움이 있어 위험에 많이 노출되어 있다. In addition, leisure activities such as bikes, bicycles, rock climbing and paragliding in outdoor environments can be used to operate communication equipment and safety devices while driving, holding ropes, or freeing hands for flight control. Difficulties expose you to a lot of risk.
따라서, 양손이 자유롭지 않은 상황에서 작업효율을 높이고 안전성을 확보하기 위해서는 통신장비 및 안전장치를 자유롭게 제어할 수 있는 방법이 절실히 필요하다. 전기 전자 기기와 유선 또는 무선으로 연결된 소형 제어 단말을 이용해 원격으로 기기를 조정하거나 제어할 수 있지만 이와 같은 경우에도 양손이나 양발이 자유롭지 않으면 정확한 조작이 안되어 작업효율을 떨어뜨리고 위험에 노출될 수 있으므로 개선이 요구되고 있다.Therefore, in order to increase work efficiency and secure safety in a situation where both hands are not free, a method for freely controlling communication equipment and safety devices is urgently needed. You can control or control the device remotely by using a small control terminal connected to electric and electronic devices by wire or wireless.However, even if the hands or feet are not free, even in this case, accurate operation may not be possible, which may reduce work efficiency and expose you to danger. This is required.
따라서, 본 발명은 상술한 문제점을 해결하기 위한 것으로서, 본 발명의 목적은, 손 또는 발을 사용하여 전기전자 기기를 자유롭게 사용할 수 없는 사용자가, 밴드 형태로 손, 머리, 발 등의 신체에 장착하거나 헬멧에 장착한 행동 인식 수단을 이용해 손, 머리, 발 또는 눈을 움직일 때 이러한 사용자의 행동을 인식하여 원격의 전기 전자 기기를 작동시킴으로써, 핸즈프리 형으로 원격의 전기 전자 기기를 작동시킬 수 있는 핸즈프리 제어 장치 및 방법을 제공하는 데 있다.Accordingly, the present invention is to solve the above-described problems, an object of the present invention, the user who can not freely use the electrical and electronic equipment using the hands or feet, mounted on the body of the hands, head, feet, etc. in the form of a band Hands-free, hands-free operation of remote electronics by recognizing the user's behavior when moving hands, heads, feet or eyes using a gesture recognition device attached to the helmet It is to provide a control apparatus and method.
예를 들어, 손으로 직접 기기를 조작하지 않고 원격에서 사용자가 손으로 8자를 그리거나, 발로 차는 행동을 하거나, 머리를 끄떡거리거나, 눈을 감고 뜨는 등의 행동을 인식하여, 제어 신호를 유무선으로 전달함으로써, 이동통신 단말기의 통화 키를 누르거나, 인터컴 통신 기기의 PTT 버튼을 누르거나, 재생기의 다음곡 버튼을 누르는 것과 같은 기능을 실현할 수 있는 핸즈프리 제어 장치 및 방법을 제공하는 데 있다.For example, you can remotely control control signals by recognizing actions such as hand drawing, kicking, head-nosing, eyes closed, etc. The present invention provides a hands-free control device and method capable of realizing a function such as pressing a call key of a mobile communication terminal, pressing a PTT button of an intercom communication device, or pressing a next song button of a player.
먼저, 본 발명의 특징을 요약하면, 본 발명의 일면에 따른, 유선 또는 무선으로 연동 기기와 연결된 핸즈프리 제어장치는, 자이로 센서 또는 이미지 센서를 동작시키는 선택부; 및 상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하고, 해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하는 제어부를 포함하고, 상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 한다.First, to summarize the features of the present invention, in accordance with an aspect of the present invention, the hands-free control device connected to the interlocking device by wire or wireless, the selection unit for operating a gyro sensor or an image sensor; And analyzing a signal from the gyro sensor to generate a predetermined value corresponding to a movement pattern related to a user's movement, or analyzing the signal from the image sensor to determine a predetermined value corresponding to a blink pattern related to a user's eye blink. And a control unit for generating the predetermined value and transmitting the predetermined value to the companion device through a wired interface through a wired communication method or by transmitting to the companion device through a wireless interface through a short range wireless communication method, wherein the companion device corresponds to the predetermined value. And remotely control the companion device to operate a key input to perform a function corresponding to the key input.
상기 사용자의 움직임과 관련된 움직임 패턴은, 상기 핸즈프리 제어 장치가 사용자의 손이나 손가락, 발, 또는 머리에 밴드 형태로 장착되는 형태에 따라, 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴을 포함한다.The movement pattern related to the movement of the user may be a movement pattern of a hand or a finger, a movement pattern of a foot, or a movement of a head according to a form in which the hands-free control device is mounted in a band form on the user's hand, finger, foot, or head. Contains a pattern.
상기 사용자의 눈의 깜박임과 관련된 깜박임 패턴은, 상기 핸즈프리 제어 장치가 사용자가 착용한 헬멧(또는 안전모)에 장착될 때, 사용자의 한쪽 눈, 또는 양쪽 눈의 깜박임 패턴을 포함한다.The blink pattern associated with the blink of the user's eyes includes a blink pattern of one or both eyes of the user when the hands-free control device is mounted on the helmet (or helmet) worn by the user.
상기 근거리 무선 통신 방식은, 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식을 포함한다.The short range wireless communication scheme includes Bluetooth, Zigbee, or Near Field Communication (NFC).
그리고 본 발명의 다른 일면에 따른, 핸즈프리 제어 방법은, 자이로 센서 또는 이미지 센서를 동작시키는 선택적으로 동작시키고, 상기 자이로 센서로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성하거나, 상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성하며, 해당 미리 정해진 값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하되, 상기 연동기기가 상기 미리 정해진 값에 대응된 키입력을 동작시켜 상기 키입력에 대응된 기능을 수행하도록 원격으로 상기 연동기기를 제어하기 위한 것을 특징으로 한다.And according to another aspect of the invention, the hands-free control method, selectively operating the gyro sensor or the image sensor, and analyzes the signal from the gyro sensor to generate a predetermined value corresponding to the movement pattern associated with the user's movement Alternatively, the signal from the image sensor may be analyzed to generate a predetermined value corresponding to the blinking pattern related to the blinking of the user's eyes, and the predetermined value may be transmitted to the companion device through a wired interface to a companion device or a wireless interface. Transmitting to a companion device through a short range wireless communication method, wherein the companion device operates a key input corresponding to the predetermined value to remotely control the companion device to perform a function corresponding to the key input. do.
본 발명에 따른 핸즈프리 제어 장치 및 방법에 따르면, 양손이나 발을 자유롭게 사용할 수 없는 산업현장이나 레저분야에서 기기를 이용해 통신을 하거나 안전장치를 조작하기 위해 부득이 하게 기기 조작이 필요한 경우에 사용자가 밴드 형태 또는 헬멧에 장착된 행동 인식 수단을 통해 약속된 행동을 함으로써, 원격의 기기를 핸즈프리 형으로 작동시킬 수 있다.According to the hands-free control device and method according to the present invention, when the user inevitably needs to operate a device in order to communicate or use a device in an industrial site or leisure field where both hands or feet cannot be freely used, the user may form a band. Or, by performing a promised action through a gesture recognition device mounted on the helmet, the remote device can be operated hands-free.
예를 들어, 손으로 직접 기기를 조작하지 않고 원격에서 사용자가 손으로 8자를 그리거나, 발로 차는 행동을 하거나, 머리를 끄떡거리거나, 눈을 감고 뜨는 등의 행동을 인식하여, 제어 신호를 유무선으로 전달함으로써, 이동통신 단말기의 통화 키를 누르거나, 인터컴 통신 기기의 PTT 버튼을 누르거나, 재생기의 다음곡 버튼을 누르는 것과 같은 기능을 실현할 수 있다.For example, you can remotely control control signals by recognizing actions such as hand drawing, kicking, head-nosing, eyes closed, etc. By transmitting to the mobile communication terminal, it is possible to realize a function such as pressing a call key of a mobile communication terminal, pressing a PTT button of an intercom communication device, or pressing a next song button of a player.
도1은 본 발명의 일실시예에 따른 핸즈프리 제어 장치를 인터컴 기기 등 연동 기기의 작동에 적용한 일례이다.
도 2는 본 발명의 일실시예에 따른 핸즈프리 제어 장치를 헬멧에 장착하여 연동 기기의 작동에 적용한 일례이다.
도 3은 본 발명의 일실시예에 따른 핸즈프리 제어 장치와 연동 기기의 구성을 설명하기 위한 도면이다.
도 4는 본 발명의 일실시예에 따른 핸즈프리 제어 장치의 자이로 센서의 동작을 설명하기 위한 도면이다.
도 5는 본 발명의 일실시예에 따른 핸즈프리 제어 장치의 이미지 센서의 동작을 설명하기 위한 도면이다.1 is an example in which the hands-free control device according to an embodiment of the present invention is applied to an operation of an interlock device such as an intercom device.
2 is an example in which the hands-free control device according to an embodiment of the present invention is mounted on a helmet and applied to the operation of an interlock device.
3 is a view for explaining the configuration of the hands-free control device and the companion device according to an embodiment of the present invention.
4 is a view for explaining the operation of the gyro sensor of the hands-free control device according to an embodiment of the present invention.
5 is a view for explaining the operation of the image sensor of the hands-free control device according to an embodiment of the present invention.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the preferred embodiments of the present invention, examples of which are illustrated in the accompanying drawings, wherein like reference numerals refer to the like elements throughout.
도1은 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)를 인터컴 기기 등 연동 기기(200)의 작동에 적용한 일례이다.1 is an example of applying the hands-
본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)는, 자이로 센서를 포함할 수 있으며, 핸즈프리 제어 장치(100) 또는 자이로 센서 부분을 사용자의 손 또는 손가락에 밴드 형태로 장착하여, 사용자가 손으로 8자를 그리는 등 미리 정해진 움직임 패턴으로 핸즈프리 제어 장치(100) 또는 자이로 센서 부분을 움직임으로써, 핸즈프리 제어 장치(100)가 해당 패턴에 대응된 미리 정해진 디지털 제어값을 연동 기기(200)로 전송하여, 손으로 직접 연동 기기(200)의 키입력을 조작하지 않고도 원격에서 해당 키입력에 대응된 기능을 수행하도록 할 수 있다. The hands-
예를 들어, 연동 기기(200)가 인터컴(Intercom) 기기인 경우에, 상대방 인터컴 기기와 음성 신호를 송수신하기 위한 PTT(Push-to-Talk) 버튼을 구비하며, 사용자는 핸즈프리 제어 장치(100) 또는 자이로 센서 부분을 미리 정해진 움직임 패턴으로 움직임으로써, 인터컴 기기(200)는 PTT(Push-to-Talk) 버튼이 눌러진 것과 같은 기능을 수행할 수 있다. For example, when the
여기서, 핸즈프리 제어 장치(100)와 연동되는 통신 기기(200)는 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식 등 근거리 무선 통신 방식으로 신호를 주고 받을 수 있다. 이외에도, 경우에 따라서는 핸즈프리 제어 장치(100)와 연동되는 연동 기기(200)는 서로 케이블로 연결되어 필요한 필요한 신호를 주고 받을 수도 있다. Here, the
또한, 위에서, 핸즈프리 제어 장치(100)가 사용자의 손/손가락에 착용되는 경우를 예로 들어 설명하였으나, 이에 한정되지 않으며, 경우에 따라서는, 발, 또는 머리에 밴드 형태로 장착될 수도 있고, 이때에는 발의 움직임 패턴, 또는 머리의 움직임 패턴에 따라서도 핸즈프리 제어 장치(100)가 해당 패턴에 대응된 미리 정해진 디지털 제어값을 통신 기기(200)로 전송하여, 손으로 직접 연동 기기(200)의 키입력을 조작하지 않고도 원격에서 해당 키입력에 대응된 기능을 수행하도록 할 수 있다.In addition, while the hands-
도 2는 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)를 헬멧(또는 안전모)에 장착하여 연동 기기(200)의 작동에 적용한 일례이다.2 is an example in which the hands-
예를 들어, 핸즈프리 제어 장치(100)가 사용자가 착용한 헬멧(또는 안전모)의 위치 중 사용자의 눈과 가까운 부분에 장착된 경우에, 이때에는 사용자의 한쪽 눈, 또는 양쪽 눈의 깜박임 패턴에 따라서도 핸즈프리 제어 장치(100)가 해당 패턴에 대응된 미리 정해진 디지털 제어값을 연동 기기(200)로 전송하여, 손으로 직접 연동 기기(200)의 키입력을 조작하지 않고도 원격에서 해당 키입력에 대응된 기능을 수행하도록 할 수 있다.For example, when the hands-
도 1 및 도 2에서 핸즈프리 제어 장치(100)는 인터컴 기기의 PTT(Push-to-Talk) 버튼을 동작시키는 것으로 예로 들어 설명하였지만, 이에 한정되지 않으며, 연동 기기(200)로서, 스마트폰(Smart phone), 또는 셀룰러폰(Cellular phone), 디지탈 TRS (Trunked Radio System), 피씨에스폰(PCS phone: Personal Communications Services phone), 동기식/비동기식 IMT-2000(International Mobile Telecommunication-2000), 개인용 디지털 보조기(PDA:Personal Digital Assistant), 왑폰(WAP phone:Wireless application protocol phone), 모바일 게임기(mobile play-station), 기타 PMP(Portable Multimedia Player) 등 휴대 단말의 통화 키, 재생 키, 녹음 키 등을 동작시킬 수도 있으며, 이외에도 노트북 PC, 데스크탑 PC, 팜 PC(Palm Personal Computer) 등이나, 경우에 따라 다른 가정용 또는 산업용 다양한 전기 전자 기기에 구비된 키 입력을 핸즈프리 제어 장치(100)가 대신하도록 할 수 있다. 1 and 2, the hands-
이와 같이 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)는 사용자가 손/손가락, 발, 머리 또는 헬멧 등에 장착되어, 사용자가 손으로 8자를 그리거나, 발로 차는 행동을 하거나, 머리를 끄떡거리거나, 눈을 감고 뜨는 등의 행동을 인식하여, 제어 신호를 유무선으로 통신되는 연동 기기(200)로 전달함으로써, 연동 기기(200)인 이동통신 단말기의 통화 키를 누르거나, 연동 기기(200)인 인터컴 통신 기기의 PTT 버튼을 누르거나, 연동 기기(200)인 재생기의 다음곡 버튼을 누르는 것과 같은 기능을 실현할 수 있도록 하였다. 이와 같은 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)는 양손이나 발을 자유롭게 사용할 수 없는 산업현장이나 레저분야에서 연동 기기(200)를 이용해 통신을 하거나 안전장치를 조작하기 위해 부득이 하게 기기 조작이 필요한 경우에 미리 약속된 행동을 함으로써, 원격의 기기(200)를 핸즈프리 형으로 작동시킬 수 있게 된다.As such, the hands-
이하, 도 3 내지 도 5를 참조하여, 본 발명의 일실시예에 따른 핸즈프리 제어 장치(100)와 연동 기기(200) 간의 동작을 좀 더 자세히 설명한다. 3 to 5, the operation between the hands-
도 3을 참조하면, 핸즈프리 제어 장치(100)는 제어부(110), 자이로 센서(120), 이미지 센서(130), 유선 인터페이스(140), 무선 인터페이스(150) 및 선택부(160)를 포함한다. 또한, 연동 기기(200)는 제어부(210), 유선 인터페이스(220), 무선 인터페이스(230), 기기 동작부(240), 및 키 입력부(250)를 포함한다. Referring to FIG. 3, the hands-
핸즈프리 제어 장치(100)의 제어부(110)는 자이로 센서(120), 이미지 센서(130), 유선 인터페이스(140), 무선 인터페이스(150) 및 선택부(160)의 전반적인 제어를 담당하는 프로세서에 해당한다. The
자이로 센서(120)는 각속도 센서로서 움직임에 따라 해당 방향을 알 수 있게 하는 전기적 신호를 발생할 수 있다. 이미지 센서(130)는 CMOS, 또는 CCD 센서 형태 일 수 있으며, 영상을 촬영하여 해당 전기적 신호를 발생할 수 있다. The
선택부(160)는 사용자의 선택에 따라 자이로 센서(120) 또는 이미지 센서(130)를 동작시킨다. 선택부(160)는 버튼, 키, 스위치 형태일 수 있으며, 사용자의 선택에 따라 선택부(160)에 설정된 형태에 따라 자이로 센서(120)만 동작하거나 이미지 센서(130)만 동작하거나 두 센서가 모두 동작하도록 할 수 있다.The
사용자가 핸즈프리 제어 장치(100)를 손이나 손가락, 발, 또는 머리에 밴드 형태로 장착하고, 움직임에 따라 제어부(110)는 자이로 센서(120)로부터의 신호를 분석해 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 값을 생성할 수 있다. The user mounts the hands-
예를 들어, 제어부(110) 또는 제어부(110)와 연결된 저장 수단(도시 되지 않음)은 사용자의 움직임과 관련된 움직임 패턴에 대응된 미리 정해진 디지털 제어값을 저장할 수 있다. 이에 따라 제어부(110)는 사용자의 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴에 대응된 미리 정해진 값을 생성할 수 있다. 예를 들어, 사용자가 핸즈프리 제어 장치(100)를 손이나 손가락에 장착한 경우에, 손이나 손가락의 움직임 패턴은, 원 그리기, 8자 그리기, 기타 텍스트나 기호를 그리기 등일 수 있으며, 제어부(110)는 이에 대응된 미리 정해진 제어값을 선택하여 출력할 수 있다. 또한, 사용자가 핸즈프리 제어 장치(100)를 발에 장착한 경우에, 발의 움직임 패턴은, 차기, 원 그리기, 8자 그리기, 기타 텍스트나 기호를 그리기 등일 수 있으며, 제어부(110)는 이에 대응된 미리 정해진 제어값을 선택하여 출력할 수 있다. 또한, 사용자가 핸즈프리 제어 장치(100)를 머리에 장착한 경우에, 머리의 움직임 패턴은, 상하 끄덕이기, 가로 젓기 등일 수 있으며, 제어부(110)는 이에 대응된 미리 정해진 제어값을 선택하여 출력할 수 있다.For example, the
도 4와 같이, 자이로 센서(120)는 3차원 방향에 대하여 각각 설치되어 좀 더 정밀하게 사용자의 움직임에 따라 해당 방향을 알 수 있게 하는 전기적 신호를 발생할 수 있으며, 경우에 따라서는 자이로 센서(120)가 동작할 때 가속도 센서(미도시)가 더 동작하도록 하여 더 정밀하게 사용자의 움직임에 대한 인식을 하도록 할 수 있다. 가속도 센서가 추가적으로 사용되는 경우에, 제어부(110)는 자이로 센서(120)의 방향 관련 신호와 가속도 센서(미도시)의 방향과 속도(또는 속도 변화)에 관련한 신호를 조합하여 사용자의 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 또는 머리의 움직임 패턴에 대응된 미리 정해진 값을 생성할 수 있다.As shown in FIG. 4, the
한편, 사용자가 핸즈프리 제어 장치(100)를 사용자가 착용한 헬멧(또는 안전모)에 장착되어 동작할 때, 사용자가 눈을 깜박임에 따라 제어부(110)는 이미지 센서(130)로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 값을 생성할 수 있다.On the other hand, when the user operates the hands-
예를 들어, 제어부(110) 또는 제어부(110)와 연결된 저장 수단(도시 되지 않음)은 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 디지털 제어값을 저장할 수 있다. 이에 따라 제어부(110)는 깜박임 에 대응된 미리 정해진 값을 생성할 수 있다.For example, the
도 5의 (A)와 같이 오른쪽 눈이 깜박임, 도 5의 (B)와 같이 왼쪽 눈이 깜박임, 도 5의 (C)와 같이 양쪽 눈이 깜박임 등과 이들의 연속 동작 등으로 구분하여, 제어부(110)는 해당 눈의 깜박임에 대응된 미리 정해진 디지털 제어값을 생성할 수 있다.The right eye blinks as shown in FIG. 5A, the left eye blinks as shown in FIG. 5B, and both eyes blink as shown in FIG. 110 may generate a predetermined digital control value corresponding to the blink of the eye.
이와 같이 제어부(110)가 해당 움직임 또는 깜박임 패턴에 따라 생성한 미리 정해진 디지털 제어값을, 유선 인터페이스(140)를 통해 시리얼 통신 방식 등의 유선 통신 방식으로 연동 기기(200)의 유선 인터페이스(220)로 전송할 수 있으며, 또는 무선 인터페이스(150)를 통해 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식 등 근거리 무선 통신 방식으로 연동 기기(200)의 무선 인터페이스(230)로 전송할 수 있다. The
한편, 연동 기기(200)의 제어부(210)는 유선 인터페이스(220) 또는 무선 인터페이스(230)로 수신되는 제어부(110)로부터의 제어값에 따라, 해당 상응하는 키입력을 동작시켜 해당 키입력에 대응된 기능을 수행하도록 기기동작부(240)를 제어할 수 있다. 예를 들어, 연동 기기(200)의 키입력부(250)는 이동통신 단말기의 통화키, 시작키, 화살표키, 또는 인터컴 통신 기기의 PTT 키, 재생기의 재생키, 화살표키 등 각종 전기 전자기기에 사용되는 온/오프 키나 기타 동작을 위한 키일 수 있다. Meanwhile, the
이에 따라 연동 기기(200)의 기기동작부(240)는 키입력부(250)를 조작할 때 해당 기능을 동작할 수도 있지만, 핸즈프리장치(100)의 제어부(110)에서 전송되는 사용자의 손이나 손가락의 움직임 패턴, 발의 움직임 패턴, 머리의 움직임 패턴, 또는 눈의 깜박임 패턴 등에 대응된 미리 정해진 디지털 제어값에 따라, 제어부(210)가 해당 기능, 즉, 이동통신 단말기의 통화키, 시작키, 화살표키, 또는 인터컴 통신 기기의 PTT 키, 재생기의 재생키, 화살표키 등이나 기타 각종 전기 전자기기에 사용되는 온/오프 키나 기타 동작을 위한 키에 대응된 동작을 하도록 기기동작부(240)를 제어할 수 있다. Accordingly, although the
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined by the equivalents of the claims, as well as the claims.
핸즈프리 제어 장치(100)
연동 전기기기(200)
자이로 센서(120)
이미지 센서(130)Hands Free Control Device (100)
Interlocking Electrical Equipment (200)
Gyro Sensor (120)
Claims (5)
이미지 센서; 상기 이미지 센서를 동작시키기 위한 버튼, 키, 또는 스위치 형태의 선택부; 및
상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 디지털값을 생성하고, 생성한 상기 미리 정해진 디지털값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하기 위한 제어부를 포함하고,
사용자의 오른쪽 눈, 왼쪽 눈, 또는 양쪽 눈의 깜박임이나 이들의 연속 동작에 대한 패턴에 대한 상기 미리 정해진 디지털값에 따라, 전기 전자기기의 온/오프 키, 인터컴 통신 기기의 PTT(Push-to-Talk) 키, 이동통신 단말기의 통화키, 시작키, 또는 화살표키, 재생기의 재생키 또는 화살표키를 포함하는 해당 연동기기의 키에 대한 입력을 제어하여 해당 연동기기가 해당 입력에 대한 기능을 수행하도록 하기 위한 것을 특징으로 하는 핸즈프리 제어 장치.In the hands-free control device for controlling the linked device by wire or wirelessly mounted on the part of the helmet or hard hat worn by the user close to the eyes of the user,
An image sensor; A selection unit in the form of a button, a key, or a switch for operating the image sensor; And
Analyzing the signal from the image sensor to generate a predetermined digital value corresponding to the blink pattern associated with the blink of the user's eyes, and transmits the generated predetermined digital value to the companion device via a wired interface to a companion device or wireless It includes a control unit for transmitting to the companion device through a short range wireless communication method through the interface,
Depending on the predetermined digital value for the blink of the user's right eye, left eye, or both eyes, or a pattern for their continuous operation, the on / off key of the electrical electronics, the push-to-button of the intercom communication device Talk) key, call key, start key, or arrow key of mobile communication terminal, control key input of corresponding interlocking device including play key or arrow key of player, and the corresponding linked device performs the function for the input. Hands free control device characterized in that for.
자이로 센서를 더 포함하고,
상기 제어부는 상기 자이로 센서로부터의 신호를 분석해 사용자의 머리의 움직임 패턴에 대응된 미리 정해진 디지털값을 생성하여 해당 디지털값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하고, 해당 연동기기의 키에 대한 입력을 제어하는 것을 특징으로 하는 핸즈프리 제어 장치.The method of claim 1,
Further includes a gyro sensor,
The control unit analyzes the signal from the gyro sensor and generates a predetermined digital value corresponding to the movement pattern of the user's head, and transmits the digital value to the companion device through a wired interface in a wired communication method or through a wireless interface in a short range wireless manner. Hands-free control device, characterized in that for transmitting to the companion device in a communication method, controlling the input to the key of the companion device.
상기 근거리 무선 통신 방식은, 블루투스, 지그비, 또는 NFC(Near Field Communication) 방식을 포함하는 것을 특징으로 하는 핸즈프리 제어 장치.The method of claim 1,
The short range wireless communication method may include a Bluetooth, ZigBee, or NFC (Near Field Communication) method.
버튼, 키, 또는 스위치를 이용해 이미지 센서를 동작시키는 단계;
상기 이미지 센서로부터의 신호를 분석해 사용자의 눈의 깜박임과 관련된 깜박임 패턴에 대응된 미리 정해진 디지털값을 생성하는 단계; 및
생성한 상기 미리 정해진 디지털값을 유선 인터페이스를 통해 유선 통신 방식으로 연동기기로 전송하거나 무선 인터페이스를 통해 근거리 무선 통신 방식으로 연동기기로 전송하는 단계를 포함하고,
사용자의 오른쪽 눈, 왼쪽 눈, 또는 양쪽 눈의 깜박임이나 이들의 연속 동작에 대한 패턴에 대한 상기 미리 정해진 디지털값에 따라, 전기 전자기기의 온/오프 키, 인터컴 통신 기기의 PTT(Push-to-Talk) 키, 이동통신 단말기의 통화키, 시작키, 또는 화살표키, 재생기의 재생키 또는 화살표키를 포함하는 해당 연동기기의 키에 대한 입력을 제어하여 해당 연동기기가 해당 입력에 대한 기능을 수행하도록 하기 위한 것을 특징으로 하는 핸즈프리 제어 장치의 작동 방법.In the method of operating the hands-free control device for controlling the linked device by wire or wirelessly mounted in the position of the helmet or hard hat worn by the user close to the eyes of the user,
Operating the image sensor using a button, key, or switch;
Analyzing a signal from the image sensor to generate a predetermined digital value corresponding to a blink pattern associated with blinking of a user's eye; And
And transmitting the generated digital value to the companion device through a wired interface to a companion device through a wired communication method or through a wireless interface to a companion device through a short range wireless communication method.
Depending on the predetermined digital value for the blink of the user's right eye, left eye, or both eyes, or a pattern for their continuous operation, the on / off key of the electrical electronics, the push-to-button of the intercom communication device Talk) key, call key, start key, or arrow key of mobile communication terminal, control key input of corresponding interlocking device including play key or arrow key of player, and the corresponding linked device performs the function for the input. A method of operating a hands-free control device, characterized in that for.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110024869A KR101237947B1 (en) | 2011-03-21 | 2011-03-21 | Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110024869A KR101237947B1 (en) | 2011-03-21 | 2011-03-21 | Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20120107279A KR20120107279A (en) | 2012-10-02 |
KR101237947B1 true KR101237947B1 (en) | 2013-03-05 |
Family
ID=47279300
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110024869A KR101237947B1 (en) | 2011-03-21 | 2011-03-21 | Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101237947B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016204483A1 (en) * | 2015-06-15 | 2016-12-22 | 주식회사 케이엠더블유 | Electronic device and method for controlling industrial communication device, and industrial communication device thereof |
KR20180078164A (en) | 2016-12-29 | 2018-07-09 | 주식회사 인바디 | Wearable computing device and operating method thereof |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9204263B2 (en) * | 2012-05-23 | 2015-12-01 | Mark A. Lindner | Systems and methods for establishing a group communication based on motion of a mobile device |
US9392421B2 (en) | 2012-05-23 | 2016-07-12 | Qualcomm Incorporated | Systems and methods for group communication using a mobile device with mode depending on user proximity or device position |
US9560099B2 (en) | 2012-05-23 | 2017-01-31 | Qualcomm Incorporated | Systems and methods for group communication using a mobile device using motion and voice activate controls |
US9674694B2 (en) | 2012-05-23 | 2017-06-06 | Qualcomm Incorporated | Systems and methods for group communication using a mobile device with mode transition based on motion |
KR101400365B1 (en) * | 2012-10-19 | 2014-05-27 | 주식회사 케이티 | System and method for setting hands free |
KR102429231B1 (en) * | 2020-08-28 | 2022-08-04 | 한국생산기술연구원 | Method and Apparatus for Meal Assistance Using Wearable Apparatus |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001067179A (en) * | 1999-08-27 | 2001-03-16 | Nec Corp | Pointing device and computer system using the same |
KR100793834B1 (en) * | 2006-12-06 | 2008-01-11 | 한국과학기술연구원 | Apparatus and method for controlling electronic appliances based on hand gesture recognition |
-
2011
- 2011-03-21 KR KR1020110024869A patent/KR101237947B1/en not_active IP Right Cessation
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001067179A (en) * | 1999-08-27 | 2001-03-16 | Nec Corp | Pointing device and computer system using the same |
KR100793834B1 (en) * | 2006-12-06 | 2008-01-11 | 한국과학기술연구원 | Apparatus and method for controlling electronic appliances based on hand gesture recognition |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2016204483A1 (en) * | 2015-06-15 | 2016-12-22 | 주식회사 케이엠더블유 | Electronic device and method for controlling industrial communication device, and industrial communication device thereof |
KR20180078164A (en) | 2016-12-29 | 2018-07-09 | 주식회사 인바디 | Wearable computing device and operating method thereof |
Also Published As
Publication number | Publication date |
---|---|
KR20120107279A (en) | 2012-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101237947B1 (en) | Hand Free Control Apparatus and Method for Operating Electric/Electronic Device Based on Recognition of User Movement | |
US10838495B2 (en) | Devices for controlling computers based on motions and positions of hands | |
KR100800859B1 (en) | Apparatus and method for inputting key in head mounted display information terminal | |
JP5661935B2 (en) | Method and wearable device for user | |
US20100090949A1 (en) | Method and Apparatus for Input Device | |
CN101581990A (en) | Electronic equipment as well as wearable pointing device and method applied to same | |
JP5681865B2 (en) | User interface device | |
KR101928971B1 (en) | A wearable device for controlling an electronic device based on hand motion and method for controlling the wearable device thereof | |
KR101234578B1 (en) | Remote controller and system using motion recognition and remote controlling method thereof | |
CN102800178A (en) | Control method of remote control toy | |
CN106648068A (en) | Method for recognizing three-dimensional dynamic gesture by two hands | |
CN106325735A (en) | Method and device for operating video games by bearing gesture touch | |
KR102274372B1 (en) | Method and wealable device for interworking mobile terminal | |
US10921882B1 (en) | Human-machine interaction method, system and apparatus for controlling an electronic device | |
TWI547831B (en) | An input device with a Bluetooth module and a method of operating the same | |
KR20210079162A (en) | System sign for providing language translation service for the hearing impaired person | |
KR101743638B1 (en) | Separation control type video system and method thereof | |
KR20160025229A (en) | Mobile terminal and method for controlling the same | |
KR20170027607A (en) | Wearable device and method for controlling the same | |
KR101183864B1 (en) | Hub system for supporting voice/data share among wireless communication stations and method thereof | |
CN204143350U (en) | Wearable intelligent input and control device | |
JP5921047B2 (en) | User interface device | |
CN101732862B (en) | Double-controller combination | |
KR101366173B1 (en) | A phoning finger mouse interlocked with smart glasses | |
KR100747878B1 (en) | Apparatus and Method for Three-Dimension User Interface in Communication Device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170202 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |