KR102403887B1 - System and method for protecting drowsy driving - Google Patents
System and method for protecting drowsy driving Download PDFInfo
- Publication number
- KR102403887B1 KR102403887B1 KR1020200161076A KR20200161076A KR102403887B1 KR 102403887 B1 KR102403887 B1 KR 102403887B1 KR 1020200161076 A KR1020200161076 A KR 1020200161076A KR 20200161076 A KR20200161076 A KR 20200161076A KR 102403887 B1 KR102403887 B1 KR 102403887B1
- Authority
- KR
- South Korea
- Prior art keywords
- driver
- input
- keyboard
- drowsiness
- server
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B3/00—Audible signalling systems; Audible personal calling systems
- G08B3/10—Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Electromagnetism (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
본 발명은 졸음 운전 방지 시스템 및 그 방법에 관한 것이다. 보다 상세하게는 운전자의 표정을 딥러닝 기반으로 분석하여 졸음 상태임을 감지하고, 본 발명 특유의 입력 장치를 활용하여 운전자의 졸음을 방지하는 졸음 운전 방지 시스템 및 그 방법에 관한 것이다.The present invention relates to a system for preventing drowsy driving and a method therefor. More particularly, it relates to a drowsy driving prevention system and method for detecting a drowsy state by analyzing a driver's facial expression based on deep learning, and preventing the driver from drowsiness by using a unique input device of the present invention.
자동차는 사용되는 원동기의 종류에 따라, 내연기관(internal combustion engine) 자동차, 외연기관(external combustion engine) 자동차, 가스터빈(gas turbine) 자동차 또는 전기자동차(electric vehicle) 등으로 분류될 수 있다.An automobile may be classified into an internal combustion engine automobile, an external combustion engine automobile, a gas turbine automobile, an electric vehicle, or the like, according to a type of a prime mover used.
또한, 잘 알려진 바와 같이, 졸음 운전은 이미 그 비중이 점차 늘어 차량 사고 원인의 가장 큰 부분을 차지하고 있으며, 이를 방지하기 위해 많은 연구들이 수행되고 있다. 졸음 운전은 교통사고의 중요한 원인으로, 치명적인 교통사고의 36%, 전체 교통사고의 43 ~ 54%가 졸음 운전으로 인한 것이다. 따라서, 운전자의 졸음을 감지하여 운전자의 졸음을 방지하는 시스템은 교통 사고를 줄일 수 있는 매우 중요한 기술이다. 또한, 아래와 같이 우리나라에서 졸음 운전으로 인한 사고는 꾸준하게 발생하고 있다. Also, as is well known, drowsy driving has already increased its proportion and accounts for the largest portion of the cause of vehicle accidents, and many studies are being conducted to prevent this. Drowsy driving is an important cause of traffic accidents, and 36% of fatal traffic accidents and 43 to 54% of all traffic accidents are due to drowsy driving. Accordingly, a system for preventing the driver from drowsiness by detecting the driver's drowsiness is a very important technology for reducing traffic accidents. In addition, accidents due to drowsy driving in Korea continue to occur as shown below.
운전자의 졸음을 방지하기 위하여 운전자의 상태를 파악하는 전통적인 방법들이 존재한다. 전통적인 방법들은 크게 세 가지 방식으로 분류할 수 있다.In order to prevent the driver from drowsiness, there are traditional methods of detecting the driver's condition. Traditional methods can be broadly classified into three types.
첫 번째로 차량의 변화를 관찰하여 운전자의 상태를 판단하는 방법이 있다. 차선을 이탈하는 상태가 일정 시간 지속되나 차선 변경 신호 없이 차선을 가로지를 시 경보를 울리는 방법들이 대표적이다.First, there is a method of judging the driver's condition by observing the change of the vehicle. A typical example is a method that generates an alarm when the lane departure condition continues for a certain period of time but crosses a lane without a lane change signal.
두 번째로 운전자의 뇌파, 심장 박동 등의 생리학 데이터를 기반으로 운전자의 상태를 인식하는 방법이 있다. 이 방식은 의학적으로 졸음 관련 환자를 치료할 때 사용되는 만큼 높은 정확도를 가지지만 운전자에게 측정 장비를 착용하여 변화를 관찰하기에는 어려움이 있어 실세계에서 적용하기 어려운 방법이다.Second, there is a method of recognizing the driver's condition based on physiological data such as the driver's brain waves and heartbeat. Although this method has high accuracy as it is medically used to treat drowsiness-related patients, it is difficult to apply in the real world because it is difficult to observe the change by wearing a measuring device to the driver.
이러한 전통적인 방법들은 운전자들이 가지는 개개인의 서로 다른 특성을 모두 반영하지 못하여 일반화된 졸음 감지 모델을 도출하는데 한계가 있다.These traditional methods have limitations in deriving a generalized drowsiness detection model because they do not reflect all the different characteristics of drivers.
특히, 대한민국 특허 제209610호는 EEG 신호를 이용한 졸음 방지 장치를 개시하고 있으나, EEG 및 심박수를 감지하는 센서류의 장착은 운전자가 피관리의식을 받게 되어 민감해질 수 있다는 문제가 있다. 따라서, 운전자가 의식하지 않는 상황에서 졸음을 감지하고, 보다 효율적으로 운전자의 졸음을 방지할 수 있는 방법이 필요하다.In particular, Korean Patent No. 209610 discloses a device for preventing drowsiness using an EEG signal, but there is a problem that the installation of sensors for detecting EEG and heart rate may cause the driver to become sensitive as he/she receives the consciousness to be managed. Accordingly, there is a need for a method for detecting drowsiness in a situation in which the driver is not aware and for preventing the driver from drowsiness more effectively.
또한, 입력 장치는 장치와 사용자의 커뮤니케이션 수단일 수 있다. 입력 장치는, 마우스, 키보드 등의 기본적인 장치들뿐만 아니라 제스처 인식, 음성 인식 등 다양한 원리를 활용한 모든 장치를 포함할 수 있다. 일반적으로 입력 장치로 사용되는 키보드는 단순히 스위치의 원리로 작동된다고 할 수 있다. 즉 스위치를 눌렀을 때 전류가 흐르고, 그 반대로 누르지 않았을 때 전류가 흐르지 않는 단순한 원리를 이용한 이진수 정보 입력방식을 따르고 있다.Also, the input device may be a communication means between the device and the user. The input device may include not only basic devices such as a mouse and keyboard, but also all devices using various principles such as gesture recognition and voice recognition. A keyboard, which is generally used as an input device, is simply operated by the principle of a switch. In other words, it follows the binary information input method using the simple principle that current flows when the switch is pressed and on the contrary, no current flows when the switch is not pressed.
또한, 키보드의 경우 모바일 기기의 이동성을 감소시키고, 인식률이 낮은 단점 등이 존재하였다.In addition, in the case of the keyboard, there were disadvantages such as reduced mobility of the mobile device and a low recognition rate.
최근, 웨어러블 스마트기기(Wearable Smart Device) 또는 착용 컴퓨터라는 유비쿼터스(ubiquitous)컴퓨팅 기술이 대두되고 있다. 이러한 기술은 컴퓨터를 옷이나 안경처럼 착용할 수 있게 함으로써 컴퓨터를 인간 몸의 일부로 만드는데 기여할 수 있다. 웨어러블 컴퓨터의 관점에서 더욱 편리하게 타이핑하거나 데이터를 입력할 수 있는 입력장치의 개발이 요구되고 있다.Recently, a ubiquitous computing technology called a wearable smart device or a wearable computer has emerged. These technologies could help make computers part of the human body by making them wearable like clothes or glasses. From the viewpoint of a wearable computer, development of an input device capable of more conveniently typing or inputting data is required.
이러한 요구에 따라 종래의 손가락을 이용한 웨어러블 입력 장치는 손가락의 동작이나 손가락이 터치하는 위치에 따라 입력 정보를 다르게 생성하여 입력 정보로 이용하는 것으로 입력정보를 생성하기 위해 특정의 제스처를 취하거나, 신체의 특정 부위를 터치하여 해당 체스처나 해당 신체의 부위에 할당된 입력정보를 이용하여 문자를 입력하는 방식이었다. 이런 경우, 특정 체스처를 제대로 인식하지 못하거나, 특정 신체 부위를 터치하지 못하는 경우에는 제대로된 입력 정보를 생성하지 못하는 경우가 발생하였다. 따라서, 이동성이 좋으면서도 타이핑이 편리한 웨어러블 키보드에 대한 필요성이 증가하였다.In response to this demand, the conventional wearable input device using a finger generates input information differently and uses it as input information according to the motion of the finger or the location where the finger touches. It was a method in which a character was input by touching a specific part and using the corresponding gesture or input information assigned to the part of the body. In this case, when a specific gesture could not be properly recognized or a specific body part could not be touched, proper input information could not be generated. Accordingly, the need for a wearable keyboard with good mobility and convenient typing has increased.
이처럼, 운전자의 졸음을 감지하기 위한 효율적인 수단뿐만 아니라, 웨어러블 키보드를 통하여 운전자가 피드백을 제공함으로써, 운전자가 잠을 깰 수 있도록 하기 위한 다양한 수단이 필요하다. As such, there is a need for various means for enabling the driver to wake up by providing feedback through the wearable keyboard as well as an effective means for detecting the driver's drowsiness.
본 발명의 목적은 상술한 문제점들을 해결하기 위한 졸음 운전 방지 시스템 및 그 방법을 제안하기 위한 것이다. SUMMARY OF THE INVENTION It is an object of the present invention to propose a system for preventing drowsy driving and a method therefor to solve the above problems.
또한, 본 발명의 목적은 딥 러닝을 활용하여 운전자의 졸음 상태를 보다 효율적으로 감지하기 위한 것이다. Another object of the present invention is to more efficiently detect a driver's drowsiness state by using deep learning.
또한, 본 발명의 목적은 본 발명 특유의 입력 장치를 활용하여 보다 효율적으로 운전자의 졸음 운전을 방지하기 위한 것이다. Another object of the present invention is to more effectively prevent a driver from drowsy driving by utilizing an input device unique to the present invention.
상술한 문제점들을 해결하기 위하여, 본 발명은, 운전자의 얼굴 영상을 획득하는 영상 획득부, 상기 영상을 수신하고, 상기 영상에 기초하여 상기 운전자의 졸음 상태에 대한 정보를 획득하는 서버, 상기 운전자의 졸음 상태에 따른 알람을 출력하는 스피커 및 상기 알람을 오프(off)하기 위하여 미리 정해진 입력이 입력되는 입력 장치를 포함하되, 상기 서버는 상기 미리 정해진 입력을 상기 입력 장치로부터 수신하고, 상기 미리 정해진 입력에 따라 상기 스피커의 알람을 오프(off)하도록 제어할 수 있다. In order to solve the above problems, the present invention provides an image acquisition unit for acquiring an image of a driver's face, a server for receiving the image, and acquiring information on the drowsiness state of the driver based on the image, A speaker for outputting an alarm according to a drowsy state and an input device to which a predetermined input is input to turn off the alarm, wherein the server receives the predetermined input from the input device, and the predetermined input Accordingly, it is possible to control to turn off the alarm of the speaker.
또한, 상기 서버는, 상기 운전자의 상기 얼굴에 대한 특징점을 추출하고, 상기 특징점을 기초로 상기 운전자의 졸음 상태에 대한 정보를 획득할 수 있다. Also, the server may extract a feature point for the face of the driver, and obtain information about the driver's drowsiness state based on the feature point.
또한, 상기 특징점은 상기 운전자의 입 주변 또는 눈 주변을 따라 추출되고, 상기 서버는, 상기 특징점이 미리 정해진 길이보다 더 움직이는 경우, 상기 운전자의 상태를 졸음 상태로 정의할 수 있다. In addition, the feature point is extracted along a periphery of the driver's mouth or eyes, and when the feature point moves more than a predetermined length, the server may define the driver's state as a drowsy state.
또한, 상기 스피커는 미리 입력된 다이어로그(dialog)를 음성으로 출력할 수 있다. In addition, the speaker may output a pre-input dialog (dialog) as a voice.
또한, 상기 입력 장치는 상기 운전자가 착용하는 웨어러블 키보드일 수 있다. Also, the input device may be a wearable keyboard worn by the driver.
또한, 상술한 문제점들을 해결하기 위하여, 본 발명은, 운전자의 얼굴 영상을 수신하는 단계, 상기 얼굴 영상을 기초로, 상기 운전자의 졸음 상태에 대한 정보를 획득하는 단계, 상기 졸음 상태에 따른 알람을 출력하기 위한 명령을 스피커로 전송하는 단계, 미리 정해진 입력을 입력 장치로부터 수신하는 단계 및 상기 미리 정해진 입력을 수신하고, 상기 미리 정해진 입력에 따라 상기 스피커의 알람을 오프(off)하도록 제어하는 단계를 포함할 수 있다. In addition, in order to solve the above problems, the present invention provides the steps of: receiving a driver's face image; acquiring information on the driver's drowsiness state based on the face image; transmitting a command for outputting to a speaker, receiving a predetermined input from an input device, receiving the predetermined input, and controlling an alarm of the speaker to turn off according to the predetermined input may include
또한, 상기 졸음 상태에 대한 정보를 획득하는 단계는, 상기 운전자의 상기 얼굴에 대한 특징점을 추출하는 단계 및 상기 특징점을 기초로 상기 졸음 상태에 대한 정보를 획득하는 단계를 포함할 수 있다. Also, the obtaining of the information on the drowsiness state may include extracting a feature point for the face of the driver and acquiring information on the drowsiness state based on the feature point.
또한, 상기 특징점을 추출하는 단계는 상기 운전자의 입 주변 또는 입 주변을 따라 상기 특징점을 추출하고, 상기 졸음 상태에 대한 정보를 획득하는 단계는 상기 특징점이 이동한 거리를 획득하는 단계 및 상기 이동한 거리가 미리 정해진 길이보다 큰 경우, 상기 운전자의 상태를 졸음 상태로 정의하는 단계를 포함할 수 있다. In addition, the step of extracting the feature point extracts the feature point along or around the driver's mouth, and the step of obtaining the information on the drowsiness state includes the steps of obtaining the distance traveled by the feature point and the moving When the distance is greater than a predetermined length, the method may include defining the driver's state as a drowsy state.
또한, 상기 스피커는 미리 입력된 다이어로그(dialog)를 음성으로 출력할 수 있다.In addition, the speaker may output a pre-input dialog (dialog) as a voice.
또한, 상기 입력 장치는 상기 운전자가 착용하는 웨어러블 키보드일 수 있다. Also, the input device may be a wearable keyboard worn by the driver.
또한, 상술한 문제점들을 해결하기 위하여, 본 발명은, 명령어들을 저장하는 비일시적 컴퓨터 판독가능 매체로서, 상기 명령어들은 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 상술한 운전자 졸음 방지 방법을 수행하게 하는, 비일시적 컴퓨터 판독가능 매체일 수 있다. In addition, in order to solve the above problems, the present invention provides a non-transitory computer readable medium storing instructions, when the instructions are executed by a processor, causing the processor to perform the above-described method for preventing driver drowsiness, It may be a non-transitory computer-readable medium.
본 발명은 상술한 문제점들을 해결하기 위한 졸음 운전 방지 시스템 및 그 방법을 제공할 수 있는 효과가 있다. The present invention has the effect of providing a system and method for preventing drowsy driving for solving the above-described problems.
또한, 본 발명은 딥러닝을 활용하여 운전자의 졸음 상태를 정확하게 감지할 수 있을 뿐만 아니라, 미리 정해진 입력을 수행하도록 본 발명 특유의 입력 장치를 사용하여야만 졸음 경보가 꺼진다는 점에서, 운전자의 졸음을 효과적으로 방지할 수 있다는 효과가 있다. In addition, the present invention can not only accurately detect the driver's drowsiness state by utilizing deep learning, but also reduce the driver's drowsiness in that the drowsiness alarm is turned off only by using the input device unique to the present invention to perform a predetermined input. It can be effectively prevented.
또한, 본 발명은 웨어러블 키보드를 활용하여 운전자로부터 피드백을 받음으로써, 운전 중에도 운전에 크게 방해되지 않고 운전자로부터 피드백을 입력받을 수 있어 운전자의 졸음을 방지하면서도 차량 운전의 안전성을 최대화할 수 있다는 효과가 있다. In addition, the present invention utilizes a wearable keyboard to receive feedback from the driver, so that feedback can be input from the driver without greatly hindering driving while driving, thereby preventing the driver from drowsiness and maximizing the safety of driving the vehicle. have.
본 발명에 따라 얻을 수 있는 효과는 이상에서 언급한 효과로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtainable according to the present invention are not limited to the above-mentioned effects, and other effects not mentioned may be clearly understood by those of ordinary skill in the art to which the present invention belongs from the following description. will be.
도 1은 본 발명에 따른 졸음 운전 방지 시스템을 나타낸 도면이다.
도 2는 운전자와 커뮤니케이션을 통하여 운전자의 졸음을 방지하는 것을 나타내는 도면이다.
도 3은 본 발명에 따른 서버를 나타낸 도면이다.
도 4는 본 발명의 입력 장치인 웨어러블 키보드의 동작을 개략적으로 설명하기 위한 도면이다.
도 5는 본 발명의 입력 장치인 웨어러블 키보드에서 입력신호로부터 출력값을 판단하여 외부 장치로 전송하는 일련의 과정을 설명하기 위한 흐름도이다.
도 6은 본 발명의 입력 장치인 웨어러블 키보드의 상세 구성을 설명하기 위한 도면이다.
도 7은 본 발명의 입력 장치인 웨어러블 키보드에서 제 1 센싱 데이터를 인식하는 동작을 설명하기 위한 도면이다.
도 8은 본 발명의 입력 장치인 웨어러블 키보드의 주요 구성을 설명하기 위한 도면이다.
도 9 내지 도 11은 본 발명에 따른 운전자 졸음 방지 방법을 나타낸 도면이다.
본 발명에 관한 이해를 돕기 위해 상세한 설명의 일부로 포함되는, 첨부 도면은 본 발명에 대한 실시예를 제공하고, 상세한 설명과 함께 본 발명의 기술적 특징을 설명한다.1 is a view showing a system for preventing drowsy driving according to the present invention.
2 is a diagram illustrating prevention of drowsiness of a driver through communication with the driver;
3 is a diagram illustrating a server according to the present invention.
4 is a diagram schematically illustrating an operation of a wearable keyboard, which is an input device according to the present invention.
5 is a flowchart for explaining a series of processes of determining an output value from an input signal in the wearable keyboard as an input device of the present invention and transmitting it to an external device.
6 is a view for explaining a detailed configuration of a wearable keyboard, which is an input device of the present invention.
7 is a view for explaining an operation of recognizing first sensed data in a wearable keyboard which is an input device of the present invention.
8 is a diagram for explaining the main configuration of a wearable keyboard, which is an input device of the present invention.
9 to 11 are views illustrating a method for preventing driver drowsiness according to the present invention.
BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are included as a part of the detailed description to facilitate the understanding of the present invention, provide embodiments of the present invention, and together with the detailed description, explain the technical features of the present invention.
이하, 첨부된 도면을 참조하여 본 발명에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, the embodiments disclosed in the present invention will be described in detail with reference to the accompanying drawings, but the same or similar components are assigned the same reference numbers regardless of reference numerals, and redundant description thereof will be omitted.
또한, 본 발명에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. In addition, in describing the embodiments disclosed in the present invention, if it is determined that detailed descriptions of related known technologies may obscure the gist of the embodiments disclosed in the present invention, the detailed description thereof will be omitted.
또한, 첨부된 도면은 본 발명에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. In addition, the accompanying drawings are only for easy understanding of the embodiments disclosed in the present invention, and the technical spirit disclosed in the present invention is not limited by the accompanying drawings, and all changes included in the spirit and scope of the present invention , should be understood to include equivalents or substitutes.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms including an ordinal number such as 1st, 2nd, etc. may be used to describe various elements, but the elements are not limited by the terms. The above terms are used only for the purpose of distinguishing one component from another.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.The singular expression includes the plural expression unless the context clearly dictates otherwise.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.In the present application, terms such as “comprises” or “have” are intended to designate that a feature, number, step, operation, component, part, or combination thereof described in the specification exists, but one or more other features It should be understood that this does not preclude the existence or addition of numbers, steps, operations, components, parts, or combinations thereof.
이하, 상술한 내용들을 바탕으로 본 발명의 바람직한 실시예에 따른, 졸음 운전 방지 시스템에 관하여 상세히 설명하면 다음과 같다.Hereinafter, a system for preventing drowsy driving according to a preferred embodiment of the present invention will be described in detail based on the above description.
도 1은 본 발명에 따른 졸음 운전 방지 시스템을 나타낸 도면이고, 도 2는 운전자와 커뮤니케이션을 통하여 운전자의 졸음을 방지하는 것을 나타내는 도면이다. 1 is a diagram illustrating a system for preventing drowsiness according to the present invention, and FIG. 2 is a diagram illustrating prevention of drowsiness of the driver through communication with the driver.
도 1에 따르면, 본 발명에 따른 시스템은 차량(200) 및 서버(300)를 포함할 수 있다. 차량(200)은 V2X 등을 이용하여 서버(300)와 통신할 수 있으며, 차량(200)은 주행에 필요한 기본적인 장치들 이외에, 영상 획득부(210), 스피커(220) 및 입력 장치(100)를 더 포함할 수 있다. 또한, 차량(200)은 영상 획득부(210)에 대한 충격을 완화할 수 있는 충격 완화부(211)를 더 포함할 수 있다. 1 , a system according to the present invention may include a vehicle 200 and a server 300 . The vehicle 200 may communicate with the server 300 using V2X, etc., and the vehicle 200 includes an image acquisition unit 210 , a speaker 220 and an
도 1 및 도 2에 따르면, 영상 획득부(210)는 운전자의 얼굴 영상을 획득할 수 있다. 영상 획득부(210)는 차량(200) 내에서 운전자의 얼굴을 촬영하는 카메라일 수 있고, 카메라로부터 영상을 획득하는 영상 수신부일 수도 있다.1 and 2 , the image acquisition unit 210 may acquire a face image of the driver. The image acquisition unit 210 may be a camera that captures the driver's face in the vehicle 200 or may be an image reception unit that acquires an image from the camera.
도 2에 따르면, 충격 완화부(211)는 영상 획득부(210)에 부착된 장치로서, 차량(200)의 흔들림으로 인하여 운전자의 얼굴 영상이 흔들리는 것을 방지할 수 있는 장치를 의미할 수 있다. 충격 완화부(211)는 스프링 등 탄성체를 포함할 수 있고, 서스펜션 장치를 활용하여 카메라의 흔들림을 완화하거나 OIS 장치를 활용하여 카메라의 흔들림을 완화할 수 있다. Referring to FIG. 2 , the shock alleviator 211 is a device attached to the image acquisition unit 210 , and may refer to a device capable of preventing the driver's face image from shaking due to the shaking of the vehicle 200 . The shock alleviator 211 may include an elastic body such as a spring, and may use a suspension device to alleviate camera shake or an OIS device to mitigate camera shake.
도 1 및 도 2에 따르면, 스피커(220)는 운전자에게 다이어로그(dialog)를 전달하는 음성 출력 장치일 수 있다. 스피커(220)는 진동을 통하여 운전자에게 메시지를 전달할 수 있다. 스피커(220)는 서버(300)로부터 다이어로그를 수신하고 수신된 다이어로그를 음성으로 출력할 수 있다. 스피커(220)는 서버(300)로부터 경고 메시지를 수신하고, 수신된 경고 메시지에 따라 알람을 출력할 수 있다. 즉, 스피커(220)는 운전자의 졸음 상태에 따른 알람을 출력할 수 있다. 이때, 다이어로그는 미리 입력되어 저장된 것일 수 있다. 1 and 2 , the speaker 220 may be a voice output device that delivers a dialog to the driver. The speaker 220 may transmit a message to the driver through vibration. The speaker 220 may receive a dialog from the server 300 and output the received dialog as a voice. The speaker 220 may receive a warning message from the server 300 and output an alarm according to the received warning message. That is, the speaker 220 may output an alarm according to the driver's drowsy state. In this case, the dialog may be previously input and stored.
도 1에 따르면, 서버(300)는 운전자의 얼굴 영상을 영상 획득부(210)로부터 수신하고, 수신된 영상 속 운전자의 얼굴에 대한 학습을 수행할 수 있다. 또한, 서버(300)는 미리 저장된 학습 데이터에 따라 운전자의 얼굴 영상을 분석할 수 있다. 이때, 미리 저장된 학습 데이터는 빅 데이터로부터 딥 러닝 등을 통하여 학습된 데이터일 수 있다. 즉, 서버(300)는 영상을 수신하고, 영상에 기초하여 운전자의 졸음 상태에 대한 정보를 획득할 수 있다. 즉, 서버(300)는 운전자의 상기 얼굴에 대한 특징점을 추출하고, 특징점을 기초로 운전자의 졸음 상태에 대한 정보를 획득할 수 있다. Referring to FIG. 1 , the server 300 may receive an image of the driver's face from the image acquisition unit 210 , and may learn about the driver's face in the received image. Also, the server 300 may analyze the driver's face image according to the pre-stored learning data. In this case, the pre-stored learning data may be data learned from big data through deep learning or the like. That is, the server 300 may receive the image and may acquire information on the driver's drowsiness state based on the image. That is, the server 300 may extract a feature point for the driver's face and obtain information on the driver's drowsiness state based on the feature point.
도 1에 따르면, 서버(300)는 운전자의 얼굴 영상에서 특징점을 추출하고, 추출된 특징점을 기초로 운전자가 졸음 상태인지에 대한 정보를 획득할 수 있다. 운전자가 졸음 상태인 경우, 교통사고의 위험성이 급격히 증가할 수 있으므로 운전자가 졸음 상태라는 정보가 획득된 경우, 서버(300)는 차량(200)의 스피커(220)를 통하여 알람이 출력될 수 있도록 경고 메시지를 생성하고, 이를 차량(200) 또는 스피커(220)에 전송할 수 있다. Referring to FIG. 1 , the server 300 may extract a feature point from the driver's face image, and obtain information on whether the driver is in a drowsy state based on the extracted feature point. When the driver is in a drowsy state, the risk of a traffic accident may rapidly increase, so when information that the driver is drowsy is obtained, the server 300 outputs an alarm through the speaker 220 of the vehicle 200 . A warning message may be generated and transmitted to the vehicle 200 or the speaker 220 .
서버(300)는 운전자의 얼굴 중 특정 부위를 중심으로 특징점을 추출할 수 있다. 서버(300)는 운전자의 입 주변을 따라 특징점을 추출할 수 있다. 따라서, 입 모양의 움직임을 통하여 운전자가 하품하는지 등을 판단할 수 있다. 일 예로, 일반적으로 말하는 경우와 달리 하품하는 경우, 운전자의 입의 움직임이 더 커질 수 있다. 또한, 하품의 경우, 입이 일정 크기로 커진 후 일정 시간동안 커진 크기로 유지될 수 있다. 따라서, 서버(300)는 운전자의 입 주변 특징점을 추출하고 해당 특징점이 미리 설정된 거리보다 더 크게 움직이는지를 감지할 수 있을 뿐만 아니라, 특징점이 미리 설정된 거리보다 더 크게 움직인 이후, 미리 설정된 시간보다 더 오래 유지되는지를 함께 감지할 수 있다. The server 300 may extract a feature point based on a specific part of the driver's face. The server 300 may extract the feature points along the periphery of the driver's mouth. Accordingly, it is possible to determine whether the driver is yawning or the like through the movement of the mouth shape. For example, when the driver yawns, unlike in the case of general speaking, the movement of the driver's mouth may increase. In addition, in the case of yawning, after the mouth grows to a predetermined size, the enlarged size may be maintained for a predetermined time. Therefore, the server 300 can extract a feature point around the driver's mouth and detect whether the feature point moves more than a preset distance, and after the feature point moves more than a preset distance, more than a preset time You can also sense whether it lasts for a long time.
또한, 서버(300)는 운전자의 눈 주변을 따라 특징점을 추출할 수 있다. 따라서, 눈 움직임을 통하여 운전자가 졸음 상태인지 등을 판단할 수 있다. 일 예로, 운전자의 눈 주변의 특징점들 사이의 거리가 미리 설정된 거리보다 작아진 경우, 서버(300)는 운전자의 눈이 감겨있는 상태라고 감지할 수 있다. 또한, 서버(300)는 운전자의 눈 주변의 특징점들 사이의 거리가 미리 설정된 거리보다 작아진 이후, 그 거리가 미리 정해진 시간보다 더 오래 유지되는 경우, 운전자의 눈이 감겨있는 상태로 감지할 수 있다. 또한 서버(300)는 운전자의 눈 주변의 특징점이 미리 정해진 시간 동안 움직이는 횟수를 체크하고, 움직이는 횟수가 미리 정해진 횟수보다 더 작은 경우, 운전자의 상태를 졸음 상태라고 판단할 수 있다. Also, the server 300 may extract the feature points along the driver's eye periphery. Accordingly, it is possible to determine whether the driver is in a drowsy state or the like through eye movement. For example, when the distance between the feature points around the driver's eyes is smaller than a preset distance, the server 300 may detect that the driver's eyes are closed. In addition, when the distance between the feature points around the driver's eyes becomes smaller than the preset distance and the distance is maintained longer than the preset time, the server 300 may detect the driver's eyes as closed. have. In addition, the server 300 may check the number of times the feature points around the driver's eyes move for a predetermined time, and when the number of movements is smaller than the predetermined number, determine that the driver's state is a drowsy state.
다만, 운전자의 눈 깜빡임 상태는 사람마다 다를 수 있으므로, 서버(300)는 운전자의 개별 특징을 학습할 수 있다. 즉, 서버(300)는 운전자의 눈과 입에 대한 움직임을 분석함과 동시에 운전자의 눈 깜빡임 상태와 횟수 역시 딥 러닝 등을 통하여 학습할 수 있다. 따라서, 서버(300)는 운전자 개인 맞춤형 졸음 상태 판단을 할 수 있다.However, since the blinking state of the driver's eyes may be different for each person, the server 300 may learn individual characteristics of the driver. That is, the server 300 may analyze the driver's eye and mouth movements and at the same time learn the driver's eye blinking state and number through deep learning, etc. FIG. Accordingly, the server 300 may determine the individual driver's personalized drowsiness state.
서버(300)는 위와 같이, 특징점의 조건이 일정 조건을 만족하는 경우를 운전자의 졸음 상태로 정의하고, 운전자가 졸음 상태라고 결정할 수 있다. As described above, the server 300 may define a case in which the condition of the feature point satisfies a predetermined condition as the driver's drowsiness state, and may determine that the driver is in the drowsy state.
도 1 및 도 2에 따르면, 입력 장치(100)는 운전자가 특정 명령을 입력하기 위한 장치로서, 음성을 입력하는 경우 마이크가 될 수 있다. 또한, 입력 장치(100)는 운전자가 문자 데이터를 입력하는 경우 키보드가 될 수 있다. 또한, 입력 장치(100)는 운전자가 어떠한 형태의 명령을 입력하느냐에 따라 변경될 수 있다. 또한 입력 장치(100)는 스피커(220)의 알람을 오프(off)하기 위하여 미리 정해진 입력이 입력되는 장치일 수 있다. 1 and 2 , the
또한, 입력 장치(100)는 사용자가 이동 수단에 필요한 모든 명령을 입력하기 위한 수단을 의미할 수 있다. 또한, 입력 장치(100)는 운전자가 착용하는 웨어러블 키보드일 수 있다. 웨어러블 키보드에 대한 자세한 내용은 후술한다. Also, the
운전자가 졸음 상태라고 감지된 경우, 아래와 같은 시나리오가 수행될 수 있다. When it is detected that the driver is in a drowsy state, the following scenario may be performed.
서버(300)는 운전자에게 졸음을 방지하기 위한 알람 메시지를 생성할 수 있다. 알람 메시지는 스피커(220)를 통하여 운전자에게 전달되며, 운전자는 알람을 통하여 졸음이 방지될 수 있다. 알람은 운전자로부터 미리 정해진 입력을 수신하여야만 종료될 수 있다. 일 예로, 운전자는 후술할 웨어러블 키보드를 착용한 상태에서, 서버(300)는 미리 정해진 문자, 숫자 또는 이들의 조합을 웨어러블 키보드를 통하여 수신할 수 있다. 또한, 서버(300)는 미리 정해진 키보드 입력을 수신하고, 이 경우 서버(300)는 알람 해제 메시지를 생성하고 스피커(220)로 전달하여 알람을 해제할 수 있다. 이때, 미리 정해진 입력은 운전자가 운전 중에 입력할 수 있도록 간단한 문자, 숫자 또는 이들의 조합일 수 있다. 또한, 웨어러블 키보드를 통한 입력이 미리 정해진 박자에 맞춰 입력되고, 서버(300)는 해당 박자에 대한 데이터를 수신할 수 있다. 서버(300)는 박자에 대한 데이터가 미리 저장된 박자에 대한 데이터의 조건을 만족하면, 알람 해제 메시지를 생성할 수 있다.The server 300 may generate an alarm message for preventing the driver from drowsiness. The alarm message is transmitted to the driver through the speaker 220, and the driver can prevent drowsiness through the alarm. The alarm can be ended only after receiving a predetermined input from the driver. For example, in a state in which the driver wears a wearable keyboard, which will be described later, the server 300 may receive predetermined letters, numbers, or a combination thereof through the wearable keyboard. In addition, the server 300 receives a predetermined keyboard input, and in this case, the server 300 may generate an alarm cancellation message and transmit it to the speaker 220 to cancel the alarm. In this case, the predetermined input may be simple letters, numbers, or a combination thereof so that the driver can input while driving. Also, an input through the wearable keyboard is input according to a predetermined beat, and the server 300 may receive data on the corresponding beat. The server 300 may generate an alarm release message when the data for the beat satisfies the condition of the data for the beat stored in advance.
이처럼, 본 발명은 후술할 웨어러블 키보드(100)를 운전자가 착용한 후, 이를 통하여 일정한 피드백을 서버(300)로 전송함으로써 운전자가 졸음에서 보다 효율적으로 깰 수 있는 효과를 가질 수 있다. 또한, 운전자는 웨어러블 키보드(100)를 착용하고 자동차 핸들을 움켜쥘 수 있다. 따라서, 자동차 핸들을 움켜쥔 상태에서 웨어러블 키보드(100)를 움직여 입력이 가능할 수 있다. 이를 통하여 운전자의 졸음 방지와 동시에 안정적으로 차량 주행이 가능한 효과가 있다. As such, in the present invention, after the driver wears the
도 1에 따르면, 통신부(230)는, 이동 수단과 서버(300) 사이의 통신을 가능하게 하는 구성이다. 또한, 통신부(230)는 V2X 통신을 이용하여 콘텐츠 제공자와 통신할 수 있다. 따라서, 통신부(230)는 RSU(Road Side Unit)을 통하여 서버(300)와 통신할 수 있다. 무선 통신을 사용하는 통신부(230)의 경우, 내/외장 안테나와 접속되고, 안테나를 통해 휴대전화 통신방식에 의해 기지국과 정보의 송수신을 실행한다. 무선 통신을 사용하는 통신부(230)는 변조부, 복조부, 신호 처리부 등을 갖는 무선 통신부(미도시)을 포함한다.Referring to FIG. 1 , the communication unit 230 is configured to enable communication between the mobile means and the server 300 . In addition, the communication unit 230 may communicate with the content provider using V2X communication. Accordingly, the communication unit 230 may communicate with the server 300 through a Road Side Unit (RSU). In the case of the communication unit 230 using wireless communication, it is connected to an internal/external antenna, and transmits/receives information to and from the base station by the mobile phone communication method through the antenna. The communication unit 230 using wireless communication includes a wireless communication unit (not shown) having a modulator, a demodulator, a signal processing unit, and the like.
상기 무선 통신은 통신사들이 기존에 설치해둔 통신 시설과 그 주파수를 사용하는 무선 통신망을 사용한 통신을 말한다. 이때, CDMA(code division multiple access), FDMA(frequency division multiple access), TDMA(time division multiple access), OFDMA(orthogonal frequency division multiple access), SC-FDMA(single carrier frequency division multiple access) 등과 같은 다양한 무선 통신 시스템에 사용될 수 있으며, 뿐만 아니라, 3GPP(3rd generation partnership project) LTE(long term evolution)가 사용될 수 있다. 또한, 최근 상용화 중인 5G 통신을 주로 사용할 수 있으며, 추후 상용화가 예정되어 있는 6G 등도 사용될 수 있다. 다만, 본 발명은 이와 같은 무선 통신 방식에 구애됨이 없이 기설치된 통신망을 활용할 수 있다. 또한, 통신부(230)는 이동 수단 내 와이파이(Wi-Fi), 블루투스(Bluetooth) 등 무선 통신 기능을 지원할 수도 있다.The wireless communication refers to communication using a communication facility installed by telecommunication companies and a wireless communication network using the frequency. At this time, various radios such as code division multiple access (CDMA), frequency division multiple access (FDMA), time division multiple access (TDMA), orthogonal frequency division multiple access (OFDMA), single carrier frequency division multiple access (SC-FDMA), etc. It may be used in a communication system, as well as 3rd generation partnership project (3GPP) long term evolution (LTE) may be used. In addition, 5G communication, which is currently commercialized, can be mainly used, and 6G, which is scheduled to be commercialized in the future, may also be used. However, the present invention can utilize an existing communication network without being limited by such a wireless communication method. In addition, the communication unit 230 may support wireless communication functions such as Wi-Fi and Bluetooth in the mobile means.
또한, 본 발명에 따른 차량(200)은 컴퓨팅 장치(미도시)를 더 포함할 수 있다. 컴퓨팅 장치(미도시)는 서버(300)와의 통신에 필요한 연산을 수행하고 영상 획득부(210), 스피커(220) 및 입력 장치(100) 등을 제어할 수 있는 구성이다. 또한, 컴퓨팅 장치(미도시)는 높은 연산 능력이 필요하지 않으므로 라즈베리파이 등의 소형 컴퓨팅 장치로 구현 가능하다. In addition, the vehicle 200 according to the present invention may further include a computing device (not shown). The computing device (not shown) is configured to perform calculations necessary for communication with the server 300 and to control the image acquisition unit 210 , the speaker 220 , the
도 3은 본 발명에 따른 서버를 나타낸 도면이다. 3 is a diagram illustrating a server according to the present invention.
도 3에 따르면, 본 발명에 따른 서버(300)는 프로세서(301), 통신부(230) 및 메모리(303)를 포함할 수 있다. 프로세서(301)는 운전자에 대한 정보를 학습하고 운전자의 졸음 상태에 대한 정보를 획득하는 주체일 수 있다. Referring to FIG. 3 , the server 300 according to the present invention may include a processor 301 , a communication unit 230 , and a memory 303 . The processor 301 may be a subject that learns information about the driver and obtains information about the driver's drowsy state.
프로세서(301)는, 연산을 수행하고 이동 수단을 제어할 수 있는 구성이다. 주로, 중앙 연산 장치(CPU), 어플리케이션 프로세서(AP), 그래픽스 처리 장치(GPU) 등을 의미할 수 있다. 또한, CPU, AP 또는 GPU는 그 내부에 하나 또는 그 이상의 코어들을 포함할 수 있으며, CPU, AP 또는 GPU는 작동 전압과 클락 신호를 이용하여 작동할 수 있다. 다만, CPU 또는 AP는 직렬 처리에 최적화된 몇 개의 코어로 구성된 반면, GPU는 병렬 처리용으로 설계된 수 천 개의 보다 소형이고 효율적인 코어로 구성될 수 있다.The processor 301 is a configuration capable of performing calculations and controlling the moving means. Mainly, it may mean a central processing unit (CPU), an application processor (AP), a graphics processing unit (GPU), or the like. In addition, the CPU, AP, or GPU may include one or more cores therein, and the CPU, AP, or GPU may operate using an operating voltage and a clock signal. However, a CPU or AP may consist of a few cores optimized for serial processing, whereas a GPU may consist of thousands of smaller and more efficient cores designed for parallel processing.
메모리(303)는 이동 수단의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(303)는 이동 수단에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application), 이동 수단의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버(300)로부터 다운로드 될 수 있다. The memory 303 stores data supporting various functions of the transportation means. The memory 303 may store a plurality of application programs or applications driven in the mobile means, data for operation of the mobile means, and commands. At least some of these application programs may be performed through wireless communication. It may be downloaded from the external server 300 .
메모리(303)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), SSD 타입(Solid State Disk type), SDD 타입(Silicon Disk Drive type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 메모리(303)는 인터넷(internet)상에서 저장 기능을 수행하는 웹 스토리지(web storage)를 포함할 수도 있다.The memory 303 includes a flash memory type, a hard disk type, a solid state disk type, a silicon disk drive type, and a multimedia card micro type. ), card-type memory (such as SD or XD memory), random access memory (RAM), static random access memory (SRAM), read-only memory (ROM), electrically erasable programmable read (EEPROM) -only memory), a programmable read-only memory (PROM), a magnetic memory, a magnetic disk, and an optical disk may include at least one type of storage medium. Also, the memory 303 may include a web storage that performs a storage function on the Internet.
통신 모듈(302)은 송수신기로서, 차량(200)의 통신부(230)와 통신할 수 있는 구성일 수 있다. 통신 모듈(302)에 대한 상세한 설명은 통신부(230)에 대한 설명과 동일하거나 중복되므로 생략한다. The communication module 302 is a transceiver, and may be configured to communicate with the communication unit 230 of the vehicle 200 . A detailed description of the communication module 302 will be omitted because it is the same as or overlapping with the description of the communication unit 230 .
도 4는 본 발명의 입력 장치인 웨어러블 키보드의 동작을 개략적으로 설명하기 위한 도면이다.4 is a diagram schematically illustrating an operation of a wearable keyboard, which is an input device according to the present invention.
일 개시에 의하여 웨어러블 키보드(100)는 한 쌍의 장갑 형태로 제작될 수 있다. 일 개시에 의하여 웨어러블 키보드(100)는 사용자가 손에 착용함으로써 입력을 수행하는 장치로서, 특히, 자판이 없는 키보드를 의미한다. 일 개시에 의하여 웨어러블 키보드(100)는 사용자의 손 동작을 센서를 통해 인식하고, 손 동작이 의미하는 문자를 인식한 출력값을 무선 통신 모듈(302)을 이용하여 외부 장치(600)로 전송할 수 있다.According to one disclosure, the
일 개시에 의하여, 웨어러블 키보드(100)는 감압 센서(101)로부터 획득한 제 1 센싱 데이터로부터 가상 쿼티 키보드를 입력하는 입력신호를 판단하고, 플렉스 센서(111)로부터 획득한 제 2 센싱 데이터로부터 가상 쿼티 키보드에서 입력신호가 검출된 위치를 판단하고, 자이로센서(103)로부터 획득한 제 3 센싱 데이터로부터 검지 손가락으로부터 입력된 입력신호의 위치를 판단한 결과에 기초하여 출력신호를 생성하고, 통신 모듈(302)을 통해 출력신호를 외부 장치로 전송할 수 있다.According to one disclosure, the
일 개시에 의하여 외부 장치(600)는 통신모듈을 통해 외부로부터 입력받은 데이터를 표시할 수 있는 디스플레이를 포함한 것으로서, 노트북 PC, 데스크탑 PC, MP3 플레이어, PMP(Portable MultimediaPlayer), PDA(Personal Digital Assistant), 태블릿 PC, 휴대폰, 스마트 폰(Smart Phone) 등과 같은 모든 정보통신 기기 및 멀티미디어 기기와 그에 대한 응용에도 적용될 수 있음은 자명하다.According to one disclosure, the
일 개시에 의하여, 웨어러블 키보드(100)와 외부 장치(600)는 누가 호스트 또는 액세스 포인트 역할을 하느냐에 따라, 마스터 단말기와 슬레이브 단말기로 구분될 수 있다. 다시 말해, 페어링을 위해 식별자 즉, SSID(Service Set Identifier)를 생성하고 페어링을 수락하는 단말기가 마스터가 되고, 이러한 마스터 단말기에게 페어링을 요청하는 단말기가 슬레이브가 된다. 또한, 본 발명에서 단말기는 마스터가 될 수도 있고 슬레이브가 될 수도 있다. 또한, 본 발명에서 단말기는 이러한 페어링 기능을 수행하는 어플리케이션을 온라인 마켓에서 다운로드하여 설치할 수 있다. 또한, 본 발명에서 단말기는 클라우드 컴퓨팅(Cloud Computing) 서비스를 제공하는 클라우드 서버로부터 어플리케이션을 제공받아 이용할 수 있다. According to one disclosure, the
일 개시에 의하여, 웨어러블 키보드(100)는 적어도 세 종류 이상의 센서를 이용하여 사용자의 손동작을 인식할 수 있다. 보다 구체적으로 웨어러블 키보드(100)는 감압 센서(101), 플렉스센서(111) 및 자이로센서(103)를 이용하여 사용자의 손동작을 인식하고 인식한 손동작으로부터 사용자가 입력하고자한 문자 등을 출력값으로서 외부 장치(600)로 전송할 수 있다.According to one disclosure, the
일 개시에 의하여 감압 센서(101)는 사용자의 모든 손가락 말단부 위치에 대응하도록 설치될 수 있으며, 사용자가 가상 키보드를 입력하는지 여부를 판단할 수 있다. 웨어러블 키보드(100)는 기 정해진 임계값 이상의 압력이 입력되는 경우, 사용자가 가상 키보드를 입력하였다고 판단하고, 사용자에 의하여 입력된 신호를 입력신호로 결정할 수 있다.According to one disclosure, the pressure-
일 개시에 의하여 플렉스센서(111)는 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치될 수 있다. 일 개시에 의하여, 플렉스센서(111)는 사용자 손가락의 구부름 정도를 측정하기 위하여 사용자의 손가락의 구부림 정도에 따라 변화되는 저항값으로부터 손가락의 구부림 정보를 측정할 수 있다. 플렉스 센서(111)는 플렉서블(flexible)소자로 이루어질 수 있으며, 헤드 소켓의 단자에 탈착 가능하게 부착되는 구부림 저항 측정 소자를 포함할 수 있다. 이러한 따라서, 플렉스센서(111)는 장갑형태의 웨어러블 키보드(100)에서 용이하게 교체가능하다. According to one disclosure, the
일 개시에 의하여 자이로센서(103)는 사용자의 검지손가락에 대응되도록 설치될 수 있다. 자이로센서(103)는 일반적으로 키보드를 입력하는 범위가 가장 넓은 검지 손가락의 입력 위치를 정확하게 판단하기 위하여 사용된다. 보다 상세하게는, 웨어러블 키보드(100)는 자이로센서(103)의 센싱 신호로부터, 검지 손가락의 좌우(x축) 위치를 판단함으로써 출력값을 판단할 수 있다.According to one disclosure, the
이하에서 보다 상세하게 설명하도록 한다.It will be described in more detail below.
도 5는 본 발명의 입력 장치(100)인 웨어러블 키보드에서 입력신호로부터 출력값을 판단하여 외부 장치로 전송하는 일련의 과정을 설명하기 위한 흐름도이다.5 is a flowchart for explaining a series of processes of determining an output value from an input signal in the wearable keyboard, which is the
일 개시에 의하여 가상 쿼티 키보드는, 실제 키보드나 아닌 웨어러블 키보드(100)의 손가락 각각에 설정된 키를 입력받을 수 있도록 하는 수단으로서, 사용자는 관성에 따라 손가락의 입력을 통하여 가상 쿼티 키보드를 입력할 수 있다.According to one disclosure, the virtual QWERTY keyboard is a means for receiving a key set for each finger of the
일 개시에 의하여, 블록 201에서 웨어러블 키보드(100)는 감압 센서로부터 획득한 제 1 센싱 데이터가 임계값 이상에 해당하는지 여부를 판단할 수 있다. 일 개시에 의하여, 제 1 센싱 데이터는 웨어러블 키보드(100)에서 감압 센서를 통해 인식한 압력신호를 나타낸다. 예를 들어, 사용자가 웨어러블 키보드(100)를 장착한 상태에서 평평한 바닥면에 압력을 가하는 경우, 감압 센서에서 가해진 압력의 크기가 임계값 이상에 해당하는 경우, 상기 입력값을 제 1 센싱 데이터로 결정할 수 있다. 일 개시에 의하여, 웨어러블 키보드(100)는 제 1 센싱 데이터의 값이 임계값 이하에 해당하는 경우, 키보드를 입력하기 위한 데이터가 아닌 에러값으로 판단함으로써 불필요한 입력을 분석하기 위한 에너지를 줄일 수 있다.According to one disclosure, in
일 개시에 의하여, 웨어러블 키보드(100)는 감압 센서로부터 입력받은 압력을 소정의 임계값과 비교하고, 그 비교 결과에 따라 상기 입력 레벨을 선택하여 인식할 수 있다. 일 개시에 의한 임계값은 사용자에 의하여 미리 설정된 값일 수 있다. 또한, 일 개시에 의한 임계값은 사용자의 프로파일에 기초하여 사용자 맞춤형으로 설정된 압력값일 수 있다.According to one disclosure, the
일 개시에 의하여, 웨어러블 키보드(100)는 임계값 이상의 압력이 입력되기 시작한 시점을 특정 시점으로 설정되거나 또는 특정 시간 구간으로 설정할 수 있으며, 인식 시간에 입력된 상기 압력에 따라 상기 입력 레벨을 선택하는 것을 특징으로 할 수 있다. 여기서 인식 시간은 감압 센서로부터 소정의 크기 이상의 압력이 입력되기 시작한 시점을 기준으로 하여 50ms 내지 150ms의 시간으로 설정되는 것을 특징으로 할 수 있다.According to one disclosure, the
일 개시에 의하여, 블록 202에서 웨어러블 키보드(100)는 플렉스 센서로부터 획득한 제 2 센싱 데이터로부터 입력신호의 y축 위치를 결정할 수 있다. 일 개시에 의하여, 웨어러블 키보드(100)는 제 1 센싱 데이터를 획득한 소정 손가락을 기준으로, 소정 손가락에 미리 설정된 예비 출력값을 결정할 수 있다.According to one disclosure, in
일 개시에 의하여 예비 출력값은 미리 결정된 가상 쿼티 키보드 한줄 당 하나의 자판키를 나타낸다. 예를 들어, 영문 가상 쿼티 키보드 자판을 기준으로 왼쪽 약지 손가락은 W. S. X가 할당될 수 있으며, 왼쪽 중지 손가락은 E, D, C가 할당될 수 있다. 그러나, 검지 손가락의 경우 가상 쿼티 키보드 한줄당 두개의 자판키를 할당받을 수 있다. 예를 들어, 영문 가상 쿼티 키보드 자판을 기준으로 오른손 검지손가락은 Y, U, H, J, N, M이 할당될 수 있으며, 왼손 검지손가락은 T, R, G, F, B, V가 할당될 수 있다. According to one disclosure, the preliminary output value indicates one keyboard key per line of a predetermined virtual QWERTY keyboard. For example, based on the English virtual QWERTY keyboard keyboard, W. S. X may be assigned to the left ring finger, and E, D, and C may be assigned to the left middle finger. However, in the case of the index finger, two keyboard keys may be assigned to each line of the virtual QWERTY keyboard. For example, Y, U, H, J, N, M may be assigned to the index finger of the right hand based on the English virtual QWERTY keyboard keyboard, and T, R, G, F, B, V may be assigned to the index finger of the left hand. can be
일 개시에 의하여, 웨어러블 키보드(100)는 제 2 센싱 데이터로부터 입력신호가 검출된 손가락의 y축 위치를 결정함으로써, 사용자가 입력한 신호가 어떤 출력값인지 결정할 수 있다. 이때, 웨어러블 키보드(100)는 외부 장치(600)와 페어링을 시작한 후 문자를 입력하기 전에 y축 위치를 결정하기 위한 기준점을 정할 수 있다. 예를 들어, 웨어러블 키보드(100)는 외부 장치(600)로부터 문자 입력 시작을 요청하는 메시지를 수신할 수 있으며, y축의 기준점 설정을 요청하는 메시지를 수신함에 따라 기준점을 설정할 수 있다. 또한, 다른 실시예에 의하여 웨어러블 키보드(100)는 키보드 입력을 위한 애플리케이션을 통하여 기준점을 설정할 수 있다. y축 기준점을 설정하는 방식은 제한되지 않는다.According to one disclosure, the
일 개시에 의하여, 블록 203에서 웨어러블 키보드(100)는 입력 신호가 검지손가락으로부터 획득한 신호인지 여부를 판단할 수 있다. 입력 신호가 검지손가락인 경우, 같은 y축 위치에서 2개의 예비 출력값을 갖기 때문에, 정확한 위치 판단을 위한 추가적인 과정이 필요하다.According to one disclosure, in
일 개시에 의하여, 블록 204에서 웨어러블 키보드(100)는 입력 신호가 검지손가락에서 입력된 신호로 판단된 경우, 제 3 센싱 데이터로부터 입력신호의 x축 위치를 결정할 수 있다. 일 개시에 의한 웨어러블 키보드(100)는 x축 위치를 결정하기 위한 기준점을 미리 설정할 수 있다. 일 개시에 의한 웨어러블 키보드(100)는 외부 장치와 연결된 이후 소정의 시점에서 입력신호의 좌우 위치를 결정하기 위한 기준점을 설정할 수 있다. 웨어러블 키보드(100)는 자이로센서에서 센싱된 신호를 이용하여 기준점으로부터 좌측에서 검출된 신호인지, 우측에서 검출된 신호인지 판단할 수 있다. 예를 들어, 오른쪽 검지 손가락에서 획득한 입력신호의 y축 위치가 가장 상단부인 경우 예비 출력값은 Y, U 이며, 기준점을 기준으로 우측값으로 판단된경우 최종 출력값은 U이다.According to one disclosure, in
일 개시에 의하여, 블록 205에서 웨어러블 키보드(100)는 입력신호의 위치 정보로부터 출력값을 결정할 수 있다. 웨어러블 키보드(100)는 입력신호의 위치 정보를 조합함으로써 최종적인 출력값을 결정할 수 있다. 예를 들어, 입력신호가 복수개로 입력되는 경우, 복수개의 입력신호를 조합한 값을 출력값으로서 외부 장치로 전송할 수 있다.According to one disclosure, in
일 개시에 의하여, 블록 206에서 웨어러블 키보드(100)는 통신 모듈(114)을 이용하여 출력 값을 위부 장치로 전송할 수 있다. 일 개시에 의하여 통신 모듈(114)은 무선 또는 유선 통신이 가능한 모듈을 포함할 수 있다. 보다 구체적으로, 통신 모듈(114)은 근거리 무선 통신 모듈(114)을 포함할 수 있으며, 예를 들어, 근거리 무선 통신 방식에는 NFC 방식, 블루투스, 와이파이, 지그비, 바코드 인식 방식, QR 코드 인식 방식 등과 같은 다양한 방식이 있을 수 있다.According to one disclosure, in
도 6은 본 발명의 입력 장치인 웨어러블 키보드의 상세 구성을 설명하기 위한 도면이다.6 is a view for explaining a detailed configuration of a wearable keyboard, which is an input device of the present invention.
일 개시에 의하여 웨어러블 키보드(100)는 장갑형태로 제작되어 사용자의 손에 장착될 수 있다. 또한, 웨어러블 키보드는 폴리아미드 수지 조성물로 이루어질 수 있다.According to one disclosure, the
바람직하게는, 여기서, 웨어러폴리아미드 수지 조성물은, 식물성 오일과 알코올을 반응시켜 제조되며, 화학식 1에 의하여 표시되는 에폭시계 에스테르 화합물 15 내지 25 중량%, 프탈레이트계 에스테르 화합물, 테레프탈레이트계 에스테르 화합물, 프탈레이트계 및 테레프탈레이트계 에스테르 혼합물 및 트리멜리테이트계 에스테르 화합물로 이루어진 군에서 선택된 적어도 하나의 에스테르 화합물 20 내지 25 중량%, 고밀도 폴리에틸렌(HDPE), 저밀도 폴리에틸렌(LDPE), 폴리프로필렌(PP), 에틸렌-프로필렌 공중합체(EPM), 에틸렌-프로필렌-디엔 공중합체(EPDM), 에틸렌-부텐 공중합체, 에틸렌-옥텐 공중합체, 에틸렌-부타디엔 공중합체 중에서 선택된 1종 이상의 올레핀계 고무 중합체 5 내지 10% 중량%, 상대점도(25℃)가 2.0 내지 2.8cP이고, 수평균분자량이 20,000 내지 200,000g/mol인 폴리 아미드 30 내지 50 중량%, 공액 디엔 고무, 방향족 비닐 화합물 및 비닐시안 화합물을 포함하는 비닐 방향족 화합물-비닐시안 화합물 공중합체 5 내지 15 중량%를 포함하는 폴리아미드 수지 조성물로 이루어진 것을 특징으로 한다.Preferably, here, the wearer polyamide resin composition is prepared by reacting vegetable oil with alcohol, and 15 to 25 wt% of an epoxy-based ester compound represented by
[화학식 1][Formula 1]
(상기 R4는 (C8-C20)에폭시알킬이고, R5는 (C1-C10)알킬 또는 이고, 상기 Rx 및 Ry는 각각 독립적으로 수소, (C1-C5)알킬 또는 이며, 상기 알킬은 (C1-C5)알킬 또는 이 더 치환될 수 있고, 상기 R41 및 R42는 각각 독립적으로 (C8-C20)에폭시알킬이며, 상기 n은 1 내지 3에서 선택되는 정수임).(Wherein R4 is (C8-C20) epoxyalkyl, R5 is (C1-C10) alkyl or and R x and R y are each independently hydrogen, (C1-C5)alkyl or and wherein the alkyl is (C1-C5)alkyl or may be further substituted, wherein R 41 and R 42 are each independently (C8-C20)epoxyalkyl, and n is an integer selected from 1 to 3).
또한, 상기 웨어러블 키보드는, 상기 사용자 손가락의 동작으로 인해 발생하는 입력신호의 인식률을 높이기 위하여 코팅층을 포함할 수 있다.In addition, the wearable keyboard may include a coating layer in order to increase the recognition rate of the input signal generated due to the operation of the user's finger.
상기 코팅층은 보다 구체적으로 대전방지층으로, 정전기 발생을 방지하여, 먼지의 부착을 방지할 수 있고, 먼지와 같은 불순물을 방지하여, 입력신호의 인식률을 높일 수 있다. 또한, 폴리아미드 수지 조성물과의 접착력이 우수하여 코팅층의 부착력이 우수하다.The coating layer is more specifically an antistatic layer, it is possible to prevent the generation of static electricity to prevent the adhesion of dust, and to prevent impurities such as dust, it is possible to increase the recognition rate of the input signal. In addition, the adhesion to the polyamide resin composition is excellent, and thus the adhesion of the coating layer is excellent.
바람직하게는, 상기 대전방지층은 하기 화학식 2로 표시되는 폴리실록산; 전도성 필러 및 그라파이트를 포함할 수 있다:Preferably, the antistatic layer is polysiloxane represented by the following formula (2); Conductive fillers and graphite may include:
[화학식 2][Formula 2]
여기서,here,
m은 1 내지 100의 정수이며,m is an integer from 1 to 100,
p는 3 내지 10의 정수이며,p is an integer from 3 to 10,
R1 내지 R3는 서로 동일하거나 상이하며, 각각 독립적으로 수소, 중수소, 히드록시기, 치환 또는 비치환된 탄소수 1 내지 30의 알킬기, 치환 또는 비치환된 탄소수 6 내지 30의 아릴기로 이루어진 군으로부터 선택되며,R 1 to R 3 are the same as or different from each other, and each independently selected from the group consisting of hydrogen, deuterium, a hydroxy group, a substituted or
바람직하게는, 상기 치한된 알킬렌기, 치환된 아릴렌기, 치환된 알킬기 및 치환된 아릴기는 수소, 중수소, 시아노기, 니트로기, 할로겐기, 히드록시기, 탄소수 1 내지 30의 알킬기, 탄소수 1 내지 20개의 시클로알킬기, 탄소수 2 내지 30의 알케닐기, 탄소수 2 내지 24의 알키닐기, 탄소수 7 내지 30의 아르알킬기, 탄소수 6 내지 30의 아릴기, 핵원자수 5 내지 60의 헤테로아릴기, 탄소수 6 내지 30의 헤테로아릴알킬기, 탄소수 1 내지 30의 알콕시기, 탄소수 1 내지 30의 알킬아미노기, 탄소수 6 내지 30의 아릴아미노기, 탄소수 6 내지 30의 아르알킬아미노기, 탄소수 2 내지 24의 헤테로 아릴아미노기, 탄소수 1 내지 30의 알킬실릴기, 탄소수 6 내지 30의 아릴실릴기 및 탄소수 6 내지 30의 아릴옥시기로 이루어진 군으로부터 선택된 1종 이상의 치환기로 치환되며, 복수 개의 치환기로 치환되는 경우 이들은 서로 동일하거나 상이하다. Preferably, the substituted alkylene group, substituted arylene group, substituted alkyl group and substituted aryl group are hydrogen, deuterium, cyano group, nitro group, halogen group, hydroxyl group, alkyl group having 1 to 30 carbon atoms, alkyl group having 1 to 20 carbon atoms A cycloalkyl group, an alkenyl group having 2 to 30 carbon atoms, an alkynyl group having 2 to 24 carbon atoms, an aralkyl group having 7 to 30 carbon atoms, an aryl group having 6 to 30 carbon atoms, a heteroaryl group having 5 to 60 nuclear atoms, 6 to 30 carbon atoms of a heteroarylalkyl group, an alkoxy group having 1 to 30 carbon atoms, an alkylamino group having 1 to 30 carbon atoms, an arylamino group having 6 to 30 carbon atoms, an aralkylamino group having 6 to 30 carbon atoms, a heteroarylamino group having 2 to 24 carbon atoms, 1 to carbon atoms It is substituted with one or more substituents selected from the group consisting of a 30 alkylsilyl group, an arylsilyl group having 6 to 30 carbon atoms and an aryloxy group having 6 to 30 carbon atoms, and when substituted with a plurality of substituents, they are the same or different from each other.
보다 바림직하게는 상기 화학식 2로 표시되는 화합물은 하기 화학식 3으로 표시되는 화합물일 수 있다.More preferably, the compound represented by
[화학식 3][Formula 3]
여기서, m 및 p는 상기 화학식 2에서 정의한 바와 같다.Here, m and p are as defined in
바람직하게는, 상기 전도성 필러는 실리카, 알루미나 및 이들의 혼합물로 이루어진 군으로부터 선택될 수 있으나 바람직하게는 알루미나지만 상기 예시에 국한되지 않는다. 상기 전도성 필러의 입자 직경은 30 내지 50㎛이지만, 상기 예시에 국한되지 않는다. 상기 전도성 필러는 전기 전도성을 나타낼 수 있다. Preferably, the conductive filler may be selected from the group consisting of silica, alumina and mixtures thereof, but preferably alumina, but not limited to the above example. The conductive filler has a particle diameter of 30 to 50 μm, but is not limited to the above example. The conductive filler may exhibit electrical conductivity.
상기 그라파이트는 소량 포함되어, 대전방지층 내의 대전 방지 효과를 지속적으로 유지시킬 수 있다. 그라파이트는 고가의 전도성 필러인 점을 고려할 때, 본 발명 내의 대전방지층에는 소량 포함되어, 지속적인 대전방지 효과를 유지할 수 있다. The graphite may be included in a small amount to continuously maintain the antistatic effect in the antistatic layer. Considering that graphite is an expensive conductive filler, it is included in a small amount in the antistatic layer in the present invention to maintain a continuous antistatic effect.
보다 구체적으로, 본 발명의 대전방지층은 상기 화학식 2로 표시되는 폴리실록산; 전도성 필러 및 그라파이트를 포함하여, 대전방지 효과를 나타낼 수 있다. 상기 폴리실록산은 친수성 부분과 소수성 부분으로 구별된다. 친수성 부분은 비공유 전자쌍을 포함하는 산소 원자에 의해, 물 분자와 수소 결합이 가능하다. 반면, 알킬기는 소수성기로 작용한다. 따라서, 친수성 부분이 대전방지층의 표면으로 위치하게 되고, 소수성 부분이 그 반대로 위치하게 되어, 반영구적인 대전방지 효과를 나타낼 수 있다. More specifically, the antistatic layer of the present invention may include polysiloxane represented by
상기 대전방지층을 형성하기 위한, 대전방지 조성물은 보다 구체적으로 상기 화학식 2로 표시되는 폴리실록산; 전도성 필러, 그라파이트 및 유기용매를 혼합하여 제조할 수 있다. For forming the antistatic layer, the antistatic composition is more specifically polysiloxane represented by the formula (2); It can be prepared by mixing a conductive filler, graphite, and an organic solvent.
상기 유기 용매는 에탄올, 메탄올, 부탄올, 헥세인, 프로페인, 톨루엔, 페놀 및 이들의 혼합물로 이루어진 군으로부터 선택될 수 있다. The organic solvent may be selected from the group consisting of ethanol, methanol, butanol, hexane, propane, toluene, phenol, and mixtures thereof.
바람직하게는, 상기 대전방지 조성물은 유기용매 100 중량부에 대하여, 상기 화학식 2로 표시되는 폴리실록산 40 내지 80 중량부, 전도성 필러 30 내지 50 중량부 및 그라파이트 5 내지 10 중량부를 포함할 수 있다. 상기 범위에 의하는 경우 각 구성 성분의 상호 작용에 의한 대전 방지 상승효과로 임계적 의의가 있는 정도의 상승효과가 발현되며, 상기 범위를 벗어나는 경우 상승효과가 급격히 저하되거나 거의 없게 된다.Preferably, the antistatic composition may include 40 to 80 parts by weight of the polysiloxane represented by
보다 바람직하게, 상기 대전방지 조성물의 점도는 1,200 내지 1,500cP이며, 상기 점도가 1,200cP 미만인 경우에는 일면에 코팅 시 흘러내려 대전방지층의 형성이 용이하지 않은 문제가 있고, 1,500cP를 초과하는 경우에는 균일한 대전방지층의 형성이 용이하지 않은 문제가 있다. More preferably, the viscosity of the antistatic composition is 1,200 to 1,500 cP, and when the viscosity is less than 1,200 cP, there is a problem that it is not easy to form an antistatic layer because it flows down during coating on one surface, and when it exceeds 1,500 cP There is a problem in that it is not easy to form a uniform antistatic layer.
[제조예: 코팅층의 제조][Preparation Example: Preparation of coating layer]
1. 코팅 조성물의 제조1. Preparation of coating composition
톨루엔 및 페놀을 1:1의 중량비로 혼합한 유기 용매에 하기 화학식 3으로 표시되는 폴리실록산, 전도성 필러 및 그라파이트를 혼합하여, 대전방지 조성물을 제조하였다:An antistatic composition was prepared by mixing polysiloxane represented by the following
[화학식 3][Formula 3]
여기서, m은 10 내지 30의 정수이며, p는 3 내지 5의 정수이다.Here, m is an integer from 10 to 30, and p is an integer from 3 to 5.
상기 대전방지 조성물의 보다 구체적인 조성은 하기 표 2와 같다. A more specific composition of the antistatic composition is shown in Table 2 below.
(단위 중량부)상기 알루미나는 입자 직경이 30 내지 50㎛이다.(Parts by weight) The alumina has a particle diameter of 30 to 50 μm.
2. 보호층의 제조2. Preparation of protective layer
폴리아미드 수지를 이용하여 제조한 기재층의 일면에 상기 HS 1 내지 HS 6의 대전방지 조성물을 도포 후, 열 경화시켜 대전방지층을 형성하였다.An antistatic layer was formed by applying the antistatic composition of
[실험예: 대전방지 효과 실험][Experimental example: Antistatic effect test]
1. 점도 측정1. Viscosity Measurement
폴리아미드 기재층의 일면에 대전방지층을 형성하기 전에, 대전방지 조성물의 점도를 측정하였다. 점도 측정은 레오미터(Rheometer, Compac-100, Sun Sci. Co., Japan)를 이용하였다. 점도 측정 결과는 하기 표 3과 같다.Before forming the antistatic layer on one surface of the polyamide base layer, the viscosity of the antistatic composition was measured. Viscosity was measured using a rheometer (Rheometer, Compac-100, Sun Sci. Co., Japan). The viscosity measurement results are shown in Table 3 below.
2. 표면 전기 저항 측정2. Measurement of surface electrical resistance
폴리아미드 기재층의 일면에 DY 1 내지 DY 6의 대전방지층이 형성된 보호층에 대해, Resistance Meter SIMCO 저항기 ST-4(25℃, 상대습도 50%)를 이용하여 표면전기저항을 측정하였다. For the protective layer in which the antistatic layer of
비교예로, 대전방지층이 형성되지 않은 폴리아미드 기재층에 대한 표면전기저항도 함께 측정하였다.As a comparative example, the surface electrical resistance of the polyamide base layer on which the antistatic layer was not formed was also measured.
(Ω/cm2)surface electrical resistance
(Ω/cm 2 )
상기 표 4에 따르면, 대전방지층이 형성되지 않은 비교예에 비해, DY 1 내지 DY 6의 표면전기저항이 낮으므로, 전기전도도가 우수하여, 우수한 대전방지효과를 나타냄을 확인할 수 있다.According to Table 4, compared to the comparative example in which the antistatic layer is not formed, since the surface electrical resistance of
3. 표면 외관에 대한 평가3. Evaluation of surface appearance
대전방지 조성물의 점도 차이로 인해, 코팅층을 제조한 이후, 균일한 표면이 형성되었는지 여부에 대해 관능 평가를 진행하였다. 균일한 코팅층을 형성하였는지 여부에 대한 평가를 진행하였고, 하기와 같은 기준에 의해 평가를 진행하였다. Due to the difference in viscosity of the antistatic composition, after the coating layer was prepared, a sensory evaluation was performed on whether a uniform surface was formed. Whether or not a uniform coating layer was formed was evaluated, and evaluation was performed according to the following criteria.
○: 균일한 코팅층 형성○: uniform coating layer formation
×: 불균일한 코팅층의 형성×: Formation of a non-uniform coating layer
코팅층을 형성할 때, 일정 점도 미만인 경우에는 폴리아미드의 표면에서 흐름이 발생하여, 균일한 코팅층의 형성이 어려운 경우가 다수 발생하였다. 이에 따라, 생산 수율이 낮아지는 문제가 발생할 수 있다. 또한, 점도가 너무 높은 경우에도, 조성물의 균일 도포가 어려워 균일한 코팅층의 형성이 불가하였다.When the coating layer is formed, if the viscosity is less than a certain level, flow occurs on the surface of the polyamide, and formation of a uniform coating layer is difficult in many cases. Accordingly, there may be a problem in that the production yield is lowered. In addition, even when the viscosity is too high, it is difficult to uniformly apply the composition to form a uniform coating layer.
일 개시에 의하여 웨어러블 키보드(100)는 사용자의 열 손가락 각각의 말단부에 대응되도록 설치된 10개의 감압 센서(101)를 포함할 수 있다. 일 개시에 의하여 10개의 감압 센서(101)는 손가락 각각에 대응하는 고유의 식별정보를 포함할 수 있다. 따라서, 웨어러블 키보드(100)는 임계값 이상의 압력이 센싱되는 경우, 신호가 센싱된 손가락을 판단함으로써 예비 출력값을 결정할 수 있다.According to one disclosure, the
일 개시에 의하여, 플렉스 센서(111)는 사용자 손가락의 구부러짐 정도를 측정하기 위하여 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치될 수 있다. 일 개시에 의하여 플렉스 센서(111)는 사용자 손가락의 움직임의 편의성을 위하여 플렉스 센서(111)의 양끝 부분과 중간 부분만 장갑에 부착될 수 있다. According to one disclosure, the
일 개시에 의하여, 자이로센서(103)는 사용자의 양손 검지 손가락에 설치되어, 검지손가락이 입력된 x축 위치를 판단할 수 있다. 자이로센서(103)는 손의 방향 정보를 측정한다. 추가적으로, 웨어러블 키보드(100)는 가속도 정보를 측정하는 가속도 센서(acceleration sensor), 손의 회전 정보를 측정하는 자이로센서(gyro sensor) 및 지자기의 방향을 측정하는 지자기 센서를 포함할 수 있다. 자이로센서(103)의 측정값은 관성 측정 장치(IMU; Inertial Measurement Unit)로 제공될 수 있다. 관성 측정 장치는 이동 관성을 측정할 수 있는 가속도계와, 회전 관성을 측정할 수 있는 자이로계, 방위각을 측정할 수 있는 자계의 총 세 가지 센서로 이루어진 하나의 통합 유닛 형태로 제공될 수 있으며, 가속도계와 자이로계 및 자계에 대한 측정값을 이용하여 3축, 즉 피치(pitch), 롤(roll), 요(yaw)에 대한 회전 정보를 획득할 수 있다. According to one disclosure, the
일 개시에 의하여, 프로세서(115)는 감압센서(101), 자이로센서(103) 및 플렉스센서(111)에서 인식한 사용자 입력신호의 오차율을 줄이기 위하여 히스테리시스(Hysteresis) 파라미터 범위를 20% 미만으로 설정할 수 있다.According to one disclosure, the
도 7은 본 발명의 입력 장치(100)인 웨어러블 키보드에서 제 1 센싱 데이터를 인식하는 동작을 설명하기 위한 도면이다.7 is a diagram for explaining an operation of recognizing first sensing data in the wearable keyboard, which is the
도 7에서 L1, L2, L3은 각각 사용자가 제1 내지 제3 입력 레벨의 의도하면서 서로 다른 크기의 힘을 가한 경우 압력의 증감을 나타내는 그래프를 지칭한다. 다시 말하면 각각 약 레벨, 중 레벨, 강 레벨의 정도로 힘을 가한 경우를 지칭한다. 일 개시에 의하여, 사용자의 입력에 따라 바닥면에 가해지는 힘은 40~50ms 정도에서 급격히 증가하기 시작하여 80 ~ 100ms 정도에서 피크를 나타낸 다음 110 ~ 120ms 정도에서 크기 감소가 종료됨을 확인할 수 있다.In FIG. 7 , L1, L2, and L3 refer to graphs representing increases and decreases in pressure when the user intentionally applies forces of different magnitudes to the first to third input levels. In other words, it refers to a case where the force is applied to a weak level, a medium level, and a strong level, respectively. By the start, it can be confirmed that the force applied to the floor according to the user's input starts to increase rapidly at about 40-50 ms, peaks at about 80-100 ms, and then ends at about 110-120 ms.
바람직하게는, 이상과 같은 실험 결과를 고려하였을 때, 상기 인식 시간은 감압 센서부로부터 소정의 크기 이상의 상기 압력이 입력되기 시작한 시점을 기준으로 하여 50ms 내지 150ms의 시간으로 설정되는 것이 바람직하다. 그리고 보다 바람직하게는 70ms 내지 110ms의 시간으로 설정되는 것이 바람직하다. 여기서, 50ms 보다 작거나 150ms 보다 큰 시간을 인식 시간으로 설정하면, 웨어러블 키보드에 가해지는 입력에 따라 가해진 압력의 크기를 올바르게 측정할 수 없음을 확인할 수 있다.Preferably, in consideration of the experimental results as described above, the recognition time is preferably set to a time of 50 ms to 150 ms based on a point in time when the pressure of a predetermined size or more is started to be input from the pressure-sensitive sensor unit. And more preferably, it is preferably set to a time of 70 ms to 110 ms. Here, if a time less than 50 ms or greater than 150 ms is set as the recognition time, it can be seen that the magnitude of the pressure applied according to the input applied to the wearable keyboard cannot be measured correctly.
인식 시간은 감압 센서(101)로부터 소정의 크기 이상의 상기 압력이 입력되기 시작한 시점으로부터 소정의 시간 동안, 상기 압력이 최대값을 가지는 시간을 기준으로 설정될 수도 있다. 바람직하게는 상기 압력이 최대값을 가지는 시간이 인식 시간이 될 수 있다.The recognition time may be set based on a time when the pressure has a maximum value during a predetermined time from a time when the pressure of a predetermined level or more is started to be input from the
여기서 웨어러블 키보드(100)는 고정된 인식 시간을 설정하지 않고 입력되는 압력의 크기의 변화를 분석하여, 압력이 최대값을 가지는 시점에서의 압력의 크기를 기준으로 입력 레벨을 선택할 수 있다. 이와 같이 최대 압력값을 이용하는 경우 보다 정확하게 사용자가 의도한 압력의 크기를 인식하고 그에 따라 입력 레벨을 결정할 수 있는 효과가 있다.Here, the
이를 위하여 웨어러블 키보드(100)는 시간의 흐름에 따라 감압 센서(101)로부터 입력되는 압력의 크기를 시간 별로 저장하고, 저장된 압력들 중에서 가장 큰 압력을 이용하여 입력 레벨을 결정할 수 있다.To this end, the
다만 이와 같이 최대값을 이용하는 경우 최대값 식별을 위하여 메모리가 소요되고 신호 처리를 위한 전력이 소모될 수 있으므로, 메모리와 전력을 절약하기 위하여 상술한 바 미리 설정된 인식 시간을 사용할 수 있다. 이와 같이 미리 설정된 인식 시간을 사용하는 경우 해당 인식 시간에서 입력된 압력만을 이용하여 입력 레벨을 결정할 수 있으므로 메모리를 절약하고 신호 처리에 소모되는 전력을 최소화할 수 있는 효과가 있다.However, in the case of using the maximum value as described above, memory is required to identify the maximum value and power for signal processing may be consumed. Therefore, the previously set recognition time may be used to save memory and power. When the preset recognition time is used as described above, since the input level can be determined using only the pressure input at the corresponding recognition time, memory can be saved and power consumed for signal processing can be minimized.
다른 실시예에 의하여 웨어러블 키보드(100)는 입력 레벨의 인식을 위하여 사용자 별로 가장 적합한 임계치를 사용자의 입력에 따라 설정할 수 있다. According to another embodiment, the
일 개시에 의하여, 임계치는 웨어러블 키보드(100)에 의하여 구동되는 설정 프로그램에 의하여 사용자에게 제시되는 복수개의 값들 중에서 사용자의 선택 입력에 따라 선택되어 설정될 수도 있다. 예를 들어 설정 프로그램의 설계자는 각 나이, 성별, 신체적 조건을 가지는 사용자들에 대하여 웨어러블 키보드(100)에 대한 입력 시 가하는 힘의 정도를 측정하는 실험 결과 통계에 따라, 내어 각 나이, 성별, 신체적 조건을 가지는 사용자에게 가장 적합한 임계치 값을 결정하고, 그에 따라 설정 프로그램에서 사용자의 나이, 성별, 신체적 조건에 따른 사용자 프로파일 별 임계치 값을 설정할 수 있다. 예를 들면 웨어러블 키보드(100)에 의하여 구동되는 설정 프로그램에서는 각 사용자 프로파일 별로 임계치 값이 미리 설정되고, 사용자 프로파일에 대한 사용자의 선택 입력을 수신하여 선택된 프로파일에 대하여 미리 설정된 임계치 값을 이용할 수 있는 것이다. 예를 들어 설정 프로그램이 나이와 연령 대 별 사용자 프로파일에 대응하는 임계치 값을 미리 저장하고 있고, 사용자가 여자, 20대의 사용자 프로파일을 선택하면, 웨어러블 키보드(100)는 여자, 20대의 사용자 프로파일에 대하여 미리 설정된 임계치 값(제1 임계치 : 0.5N, 제2 임계치 3N)을 이용할 수 있는 것이다.According to one disclosure, the threshold value may be selected and set according to a user's selection input from among a plurality of values presented to the user by a setting program driven by the
또는 임계치는 웨어러블 키보드(100)가 각 사용자의 터치 입력에 따라 발생한 압력을 이용하는 방식으로 설정될 수도 있다. 여기서 웨어러블 키보드(100)는 감압 센서(101)로부터 입력받은 압력을 이용하여 상기 입력 레벨을 선택하기 위하여 비교 기준이 되는 소정의 임계치를 설정할 수 있다.Alternatively, the threshold value may be set in such a way that the
도 8은 본 발명의 입력 장치(100)인 웨어러블 키보드의 주요 구성을 설명하기 위한 도면이다.8 is a view for explaining the main configuration of the wearable keyboard, which is the
웨어러블 키보드(100)는 센서부(105), 통신 모듈(114), 배터리(116), 제어부(115) 및 메모리(112)를 포함할 수 있다. The
일 개시에 의하여 센서부(105)는 감압센서, 자이로센서, 플렉스센서를 포함한 다양한 센서를 포함할 수 있다. 예를 들어, 센서부(105)는 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.According to one disclosure, the
일 개시에 의하여 배터리(116)는 웨어러블 키보드(100)의 기능을 수행하는데 필요한 전원을 공급하는 배터리(battery)를 포함하며, 예시적으로 리튬 폴리머 배터리를 포함할 수 있다.According to one disclosure, the
또한, 웨어러블 키보드(100)는 하나 이상의 인스트럭션을 저장하는 메모리(112) 및 메모리(112)에 저장된 하나 이상의 인스트럭션을 실행하는 프로세서(115)를 포함할 수 있다.In addition, the
일 개시에 의하여 프로세서(115)는, 예를 들면, 소프트웨어(예: 프로그램)를 구동하여 프로세서(115)에 연결된 웨어러블 키보드(100)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)을 제어할 수 있고, 다양한 데이터 처리 및 연산을 수행할 수 있다. 프로세서(115)는 다른 구성요소(통신 모듈(114))로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드하여 처리하고, 결과 데이터를 비휘발성 메모리에 저장할 수 있다. 일 실시 예에 따르면, 프로세서(115)는 메인 프로세서(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 운영되고, 추가적으로 또는 대체적으로, 메인 프로세서보다 저전력을 사용하거나, 또는 지정된 기능에 특화된 보조 프로세서(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 여기서, 보조 프로세서는 메인 프로세서와 별개로 또는 임베디드되어 운영될 수 있다.According to one disclosure, the
일 개시에 의하여 통신 모듈(114)은 웨어러블 키보드(100)와 외부 장치(600)간의 유선 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(114)은 프로세서(115)(예: 어플리케이션 프로세서)와 독립적으로 운영되는, 유선 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시 예에 따르면, 통신 모듈(114)은 무선 통신 모듈(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다.According to one disclosure, the
일 개시에 의하여 프로세서(115)는 제 1 키보드 입력이 검지 손가락에 의한 입력인 경우, 추가적으로 제 3 센싱 데이터를 이용하여 제 1 키보드 입력의 x축 방향의 위치를 결정하고, 결정된 제 1 키보드 입력의 x축 위치 및 y축 위치에 대응하는 출력값을 결정하는 것을 특징으로 한다.According to one disclosure, when the first keyboard input is an input by the index finger, the
일 개시에 의하여 프로세서(115)는, 사용자의 프로파일에 기초하여 제 1 센싱 데이터의 임계값을 결정하고, 감압 센서를 통해 임계값 이상의 압력이 감지되는 경우, 압력이 감지된 손가락에 대응하는 적어도 하나의 키를 예비 출력값으로서 결정하고, 제 2 센싱 데이터 및 제 3 센싱 데이터 중 적어도 하나로부터 획득한 위치 정보에 기초하여, 예비 출력값 중 어느 하나를 출력 값으로 결정할 수 있다.According to one disclosure, the
일 개시에 의하여 프로세서(115)는 웨어러블 키보드에 설치된 10개의 감압 센서 각각에 대하여 적어도 하나의 예비 출력값을 매핑하고, 입력신호의 위치가 명확하기 않다고 판단되는 경우, 입력신호를 획득한 감압 센서에 매핑된 적어도 하나의 예비 출력값을 외부 장치로 전송하고, 적어도 하나의 예비 출력값 중 어느 하나를 선택하는 사용자 입력에 기초하여 출력 신호를 결정할 수 있다.According to one disclosure, the
일 개시에 의하여, 메모리(112)는 프로세서(115)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 본 발명의 장치로 입력되거나 또는 장치에서 출력되는 데이터를 저장할 수도 있다. 메모리(112)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 여기서, 복수 개의 모듈들은 하드웨어가 아닌 소프트웨어로서, 기능적으로 동작하는 모듈이다.According to one disclosure, the
메모리(112)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 여기서, 복수 개의 모듈들은 하드웨어가 아닌 소프트웨어로서, 기능적으로 동작하는 모듈을 의미할 수 있다.Programs stored in the
[적용례][Application example]
따라서, 이하 상술한 웨어러블 키보드를 활용한 예시들은 아래와 같을 수 있다. Accordingly, examples using the wearable keyboard described above may be as follows.
[제1 예시][Example 1]
사용자의 모든 손가락 말단부에 대응되도록 설치된 감압 센서;a pressure sensor installed to correspond to the distal end of all of the user's fingers;
상기 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치된 플렉스 센서; a flex sensor installed to correspond to the first joint to the third joint of the user's finger;
상기 사용자의 검지 손가락의 말단부에 설치된 자이로센서;a gyro sensor installed at the distal end of the user's index finger;
외부 장치와 통신하는 통신 모듈;a communication module for communicating with an external device;
하나 이상의 인스트럭션을 저장하는 메모리; 및a memory storing one or more instructions; and
상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고,a processor executing the one or more instructions stored in the memory;
상기 프로세서는 상기 감압 센서로부터 획득한 제 1 센싱 데이터로부터 가상 쿼티 키보드를 입력하는 입력신호를 판단하고, 상기 플렉스 센서로부터 획득한 제 2 센싱 데이터로부터 상기 가상 쿼티 키보드에서 입력신호가 검출된 위치를 판단하고, 상기 자이로센서로부터 획득한 제 3 센싱 데이터로부터 검지 손가락으로부터 입력된 입력신호의 위치를 판단한 결과에 기초하여 출력신호를 생성하고, 상기 통신 모듈을 통해 상기 출력신호를 외부 장치로 전송하는, 웨어러블 키보드.The processor determines an input signal for inputting a virtual QWERTY keyboard from the first sensing data obtained from the pressure-sensitive sensor, and determines a position where the input signal is detected from the virtual QWERTY keyboard from the second sensing data obtained from the flex sensor and generating an output signal based on a result of determining the position of the input signal input from the index finger from the third sensing data obtained from the gyro sensor, and transmitting the output signal to an external device through the communication module. keyboard.
[제2 예시][Second example]
제 1 예시에 있어서,In the first example,
상기 프로세서는,The processor is
상기 제 1 센싱 데이터가 임계값 이상으로 검출되는지 여부를 판단하고,It is determined whether the first sensed data is detected above a threshold,
상기 임계값 이상으로 검출된 제 1 센싱 데이터를 제 1 키보드 입력으로 결정하고, 상기 사용자의 손가락의 구부림 정도에 따라 변화하는 상기 제 2 센싱 데이터로부터 상기 제 1 키보드 입력의 y축 방향 위치를 결정하고,The first sensing data detected above the threshold is determined as a first keyboard input, and the y-axis direction position of the first keyboard input is determined from the second sensing data that changes according to the degree of bending of the user's finger, and ,
상기 결정된 제 1 키보드 입력의 y축 위치에 대응하는 출력값을 결정하고,determining an output value corresponding to the determined y-axis position of the first keyboard input;
상기 통신 모듈을 이용하여 상기 출력값을 외부 장치로 전송하는 것을 특징으로 하는, 웨어러블 키보드.A wearable keyboard, characterized in that it transmits the output value to an external device using the communication module.
[제3 예시][3rd example]
제 2 예시에 있어서, In the second example,
상기 제 1 키보드 입력이 검지 손가락에 의한 입력인 경우, 추가적으로 제 3 센싱 데이터를 이용하여 상기 제 1 키보드 입력의 x축 방향의 위치를 결정하고, 상기 결정된 제 1 키보드 입력의 x축 위치 및 y축 위치에 대응하는 출력값을 결정하는 것을 특징으로 하는, 웨어러블 키보드.When the first keyboard input is input by the index finger, a position in the x-axis direction of the first keyboard input is additionally determined using third sensing data, and an x-axis position and a y-axis position of the first keyboard input are determined. Characterized in determining the output value corresponding to the position, wearable keyboard.
[제4 예시][4th example]
제 1 예시에 있어서, In the first example,
상기 프로세서는, The processor is
상기 사용자의 프로파일에 기초하여 상기 제 1 센싱 데이터의 임계값을 결정하고, Determining a threshold value of the first sensing data based on the user's profile,
상기 감압 센서를 통해 상기 임계값 이상의 압력이 감지되는 경우, 압력이 감지된 손가락에 대응하는 적어도 하나의 키를 예비 출력값으로서 결정하고,When a pressure equal to or greater than the threshold value is sensed through the pressure sensor, at least one key corresponding to a finger for which the pressure is sensed is determined as a preliminary output value,
상기 제 2 센싱 데이터 및 제 3 센싱 데이터 중 적어도 하나로부터 획득한 위치 정보에 기초하여, 상기 예비 출력값 중 어느 하나를 출력 값으로 결정하는 것을 특징으로 하는, 웨어러블 키보드.Based on the location information obtained from at least one of the second sensing data and the third sensing data, any one of the preliminary output values is determined as an output value, the wearable keyboard.
[제5 예시][5th example]
제 1 예시에 있어서, In the first example,
상기 프로세서는, The processor is
상기 웨어러블 키보드에 설치된 10개의 감압 센서 각각에 대하여 적어도 하나의 예비 출력값을 매핑하고, mapping at least one preliminary output value to each of the ten pressure-sensitive sensors installed in the wearable keyboard;
상기 입력신호의 위치가 명확하기 않다고 판단되는 경우, 상기 입력신호를 획득한 감압 센서에 매핑된 적어도 하나의 예비 출력값을 외부 장치로 전송하고, When it is determined that the position of the input signal is not clear, at least one preliminary output value mapped to the pressure-sensitive sensor that obtained the input signal is transmitted to an external device,
상기 적어도 하나의 예비 출력값 중 어느 하나를 선택하는 사용자 입력에 기초하여 출력 신호를 결정하는 것을 특징으로 하는, 웨어러블 키보드.The wearable keyboard, characterized in that the output signal is determined based on a user input for selecting any one of the at least one preliminary output value.
[제6 예시][6th example]
제 1 예시에 있어서, In the first example,
프로세서는, The processor is
상기 감압센서, 자이로센서 및 플렉스센서 중 적어도 하나에서 인식한 사용자 입력신호의 오차율을 줄이기 위하여 히스테리시스(Hysteresis) 파라미터 범위를 20% 미만으로 설정하는 것을 특징으로 하는, 웨어러블 키보드. The wearable keyboard, characterized in that the hysteresis parameter range is set to less than 20% in order to reduce the error rate of the user input signal recognized by at least one of the pressure-sensitive sensor, the gyro sensor, and the flex sensor.
[제7 예시][Seventh example]
제 1 예시에 있어서, In the first example,
상기 웨어러블 키보드는 폴리아미드 수지 조성물로 이루어져있으며, The wearable keyboard is made of a polyamide resin composition,
상기 폴리아미드 수지 조성물은, The polyamide resin composition comprises:
식물성 오일과 알코올을 반응시켜 제조되며, 화학식 1에 의하여 표시되는 에폭시계 에스테르 화합물 15 내지 25 중량%;15 to 25 wt% of an epoxy-based ester compound represented by
프탈레이트계 에스테르 화합물, 테레프탈레이트계 에스테르 화합물, 프탈레이트계 및 테레프탈레이트계 에스테르 혼합물 및 트리멜리테이트계 에스테르 화합물로 이루어진 군에서 선택된 적어도 하나의 에스테르 화합물 20 내지 25 중량%;20 to 25 wt% of at least one ester compound selected from the group consisting of a phthalate-based ester compound, a terephthalate-based ester compound, a phthalate-based and terephthalate-based ester mixture, and a trimellitate-based ester compound;
고밀도 폴리에틸렌(HDPE), 저밀도 폴리에틸렌(LDPE), 폴리프로필렌(PP), 에틸렌-프로필렌 공중합체(EPM), 에틸렌-프로필렌-디엔 공중합체(EPDM), 에틸렌-부텐 공중합체, 에틸렌-옥텐 공중합체, 에틸렌-부타디엔 공중합체 중에서 선택된 1종 이상의 올레핀계 고무 중합체 5 내지 10% 중량%;High density polyethylene (HDPE), low density polyethylene (LDPE), polypropylene (PP), ethylene-propylene copolymer (EPM), ethylene-propylene-diene copolymer (EPDM), ethylene-butene copolymer, ethylene-octene copolymer, 5 to 10% by weight of at least one olefinic rubber polymer selected from among ethylene-butadiene copolymers;
상대점도(25℃)가 2.0 내지 2.8cP이고, 수평균분자량이 20,000 내지 200,000g/mol인 폴리 아미드 30 내지 50 중량%;30 to 50 wt% of a polyamide having a relative viscosity (25°C) of 2.0 to 2.8 cP and a number average molecular weight of 20,000 to 200,000 g/mol;
공액 디엔 고무, 방향족 비닐 화합물 및 비닐시안 화합물을 포함하는 비닐 방향족 화합물-비닐시안 화합물 공중합체 5 내지 15 중량%를 포함하는 폴리아미드 수지 조성물로 이루어진 것을 특징으로 하는, 웨어러블 키보드.A wearable keyboard comprising a polyamide resin composition comprising 5 to 15 wt% of a conjugated diene rubber, an aromatic vinyl compound and a vinyl aromatic compound including a vinyl cyan compound-vinyl cyan compound copolymer.
[화학식 1][Formula 1]
(상기 R4는 (C8-C20)에폭시알킬이고, R5는 (C1-C10)알킬 또는 이고, 상기 Rx 및 Ry는 각각 독립적으로 수소, (C1-C5)알킬 또는 이며, 상기 알킬은 (C1-C5)알킬 또는 이 더 치환될 수 있고, 상기 R41 및 R42는 각각 독립적으로 (C8-C20)에폭시알킬이며, 상기 n은 1 내지 3에서 선택되는 정수임).(Wherein R4 is (C8-C20) epoxyalkyl, R5 is (C1-C10) alkyl or and R x and R y are each independently hydrogen, (C1-C5)alkyl or and wherein the alkyl is (C1-C5)alkyl or may be further substituted, wherein R 41 and R 42 are each independently (C8-C20)epoxyalkyl, and n is an integer selected from 1 to 3).
이하, 상술한 내용들을 바탕으로 본 명세서의 바람직한 제2 실시예에 따른, 운전자 졸음 방지 방법은 다음과 같다. 이때, 제2 실시예에 따른 제어 방법을 수행하는 주체는 상술한 제1 실시예에 따른 서버 또는 서버의 프로세서일 수 있다. Hereinafter, a method for preventing driver's drowsiness according to a second preferred embodiment of the present specification based on the above description is as follows. In this case, the subject performing the control method according to the second embodiment may be the server according to the above-described first embodiment or a processor of the server.
도 9 내지 도 11은 본 발명에 따른 운전자 졸음 방지 방법을 나타낸 도면이다. 9 to 11 are views illustrating a method for preventing driver drowsiness according to the present invention.
도 9에 따르면, 본 발명에 따른 운전자 졸음 방지 방법은 운전자의 얼굴 영상을 수신하는 단계(S1100), 얼굴 영상을 기초로, 운전자의 졸음 상태에 대한 정보를 획득하는 단계(S1200), 졸음 상태에 따른 알람을 출력하기 위한 명령을 스피커(220)로 전송하는 단계(S1300), 미리 정해진 입력을 입력 장치(100)로부터 수신하는 단계(S1400) 및 미리 정해진 입력을 수신하고, 미리 정해진 입력에 따라 스피커(220)의 알람을 오프(off)하도록 제어하는 단계(S1500)를 더 포함할 수 있다. According to FIG. 9 , the method for preventing driver drowsiness according to the present invention includes the steps of receiving a driver's face image (S1100), acquiring information on the driver's drowsiness state based on the face image (S1200), and drowsy state Transmitting a command for outputting an alarm in response to the speaker 220 (S1300), receiving a predetermined input from the input device 100 (S1400), and receiving a predetermined input, according to the predetermined input, the speaker It may further include a step (S1500) of controlling to turn off (off) the alarm of (220).
도 10에 따르면, 본 발명에 따른 S1200 단계는, 운전자의 상기 얼굴에 대한 특징점을 추출하는 단계(S1210) 및 특징점을 기초로 졸음 상태에 대한 정보를 획득하는 단계(S1220)를 포함할 수 있다. Referring to FIG. 10 , step S1200 according to the present invention may include extracting a feature point for the driver's face ( S1210 ) and obtaining information on a drowsy state based on the feature point ( S1220 ).
도 11에 따르면, 본 발명에 따른 S1220 단계는, 특징점이 이동한 거리를 획득하는 단계(S1221) 및 이동한 거리가 미리 정해진 길이보다 큰 경우, 운전자의 상태를 졸음 상태로 정의하는 단계(S1222)를 포함할 수 있다. 이때, 특징점은 운전자의 눈 주변 또는 입 주변에서 추출된 특징점일 수 있다. Referring to FIG. 11 , step S1220 according to the present invention includes the steps of obtaining the distance traveled by the feature point (S1221) and defining the driver's state as a drowsy state when the moved distance is greater than a predetermined length (S1222) may include In this case, the feature point may be a feature point extracted from around the driver's eyes or mouth.
졸음 상태에 따른 알람을 출력하기 위한 명령을 스피커(220)로 전송하는 단계(S1300) 및 미리 정해진 입력을 입력 장치(100)로부터 수신하는 단계(S1400)에 대한 예시는 아래와 같다. An example of the step of transmitting a command for outputting an alarm according to the drowsy state to the speaker 220 (S1300) and the step of receiving a predetermined input from the input device 100 (S1400) are as follows.
스피커에 따른 알람은 다음과 같을 수 있다. The alarm according to the speaker may be as follows.
(1) 경고음(1) beep sound
(2) 졸음 상태를 알려주는 다이어로그(2) Dialog that informs the state of drowsiness
(3) 졸음 운전 주의 메시지(3) Drowsy driving warning message
이러한 알람을 오프(off)하기 위하여 운전자에게 요구하는 입력은 다음과 같이 미리 정해질 수 있다. An input required by the driver to turn off such an alarm may be predetermined as follows.
(1) 미리 정해진 알파벳의 입력(1) input of a predetermined alphabet
(2) 미리 정해진 숫자의 입력(2) input of a predetermined number
(3) 위 알파벳과 숫자의 조합(3) Combination of the above alphabets and numbers
(4) 알파벳 또는 숫자의 무작위 조합(4) random combinations of alphabets or numbers
(5) 미리 정해진 박자에 맞춰 입력(5) Input according to a predetermined beat
서버는 위 입력들 중 운전자의 선택에 따른 입력을 요구할 수 있다. 운전자는 웨어러블 키보드(100)를 통하여 위 미리 정해진 입력을 입력할 수 있다. The server may request an input according to a driver's selection among the above inputs. The driver may input the above predetermined input through the
또한, 본 발명에 따른 서버(300) 또는 프로세서(301)는 상술한 방법에 따라 운전자 졸음 방지 시스템을 제어할 수 있다. In addition, the server 300 or the processor 301 according to the present invention may control the driver's drowsiness prevention system according to the above-described method.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 모델링하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽힐 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 모델링되는 것도 포함한다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.The present invention described above can be modeled as computer readable code on a medium in which a program is recorded. The computer-readable medium includes all types of recording devices in which data readable by a computer system is stored. Examples of computer-readable media include Hard Disk Drive (HDD), Solid State Disk (SSD), Silicon Disk Drive (SDD), ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc. It also includes modeling in the form of a carrier wave (eg, transmission over the Internet). Accordingly, the above detailed description should not be construed as restrictive in all respects but as exemplary. The scope of the present invention should be determined by a reasonable interpretation of the appended claims, and all modifications within the equivalent scope of the present invention are included in the scope of the present invention.
앞에서 설명된 본 발명의 어떤 실시 예들 또는 다른 실시 예들은 서로 배타적이거나 구별되는 것은 아니다. 앞서 설명된 본 발명의 어떤 실시 예들 또는 다른 실시 예들은 각각의 구성 또는 기능이 병용되거나 조합될 수 있다.Any or other embodiments of the present invention described above are not mutually exclusive or distinct. Any of the above-described embodiments or other embodiments of the present invention may be combined or combined with each configuration or function.
상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.The above detailed description should not be construed as restrictive in all respects and should be considered as illustrative. The scope of the present invention should be determined by a reasonable interpretation of the appended claims, and all modifications within the equivalent scope of the present invention are included in the scope of the present invention.
100: 입력 장치, 웨어러블 키보드
200: 차량
210: 영상 획득부
220: 스피커
230: 통신부
300: 서버100: input device, wearable keyboard
200: vehicle
210: image acquisition unit
220: speaker
230: communication department
300: server
Claims (11)
상기 영상을 수신하고, 상기 영상에 기초하여 상기 운전자의 졸음 상태에 대한 정보를 획득하는 서버;
상기 운전자의 졸음 상태에 따른 알람을 출력하는 스피커; 및
상기 알람을 오프(off)하기 위하여 미리 정해진 입력이 입력되는 입력 장치;를 포함하되,
상기 서버는,
상기 미리 정해진 입력을 상기 입력 장치로부터 수신하고, 상기 미리 정해진 입력에 따라 상기 스피커의 알람을 오프(off)하도록 제어하되,
상기 입력 장치는 웨어러블 키보드로서,
사용자의 모든 손가락 말단부에 대응되도록 설치된 감압 센서;
상기 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치된 플렉스 센서;
상기 사용자의 검지 손가락의 말단부에 설치된 자이로센서;
외부 장치와 통신하는 통신 모듈;
하나 이상의 인스트럭션을 저장하는 메모리; 및
상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고,
상기 웨어러블 키보드는, 폴리아미드 수지 조성물로 이루어지며,
상기 폴리아미드 수지 조성물은,
식물성 오일과 알코올을 반응시켜 제조되며, 화학식 1에 의하여 표시되는 에폭시계 에스테르 화합물 15 내지 25 중량%;
프탈레이트계 에스테르 화합물, 테레프탈레이트계 에스테르 화합물, 프탈레이트계 및 테레프탈레이트계 에스테르 혼합물 및 트리멜리테이트계 에스테르 화합물로 이루어진 군에서 선택된 적어도 하나의 에스테르 화합물 20 내지 25 중량%;
고밀도 폴리에틸렌(HDPE), 저밀도 폴리에틸렌(LDPE), 폴리프로필렌(PP), 에틸렌-프로필렌 공중합체(EPM), 에틸렌-프로필렌-디엔 공중합체(EPDM), 에틸렌-부텐 공중합체, 에틸렌-옥텐 공중합체, 에틸렌-부타디엔 공중합체 중에서 선택된 1종 이상의 올레핀계 고무 중합체 5 내지 10% 중량%;
상대점도(25℃)가 2.0 내지 2.8cP이고, 수평균분자량이 20,000 내지 200,000g/mol인 폴리 아미드 30 내지 50 중량%;
공액 디엔 고무, 방향족 비닐 화합물 및 비닐시안 화합물을 포함하는 비닐 방향족 화합물-비닐시안 화합물 공중합체 5 내지 15 중량%를 포함하는 폴리아미드 수지 조성물로 이루어진 것을 특징으로 하는 것인, 운전자 졸음 방지 시스템.
[화학식 1]
(상기 R4는 (C8-C20)에폭시알킬이고, R5는 (C1-C10)알킬 또는 이고, 상기 Rx 및 Ry는 각각 독립적으로 수소, (C1-C5)알킬 또는 이며, 상기 알킬은 (C1-C5)알킬 또는 이 더 치환될 수 있고, 상기 R41 및 R42는 각각 독립적으로 (C8-C20)에폭시알킬이며, 상기 n은 1 내지 3에서 선택되는 정수임).an image acquisition unit acquiring an image of the driver's face;
a server receiving the image and obtaining information on the driver's drowsiness state based on the image;
a speaker outputting an alarm according to the drowsy state of the driver; and
Including; an input device to which a predetermined input is input in order to turn off the alarm;
The server is
Receive the predetermined input from the input device, and control to turn off the alarm of the speaker according to the predetermined input,
The input device is a wearable keyboard,
a pressure sensor installed to correspond to the distal end of all fingers of the user;
a flex sensor installed to correspond to the first joint to the third joint of the user's finger;
a gyro sensor installed at the distal end of the user's index finger;
a communication module for communicating with an external device;
a memory storing one or more instructions; and
a processor executing the one or more instructions stored in the memory;
The wearable keyboard is made of a polyamide resin composition,
The polyamide resin composition comprises:
15 to 25 wt% of an epoxy-based ester compound represented by Formula 1, which is prepared by reacting vegetable oil with alcohol;
20 to 25 wt% of at least one ester compound selected from the group consisting of a phthalate-based ester compound, a terephthalate-based ester compound, a phthalate-based and terephthalate-based ester mixture, and a trimellitate-based ester compound;
High density polyethylene (HDPE), low density polyethylene (LDPE), polypropylene (PP), ethylene-propylene copolymer (EPM), ethylene-propylene-diene copolymer (EPDM), ethylene-butene copolymer, ethylene-octene copolymer, 5 to 10% by weight of at least one olefinic rubber polymer selected from among ethylene-butadiene copolymers;
30 to 50 wt% of a polyamide having a relative viscosity (25°C) of 2.0 to 2.8 cP and a number average molecular weight of 20,000 to 200,000 g/mol;
A system for preventing driver's drowsiness, characterized in that it consists of a polyamide resin composition comprising 5 to 15 wt% of a vinyl aromatic compound-vinyl cyan compound copolymer including a conjugated diene rubber, an aromatic vinyl compound, and a vinyl cyan compound.
[Formula 1]
(Wherein R4 is (C8-C20) epoxyalkyl, R5 is (C1-C10) alkyl or and R x and R y are each independently hydrogen, (C1-C5)alkyl or and wherein the alkyl is (C1-C5)alkyl or may be further substituted, wherein R 41 and R 42 are each independently (C8-C20)epoxyalkyl, and n is an integer selected from 1 to 3).
상기 서버는,
상기 운전자의 상기 얼굴에 대한 특징점을 추출하고, 상기 특징점을 기초로 상기 운전자의 졸음 상태에 대한 정보를 획득하는 것인, 운전자 졸음 방지 시스템. According to claim 1,
The server is
The system for preventing drowsiness by extracting feature points for the face of the driver and acquiring information on the driver's drowsiness state based on the feature points.
상기 특징점은 상기 운전자의 입 주변 또는 눈 주변을 따라 추출되고,
상기 서버는,
상기 특징점이 미리 정해진 길이보다 더 움직이는 경우, 상기 운전자의 상태를 졸음 상태로 정의하는 것인, 운전자 졸음 방지 시스템. 3. The method of claim 2,
The feature point is extracted along a periphery of the driver's mouth or eyes,
The server is
and when the feature point moves more than a predetermined length, defining the driver's state as a drowsy state.
상기 스피커는 미리 입력된 다이어로그(dialog)를 음성으로 출력하는 것인, 운전자 졸음 방지 시스템. According to claim 1,
The speaker is to output a pre-input dialog (dialog) as a voice, driver's drowsiness prevention system.
상기 입력 장치는 상기 운전자가 착용하는 웨어러블 키보드인 것인, 운전자 졸음 방지 시스템. According to claim 1,
The input device is a wearable keyboard worn by the driver, the driver's drowsiness prevention system.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200161076A KR102403887B1 (en) | 2020-11-26 | 2020-11-26 | System and method for protecting drowsy driving |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020200161076A KR102403887B1 (en) | 2020-11-26 | 2020-11-26 | System and method for protecting drowsy driving |
Publications (1)
Publication Number | Publication Date |
---|---|
KR102403887B1 true KR102403887B1 (en) | 2022-05-30 |
Family
ID=81800197
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020200161076A KR102403887B1 (en) | 2020-11-26 | 2020-11-26 | System and method for protecting drowsy driving |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102403887B1 (en) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100209610B1 (en) | 1997-02-22 | 1999-07-15 | 구자홍 | Sleepness protection device using brain wave signal |
JP2000330692A (en) | 1999-05-20 | 2000-11-30 | Takashi Noguchi | Information inputting device |
KR101416522B1 (en) | 2012-12-10 | 2014-07-09 | 계명대학교 산학협력단 | prevention method of drowsy driving and system thereof |
KR20160103713A (en) * | 2015-02-25 | 2016-09-02 | 김건중 | Anti drowsy driving system |
KR20190063986A (en) * | 2017-11-30 | 2019-06-10 | 주식회사 라스테크 | Artificial intelligence dashboard robot base on cloud server for recognizing states of a user |
KR20190092782A (en) * | 2018-01-31 | 2019-08-08 | (주)유즈브레인넷 | Glove-type Motion Recognizing Apparatus Capable of Recognizing Motion of Fingers and Hands on the Space and Recognizing Method thereof |
KR20190120561A (en) * | 2018-04-16 | 2019-10-24 | (주) 이즈테크놀로지 | Method and System for Preventing Driver Drowsiness Through Interaction with Driver by Based on Driver Status Monitoring |
-
2020
- 2020-11-26 KR KR1020200161076A patent/KR102403887B1/en active IP Right Grant
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100209610B1 (en) | 1997-02-22 | 1999-07-15 | 구자홍 | Sleepness protection device using brain wave signal |
JP2000330692A (en) | 1999-05-20 | 2000-11-30 | Takashi Noguchi | Information inputting device |
KR101416522B1 (en) | 2012-12-10 | 2014-07-09 | 계명대학교 산학협력단 | prevention method of drowsy driving and system thereof |
KR20160103713A (en) * | 2015-02-25 | 2016-09-02 | 김건중 | Anti drowsy driving system |
KR20190063986A (en) * | 2017-11-30 | 2019-06-10 | 주식회사 라스테크 | Artificial intelligence dashboard robot base on cloud server for recognizing states of a user |
KR20190092782A (en) * | 2018-01-31 | 2019-08-08 | (주)유즈브레인넷 | Glove-type Motion Recognizing Apparatus Capable of Recognizing Motion of Fingers and Hands on the Space and Recognizing Method thereof |
KR20190120561A (en) * | 2018-04-16 | 2019-10-24 | (주) 이즈테크놀로지 | Method and System for Preventing Driver Drowsiness Through Interaction with Driver by Based on Driver Status Monitoring |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11009951B2 (en) | Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display | |
US10088807B2 (en) | Reverse battery protection device and operating method thereof | |
EP3929705A1 (en) | Wearable device and method of controlling the same | |
US20160070966A1 (en) | Head-mounted display head pose and activity estimation | |
US10621955B2 (en) | Wearable terminal for displaying screen optimized for various situations | |
KR102377162B1 (en) | Wearable keyboard | |
CN104462914B (en) | A kind of unlocking screen method and terminal | |
US11279459B2 (en) | Hover attachment for mobile device | |
KR101698103B1 (en) | Vehicle controlling system and control method thereof | |
EP3327520A1 (en) | Watch-type terminal | |
TWI564751B (en) | Wearable device, method of controlling the same, and mobile device configured to control the same | |
KR20150041569A (en) | Signature registration method, signature authentication method and apparatus thereof | |
US11921471B2 (en) | Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source | |
KR102415548B1 (en) | Wearable device and operating method thereof | |
KR102403887B1 (en) | System and method for protecting drowsy driving | |
KR20150092441A (en) | Method for user Authentication through touch dragging, device therefor | |
KR102336982B1 (en) | Mobile terminal and method for controlling the same | |
KR102423332B1 (en) | Vehicle key capable of drinking alcohol measurement and a drinking measurement system using the same | |
US20230073303A1 (en) | Wearable devices for sensing neuromuscular signals using a small number of sensor pairs, and methods of manufacturing the wearable devices | |
KR102418107B1 (en) | System and method for controlling of mobility unit | |
KR102498029B1 (en) | System and method for preventing accident | |
KR102426185B1 (en) | Method for providing game by game providing device for improving coding ability | |
KR20220087146A (en) | System and method for guiding path to shelter in disaster state | |
KR20220111906A (en) | System for story-based educational game | |
KR102231366B1 (en) | Life inconvenience report system using car black box camera |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |