KR102403887B1 - System and method for protecting drowsy driving - Google Patents

System and method for protecting drowsy driving Download PDF

Info

Publication number
KR102403887B1
KR102403887B1 KR1020200161076A KR20200161076A KR102403887B1 KR 102403887 B1 KR102403887 B1 KR 102403887B1 KR 1020200161076 A KR1020200161076 A KR 1020200161076A KR 20200161076 A KR20200161076 A KR 20200161076A KR 102403887 B1 KR102403887 B1 KR 102403887B1
Authority
KR
South Korea
Prior art keywords
driver
input
keyboard
drowsiness
server
Prior art date
Application number
KR1020200161076A
Other languages
Korean (ko)
Inventor
손정곤
김지윤
이보경
오승훈
Original Assignee
동의대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 동의대학교 산학협력단 filed Critical 동의대학교 산학협력단
Priority to KR1020200161076A priority Critical patent/KR102403887B1/en
Application granted granted Critical
Publication of KR102403887B1 publication Critical patent/KR102403887B1/en

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B3/00Audible signalling systems; Audible personal calling systems
    • G08B3/10Audible signalling systems; Audible personal calling systems using electric transmission; using electromagnetic transmission

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Disclosed are a system for preventing drowsiness of a driver and a method for preventing drowsiness of a driver. The present invention includes: an image acquiring unit acquiring a face image of a driver; a sever receiving the image and acquiring information on a drowsy state of the driver based on the image; a speaker outputting an alarm according to the drowsy state of the driver; and an input device in which predetermined input for turning off the alarm is input. The server can receive the predetermined input from the input device and control the alarm of the speaker to be turned off according to the predetermined input.

Description

졸음 운전 방지 시스템 및 그 방법{SYSTEM AND METHOD FOR PROTECTING DROWSY DRIVING}Drowsy driving prevention system and method

본 발명은 졸음 운전 방지 시스템 및 그 방법에 관한 것이다. 보다 상세하게는 운전자의 표정을 딥러닝 기반으로 분석하여 졸음 상태임을 감지하고, 본 발명 특유의 입력 장치를 활용하여 운전자의 졸음을 방지하는 졸음 운전 방지 시스템 및 그 방법에 관한 것이다.The present invention relates to a system for preventing drowsy driving and a method therefor. More particularly, it relates to a drowsy driving prevention system and method for detecting a drowsy state by analyzing a driver's facial expression based on deep learning, and preventing the driver from drowsiness by using a unique input device of the present invention.

자동차는 사용되는 원동기의 종류에 따라, 내연기관(internal combustion engine) 자동차, 외연기관(external combustion engine) 자동차, 가스터빈(gas turbine) 자동차 또는 전기자동차(electric vehicle) 등으로 분류될 수 있다.An automobile may be classified into an internal combustion engine automobile, an external combustion engine automobile, a gas turbine automobile, an electric vehicle, or the like, according to a type of a prime mover used.

또한, 잘 알려진 바와 같이, 졸음 운전은 이미 그 비중이 점차 늘어 차량 사고 원인의 가장 큰 부분을 차지하고 있으며, 이를 방지하기 위해 많은 연구들이 수행되고 있다. 졸음 운전은 교통사고의 중요한 원인으로, 치명적인 교통사고의 36%, 전체 교통사고의 43 ~ 54%가 졸음 운전으로 인한 것이다. 따라서, 운전자의 졸음을 감지하여 운전자의 졸음을 방지하는 시스템은 교통 사고를 줄일 수 있는 매우 중요한 기술이다. 또한, 아래와 같이 우리나라에서 졸음 운전으로 인한 사고는 꾸준하게 발생하고 있다. Also, as is well known, drowsy driving has already increased its proportion and accounts for the largest portion of the cause of vehicle accidents, and many studies are being conducted to prevent this. Drowsy driving is an important cause of traffic accidents, and 36% of fatal traffic accidents and 43 to 54% of all traffic accidents are due to drowsy driving. Accordingly, a system for preventing the driver from drowsiness by detecting the driver's drowsiness is a very important technology for reducing traffic accidents. In addition, accidents due to drowsy driving in Korea continue to occur as shown below.

2014년year 2014 2015년2015 2016년2016 사고(건)Accident (case) 24262426 27012701 24332433 사망(명)death (persons) 130130 108108 9898 부상(명)Injuries (persons) 46794679 55255525 48994899

운전자의 졸음을 방지하기 위하여 운전자의 상태를 파악하는 전통적인 방법들이 존재한다. 전통적인 방법들은 크게 세 가지 방식으로 분류할 수 있다.In order to prevent the driver from drowsiness, there are traditional methods of detecting the driver's condition. Traditional methods can be broadly classified into three types.

첫 번째로 차량의 변화를 관찰하여 운전자의 상태를 판단하는 방법이 있다. 차선을 이탈하는 상태가 일정 시간 지속되나 차선 변경 신호 없이 차선을 가로지를 시 경보를 울리는 방법들이 대표적이다.First, there is a method of judging the driver's condition by observing the change of the vehicle. A typical example is a method that generates an alarm when the lane departure condition continues for a certain period of time but crosses a lane without a lane change signal.

두 번째로 운전자의 뇌파, 심장 박동 등의 생리학 데이터를 기반으로 운전자의 상태를 인식하는 방법이 있다. 이 방식은 의학적으로 졸음 관련 환자를 치료할 때 사용되는 만큼 높은 정확도를 가지지만 운전자에게 측정 장비를 착용하여 변화를 관찰하기에는 어려움이 있어 실세계에서 적용하기 어려운 방법이다.Second, there is a method of recognizing the driver's condition based on physiological data such as the driver's brain waves and heartbeat. Although this method has high accuracy as it is medically used to treat drowsiness-related patients, it is difficult to apply in the real world because it is difficult to observe the change by wearing a measuring device to the driver.

이러한 전통적인 방법들은 운전자들이 가지는 개개인의 서로 다른 특성을 모두 반영하지 못하여 일반화된 졸음 감지 모델을 도출하는데 한계가 있다.These traditional methods have limitations in deriving a generalized drowsiness detection model because they do not reflect all the different characteristics of drivers.

특히, 대한민국 특허 제209610호는 EEG 신호를 이용한 졸음 방지 장치를 개시하고 있으나, EEG 및 심박수를 감지하는 센서류의 장착은 운전자가 피관리의식을 받게 되어 민감해질 수 있다는 문제가 있다. 따라서, 운전자가 의식하지 않는 상황에서 졸음을 감지하고, 보다 효율적으로 운전자의 졸음을 방지할 수 있는 방법이 필요하다.In particular, Korean Patent No. 209610 discloses a device for preventing drowsiness using an EEG signal, but there is a problem that the installation of sensors for detecting EEG and heart rate may cause the driver to become sensitive as he/she receives the consciousness to be managed. Accordingly, there is a need for a method for detecting drowsiness in a situation in which the driver is not aware and for preventing the driver from drowsiness more effectively.

또한, 입력 장치는 장치와 사용자의 커뮤니케이션 수단일 수 있다. 입력 장치는, 마우스, 키보드 등의 기본적인 장치들뿐만 아니라 제스처 인식, 음성 인식 등 다양한 원리를 활용한 모든 장치를 포함할 수 있다. 일반적으로 입력 장치로 사용되는 키보드는 단순히 스위치의 원리로 작동된다고 할 수 있다. 즉 스위치를 눌렀을 때 전류가 흐르고, 그 반대로 누르지 않았을 때 전류가 흐르지 않는 단순한 원리를 이용한 이진수 정보 입력방식을 따르고 있다.Also, the input device may be a communication means between the device and the user. The input device may include not only basic devices such as a mouse and keyboard, but also all devices using various principles such as gesture recognition and voice recognition. A keyboard, which is generally used as an input device, is simply operated by the principle of a switch. In other words, it follows the binary information input method using the simple principle that current flows when the switch is pressed and on the contrary, no current flows when the switch is not pressed.

또한, 키보드의 경우 모바일 기기의 이동성을 감소시키고, 인식률이 낮은 단점 등이 존재하였다.In addition, in the case of the keyboard, there were disadvantages such as reduced mobility of the mobile device and a low recognition rate.

최근, 웨어러블 스마트기기(Wearable Smart Device) 또는 착용 컴퓨터라는 유비쿼터스(ubiquitous)컴퓨팅 기술이 대두되고 있다. 이러한 기술은 컴퓨터를 옷이나 안경처럼 착용할 수 있게 함으로써 컴퓨터를 인간 몸의 일부로 만드는데 기여할 수 있다. 웨어러블 컴퓨터의 관점에서 더욱 편리하게 타이핑하거나 데이터를 입력할 수 있는 입력장치의 개발이 요구되고 있다.Recently, a ubiquitous computing technology called a wearable smart device or a wearable computer has emerged. These technologies could help make computers part of the human body by making them wearable like clothes or glasses. From the viewpoint of a wearable computer, development of an input device capable of more conveniently typing or inputting data is required.

이러한 요구에 따라 종래의 손가락을 이용한 웨어러블 입력 장치는 손가락의 동작이나 손가락이 터치하는 위치에 따라 입력 정보를 다르게 생성하여 입력 정보로 이용하는 것으로 입력정보를 생성하기 위해 특정의 제스처를 취하거나, 신체의 특정 부위를 터치하여 해당 체스처나 해당 신체의 부위에 할당된 입력정보를 이용하여 문자를 입력하는 방식이었다. 이런 경우, 특정 체스처를 제대로 인식하지 못하거나, 특정 신체 부위를 터치하지 못하는 경우에는 제대로된 입력 정보를 생성하지 못하는 경우가 발생하였다. 따라서, 이동성이 좋으면서도 타이핑이 편리한 웨어러블 키보드에 대한 필요성이 증가하였다.In response to this demand, the conventional wearable input device using a finger generates input information differently and uses it as input information according to the motion of the finger or the location where the finger touches. It was a method in which a character was input by touching a specific part and using the corresponding gesture or input information assigned to the part of the body. In this case, when a specific gesture could not be properly recognized or a specific body part could not be touched, proper input information could not be generated. Accordingly, the need for a wearable keyboard with good mobility and convenient typing has increased.

이처럼, 운전자의 졸음을 감지하기 위한 효율적인 수단뿐만 아니라, 웨어러블 키보드를 통하여 운전자가 피드백을 제공함으로써, 운전자가 잠을 깰 수 있도록 하기 위한 다양한 수단이 필요하다. As such, there is a need for various means for enabling the driver to wake up by providing feedback through the wearable keyboard as well as an effective means for detecting the driver's drowsiness.

KR 100209610 B1KR 100209610 B1 KR 101416522 B1KR 101416522 B1 JP 2000330692 AJP 2000330692 A

본 발명의 목적은 상술한 문제점들을 해결하기 위한 졸음 운전 방지 시스템 및 그 방법을 제안하기 위한 것이다. SUMMARY OF THE INVENTION It is an object of the present invention to propose a system for preventing drowsy driving and a method therefor to solve the above problems.

또한, 본 발명의 목적은 딥 러닝을 활용하여 운전자의 졸음 상태를 보다 효율적으로 감지하기 위한 것이다. Another object of the present invention is to more efficiently detect a driver's drowsiness state by using deep learning.

또한, 본 발명의 목적은 본 발명 특유의 입력 장치를 활용하여 보다 효율적으로 운전자의 졸음 운전을 방지하기 위한 것이다. Another object of the present invention is to more effectively prevent a driver from drowsy driving by utilizing an input device unique to the present invention.

상술한 문제점들을 해결하기 위하여, 본 발명은, 운전자의 얼굴 영상을 획득하는 영상 획득부, 상기 영상을 수신하고, 상기 영상에 기초하여 상기 운전자의 졸음 상태에 대한 정보를 획득하는 서버, 상기 운전자의 졸음 상태에 따른 알람을 출력하는 스피커 및 상기 알람을 오프(off)하기 위하여 미리 정해진 입력이 입력되는 입력 장치를 포함하되, 상기 서버는 상기 미리 정해진 입력을 상기 입력 장치로부터 수신하고, 상기 미리 정해진 입력에 따라 상기 스피커의 알람을 오프(off)하도록 제어할 수 있다. In order to solve the above problems, the present invention provides an image acquisition unit for acquiring an image of a driver's face, a server for receiving the image, and acquiring information on the drowsiness state of the driver based on the image, A speaker for outputting an alarm according to a drowsy state and an input device to which a predetermined input is input to turn off the alarm, wherein the server receives the predetermined input from the input device, and the predetermined input Accordingly, it is possible to control to turn off the alarm of the speaker.

또한, 상기 서버는, 상기 운전자의 상기 얼굴에 대한 특징점을 추출하고, 상기 특징점을 기초로 상기 운전자의 졸음 상태에 대한 정보를 획득할 수 있다. Also, the server may extract a feature point for the face of the driver, and obtain information about the driver's drowsiness state based on the feature point.

또한, 상기 특징점은 상기 운전자의 입 주변 또는 눈 주변을 따라 추출되고, 상기 서버는, 상기 특징점이 미리 정해진 길이보다 더 움직이는 경우, 상기 운전자의 상태를 졸음 상태로 정의할 수 있다. In addition, the feature point is extracted along a periphery of the driver's mouth or eyes, and when the feature point moves more than a predetermined length, the server may define the driver's state as a drowsy state.

또한, 상기 스피커는 미리 입력된 다이어로그(dialog)를 음성으로 출력할 수 있다. In addition, the speaker may output a pre-input dialog (dialog) as a voice.

또한, 상기 입력 장치는 상기 운전자가 착용하는 웨어러블 키보드일 수 있다. Also, the input device may be a wearable keyboard worn by the driver.

또한, 상술한 문제점들을 해결하기 위하여, 본 발명은, 운전자의 얼굴 영상을 수신하는 단계, 상기 얼굴 영상을 기초로, 상기 운전자의 졸음 상태에 대한 정보를 획득하는 단계, 상기 졸음 상태에 따른 알람을 출력하기 위한 명령을 스피커로 전송하는 단계, 미리 정해진 입력을 입력 장치로부터 수신하는 단계 및 상기 미리 정해진 입력을 수신하고, 상기 미리 정해진 입력에 따라 상기 스피커의 알람을 오프(off)하도록 제어하는 단계를 포함할 수 있다. In addition, in order to solve the above problems, the present invention provides the steps of: receiving a driver's face image; acquiring information on the driver's drowsiness state based on the face image; transmitting a command for outputting to a speaker, receiving a predetermined input from an input device, receiving the predetermined input, and controlling an alarm of the speaker to turn off according to the predetermined input may include

또한, 상기 졸음 상태에 대한 정보를 획득하는 단계는, 상기 운전자의 상기 얼굴에 대한 특징점을 추출하는 단계 및 상기 특징점을 기초로 상기 졸음 상태에 대한 정보를 획득하는 단계를 포함할 수 있다. Also, the obtaining of the information on the drowsiness state may include extracting a feature point for the face of the driver and acquiring information on the drowsiness state based on the feature point.

또한, 상기 특징점을 추출하는 단계는 상기 운전자의 입 주변 또는 입 주변을 따라 상기 특징점을 추출하고, 상기 졸음 상태에 대한 정보를 획득하는 단계는 상기 특징점이 이동한 거리를 획득하는 단계 및 상기 이동한 거리가 미리 정해진 길이보다 큰 경우, 상기 운전자의 상태를 졸음 상태로 정의하는 단계를 포함할 수 있다. In addition, the step of extracting the feature point extracts the feature point along or around the driver's mouth, and the step of obtaining the information on the drowsiness state includes the steps of obtaining the distance traveled by the feature point and the moving When the distance is greater than a predetermined length, the method may include defining the driver's state as a drowsy state.

또한, 상기 스피커는 미리 입력된 다이어로그(dialog)를 음성으로 출력할 수 있다.In addition, the speaker may output a pre-input dialog (dialog) as a voice.

또한, 상기 입력 장치는 상기 운전자가 착용하는 웨어러블 키보드일 수 있다. Also, the input device may be a wearable keyboard worn by the driver.

또한, 상술한 문제점들을 해결하기 위하여, 본 발명은, 명령어들을 저장하는 비일시적 컴퓨터 판독가능 매체로서, 상기 명령어들은 프로세서에 의해 실행될 때, 상기 프로세서로 하여금 상술한 운전자 졸음 방지 방법을 수행하게 하는, 비일시적 컴퓨터 판독가능 매체일 수 있다. In addition, in order to solve the above problems, the present invention provides a non-transitory computer readable medium storing instructions, when the instructions are executed by a processor, causing the processor to perform the above-described method for preventing driver drowsiness, It may be a non-transitory computer-readable medium.

본 발명은 상술한 문제점들을 해결하기 위한 졸음 운전 방지 시스템 및 그 방법을 제공할 수 있는 효과가 있다. The present invention has the effect of providing a system and method for preventing drowsy driving for solving the above-described problems.

또한, 본 발명은 딥러닝을 활용하여 운전자의 졸음 상태를 정확하게 감지할 수 있을 뿐만 아니라, 미리 정해진 입력을 수행하도록 본 발명 특유의 입력 장치를 사용하여야만 졸음 경보가 꺼진다는 점에서, 운전자의 졸음을 효과적으로 방지할 수 있다는 효과가 있다. In addition, the present invention can not only accurately detect the driver's drowsiness state by utilizing deep learning, but also reduce the driver's drowsiness in that the drowsiness alarm is turned off only by using the input device unique to the present invention to perform a predetermined input. It can be effectively prevented.

또한, 본 발명은 웨어러블 키보드를 활용하여 운전자로부터 피드백을 받음으로써, 운전 중에도 운전에 크게 방해되지 않고 운전자로부터 피드백을 입력받을 수 있어 운전자의 졸음을 방지하면서도 차량 운전의 안전성을 최대화할 수 있다는 효과가 있다. In addition, the present invention utilizes a wearable keyboard to receive feedback from the driver, so that feedback can be input from the driver without greatly hindering driving while driving, thereby preventing the driver from drowsiness and maximizing the safety of driving the vehicle. have.

본 발명에 따라 얻을 수 있는 효과는 이상에서 언급한 효과로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The effects obtainable according to the present invention are not limited to the above-mentioned effects, and other effects not mentioned may be clearly understood by those of ordinary skill in the art to which the present invention belongs from the following description. will be.

도 1은 본 발명에 따른 졸음 운전 방지 시스템을 나타낸 도면이다.
도 2는 운전자와 커뮤니케이션을 통하여 운전자의 졸음을 방지하는 것을 나타내는 도면이다.
도 3은 본 발명에 따른 서버를 나타낸 도면이다.
도 4는 본 발명의 입력 장치인 웨어러블 키보드의 동작을 개략적으로 설명하기 위한 도면이다.
도 5는 본 발명의 입력 장치인 웨어러블 키보드에서 입력신호로부터 출력값을 판단하여 외부 장치로 전송하는 일련의 과정을 설명하기 위한 흐름도이다.
도 6은 본 발명의 입력 장치인 웨어러블 키보드의 상세 구성을 설명하기 위한 도면이다.
도 7은 본 발명의 입력 장치인 웨어러블 키보드에서 제 1 센싱 데이터를 인식하는 동작을 설명하기 위한 도면이다.
도 8은 본 발명의 입력 장치인 웨어러블 키보드의 주요 구성을 설명하기 위한 도면이다.
도 9 내지 도 11은 본 발명에 따른 운전자 졸음 방지 방법을 나타낸 도면이다.
본 발명에 관한 이해를 돕기 위해 상세한 설명의 일부로 포함되는, 첨부 도면은 본 발명에 대한 실시예를 제공하고, 상세한 설명과 함께 본 발명의 기술적 특징을 설명한다.
1 is a view showing a system for preventing drowsy driving according to the present invention.
2 is a diagram illustrating prevention of drowsiness of a driver through communication with the driver;
3 is a diagram illustrating a server according to the present invention.
4 is a diagram schematically illustrating an operation of a wearable keyboard, which is an input device according to the present invention.
5 is a flowchart for explaining a series of processes of determining an output value from an input signal in the wearable keyboard as an input device of the present invention and transmitting it to an external device.
6 is a view for explaining a detailed configuration of a wearable keyboard, which is an input device of the present invention.
7 is a view for explaining an operation of recognizing first sensed data in a wearable keyboard which is an input device of the present invention.
8 is a diagram for explaining the main configuration of a wearable keyboard, which is an input device of the present invention.
9 to 11 are views illustrating a method for preventing driver drowsiness according to the present invention.
BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are included as a part of the detailed description to facilitate the understanding of the present invention, provide embodiments of the present invention, and together with the detailed description, explain the technical features of the present invention.

이하, 첨부된 도면을 참조하여 본 발명에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. Hereinafter, the embodiments disclosed in the present invention will be described in detail with reference to the accompanying drawings, but the same or similar components are assigned the same reference numbers regardless of reference numerals, and redundant description thereof will be omitted.

또한, 본 발명에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. In addition, in describing the embodiments disclosed in the present invention, if it is determined that detailed descriptions of related known technologies may obscure the gist of the embodiments disclosed in the present invention, the detailed description thereof will be omitted.

또한, 첨부된 도면은 본 발명에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 발명에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. In addition, the accompanying drawings are only for easy understanding of the embodiments disclosed in the present invention, and the technical spirit disclosed in the present invention is not limited by the accompanying drawings, and all changes included in the spirit and scope of the present invention , should be understood to include equivalents or substitutes.

제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.Terms including an ordinal number such as 1st, 2nd, etc. may be used to describe various elements, but the elements are not limited by the terms. The above terms are used only for the purpose of distinguishing one component from another.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.The singular expression includes the plural expression unless the context clearly dictates otherwise.

본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.In the present application, terms such as “comprises” or “have” are intended to designate that a feature, number, step, operation, component, part, or combination thereof described in the specification exists, but one or more other features It should be understood that this does not preclude the existence or addition of numbers, steps, operations, components, parts, or combinations thereof.

이하, 상술한 내용들을 바탕으로 본 발명의 바람직한 실시예에 따른, 졸음 운전 방지 시스템에 관하여 상세히 설명하면 다음과 같다.Hereinafter, a system for preventing drowsy driving according to a preferred embodiment of the present invention will be described in detail based on the above description.

도 1은 본 발명에 따른 졸음 운전 방지 시스템을 나타낸 도면이고, 도 2는 운전자와 커뮤니케이션을 통하여 운전자의 졸음을 방지하는 것을 나타내는 도면이다. 1 is a diagram illustrating a system for preventing drowsiness according to the present invention, and FIG. 2 is a diagram illustrating prevention of drowsiness of the driver through communication with the driver.

도 1에 따르면, 본 발명에 따른 시스템은 차량(200) 및 서버(300)를 포함할 수 있다. 차량(200)은 V2X 등을 이용하여 서버(300)와 통신할 수 있으며, 차량(200)은 주행에 필요한 기본적인 장치들 이외에, 영상 획득부(210), 스피커(220) 및 입력 장치(100)를 더 포함할 수 있다. 또한, 차량(200)은 영상 획득부(210)에 대한 충격을 완화할 수 있는 충격 완화부(211)를 더 포함할 수 있다. 1 , a system according to the present invention may include a vehicle 200 and a server 300 . The vehicle 200 may communicate with the server 300 using V2X, etc., and the vehicle 200 includes an image acquisition unit 210 , a speaker 220 and an input device 100 in addition to basic devices necessary for driving. may further include. In addition, the vehicle 200 may further include a shock alleviator 211 capable of mitigating an impact on the image acquiring unit 210 .

도 1 및 도 2에 따르면, 영상 획득부(210)는 운전자의 얼굴 영상을 획득할 수 있다. 영상 획득부(210)는 차량(200) 내에서 운전자의 얼굴을 촬영하는 카메라일 수 있고, 카메라로부터 영상을 획득하는 영상 수신부일 수도 있다.1 and 2 , the image acquisition unit 210 may acquire a face image of the driver. The image acquisition unit 210 may be a camera that captures the driver's face in the vehicle 200 or may be an image reception unit that acquires an image from the camera.

도 2에 따르면, 충격 완화부(211)는 영상 획득부(210)에 부착된 장치로서, 차량(200)의 흔들림으로 인하여 운전자의 얼굴 영상이 흔들리는 것을 방지할 수 있는 장치를 의미할 수 있다. 충격 완화부(211)는 스프링 등 탄성체를 포함할 수 있고, 서스펜션 장치를 활용하여 카메라의 흔들림을 완화하거나 OIS 장치를 활용하여 카메라의 흔들림을 완화할 수 있다. Referring to FIG. 2 , the shock alleviator 211 is a device attached to the image acquisition unit 210 , and may refer to a device capable of preventing the driver's face image from shaking due to the shaking of the vehicle 200 . The shock alleviator 211 may include an elastic body such as a spring, and may use a suspension device to alleviate camera shake or an OIS device to mitigate camera shake.

도 1 및 도 2에 따르면, 스피커(220)는 운전자에게 다이어로그(dialog)를 전달하는 음성 출력 장치일 수 있다. 스피커(220)는 진동을 통하여 운전자에게 메시지를 전달할 수 있다. 스피커(220)는 서버(300)로부터 다이어로그를 수신하고 수신된 다이어로그를 음성으로 출력할 수 있다. 스피커(220)는 서버(300)로부터 경고 메시지를 수신하고, 수신된 경고 메시지에 따라 알람을 출력할 수 있다. 즉, 스피커(220)는 운전자의 졸음 상태에 따른 알람을 출력할 수 있다. 이때, 다이어로그는 미리 입력되어 저장된 것일 수 있다. 1 and 2 , the speaker 220 may be a voice output device that delivers a dialog to the driver. The speaker 220 may transmit a message to the driver through vibration. The speaker 220 may receive a dialog from the server 300 and output the received dialog as a voice. The speaker 220 may receive a warning message from the server 300 and output an alarm according to the received warning message. That is, the speaker 220 may output an alarm according to the driver's drowsy state. In this case, the dialog may be previously input and stored.

도 1에 따르면, 서버(300)는 운전자의 얼굴 영상을 영상 획득부(210)로부터 수신하고, 수신된 영상 속 운전자의 얼굴에 대한 학습을 수행할 수 있다. 또한, 서버(300)는 미리 저장된 학습 데이터에 따라 운전자의 얼굴 영상을 분석할 수 있다. 이때, 미리 저장된 학습 데이터는 빅 데이터로부터 딥 러닝 등을 통하여 학습된 데이터일 수 있다. 즉, 서버(300)는 영상을 수신하고, 영상에 기초하여 운전자의 졸음 상태에 대한 정보를 획득할 수 있다. 즉, 서버(300)는 운전자의 상기 얼굴에 대한 특징점을 추출하고, 특징점을 기초로 운전자의 졸음 상태에 대한 정보를 획득할 수 있다. Referring to FIG. 1 , the server 300 may receive an image of the driver's face from the image acquisition unit 210 , and may learn about the driver's face in the received image. Also, the server 300 may analyze the driver's face image according to the pre-stored learning data. In this case, the pre-stored learning data may be data learned from big data through deep learning or the like. That is, the server 300 may receive the image and may acquire information on the driver's drowsiness state based on the image. That is, the server 300 may extract a feature point for the driver's face and obtain information on the driver's drowsiness state based on the feature point.

도 1에 따르면, 서버(300)는 운전자의 얼굴 영상에서 특징점을 추출하고, 추출된 특징점을 기초로 운전자가 졸음 상태인지에 대한 정보를 획득할 수 있다. 운전자가 졸음 상태인 경우, 교통사고의 위험성이 급격히 증가할 수 있으므로 운전자가 졸음 상태라는 정보가 획득된 경우, 서버(300)는 차량(200)의 스피커(220)를 통하여 알람이 출력될 수 있도록 경고 메시지를 생성하고, 이를 차량(200) 또는 스피커(220)에 전송할 수 있다. Referring to FIG. 1 , the server 300 may extract a feature point from the driver's face image, and obtain information on whether the driver is in a drowsy state based on the extracted feature point. When the driver is in a drowsy state, the risk of a traffic accident may rapidly increase, so when information that the driver is drowsy is obtained, the server 300 outputs an alarm through the speaker 220 of the vehicle 200 . A warning message may be generated and transmitted to the vehicle 200 or the speaker 220 .

서버(300)는 운전자의 얼굴 중 특정 부위를 중심으로 특징점을 추출할 수 있다. 서버(300)는 운전자의 입 주변을 따라 특징점을 추출할 수 있다. 따라서, 입 모양의 움직임을 통하여 운전자가 하품하는지 등을 판단할 수 있다. 일 예로, 일반적으로 말하는 경우와 달리 하품하는 경우, 운전자의 입의 움직임이 더 커질 수 있다. 또한, 하품의 경우, 입이 일정 크기로 커진 후 일정 시간동안 커진 크기로 유지될 수 있다. 따라서, 서버(300)는 운전자의 입 주변 특징점을 추출하고 해당 특징점이 미리 설정된 거리보다 더 크게 움직이는지를 감지할 수 있을 뿐만 아니라, 특징점이 미리 설정된 거리보다 더 크게 움직인 이후, 미리 설정된 시간보다 더 오래 유지되는지를 함께 감지할 수 있다. The server 300 may extract a feature point based on a specific part of the driver's face. The server 300 may extract the feature points along the periphery of the driver's mouth. Accordingly, it is possible to determine whether the driver is yawning or the like through the movement of the mouth shape. For example, when the driver yawns, unlike in the case of general speaking, the movement of the driver's mouth may increase. In addition, in the case of yawning, after the mouth grows to a predetermined size, the enlarged size may be maintained for a predetermined time. Therefore, the server 300 can extract a feature point around the driver's mouth and detect whether the feature point moves more than a preset distance, and after the feature point moves more than a preset distance, more than a preset time You can also sense whether it lasts for a long time.

또한, 서버(300)는 운전자의 눈 주변을 따라 특징점을 추출할 수 있다. 따라서, 눈 움직임을 통하여 운전자가 졸음 상태인지 등을 판단할 수 있다. 일 예로, 운전자의 눈 주변의 특징점들 사이의 거리가 미리 설정된 거리보다 작아진 경우, 서버(300)는 운전자의 눈이 감겨있는 상태라고 감지할 수 있다. 또한, 서버(300)는 운전자의 눈 주변의 특징점들 사이의 거리가 미리 설정된 거리보다 작아진 이후, 그 거리가 미리 정해진 시간보다 더 오래 유지되는 경우, 운전자의 눈이 감겨있는 상태로 감지할 수 있다. 또한 서버(300)는 운전자의 눈 주변의 특징점이 미리 정해진 시간 동안 움직이는 횟수를 체크하고, 움직이는 횟수가 미리 정해진 횟수보다 더 작은 경우, 운전자의 상태를 졸음 상태라고 판단할 수 있다. Also, the server 300 may extract the feature points along the driver's eye periphery. Accordingly, it is possible to determine whether the driver is in a drowsy state or the like through eye movement. For example, when the distance between the feature points around the driver's eyes is smaller than a preset distance, the server 300 may detect that the driver's eyes are closed. In addition, when the distance between the feature points around the driver's eyes becomes smaller than the preset distance and the distance is maintained longer than the preset time, the server 300 may detect the driver's eyes as closed. have. In addition, the server 300 may check the number of times the feature points around the driver's eyes move for a predetermined time, and when the number of movements is smaller than the predetermined number, determine that the driver's state is a drowsy state.

다만, 운전자의 눈 깜빡임 상태는 사람마다 다를 수 있으므로, 서버(300)는 운전자의 개별 특징을 학습할 수 있다. 즉, 서버(300)는 운전자의 눈과 입에 대한 움직임을 분석함과 동시에 운전자의 눈 깜빡임 상태와 횟수 역시 딥 러닝 등을 통하여 학습할 수 있다. 따라서, 서버(300)는 운전자 개인 맞춤형 졸음 상태 판단을 할 수 있다.However, since the blinking state of the driver's eyes may be different for each person, the server 300 may learn individual characteristics of the driver. That is, the server 300 may analyze the driver's eye and mouth movements and at the same time learn the driver's eye blinking state and number through deep learning, etc. FIG. Accordingly, the server 300 may determine the individual driver's personalized drowsiness state.

서버(300)는 위와 같이, 특징점의 조건이 일정 조건을 만족하는 경우를 운전자의 졸음 상태로 정의하고, 운전자가 졸음 상태라고 결정할 수 있다. As described above, the server 300 may define a case in which the condition of the feature point satisfies a predetermined condition as the driver's drowsiness state, and may determine that the driver is in the drowsy state.

도 1 및 도 2에 따르면, 입력 장치(100)는 운전자가 특정 명령을 입력하기 위한 장치로서, 음성을 입력하는 경우 마이크가 될 수 있다. 또한, 입력 장치(100)는 운전자가 문자 데이터를 입력하는 경우 키보드가 될 수 있다. 또한, 입력 장치(100)는 운전자가 어떠한 형태의 명령을 입력하느냐에 따라 변경될 수 있다. 또한 입력 장치(100)는 스피커(220)의 알람을 오프(off)하기 위하여 미리 정해진 입력이 입력되는 장치일 수 있다. 1 and 2 , the input device 100 is a device for the driver to input a specific command, and may be a microphone when inputting a voice. Also, the input device 100 may be a keyboard when the driver inputs text data. Also, the input device 100 may be changed according to what type of command the driver inputs. Also, the input device 100 may be a device to which a predetermined input is input to turn off the alarm of the speaker 220 .

또한, 입력 장치(100)는 사용자가 이동 수단에 필요한 모든 명령을 입력하기 위한 수단을 의미할 수 있다. 또한, 입력 장치(100)는 운전자가 착용하는 웨어러블 키보드일 수 있다. 웨어러블 키보드에 대한 자세한 내용은 후술한다. Also, the input device 100 may mean a means for the user to input all commands required for the moving means. Also, the input device 100 may be a wearable keyboard worn by the driver. Details of the wearable keyboard will be described later.

운전자가 졸음 상태라고 감지된 경우, 아래와 같은 시나리오가 수행될 수 있다. When it is detected that the driver is in a drowsy state, the following scenario may be performed.

서버(300)는 운전자에게 졸음을 방지하기 위한 알람 메시지를 생성할 수 있다. 알람 메시지는 스피커(220)를 통하여 운전자에게 전달되며, 운전자는 알람을 통하여 졸음이 방지될 수 있다. 알람은 운전자로부터 미리 정해진 입력을 수신하여야만 종료될 수 있다. 일 예로, 운전자는 후술할 웨어러블 키보드를 착용한 상태에서, 서버(300)는 미리 정해진 문자, 숫자 또는 이들의 조합을 웨어러블 키보드를 통하여 수신할 수 있다. 또한, 서버(300)는 미리 정해진 키보드 입력을 수신하고, 이 경우 서버(300)는 알람 해제 메시지를 생성하고 스피커(220)로 전달하여 알람을 해제할 수 있다. 이때, 미리 정해진 입력은 운전자가 운전 중에 입력할 수 있도록 간단한 문자, 숫자 또는 이들의 조합일 수 있다. 또한, 웨어러블 키보드를 통한 입력이 미리 정해진 박자에 맞춰 입력되고, 서버(300)는 해당 박자에 대한 데이터를 수신할 수 있다. 서버(300)는 박자에 대한 데이터가 미리 저장된 박자에 대한 데이터의 조건을 만족하면, 알람 해제 메시지를 생성할 수 있다.The server 300 may generate an alarm message for preventing the driver from drowsiness. The alarm message is transmitted to the driver through the speaker 220, and the driver can prevent drowsiness through the alarm. The alarm can be ended only after receiving a predetermined input from the driver. For example, in a state in which the driver wears a wearable keyboard, which will be described later, the server 300 may receive predetermined letters, numbers, or a combination thereof through the wearable keyboard. In addition, the server 300 receives a predetermined keyboard input, and in this case, the server 300 may generate an alarm cancellation message and transmit it to the speaker 220 to cancel the alarm. In this case, the predetermined input may be simple letters, numbers, or a combination thereof so that the driver can input while driving. Also, an input through the wearable keyboard is input according to a predetermined beat, and the server 300 may receive data on the corresponding beat. The server 300 may generate an alarm release message when the data for the beat satisfies the condition of the data for the beat stored in advance.

이처럼, 본 발명은 후술할 웨어러블 키보드(100)를 운전자가 착용한 후, 이를 통하여 일정한 피드백을 서버(300)로 전송함으로써 운전자가 졸음에서 보다 효율적으로 깰 수 있는 효과를 가질 수 있다. 또한, 운전자는 웨어러블 키보드(100)를 착용하고 자동차 핸들을 움켜쥘 수 있다. 따라서, 자동차 핸들을 움켜쥔 상태에서 웨어러블 키보드(100)를 움직여 입력이 가능할 수 있다. 이를 통하여 운전자의 졸음 방지와 동시에 안정적으로 차량 주행이 가능한 효과가 있다. As such, in the present invention, after the driver wears the wearable keyboard 100 , which will be described later, a constant feedback is transmitted to the server 300 through this, thereby enabling the driver to more efficiently wake up from drowsiness. Also, the driver may wear the wearable keyboard 100 and grip the steering wheel of the vehicle. Accordingly, input may be possible by moving the wearable keyboard 100 while holding the steering wheel of the vehicle. Through this, there is an effect of preventing the driver from drowsiness and at the same time stably driving the vehicle.

도 1에 따르면, 통신부(230)는, 이동 수단과 서버(300) 사이의 통신을 가능하게 하는 구성이다. 또한, 통신부(230)는 V2X 통신을 이용하여 콘텐츠 제공자와 통신할 수 있다. 따라서, 통신부(230)는 RSU(Road Side Unit)을 통하여 서버(300)와 통신할 수 있다. 무선 통신을 사용하는 통신부(230)의 경우, 내/외장 안테나와 접속되고, 안테나를 통해 휴대전화 통신방식에 의해 기지국과 정보의 송수신을 실행한다. 무선 통신을 사용하는 통신부(230)는 변조부, 복조부, 신호 처리부 등을 갖는 무선 통신부(미도시)을 포함한다.Referring to FIG. 1 , the communication unit 230 is configured to enable communication between the mobile means and the server 300 . In addition, the communication unit 230 may communicate with the content provider using V2X communication. Accordingly, the communication unit 230 may communicate with the server 300 through a Road Side Unit (RSU). In the case of the communication unit 230 using wireless communication, it is connected to an internal/external antenna, and transmits/receives information to and from the base station by the mobile phone communication method through the antenna. The communication unit 230 using wireless communication includes a wireless communication unit (not shown) having a modulator, a demodulator, a signal processing unit, and the like.

상기 무선 통신은 통신사들이 기존에 설치해둔 통신 시설과 그 주파수를 사용하는 무선 통신망을 사용한 통신을 말한다. 이때, CDMA(code division multiple access), FDMA(frequency division multiple access), TDMA(time division multiple access), OFDMA(orthogonal frequency division multiple access), SC-FDMA(single carrier frequency division multiple access) 등과 같은 다양한 무선 통신 시스템에 사용될 수 있으며, 뿐만 아니라, 3GPP(3rd generation partnership project) LTE(long term evolution)가 사용될 수 있다. 또한, 최근 상용화 중인 5G 통신을 주로 사용할 수 있으며, 추후 상용화가 예정되어 있는 6G 등도 사용될 수 있다. 다만, 본 발명은 이와 같은 무선 통신 방식에 구애됨이 없이 기설치된 통신망을 활용할 수 있다. 또한, 통신부(230)는 이동 수단 내 와이파이(Wi-Fi), 블루투스(Bluetooth) 등 무선 통신 기능을 지원할 수도 있다.The wireless communication refers to communication using a communication facility installed by telecommunication companies and a wireless communication network using the frequency. At this time, various radios such as code division multiple access (CDMA), frequency division multiple access (FDMA), time division multiple access (TDMA), orthogonal frequency division multiple access (OFDMA), single carrier frequency division multiple access (SC-FDMA), etc. It may be used in a communication system, as well as 3rd generation partnership project (3GPP) long term evolution (LTE) may be used. In addition, 5G communication, which is currently commercialized, can be mainly used, and 6G, which is scheduled to be commercialized in the future, may also be used. However, the present invention can utilize an existing communication network without being limited by such a wireless communication method. In addition, the communication unit 230 may support wireless communication functions such as Wi-Fi and Bluetooth in the mobile means.

또한, 본 발명에 따른 차량(200)은 컴퓨팅 장치(미도시)를 더 포함할 수 있다. 컴퓨팅 장치(미도시)는 서버(300)와의 통신에 필요한 연산을 수행하고 영상 획득부(210), 스피커(220) 및 입력 장치(100) 등을 제어할 수 있는 구성이다. 또한, 컴퓨팅 장치(미도시)는 높은 연산 능력이 필요하지 않으므로 라즈베리파이 등의 소형 컴퓨팅 장치로 구현 가능하다. In addition, the vehicle 200 according to the present invention may further include a computing device (not shown). The computing device (not shown) is configured to perform calculations necessary for communication with the server 300 and to control the image acquisition unit 210 , the speaker 220 , the input device 100 , and the like. In addition, since the computing device (not shown) does not require high computational power, it can be implemented as a small computing device such as a Raspberry Pi.

도 3은 본 발명에 따른 서버를 나타낸 도면이다. 3 is a diagram illustrating a server according to the present invention.

도 3에 따르면, 본 발명에 따른 서버(300)는 프로세서(301), 통신부(230) 및 메모리(303)를 포함할 수 있다. 프로세서(301)는 운전자에 대한 정보를 학습하고 운전자의 졸음 상태에 대한 정보를 획득하는 주체일 수 있다. Referring to FIG. 3 , the server 300 according to the present invention may include a processor 301 , a communication unit 230 , and a memory 303 . The processor 301 may be a subject that learns information about the driver and obtains information about the driver's drowsy state.

프로세서(301)는, 연산을 수행하고 이동 수단을 제어할 수 있는 구성이다. 주로, 중앙 연산 장치(CPU), 어플리케이션 프로세서(AP), 그래픽스 처리 장치(GPU) 등을 의미할 수 있다. 또한, CPU, AP 또는 GPU는 그 내부에 하나 또는 그 이상의 코어들을 포함할 수 있으며, CPU, AP 또는 GPU는 작동 전압과 클락 신호를 이용하여 작동할 수 있다. 다만, CPU 또는 AP는 직렬 처리에 최적화된 몇 개의 코어로 구성된 반면, GPU는 병렬 처리용으로 설계된 수 천 개의 보다 소형이고 효율적인 코어로 구성될 수 있다.The processor 301 is a configuration capable of performing calculations and controlling the moving means. Mainly, it may mean a central processing unit (CPU), an application processor (AP), a graphics processing unit (GPU), or the like. In addition, the CPU, AP, or GPU may include one or more cores therein, and the CPU, AP, or GPU may operate using an operating voltage and a clock signal. However, a CPU or AP may consist of a few cores optimized for serial processing, whereas a GPU may consist of thousands of smaller and more efficient cores designed for parallel processing.

메모리(303)는 이동 수단의 다양한 기능을 지원하는 데이터를 저장한다. 메모리(303)는 이동 수단에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application), 이동 수단의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 이러한 응용 프로그램 중 적어도 일부는, 무선 통신을 통해 외부 서버(300)로부터 다운로드 될 수 있다. The memory 303 stores data supporting various functions of the transportation means. The memory 303 may store a plurality of application programs or applications driven in the mobile means, data for operation of the mobile means, and commands. At least some of these application programs may be performed through wireless communication. It may be downloaded from the external server 300 .

메모리(303)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), SSD 타입(Solid State Disk type), SDD 타입(Silicon Disk Drive type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(random access memory; RAM), SRAM(static random access memory), 롬(read-only memory; ROM), EEPROM(electrically erasable programmable read-only memory), PROM(programmable read-only memory), 자기 메모리, 자기 디스크 및 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 메모리(303)는 인터넷(internet)상에서 저장 기능을 수행하는 웹 스토리지(web storage)를 포함할 수도 있다.The memory 303 includes a flash memory type, a hard disk type, a solid state disk type, a silicon disk drive type, and a multimedia card micro type. ), card-type memory (such as SD or XD memory), random access memory (RAM), static random access memory (SRAM), read-only memory (ROM), electrically erasable programmable read (EEPROM) -only memory), a programmable read-only memory (PROM), a magnetic memory, a magnetic disk, and an optical disk may include at least one type of storage medium. Also, the memory 303 may include a web storage that performs a storage function on the Internet.

통신 모듈(302)은 송수신기로서, 차량(200)의 통신부(230)와 통신할 수 있는 구성일 수 있다. 통신 모듈(302)에 대한 상세한 설명은 통신부(230)에 대한 설명과 동일하거나 중복되므로 생략한다. The communication module 302 is a transceiver, and may be configured to communicate with the communication unit 230 of the vehicle 200 . A detailed description of the communication module 302 will be omitted because it is the same as or overlapping with the description of the communication unit 230 .

도 4는 본 발명의 입력 장치인 웨어러블 키보드의 동작을 개략적으로 설명하기 위한 도면이다.4 is a diagram schematically illustrating an operation of a wearable keyboard, which is an input device according to the present invention.

일 개시에 의하여 웨어러블 키보드(100)는 한 쌍의 장갑 형태로 제작될 수 있다. 일 개시에 의하여 웨어러블 키보드(100)는 사용자가 손에 착용함으로써 입력을 수행하는 장치로서, 특히, 자판이 없는 키보드를 의미한다. 일 개시에 의하여 웨어러블 키보드(100)는 사용자의 손 동작을 센서를 통해 인식하고, 손 동작이 의미하는 문자를 인식한 출력값을 무선 통신 모듈(302)을 이용하여 외부 장치(600)로 전송할 수 있다.According to one disclosure, the wearable keyboard 100 may be manufactured in the form of a pair of gloves. According to one disclosure, the wearable keyboard 100 is a device for performing input by being worn on the user's hand, and in particular, refers to a keyboard without a keyboard. According to one disclosure, the wearable keyboard 100 may recognize a user's hand motion through a sensor and transmit an output value of recognizing a character meaning a hand motion to the external device 600 using the wireless communication module 302 . .

일 개시에 의하여, 웨어러블 키보드(100)는 감압 센서(101)로부터 획득한 제 1 센싱 데이터로부터 가상 쿼티 키보드를 입력하는 입력신호를 판단하고, 플렉스 센서(111)로부터 획득한 제 2 센싱 데이터로부터 가상 쿼티 키보드에서 입력신호가 검출된 위치를 판단하고, 자이로센서(103)로부터 획득한 제 3 센싱 데이터로부터 검지 손가락으로부터 입력된 입력신호의 위치를 판단한 결과에 기초하여 출력신호를 생성하고, 통신 모듈(302)을 통해 출력신호를 외부 장치로 전송할 수 있다.According to one disclosure, the wearable keyboard 100 determines an input signal for inputting the virtual QWERTY keyboard from the first sensing data obtained from the pressure-sensitive sensor 101 , and virtual from the second sensing data obtained from the flex sensor 111 . Determine the position at which the input signal is detected in the QWERTY keyboard, and generate an output signal based on the result of determining the position of the input signal input from the index finger from the third sensing data obtained from the gyro sensor 103, and the communication module ( 302), the output signal can be transmitted to an external device.

일 개시에 의하여 외부 장치(600)는 통신모듈을 통해 외부로부터 입력받은 데이터를 표시할 수 있는 디스플레이를 포함한 것으로서, 노트북 PC, 데스크탑 PC, MP3 플레이어, PMP(Portable MultimediaPlayer), PDA(Personal Digital Assistant), 태블릿 PC, 휴대폰, 스마트 폰(Smart Phone) 등과 같은 모든 정보통신 기기 및 멀티미디어 기기와 그에 대한 응용에도 적용될 수 있음은 자명하다.According to one disclosure, the external device 600 includes a display capable of displaying data input from the outside through a communication module, and includes a notebook PC, a desktop PC, an MP3 player, a Portable Multimedia Player (PMP), and a Personal Digital Assistant (PDA). , it is obvious that it can be applied to all information and communication devices and multimedia devices such as tablet PCs, mobile phones, smart phones, etc. and their applications.

일 개시에 의하여, 웨어러블 키보드(100)와 외부 장치(600)는 누가 호스트 또는 액세스 포인트 역할을 하느냐에 따라, 마스터 단말기와 슬레이브 단말기로 구분될 수 있다. 다시 말해, 페어링을 위해 식별자 즉, SSID(Service Set Identifier)를 생성하고 페어링을 수락하는 단말기가 마스터가 되고, 이러한 마스터 단말기에게 페어링을 요청하는 단말기가 슬레이브가 된다. 또한, 본 발명에서 단말기는 마스터가 될 수도 있고 슬레이브가 될 수도 있다. 또한, 본 발명에서 단말기는 이러한 페어링 기능을 수행하는 어플리케이션을 온라인 마켓에서 다운로드하여 설치할 수 있다. 또한, 본 발명에서 단말기는 클라우드 컴퓨팅(Cloud Computing) 서비스를 제공하는 클라우드 서버로부터 어플리케이션을 제공받아 이용할 수 있다. According to one disclosure, the wearable keyboard 100 and the external device 600 may be divided into a master terminal and a slave terminal according to who serves as a host or an access point. In other words, a terminal that generates an identifier, that is, an SSID (Service Set Identifier) for pairing and accepts pairing becomes a master, and a terminal that requests pairing from such a master terminal becomes a slave. Also, in the present invention, a terminal may be a master or a slave. In addition, in the present invention, the terminal may download and install an application for performing such a pairing function from an online market. In addition, in the present invention, the terminal may receive and use an application from a cloud server that provides a cloud computing service.

일 개시에 의하여, 웨어러블 키보드(100)는 적어도 세 종류 이상의 센서를 이용하여 사용자의 손동작을 인식할 수 있다. 보다 구체적으로 웨어러블 키보드(100)는 감압 센서(101), 플렉스센서(111) 및 자이로센서(103)를 이용하여 사용자의 손동작을 인식하고 인식한 손동작으로부터 사용자가 입력하고자한 문자 등을 출력값으로서 외부 장치(600)로 전송할 수 있다.According to one disclosure, the wearable keyboard 100 may recognize a user's hand gesture using at least three types of sensors. More specifically, the wearable keyboard 100 uses the pressure sensor 101, the flex sensor 111, and the gyro sensor 103 to recognize the user's hand gesture, and from the recognized hand gesture, the user wants to input the character, etc. as an output value. may be transmitted to device 600 .

일 개시에 의하여 감압 센서(101)는 사용자의 모든 손가락 말단부 위치에 대응하도록 설치될 수 있으며, 사용자가 가상 키보드를 입력하는지 여부를 판단할 수 있다. 웨어러블 키보드(100)는 기 정해진 임계값 이상의 압력이 입력되는 경우, 사용자가 가상 키보드를 입력하였다고 판단하고, 사용자에 의하여 입력된 신호를 입력신호로 결정할 수 있다.According to one disclosure, the pressure-sensitive sensor 101 may be installed to correspond to the positions of all finger tips of the user, and may determine whether the user inputs the virtual keyboard. When a pressure greater than or equal to a predetermined threshold is input, the wearable keyboard 100 may determine that the user has inputted the virtual keyboard, and may determine the signal input by the user as the input signal.

일 개시에 의하여 플렉스센서(111)는 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치될 수 있다. 일 개시에 의하여, 플렉스센서(111)는 사용자 손가락의 구부름 정도를 측정하기 위하여 사용자의 손가락의 구부림 정도에 따라 변화되는 저항값으로부터 손가락의 구부림 정보를 측정할 수 있다. 플렉스 센서(111)는 플렉서블(flexible)소자로 이루어질 수 있으며, 헤드 소켓의 단자에 탈착 가능하게 부착되는 구부림 저항 측정 소자를 포함할 수 있다. 이러한 따라서, 플렉스센서(111)는 장갑형태의 웨어러블 키보드(100)에서 용이하게 교체가능하다. According to one disclosure, the flex sensor 111 may be installed so as to correspond to the first joint to the third joint of the user's finger. According to one disclosure, the flex sensor 111 may measure the bending information of the finger from a resistance value that is changed according to the bending degree of the user's finger in order to measure the bending degree of the user's finger. The flex sensor 111 may be made of a flexible element, and may include a bending resistance measuring element detachably attached to the terminal of the head socket. Accordingly, the flex sensor 111 is easily replaceable in the glove-type wearable keyboard 100 .

일 개시에 의하여 자이로센서(103)는 사용자의 검지손가락에 대응되도록 설치될 수 있다. 자이로센서(103)는 일반적으로 키보드를 입력하는 범위가 가장 넓은 검지 손가락의 입력 위치를 정확하게 판단하기 위하여 사용된다. 보다 상세하게는, 웨어러블 키보드(100)는 자이로센서(103)의 센싱 신호로부터, 검지 손가락의 좌우(x축) 위치를 판단함으로써 출력값을 판단할 수 있다.According to one disclosure, the gyro sensor 103 may be installed to correspond to the user's index finger. The gyro sensor 103 is generally used to accurately determine the input position of the index finger, which has the widest keyboard input range. More specifically, the wearable keyboard 100 may determine the output value by determining the left and right (x-axis) positions of the index finger from the sensing signal of the gyro sensor 103 .

이하에서 보다 상세하게 설명하도록 한다.It will be described in more detail below.

도 5는 본 발명의 입력 장치(100)인 웨어러블 키보드에서 입력신호로부터 출력값을 판단하여 외부 장치로 전송하는 일련의 과정을 설명하기 위한 흐름도이다.5 is a flowchart for explaining a series of processes of determining an output value from an input signal in the wearable keyboard, which is the input device 100 of the present invention, and transmitting it to an external device.

일 개시에 의하여 가상 쿼티 키보드는, 실제 키보드나 아닌 웨어러블 키보드(100)의 손가락 각각에 설정된 키를 입력받을 수 있도록 하는 수단으로서, 사용자는 관성에 따라 손가락의 입력을 통하여 가상 쿼티 키보드를 입력할 수 있다.According to one disclosure, the virtual QWERTY keyboard is a means for receiving a key set for each finger of the wearable keyboard 100 rather than the actual keyboard, and the user can input the virtual QWERTY keyboard through a finger input according to inertia. have.

일 개시에 의하여, 블록 201에서 웨어러블 키보드(100)는 감압 센서로부터 획득한 제 1 센싱 데이터가 임계값 이상에 해당하는지 여부를 판단할 수 있다. 일 개시에 의하여, 제 1 센싱 데이터는 웨어러블 키보드(100)에서 감압 센서를 통해 인식한 압력신호를 나타낸다. 예를 들어, 사용자가 웨어러블 키보드(100)를 장착한 상태에서 평평한 바닥면에 압력을 가하는 경우, 감압 센서에서 가해진 압력의 크기가 임계값 이상에 해당하는 경우, 상기 입력값을 제 1 센싱 데이터로 결정할 수 있다. 일 개시에 의하여, 웨어러블 키보드(100)는 제 1 센싱 데이터의 값이 임계값 이하에 해당하는 경우, 키보드를 입력하기 위한 데이터가 아닌 에러값으로 판단함으로써 불필요한 입력을 분석하기 위한 에너지를 줄일 수 있다.According to one disclosure, in block 201 , the wearable keyboard 100 may determine whether the first sensing data obtained from the pressure-sensitive sensor corresponds to a threshold value or more. According to one disclosure, the first sensed data represents a pressure signal recognized by the wearable keyboard 100 through a pressure sensor. For example, when a user applies pressure to a flat bottom surface while wearing the wearable keyboard 100, when the pressure applied by the pressure sensor corresponds to a threshold value or more, the input value is converted to the first sensing data can decide According to one disclosure, when the value of the first sensing data is less than or equal to the threshold value, the wearable keyboard 100 may reduce energy for analyzing unnecessary input by determining it as an error value rather than data for inputting the keyboard. .

일 개시에 의하여, 웨어러블 키보드(100)는 감압 센서로부터 입력받은 압력을 소정의 임계값과 비교하고, 그 비교 결과에 따라 상기 입력 레벨을 선택하여 인식할 수 있다. 일 개시에 의한 임계값은 사용자에 의하여 미리 설정된 값일 수 있다. 또한, 일 개시에 의한 임계값은 사용자의 프로파일에 기초하여 사용자 맞춤형으로 설정된 압력값일 수 있다.According to one disclosure, the wearable keyboard 100 may compare the pressure input from the pressure sensor with a predetermined threshold, and select and recognize the input level according to the comparison result. The threshold value by one start may be a value preset by the user. In addition, the threshold value according to the initiation may be a pressure value customized to the user based on the user's profile.

일 개시에 의하여, 웨어러블 키보드(100)는 임계값 이상의 압력이 입력되기 시작한 시점을 특정 시점으로 설정되거나 또는 특정 시간 구간으로 설정할 수 있으며, 인식 시간에 입력된 상기 압력에 따라 상기 입력 레벨을 선택하는 것을 특징으로 할 수 있다. 여기서 인식 시간은 감압 센서로부터 소정의 크기 이상의 압력이 입력되기 시작한 시점을 기준으로 하여 50ms 내지 150ms의 시간으로 설정되는 것을 특징으로 할 수 있다.According to one disclosure, the wearable keyboard 100 may set a time point at which a pressure greater than a threshold value is inputted as a specific time point or a specific time period, and selects the input level according to the pressure input at a recognition time. can be characterized as Here, the recognition time may be set to a time of 50 ms to 150 ms based on a point in time when a pressure equal to or greater than a predetermined level is input from the pressure-sensitive sensor.

일 개시에 의하여, 블록 202에서 웨어러블 키보드(100)는 플렉스 센서로부터 획득한 제 2 센싱 데이터로부터 입력신호의 y축 위치를 결정할 수 있다. 일 개시에 의하여, 웨어러블 키보드(100)는 제 1 센싱 데이터를 획득한 소정 손가락을 기준으로, 소정 손가락에 미리 설정된 예비 출력값을 결정할 수 있다.According to one disclosure, in block 202, the wearable keyboard 100 may determine the y-axis position of the input signal from the second sensing data obtained from the flex sensor. According to one disclosure, the wearable keyboard 100 may determine a preliminary output value preset to the predetermined finger based on the predetermined finger that has acquired the first sensing data.

일 개시에 의하여 예비 출력값은 미리 결정된 가상 쿼티 키보드 한줄 당 하나의 자판키를 나타낸다. 예를 들어, 영문 가상 쿼티 키보드 자판을 기준으로 왼쪽 약지 손가락은 W. S. X가 할당될 수 있으며, 왼쪽 중지 손가락은 E, D, C가 할당될 수 있다. 그러나, 검지 손가락의 경우 가상 쿼티 키보드 한줄당 두개의 자판키를 할당받을 수 있다. 예를 들어, 영문 가상 쿼티 키보드 자판을 기준으로 오른손 검지손가락은 Y, U, H, J, N, M이 할당될 수 있으며, 왼손 검지손가락은 T, R, G, F, B, V가 할당될 수 있다. According to one disclosure, the preliminary output value indicates one keyboard key per line of a predetermined virtual QWERTY keyboard. For example, based on the English virtual QWERTY keyboard keyboard, W. S. X may be assigned to the left ring finger, and E, D, and C may be assigned to the left middle finger. However, in the case of the index finger, two keyboard keys may be assigned to each line of the virtual QWERTY keyboard. For example, Y, U, H, J, N, M may be assigned to the index finger of the right hand based on the English virtual QWERTY keyboard keyboard, and T, R, G, F, B, V may be assigned to the index finger of the left hand. can be

일 개시에 의하여, 웨어러블 키보드(100)는 제 2 센싱 데이터로부터 입력신호가 검출된 손가락의 y축 위치를 결정함으로써, 사용자가 입력한 신호가 어떤 출력값인지 결정할 수 있다. 이때, 웨어러블 키보드(100)는 외부 장치(600)와 페어링을 시작한 후 문자를 입력하기 전에 y축 위치를 결정하기 위한 기준점을 정할 수 있다. 예를 들어, 웨어러블 키보드(100)는 외부 장치(600)로부터 문자 입력 시작을 요청하는 메시지를 수신할 수 있으며, y축의 기준점 설정을 요청하는 메시지를 수신함에 따라 기준점을 설정할 수 있다. 또한, 다른 실시예에 의하여 웨어러블 키보드(100)는 키보드 입력을 위한 애플리케이션을 통하여 기준점을 설정할 수 있다. y축 기준점을 설정하는 방식은 제한되지 않는다.According to one disclosure, the wearable keyboard 100 may determine the output value of the signal input by the user by determining the y-axis position of the finger at which the input signal is detected from the second sensing data. In this case, the wearable keyboard 100 may determine a reference point for determining a y-axis position before inputting a character after starting pairing with the external device 600 . For example, the wearable keyboard 100 may receive a message requesting to start inputting text from the external device 600 , and may set a reference point according to receiving a message requesting to set a reference point on the y-axis. Also, according to another embodiment, the wearable keyboard 100 may set a reference point through an application for keyboard input. The method of setting the y-axis reference point is not limited.

일 개시에 의하여, 블록 203에서 웨어러블 키보드(100)는 입력 신호가 검지손가락으로부터 획득한 신호인지 여부를 판단할 수 있다. 입력 신호가 검지손가락인 경우, 같은 y축 위치에서 2개의 예비 출력값을 갖기 때문에, 정확한 위치 판단을 위한 추가적인 과정이 필요하다.According to one disclosure, in block 203 , the wearable keyboard 100 may determine whether the input signal is a signal obtained from the index finger. When the input signal is the index finger, since it has two preliminary output values at the same y-axis position, an additional process for accurate position determination is required.

일 개시에 의하여, 블록 204에서 웨어러블 키보드(100)는 입력 신호가 검지손가락에서 입력된 신호로 판단된 경우, 제 3 센싱 데이터로부터 입력신호의 x축 위치를 결정할 수 있다. 일 개시에 의한 웨어러블 키보드(100)는 x축 위치를 결정하기 위한 기준점을 미리 설정할 수 있다. 일 개시에 의한 웨어러블 키보드(100)는 외부 장치와 연결된 이후 소정의 시점에서 입력신호의 좌우 위치를 결정하기 위한 기준점을 설정할 수 있다. 웨어러블 키보드(100)는 자이로센서에서 센싱된 신호를 이용하여 기준점으로부터 좌측에서 검출된 신호인지, 우측에서 검출된 신호인지 판단할 수 있다. 예를 들어, 오른쪽 검지 손가락에서 획득한 입력신호의 y축 위치가 가장 상단부인 경우 예비 출력값은 Y, U 이며, 기준점을 기준으로 우측값으로 판단된경우 최종 출력값은 U이다.According to one disclosure, in block 204 , when it is determined that the input signal is an input signal from the index finger, the wearable keyboard 100 may determine the x-axis position of the input signal from the third sensing data. According to one disclosure, the wearable keyboard 100 may preset a reference point for determining an x-axis position. According to one disclosure, the wearable keyboard 100 may set a reference point for determining the left and right positions of the input signal at a predetermined point in time after being connected to an external device. The wearable keyboard 100 may determine whether the signal is detected from the left side or the right side from the reference point using the signal sensed by the gyro sensor. For example, when the y-axis position of the input signal acquired from the right index finger is the uppermost part, the preliminary output values are Y and U, and when it is determined as the right value based on the reference point, the final output value is U.

일 개시에 의하여, 블록 205에서 웨어러블 키보드(100)는 입력신호의 위치 정보로부터 출력값을 결정할 수 있다. 웨어러블 키보드(100)는 입력신호의 위치 정보를 조합함으로써 최종적인 출력값을 결정할 수 있다. 예를 들어, 입력신호가 복수개로 입력되는 경우, 복수개의 입력신호를 조합한 값을 출력값으로서 외부 장치로 전송할 수 있다.According to one disclosure, in block 205 , the wearable keyboard 100 may determine an output value from location information of an input signal. The wearable keyboard 100 may determine the final output value by combining the position information of the input signal. For example, when a plurality of input signals are input, a value obtained by combining the plurality of input signals may be transmitted to an external device as an output value.

일 개시에 의하여, 블록 206에서 웨어러블 키보드(100)는 통신 모듈(114)을 이용하여 출력 값을 위부 장치로 전송할 수 있다. 일 개시에 의하여 통신 모듈(114)은 무선 또는 유선 통신이 가능한 모듈을 포함할 수 있다. 보다 구체적으로, 통신 모듈(114)은 근거리 무선 통신 모듈(114)을 포함할 수 있으며, 예를 들어, 근거리 무선 통신 방식에는 NFC 방식, 블루투스, 와이파이, 지그비, 바코드 인식 방식, QR 코드 인식 방식 등과 같은 다양한 방식이 있을 수 있다.According to one disclosure, in block 206 , the wearable keyboard 100 may transmit an output value to the upper device using the communication module 114 . According to one disclosure, the communication module 114 may include a module capable of wireless or wired communication. More specifically, the communication module 114 may include a short-range wireless communication module 114, for example, the short-range wireless communication method includes NFC method, Bluetooth, Wi-Fi, Zigbee, barcode recognition method, QR code recognition method, etc. There may be many different ways of doing the same.

도 6은 본 발명의 입력 장치인 웨어러블 키보드의 상세 구성을 설명하기 위한 도면이다.6 is a view for explaining a detailed configuration of a wearable keyboard, which is an input device of the present invention.

일 개시에 의하여 웨어러블 키보드(100)는 장갑형태로 제작되어 사용자의 손에 장착될 수 있다. 또한, 웨어러블 키보드는 폴리아미드 수지 조성물로 이루어질 수 있다.According to one disclosure, the wearable keyboard 100 may be manufactured in the form of a glove and mounted on the user's hand. In addition, the wearable keyboard may be made of a polyamide resin composition.

바람직하게는, 여기서, 웨어러폴리아미드 수지 조성물은, 식물성 오일과 알코올을 반응시켜 제조되며, 화학식 1에 의하여 표시되는 에폭시계 에스테르 화합물 15 내지 25 중량%, 프탈레이트계 에스테르 화합물, 테레프탈레이트계 에스테르 화합물, 프탈레이트계 및 테레프탈레이트계 에스테르 혼합물 및 트리멜리테이트계 에스테르 화합물로 이루어진 군에서 선택된 적어도 하나의 에스테르 화합물 20 내지 25 중량%, 고밀도 폴리에틸렌(HDPE), 저밀도 폴리에틸렌(LDPE), 폴리프로필렌(PP), 에틸렌-프로필렌 공중합체(EPM), 에틸렌-프로필렌-디엔 공중합체(EPDM), 에틸렌-부텐 공중합체, 에틸렌-옥텐 공중합체, 에틸렌-부타디엔 공중합체 중에서 선택된 1종 이상의 올레핀계 고무 중합체 5 내지 10% 중량%, 상대점도(25℃)가 2.0 내지 2.8cP이고, 수평균분자량이 20,000 내지 200,000g/mol인 폴리 아미드 30 내지 50 중량%, 공액 디엔 고무, 방향족 비닐 화합물 및 비닐시안 화합물을 포함하는 비닐 방향족 화합물-비닐시안 화합물 공중합체 5 내지 15 중량%를 포함하는 폴리아미드 수지 조성물로 이루어진 것을 특징으로 한다.Preferably, here, the wearer polyamide resin composition is prepared by reacting vegetable oil with alcohol, and 15 to 25 wt% of an epoxy-based ester compound represented by Formula 1, a phthalate-based ester compound, and a terephthalate-based ester compound , 20 to 25% by weight of at least one ester compound selected from the group consisting of phthalate-based and terephthalate-based ester mixtures and trimellitate-based ester compounds, high-density polyethylene (HDPE), low-density polyethylene (LDPE), polypropylene (PP), At least one olefinic rubber polymer selected from ethylene-propylene copolymer (EPM), ethylene-propylene-diene copolymer (EPDM), ethylene-butene copolymer, ethylene-octene copolymer, and ethylene-butadiene copolymer 5 to 10% Vinyl containing 30 to 50 wt% of polyamide having a weight %, relative viscosity (25°C) of 2.0 to 2.8 cP and a number average molecular weight of 20,000 to 200,000 g/mol, conjugated diene rubber, aromatic vinyl compound and vinyl cyanide compound It is characterized in that it consists of a polyamide resin composition comprising 5 to 15 wt% of an aromatic compound-vinyl cyan compound copolymer.

[화학식 1][Formula 1]

Figure 112020127619912-pat00001
Figure 112020127619912-pat00001

(상기 R4는 (C8-C20)에폭시알킬이고, R5는 (C1-C10)알킬 또는

Figure 112020127619912-pat00002
이고, 상기 Rx 및 Ry는 각각 독립적으로 수소, (C1-C5)알킬 또는
Figure 112020127619912-pat00003
이며, 상기 알킬은 (C1-C5)알킬 또는
Figure 112020127619912-pat00004
이 더 치환될 수 있고, 상기 R41 및 R42는 각각 독립적으로 (C8-C20)에폭시알킬이며, 상기 n은 1 내지 3에서 선택되는 정수임).(Wherein R4 is (C8-C20) epoxyalkyl, R5 is (C1-C10) alkyl or
Figure 112020127619912-pat00002
and R x and R y are each independently hydrogen, (C1-C5)alkyl or
Figure 112020127619912-pat00003
and wherein the alkyl is (C1-C5)alkyl or
Figure 112020127619912-pat00004
may be further substituted, wherein R 41 and R 42 are each independently (C8-C20)epoxyalkyl, and n is an integer selected from 1 to 3).

또한, 상기 웨어러블 키보드는, 상기 사용자 손가락의 동작으로 인해 발생하는 입력신호의 인식률을 높이기 위하여 코팅층을 포함할 수 있다.In addition, the wearable keyboard may include a coating layer in order to increase the recognition rate of the input signal generated due to the operation of the user's finger.

상기 코팅층은 보다 구체적으로 대전방지층으로, 정전기 발생을 방지하여, 먼지의 부착을 방지할 수 있고, 먼지와 같은 불순물을 방지하여, 입력신호의 인식률을 높일 수 있다. 또한, 폴리아미드 수지 조성물과의 접착력이 우수하여 코팅층의 부착력이 우수하다.The coating layer is more specifically an antistatic layer, it is possible to prevent the generation of static electricity to prevent the adhesion of dust, and to prevent impurities such as dust, it is possible to increase the recognition rate of the input signal. In addition, the adhesion to the polyamide resin composition is excellent, and thus the adhesion of the coating layer is excellent.

바람직하게는, 상기 대전방지층은 하기 화학식 2로 표시되는 폴리실록산; 전도성 필러 및 그라파이트를 포함할 수 있다:Preferably, the antistatic layer is polysiloxane represented by the following formula (2); Conductive fillers and graphite may include:

[화학식 2][Formula 2]

Figure 112020127619912-pat00005
Figure 112020127619912-pat00005

여기서,here,

m은 1 내지 100의 정수이며,m is an integer from 1 to 100,

p는 3 내지 10의 정수이며,p is an integer from 3 to 10,

R1 내지 R3는 서로 동일하거나 상이하며, 각각 독립적으로 수소, 중수소, 히드록시기, 치환 또는 비치환된 탄소수 1 내지 30의 알킬기, 치환 또는 비치환된 탄소수 6 내지 30의 아릴기로 이루어진 군으로부터 선택되며,R 1 to R 3 are the same as or different from each other, and each independently selected from the group consisting of hydrogen, deuterium, a hydroxy group, a substituted or unsubstituted C 1 to C 30 alkyl group, or a substituted or unsubstituted C 6 to C 30 aryl group, ,

바람직하게는, 상기 치한된 알킬렌기, 치환된 아릴렌기, 치환된 알킬기 및 치환된 아릴기는 수소, 중수소, 시아노기, 니트로기, 할로겐기, 히드록시기, 탄소수 1 내지 30의 알킬기, 탄소수 1 내지 20개의 시클로알킬기, 탄소수 2 내지 30의 알케닐기, 탄소수 2 내지 24의 알키닐기, 탄소수 7 내지 30의 아르알킬기, 탄소수 6 내지 30의 아릴기, 핵원자수 5 내지 60의 헤테로아릴기, 탄소수 6 내지 30의 헤테로아릴알킬기, 탄소수 1 내지 30의 알콕시기, 탄소수 1 내지 30의 알킬아미노기, 탄소수 6 내지 30의 아릴아미노기, 탄소수 6 내지 30의 아르알킬아미노기, 탄소수 2 내지 24의 헤테로 아릴아미노기, 탄소수 1 내지 30의 알킬실릴기, 탄소수 6 내지 30의 아릴실릴기 및 탄소수 6 내지 30의 아릴옥시기로 이루어진 군으로부터 선택된 1종 이상의 치환기로 치환되며, 복수 개의 치환기로 치환되는 경우 이들은 서로 동일하거나 상이하다. Preferably, the substituted alkylene group, substituted arylene group, substituted alkyl group and substituted aryl group are hydrogen, deuterium, cyano group, nitro group, halogen group, hydroxyl group, alkyl group having 1 to 30 carbon atoms, alkyl group having 1 to 20 carbon atoms A cycloalkyl group, an alkenyl group having 2 to 30 carbon atoms, an alkynyl group having 2 to 24 carbon atoms, an aralkyl group having 7 to 30 carbon atoms, an aryl group having 6 to 30 carbon atoms, a heteroaryl group having 5 to 60 nuclear atoms, 6 to 30 carbon atoms of a heteroarylalkyl group, an alkoxy group having 1 to 30 carbon atoms, an alkylamino group having 1 to 30 carbon atoms, an arylamino group having 6 to 30 carbon atoms, an aralkylamino group having 6 to 30 carbon atoms, a heteroarylamino group having 2 to 24 carbon atoms, 1 to carbon atoms It is substituted with one or more substituents selected from the group consisting of a 30 alkylsilyl group, an arylsilyl group having 6 to 30 carbon atoms and an aryloxy group having 6 to 30 carbon atoms, and when substituted with a plurality of substituents, they are the same or different from each other.

보다 바림직하게는 상기 화학식 2로 표시되는 화합물은 하기 화학식 3으로 표시되는 화합물일 수 있다.More preferably, the compound represented by Formula 2 may be a compound represented by Formula 3 below.

[화학식 3][Formula 3]

Figure 112020127619912-pat00006
Figure 112020127619912-pat00006

여기서, m 및 p는 상기 화학식 2에서 정의한 바와 같다.Here, m and p are as defined in Formula 2 above.

바람직하게는, 상기 전도성 필러는 실리카, 알루미나 및 이들의 혼합물로 이루어진 군으로부터 선택될 수 있으나 바람직하게는 알루미나지만 상기 예시에 국한되지 않는다. 상기 전도성 필러의 입자 직경은 30 내지 50㎛이지만, 상기 예시에 국한되지 않는다. 상기 전도성 필러는 전기 전도성을 나타낼 수 있다. Preferably, the conductive filler may be selected from the group consisting of silica, alumina and mixtures thereof, but preferably alumina, but not limited to the above example. The conductive filler has a particle diameter of 30 to 50 μm, but is not limited to the above example. The conductive filler may exhibit electrical conductivity.

상기 그라파이트는 소량 포함되어, 대전방지층 내의 대전 방지 효과를 지속적으로 유지시킬 수 있다. 그라파이트는 고가의 전도성 필러인 점을 고려할 때, 본 발명 내의 대전방지층에는 소량 포함되어, 지속적인 대전방지 효과를 유지할 수 있다. The graphite may be included in a small amount to continuously maintain the antistatic effect in the antistatic layer. Considering that graphite is an expensive conductive filler, it is included in a small amount in the antistatic layer in the present invention to maintain a continuous antistatic effect.

보다 구체적으로, 본 발명의 대전방지층은 상기 화학식 2로 표시되는 폴리실록산; 전도성 필러 및 그라파이트를 포함하여, 대전방지 효과를 나타낼 수 있다. 상기 폴리실록산은 친수성 부분과 소수성 부분으로 구별된다. 친수성 부분은 비공유 전자쌍을 포함하는 산소 원자에 의해, 물 분자와 수소 결합이 가능하다. 반면, 알킬기는 소수성기로 작용한다. 따라서, 친수성 부분이 대전방지층의 표면으로 위치하게 되고, 소수성 부분이 그 반대로 위치하게 되어, 반영구적인 대전방지 효과를 나타낼 수 있다. More specifically, the antistatic layer of the present invention may include polysiloxane represented by Formula 2; By including a conductive filler and graphite, it may exhibit an antistatic effect. The polysiloxane is divided into a hydrophilic portion and a hydrophobic portion. The hydrophilic moiety is capable of hydrogen bonding with a water molecule by an oxygen atom containing a lone pair of electrons. On the other hand, the alkyl group acts as a hydrophobic group. Accordingly, the hydrophilic part is positioned on the surface of the antistatic layer, and the hydrophobic part is positioned in the opposite direction, thereby exhibiting a semi-permanent antistatic effect.

상기 대전방지층을 형성하기 위한, 대전방지 조성물은 보다 구체적으로 상기 화학식 2로 표시되는 폴리실록산; 전도성 필러, 그라파이트 및 유기용매를 혼합하여 제조할 수 있다. For forming the antistatic layer, the antistatic composition is more specifically polysiloxane represented by the formula (2); It can be prepared by mixing a conductive filler, graphite, and an organic solvent.

상기 유기 용매는 에탄올, 메탄올, 부탄올, 헥세인, 프로페인, 톨루엔, 페놀 및 이들의 혼합물로 이루어진 군으로부터 선택될 수 있다. The organic solvent may be selected from the group consisting of ethanol, methanol, butanol, hexane, propane, toluene, phenol, and mixtures thereof.

바람직하게는, 상기 대전방지 조성물은 유기용매 100 중량부에 대하여, 상기 화학식 2로 표시되는 폴리실록산 40 내지 80 중량부, 전도성 필러 30 내지 50 중량부 및 그라파이트 5 내지 10 중량부를 포함할 수 있다. 상기 범위에 의하는 경우 각 구성 성분의 상호 작용에 의한 대전 방지 상승효과로 임계적 의의가 있는 정도의 상승효과가 발현되며, 상기 범위를 벗어나는 경우 상승효과가 급격히 저하되거나 거의 없게 된다.Preferably, the antistatic composition may include 40 to 80 parts by weight of the polysiloxane represented by Formula 2, 30 to 50 parts by weight of the conductive filler, and 5 to 10 parts by weight of graphite based on 100 parts by weight of the organic solvent. In the case of the above range, a synergistic effect of critical significance is expressed as an antistatic synergistic effect due to the interaction of each component, and when it is out of the above range, the synergistic effect is rapidly reduced or almost absent.

보다 바람직하게, 상기 대전방지 조성물의 점도는 1,200 내지 1,500cP이며, 상기 점도가 1,200cP 미만인 경우에는 일면에 코팅 시 흘러내려 대전방지층의 형성이 용이하지 않은 문제가 있고, 1,500cP를 초과하는 경우에는 균일한 대전방지층의 형성이 용이하지 않은 문제가 있다. More preferably, the viscosity of the antistatic composition is 1,200 to 1,500 cP, and when the viscosity is less than 1,200 cP, there is a problem that it is not easy to form an antistatic layer because it flows down during coating on one surface, and when it exceeds 1,500 cP There is a problem in that it is not easy to form a uniform antistatic layer.

[제조예: 코팅층의 제조][Preparation Example: Preparation of coating layer]

1. 코팅 조성물의 제조1. Preparation of coating composition

톨루엔 및 페놀을 1:1의 중량비로 혼합한 유기 용매에 하기 화학식 3으로 표시되는 폴리실록산, 전도성 필러 및 그라파이트를 혼합하여, 대전방지 조성물을 제조하였다:An antistatic composition was prepared by mixing polysiloxane represented by the following Chemical Formula 3, a conductive filler, and graphite in an organic solvent in which toluene and phenol were mixed in a weight ratio of 1:1:

[화학식 3][Formula 3]

Figure 112020127619912-pat00007
Figure 112020127619912-pat00007

여기서, m은 10 내지 30의 정수이며, p는 3 내지 5의 정수이다.Here, m is an integer from 10 to 30, and p is an integer from 3 to 5.

상기 대전방지 조성물의 보다 구체적인 조성은 하기 표 2와 같다. A more specific composition of the antistatic composition is shown in Table 2 below.

DY1DY1 DY2DY2 DY3DY3 DY4DY4 DY5DY5 DY6DY6 유기용매organic solvent 100100 100100 100100 100100 100100 100100 폴리실록산polysiloxane 2020 3030 4040 6060 8080 100100 알루미나alumina 1010 2020 3030 4040 5050 6060 그라파이트graphite 1One 33 55 77 1010 1515

(단위 중량부)상기 알루미나는 입자 직경이 30 내지 50㎛이다.(Parts by weight) The alumina has a particle diameter of 30 to 50 μm.

2. 보호층의 제조2. Preparation of protective layer

폴리아미드 수지를 이용하여 제조한 기재층의 일면에 상기 HS 1 내지 HS 6의 대전방지 조성물을 도포 후, 열 경화시켜 대전방지층을 형성하였다.An antistatic layer was formed by applying the antistatic composition of HS 1 to HS 6 on one surface of the base layer prepared using the polyamide resin, and then thermal curing.

[실험예: 대전방지 효과 실험][Experimental example: Antistatic effect test]

1. 점도 측정1. Viscosity Measurement

폴리아미드 기재층의 일면에 대전방지층을 형성하기 전에, 대전방지 조성물의 점도를 측정하였다. 점도 측정은 레오미터(Rheometer, Compac-100, Sun Sci. Co., Japan)를 이용하였다. 점도 측정 결과는 하기 표 3과 같다.Before forming the antistatic layer on one surface of the polyamide base layer, the viscosity of the antistatic composition was measured. Viscosity was measured using a rheometer (Rheometer, Compac-100, Sun Sci. Co., Japan). The viscosity measurement results are shown in Table 3 below.

DY1DY1 DY2DY2 DY3DY3 DY4DY4 DY5DY5 DY6DY6 점도(cP)Viscosity (cP) 620620 800800 10101010 14001400 19501950 24002400

2. 표면 전기 저항 측정2. Measurement of surface electrical resistance

폴리아미드 기재층의 일면에 DY 1 내지 DY 6의 대전방지층이 형성된 보호층에 대해, Resistance Meter SIMCO 저항기 ST-4(25℃, 상대습도 50%)를 이용하여 표면전기저항을 측정하였다. For the protective layer in which the antistatic layer of DY 1 to DY 6 was formed on one surface of the polyamide base layer, the surface electrical resistance was measured using a Resistance Meter SIMCO resistor ST-4 (25° C., 50% relative humidity).

비교예로, 대전방지층이 형성되지 않은 폴리아미드 기재층에 대한 표면전기저항도 함께 측정하였다.As a comparative example, the surface electrical resistance of the polyamide base layer on which the antistatic layer was not formed was also measured.

비교예comparative example DY1DY1 DY2DY2 DY3DY3 DY4DY4 DY5DY5 DY6DY6 표면전기저항
(Ω/cm2)
surface electrical resistance
(Ω/cm 2 )
7.4×1011 내지 1.6×1012 7.4×10 11 to 1.6×10 12 6.4×109 내지 1.4×1010 6.4×10 9 to 1.4×10 10 1.4×109 내지 1.6×1010 1.4×10 9 to 1.6×10 10 7.2×108 내지 6.1×109 7.2×10 8 to 6.1×10 9 4.4×107 내지 2.1×108 4.4×10 7 to 2.1×10 8 6.5×107 내지 4.5×108 6.5×10 7 to 4.5×10 8 5.8×108 내지 7.8×108 5.8×10 8 to 7.8×10 8

상기 표 4에 따르면, 대전방지층이 형성되지 않은 비교예에 비해, DY 1 내지 DY 6의 표면전기저항이 낮으므로, 전기전도도가 우수하여, 우수한 대전방지효과를 나타냄을 확인할 수 있다.According to Table 4, compared to the comparative example in which the antistatic layer is not formed, since the surface electrical resistance of DY 1 to DY 6 is low, the electrical conductivity is excellent, and it can be confirmed that an excellent antistatic effect is exhibited.

3. 표면 외관에 대한 평가3. Evaluation of surface appearance

대전방지 조성물의 점도 차이로 인해, 코팅층을 제조한 이후, 균일한 표면이 형성되었는지 여부에 대해 관능 평가를 진행하였다. 균일한 코팅층을 형성하였는지 여부에 대한 평가를 진행하였고, 하기와 같은 기준에 의해 평가를 진행하였다. Due to the difference in viscosity of the antistatic composition, after the coating layer was prepared, a sensory evaluation was performed on whether a uniform surface was formed. Whether or not a uniform coating layer was formed was evaluated, and evaluation was performed according to the following criteria.

○: 균일한 코팅층 형성○: uniform coating layer formation

×: 불균일한 코팅층의 형성×: Formation of a non-uniform coating layer

DY1DY1 DY2DY2 DY3DY3 DY4DY4 DY5DY5 DY6DY6 관능 평가sensory evaluation ×× ×× ××

코팅층을 형성할 때, 일정 점도 미만인 경우에는 폴리아미드의 표면에서 흐름이 발생하여, 균일한 코팅층의 형성이 어려운 경우가 다수 발생하였다. 이에 따라, 생산 수율이 낮아지는 문제가 발생할 수 있다. 또한, 점도가 너무 높은 경우에도, 조성물의 균일 도포가 어려워 균일한 코팅층의 형성이 불가하였다.When the coating layer is formed, if the viscosity is less than a certain level, flow occurs on the surface of the polyamide, and formation of a uniform coating layer is difficult in many cases. Accordingly, there may be a problem in that the production yield is lowered. In addition, even when the viscosity is too high, it is difficult to uniformly apply the composition to form a uniform coating layer.

일 개시에 의하여 웨어러블 키보드(100)는 사용자의 열 손가락 각각의 말단부에 대응되도록 설치된 10개의 감압 센서(101)를 포함할 수 있다. 일 개시에 의하여 10개의 감압 센서(101)는 손가락 각각에 대응하는 고유의 식별정보를 포함할 수 있다. 따라서, 웨어러블 키보드(100)는 임계값 이상의 압력이 센싱되는 경우, 신호가 센싱된 손가락을 판단함으로써 예비 출력값을 결정할 수 있다.According to one disclosure, the wearable keyboard 100 may include ten pressure-sensitive sensors 101 installed to correspond to the distal ends of each of the user's ten fingers. According to one disclosure, the ten pressure-sensitive sensors 101 may include unique identification information corresponding to each finger. Accordingly, when the pressure equal to or greater than the threshold value is sensed, the wearable keyboard 100 may determine the preliminary output value by determining the finger at which the signal is sensed.

일 개시에 의하여, 플렉스 센서(111)는 사용자 손가락의 구부러짐 정도를 측정하기 위하여 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치될 수 있다. 일 개시에 의하여 플렉스 센서(111)는 사용자 손가락의 움직임의 편의성을 위하여 플렉스 센서(111)의 양끝 부분과 중간 부분만 장갑에 부착될 수 있다. According to one disclosure, the flex sensor 111 may be installed to correspond to the first joint to the third joint of the user's finger in order to measure the degree of bending of the user's finger. According to one disclosure, the flex sensor 111 may be attached to the glove only at both ends and the middle portion of the flex sensor 111 for the convenience of movement of the user's finger.

일 개시에 의하여, 자이로센서(103)는 사용자의 양손 검지 손가락에 설치되어, 검지손가락이 입력된 x축 위치를 판단할 수 있다. 자이로센서(103)는 손의 방향 정보를 측정한다. 추가적으로, 웨어러블 키보드(100)는 가속도 정보를 측정하는 가속도 센서(acceleration sensor), 손의 회전 정보를 측정하는 자이로센서(gyro sensor) 및 지자기의 방향을 측정하는 지자기 센서를 포함할 수 있다. 자이로센서(103)의 측정값은 관성 측정 장치(IMU; Inertial Measurement Unit)로 제공될 수 있다. 관성 측정 장치는 이동 관성을 측정할 수 있는 가속도계와, 회전 관성을 측정할 수 있는 자이로계, 방위각을 측정할 수 있는 자계의 총 세 가지 센서로 이루어진 하나의 통합 유닛 형태로 제공될 수 있으며, 가속도계와 자이로계 및 자계에 대한 측정값을 이용하여 3축, 즉 피치(pitch), 롤(roll), 요(yaw)에 대한 회전 정보를 획득할 수 있다. According to one disclosure, the gyro sensor 103 may be installed on the index finger of both hands of the user to determine the x-axis position to which the index finger is input. The gyro sensor 103 measures the direction information of the hand. Additionally, the wearable keyboard 100 may include an acceleration sensor for measuring acceleration information, a gyro sensor for measuring rotation information of the hand, and a geomagnetic sensor for measuring the direction of the geomagnetism. The measured value of the gyro sensor 103 may be provided to an inertial measurement unit (IMU). The inertial measurement device may be provided in the form of one integrated unit consisting of a total of three sensors: an accelerometer capable of measuring movement inertia, a gyrometer capable of measuring rotational inertia, and a magnetic field capable of measuring an azimuth. Rotation information on three axes, that is, pitch, roll, and yaw, may be obtained by using the measured values for the gyro and magnetic fields.

일 개시에 의하여, 프로세서(115)는 감압센서(101), 자이로센서(103) 및 플렉스센서(111)에서 인식한 사용자 입력신호의 오차율을 줄이기 위하여 히스테리시스(Hysteresis) 파라미터 범위를 20% 미만으로 설정할 수 있다.According to one disclosure, the processor 115 sets the hysteresis parameter range to less than 20% in order to reduce the error rate of the user input signal recognized by the pressure-sensitive sensor 101 , the gyro sensor 103 and the flex sensor 111 . can

도 7은 본 발명의 입력 장치(100)인 웨어러블 키보드에서 제 1 센싱 데이터를 인식하는 동작을 설명하기 위한 도면이다.7 is a diagram for explaining an operation of recognizing first sensing data in the wearable keyboard, which is the input device 100 of the present invention.

도 7에서 L1, L2, L3은 각각 사용자가 제1 내지 제3 입력 레벨의 의도하면서 서로 다른 크기의 힘을 가한 경우 압력의 증감을 나타내는 그래프를 지칭한다. 다시 말하면 각각 약 레벨, 중 레벨, 강 레벨의 정도로 힘을 가한 경우를 지칭한다. 일 개시에 의하여, 사용자의 입력에 따라 바닥면에 가해지는 힘은 40~50ms 정도에서 급격히 증가하기 시작하여 80 ~ 100ms 정도에서 피크를 나타낸 다음 110 ~ 120ms 정도에서 크기 감소가 종료됨을 확인할 수 있다.In FIG. 7 , L1, L2, and L3 refer to graphs representing increases and decreases in pressure when the user intentionally applies forces of different magnitudes to the first to third input levels. In other words, it refers to a case where the force is applied to a weak level, a medium level, and a strong level, respectively. By the start, it can be confirmed that the force applied to the floor according to the user's input starts to increase rapidly at about 40-50 ms, peaks at about 80-100 ms, and then ends at about 110-120 ms.

바람직하게는, 이상과 같은 실험 결과를 고려하였을 때, 상기 인식 시간은 감압 센서부로부터 소정의 크기 이상의 상기 압력이 입력되기 시작한 시점을 기준으로 하여 50ms 내지 150ms의 시간으로 설정되는 것이 바람직하다. 그리고 보다 바람직하게는 70ms 내지 110ms의 시간으로 설정되는 것이 바람직하다. 여기서, 50ms 보다 작거나 150ms 보다 큰 시간을 인식 시간으로 설정하면, 웨어러블 키보드에 가해지는 입력에 따라 가해진 압력의 크기를 올바르게 측정할 수 없음을 확인할 수 있다.Preferably, in consideration of the experimental results as described above, the recognition time is preferably set to a time of 50 ms to 150 ms based on a point in time when the pressure of a predetermined size or more is started to be input from the pressure-sensitive sensor unit. And more preferably, it is preferably set to a time of 70 ms to 110 ms. Here, if a time less than 50 ms or greater than 150 ms is set as the recognition time, it can be seen that the magnitude of the pressure applied according to the input applied to the wearable keyboard cannot be measured correctly.

인식 시간은 감압 센서(101)로부터 소정의 크기 이상의 상기 압력이 입력되기 시작한 시점으로부터 소정의 시간 동안, 상기 압력이 최대값을 가지는 시간을 기준으로 설정될 수도 있다. 바람직하게는 상기 압력이 최대값을 가지는 시간이 인식 시간이 될 수 있다.The recognition time may be set based on a time when the pressure has a maximum value during a predetermined time from a time when the pressure of a predetermined level or more is started to be input from the pressure reduction sensor 101 . Preferably, the time when the pressure has a maximum value may be the recognition time.

여기서 웨어러블 키보드(100)는 고정된 인식 시간을 설정하지 않고 입력되는 압력의 크기의 변화를 분석하여, 압력이 최대값을 가지는 시점에서의 압력의 크기를 기준으로 입력 레벨을 선택할 수 있다. 이와 같이 최대 압력값을 이용하는 경우 보다 정확하게 사용자가 의도한 압력의 크기를 인식하고 그에 따라 입력 레벨을 결정할 수 있는 효과가 있다.Here, the wearable keyboard 100 may analyze a change in the magnitude of the input pressure without setting a fixed recognition time, and select the input level based on the magnitude of the pressure at the point in time when the pressure has a maximum value. In this way, when the maximum pressure value is used, there is an effect of more accurately recognizing the size of the pressure intended by the user and determining the input level accordingly.

이를 위하여 웨어러블 키보드(100)는 시간의 흐름에 따라 감압 센서(101)로부터 입력되는 압력의 크기를 시간 별로 저장하고, 저장된 압력들 중에서 가장 큰 압력을 이용하여 입력 레벨을 결정할 수 있다.To this end, the wearable keyboard 100 may store the amount of pressure input from the pressure-sensitive sensor 101 over time according to time, and determine the input level using the largest pressure among the stored pressures.

다만 이와 같이 최대값을 이용하는 경우 최대값 식별을 위하여 메모리가 소요되고 신호 처리를 위한 전력이 소모될 수 있으므로, 메모리와 전력을 절약하기 위하여 상술한 바 미리 설정된 인식 시간을 사용할 수 있다. 이와 같이 미리 설정된 인식 시간을 사용하는 경우 해당 인식 시간에서 입력된 압력만을 이용하여 입력 레벨을 결정할 수 있으므로 메모리를 절약하고 신호 처리에 소모되는 전력을 최소화할 수 있는 효과가 있다.However, in the case of using the maximum value as described above, memory is required to identify the maximum value and power for signal processing may be consumed. Therefore, the previously set recognition time may be used to save memory and power. When the preset recognition time is used as described above, since the input level can be determined using only the pressure input at the corresponding recognition time, memory can be saved and power consumed for signal processing can be minimized.

다른 실시예에 의하여 웨어러블 키보드(100)는 입력 레벨의 인식을 위하여 사용자 별로 가장 적합한 임계치를 사용자의 입력에 따라 설정할 수 있다. According to another embodiment, the wearable keyboard 100 may set a threshold value most suitable for each user according to the user's input in order to recognize the input level.

일 개시에 의하여, 임계치는 웨어러블 키보드(100)에 의하여 구동되는 설정 프로그램에 의하여 사용자에게 제시되는 복수개의 값들 중에서 사용자의 선택 입력에 따라 선택되어 설정될 수도 있다. 예를 들어 설정 프로그램의 설계자는 각 나이, 성별, 신체적 조건을 가지는 사용자들에 대하여 웨어러블 키보드(100)에 대한 입력 시 가하는 힘의 정도를 측정하는 실험 결과 통계에 따라, 내어 각 나이, 성별, 신체적 조건을 가지는 사용자에게 가장 적합한 임계치 값을 결정하고, 그에 따라 설정 프로그램에서 사용자의 나이, 성별, 신체적 조건에 따른 사용자 프로파일 별 임계치 값을 설정할 수 있다. 예를 들면 웨어러블 키보드(100)에 의하여 구동되는 설정 프로그램에서는 각 사용자 프로파일 별로 임계치 값이 미리 설정되고, 사용자 프로파일에 대한 사용자의 선택 입력을 수신하여 선택된 프로파일에 대하여 미리 설정된 임계치 값을 이용할 수 있는 것이다. 예를 들어 설정 프로그램이 나이와 연령 대 별 사용자 프로파일에 대응하는 임계치 값을 미리 저장하고 있고, 사용자가 여자, 20대의 사용자 프로파일을 선택하면, 웨어러블 키보드(100)는 여자, 20대의 사용자 프로파일에 대하여 미리 설정된 임계치 값(제1 임계치 : 0.5N, 제2 임계치 3N)을 이용할 수 있는 것이다.According to one disclosure, the threshold value may be selected and set according to a user's selection input from among a plurality of values presented to the user by a setting program driven by the wearable keyboard 100 . For example, the designer of the setting program measures the degree of force applied when input to the wearable keyboard 100 for users of each age, gender, and physical condition according to the statistics of the experiment result to measure each age, gender, and physical condition A threshold value most suitable for a user having a condition may be determined, and accordingly, a threshold value for each user profile may be set in a setting program according to the user's age, gender, and physical condition. For example, in a setting program driven by the wearable keyboard 100, a threshold value is preset for each user profile, and a preset threshold value can be used for the selected profile by receiving a user's selection input for the user profile. . For example, if the setting program pre-stores a threshold value corresponding to a user profile for each age and age group, and the user selects a female user profile or a user profile in her twenties, the wearable keyboard 100 displays the user profile of a woman or a user in their twenties. A preset threshold value (first threshold: 0.5N, second threshold 3N) may be used.

또는 임계치는 웨어러블 키보드(100)가 각 사용자의 터치 입력에 따라 발생한 압력을 이용하는 방식으로 설정될 수도 있다. 여기서 웨어러블 키보드(100)는 감압 센서(101)로부터 입력받은 압력을 이용하여 상기 입력 레벨을 선택하기 위하여 비교 기준이 되는 소정의 임계치를 설정할 수 있다.Alternatively, the threshold value may be set in such a way that the wearable keyboard 100 uses pressure generated according to each user's touch input. Here, the wearable keyboard 100 may set a predetermined threshold as a comparison standard in order to select the input level using the pressure input from the pressure-sensitive sensor 101 .

도 8은 본 발명의 입력 장치(100)인 웨어러블 키보드의 주요 구성을 설명하기 위한 도면이다.8 is a view for explaining the main configuration of the wearable keyboard, which is the input device 100 of the present invention.

웨어러블 키보드(100)는 센서부(105), 통신 모듈(114), 배터리(116), 제어부(115) 및 메모리(112)를 포함할 수 있다. The wearable keyboard 100 may include a sensor unit 105 , a communication module 114 , a battery 116 , a control unit 115 , and a memory 112 .

일 개시에 의하여 센서부(105)는 감압센서, 자이로센서, 플렉스센서를 포함한 다양한 센서를 포함할 수 있다. 예를 들어, 센서부(105)는 제스처 센서, 자이로 센서, 기압 센서, 마그네틱 센서, 가속도 센서, 그립 센서, 근접 센서, 컬러 센서, IR(infrared) 센서, 생체 센서, 온도 센서, 습도 센서, 또는 조도 센서를 포함할 수 있다.According to one disclosure, the sensor unit 105 may include various sensors including a pressure sensor, a gyro sensor, and a flex sensor. For example, the sensor unit 105 may include a gesture sensor, a gyro sensor, a barometric pressure sensor, a magnetic sensor, an acceleration sensor, a grip sensor, a proximity sensor, a color sensor, an IR (infrared) sensor, a biometric sensor, a temperature sensor, a humidity sensor, or It may include an illuminance sensor.

일 개시에 의하여 배터리(116)는 웨어러블 키보드(100)의 기능을 수행하는데 필요한 전원을 공급하는 배터리(battery)를 포함하며, 예시적으로 리튬 폴리머 배터리를 포함할 수 있다.According to one disclosure, the battery 116 includes a battery that supplies power required to perform a function of the wearable keyboard 100 , and may include, for example, a lithium polymer battery.

또한, 웨어러블 키보드(100)는 하나 이상의 인스트럭션을 저장하는 메모리(112) 및 메모리(112)에 저장된 하나 이상의 인스트럭션을 실행하는 프로세서(115)를 포함할 수 있다.In addition, the wearable keyboard 100 may include a memory 112 that stores one or more instructions and a processor 115 that executes one or more instructions stored in the memory 112 .

일 개시에 의하여 프로세서(115)는, 예를 들면, 소프트웨어(예: 프로그램)를 구동하여 프로세서(115)에 연결된 웨어러블 키보드(100)의 적어도 하나의 다른 구성요소(예: 하드웨어 또는 소프트웨어 구성요소)을 제어할 수 있고, 다양한 데이터 처리 및 연산을 수행할 수 있다. 프로세서(115)는 다른 구성요소(통신 모듈(114))로부터 수신된 명령 또는 데이터를 휘발성 메모리에 로드하여 처리하고, 결과 데이터를 비휘발성 메모리에 저장할 수 있다. 일 실시 예에 따르면, 프로세서(115)는 메인 프로세서(예: 중앙 처리 장치 또는 어플리케이션 프로세서), 및 이와는 독립적으로 운영되고, 추가적으로 또는 대체적으로, 메인 프로세서보다 저전력을 사용하거나, 또는 지정된 기능에 특화된 보조 프로세서(예: 그래픽 처리 장치, 이미지 시그널 프로세서, 센서 허브 프로세서, 또는 커뮤니케이션 프로세서)를 포함할 수 있다. 여기서, 보조 프로세서는 메인 프로세서와 별개로 또는 임베디드되어 운영될 수 있다.According to one disclosure, the processor 115, for example, by driving software (eg, a program) to at least one other component (eg, hardware or software component) of the wearable keyboard 100 connected to the processor 115 can be controlled, and various data processing and operations can be performed. The processor 115 may load a command or data received from another component (communication module 114 ) into a volatile memory for processing, and store the result data in a non-volatile memory. According to an embodiment, the processor 115 operates independently of the main processor (eg, a central processing unit or an application processor), and additionally or alternatively, uses less power than the main processor or an auxiliary specialized for a specified function. It may include a processor (eg, a graphic processing unit, an image signal processor, a sensor hub processor, or a communication processor). Here, the auxiliary processor may be operated separately from or embedded in the main processor.

일 개시에 의하여 통신 모듈(114)은 웨어러블 키보드(100)와 외부 장치(600)간의 유선 또는 무선 통신 채널의 수립, 및 수립된 통신 채널을 통한 통신 수행을 지원할 수 있다. 통신 모듈(114)은 프로세서(115)(예: 어플리케이션 프로세서)와 독립적으로 운영되는, 유선 통신 또는 무선 통신을 지원하는 하나 이상의 커뮤니케이션 프로세서를 포함할 수 있다. 일 실시 예에 따르면, 통신 모듈(114)은 무선 통신 모듈(예: 셀룰러 통신 모듈, 근거리 무선 통신 모듈, 또는 GNSS(global navigation satellite system) 통신 모듈) 또는 유선 통신 모듈(예: LAN(local area network) 통신 모듈, 또는 전력선 통신 모듈)을 포함할 수 있다.According to one disclosure, the communication module 114 may support establishment of a wired or wireless communication channel between the wearable keyboard 100 and the external device 600 and performing communication through the established communication channel. The communication module 114 may include one or more communication processors that support wired communication or wireless communication, operated independently of the processor 115 (eg, an application processor). According to an embodiment, the communication module 114 is a wireless communication module (eg, a cellular communication module, a short-range wireless communication module, or a global navigation satellite system (GNSS) communication module) or a wired communication module (eg, a local area network (LAN) ) communication module, or a power line communication module).

일 개시에 의하여 프로세서(115)는 제 1 키보드 입력이 검지 손가락에 의한 입력인 경우, 추가적으로 제 3 센싱 데이터를 이용하여 제 1 키보드 입력의 x축 방향의 위치를 결정하고, 결정된 제 1 키보드 입력의 x축 위치 및 y축 위치에 대응하는 출력값을 결정하는 것을 특징으로 한다.According to one disclosure, when the first keyboard input is an input by the index finger, the processor 115 additionally determines the position of the first keyboard input in the x-axis direction by using the third sensing data, and It is characterized in that an output value corresponding to the x-axis position and the y-axis position is determined.

일 개시에 의하여 프로세서(115)는, 사용자의 프로파일에 기초하여 제 1 센싱 데이터의 임계값을 결정하고, 감압 센서를 통해 임계값 이상의 압력이 감지되는 경우, 압력이 감지된 손가락에 대응하는 적어도 하나의 키를 예비 출력값으로서 결정하고, 제 2 센싱 데이터 및 제 3 센싱 데이터 중 적어도 하나로부터 획득한 위치 정보에 기초하여, 예비 출력값 중 어느 하나를 출력 값으로 결정할 수 있다.According to one disclosure, the processor 115 determines a threshold value of the first sensed data based on the user's profile, and when a pressure equal to or greater than the threshold value is sensed through the pressure sensor, at least one corresponding to the finger for which the pressure is sensed. A key of , may be determined as a preliminary output value, and any one of the preliminary output values may be determined as an output value based on location information obtained from at least one of the second sensing data and the third sensing data.

일 개시에 의하여 프로세서(115)는 웨어러블 키보드에 설치된 10개의 감압 센서 각각에 대하여 적어도 하나의 예비 출력값을 매핑하고, 입력신호의 위치가 명확하기 않다고 판단되는 경우, 입력신호를 획득한 감압 센서에 매핑된 적어도 하나의 예비 출력값을 외부 장치로 전송하고, 적어도 하나의 예비 출력값 중 어느 하나를 선택하는 사용자 입력에 기초하여 출력 신호를 결정할 수 있다.According to one disclosure, the processor 115 maps at least one preliminary output value to each of the ten pressure-sensitive sensors installed on the wearable keyboard, and when it is determined that the position of the input signal is not clear, the input signal is mapped to the pressure-sensitive sensor obtained The at least one preliminary output value may be transmitted to an external device, and the output signal may be determined based on a user input for selecting one of the at least one preliminary output values.

일 개시에 의하여, 메모리(112)는 프로세서(115)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 본 발명의 장치로 입력되거나 또는 장치에서 출력되는 데이터를 저장할 수도 있다. 메모리(112)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 여기서, 복수 개의 모듈들은 하드웨어가 아닌 소프트웨어로서, 기능적으로 동작하는 모듈이다.According to one disclosure, the memory 112 may store a program for processing and controlling the processor 115 , and may also store data input to or output from the apparatus of the present invention. Programs stored in the memory 112 may be classified into a plurality of modules according to their functions, where the plurality of modules are software, not hardware, and are functionally operated modules.

메모리(112)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 여기서, 복수 개의 모듈들은 하드웨어가 아닌 소프트웨어로서, 기능적으로 동작하는 모듈을 의미할 수 있다.Programs stored in the memory 112 may be classified into a plurality of modules according to their functions, where the plurality of modules are software, not hardware, and may refer to modules that operate functionally.

[적용례][Application example]

따라서, 이하 상술한 웨어러블 키보드를 활용한 예시들은 아래와 같을 수 있다. Accordingly, examples using the wearable keyboard described above may be as follows.

[제1 예시][Example 1]

사용자의 모든 손가락 말단부에 대응되도록 설치된 감압 센서;a pressure sensor installed to correspond to the distal end of all of the user's fingers;

상기 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치된 플렉스 센서; a flex sensor installed to correspond to the first joint to the third joint of the user's finger;

상기 사용자의 검지 손가락의 말단부에 설치된 자이로센서;a gyro sensor installed at the distal end of the user's index finger;

외부 장치와 통신하는 통신 모듈;a communication module for communicating with an external device;

하나 이상의 인스트럭션을 저장하는 메모리; 및a memory storing one or more instructions; and

상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고,a processor executing the one or more instructions stored in the memory;

상기 프로세서는 상기 감압 센서로부터 획득한 제 1 센싱 데이터로부터 가상 쿼티 키보드를 입력하는 입력신호를 판단하고, 상기 플렉스 센서로부터 획득한 제 2 센싱 데이터로부터 상기 가상 쿼티 키보드에서 입력신호가 검출된 위치를 판단하고, 상기 자이로센서로부터 획득한 제 3 센싱 데이터로부터 검지 손가락으로부터 입력된 입력신호의 위치를 판단한 결과에 기초하여 출력신호를 생성하고, 상기 통신 모듈을 통해 상기 출력신호를 외부 장치로 전송하는, 웨어러블 키보드.The processor determines an input signal for inputting a virtual QWERTY keyboard from the first sensing data obtained from the pressure-sensitive sensor, and determines a position where the input signal is detected from the virtual QWERTY keyboard from the second sensing data obtained from the flex sensor and generating an output signal based on a result of determining the position of the input signal input from the index finger from the third sensing data obtained from the gyro sensor, and transmitting the output signal to an external device through the communication module. keyboard.

[제2 예시][Second example]

제 1 예시에 있어서,In the first example,

상기 프로세서는,The processor is

상기 제 1 센싱 데이터가 임계값 이상으로 검출되는지 여부를 판단하고,It is determined whether the first sensed data is detected above a threshold,

상기 임계값 이상으로 검출된 제 1 센싱 데이터를 제 1 키보드 입력으로 결정하고, 상기 사용자의 손가락의 구부림 정도에 따라 변화하는 상기 제 2 센싱 데이터로부터 상기 제 1 키보드 입력의 y축 방향 위치를 결정하고,The first sensing data detected above the threshold is determined as a first keyboard input, and the y-axis direction position of the first keyboard input is determined from the second sensing data that changes according to the degree of bending of the user's finger, and ,

상기 결정된 제 1 키보드 입력의 y축 위치에 대응하는 출력값을 결정하고,determining an output value corresponding to the determined y-axis position of the first keyboard input;

상기 통신 모듈을 이용하여 상기 출력값을 외부 장치로 전송하는 것을 특징으로 하는, 웨어러블 키보드.A wearable keyboard, characterized in that it transmits the output value to an external device using the communication module.

[제3 예시][3rd example]

제 2 예시에 있어서, In the second example,

상기 제 1 키보드 입력이 검지 손가락에 의한 입력인 경우, 추가적으로 제 3 센싱 데이터를 이용하여 상기 제 1 키보드 입력의 x축 방향의 위치를 결정하고, 상기 결정된 제 1 키보드 입력의 x축 위치 및 y축 위치에 대응하는 출력값을 결정하는 것을 특징으로 하는, 웨어러블 키보드.When the first keyboard input is input by the index finger, a position in the x-axis direction of the first keyboard input is additionally determined using third sensing data, and an x-axis position and a y-axis position of the first keyboard input are determined. Characterized in determining the output value corresponding to the position, wearable keyboard.

[제4 예시][4th example]

제 1 예시에 있어서, In the first example,

상기 프로세서는, The processor is

상기 사용자의 프로파일에 기초하여 상기 제 1 센싱 데이터의 임계값을 결정하고, Determining a threshold value of the first sensing data based on the user's profile,

상기 감압 센서를 통해 상기 임계값 이상의 압력이 감지되는 경우, 압력이 감지된 손가락에 대응하는 적어도 하나의 키를 예비 출력값으로서 결정하고,When a pressure equal to or greater than the threshold value is sensed through the pressure sensor, at least one key corresponding to a finger for which the pressure is sensed is determined as a preliminary output value,

상기 제 2 센싱 데이터 및 제 3 센싱 데이터 중 적어도 하나로부터 획득한 위치 정보에 기초하여, 상기 예비 출력값 중 어느 하나를 출력 값으로 결정하는 것을 특징으로 하는, 웨어러블 키보드.Based on the location information obtained from at least one of the second sensing data and the third sensing data, any one of the preliminary output values is determined as an output value, the wearable keyboard.

[제5 예시][5th example]

제 1 예시에 있어서, In the first example,

상기 프로세서는, The processor is

상기 웨어러블 키보드에 설치된 10개의 감압 센서 각각에 대하여 적어도 하나의 예비 출력값을 매핑하고, mapping at least one preliminary output value to each of the ten pressure-sensitive sensors installed in the wearable keyboard;

상기 입력신호의 위치가 명확하기 않다고 판단되는 경우, 상기 입력신호를 획득한 감압 센서에 매핑된 적어도 하나의 예비 출력값을 외부 장치로 전송하고, When it is determined that the position of the input signal is not clear, at least one preliminary output value mapped to the pressure-sensitive sensor that obtained the input signal is transmitted to an external device,

상기 적어도 하나의 예비 출력값 중 어느 하나를 선택하는 사용자 입력에 기초하여 출력 신호를 결정하는 것을 특징으로 하는, 웨어러블 키보드.The wearable keyboard, characterized in that the output signal is determined based on a user input for selecting any one of the at least one preliminary output value.

[제6 예시][6th example]

제 1 예시에 있어서, In the first example,

프로세서는, The processor is

상기 감압센서, 자이로센서 및 플렉스센서 중 적어도 하나에서 인식한 사용자 입력신호의 오차율을 줄이기 위하여 히스테리시스(Hysteresis) 파라미터 범위를 20% 미만으로 설정하는 것을 특징으로 하는, 웨어러블 키보드. The wearable keyboard, characterized in that the hysteresis parameter range is set to less than 20% in order to reduce the error rate of the user input signal recognized by at least one of the pressure-sensitive sensor, the gyro sensor, and the flex sensor.

[제7 예시][Seventh example]

제 1 예시에 있어서, In the first example,

상기 웨어러블 키보드는 폴리아미드 수지 조성물로 이루어져있으며, The wearable keyboard is made of a polyamide resin composition,

상기 폴리아미드 수지 조성물은, The polyamide resin composition comprises:

식물성 오일과 알코올을 반응시켜 제조되며, 화학식 1에 의하여 표시되는 에폭시계 에스테르 화합물 15 내지 25 중량%;15 to 25 wt% of an epoxy-based ester compound represented by Formula 1, which is prepared by reacting vegetable oil with alcohol;

프탈레이트계 에스테르 화합물, 테레프탈레이트계 에스테르 화합물, 프탈레이트계 및 테레프탈레이트계 에스테르 혼합물 및 트리멜리테이트계 에스테르 화합물로 이루어진 군에서 선택된 적어도 하나의 에스테르 화합물 20 내지 25 중량%;20 to 25 wt% of at least one ester compound selected from the group consisting of a phthalate-based ester compound, a terephthalate-based ester compound, a phthalate-based and terephthalate-based ester mixture, and a trimellitate-based ester compound;

고밀도 폴리에틸렌(HDPE), 저밀도 폴리에틸렌(LDPE), 폴리프로필렌(PP), 에틸렌-프로필렌 공중합체(EPM), 에틸렌-프로필렌-디엔 공중합체(EPDM), 에틸렌-부텐 공중합체, 에틸렌-옥텐 공중합체, 에틸렌-부타디엔 공중합체 중에서 선택된 1종 이상의 올레핀계 고무 중합체 5 내지 10% 중량%;High density polyethylene (HDPE), low density polyethylene (LDPE), polypropylene (PP), ethylene-propylene copolymer (EPM), ethylene-propylene-diene copolymer (EPDM), ethylene-butene copolymer, ethylene-octene copolymer, 5 to 10% by weight of at least one olefinic rubber polymer selected from among ethylene-butadiene copolymers;

상대점도(25℃)가 2.0 내지 2.8cP이고, 수평균분자량이 20,000 내지 200,000g/mol인 폴리 아미드 30 내지 50 중량%;30 to 50 wt% of a polyamide having a relative viscosity (25°C) of 2.0 to 2.8 cP and a number average molecular weight of 20,000 to 200,000 g/mol;

공액 디엔 고무, 방향족 비닐 화합물 및 비닐시안 화합물을 포함하는 비닐 방향족 화합물-비닐시안 화합물 공중합체 5 내지 15 중량%를 포함하는 폴리아미드 수지 조성물로 이루어진 것을 특징으로 하는, 웨어러블 키보드.A wearable keyboard comprising a polyamide resin composition comprising 5 to 15 wt% of a conjugated diene rubber, an aromatic vinyl compound and a vinyl aromatic compound including a vinyl cyan compound-vinyl cyan compound copolymer.

[화학식 1][Formula 1]

Figure 112020127619912-pat00008
Figure 112020127619912-pat00008

(상기 R4는 (C8-C20)에폭시알킬이고, R5는 (C1-C10)알킬 또는

Figure 112020127619912-pat00009
이고, 상기 Rx 및 Ry는 각각 독립적으로 수소, (C1-C5)알킬 또는
Figure 112020127619912-pat00010
이며, 상기 알킬은 (C1-C5)알킬 또는
Figure 112020127619912-pat00011
이 더 치환될 수 있고, 상기 R41 및 R42는 각각 독립적으로 (C8-C20)에폭시알킬이며, 상기 n은 1 내지 3에서 선택되는 정수임).(Wherein R4 is (C8-C20) epoxyalkyl, R5 is (C1-C10) alkyl or
Figure 112020127619912-pat00009
and R x and R y are each independently hydrogen, (C1-C5)alkyl or
Figure 112020127619912-pat00010
and wherein the alkyl is (C1-C5)alkyl or
Figure 112020127619912-pat00011
may be further substituted, wherein R 41 and R 42 are each independently (C8-C20)epoxyalkyl, and n is an integer selected from 1 to 3).

이하, 상술한 내용들을 바탕으로 본 명세서의 바람직한 제2 실시예에 따른, 운전자 졸음 방지 방법은 다음과 같다. 이때, 제2 실시예에 따른 제어 방법을 수행하는 주체는 상술한 제1 실시예에 따른 서버 또는 서버의 프로세서일 수 있다. Hereinafter, a method for preventing driver's drowsiness according to a second preferred embodiment of the present specification based on the above description is as follows. In this case, the subject performing the control method according to the second embodiment may be the server according to the above-described first embodiment or a processor of the server.

도 9 내지 도 11은 본 발명에 따른 운전자 졸음 방지 방법을 나타낸 도면이다. 9 to 11 are views illustrating a method for preventing driver drowsiness according to the present invention.

도 9에 따르면, 본 발명에 따른 운전자 졸음 방지 방법은 운전자의 얼굴 영상을 수신하는 단계(S1100), 얼굴 영상을 기초로, 운전자의 졸음 상태에 대한 정보를 획득하는 단계(S1200), 졸음 상태에 따른 알람을 출력하기 위한 명령을 스피커(220)로 전송하는 단계(S1300), 미리 정해진 입력을 입력 장치(100)로부터 수신하는 단계(S1400) 및 미리 정해진 입력을 수신하고, 미리 정해진 입력에 따라 스피커(220)의 알람을 오프(off)하도록 제어하는 단계(S1500)를 더 포함할 수 있다. According to FIG. 9 , the method for preventing driver drowsiness according to the present invention includes the steps of receiving a driver's face image (S1100), acquiring information on the driver's drowsiness state based on the face image (S1200), and drowsy state Transmitting a command for outputting an alarm in response to the speaker 220 (S1300), receiving a predetermined input from the input device 100 (S1400), and receiving a predetermined input, according to the predetermined input, the speaker It may further include a step (S1500) of controlling to turn off (off) the alarm of (220).

도 10에 따르면, 본 발명에 따른 S1200 단계는, 운전자의 상기 얼굴에 대한 특징점을 추출하는 단계(S1210) 및 특징점을 기초로 졸음 상태에 대한 정보를 획득하는 단계(S1220)를 포함할 수 있다. Referring to FIG. 10 , step S1200 according to the present invention may include extracting a feature point for the driver's face ( S1210 ) and obtaining information on a drowsy state based on the feature point ( S1220 ).

도 11에 따르면, 본 발명에 따른 S1220 단계는, 특징점이 이동한 거리를 획득하는 단계(S1221) 및 이동한 거리가 미리 정해진 길이보다 큰 경우, 운전자의 상태를 졸음 상태로 정의하는 단계(S1222)를 포함할 수 있다. 이때, 특징점은 운전자의 눈 주변 또는 입 주변에서 추출된 특징점일 수 있다. Referring to FIG. 11 , step S1220 according to the present invention includes the steps of obtaining the distance traveled by the feature point (S1221) and defining the driver's state as a drowsy state when the moved distance is greater than a predetermined length (S1222) may include In this case, the feature point may be a feature point extracted from around the driver's eyes or mouth.

졸음 상태에 따른 알람을 출력하기 위한 명령을 스피커(220)로 전송하는 단계(S1300) 및 미리 정해진 입력을 입력 장치(100)로부터 수신하는 단계(S1400)에 대한 예시는 아래와 같다. An example of the step of transmitting a command for outputting an alarm according to the drowsy state to the speaker 220 (S1300) and the step of receiving a predetermined input from the input device 100 (S1400) are as follows.

스피커에 따른 알람은 다음과 같을 수 있다. The alarm according to the speaker may be as follows.

(1) 경고음(1) beep sound

(2) 졸음 상태를 알려주는 다이어로그(2) Dialog that informs the state of drowsiness

(3) 졸음 운전 주의 메시지(3) Drowsy driving warning message

이러한 알람을 오프(off)하기 위하여 운전자에게 요구하는 입력은 다음과 같이 미리 정해질 수 있다. An input required by the driver to turn off such an alarm may be predetermined as follows.

(1) 미리 정해진 알파벳의 입력(1) input of a predetermined alphabet

(2) 미리 정해진 숫자의 입력(2) input of a predetermined number

(3) 위 알파벳과 숫자의 조합(3) Combination of the above alphabets and numbers

(4) 알파벳 또는 숫자의 무작위 조합(4) random combinations of alphabets or numbers

(5) 미리 정해진 박자에 맞춰 입력(5) Input according to a predetermined beat

서버는 위 입력들 중 운전자의 선택에 따른 입력을 요구할 수 있다. 운전자는 웨어러블 키보드(100)를 통하여 위 미리 정해진 입력을 입력할 수 있다. The server may request an input according to a driver's selection among the above inputs. The driver may input the above predetermined input through the wearable keyboard 100 .

또한, 본 발명에 따른 서버(300) 또는 프로세서(301)는 상술한 방법에 따라 운전자 졸음 방지 시스템을 제어할 수 있다. In addition, the server 300 or the processor 301 according to the present invention may control the driver's drowsiness prevention system according to the above-described method.

전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 모델링하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽힐 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 모델링되는 것도 포함한다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.The present invention described above can be modeled as computer readable code on a medium in which a program is recorded. The computer-readable medium includes all types of recording devices in which data readable by a computer system is stored. Examples of computer-readable media include Hard Disk Drive (HDD), Solid State Disk (SSD), Silicon Disk Drive (SDD), ROM, RAM, CD-ROM, magnetic tape, floppy disk, optical data storage device, etc. It also includes modeling in the form of a carrier wave (eg, transmission over the Internet). Accordingly, the above detailed description should not be construed as restrictive in all respects but as exemplary. The scope of the present invention should be determined by a reasonable interpretation of the appended claims, and all modifications within the equivalent scope of the present invention are included in the scope of the present invention.

앞에서 설명된 본 발명의 어떤 실시 예들 또는 다른 실시 예들은 서로 배타적이거나 구별되는 것은 아니다. 앞서 설명된 본 발명의 어떤 실시 예들 또는 다른 실시 예들은 각각의 구성 또는 기능이 병용되거나 조합될 수 있다.Any or other embodiments of the present invention described above are not mutually exclusive or distinct. Any of the above-described embodiments or other embodiments of the present invention may be combined or combined with each configuration or function.

상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.The above detailed description should not be construed as restrictive in all respects and should be considered as illustrative. The scope of the present invention should be determined by a reasonable interpretation of the appended claims, and all modifications within the equivalent scope of the present invention are included in the scope of the present invention.

100: 입력 장치, 웨어러블 키보드
200: 차량
210: 영상 획득부
220: 스피커
230: 통신부
300: 서버
100: input device, wearable keyboard
200: vehicle
210: image acquisition unit
220: speaker
230: communication department
300: server

Claims (11)

운전자의 얼굴 영상을 획득하는 영상 획득부;
상기 영상을 수신하고, 상기 영상에 기초하여 상기 운전자의 졸음 상태에 대한 정보를 획득하는 서버;
상기 운전자의 졸음 상태에 따른 알람을 출력하는 스피커; 및
상기 알람을 오프(off)하기 위하여 미리 정해진 입력이 입력되는 입력 장치;를 포함하되,
상기 서버는,
상기 미리 정해진 입력을 상기 입력 장치로부터 수신하고, 상기 미리 정해진 입력에 따라 상기 스피커의 알람을 오프(off)하도록 제어하되,
상기 입력 장치는 웨어러블 키보드로서,
사용자의 모든 손가락 말단부에 대응되도록 설치된 감압 센서;
상기 사용자의 손가락 첫째마디부터 셋째마디에 대응되도록 설치된 플렉스 센서;
상기 사용자의 검지 손가락의 말단부에 설치된 자이로센서;
외부 장치와 통신하는 통신 모듈;
하나 이상의 인스트럭션을 저장하는 메모리; 및
상기 메모리에 저장된 상기 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고,
상기 웨어러블 키보드는, 폴리아미드 수지 조성물로 이루어지며,
상기 폴리아미드 수지 조성물은,
식물성 오일과 알코올을 반응시켜 제조되며, 화학식 1에 의하여 표시되는 에폭시계 에스테르 화합물 15 내지 25 중량%;
프탈레이트계 에스테르 화합물, 테레프탈레이트계 에스테르 화합물, 프탈레이트계 및 테레프탈레이트계 에스테르 혼합물 및 트리멜리테이트계 에스테르 화합물로 이루어진 군에서 선택된 적어도 하나의 에스테르 화합물 20 내지 25 중량%;
고밀도 폴리에틸렌(HDPE), 저밀도 폴리에틸렌(LDPE), 폴리프로필렌(PP), 에틸렌-프로필렌 공중합체(EPM), 에틸렌-프로필렌-디엔 공중합체(EPDM), 에틸렌-부텐 공중합체, 에틸렌-옥텐 공중합체, 에틸렌-부타디엔 공중합체 중에서 선택된 1종 이상의 올레핀계 고무 중합체 5 내지 10% 중량%;
상대점도(25℃)가 2.0 내지 2.8cP이고, 수평균분자량이 20,000 내지 200,000g/mol인 폴리 아미드 30 내지 50 중량%;
공액 디엔 고무, 방향족 비닐 화합물 및 비닐시안 화합물을 포함하는 비닐 방향족 화합물-비닐시안 화합물 공중합체 5 내지 15 중량%를 포함하는 폴리아미드 수지 조성물로 이루어진 것을 특징으로 하는 것인, 운전자 졸음 방지 시스템.
[화학식 1]
Figure 112022032531462-pat00022

(상기 R4는 (C8-C20)에폭시알킬이고, R5는 (C1-C10)알킬 또는
Figure 112022032531462-pat00023
이고, 상기 Rx 및 Ry는 각각 독립적으로 수소, (C1-C5)알킬 또는
Figure 112022032531462-pat00024
이며, 상기 알킬은 (C1-C5)알킬 또는
Figure 112022032531462-pat00025
이 더 치환될 수 있고, 상기 R41 및 R42는 각각 독립적으로 (C8-C20)에폭시알킬이며, 상기 n은 1 내지 3에서 선택되는 정수임).
an image acquisition unit acquiring an image of the driver's face;
a server receiving the image and obtaining information on the driver's drowsiness state based on the image;
a speaker outputting an alarm according to the drowsy state of the driver; and
Including; an input device to which a predetermined input is input in order to turn off the alarm;
The server is
Receive the predetermined input from the input device, and control to turn off the alarm of the speaker according to the predetermined input,
The input device is a wearable keyboard,
a pressure sensor installed to correspond to the distal end of all fingers of the user;
a flex sensor installed to correspond to the first joint to the third joint of the user's finger;
a gyro sensor installed at the distal end of the user's index finger;
a communication module for communicating with an external device;
a memory storing one or more instructions; and
a processor executing the one or more instructions stored in the memory;
The wearable keyboard is made of a polyamide resin composition,
The polyamide resin composition comprises:
15 to 25 wt% of an epoxy-based ester compound represented by Formula 1, which is prepared by reacting vegetable oil with alcohol;
20 to 25 wt% of at least one ester compound selected from the group consisting of a phthalate-based ester compound, a terephthalate-based ester compound, a phthalate-based and terephthalate-based ester mixture, and a trimellitate-based ester compound;
High density polyethylene (HDPE), low density polyethylene (LDPE), polypropylene (PP), ethylene-propylene copolymer (EPM), ethylene-propylene-diene copolymer (EPDM), ethylene-butene copolymer, ethylene-octene copolymer, 5 to 10% by weight of at least one olefinic rubber polymer selected from among ethylene-butadiene copolymers;
30 to 50 wt% of a polyamide having a relative viscosity (25°C) of 2.0 to 2.8 cP and a number average molecular weight of 20,000 to 200,000 g/mol;
A system for preventing driver's drowsiness, characterized in that it consists of a polyamide resin composition comprising 5 to 15 wt% of a vinyl aromatic compound-vinyl cyan compound copolymer including a conjugated diene rubber, an aromatic vinyl compound, and a vinyl cyan compound.
[Formula 1]
Figure 112022032531462-pat00022

(Wherein R4 is (C8-C20) epoxyalkyl, R5 is (C1-C10) alkyl or
Figure 112022032531462-pat00023
and R x and R y are each independently hydrogen, (C1-C5)alkyl or
Figure 112022032531462-pat00024
and wherein the alkyl is (C1-C5)alkyl or
Figure 112022032531462-pat00025
may be further substituted, wherein R 41 and R 42 are each independently (C8-C20)epoxyalkyl, and n is an integer selected from 1 to 3).
제1항에 있어서,
상기 서버는,
상기 운전자의 상기 얼굴에 대한 특징점을 추출하고, 상기 특징점을 기초로 상기 운전자의 졸음 상태에 대한 정보를 획득하는 것인, 운전자 졸음 방지 시스템.
According to claim 1,
The server is
The system for preventing drowsiness by extracting feature points for the face of the driver and acquiring information on the driver's drowsiness state based on the feature points.
제2항에 있어서,
상기 특징점은 상기 운전자의 입 주변 또는 눈 주변을 따라 추출되고,
상기 서버는,
상기 특징점이 미리 정해진 길이보다 더 움직이는 경우, 상기 운전자의 상태를 졸음 상태로 정의하는 것인, 운전자 졸음 방지 시스템.
3. The method of claim 2,
The feature point is extracted along a periphery of the driver's mouth or eyes,
The server is
and when the feature point moves more than a predetermined length, defining the driver's state as a drowsy state.
제1항에 있어서,
상기 스피커는 미리 입력된 다이어로그(dialog)를 음성으로 출력하는 것인, 운전자 졸음 방지 시스템.
According to claim 1,
The speaker is to output a pre-input dialog (dialog) as a voice, driver's drowsiness prevention system.
제1항에 있어서,
상기 입력 장치는 상기 운전자가 착용하는 웨어러블 키보드인 것인, 운전자 졸음 방지 시스템.
According to claim 1,
The input device is a wearable keyboard worn by the driver, the driver's drowsiness prevention system.
삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020200161076A 2020-11-26 2020-11-26 System and method for protecting drowsy driving KR102403887B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200161076A KR102403887B1 (en) 2020-11-26 2020-11-26 System and method for protecting drowsy driving

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200161076A KR102403887B1 (en) 2020-11-26 2020-11-26 System and method for protecting drowsy driving

Publications (1)

Publication Number Publication Date
KR102403887B1 true KR102403887B1 (en) 2022-05-30

Family

ID=81800197

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200161076A KR102403887B1 (en) 2020-11-26 2020-11-26 System and method for protecting drowsy driving

Country Status (1)

Country Link
KR (1) KR102403887B1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100209610B1 (en) 1997-02-22 1999-07-15 구자홍 Sleepness protection device using brain wave signal
JP2000330692A (en) 1999-05-20 2000-11-30 Takashi Noguchi Information inputting device
KR101416522B1 (en) 2012-12-10 2014-07-09 계명대학교 산학협력단 prevention method of drowsy driving and system thereof
KR20160103713A (en) * 2015-02-25 2016-09-02 김건중 Anti drowsy driving system
KR20190063986A (en) * 2017-11-30 2019-06-10 주식회사 라스테크 Artificial intelligence dashboard robot base on cloud server for recognizing states of a user
KR20190092782A (en) * 2018-01-31 2019-08-08 (주)유즈브레인넷 Glove-type Motion Recognizing Apparatus Capable of Recognizing Motion of Fingers and Hands on the Space and Recognizing Method thereof
KR20190120561A (en) * 2018-04-16 2019-10-24 (주) 이즈테크놀로지 Method and System for Preventing Driver Drowsiness Through Interaction with Driver by Based on Driver Status Monitoring

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100209610B1 (en) 1997-02-22 1999-07-15 구자홍 Sleepness protection device using brain wave signal
JP2000330692A (en) 1999-05-20 2000-11-30 Takashi Noguchi Information inputting device
KR101416522B1 (en) 2012-12-10 2014-07-09 계명대학교 산학협력단 prevention method of drowsy driving and system thereof
KR20160103713A (en) * 2015-02-25 2016-09-02 김건중 Anti drowsy driving system
KR20190063986A (en) * 2017-11-30 2019-06-10 주식회사 라스테크 Artificial intelligence dashboard robot base on cloud server for recognizing states of a user
KR20190092782A (en) * 2018-01-31 2019-08-08 (주)유즈브레인넷 Glove-type Motion Recognizing Apparatus Capable of Recognizing Motion of Fingers and Hands on the Space and Recognizing Method thereof
KR20190120561A (en) * 2018-04-16 2019-10-24 (주) 이즈테크놀로지 Method and System for Preventing Driver Drowsiness Through Interaction with Driver by Based on Driver Status Monitoring

Similar Documents

Publication Publication Date Title
US11009951B2 (en) Wearable muscle interface systems, devices and methods that interact with content displayed on an electronic display
US10088807B2 (en) Reverse battery protection device and operating method thereof
EP3929705A1 (en) Wearable device and method of controlling the same
US20160070966A1 (en) Head-mounted display head pose and activity estimation
US10621955B2 (en) Wearable terminal for displaying screen optimized for various situations
KR102377162B1 (en) Wearable keyboard
CN104462914B (en) A kind of unlocking screen method and terminal
US11279459B2 (en) Hover attachment for mobile device
KR101698103B1 (en) Vehicle controlling system and control method thereof
EP3327520A1 (en) Watch-type terminal
TWI564751B (en) Wearable device, method of controlling the same, and mobile device configured to control the same
KR20150041569A (en) Signature registration method, signature authentication method and apparatus thereof
US11921471B2 (en) Systems, articles, and methods for wearable devices having secondary power sources in links of a band for providing secondary power in addition to a primary power source
KR102415548B1 (en) Wearable device and operating method thereof
KR102403887B1 (en) System and method for protecting drowsy driving
KR20150092441A (en) Method for user Authentication through touch dragging, device therefor
KR102336982B1 (en) Mobile terminal and method for controlling the same
KR102423332B1 (en) Vehicle key capable of drinking alcohol measurement and a drinking measurement system using the same
US20230073303A1 (en) Wearable devices for sensing neuromuscular signals using a small number of sensor pairs, and methods of manufacturing the wearable devices
KR102418107B1 (en) System and method for controlling of mobility unit
KR102498029B1 (en) System and method for preventing accident
KR102426185B1 (en) Method for providing game by game providing device for improving coding ability
KR20220087146A (en) System and method for guiding path to shelter in disaster state
KR20220111906A (en) System for story-based educational game
KR102231366B1 (en) Life inconvenience report system using car black box camera

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant