KR102520687B1 - Terminal and method for providing function for detecting and preventing drowsy driving - Google Patents

Terminal and method for providing function for detecting and preventing drowsy driving Download PDF

Info

Publication number
KR102520687B1
KR102520687B1 KR1020210142460A KR20210142460A KR102520687B1 KR 102520687 B1 KR102520687 B1 KR 102520687B1 KR 1020210142460 A KR1020210142460 A KR 1020210142460A KR 20210142460 A KR20210142460 A KR 20210142460A KR 102520687 B1 KR102520687 B1 KR 102520687B1
Authority
KR
South Korea
Prior art keywords
information
driver
pupil
measurement data
factor
Prior art date
Application number
KR1020210142460A
Other languages
Korean (ko)
Inventor
김형준
Original Assignee
주식회사 아쎄따
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 아쎄따 filed Critical 주식회사 아쎄따
Priority to KR1020210142460A priority Critical patent/KR102520687B1/en
Application granted granted Critical
Publication of KR102520687B1 publication Critical patent/KR102520687B1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B60W2040/0827—Inactivity or incapacity of driver due to sleepiness
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001—Details of the control system
    • B60W2050/0019—Control system elements or transfer functions
    • B60W2050/0022—Gains, weighting coefficients or weighting functions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Traffic Control Systems (AREA)

Abstract

According to the present invention, a terminal for managing drowsy driving of a driver, which increases the driving convenience of the driver by aggressively preventing drowsy driving, comprises: a first measurement unit which measures a condition of the driver to generate first measurement data; a second measurement unit which measures an environment inside and outside a vehicle to generate second measurement data; a third measurement unit which measures variation information of components present in the vehicle to generate third measurement data; an analysis unit which analyzes whether the driver drives while drowsy based on a first factor indicating connectivity between the first measurement data and the second measurement data, a second factor indicating connectivity between the second measurement data and the third measurement data, and a third factor indicating connectivity between the first measurement data and the third measurement data; and an instruction unit which checks what factor has affected the drowsy driving from among the first factor, the second factor, and the third factor when it is determined that the driver drives while drowsy as a result of the analysis, and instructs a response plan corresponding to the checked factor.

Description

졸음운전 검출 및 방지 기능을 제공하는 단말 및 방법{TERMINAL AND METHOD FOR PROVIDING FUNCTION FOR DETECTING AND PREVENTING DROWSY DRIVING}Terminal and method for providing drowsy driving detection and prevention function {TERMINAL AND METHOD FOR PROVIDING FUNCTION FOR DETECTING AND PREVENTING DROWSY DRIVING}

본 발명은 졸음운전 검출 및 방지 기능을 제공하는 단말 및 방법에 관한 것으로, 보다 구체적으로는 운전자의 상태를 분석하여 졸음운전을 검출하고 이를 방지하는 기능을 제공하는 단말 및 방법에 관한 것이다.The present invention relates to a terminal and method for providing a function for detecting and preventing drowsy driving, and more particularly, to a terminal and method for providing a function for detecting and preventing drowsy driving by analyzing a driver's state.

졸음운전은 운전자가 졸음 상태에서 운전을 수행하는 것으로, 졸음 운전에 의한 사고는 해마다 증가하고 있는 추세이다. 졸음운전은 음주운전 보다 위험도가 높은 것으로 평가되고 있고, 실제 음주운전보다 졸음운전이 더 위험하다는 연구결과가 있을 정도이다. 졸음운전은 운전자의 의식 자체가 없는 상태의 운전이라는 점에서 만취 음주운전 사고와 동일한 것으로 평가될 수 있으며, 실제 졸음운전 사고의 치사율은 일반 사고의 치사율보다 2배 정도 높은 것으로 알려져 있다.Drowsy driving is a driver driving while drowsy, and accidents caused by drowsy driving are increasing year by year. Drowsy driving is evaluated to be more dangerous than drunk driving, and there are studies that show that drowsy driving is more dangerous than drunk driving. Drowsy driving can be evaluated as the same as a drunk driving accident in that it is driving without the driver's consciousness itself, and the actual fatality rate of drowsy driving accidents is known to be about twice as high as that of general accidents.

현재 소득의 증대와 운전자의 편리함의 추구로 인하여 운행 차량이 증가하고 있고, 이에 따라 도로에 존재하는 자동차의 총 운행거리 및 운행시간이 증가하여 자동차 사고도 증가하고 있다. 자동차 사고는 사회적 비용을 증가시키고, 운전자 개인에게 매우 심각한 영향을 미칠 수 있다. 특히, 졸음운전으로 인한 사고의 사망자가 고속도로 교통사고의 사망 원인 중 가장 큰 비율을 차지고 있다는 점에서 운전자의 졸음운전을 검출하고 이를 방지하는 기술이 필요한 실정이다.Currently, the number of vehicles in operation is increasing due to the increase in income and the pursuit of convenience by drivers, and accordingly, the total driving distance and driving time of vehicles on the road increase, resulting in an increase in car accidents. Car accidents increase social costs and can have very serious impacts on individual drivers. In particular, since deaths caused by drowsy driving account for the largest proportion of deaths in highway traffic accidents, a technology for detecting and preventing driver's drowsy driving is required.

이러한 기술의 수요에 따라, 운전자의 표정을 통해 졸음운전을 판단하는 기술이 제안되었으나, 운전자의 정해진 위치를 벗어나는 경우 정확성이 낮아지는 문제가 존재하였다. 또한 웨어러블(wearable) 장치를 이용하여 운전자의 졸음을 검출하는 기술도 제안되었으나, 운전 중에 안경이나, 헤드폰, 모자, 고글 등의 형상을 가진 별도의 장치를 착용해야 하여 운전자에게 불편함을 느끼게 하는 문제가 존재하였다.In accordance with the demand for such technology, a technology for determining drowsy driving through a driver's facial expression has been proposed, but there is a problem in that accuracy is lowered when the driver moves out of a predetermined position. In addition, a technology for detecting the driver's drowsiness using a wearable device has been proposed, but it is necessary to wear a separate device in the shape of glasses, headphones, hats, goggles, etc. while driving, which makes the driver feel uncomfortable existed.

상기와 같은 문제점을 해결하기 위한 본 발명의 목적은 운전자의 상태를 분석하여 졸음운전을 정확하게 검출하는 기능을 제공하는 단말 및 방법을 제공하는데 있다. 상기와 같은 문제점을 해결하기 위한 본 발명의 또 다른 목적은 운전자의 상태를 분석하여 졸음운전을 효과적으로 방지하는 기능을 제공하는 단말 및 방법을 제공하는데 있다.An object of the present invention to solve the above problems is to provide a terminal and method for providing a function of accurately detecting drowsy driving by analyzing a driver's condition. Another object of the present invention to solve the above problems is to provide a terminal and method for providing a function of effectively preventing drowsy driving by analyzing a driver's condition.

상기 목적을 달성하기 위한 본 발명에 따른 운전자의 졸음운전을 관리하는 단말은, 상기 운전자의 상태를 측정하여 제1 측정 데이터를 생성하는 제1 측정부, 차량 내부 및 외부의 환경을 측정하여 제2 측정 데이터를 생성하는 제2 측정부, 상기 차량에 존재하는 부속품들의 변동 정보를 측정하여 제3 측정 데이터를 생성하는 제3 측정부, 상기 제1 측정 데이터 및 제2 측정 데이터와의 연계성을 표시하는 제1 인자, 상기 제2 측정 데이터 및 제3 측정 데이터와의 연계성을 표시하는 제2 인자 및 상기 제3 측정 데이터 및 제1 측정 데이터와의 연계성을 표시하는 제3 인자에 기초하여 상기 운전자의 졸음운전 여부를 분석하는 분석부; 및 상기 분석 결과 상기 운전자가 졸음운전을 하고 있는 것으로 판단된 경우, 상기 제1 인자, 제2 인자 및 제3 인자 중 졸음운전에 영향을 미친 인자를 확인하고, 상기 확인된 인자에 상응하는 대응방안을 지시하는 지시부를 포함하는 것을 특징으로 한다.In order to achieve the above object, a terminal for managing drowsy driving of a driver according to the present invention includes a first measurement unit that measures the driver's condition to generate first measurement data, and a second measurement unit that measures the environment inside and outside the vehicle to generate first measurement data. A second measurement unit for generating measurement data, a third measurement unit for generating third measurement data by measuring change information of accessories present in the vehicle, and displaying connectivity between the first measurement data and the second measurement data. Drowsiness of the driver based on a first factor, a second factor indicating correlation with the second measurement data and third measurement data, and a third factor indicating correlation with the third measurement data and first measurement data. Analysis unit for analyzing whether driving; And if it is determined that the driver is drowsy driving as a result of the analysis, a factor affecting drowsy driving among the first factor, second factor, and third factor is identified, and a countermeasure corresponding to the identified factor It is characterized in that it includes an indicator indicating the.

여기서, 상기 제1 측정 데이터는, 상기 운전자의 눈동자 상태 정보, 심박수 정보, 호흡 정보, 체온 정보 및 근육 이완 정보를 포함하고, 상기 제1 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제1 평가지수를 더 포함하는 것을 특징으로 한다.Here, the first measurement data includes the driver's eye condition information, heart rate information, breathing information, body temperature information, and muscle relaxation information, and indicates a degree of relationship between the information included in the first measurement data and drowsy driving. It is characterized in that it further comprises a first evaluation index.

여기서, 상기 운전자의 눈동자 상태 정보는, 상기 운전자의 눈동자의 면적, 동공의 면적, 눈동자의 세로 길이, 동공의 세로 길이 및 조도 정보에 기초하여 하기 수학식 1에 의해 생성되는 값인 것을 특징으로 한다.Here, the driver's pupil state information is characterized in that it is a value generated by Equation 1 below based on the driver's pupil area, pupil area, pupil vertical length, pupil vertical length, and illuminance information.

(수학식 1)(Equation 1)

Figure 112021121858675-pat00001
Figure 112021121858675-pat00001

여기서,

Figure 112021121858675-pat00002
는
Figure 112021121858675-pat00003
시점에서의 운전자의 눈동자 상태 정보,
Figure 112021121858675-pat00004
는
Figure 112021121858675-pat00005
시점에서 왼쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00006
표준 상태에서 왼쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00007
은
Figure 112021121858675-pat00008
시점에서 오른쪽 눈동자의 면적,
Figure 112021121858675-pat00009
은 표준 상태에서 왼쪽 눈동자의 면적,
Figure 112021121858675-pat00010
은
Figure 112021121858675-pat00011
시점에서 오른쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00012
은 표준 상태에서의 오른쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00013
은
Figure 112021121858675-pat00014
시점에서의 오른쪽 눈동자의 면적,
Figure 112021121858675-pat00015
표준 상태에서 오른쪽 눈동자의 면적,
Figure 112021121858675-pat00016
은
Figure 112021121858675-pat00017
시점에서 왼쪽 동공의 세로 길이,
Figure 112021121858675-pat00018
은 표준 상태에서 왼쪽 동공의 세로길이,
Figure 112021121858675-pat00019
은
Figure 112021121858675-pat00020
시점에서 왼쪽 눈동자의 세로 길이,
Figure 112021121858675-pat00021
은 표준 상태에서 왼쪽 눈동자의 세로 길이,
Figure 112021121858675-pat00022
은
Figure 112021121858675-pat00023
시점에서 오른쪽 동공의 세로 길이,
Figure 112021121858675-pat00024
은 표준 상태에서 오른쪽 동공의 세로 길이,
Figure 112021121858675-pat00025
은
Figure 112021121858675-pat00026
시점에서 오른쪽 눈동자의 세로 길이,
Figure 112021121858675-pat00027
은 표준 상태에서 오른쪽 눈동자의 세로 길이이고,
Figure 112021121858675-pat00028
는 차량 내부의 조도,
Figure 112021121858675-pat00029
는 지속시간,
Figure 112021121858675-pat00030
및
Figure 112021121858675-pat00031
는 운전자의 오른쪽 눈과 왼쪽눈의 상태를 반영한 가중치이다.here,
Figure 112021121858675-pat00002
Is
Figure 112021121858675-pat00003
Driver's pupil state information at the point of view,
Figure 112021121858675-pat00004
Is
Figure 112021121858675-pat00005
The area of the pupil of the left pupil at the time point,
Figure 112021121858675-pat00006
The area of the pupil of the left pupil under normal conditions,
Figure 112021121858675-pat00007
silver
Figure 112021121858675-pat00008
The area of the right pupil at the time point,
Figure 112021121858675-pat00009
is the area of the left pupil in the standard state,
Figure 112021121858675-pat00010
silver
Figure 112021121858675-pat00011
The area of the pupil of the right pupil at the time point,
Figure 112021121858675-pat00012
is the area of the pupil of the right pupil under standard conditions,
Figure 112021121858675-pat00013
silver
Figure 112021121858675-pat00014
The area of the right pupil at the time point,
Figure 112021121858675-pat00015
The area of the right pupil under normal conditions,
Figure 112021121858675-pat00016
silver
Figure 112021121858675-pat00017
The vertical length of the left pupil at the point of view,
Figure 112021121858675-pat00018
is the vertical length of the left pupil in the standard state,
Figure 112021121858675-pat00019
silver
Figure 112021121858675-pat00020
The vertical length of the left pupil at the point of view,
Figure 112021121858675-pat00021
is the vertical length of the left pupil in the standard state,
Figure 112021121858675-pat00022
silver
Figure 112021121858675-pat00023
The vertical length of the right pupil at the point of view,
Figure 112021121858675-pat00024
is the vertical length of the right pupil in the standard state,
Figure 112021121858675-pat00025
silver
Figure 112021121858675-pat00026
The vertical length of the right pupil at the point of view,
Figure 112021121858675-pat00027
is the vertical length of the right pupil in the standard state,
Figure 112021121858675-pat00028
is the illuminance inside the vehicle,
Figure 112021121858675-pat00029
is the duration,
Figure 112021121858675-pat00030
and
Figure 112021121858675-pat00031
is a weight that reflects the condition of the driver's right eye and left eye.

여기서, 상기 제2 측정 데이터는, 차량 내부에 존재하는 이산화탄소 농도 정보, 차량 내부의 온도 및 차량 내부에 입사되는 조도 정보를 포함하고, 차량의 차선이탈 정보, 주행 중인 도로의 상태 정보, 속도 정보 및 가속도 정보를 더 포함하며, 상기 제2 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제2 평가지수를 더 포함하는 것을 특징으로 한다.Here, the second measurement data includes carbon dioxide concentration information present inside the vehicle, temperature inside the vehicle, and illumination information incident on the inside of the vehicle, lane departure information of the vehicle, state information of the road being driven, speed information, and It may further include acceleration information, and may further include a second evaluation index representing a degree of relationship between the information included in the second measurement data and drowsy driving.

여기서, 상기 제3 측정 데이터는, 상기 차량의 핸들에 감지된 압력 정보, 상기 운전자가 착용한 안전벨트가 감겨져 있는 정도를 나타내는 정보, 기어가 위치한 포지션 정보, 패달(pedal)에 감지된 압력 변화 정보 및 상기 운전자가 착석한 시트에 가해진 압력 정보를 포함하며, 상기 제3 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제3 평가지수를 더 포함하는 것을 것을 특징으로 한다.Here, the third measurement data includes pressure information detected on the steering wheel of the vehicle, information indicating how much the seat belt worn by the driver is wound, information on the position of the gear, and pressure change information detected on the pedal. and a third evaluation index including pressure information applied to a seat on which the driver sits, and indicating a degree of relationship between the information included in the third measurement data and drowsy driving.

여기서, 상기 제1 인자는 상기 제1 평가 지수 및 제2 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합이고, 상기 제2 인자는 상기 제2 평가 지수 및 제3 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합이며, 상기 제3 인자는 상기 제 3 평가 지수 및 제1 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합인 것을 특징으로 한다.Here, the first factor is an ordered pair set of factors in which the first and second evaluation indices are greater than or equal to a predetermined threshold, and the second factor is a set of ordered pairs in which the second and third evaluation indices are equal to or greater than a predetermined threshold. It is a set of ordered pairs of factors having a value greater than or equal to a predetermined threshold value, and the third factor is a set of ordered pairs of factors in which the third evaluation index and the first evaluation index have a predetermined threshold value or greater.

여기서, 상기 지시부는, 상기 제1 인자, 제2 인자 및 제3 인자에 기초하여 대응방안 지시맵(map)을 생성하고, 상기 대응 방안 지시맵에 기초하여 대응방안을 지시하는 것을 특징으로 한다.Here, the instructing unit may generate a countermeasure instruction map based on the first factor, the second factor, and the third factor, and instruct a countermeasure based on the countermeasure instruction map.

여기서, 상기 대응방안 지시맵은, 상기 운전자의 운전 습관 내역 정보를 반영하여 생성되고, 기존 운전자들 중에서, 상기 운전자의 운전 습관 내역 정보와의 미리 설정된 값 이상의 유사도를 갖는 운전자들인 제1 계층의 운전자들의 운전 습관 내역 정보를 포함하는 것을 특징으로 한다.Here, the counterplan instruction map is generated by reflecting the driver's driving habit detail information, and among the existing drivers, the driver of the first layer is a driver who has a similarity with the driver's driving habit detail information over a preset value. It is characterized in that it includes driving habit detail information of the driver.

여기서, 상기 지시부는, 상기 제1 계층의 운전자들의 습관 내역 정보와 미리 설정된 값 이상의 유사도를 갖는 운전자들인 제2 계층의 운전자들을 탐색하고, 상기 제1 계층의 운전자들 및 상기 제2 계층의 운전자들 간의 연결 관계를 생성하고, 그리고 상기 제1 계층의 운전자들 및 상기 제2 계층의 운전자들 간의 연결 관계를 기초로 상기 대응방안 지시맵을 확장하는 것을 특징으로 한다.Here, the instruction unit searches for drivers of the second level, which are drivers having a similarity with the habit details information of the drivers of the first level and equal to or higher than a preset value, and the drivers of the first level and the drivers of the second level generating a connection relationship between drivers, and expanding the countermeasure instruction map based on the connection relationship between the drivers of the first level and the drivers of the second level.

본 발명에 의하면, 졸음운전을 정확하게 검출하고 이를 방지하여 운전자의 안전운전을 유도할 수 있는 단말을 제공할 수 있다. 또한, 적극적 및 능동적으로 졸음운전을 방지하여 운전자의 운전 편의성을 높일 수 있는 단말을 제공할 수 있다. 또한 졸음운전을 검출 및 방지함에 있어, 운전자에게 불편함 및 이질감을 느끼지 않도록 하는 단말을 제공할 수 있다.According to the present invention, it is possible to provide a terminal capable of inducing safe driving of a driver by accurately detecting and preventing drowsy driving. In addition, it is possible to provide a terminal capable of enhancing driver's driving convenience by actively and actively preventing drowsy driving. In addition, in detecting and preventing drowsy driving, it is possible to provide a terminal that prevents the driver from feeling uncomfortable and heterogeneous.

다만, 본 발명의 실시 예들에 따른 졸음운전 검출 및 방지 기능을 제공하는 단말 및 방법이 달성할 수 있는 효과는 이상에서 언급한 것들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.However, the effects that can be achieved by the terminal and method for detecting and preventing drowsy driving according to embodiments of the present invention are not limited to those mentioned above, and other effects not mentioned above can be seen from the description below. It will be clearly understood by those skilled in the art to which the invention belongs.

본 발명에 관한 이해를 돕기 위해 상세한 설명의 일부로 포함되는, 첨부도면은 본 발명에 대한 실시예를 제공하고, 상세한 설명과 함께 본 발명의 기술적 사상을 설명한다.
도 1은 본 발명의 일 실시예에 따른 시스템 구조를 도시한 개념도이다.
도 2는 본 발명의 일 실시예에 따른 단말의 구성을 도시한 블록도이다.
도 3은 본 발명의 일 실시예에 따른 단말의 동작을 도시한 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 제1 측정 데이터에 포함된 구성을 도시한 개념도이다.
도 5는 본 발명의 일 실시예에 따른 눈동자 정보를 측정하기 위한 파라미터들을 도시한 개념도이다.
도 6은 본 발명의 일 실시예에 따른 제2 측정 데이터에 포함된 구성을 도시한 개념도이다.
도 7은 본 발명의 일 실시예에 따른 제3 측정 데이터에 포함된 구성을 도시한 개념도이다.
도 8은 본 발명의 일 실시예에 따른 제1 인자, 제2 인자 및 제3 인자를 추출하는 방법을 도시한 개념도이다.
도 9는 대응 방안 지시맵의 제1 실시예를 도시한 개념도이다.
도 10은 대응 방안 지시맵의 제2 실시예를 도시한 개념도이다.
도 11은 본 발명의 일 실시예에 따른 단말의 하드웨어 구성을 나타낸 예시도이다.The accompanying drawings, which are included as part of the detailed description to aid understanding of the present invention, provide examples of the present invention and explain the technical idea of the present invention together with the detailed description.
1 is a conceptual diagram illustrating a system structure according to an embodiment of the present invention.
2 is a block diagram showing the configuration of a terminal according to an embodiment of the present invention.
3 is a flowchart illustrating the operation of a terminal according to an embodiment of the present invention.
4 is a conceptual diagram illustrating a configuration included in first measurement data according to an embodiment of the present invention.
5 is a conceptual diagram illustrating parameters for measuring pupil information according to an embodiment of the present invention.
6 is a conceptual diagram illustrating a configuration included in second measurement data according to an embodiment of the present invention.
7 is a conceptual diagram illustrating a configuration included in third measurement data according to an embodiment of the present invention.
8 is a conceptual diagram illustrating a method of extracting a first factor, a second factor, and a third factor according to an embodiment of the present invention.
9 is a conceptual diagram illustrating a first embodiment of a countermeasure direction map.
10 is a conceptual diagram illustrating a second embodiment of a countermeasure direction map.
11 is an exemplary diagram showing a hardware configuration of a terminal according to an embodiment of the present invention.

본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.Since the present invention can make various changes and have various embodiments, specific embodiments are illustrated in the drawings and described in detail. However, this is not intended to limit the present invention to specific embodiments, and should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.Terms such as first and second may be used to describe various components, but the components should not be limited by the terms. These terms are only used for the purpose of distinguishing one component from another. For example, a first element may be termed a second element, and similarly, a second element may be termed a first element, without departing from the scope of the present invention. The terms and/or include any combination of a plurality of related recited items or any of a plurality of related recited items.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, but other elements may exist in the middle. It should be. On the other hand, when an element is referred to as “directly connected” or “directly connected” to another element, it should be understood that no other element exists in the middle.

본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.Terms used in this application are only used to describe specific embodiments, and are not intended to limit the present invention. Singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, the terms "include" or "have" are intended to designate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, but one or more other features It should be understood that the presence or addition of numbers, steps, operations, components, parts, or combinations thereof is not precluded.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which the present invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the related art, and unless explicitly defined in this application, they should not be interpreted in an ideal or excessively formal meaning. don't

이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.Hereinafter, with reference to the accompanying drawings, preferred embodiments of the present invention will be described in more detail. In order to facilitate overall understanding in the description of the present invention, the same reference numerals are used for the same components in the drawings, and redundant descriptions of the same components are omitted.

명세서 전체에서 단말(terminal)은 이동국(mobile station), 이동 단말(mobile terminal), 가입자국(subscriber station), 휴대 가입자국(portable subscriber station), 사용자 장치(user equipment), 접근 단말(access terminal) 등을 지칭할 수도 있고, 단말, 이동국, 이동 단말, 가입자국, 휴대 가입자 국, 사용자 장치, 접근 단말 등의 전부 또는 일부의 기능을 포함할 수도 있다.Throughout the specification, a terminal includes a mobile station, a mobile terminal, a subscriber station, a portable subscriber station, a user equipment, and an access terminal. It may refer to a terminal, a mobile station, a mobile terminal, a subscriber station, a mobile subscriber station, a user device, an access terminal, or the like, and may include all or some functions of a terminal, a mobile station, a mobile terminal, a subscriber station, a mobile subscriber station, a user equipment, an access terminal, and the like.

여기서, 단말로 통신이 가능한 데스크탑 컴퓨터(desktop computer), 랩탑 컴퓨터(laptop computer), 태블릿(tablet) PC, 무선전화기(wireless phone), 모바일폰(mobile phone), 스마트 폰(smart phone), 스마트 워치(smart watch), 스마트 글래스(smart glass), e-book 리더기, PMP(portable multimedia player), 휴대용 게임기, 네비게이션(navigation) 장치, 디지털 카메라(digital camera), DMB (digital multimedia broadcasting) 재생기, 디지털 음성 녹음기(digital audio recorder), 디지털 음성 재생기(digital audio player), 디지털 영상 녹화기(digital picture recorder), 디지털 영상 재생기(digital picture player), 디지털 동영상 녹화기(digital video recorder), 디지털 동영상 재생기(digital video player) 등을 사용할 수 있다.Here, a desktop computer capable of communicating with a terminal, a laptop computer, a tablet PC, a wireless phone, a mobile phone, a smart phone, and a smart watch (smart watch), smart glass, e-book reader, PMP (portable multimedia player), portable game device, navigation device, digital camera, DMB (digital multimedia broadcasting) player, digital voice digital audio recorder, digital audio player, digital picture recorder, digital picture player, digital video recorder, digital video player ) can be used.

도 1은 본 발명의 일 실시예에 따른 시스템 구조를 도시한 개념도이다.1 is a conceptual diagram illustrating a system structure according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일 실시예에 따른 시스템은 운전자, 운전자의 졸음운전 여부를 검출하고, 적절한 대응방안을 수행할 것을 지시하는 단말(100)을 포함할 수 있다. 일 실시예로서, 단말(100)은 디지털 운행 기록계(Digital Tacho Graph, DTG) 형태의 단말일 수 있으나 이러한 형태에 제한되는 것은 아니다. 단말(100)은 자동차 운행에 관련한 정보를 측정 및 기록하는 기능 외에 본 발명에서 수행하는 졸음운전 여부를 검출하고, 대응방안이 지시 및 실행되도록 하는 기능을 수행할 수 있다. 본 발명에 따른 졸음운전을 관리하는 단말(100)이 수행하는 기능은 하나의 단말을 통해 수행될 수도 있고, 별도의 추가 단말을 통해 함께 수행될 수 도 있다.Referring to FIG. 1 , a system according to an embodiment of the present invention may include a driver and a terminal 100 that detects whether or not the driver is drowsy driving and instructs to perform appropriate countermeasures. As an embodiment, the terminal 100 may be a digital tacho graph (DTG) type terminal, but is not limited to this type. In addition to measuring and recording information related to vehicle operation, the terminal 100 may perform functions performed in the present invention to detect drowsy driving and to instruct and execute countermeasures. The function performed by the terminal 100 for managing drowsy driving according to the present invention may be performed through one terminal or together through a separate additional terminal.

단말(100)에는 데이터를 산출하기 위한 측정장비들, GPS(Global Positioning System) 안테나 등이 연결되기 위한 복수의 커넥터들이 구비될 수 있다. 복수의 커넥터들 중 어느 하나는 차량의 속도, 가속도, 브레이크 신호, 엔진 회전 수 등과 같은 차량의 운행정보를 실시간으로 수신하기 위한 커넥터일 수 있다. 단말(100)이 측정, 분석 및 지시 동작을 수행함에 따라 생성되는 위한 데이터들은 메모리와 같은 저장장치에 저장될 수 있다.The terminal 100 may be provided with a plurality of connectors for connecting measurement equipment for calculating data, a Global Positioning System (GPS) antenna, and the like. Any one of the plurality of connectors may be a connector for receiving vehicle operation information such as vehicle speed, acceleration, brake signal, engine speed, and the like in real time. Data generated as the terminal 100 performs measurement, analysis, and indication operations may be stored in a storage device such as a memory.

도 2는 본 발명의 일 실시예에 따른 단말의 구성을 도시한 블록도이다.2 is a block diagram showing the configuration of a terminal according to an embodiment of the present invention.

도 2를 참조하면, 본 발명에 따른 단말(100)은 운전자의 졸음운전 여부를 확인하기 위한 데이터들을 생성하기 위한 측정부(10), 생성된 데이터들에 기반하여 졸음운전 여부를 분석하는 분석부(20) 및 운전자의 졸음운전에 대한 적절한 대응방안을 지시하는 지시부(30)을 포함할 수 있다. 여기서, 측정부(10)는 운전자의 상태를 측정하는 제1 측정부(10-1), 차량 내부 및 외부의 환경을 측정하는 제2 측정부(10-2) 및 차량에 존재하는 부속품들의 정보를 측정하는 제3 측정부(10-3)을 포함할 수 있다. 본 발명에 따른 단말(100)의 상세한 동작 프로세스는 도 3을 참조하여 상세하게 설명한다.Referring to FIG. 2 , a terminal 100 according to the present invention includes a measuring unit 10 for generating data for determining whether a driver is drowsy driving or not, and an analysis unit for analyzing whether or not the driver is drowsy driving based on the generated data. (20) and an instruction unit (30) for instructing an appropriate countermeasure against the driver's drowsy driving. Here, the measurement unit 10 includes a first measurement unit 10-1 that measures the driver's condition, a second measurement unit 10-2 that measures the environment inside and outside the vehicle, and information on accessories present in the vehicle. It may include a third measuring unit 10-3 for measuring. A detailed operating process of the terminal 100 according to the present invention will be described in detail with reference to FIG. 3 .

도 3은 본 발명의 일 실시예에 따른 단말의 동작을 도시한 흐름도이다.3 is a flowchart illustrating the operation of a terminal according to an embodiment of the present invention.

도 3을 참조하면, 측정부(10)는 운전자의 졸음운전 여부를 확인하기 위한 데이터들을 측정할 수 있다. 제1 측정부(10-1)는 운전자의 상태를 측정하기 위한 제1 측정을 수행할 수 있고, 제1 측정을 통해 제1 측정 데이터를 생성할 수 있다(S301).Referring to FIG. 3 , the measurement unit 10 may measure data for determining whether a driver is drowsy driving. The first measurement unit 10 - 1 may perform a first measurement to measure the driver's condition and generate first measurement data through the first measurement ( S301 ).

도 4는 본 발명의 일 실시예에 따른 제1 측정 데이터에 포함된 구성을 도시한 개념도이다. 도 4를 참조하면, 제1 측정 데이터는 운전자의 눈동자 상태 정보, 심박수 정보, 호흡 정보, 체온 정보 및 근육 이완 정보를 포함할 수 있다.4 is a conceptual diagram illustrating a configuration included in first measurement data according to an embodiment of the present invention. Referring to FIG. 4 , the first measurement data may include driver's eye condition information, heart rate information, respiration information, body temperature information, and muscle relaxation information.

제1 측정 데이터는 제1 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제1 평가지수를 더 포함할 수 있다. 제1 평가 지수는 운전자의 눈동자 상태 정보, 심박수 정보, 호흡 정보, 체온 정보 및 근육 이완 정보가 운전자의 졸음운전 가능성과 얼마만큼 관련성이 있는지 여부를 표시하는 지수일 수 있다. 제1 평가 지수는 각 정보마다 개별적으로 표시될 수 있고, 예를 들어, 1 내지 10 중 어느 하나의 값으로 표시될 수 있다. 이때 값이 클수록 졸음운전과의 관련성이 높은 요인인 것으로 평가될 수 있다.The first measurement data may further include a first evaluation index representing a relationship between information included in the first measurement data and drowsy driving. The first evaluation index may be an index indicating how much the driver's pupil condition information, heart rate information, breathing information, body temperature information, and muscle relaxation information are related to the driver's drowsy driving possibility. The first evaluation index may be individually displayed for each piece of information, and may be displayed as any one value from 1 to 10, for example. At this time, the higher the value, the higher the correlation with drowsy driving can be evaluated.

도 5는 본 발명의 일 실시예에 따른 눈동자 정보를 측정하기 위한 파라미터들을 도시한 개념도이다. 도 5를 참조하면, 운전자의 눈동자 상태 정보는, 운전자의 눈동자의 면적, 동공의 면적, 눈동자의 세로 길이, 동공의 세로 길이 및 조도 정보에 기초하여 계산된 값일 수 있다. 운전자의 눈동자가 눈꺼풀에 가려지는 경우, 일시적으로 차량에 입사되는 빛에 의한 요인일 수도 있기 때문에, 차량 내부에 입사되는 조도 값이 고려되어야 하며, 운전자가 눈동자가 눈꺼풀에 가려지는 지속시간도 고려되어야 할 수 있다. 또한 운전자의 한쪽 눈동자가 아닌 양쪽 눈동자에 대한 데이터를 측정하여야 정확도를 높일 수 있다. 5 is a conceptual diagram illustrating parameters for measuring pupil information according to an embodiment of the present invention. Referring to FIG. 5 , the driver's pupil state information may be a value calculated based on the driver's pupil area, pupil area, pupil vertical length, pupil vertical length, and illuminance information. If the driver's pupils are covered by the eyelids, it may be a factor caused by the light incident on the vehicle temporarily. Therefore, the illuminance value incident on the inside of the vehicle should be considered, and the duration of the driver's pupils covered by the eyelids should also be considered. can do. In addition, the accuracy can be increased by measuring the data for both pupils of the driver, not just one pupil.

또한 특정 시점의 눈동자와 동공의 면적, 눈동자와 동공의 세로길이를 운전자의 일반상태에서의 표준 값들과 비교하여 졸음운전 여부에 대한 판단이 정확하게 수행되도록 할 수 있다. 일 실시예로서, 운전자의 눈동자 정보는 하기 수학식 1에 의해 생성되는 값일 수 있다.In addition, it is possible to accurately determine whether or not to drive while drowsy by comparing the pupil and pupil area and the vertical length of the pupil and pupil at a specific time point with standard values in the driver's normal state. As an embodiment, the driver's pupil information may be a value generated by Equation 1 below.

(수학식 1)(Equation 1)

Figure 112021121858675-pat00032
Figure 112021121858675-pat00032

여기서,

Figure 112021121858675-pat00033
는
Figure 112021121858675-pat00034
시점에서의 운전자의 눈동자 상태 정보,
Figure 112021121858675-pat00035
는
Figure 112021121858675-pat00036
시점에서 왼쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00037
표준 상태에서 왼쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00038
은
Figure 112021121858675-pat00039
시점에서 오른쪽 눈동자의 면적,
Figure 112021121858675-pat00040
은 표준 상태에서 왼쪽 눈동자의 면적,
Figure 112021121858675-pat00041
은
Figure 112021121858675-pat00042
시점에서 오른쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00043
은 표준 상태에서의 오른쪽 눈동자 동공의 면적,
Figure 112021121858675-pat00044
은
Figure 112021121858675-pat00045
시점에서의 오른쪽 눈동자의 면적,
Figure 112021121858675-pat00046
표준 상태에서 오른쪽 눈동자의 면적,
Figure 112021121858675-pat00047
은
Figure 112021121858675-pat00048
시점에서 왼쪽 동공의 세로 길이,
Figure 112021121858675-pat00049
은 표준 상태에서 왼쪽 동공의 세로길이,
Figure 112021121858675-pat00050
은
Figure 112021121858675-pat00051
시점에서 왼쪽 눈동자의 세로 길이,
Figure 112021121858675-pat00052
은 표준 상태에서 왼쪽 눈동자의 세로 길이,
Figure 112021121858675-pat00053
은
Figure 112021121858675-pat00054
시점에서 오른쪽 동공의 세로 길이,
Figure 112021121858675-pat00055
은 표준 상태에서 오른쪽 동공의 세로 길이,
Figure 112021121858675-pat00056
은
Figure 112021121858675-pat00057
시점에서 오른쪽 눈동자의 세로 길이,
Figure 112021121858675-pat00058
은 표준 상태에서 오른쪽 눈동자의 세로 길이이고,
Figure 112021121858675-pat00059
는 차량 내부의 조도,
Figure 112021121858675-pat00060
및
Figure 112021121858675-pat00061
는 운전자의 오른쪽 눈과 왼쪽눈의 상태를 반영한 가중치일 수 있다. 추가적으로 지속시간
Figure 112021121858675-pat00062
가 고려될 수 있다.
Figure 112021121858675-pat00063
값은 빛의 양이 기 설정된 임계 값보다 높은 경우, 0에 가까운 값으로 계산될 수 있다. here,
Figure 112021121858675-pat00033
Is
Figure 112021121858675-pat00034
Driver's pupil state information at the point of view,
Figure 112021121858675-pat00035
Is
Figure 112021121858675-pat00036
The area of the pupil of the left pupil at the time point,
Figure 112021121858675-pat00037
The area of the pupil of the left pupil under normal conditions,
Figure 112021121858675-pat00038
silver
Figure 112021121858675-pat00039
The area of the right pupil at the time point,
Figure 112021121858675-pat00040
is the area of the left pupil in the standard state,
Figure 112021121858675-pat00041
silver
Figure 112021121858675-pat00042
The area of the pupil of the right pupil at the time point,
Figure 112021121858675-pat00043
is the area of the pupil of the right pupil under standard conditions,
Figure 112021121858675-pat00044
silver
Figure 112021121858675-pat00045
The area of the right pupil at the time point,
Figure 112021121858675-pat00046
The area of the right pupil under normal conditions,
Figure 112021121858675-pat00047
silver
Figure 112021121858675-pat00048
The vertical length of the left pupil at the point of view,
Figure 112021121858675-pat00049
is the vertical length of the left pupil in the standard state,
Figure 112021121858675-pat00050
silver
Figure 112021121858675-pat00051
The vertical length of the left pupil at the point of view,
Figure 112021121858675-pat00052
is the vertical length of the left pupil in the standard state,
Figure 112021121858675-pat00053
silver
Figure 112021121858675-pat00054
The vertical length of the right pupil at the point of view,
Figure 112021121858675-pat00055
is the vertical length of the right pupil in the standard state,
Figure 112021121858675-pat00056
silver
Figure 112021121858675-pat00057
The vertical length of the right pupil at the point of view,
Figure 112021121858675-pat00058
is the vertical length of the right pupil in the standard state,
Figure 112021121858675-pat00059
is the illuminance inside the vehicle,
Figure 112021121858675-pat00060
and
Figure 112021121858675-pat00061
may be a weight that reflects the states of the driver's right eye and left eye. additional duration
Figure 112021121858675-pat00062
may be considered.
Figure 112021121858675-pat00063
The value may be calculated as a value close to 0 when the amount of light is higher than a predetermined threshold value.

일 실시예로서,

Figure 112021121858675-pat00064
값이 3을 초과하는 경우, 운전자가 졸음운전을 하고 있는 상태인 것으로 판단할 수 있고, 이 경우, 눈동자 상태 정보에 대한 제1 평가 지수가 높게 책정될 수 있다.As one embodiment,
Figure 112021121858675-pat00064
When the value exceeds 3, it may be determined that the driver is drowsy driving, and in this case, the first evaluation index for the pupil condition information may be set high.

다시 도 3을 참조하면, 제2 측정부(10-2)는 차량 내부 및 외부의 환경을 측정하기 위한 제2 측정을 수행할 수 있고, 제2 측정을 통해 제2 측정 데이터를 생성할 수 있다(S302).Referring back to FIG. 3 , the second measurement unit 10 - 2 may perform a second measurement for measuring the environment inside and outside the vehicle, and may generate second measurement data through the second measurement. (S302).

도 6은 본 발명의 일 실시예에 따른 제2 측정 데이터에 포함된 구성을 도시한 개념도이다. 도 6을 참조하면, 제2 측정 데이터는 차량 내부에 존재하는 이산화탄소 농도 정보, 차량 내부의 온도 및 차량 내부에 입사되는 조도 정보인 차량 내부 정보와, 차량의 차선이탈 정보, 주행 중인 도로의 상태 정보, 속도 정보 및 가속도 정보인 차량의 외부 정보를 포함할 수 있다. 또한 제2 측정 데이터는 제2 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제2 평가지수를 더 포함할 수 있다.6 is a conceptual diagram illustrating a configuration included in second measurement data according to an embodiment of the present invention. Referring to FIG. 6 , the second measurement data includes information on the carbon dioxide concentration present inside the vehicle, temperature inside the vehicle, and information about the illumination incident on the inside of the vehicle, lane departure information of the vehicle, and state information of the road being driven. , may include external information of the vehicle such as speed information and acceleration information. In addition, the second measurement data may further include a second evaluation index representing a relationship between information included in the second measurement data and drowsy driving.

제2 평가 지수는 차량 내부에 존재하는 이산화탄소 농도 정보, 차량 내부의 온도 및 차량 내부에 입사되는 조도 정보, 차량의 차선이탈 정보, 주행 중인 도로의 상태 정보, 속도 정보 및 가속도 정보가 운전자의 졸음운전 가능성과 얼마만큼 관련성이 있는지 여부를 표시하는 지수일 수 있다. 제2 평가 지수는 각 정보마다 개별적으로 표시될 수 있고, 예를 들어, 1 내지 10 중 어느 하나의 값으로 표시될 수 있다. 이때 값이 클수록 졸음운전과의 관련성이 높은 요인인 것으로 평가될 수 있다.The second evaluation index is the carbon dioxide concentration information present inside the vehicle, the temperature inside the vehicle, the illumination intensity information incident inside the vehicle, the lane departure information of the vehicle, the state information of the road being driven, the speed information, and the acceleration information of the driver's drowsy driving. It can be an index that indicates how much it is related to the probability. The second evaluation index may be individually displayed for each piece of information, and may be displayed as any one value from 1 to 10, for example. At this time, the higher the value, the higher the correlation with drowsy driving can be evaluated.

다시 도 3을 참조하면, 제3 측정부(10-3)는 상기 차량에 존재하는 부속품들의 변동 정보를 측정하기 위한 제3 측정을 수행할 수 있고, 제3 측정을 통해 제3 측정 데이터를 생성할 수 있다(S303).Referring back to FIG. 3 , the third measurement unit 10 - 3 may perform a third measurement for measuring change information of accessories present in the vehicle, and generate third measurement data through the third measurement. It can (S303).

도 7은 본 발명의 일 실시예에 따른 제3 측정 데이터에 포함된 구성을 도시한 개념도이다. 도 7을 참조하면, 제3 측정 데이터는 차량의 핸들에 감지된 압력 정보, 운전자가 착용한 안전벨트가 감겨져 있는 정도를 나타내는 정보, 기어가 위치한 포지션 정보, 패달(pedal)에 감지된 압력 변화 정보 및 운전자가 착석한 시트에 가해진 압력 정보를 포함할 수 있다. 또한 제3 측정 데이터는 제3 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제3 평가지수를 더 포함할 수 있다.7 is a conceptual diagram illustrating a configuration included in third measurement data according to an embodiment of the present invention. Referring to FIG. 7 , the third measurement data includes pressure information detected on the steering wheel of the vehicle, information indicating how much the seat belt worn by the driver is wound, information on the position of the gear, and pressure change information detected on the pedal. and pressure information applied to a seat in which the driver sits. In addition, the third measurement data may further include a third evaluation index representing a relationship between information included in the third measurement data and drowsy driving.

제3 평가 지수는 차량의 핸들에 감지된 압력 정보, 운전자가 착용한 안전벨트가 감겨져 있는 정도를 나타내는 정보, 기어가 위치한 포지션 정보, 패달(pedal)에 감지된 압력 변화 정보 및 운전자가 착석한 시트에 가해진 압력 정보가 운전자의 졸음운전 가능성과 얼마만큼 관련성이 있는지 여부를 표시하는 지수일 수 있다. 제2 평가 지수는 각 정보마다 개별적으로 표시될 수 있고, 예를 들어, 1 내지 10 중 어느 하나의 값으로 표시될 수 있다. 이때 값이 클수록 졸음운전과의 관련성이 높은 요인인 것으로 평가될 수 있다.The third evaluation index is pressure information detected on the steering wheel of the vehicle, information indicating the extent to which the seat belt worn by the driver is wound, information on the position of the gear, pressure change information detected on the pedal, and seat seat on which the driver is seated. It may be an index indicating how much the pressure information applied to is related to the driver's drowsy driving possibility. The second evaluation index may be individually displayed for each piece of information, and may be displayed as any one value from 1 to 10, for example. At this time, the higher the value, the higher the correlation with drowsy driving can be evaluated.

다시 도 3을 참조하면, 측정부(10)는 제1 측정 데이터, 제2 측정 데이터 및 제3 측정 데이터를 분석부(20)로 전송할 수 있다(S304). 분석부(20)는 제1 측정 데이터, 제2 측정 데이터 및 제3 측정 데이터를 수신할 수 있다(S304).Referring back to FIG. 3 , the measurement unit 10 may transmit the first measurement data, the second measurement data, and the third measurement data to the analysis unit 20 (S304). The analysis unit 20 may receive first measurement data, second measurement data, and third measurement data (S304).

도 8은 본 발명의 일 실시예에 따른 제1 인자, 제2 인자 및 제3 인자를 추출하는 방법을 도시한 개념도이다.8 is a conceptual diagram illustrating a method of extracting a first factor, a second factor, and a third factor according to an embodiment of the present invention.

도 8을 참조하면, 분석부(20)는 제1 측정 데이터 및 제2 측정 데이터와의 연계성을 표시하는 제1 인자, 상기 제2 측정 데이터 및 제3 측정 데이터와의 연계성을 표시하는 제2 인자 및 상기 제3 측정 데이터 및 제1 측정 데이터와의 연계성을 표시하는 제3 인자를 추출할 수 있다(S305, S306 및 S307).Referring to FIG. 8 , the analysis unit 20 includes a first factor indicating connectivity with the first measurement data and second measurement data, and a second factor indicating connectivity with the second measurement data and third measurement data. And a third factor indicating the correlation between the third measurement data and the first measurement data may be extracted (S305, S306, and S307).

여기서, 1 인자는 상기 제1 평가 지수 및 제2 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합일 수 있고, 제2 인자는 제2 평가 지수 및 제3 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합일 수 있으며, 제3 인자는 제 3 평가 지수 및 제1 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합일 수 있다.Here, factor 1 may be an ordered pair set of factors in which the first evaluation index and the second evaluation index have a predetermined threshold value or more, and the second factor may have a second evaluation index and a third evaluation index greater than or equal to a predetermined threshold value. It may be an ordered pair set of factors having , and the third factor may be an ordered pair set of factors in which the third evaluation index and the first evaluation index are equal to or greater than a predetermined threshold value.

예를 들어, 제1 인자는 제1 평가 지수와 제2 평가 지수가 8이상으로 평가된 정보들의 순서쌍 집합일 수 있다. 즉, (운전자의 근육 이완 정보, 차량의 속도 정보), (운전자의 눈동자 상태 정보, 이산화탄소 농도 정보) 등일 수 있다. 제2 인자는 제2 평가 지수와 제3 평가 지수가 8이상으로 평가된 정보들의 순서쌍 집합일 수 있다. 즉, (차량의 속도 정보, 패달에 감지된 압력 정보), (이산화탄소 농도 정보, 운전자가 착석한 시트에 가해진 압력 정보) 등일 수 있다. 제3 인자는 제3 평가 지수와 제1 평가 지수가 8이상으로 평가된 정보들의 순서쌍 집합일 수 있다. 즉, (운전자가 착용한 안전벨트가 감겨져 있는 정도, 운전자의 근육 이완 정보), (핸들에 감지된 압력 정보, 운전자의 눈동자 상태 정보) 등일 수 있다. 제1 인자, 제2 인자 및 제3 인자는 복수의 개수로 추출될 수 있다.For example, the first factor may be a set of ordered pairs of information in which the first evaluation index and the second evaluation index are evaluated as 8 or higher. That is, it may be (driver's muscle relaxation information, vehicle speed information), (driver's pupil state information, carbon dioxide concentration information), and the like. The second factor may be a set of ordered pairs of information in which the second evaluation index and the third evaluation index are evaluated as 8 or higher. That is, it may be (vehicle speed information, pressure information detected on the pedals), (carbon dioxide concentration information, pressure information applied to a seat on which the driver sits), and the like. The third factor may be a set of ordered pairs of information in which the third evaluation index and the first evaluation index are evaluated as 8 or higher. That is, it may be (the extent to which the seat belt worn by the driver is wound, information on muscle relaxation of the driver), (information on the pressure detected on the steering wheel, information on the state of the driver's eyes), and the like. The first factor, the second factor, and the third factor may be extracted in a plurality of numbers.

다시 도 3을 참조하면, 분석부(20)는 제1 인자, 제2 인자 및 제3 인자를 지시부(30)에 전송할 수 있다(S308). 지시부(30)는 제1 인자, 제2 인자 및 제3 인자를 수신할 수 있다(S308). 지시부(30)는 수신한 제1 인자, 제2 인자 및 제3 인자에 기초하여 지시맵을 생성할 수 있다(S309). 그리고 지시맵에 기초하여 적절한 대응방안이 수행되도록 지시할 수 있다(S310).Referring back to FIG. 3 , the analysis unit 20 may transmit the first factor, the second factor, and the third factor to the instruction unit 30 (S308). The instruction unit 30 may receive the first factor, the second factor, and the third factor (S308). The instruction unit 30 may generate an instruction map based on the received first factor, second factor, and third factor (S309). Based on the instruction map, an appropriate countermeasure may be instructed to be performed (S310).

도 9는 대응 방안 지시맵의 제1 실시예를 도시한 개념도이다. 도 9를 참조하면, 지시부(30)는 제1 인자, 제2 인자 및 제3 인자를 기초로 적절한 대응 방안을 도출하기 위해 지시맵을 생성할 수 있다.9 is a conceptual diagram illustrating a first embodiment of a countermeasure direction map. Referring to FIG. 9 , the instruction unit 30 may generate an instruction map to derive an appropriate countermeasure based on the first factor, the second factor, and the third factor.

예를 들어, 지시부(30)는 제1 인자, 제2 인자 및 제3 인자를 기초로 일차적으로 적절한 대응방안들(예를 들어, 대응방안 A, 대응방안 B, 대응방안 C, 대응방안 D 및 대응방안 E)를 결정할 수 있다. 그리고 지시부(30)은 각 대응방안들에 대한 적합도를 산출하고, 미리 설정된 값 이하의 적합도를 가지는 대응방안(예를 들어, 대응방안 E)을 배제할 수 있다.For example, the instruction unit 30 selects appropriate countermeasures (e.g., countermeasure A, countermeasure B, countermeasure C, countermeasure D and Countermeasure E) can be determined. In addition, the instruction unit 30 may calculate the degree of suitability for each of the countermeasures, and may exclude a countermeasure (eg, countermeasure E) having a degree of suitability equal to or less than a preset value.

지시부(30)는 미리 확보한 기존 운전자들의 제1 인자, 제2 인자 및 제3 인자를 기초로 기존 운전자들과의 연결 관계를 생성하여 대응방안 지시맵을 생성할 수 있다. 일 실시예에 따르면, 기존 운전자들의 제1 인자, 제2 인자 및 제3 인자를 기초로 운전자 #1, 운전자 #2 및 운전자 #3과의 연결 관계를 포함하는 대응방안 지시맵을 생성할 수 있다. The instruction unit 30 may generate a countermeasure instruction map by creating a connection relationship with the existing drivers based on the first factor, the second factor, and the third factor of the existing drivers secured in advance. According to an embodiment, a countermeasure instruction map including a connection relationship with driver #1, driver #2, and driver #3 may be generated based on the first factor, the second factor, and the third factor of the existing drivers. .

지시부(30)는 생성한 대응방안 지시맵에서 제1 인자, 제2 인자 및 제3 인자와 운전자와 연결된 기존 운전자들의 운행 내역을 추가로 고려하여 가장 적합한 대응방안을 추출할 수 있다. 그리고 지시부(30)는 운전자의 제1 인자, 제2 인자 및 제3 인자와 함께 운전 습관 내역에 대한 유사도를 반영하여 높은 유사도를 가지는 운전자의 지시내역에 포함된 대응방안을 우선적으로 추출할 수 있다. The instruction unit 30 may extract the most suitable countermeasure by considering the first factor, the second factor, and the third factor in the generated countermeasure instruction map and the driving details of existing drivers connected to the driver. In addition, the instruction unit 30 may preferentially extract a countermeasure included in the driver's instruction details having a high degree of similarity by reflecting the driver's first factor, second factor, and third factor, as well as the degree of similarity to the details of driving habits. .

예를 들어, 인자 정보들 및 운전 습관 내역의 유사도 산출 결과, 특정 대응방안들이 산출되고, 운전자 #1내역의 유사도가 운전자 #2 내지 운전자 #3의 유사도보다 높은 경우, 지시부(30)는 운전자 #1에게 지시하였던 대응방안들(예를 들어, 대응방안 F, 대응방안 H, 및 대응방안 I 등)을 우선적으로 추출할 수 있다. 그리고 지시부(30)는 운전자에게 대한 낮은 적합도를 가지는 대응방안(예를 들어, 대응방안 E)을 고려하지 않거나 후순위로 제공할 수 있다. For example, when specific countermeasures are calculated as a result of calculating the similarity between the factor information and driving habit details, and the similarity between driver #1 is higher than the similarity between drivers #2 and #3, the indicator 30 displays the driver # Countermeasures instructed by 1 (eg, countermeasure F, countermeasure H, and countermeasure I, etc.) may be extracted preferentially. In addition, the instruction unit 30 may not consider a countermeasure (eg, countermeasure E) having a low degree of suitability for the driver or may provide it as a lower priority.

도 10은 대응 방안 지시맵의 제2 실시예를 도시한 개념도이다. 10 is a conceptual diagram illustrating a second embodiment of a countermeasure direction map.

도 10을 참조하면, 대응방안 지시맵은 운전자들의 제1 내지 제3 인자들 및 운행 습관 정보를 기초로 운전자들간 운전자 #1, 운전자 #2, 및 운전자 #3간의 연결 관계를 포함할 수 있다. 지시부(30)는 복수의 계층을 포함하는 대응방안 지시맵을 생성할 수 있다. 복수의 계층들 중에서 운전자 #1, 운전자 #2, 및 운전자 #3을 포함하는 계층은 제1 계층으로 지칭될 수 있다. Referring to FIG. 10 , the countermeasure instruction map may include a connection relationship among drivers #1, driver #2, and driver #3 based on the drivers' first to third factors and driving habit information. The instruction unit 30 may generate a countermeasure instruction map including a plurality of layers. Among the plurality of layers, a layer including driver #1, driver #2, and driver #3 may be referred to as a first layer.

그리고 지시부(30)는 제1 계층의 제1 내지 제3 인자들 및 운전자들의 특성 정보를 기초로 대응방안 지시맵을 확장하여, 추가 계층을 생성할 수 있다. 예를 들어, 지시부(30)는 운전자 #1의 제1 내지 제3 인자 정보 및 운전자들의 특성 정보를 기초로 운전자 #4, 운전자 #5, 및 운전자 #6과의 연결 관계를 생성할 수 있으며, 운전자 #2의 제1 내지 제3 인자 정보를 기초로 운전자 #7, 운전자#8, 및 운전자 #9과의 연결 관계를 생성할 수 있다. Further, the instruction unit 30 may generate an additional layer by extending the countermeasure instruction map based on the first to third factors of the first layer and the driver's characteristic information. For example, the instructing unit 30 may create connection relationships with drivers #4, #5, and #6 based on the first to third factor information of driver #1 and the driver's characteristic information; Based on the first to third factor information of driver #2, connection relationships with drivers #7, driver #8, and driver #9 may be created.

지시부(30)는 확장된 대응방안 지시맵을 기초로, 대응방안들의 추천 목록을 업데이트 할 수 있다. 예를 들어, 운전자들의 피드백 정보를 확인하여, 운전자 #1과의 연결 관계를 가지는 운전자 #4, 운전자#5, 및 운전자 #6의 지시내역을 기초로 대응방안 리스트를 업데이트할 수 있다. 지시부(30)는 제2 계층의 운전자들의 지시 내역에 포함된 대응방안들 각각에 대한 적합도를 산출할 수 있고, 산출된 적합도를 반영함으로써 대응방안 리스트를 보다 정확하게 업데이트할 수 있다. The instruction unit 30 may update the recommended list of countermeasures based on the expanded countermeasures instruction map. For example, the list of countermeasures may be updated based on the instructions of drivers #4, #5, and #6 having a connection relationship with driver #1 by checking the feedback information of the drivers. The instruction unit 30 may calculate the degree of suitability for each of the countermeasures included in the instructions of the drivers of the second layer, and may more accurately update the list of countermeasures by reflecting the calculated suitability.

도 11은 본 발명의 일 실시예에 따른 단말의 하드웨어 구성을 나타낸 예시도이다.11 is an exemplary diagram showing a hardware configuration of a terminal according to an embodiment of the present invention.

도 17을 참조하면, 단말(100)은, 통신을 수행하는 송수신 장치(110), 메모리(120) 및 적어도 하나의 프로세서(130)를 포함할 수 있다. 또한, 단말(100)은 입력 인터페이스 장치(140), 출력 인터페이스 장치(150), 저장 장치(160) 등을 더 포함할 수 있다. 단말(100)에 포함된 각각의 구성 요소들은 버스(bus)(170)에 의해 연결되어 서로 통신을 수행할 수 있다.Referring to FIG. 17 , a terminal 100 may include a transceiver 110 that performs communication, a memory 120, and at least one processor 130. In addition, the terminal 100 may further include an input interface device 140, an output interface device 150, a storage device 160, and the like. Each component included in the terminal 100 may be connected by a bus 170 to communicate with each other.

다만, 단말(100)에 포함된 각각의 구성요소들은 공통 버스(170)가 아니라, 프로세서(130)를 중심으로 개별 인터페이스 또는 개별 버스를 통하여 연결될 수도 있다. 예를 들어, 프로세서(130)는 메모리(120), 제1 금속 통신 장치(110), 입력 인터페이스 장치(140), 출력 인터페이스 장치(150) 및 저장 장치(160) 중에서 적어도 하나와 전용 인터페이스를 통하여 연결될 수도 있다.However, each component included in the terminal 100 may be connected through an individual interface or an individual bus centered on the processor 130 instead of the common bus 170 . For example, the processor 130 is connected to at least one of the memory 120, the first metal communication device 110, the input interface device 140, the output interface device 150, and the storage device 160 through a dedicated interface. may be connected.

프로세서(130)는 메모리(120) 및 저장 장치(160) 중에서 적어도 하나에 저장된 프로그램 명령(program command)을 실행할 수 있다. 프로세서(130)는 중앙 처리 장치(central processing unit, CPU), 그래픽 처리 장치(graphics processing unit, GPU), 또는 본 발명의 실시예들에 따른 방법들이 수행되는 전용의 프로세서를 의미할 수 있다. 메모리(120) 및 저장 장치(160) 각각은 휘발성 저장 매체 및 비휘발성 저장 매체 중에서 적어도 하나로 구성될 수 있다. 예를 들어, 메모리(120)는 읽기 전용 메모리(read only memory, ROM) 및 랜덤 액세스 메모리(random access memory, RAM) 중에서 적어도 하나로 구성될 수 있다. 한편, 제2 단말(200) 의 하드웨어 구성도는 단말(100)의 하드웨어 구성도와 동일할 수 있다.The processor 130 may execute a program command stored in at least one of the memory 120 and the storage device 160 . The processor 130 may refer to a central processing unit (CPU), a graphics processing unit (GPU), or a dedicated processor on which methods according to embodiments of the present invention are performed. Each of the memory 120 and the storage device 160 may include at least one of a volatile storage medium and a non-volatile storage medium. For example, the memory 120 may include at least one of a read only memory (ROM) and a random access memory (RAM). Meanwhile, a hardware configuration diagram of the second terminal 200 may be the same as that of the terminal 100 .

본 발명에 따른 방법들은 다양한 컴퓨터 수단을 통해 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 컴퓨터 판독 가능 매체에 기록되는 프로그램 명령은 본 발명을 위해 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.The methods according to the present invention may be implemented in the form of program instructions that can be executed by various computer means and recorded on a computer readable medium. Computer readable media may include program instructions, data files, data structures, etc. alone or in combination. Program instructions recorded on a computer readable medium may be specially designed and configured for the present invention or may be known and usable to those skilled in computer software.

컴퓨터 판독 가능 매체의 예에는 롬(rom), 램(ram), 플래시 메모리(flash memory) 등과 같이 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러(compiler)에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터(interpreter) 등을 사용해서 컴퓨터에 의해 실행될 수 있는 고급 언어 코드를 포함한다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 적어도 하나의 소프트웨어 모듈로 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.Examples of computer readable media include hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include high-level language codes that can be executed by a computer using an interpreter or the like as well as machine language codes generated by a compiler. The hardware device described above may be configured to operate with at least one software module to perform the operations of the present invention, and vice versa.

이상 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although described with reference to the above embodiments, those skilled in the art will understand that the present invention can be variously modified and changed without departing from the spirit and scope of the present invention described in the claims below. You will be able to.

Claims (9)

운전자의 졸음운전을 관리하는 단말에 있어서,
상기 운전자의 상태를 측정하여 제1 측정 데이터를 생성하는 제1 측정부;
차량 내부 및 외부의 환경을 측정하여 제2 측정 데이터를 생성하는 제2 측정부;
상기 차량에 존재하는 부속품들의 변동 정보를 측정하여 제3 측정 데이터를 생성하는 제3 측정부;
상기 제1 측정 데이터 및 제2 측정 데이터와의 연계성을 표시하는 제1 인자, 상기 제2 측정 데이터 및 제3 측정 데이터와의 연계성을 표시하는 제2 인자 및 상기 제3 측정 데이터 및 제1 측정 데이터와의 연계성을 표시하는 제3 인자에 기초하여 상기 운전자의 졸음운전 여부를 분석하는 분석부; 및
상기 분석 결과 상기 운전자가 졸음운전을 하고 있는 것으로 판단된 경우, 상기 제1 인자, 제2 인자 및 제3 인자 중 졸음운전에 영향을 미친 인자를 확인하고, 상기 확인된 인자에 상응하는 대응방안을 지시하는 지시부를 포함하는 것을 특징으로 하되,
상기 제1 측정 데이터는,
상기 운전자의 눈동자 상태 정보, 심박수 정보, 호흡 정보, 체온 정보 및 근육 이완 정보를 포함하고, 상기 제1 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제1 평가지수를 더 포함하고,
상기 제2 측정 데이터는,
차량 내부에 존재하는 이산화탄소 농도 정보, 차량 내부의 온도 및 차량 내부에 입사되는 조도 정보를 포함하고, 차량의 차선이탈 정보, 주행 중인 도로의 상태 정보, 속도 정보 및 가속도 정보를 더 포함하며, 상기 제2 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제2 평가지수를 더 포함하고,
상기 제3 측정 데이터는,
상기 차량의 핸들에 감지된 압력 정보, 상기 운전자가 착용한 안전벨트가 감겨져 있는 정도를 나타내는 정보, 기어가 위치한 포지션 정보, 패달(pedal)에 감지된 압력 변화 정보 및 상기 운전자가 착석한 시트에 가해진 압력 정보를 포함하며, 상기 제3 측정 데이터에 포함된 정보와 졸음운전과의 관련도를 나타내는 제3 평가지수를 더 포함하고,
상기 제1 인자는 상기 제1 평가 지수 및 제2 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합이고, 상기 제2 인자는 상기 제2 평가 지수 및 제3 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합이며, 상기 제3 인자는 상기 제 3 평가 지수 및 제1 평가 지수가 소정의 임계 값 이상을 가지는 인자들의 순서쌍 집합이고,
상기 지시부는, 상기 제1 인자, 제2 인자 및 제3 인자에 기초하여 대응방안 지시맵(map)을 생성하고, 상기 대응 방안 지시맵에 기초하여 대응방안을 지시하고,
상기 대응방안 지시맵은, 상기 운전자의 운전 습관 내역 정보를 반영하여 생성되고, 기존 운전자들 중에서, 상기 운전자의 운전 습관 내역 정보와의 미리 설정된 값 이상의 유사도를 갖는 운전자들인 제1 계층의 운전자들의 운전 습관 내역 정보를 포함하고,
상기 지시부는, 상기 제1 계층의 운전자들의 습관 내역 정보와 미리 설정된 값 이상의 유사도를 갖는 운전자들인 제2 계층의 운전자들을 탐색하고, 상기 제1 계층의 운전자들 및 상기 제2 계층의 운전자들 간의 연결 관계를 생성하고, 그리고 상기 제1 계층의 운전자들 및 상기 제2 계층의 운전자들 간의 연결 관계를 기초로 상기 대응방안 지시맵을 확장하는 것을 특징으로 하고,
상기 제1 계층의 운전자 중 적어도 하나의 운전자에 적용되는 대응방안은, 제1 대응방안 및 제2 대응방안을 포함하고, 상기 적어도 하나의 운전자에 대하여 확장된 상기 제2 계층의 운전자에 대하여 적용되는 대응방안은 상기 제1 대응방안 및 상기 제2 대응방안 중 적어도 하나를 포함하되, 상기 제1 대응방안 및 상기 제2 대응방안과 다른 대응방안을 포함하고, 상기 지시부는, 상기 제1 대응방안 및 상기 제2 대응방안 중 적어도 하나와 상기 다른 대응방안을 기초로 대응방안 리스트를 업데이트 하는,
운전자의 졸음운전을 관리하는 단말.
In the terminal for managing the driver's drowsy driving,
a first measurement unit configured to measure the driver's condition and generate first measurement data;
a second measuring unit measuring the environment inside and outside the vehicle and generating second measurement data;
a third measurement unit configured to generate third measurement data by measuring change information of accessories present in the vehicle;
A first factor indicating connectivity with the first measurement data and the second measurement data, a second factor indicating connectivity with the second measurement data and third measurement data, and the third measurement data and the first measurement data. an analysis unit that analyzes whether or not the driver is drowsy driving based on a third factor indicating connectivity with the driver; and
As a result of the analysis, when it is determined that the driver is drowsy driving, among the first factor, the second factor, and the third factor, factors affecting drowsy driving are identified, and a countermeasure corresponding to the identified factor is determined. It is characterized in that it includes an instruction unit for instructing,
The first measurement data,
A first evaluation index including the driver's eye condition information, heart rate information, breathing information, body temperature information, and muscle relaxation information, and indicating a degree of relationship between the information included in the first measurement data and drowsy driving,
The second measurement data,
It includes carbon dioxide concentration information present inside the vehicle, temperature inside the vehicle, and illuminance information incident on the inside of the vehicle, and further includes lane departure information of the vehicle, state information of the road being driven, speed information, and acceleration information, 2 Further comprising a second evaluation index indicating the degree of relationship between information included in the measurement data and drowsy driving,
The third measurement data,
Pressure information detected on the steering wheel of the vehicle, information indicating the extent to which the seat belt worn by the driver is wound, position information where the gear is located, pressure change information detected on the pedal, and information applied to the seat on which the driver sits It includes pressure information, and further includes a third evaluation index indicating a relationship between information included in the third measurement data and drowsy driving,
The first factor is an ordered pair set of factors in which the first evaluation index and the second evaluation index are greater than or equal to a predetermined threshold value, and the second factor is an ordered pair set of factors in which the second evaluation index and the third evaluation index are greater than or equal to a predetermined threshold value. An ordered pair set of factors having , wherein the third factor is an ordered pair set of factors in which the third evaluation index and the first evaluation index have a predetermined threshold value or more,
The instruction unit generates a countermeasure instruction map based on the first factor, the second factor, and the third factor, and instructs a countermeasure based on the countermeasure instruction map;
The counterplan instruction map is generated by reflecting the driver's driving habit detail information, and among the existing drivers, the driving habits of the drivers of the first tier, which are drivers having a similarity with the driver's driving habit detail information over a preset value Include habit history information;
The instruction unit searches for drivers of the second level, which are drivers having a similarity with the habit history information of the drivers of the first level and equal to or greater than a preset value, and connects the drivers of the first level with the drivers of the second level. Creating a relationship, and expanding the countermeasure instruction map based on the connection relationship between the drivers of the first layer and the drivers of the second layer,
The countermeasure applied to at least one driver among the drivers of the first level includes a first countermeasure and a second countermeasure, and is applied to the driver of the second level extended to the at least one driver. The countermeasure includes at least one of the first countermeasure and the second countermeasure, and includes a countermeasure different from the first countermeasure and the second countermeasure, and the instruction unit includes the first countermeasure and the second countermeasure. Updating a countermeasure list based on at least one of the second countermeasures and the other countermeasures;
A terminal that manages the driver's drowsy driving.
 삭제delete 청구항 1에 있어서,
상기 운전자의 눈동자 상태 정보는,
상기 운전자의 눈동자의 면적, 동공의 면적, 눈동자의 세로 길이, 동공의 세로 길이 및 조도 정보에 기초하여 하기 수학식 1에 의해 생성되는 값인 것을 특징으로 하는, 운전자의 졸음운전을 관리하는 단말.
(수학식 1)
Figure 112023022941399-pat00065

(여기서,
Figure 112023022941399-pat00066
는
Figure 112023022941399-pat00067
시점에서의 운전자의 눈동자 상태 정보,
Figure 112023022941399-pat00068
는
Figure 112023022941399-pat00069
시점에서 왼쪽 눈동자 동공의 면적,
Figure 112023022941399-pat00070
표준 상태에서 왼쪽 눈동자 동공의 면적,
Figure 112023022941399-pat00071
은
Figure 112023022941399-pat00072
시점에서 오른쪽 눈동자의 면적,
Figure 112023022941399-pat00073
은 표준 상태에서 왼쪽 눈동자의 면적,
Figure 112023022941399-pat00074
은
Figure 112023022941399-pat00075
시점에서 오른쪽 눈동자 동공의 면적,
Figure 112023022941399-pat00076
은 표준 상태에서의 오른쪽 눈동자 동공의 면적,
Figure 112023022941399-pat00077
은
Figure 112023022941399-pat00078
시점에서의 오른쪽 눈동자의 면적,
Figure 112023022941399-pat00079
표준 상태에서 오른쪽 눈동자의 면적,
Figure 112023022941399-pat00080
은
Figure 112023022941399-pat00081
시점에서 왼쪽 동공의 세로 길이,
Figure 112023022941399-pat00082
은 표준 상태에서 왼쪽 동공의 세로길이,
Figure 112023022941399-pat00083
은
Figure 112023022941399-pat00084
시점에서 왼쪽 눈동자의 세로 길이,
Figure 112023022941399-pat00085
은 표준 상태에서 왼쪽 눈동자의 세로 길이,
Figure 112023022941399-pat00086
은
Figure 112023022941399-pat00087
시점에서 오른쪽 동공의 세로 길이,
Figure 112023022941399-pat00088
은 표준 상태에서 오른쪽 동공의 세로 길이,
Figure 112023022941399-pat00089
은
Figure 112023022941399-pat00090
시점에서 오른쪽 눈동자의 세로 길이,
Figure 112023022941399-pat00091
은 표준 상태에서 오른쪽 눈동자의 세로 길이이고,
Figure 112023022941399-pat00092
는 차량 내부의 조도,
Figure 112023022941399-pat00093
는 지속시간,
Figure 112023022941399-pat00094
및
Figure 112023022941399-pat00095
는 운전자의 오른쪽 눈과 왼쪽눈의 상태를 반영한 가중치임.)
The method of claim 1,
The driver's pupil state information,
A terminal for managing drowsy driving of a driver, characterized in that the value generated by Equation 1 below based on the area of the pupil, the area of the pupil, the vertical length of the pupil, the vertical length of the pupil, and the illuminance information of the driver.
(Equation 1)
Figure 112023022941399-pat00065

(here,
Figure 112023022941399-pat00066
Is
Figure 112023022941399-pat00067
Driver's pupil state information at the point of view,
Figure 112023022941399-pat00068
Is
Figure 112023022941399-pat00069
The area of the pupil of the left pupil at the time point,
Figure 112023022941399-pat00070
The area of the pupil of the left pupil under normal conditions,
Figure 112023022941399-pat00071
silver
Figure 112023022941399-pat00072
The area of the right pupil at the time point,
Figure 112023022941399-pat00073
is the area of the left pupil in the standard state,
Figure 112023022941399-pat00074
silver
Figure 112023022941399-pat00075
The area of the pupil of the right pupil at the time point,
Figure 112023022941399-pat00076
is the area of the pupil of the right pupil under standard conditions,
Figure 112023022941399-pat00077
silver
Figure 112023022941399-pat00078
The area of the right pupil at the time point,
Figure 112023022941399-pat00079
The area of the right pupil under normal conditions,
Figure 112023022941399-pat00080
silver
Figure 112023022941399-pat00081
The vertical length of the left pupil at the point of view,
Figure 112023022941399-pat00082
is the vertical length of the left pupil in the standard state,
Figure 112023022941399-pat00083
silver
Figure 112023022941399-pat00084
The vertical length of the left pupil at the point of view,
Figure 112023022941399-pat00085
is the vertical length of the left pupil in the standard state,
Figure 112023022941399-pat00086
silver
Figure 112023022941399-pat00087
The vertical length of the right pupil at the point of view,
Figure 112023022941399-pat00088
is the vertical length of the right pupil in the standard state,
Figure 112023022941399-pat00089
silver
Figure 112023022941399-pat00090
The vertical length of the right pupil at the point of view,
Figure 112023022941399-pat00091
is the vertical length of the right pupil in the standard state,
Figure 112023022941399-pat00092
is the illuminance inside the vehicle,
Figure 112023022941399-pat00093
is the duration,
Figure 112023022941399-pat00094
and
Figure 112023022941399-pat00095
is a weight that reflects the condition of the driver's right and left eyes.)
 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020210142460A 2021-10-25 2021-10-25 Terminal and method for providing function for detecting and preventing drowsy driving KR102520687B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210142460A KR102520687B1 (en) 2021-10-25 2021-10-25 Terminal and method for providing function for detecting and preventing drowsy driving

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210142460A KR102520687B1 (en) 2021-10-25 2021-10-25 Terminal and method for providing function for detecting and preventing drowsy driving

Publications (1)

Publication Number Publication Date
KR102520687B1 true KR102520687B1 (en) 2023-04-11

Family

ID=85976692

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210142460A KR102520687B1 (en) 2021-10-25 2021-10-25 Terminal and method for providing function for detecting and preventing drowsy driving

Country Status (1)

Country Link
KR (1) KR102520687B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101518960B1 (en) * 2014-03-27 2015-05-11 현대자동차 주식회사 Apparatus and method of auto controlling convenience device for car
KR20170051196A (en) * 2015-10-29 2017-05-11 주식회사 세코닉스 3-channel monitoring apparatus for state of vehicle and method thereof
KR20200071195A (en) * 2018-12-10 2020-06-19 동국대학교 산학협력단 An alarm system based on drowsy driving recognization
KR20200075556A (en) * 2018-12-18 2020-06-26 전자부품연구원 System for recognizing drowsiness of driver

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101518960B1 (en) * 2014-03-27 2015-05-11 현대자동차 주식회사 Apparatus and method of auto controlling convenience device for car
KR20170051196A (en) * 2015-10-29 2017-05-11 주식회사 세코닉스 3-channel monitoring apparatus for state of vehicle and method thereof
KR20200071195A (en) * 2018-12-10 2020-06-19 동국대학교 산학협력단 An alarm system based on drowsy driving recognization
KR20200075556A (en) * 2018-12-18 2020-06-26 전자부품연구원 System for recognizing drowsiness of driver

Similar Documents

Publication Publication Date Title
US20220164026A1 (en) Methods and systems for using artificial intelligence to evaluate, correct, and monitor user attentiveness
US20220095975A1 (en) Detection of cognitive state of a driver
US11623647B2 (en) Driver and vehicle monitoring feedback system for an autonomous vehicle
US10046601B2 (en) Smartwatch blackbox
US10065651B2 (en) Electronic device and method for determining a state of a driver
US10665205B2 (en) Determining correlated movements associated with movements caused by driving a vehicle
US20170146801A1 (en) Head-mounted display device with a camera imaging eye microsaccades
US20200286183A1 (en) Information processing apparatus, and information processing method, and program
US20150161913A1 (en) Method, computer-readable storage device and apparatus for providing a recommendation in a vehicle
JPWO2018190152A1 (en) Information processing apparatus, information processing method, and program
US20210326586A1 (en) Image Processing System for Extracting a Behavioral Profile from Images of an Individual Specific to an Event
JP2018180983A (en) Information processing device, information processing method, and program
US20210370954A1 (en) Monitoring and scoring passenger attention
SE539157C2 (en) Identification of safety risks in a vehicle to notify fellow road users
US20190064528A1 (en) Information processing device, information processing method, and program
Bethge et al. Vemotion: Using driving context for indirect emotion prediction in real-time
JP2019043496A (en) Device, system and method for adjusting automatic operation
WO2016028933A1 (en) System for determining an underwriting risk, risk score, or price of insurance using sensor information
EP4042322A1 (en) Methods and systems for using artificial intelligence to evaluate, correct, and monitor user attentiveness
JP6697998B2 (en) Mobile insurance premium calculation method, mobile insurance calculation device, mobile insurance calculation program, and mobile
KR102658770B1 (en) Method, system, and computer program product for determining safety-critical traffic scenarios for driver assistance systems (das) and highly automated driving functions (had)
KR102520687B1 (en) Terminal and method for providing function for detecting and preventing drowsy driving
Berri et al. A nonintrusive system for detecting drunk drivers in modern vehicles
Phan Estimation of driver awareness of pedestrian for an augmented reality advanced driving assistance system
Abbasi Investigating the Effect of In-Vehicle Information Systems on Drivers’ Attention

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant