KR102216775B1 - Driving assistant apparatus for older driver - Google Patents
Driving assistant apparatus for older driver Download PDFInfo
- Publication number
- KR102216775B1 KR102216775B1 KR1020170135663A KR20170135663A KR102216775B1 KR 102216775 B1 KR102216775 B1 KR 102216775B1 KR 1020170135663 A KR1020170135663 A KR 1020170135663A KR 20170135663 A KR20170135663 A KR 20170135663A KR 102216775 B1 KR102216775 B1 KR 102216775B1
- Authority
- KR
- South Korea
- Prior art keywords
- driver
- driving
- vehicle
- unit
- action risk
- Prior art date
Links
- 238000000034 method Methods 0.000 claims abstract description 30
- 238000004088 simulation Methods 0.000 claims description 49
- 230000004927 fusion Effects 0.000 claims description 39
- 230000006399 behavior Effects 0.000 claims description 13
- 238000010801 machine learning Methods 0.000 claims description 9
- 206010039203 Road traffic accident Diseases 0.000 description 6
- 238000001514 detection method Methods 0.000 description 6
- 238000013135 deep learning Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000034994 death Effects 0.000 description 2
- 231100000517 death Toxicity 0.000 description 2
- 230000003930 cognitive ability Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000002431 foraging effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000003205 muscle Anatomy 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/0097—Predicting future conditions
-
- G06K9/00845—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
- G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0062—Adapting control system settings
- B60W2050/0075—Automatic parameter input, automatic initialising or calibrating means
- B60W2050/009—Priority selection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B60W2420/42—
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/043—Identity of occupants
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/30—Driving style
Landscapes
- Engineering & Computer Science (AREA)
- Automation & Control Theory (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
운전자 운전지원 장치 및 방법이 개시된다. 본 발명의 운전자 운전지원 장치는 운전자를 촬영하는 촬영부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 일반 운전자인지를 판단하는 운전자 판단부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 운전자 인식부; 및 상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템을 제어하는 제어모듈을 포함하는 것을 특징으로 한다. A driver driving assistance apparatus and method are disclosed. The driver's driving assistance apparatus of the present invention includes a photographing unit for photographing a driver; A driver determination unit that analyzes the image captured by the photographing unit to determine whether the driver is an elderly driver or a general driver; A driver recognition unit that recognizes a driver by analyzing the image captured by the photographing unit; And a driving support system based on at least one of a driver's driving propensity data previously stored and driver driving propensity profile data of a driver recognized by the driver recognition unit according to whether the driver is determined to be an elderly driver by the driver determination unit. It characterized in that it comprises a control module to control.
Description
본 발명은 운전자 운전지원 장치 및 방법에 관한 것으로서, 보다 상세하게는 고령 운전자의 사고를 예방하기 위한 기계학습 기반의 운전자 운전지원 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for supporting driver driving, and more particularly, to an apparatus and method for supporting driver driving based on machine learning for preventing an accident of an elderly driver.
일반적으로, 고령 운전자는 근력, 시력, 청력을 비롯한 신체적 능력과 단기 기억, 공간 지각과 같은 인지적 능력이 일반 운전자에 비하여 떨어지는 특징이 있다.In general, elderly drivers are characterized by inferior physical abilities, including muscle strength, vision, and hearing, and cognitive abilities such as short-term memory and spatial perception, compared to general drivers.
최근 들어, 고령 운전자의 교통사고가 다수 발생하고 있는데, 전체 교통사고 사망자는 감소하였으나, 노인 교통사고 사망자는 증가하고 있는 실정이다. 특히 65세 이상 노인 운전자 교통사고는 상대적으로 크게 증가하고 있어 안전관리를 강화할 필요가 있다. In recent years, many traffic accidents of elderly drivers have occurred. The total number of traffic accident deaths has decreased, but the number of elderly traffic accident deaths is increasing. In particular, traffic accidents for elderly drivers over 65 years of age are on a relatively large increase, so safety management needs to be strengthened.
이에 고령 운전자에 의한 사고를 예방하기 위해 고령화 운전자가 자발적으로 면허를 반납하거나 고령 운전자의 운전면허 갱신 주기를 단축하는 방안 등이 제시되어 있으나, 차량 편의 제공 서비스로써 고령 운전자를 판단하여 운전 지원하는 시스템은 제시되지 못하는 실정이다. Accordingly, in order to prevent accidents caused by elderly drivers, a plan for aging drivers to voluntarily return their licenses or to shorten the driver's license renewal cycle for elderly drivers is proposed, but a system that determines and supports driving as a vehicle convenience service. Is not presented.
본 발명의 배경기술은 대한민국 공개특허공보 10-1172049호(2012.08.01)의 '고령 운전자를 위한 차량 안전 경고음을 발생시키는 안전 경보 시스템'에 개시되어 있다.The background technology of the present invention is disclosed in Korean Patent Laid-Open Publication No. 10-1172049 (2012.08.01)'a safety alarm system that generates a vehicle safety warning sound for an elderly driver'.
본 발명은 전술한 문제점을 개선하기 위해 창안된 것으로서, 본 발명의 일 측면에 따른 목적은 운전자를 촬영한 영상을 분석하여 고령 운전자인지 일반 운전자인지를 인식하고 인식 결과에 따라 운전 지원 시스템을 제어하는 운전자 운전지원 장치 및 방법을 제공하는 것이다. The present invention was invented to improve the above-described problem, and an object according to an aspect of the present invention is to recognize whether a driver is an elderly driver or a general driver by analyzing an image photographed of a driver, and to control a driving assistance system according to the recognition result. It is to provide a driver driving assistance device and method.
본 발명의 일 측면에 따른 운전자 운전지원 장치는 운전자를 촬영하는 촬영부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 일반 운전자인지를 판단하는 운전자 판단부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 운전자 인식부; 및 상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템을 제어하는 제어모듈을 포함하는 것을 특징으로 한다. A driver driving assistance device according to an aspect of the present invention includes a photographing unit for photographing a driver; A driver determination unit that analyzes the image captured by the photographing unit to determine whether the driver is an elderly driver or a general driver; A driver recognition unit that recognizes a driver by analyzing the image captured by the photographing unit; And a driving support system based on at least one of a driver's driving propensity data previously stored and driver driving propensity profile data of a driver recognized by the driver recognition unit according to whether the driver is determined to be an elderly driver by the driver determination unit. It characterized in that it comprises a control module to control.
본 발명의 상기 운전자 판단부는 상기 촬영부에 의해 촬영된 영상을 기계학습 방식을 기반으로 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 것을 특징으로 한다. The driver determination unit of the present invention is characterized in that it determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.
본 발명의 상기 제어모듈은 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하는 운전 성향 융합값 생성부; 상기 운전 성향 융합값 생성부에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부; 상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및 상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되면 상기 운전 성향 융합값 생성부를 제어하여 운전 성향 융합값을 생성하고 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 예측하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 한다. The control module of the present invention comprises: a driving tendency fusion value generating unit for generating a driving tendency fusion value by fusing the elderly driver driving tendency data and the driver driving tendency profile data; An action risk prediction unit for predicting an action risk of a vehicle according to a driving situation and a surrounding situation based on the driving tendency fusion value generated by the driving tendency fusion value generating unit; A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And when the driver is determined to be an elderly driver by the driver determination unit, the driving tendency fusion value generation unit is controlled to generate a driving tendency fusion value, and the action risk prediction unit is used to predict the action risk of the vehicle, and then the simulation unit is simulated. It characterized in that it comprises a control unit for controlling the driving support system according to the result.
본 발명의 상기 액션 위험성 예측부는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. The action risk prediction unit of the present invention is characterized in that the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
본 발명의 상기 제어부는 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The control unit of the present invention is characterized in that the control unit determines an operation priority of the driving support system according to a simulation result of the simulation unit and controls the driving support system according to the determined operation priority.
본 발명의 상기 제어모듈은 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부; 상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및 상기 운전자 판단부에 의해 운전자가 일반 운전자로 판단되면 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 판단하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 한다. The control module of the present invention includes an action risk prediction unit for predicting an action risk of a vehicle according to a vehicle driving situation and surrounding conditions based on driver driving propensity profile data of a driver recognized by the driver recognition unit; A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And a control unit configured to determine the action risk of the vehicle through the action risk prediction unit when the driver is determined to be a general driver by the driver determination unit, and then control the driving support system according to a simulation result of the simulation unit. To do.
본 발명의 상기 액션 위험성 예측부는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. The action risk prediction unit of the present invention is characterized in that the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
본 발명의 상기 제어부는 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The control unit of the present invention is characterized in that the control unit determines an operation priority of the driving support system according to a simulation result of the simulation unit and controls the driving support system according to the determined operation priority.
본 발명은 상기 운전자 인식부에 의해 인식된 운전자에 따라 운전자별로 운전자 운전 성향을 검출하고 검출된 운전자 운전 성향 데이터를 데이터베이스부에 누적 저장하여 업데이트하는 운전자 운전 성향 검출부를 더 포함하는 것을 특징으로 한다.The present invention is characterized in that it further comprises a driver driving propensity detector for detecting a driver's driving propensity for each driver according to a driver recognized by the driver recognition unit, and storing and updating the detected driver driving propensity data in a database.
본 발명의 일 측면에 따른 운전자 운전지원 방법은 촬영부가 운전자를 촬영하는 단계; 운전자 판단부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 단계; 운전자 인식부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 단계; 및 제어모듈이 상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템을 제어하는 단계를 포함하는 포함하는 것을 특징으로 한다. A driver driving assistance method according to an aspect of the present invention includes: a photographing unit photographing a driver; Determining whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit by a driver determination unit; Recognizing a driver by analyzing the image captured by the photographing unit by a driver recognition unit; And the control module drives based on at least one of the driving propensity data for the elderly driver previously stored according to whether the driver is recognized as an elderly driver by the driver determination unit and the driver driving propensity profile data of the driver recognized by the driver recognition unit. It characterized in that it comprises the step of controlling the support system.
본 발명의 상기 운전자 판단부는 상기 촬영부에 의해 촬영된 영상을 기계학습 방식을 기반으로 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 것을 특징으로 한다. The driver determination unit of the present invention is characterized in that it determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.
본 발명의 상기 운전 지원 시스템을 제어하는 단계는 상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되면 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하고, 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. In the controlling of the driving support system of the present invention, when the driver is recognized as an elderly driver by the driver determination unit, the elderly driver driving tendency data and the driver driving tendency profile data are fused to generate a driving tendency fusion value, and the generated driving After determining the action risk of the vehicle according to the vehicle driving situation and the surrounding situation based on the propensity fusion value, the driving support system is controlled according to the simulation result by simulating the vehicle behavior in advance according to the action risk of the vehicle. .
본 발명의 상기 운전 지원 시스템을 제어하는 단계는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. In the controlling of the driving assistance system of the present invention, the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
본 발명의 상기 제어부는 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The control unit of the present invention is characterized in that it controls the driving support system according to the determined operation priority by determining an operation priority of the driving support system according to a simulation result.
본 발명의 상기 운전 지원 시스템을 제어하는 단계는 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단하는 액션 위험성 예측부; 상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및 상기 운전자 판단부에 의해 운전자가 일반 운전자로 인식되면 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The controlling of the driving assistance system of the present invention includes: an action risk prediction unit for determining an action risk of a vehicle according to a vehicle driving situation and surrounding conditions based on the driver driving tendency profile data of the driver recognized by the driver recognition unit; A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And if the driver is recognized as a general driver by the driver determination unit, the action risk of the vehicle is determined based on the driver's driving tendency profile data recognized by the driver recognition unit, and then the vehicle behavior is preliminarily determined according to the action risk of the vehicle. It is characterized in that by simulating and controlling the driving support system according to the simulation result.
본 발명의 상기 운전 지원 시스템을 제어하는 단계는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. In the controlling of the driving assistance system of the present invention, the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
본 발명의 상기 운전 지원 시스템을 제어하는 단계는 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. In the controlling of the driving support system of the present invention, the driving support system is controlled according to the determined operation priority by determining an operation priority of the driving support system according to a simulation result.
본 발명은 운전자 운전 성향 검출부가 상기 운전자 인식부에 의해 인식된 운전자에 따라 운전자별로 운전자 운전 성향을 검출하고 검출된 운전자 운전 성향 데이터를 데이터베이스부에 누적 저장하여 업데이트하는 단계를 더 포함하는 것을 특징으로 한다. The present invention further comprises the step of detecting the driver's driving tendency for each driver according to the driver recognized by the driver recognition unit, and accumulating and storing the detected driver's driving tendency data in a database to update the driver driving tendency detection unit. do.
본 발명의 일 측면에 따른 운전자 운전지원 장치 및 방법은 고령 운전자에게 적합한 안전 운전 및 운전 편의를 제공하고, 이를 통해 고령 운전자의 교통사고를 예방할 수 있도록 한다. A driver's driving support apparatus and method according to an aspect of the present invention provides safe driving and driving convenience suitable for an elderly driver, and thereby prevents a traffic accident of an elderly driver.
도 1 은 본 발명의 일 실시예에 따른 운전자 운전지원 장치의 블럭 구성도이다.
도 2 는 본 발명의 일 실시예에 따른 제어모듈의 블럭 구성도이다.
도 3 은 본 발명의 일 실시예에 따른 운전자 운전지원 방법의 순서도이다.1 is a block diagram of a driver driving assistance apparatus according to an embodiment of the present invention.
2 is a block diagram of a control module according to an embodiment of the present invention.
3 is a flowchart of a driver driving assistance method according to an embodiment of the present invention.
이하에서는 본 발명의 일 실시예에 따른 운전자 안전지원 장치 및 방법을 첨부된 도면들을 참조하여 상세하게 설명한다. 이러한 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. 또한 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서, 이는 이용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. Hereinafter, an apparatus and method for supporting driver safety according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. In this process, the thickness of the lines or the size of components shown in the drawings may be exaggerated for clarity and convenience of description. In addition, terms to be described later are terms defined in consideration of functions in the present invention, which may vary according to the intention or custom of users or operators. Therefore, definitions of these terms should be made based on the contents throughout the present specification.
도 1 은 본 발명의 일 실시예에 따른 운전자 운전지원 장치의 블럭 구성도이고, 도 2 는 본 발명의 일 실시예에 따른 제어모듈의 블럭 구성도이다.1 is a block diagram of a driver driving assistance apparatus according to an embodiment of the present invention, and FIG. 2 is a block diagram of a control module according to an embodiment of the present invention.
도 1 은 본 발명의 일 실시예에 따른 운전자 운전지원 장치는 촬영부(10), 운전자 판단부(20), 운전자 인식부(30), 데이터베이스부(40), 제어모듈(50), 운전 지원 시스템(60) 및 운전자 운전 성향 검출부(70)를 포함한다. 1 is a driver driving support device according to an embodiment of the present invention, a photographing
촬영부(10)는 차량의 실내에 설치되어 운전자의 얼굴을 촬영한다. 촬영부(10)는 CCD(Charge-Coupled Device) 카메라 또는 IR(Infra-Red) 카메라 등이 채용될 수 있다. 이외에도 촬영부(10)로는 운전자의 얼굴을 촬영할 수 있는 이미지 센서라면 특별히 한정되는 것은 아니다. The photographing
운전자 판단부(20)는 촬영부(10)에 의해 촬영된 영상을 통해 운전자를 추론하여 고령 운전자인지 또는 일반 운전자인지를 판단한다. The
고령 운전자는 나이가 상대적으로 많은 운전자로써, 운전자의 나이는 특별히 한정되는 것은 아니다. 일반 운전자는 고령 운전자를 제외한 나머지 운전자이다. An elderly driver is a driver with a relatively large age, and the driver's age is not particularly limited. General drivers are the rest of the drivers except for elderly drivers.
운전자 판단부(20)는 운전자를 추론하여 고령 운전자인지 일반 운전자인지 여부를 판단하기 위해 기계학습 방식, 예를 들어 딥러닝 방식을 이용한다. 딥러닝 방식에 따르면, 운전자 판단부(20)는 복수개의 일반 운전자의 이미지와 고령 운전자의 이미지를 각각 입력받고 이들 각각의 이미지를 분할하여 컨볼루션을 반복하면서 그 이미지에 대한 특징을 검출하고 여러 개의 레이어에서 각 특징에 대한 가중치를 검출하며, 이 가중치를 기반으로 해당 운전자가 고령 운전자인지 일반 운전자인지를 판단한다. The
한편, 본 실시예에서는 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 방식으로 기계학습 방식의 딥러닝 방식을 이용하는 것을 예시로 설명하였으나, 본 발명의 기술적 범위는 이에 한정되는 것은 아니다.Meanwhile, in the present embodiment, the use of the deep learning method of the machine learning method as a method of determining whether the driver is an elderly driver or a general driver is described as an example, but the technical scope of the present invention is not limited thereto.
운전자 인식부(30)는 촬영부(10)에 의해 촬영된 영상을 분석하여 운전자를 인식한다. 운전자 인식부(30)는 운전자 각각을 식별하기 위해 인식하는데, 상기한 기계학습 방식 등을 포함한 다양한 방식이 이용 가능하다. The
데이터베이스부(40)는 고령 운전자 운전 성향 데이터 및 운전자 운전 성향 프로파일 데이터를 저장한다. The
고령 운전자 운전 성향 데이터는 고령 운전자 운전시 다양한 조건이나 상황에서 고령 운전자의 운전 조작 상태와 이에 따른 차량 상태에 대한 데이터이다. The driving propensity data for an elderly driver is data on a driving state of an elderly driver and a vehicle state accordingly in various conditions or situations when driving an elderly driver.
통상적으로, 고령 운전자의 대부분의 사고 원인으로는 안전운전 의무 불이행, 신호위반, 안전거리미확보, 중앙선침범이 있다. 이에 고령 운전자 운전 성향 데이터에는 상기한 각각의 상황에서 고령 운전자의 운전 조작 상태와 차량 상태 등이 더 포함될 수 있다. Typically, the causes of most accidents of elderly drivers include failure to comply with the duty of safe driving, violation of the signal, non-secure safety distance, and violation of the center line. Accordingly, the elderly driver's driving propensity data may further include a driving operation state and a vehicle state of the elderly driver in each of the above-described situations.
운전자 운전 성향 프로파일 데이터는 운전자 각각의 운전 성향 프로파일 데이터이다. 즉, 운전자는 다양한 주행 환경이나 상황에 따라 자신의 의지에 따라 주행하는데, 운전자 운전 성향 프로파일 데이터는 이러한 각각의 경우에 운전 조작 상태와 차량 상태 등이 포함될 수 있다. The driver driving tendency profile data is the driving tendency profile data of each driver. That is, the driver drives according to his or her will according to various driving environments or situations, and the driver driving propensity profile data may include a driving operation state and a vehicle state in each of these cases.
여기서, 운전자는 고령 운전자와 일반 운전자가 모두 포함될 수 있으며 각 운전자별로 사전에 저장된다. 이에 고령 운전자의 경우에는 해당 고령 운전자의 운전자 운전 성향 프로파일 데이터가 마련될 수 있고, 일반 운전자의 경우에도 해당 일반 운전자의 운전자 운전 성향 프로파일 데이터가 마련될 수 있다. Here, the driver may include both an elderly driver and a general driver, and is stored in advance for each driver. Accordingly, in the case of an elderly driver, driver driving propensity profile data of a corresponding elderly driver may be prepared, and in the case of a general driver, driver driving propensity profile data of a corresponding general driver may be prepared.
따라서, 고령 운전자의 경우에는 해당 고령 운전자를 위한 고령 운전자 운전 성향 데이터 뿐만 아니라, 해당 고령 운전자의 운전 성향이 반영된 운전자 운전 성향 프로파일 데이터가 마련될 수 있다. Accordingly, in the case of an elderly driver, not only the elderly driver driving tendency data for the elderly driver, but also driver driving tendency profile data reflecting the driving tendency of the elderly driver may be provided.
운전자 운전 성향 검출부(70)는 운전자 인식부(30)에 의해 해당 운전자가 인식되면 인식된 운전자별로 운전자 운전 성향을 각각 검출한다. 아울러, 운전자 운전 성향 검출부(70)는 각 운전자별로 검출된 운전자 운전 성향 데이터를 데이터베이스부(40)에 누적 저장하여 업데이트한다. When a corresponding driver is recognized by the
운전 지원 시스템(Driver Assistance System)(60)은 차량의 주행 안정성 향상 및 운전자의 편의성을 확보할 수 있도록 한다. The
운전 지원 시스템(60)에는 스마트 크루즈 컨트롤(SCC, Smart Cruse Control), 어드밴스드 스마트 크루즈 컨트롤(ASCC, Advanced Smart Cruse Control), 차선 유지 지원 시스템(LKAS, Lane Keeping Assist System), 주차 주향 보조 시스템(SPAS, Smart Parking Assist System), 지능형 주차 주향 보조 시스템(ASPAS, Advanced Smart Parking Assist System), TJA(Traffic Jam Assist), 자동 긴급 제동 시스템(AEB, Autonomous Emergency Braking System), 고속도로 주행지원 시스템(HAD, Highway driving assist), 전방충돌방지보조(FCA, Forward Collision-Avoidance Assist), 전방 추돌 경보 시스템(FCWS, Forward Collision Warning System), 급제동 경보 시스템(ESS, Emergency Stop System), 경사로 밀림 방지 장치(HAC, Hill Start Assist Control System), LDWS(Lane Departure Warning System), BSD(Blind Spot Detection) 및 NPA(Narrow Path Assist) 중 적어도 하나가 포함될 수 있다. Driving
제어모듈(50)은 운전자 판단부(20)에 의해 운전자가 고령 운전자로 판단되는지 또는 일반 운전자로 판단되는지 여부에 따라, 기 저장된 고령 운전자 운전 성향 데이터 및 운전자 인식부(30)에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템(60)을 제어한다. The
도 2 를 참조하면, 제어모듈(50)은 운전 성향 융합값 생성부(51), 액션 위험성 예측부(52), 시뮬레이션부(53) 및 제어부(54)를 포함한다. Referring to FIG. 2, the
운전 성향 융합값 생성부(51)는 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성한다. The driving propensity fusion
운전 성향 융합값 생성부(51)는 운전자 판단부(20)에 의해 운전자가 고령 운전자로 인식될 경우, 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성한다. 이 경우, 운전 성향 융합값 생성부(51)는 이들 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터 각각을 합산 및 평균하여 운전 성향 융합값을 이들 각 데이터의 평균치로 산출할 수 있다. When the driver is recognized as an elderly driver by the
액션 위험성 예측부(52)는 운전자 운전 성향을 기반으로 차량의 액션 위험성을 예측한다. The action
즉, 운전자 판단부(20)에 의해 운전자가 고령 운전자로 판단된 경우, 액션 위험성 예측부(52)는 운전 성향 융합값 생성부(51)에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다.That is, when the driver is determined to be an elderly driver by the
반면에, 운전자 판단부(20)에 의해 운전자가 일반 운전자로 판단된 경우, 액션 위험성 예측부(52)는 운전자 인식부(30)에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다. On the other hand, when the driver is determined to be a general driver by the
이 경우, 액션 위험성 예측부(52)는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 각각 구분하여 예측한다. 즉, 액션 위험성 예측부(52)는 차량의 액션 위험성을 전방 충돌 등과 같은 차량의 종방향 액션 위험성과 차선 이탈 등과 같은 회방향 액션 위험성으로 액션 위험성을 구분하여 예측한다.In this case, the
시뮬레이션부(53)는 액션 위험성 예측부(52)에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션한다. The
제어부(54)는 운전자 판단부(20)에 의해 운전자가 고령 운전자인지 또는 일반 운전자인지 여부에 따라 고령 운전자 운전 성향 데이터 및 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템(60)을 제어한다. The
즉, 제어부(54)는 운전자 판단부(20)에 의해 운전자가 고령 운전자로 판단되면 운전 성향 융합값 생성부(51)를 제어하여 운전 성향 융합값을 생성하고, 액션 위험성 예측부(52)를 통해 운전 성향 융합값을 기반으로 차량의 액션 위험성을 예측하도록 한 후, 차량의 액션 위험성에 기반한 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)을 제어한다. That is, when the driver is determined to be an elderly driver by the
반면에, 제어부(54)는 운전자 판단부(20)에 의해 운전자가 일반 운전자로 판단되면 액션 위험성 예측부(52)를 통해 차량의 액션 위험성을 예측하도록 한 후, 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)을 제어한다. On the other hand, if the driver is determined to be a normal driver by the
이 경우, 제어부(54)는 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 동작을 제어한다. 즉, 제어부(54)는 운전 지원 시스템(60)을 실제로 제어하기 전에 시뮬레이션부(53)를 통해 해당 제어에 대한 시뮬레이션을 수행하도록 하고 시뮬레이션 결과에 따라, 해당 고령 운전자 또는 일반 운전자에게 가장 우선적으로 필요한 동작이 먼저 이루어지도록 하고, 이와 함께 현재 운전자의 운전 조작에 기반하여 각종 경고를 출력함으로써, 최적의 운전 지원이 이루어질 수 있도록 한다. In this case, the
이하 본 발명의 일 실시예에 따른 운전자 운전지원 방법을 도 3 을 참조하여 설명한다. Hereinafter, a driver driving assistance method according to an embodiment of the present invention will be described with reference to FIG. 3.
도 3 은 본 발명의 일 실시예에 따른 운전자 운전지원 방법의 순서도이다.3 is a flowchart of a driver driving assistance method according to an embodiment of the present invention.
도 3 을 참조하면, 먼저 촬영부(10)가 차량의 실내에 설치되어 운전자의 얼굴을 촬영한다(S10). Referring to FIG. 3, first, the photographing
촬영부(10)에 의해 운전자의 얼굴이 촬영됨에 따라, 운전자 인식부(30)는 촬영부(10)에 의해 촬영된 영상을 분석하여 운전자를 인식한다(S20). As the driver's face is photographed by the photographing
이어 운전자 운전 성향 검출부(70)는 운전자 인식부(30)에 의해 인식된 운전자의 운전 조작 상태 또는 차량 상태를 모니터링함으로써(S30), 해당 운전자의 운전자 운전 성향 데이터를 각각 검출(S40)하여 제어부(54)에 입력하고, 이 운전자의 운전자 운전 성향 데이터를 데이터베이스부(40)에 누적 저장하여 업데이트한다(S50). Then, the driver driving
한편, 단계(S10)에서 촬영부(10)에 의해 운전자의 얼굴이 촬영됨에 따라, 운전자 판단부(20)는 촬영부(10)에 의해 촬영된 영상을 분석하여 운전자를 추론하여 운전자가 고령 운전자인지 또는 일반 운전자인지 여부를 판단한다(S60,S70). Meanwhile, as the driver's face is photographed by the photographing
이 경우, 운전자 판단부(20)는 운전자가 고령 운전자인지 일반 운전자인지 여부를 판단하기 위해 기계학습 방식, 예를 들어 딥러닝을 이용할 수 있다. In this case, the
단계(S70)에서의 판단 결과 운전자가 고령 운전자이면, 제어부(54)는 운전 성향 융합값 생성부(51)를 제어하여 데이터베이스부(40)에서 고령 운전자 운전 성향 데이터를 검출(S80)한다. As a result of the determination in step S70, if the driver is an elderly driver, the
한편, 제어부(54)는 운전자가 고령 운전자인지 또는 일반 운전자인지 여부에 따라 운전 성향 융합값을 생성한다(S90).Meanwhile, the
즉, 제어부(54)는 운전자가 고령 운전자이면 고령 운전자 운전 성향 데이터 및 운전자 운전 성향 프로파일 데이터를 운전 성향 융합값 생성부(51)에 입력하여 운전 성향 융합값을 생성하도록 한다. 이에, 운전 성향 융합값 생성부(51)는 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하고, 생성된 운전 성향 융합값을 액션 위험성 예측부(52)에 입력한다. That is, if the driver is an elderly driver, the
반면에, 제어부(54)는 운전자가 일반 운전자이면 운전자 운전 성향 프로파일 데이터를 액션 위험성 예측부(52)에 입력한다. On the other hand, if the driver is a general driver, the
이어 제어부(54)는 액션 위험성 예측부(52)를 제어하여 운전자 운전 성향을 기반으로 차량의 액션 위험성을 예측(S100)하도록 하는데, 이 경우 액션 위험성 예측부(52)는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 각각 구분하여 예측한다. Then, the
여기서, 액션 위험성 예측부(52)는 운전자가 고령 운전자이면 운전 성향 융합값 생성부(51)에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다.Here, if the driver is an elderly driver, the action
반면에, 액션 위험성 예측부(52)는 운전자가 일반 운전자로 판단된 경우, 해당 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다. On the other hand, when it is determined that the driver is a general driver, the
액션 위험성 예측부(52)에 의해 차량의 액션 위험성이 예측됨에 따라, 제어부(54)는 시뮬레이션부(53)를 제어하여 액션 위험성 예측부(52)에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션한다(S110). As the action risk of the vehicle is predicted by the action
이 경우, 제어부(54)는 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)의 동작 우선 순위를 결정하고, 결정된 동작 우선 순위에 따라 동작을 제어한다(S120) In this case, the
즉, 제어부(54)는 운전 지원 시스템(60)을 실제로 제어하기 전에 시뮬레이션부(53)를 통해 해당 액션 위험성을 해소하기 위한 시뮬레이션을 수행하도록 하고 시뮬레이션 결과에 따라, 해당 고령 운전자 또는 일반 운전자에게 가장 우선적으로 필요한 동작을 먼저 수행하며, 이와 함께 현재 운전자의 운전 조작에 기반하여 각종 경고를 출력함으로써, 최적의 운전 지원이 이루어질 수 있도록 한다. That is, before actually controlling the driving
이와 같이, 본 발명의 일 실시예에 따른 운전자 운전지원 장치 및 방법은 고령 운전자에게 적합한 안전 운전 및 운전 편의를 제공하고, 이를 통해 고령 운전자의 교통사고를 예방할 수 있도록 한다As described above, the driver's driving support apparatus and method according to an embodiment of the present invention provides safe driving and driving convenience suitable for an elderly driver, thereby preventing a traffic accident of an elderly driver.
본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며 당해 기술이 속하는 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호범위는 아래의 특허청구범위에 의하여 정해져야할 것이다.The present invention has been described with reference to the embodiments shown in the drawings, but these are only exemplary, and those of ordinary skill in the art to which the present technology pertains, various modifications and other equivalent embodiments are possible. I will understand. Therefore, the true technical protection scope of the present invention should be determined by the following claims.
10: 촬영부
20: 운전자 판단부
30: 운전자 인식부
40: 데이터베이스부
50: 제어모듈
51: 운전 성향 융합값 생성부
52: 액션 위험성 예측부
53: 시뮬레이션부
54: 제어부
60: 운전 지원 시스템
70: 운전자 운전 성향 검출부 10: filming department
20: driver judgment unit
30: driver recognition unit
40: database unit
50: control module
51: driving tendency fusion value generation unit
52: action risk prediction unit
53: simulation unit
54: control unit
60: driving assistance system
70: driver driving tendency detection unit
Claims (18)
상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 일반 운전자인지를 판단하는 운전자 판단부;
상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 운전자 인식부; 및
상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하고, 차량의 액션 위험성에 따라 차량 거동을 시뮬레이션하여 시뮬레이션 결과에 따라 운전 지원 시스템을 제어하는 제어모듈을 포함하는 운전자 운전지원 장치.
A photographing unit for photographing the driver;
A driver determination unit that analyzes the image captured by the photographing unit to determine whether the driver is an elderly driver or a general driver;
A driver recognition unit that recognizes a driver by analyzing the image captured by the photographing unit; And
The driving situation and surroundings of the vehicle based on at least one of the driver's driving propensity data previously stored according to whether the driver is determined to be an elderly driver by the driver determination unit and the driver's driving propensity profile data recognized by the driver recognition unit. Driver driving assistance device including a control module that predicts the risk of action of the vehicle according to the situation, simulates the behavior of the vehicle according to the risk of action of the vehicle, and controls the driving assistance system according to the simulation result.
The apparatus of claim 1, wherein the driver determination unit determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.
고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하는 운전 성향 융합값 생성부;
상기 운전 성향 융합값 생성부에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부;
상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및
상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되면 상기 운전 성향 융합값 생성부를 제어하여 운전 성향 융합값을 생성하고 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 예측하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 하는 운전자 운전지원 장치.
The method of claim 1, wherein the control module
A driving tendency fusion value generator configured to generate a driving tendency fusion value by fusing the elderly driver driving tendency data and the driver driving tendency profile data;
An action risk prediction unit that predicts an action risk of a vehicle according to a driving situation and surrounding conditions based on the driving tendency fusion value generated by the driving tendency fusion value generation unit;
A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And
If the driver is determined to be an elderly driver by the driver determination unit, the driving tendency fusion value generation unit is controlled to generate a driving tendency fusion value, and the action risk prediction unit is used to predict the action risk of the vehicle, and the simulation result of the simulation unit And a control unit for controlling the driving assistance system according to the driver's driving assistance device.
The apparatus of claim 3, wherein the action risk prediction unit predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
The driver driving assistance apparatus of claim 3, wherein the control unit determines an operation priority of the driving support system according to a simulation result of the simulation unit and controls the driving support system according to the determined operation priority.
상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부;
상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및
상기 운전자 판단부에 의해 운전자가 일반 운전자로 판단되면 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 판단하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 하는 운전자 운전지원 장치.
The method of claim 1, wherein the control module
An action risk prediction unit for predicting an action risk of a vehicle according to a vehicle driving situation and a surrounding situation based on the driver driving tendency profile data of the driver recognized by the driver recognition unit;
A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And
And a control unit configured to determine the action risk of the vehicle through the action risk prediction unit when the driver is determined to be a general driver by the driver determination unit, and then control the driving assistance system according to the simulation result of the simulation unit. Driver driving assistance device.
The apparatus of claim 6, wherein the action risk prediction unit predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
The driver driving assistance apparatus of claim 6, wherein the control unit determines an operation priority of the driving assistance system according to a simulation result of the simulation unit and controls the driving assistance system according to the determined operation priority.
The method of claim 1, further comprising a driver driving tendency detecting unit for detecting a driver driving tendency for each driver according to a driver recognized by the driver recognition unit and accumulating and storing the detected driver driving tendency data in a database unit for updating. Driver's driving support device.
운전자 판단부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 단계;
운전자 인식부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 단계; 및
제어모듈이 상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하고, 차량의 액션 위험성에 따라 차량 거동을 시뮬레이션하여 시뮬레이션 결과에 따라 운전 지원 시스템을 제어하는 단계를 포함하는 운전자 운전지원 방법.
Photographing a driver by a photographing unit;
Determining whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit by a driver determination unit;
Recognizing a driver by analyzing the image captured by the photographing unit by a driver recognition unit; And
The control module drives the vehicle based on at least one of the driving propensity data for the elderly driver previously stored according to whether the driver is recognized as an elderly driver by the driver determination unit and the driver driving propensity profile data of the driver recognized by the driver recognition unit A driver driving assistance method comprising the step of predicting an action risk of a vehicle according to a situation and surrounding circumstances, simulating a vehicle behavior according to the action risk of the vehicle, and controlling a driving assistance system according to a simulation result.
The method of claim 10, wherein the driver determination unit determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.
상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되면 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하고, 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 방법.
The method of claim 10, wherein controlling the driving assistance system
When the driver is recognized as an elderly driver by the driver determination unit, a driving tendency fusion value is generated by fusing the elderly driver driving tendency data and the driver driving tendency profile data, and the vehicle driving situation and surrounding situation based on the generated driving tendency fusion value. After determining the action risk of the vehicle according to the method, the driving support system is controlled according to the simulation result by pre-simulating the vehicle behavior according to the action risk of the vehicle.
The method of claim 12, wherein the controlling of the driving assistance system predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
The driver driving assistance system of claim 12, wherein the controlling of the driving assistance system comprises determining an operation priority of the driving assistance system according to a simulation result, and controlling the driving assistance system according to the determined operation priority. Way.
상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단하는 액션 위험성 예측부;
상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및
상기 운전자 판단부에 의해 운전자가 일반 운전자로 인식되면 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 방법.
The method of claim 12, wherein controlling the driving assistance system
An action risk prediction unit that determines an action risk of a vehicle according to a driving situation and a surrounding situation based on the driver driving tendency profile data of the driver recognized by the driver recognition unit;
A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And
When the driver is recognized as a general driver by the driver determination unit, the action risk of the vehicle is determined based on the driver's driving tendency profile data recognized by the driver recognition unit, and then the vehicle behavior is determined in advance according to the action risk of the vehicle. A driver driving assistance method, characterized in that by simulating and controlling the driving assistance system according to a simulation result.
16. The method of claim 15, wherein the controlling of the driving assistance system predicts an action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
The driver driving assistance system of claim 15, wherein the controlling of the driving support system comprises determining an operation priority of the driving support system according to a simulation result, and controlling the driving support system according to the determined operation priority. Way.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170135663A KR102216775B1 (en) | 2017-10-19 | 2017-10-19 | Driving assistant apparatus for older driver |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020170135663A KR102216775B1 (en) | 2017-10-19 | 2017-10-19 | Driving assistant apparatus for older driver |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20190043734A KR20190043734A (en) | 2019-04-29 |
KR102216775B1 true KR102216775B1 (en) | 2021-02-17 |
Family
ID=66282754
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020170135663A KR102216775B1 (en) | 2017-10-19 | 2017-10-19 | Driving assistant apparatus for older driver |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102216775B1 (en) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017073021A (en) | 2015-10-08 | 2017-04-13 | 株式会社デンソー | Driving support device |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100914007B1 (en) * | 2007-11-06 | 2009-08-28 | 자동차부품연구원 | Apparatus for active electronic stability program |
KR101500364B1 (en) * | 2013-06-24 | 2015-03-18 | 현대자동차 주식회사 | System and method for providing driving environment of vehicle |
KR102113769B1 (en) * | 2013-11-26 | 2020-05-21 | 현대모비스 주식회사 | Warning Apparatus and Method for Safe-Driving Assistance Service Based on V2X |
KR102368812B1 (en) * | 2015-06-29 | 2022-02-28 | 엘지전자 주식회사 | Method for vehicle driver assistance and Vehicle |
-
2017
- 2017-10-19 KR KR1020170135663A patent/KR102216775B1/en active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017073021A (en) | 2015-10-08 | 2017-04-13 | 株式会社デンソー | Driving support device |
Also Published As
Publication number | Publication date |
---|---|
KR20190043734A (en) | 2019-04-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111373335B (en) | Method and system for driving mode switching based on self-awareness performance parameters in hybrid driving | |
CN107640159B (en) | Automatic driving human-computer interaction system and method | |
US9558414B1 (en) | Method for calculating a response time | |
JP6887855B2 (en) | How to assist a driver in driving a vehicle and a driver assistance system | |
EP2949536B1 (en) | Method for controlling a driver assistance system | |
JP2019087143A (en) | Driver state detection apparatus | |
US9851715B2 (en) | Method for the automatic operation of a vehicle | |
WO2017006853A1 (en) | Driver abnormality detection device and driver abnormality detection method | |
JP2009244959A (en) | Driving support device and driving support method | |
JP2020123339A (en) | Cooperative blind spot alarm method and apparatus of vehicle-to-vehicle communication infrastructure with fault tolerance and fluctuation robustness under extreme situation | |
US9978273B2 (en) | Method and system for improving a traffic participant's attention | |
EP3517385B1 (en) | Method and driver assistance system for assisting a driver in driving a vehicle | |
KR20200131951A (en) | Adaptive aeb system considering steerable path and the method thereof | |
KR20190012607A (en) | Apparatus for warning rear collision of vehicle and control method thereof | |
US10220771B2 (en) | Method and driver assistance system for assisting a driver of a vehicle | |
JP2007249757A (en) | Warning device | |
US20230234618A1 (en) | Method and apparatus for controlling autonomous vehicle | |
CN114930264A (en) | Method for remote-controlled driving of a motor vehicle comprising a remote-controlled operator, computer program product and remote-controlled driving system | |
KR20200141428A (en) | Method for driver attention-based video output and vehicle control determine | |
KR102216775B1 (en) | Driving assistant apparatus for older driver | |
JP7004534B2 (en) | Vehicle control device and vehicle control method | |
JP2010009232A (en) | Driving support device for vehicle | |
JP6627787B2 (en) | Driver status detection device | |
KR101729482B1 (en) | Error information protection apparatus of stereo camera for vehicle and method thereof | |
KR20140092451A (en) | Lane departure warning apparatus and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant |