KR102216775B1 - Driving assistant apparatus for older driver - Google Patents

Driving assistant apparatus for older driver Download PDF

Info

Publication number
KR102216775B1
KR102216775B1 KR1020170135663A KR20170135663A KR102216775B1 KR 102216775 B1 KR102216775 B1 KR 102216775B1 KR 1020170135663 A KR1020170135663 A KR 1020170135663A KR 20170135663 A KR20170135663 A KR 20170135663A KR 102216775 B1 KR102216775 B1 KR 102216775B1
Authority
KR
South Korea
Prior art keywords
driver
driving
vehicle
unit
action risk
Prior art date
Application number
KR1020170135663A
Other languages
Korean (ko)
Other versions
KR20190043734A (en
Inventor
최아라
Original Assignee
현대모비스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대모비스 주식회사 filed Critical 현대모비스 주식회사
Priority to KR1020170135663A priority Critical patent/KR102216775B1/en
Publication of KR20190043734A publication Critical patent/KR20190043734A/en
Application granted granted Critical
Publication of KR102216775B1 publication Critical patent/KR102216775B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/0097Predicting future conditions
    • G06K9/00845
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0075Automatic parameter input, automatic initialising or calibrating means
    • B60W2050/009Priority selection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • B60W2420/42
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/043Identity of occupants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/30Driving style

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

운전자 운전지원 장치 및 방법이 개시된다. 본 발명의 운전자 운전지원 장치는 운전자를 촬영하는 촬영부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 일반 운전자인지를 판단하는 운전자 판단부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 운전자 인식부; 및 상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템을 제어하는 제어모듈을 포함하는 것을 특징으로 한다. A driver driving assistance apparatus and method are disclosed. The driver's driving assistance apparatus of the present invention includes a photographing unit for photographing a driver; A driver determination unit that analyzes the image captured by the photographing unit to determine whether the driver is an elderly driver or a general driver; A driver recognition unit that recognizes a driver by analyzing the image captured by the photographing unit; And a driving support system based on at least one of a driver's driving propensity data previously stored and driver driving propensity profile data of a driver recognized by the driver recognition unit according to whether the driver is determined to be an elderly driver by the driver determination unit. It characterized in that it comprises a control module to control.

Description

운전자 운전지원 장치 및 방법{DRIVING ASSISTANT APPARATUS FOR OLDER DRIVER}Driver driving support device and method {DRIVING ASSISTANT APPARATUS FOR OLDER DRIVER}

본 발명은 운전자 운전지원 장치 및 방법에 관한 것으로서, 보다 상세하게는 고령 운전자의 사고를 예방하기 위한 기계학습 기반의 운전자 운전지원 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for supporting driver driving, and more particularly, to an apparatus and method for supporting driver driving based on machine learning for preventing an accident of an elderly driver.

일반적으로, 고령 운전자는 근력, 시력, 청력을 비롯한 신체적 능력과 단기 기억, 공간 지각과 같은 인지적 능력이 일반 운전자에 비하여 떨어지는 특징이 있다.In general, elderly drivers are characterized by inferior physical abilities, including muscle strength, vision, and hearing, and cognitive abilities such as short-term memory and spatial perception, compared to general drivers.

최근 들어, 고령 운전자의 교통사고가 다수 발생하고 있는데, 전체 교통사고 사망자는 감소하였으나, 노인 교통사고 사망자는 증가하고 있는 실정이다. 특히 65세 이상 노인 운전자 교통사고는 상대적으로 크게 증가하고 있어 안전관리를 강화할 필요가 있다. In recent years, many traffic accidents of elderly drivers have occurred. The total number of traffic accident deaths has decreased, but the number of elderly traffic accident deaths is increasing. In particular, traffic accidents for elderly drivers over 65 years of age are on a relatively large increase, so safety management needs to be strengthened.

이에 고령 운전자에 의한 사고를 예방하기 위해 고령화 운전자가 자발적으로 면허를 반납하거나 고령 운전자의 운전면허 갱신 주기를 단축하는 방안 등이 제시되어 있으나, 차량 편의 제공 서비스로써 고령 운전자를 판단하여 운전 지원하는 시스템은 제시되지 못하는 실정이다. Accordingly, in order to prevent accidents caused by elderly drivers, a plan for aging drivers to voluntarily return their licenses or to shorten the driver's license renewal cycle for elderly drivers is proposed, but a system that determines and supports driving as a vehicle convenience service. Is not presented.

본 발명의 배경기술은 대한민국 공개특허공보 10-1172049호(2012.08.01)의 '고령 운전자를 위한 차량 안전 경고음을 발생시키는 안전 경보 시스템'에 개시되어 있다.The background technology of the present invention is disclosed in Korean Patent Laid-Open Publication No. 10-1172049 (2012.08.01)'a safety alarm system that generates a vehicle safety warning sound for an elderly driver'.

본 발명은 전술한 문제점을 개선하기 위해 창안된 것으로서, 본 발명의 일 측면에 따른 목적은 운전자를 촬영한 영상을 분석하여 고령 운전자인지 일반 운전자인지를 인식하고 인식 결과에 따라 운전 지원 시스템을 제어하는 운전자 운전지원 장치 및 방법을 제공하는 것이다. The present invention was invented to improve the above-described problem, and an object according to an aspect of the present invention is to recognize whether a driver is an elderly driver or a general driver by analyzing an image photographed of a driver, and to control a driving assistance system according to the recognition result. It is to provide a driver driving assistance device and method.

본 발명의 일 측면에 따른 운전자 운전지원 장치는 운전자를 촬영하는 촬영부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 일반 운전자인지를 판단하는 운전자 판단부; 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 운전자 인식부; 및 상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템을 제어하는 제어모듈을 포함하는 것을 특징으로 한다. A driver driving assistance device according to an aspect of the present invention includes a photographing unit for photographing a driver; A driver determination unit that analyzes the image captured by the photographing unit to determine whether the driver is an elderly driver or a general driver; A driver recognition unit that recognizes a driver by analyzing the image captured by the photographing unit; And a driving support system based on at least one of a driver's driving propensity data previously stored and driver driving propensity profile data of a driver recognized by the driver recognition unit according to whether the driver is determined to be an elderly driver by the driver determination unit. It characterized in that it comprises a control module to control.

본 발명의 상기 운전자 판단부는 상기 촬영부에 의해 촬영된 영상을 기계학습 방식을 기반으로 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 것을 특징으로 한다. The driver determination unit of the present invention is characterized in that it determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.

본 발명의 상기 제어모듈은 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하는 운전 성향 융합값 생성부; 상기 운전 성향 융합값 생성부에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부; 상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및 상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되면 상기 운전 성향 융합값 생성부를 제어하여 운전 성향 융합값을 생성하고 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 예측하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 한다. The control module of the present invention comprises: a driving tendency fusion value generating unit for generating a driving tendency fusion value by fusing the elderly driver driving tendency data and the driver driving tendency profile data; An action risk prediction unit for predicting an action risk of a vehicle according to a driving situation and a surrounding situation based on the driving tendency fusion value generated by the driving tendency fusion value generating unit; A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And when the driver is determined to be an elderly driver by the driver determination unit, the driving tendency fusion value generation unit is controlled to generate a driving tendency fusion value, and the action risk prediction unit is used to predict the action risk of the vehicle, and then the simulation unit is simulated. It characterized in that it comprises a control unit for controlling the driving support system according to the result.

본 발명의 상기 액션 위험성 예측부는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. The action risk prediction unit of the present invention is characterized in that the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.

본 발명의 상기 제어부는 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The control unit of the present invention is characterized in that the control unit determines an operation priority of the driving support system according to a simulation result of the simulation unit and controls the driving support system according to the determined operation priority.

본 발명의 상기 제어모듈은 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부; 상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및 상기 운전자 판단부에 의해 운전자가 일반 운전자로 판단되면 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 판단하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 한다. The control module of the present invention includes an action risk prediction unit for predicting an action risk of a vehicle according to a vehicle driving situation and surrounding conditions based on driver driving propensity profile data of a driver recognized by the driver recognition unit; A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And a control unit configured to determine the action risk of the vehicle through the action risk prediction unit when the driver is determined to be a general driver by the driver determination unit, and then control the driving support system according to a simulation result of the simulation unit. To do.

본 발명의 상기 액션 위험성 예측부는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. The action risk prediction unit of the present invention is characterized in that the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.

본 발명의 상기 제어부는 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The control unit of the present invention is characterized in that the control unit determines an operation priority of the driving support system according to a simulation result of the simulation unit and controls the driving support system according to the determined operation priority.

본 발명은 상기 운전자 인식부에 의해 인식된 운전자에 따라 운전자별로 운전자 운전 성향을 검출하고 검출된 운전자 운전 성향 데이터를 데이터베이스부에 누적 저장하여 업데이트하는 운전자 운전 성향 검출부를 더 포함하는 것을 특징으로 한다.The present invention is characterized in that it further comprises a driver driving propensity detector for detecting a driver's driving propensity for each driver according to a driver recognized by the driver recognition unit, and storing and updating the detected driver driving propensity data in a database.

본 발명의 일 측면에 따른 운전자 운전지원 방법은 촬영부가 운전자를 촬영하는 단계; 운전자 판단부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 단계; 운전자 인식부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 단계; 및 제어모듈이 상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템을 제어하는 단계를 포함하는 포함하는 것을 특징으로 한다. A driver driving assistance method according to an aspect of the present invention includes: a photographing unit photographing a driver; Determining whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit by a driver determination unit; Recognizing a driver by analyzing the image captured by the photographing unit by a driver recognition unit; And the control module drives based on at least one of the driving propensity data for the elderly driver previously stored according to whether the driver is recognized as an elderly driver by the driver determination unit and the driver driving propensity profile data of the driver recognized by the driver recognition unit. It characterized in that it comprises the step of controlling the support system.

본 발명의 상기 운전자 판단부는 상기 촬영부에 의해 촬영된 영상을 기계학습 방식을 기반으로 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 것을 특징으로 한다. The driver determination unit of the present invention is characterized in that it determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.

본 발명의 상기 운전 지원 시스템을 제어하는 단계는 상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되면 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하고, 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. In the controlling of the driving support system of the present invention, when the driver is recognized as an elderly driver by the driver determination unit, the elderly driver driving tendency data and the driver driving tendency profile data are fused to generate a driving tendency fusion value, and the generated driving After determining the action risk of the vehicle according to the vehicle driving situation and the surrounding situation based on the propensity fusion value, the driving support system is controlled according to the simulation result by simulating the vehicle behavior in advance according to the action risk of the vehicle. .

본 발명의 상기 운전 지원 시스템을 제어하는 단계는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. In the controlling of the driving assistance system of the present invention, the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.

본 발명의 상기 제어부는 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The control unit of the present invention is characterized in that it controls the driving support system according to the determined operation priority by determining an operation priority of the driving support system according to a simulation result.

본 발명의 상기 운전 지원 시스템을 제어하는 단계는 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단하는 액션 위험성 예측부; 상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및 상기 운전자 판단부에 의해 운전자가 일반 운전자로 인식되면 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. The controlling of the driving assistance system of the present invention includes: an action risk prediction unit for determining an action risk of a vehicle according to a vehicle driving situation and surrounding conditions based on the driver driving tendency profile data of the driver recognized by the driver recognition unit; A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And if the driver is recognized as a general driver by the driver determination unit, the action risk of the vehicle is determined based on the driver's driving tendency profile data recognized by the driver recognition unit, and then the vehicle behavior is preliminarily determined according to the action risk of the vehicle. It is characterized in that by simulating and controlling the driving support system according to the simulation result.

본 발명의 상기 운전 지원 시스템을 제어하는 단계는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 한다. In the controlling of the driving assistance system of the present invention, the action risk of the vehicle is predicted by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.

본 발명의 상기 운전 지원 시스템을 제어하는 단계는 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 한다. In the controlling of the driving support system of the present invention, the driving support system is controlled according to the determined operation priority by determining an operation priority of the driving support system according to a simulation result.

본 발명은 운전자 운전 성향 검출부가 상기 운전자 인식부에 의해 인식된 운전자에 따라 운전자별로 운전자 운전 성향을 검출하고 검출된 운전자 운전 성향 데이터를 데이터베이스부에 누적 저장하여 업데이트하는 단계를 더 포함하는 것을 특징으로 한다. The present invention further comprises the step of detecting the driver's driving tendency for each driver according to the driver recognized by the driver recognition unit, and accumulating and storing the detected driver's driving tendency data in a database to update the driver driving tendency detection unit. do.

본 발명의 일 측면에 따른 운전자 운전지원 장치 및 방법은 고령 운전자에게 적합한 안전 운전 및 운전 편의를 제공하고, 이를 통해 고령 운전자의 교통사고를 예방할 수 있도록 한다. A driver's driving support apparatus and method according to an aspect of the present invention provides safe driving and driving convenience suitable for an elderly driver, and thereby prevents a traffic accident of an elderly driver.

도 1 은 본 발명의 일 실시예에 따른 운전자 운전지원 장치의 블럭 구성도이다.
도 2 는 본 발명의 일 실시예에 따른 제어모듈의 블럭 구성도이다.
도 3 은 본 발명의 일 실시예에 따른 운전자 운전지원 방법의 순서도이다.
1 is a block diagram of a driver driving assistance apparatus according to an embodiment of the present invention.
2 is a block diagram of a control module according to an embodiment of the present invention.
3 is a flowchart of a driver driving assistance method according to an embodiment of the present invention.

이하에서는 본 발명의 일 실시예에 따른 운전자 안전지원 장치 및 방법을 첨부된 도면들을 참조하여 상세하게 설명한다. 이러한 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. 또한 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서, 이는 이용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. Hereinafter, an apparatus and method for supporting driver safety according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. In this process, the thickness of the lines or the size of components shown in the drawings may be exaggerated for clarity and convenience of description. In addition, terms to be described later are terms defined in consideration of functions in the present invention, which may vary according to the intention or custom of users or operators. Therefore, definitions of these terms should be made based on the contents throughout the present specification.

도 1 은 본 발명의 일 실시예에 따른 운전자 운전지원 장치의 블럭 구성도이고, 도 2 는 본 발명의 일 실시예에 따른 제어모듈의 블럭 구성도이다.1 is a block diagram of a driver driving assistance apparatus according to an embodiment of the present invention, and FIG. 2 is a block diagram of a control module according to an embodiment of the present invention.

도 1 은 본 발명의 일 실시예에 따른 운전자 운전지원 장치는 촬영부(10), 운전자 판단부(20), 운전자 인식부(30), 데이터베이스부(40), 제어모듈(50), 운전 지원 시스템(60) 및 운전자 운전 성향 검출부(70)를 포함한다. 1 is a driver driving support device according to an embodiment of the present invention, a photographing unit 10, a driver determination unit 20, a driver recognition unit 30, a database unit 40, a control module 50, driving support It includes a system 60 and a driver's driving tendency detection unit 70.

촬영부(10)는 차량의 실내에 설치되어 운전자의 얼굴을 촬영한다. 촬영부(10)는 CCD(Charge-Coupled Device) 카메라 또는 IR(Infra-Red) 카메라 등이 채용될 수 있다. 이외에도 촬영부(10)로는 운전자의 얼굴을 촬영할 수 있는 이미지 센서라면 특별히 한정되는 것은 아니다. The photographing unit 10 is installed inside the vehicle to photograph the driver's face. The photographing unit 10 may be a Charge-Coupled Device (CCD) camera or an Infra-Red (IR) camera. In addition, the photographing unit 10 is not particularly limited as long as it is an image sensor capable of photographing a driver's face.

운전자 판단부(20)는 촬영부(10)에 의해 촬영된 영상을 통해 운전자를 추론하여 고령 운전자인지 또는 일반 운전자인지를 판단한다. The driver determination unit 20 infers the driver from the image captured by the photographing unit 10 to determine whether the driver is an elderly driver or a general driver.

고령 운전자는 나이가 상대적으로 많은 운전자로써, 운전자의 나이는 특별히 한정되는 것은 아니다. 일반 운전자는 고령 운전자를 제외한 나머지 운전자이다. An elderly driver is a driver with a relatively large age, and the driver's age is not particularly limited. General drivers are the rest of the drivers except for elderly drivers.

운전자 판단부(20)는 운전자를 추론하여 고령 운전자인지 일반 운전자인지 여부를 판단하기 위해 기계학습 방식, 예를 들어 딥러닝 방식을 이용한다. 딥러닝 방식에 따르면, 운전자 판단부(20)는 복수개의 일반 운전자의 이미지와 고령 운전자의 이미지를 각각 입력받고 이들 각각의 이미지를 분할하여 컨볼루션을 반복하면서 그 이미지에 대한 특징을 검출하고 여러 개의 레이어에서 각 특징에 대한 가중치를 검출하며, 이 가중치를 기반으로 해당 운전자가 고령 운전자인지 일반 운전자인지를 판단한다. The driver determination unit 20 uses a machine learning method, for example, a deep learning method, to determine whether the driver is an elderly driver or a general driver by inferring the driver. According to the deep learning method, the driver determination unit 20 receives images of a plurality of general drivers and images of an elderly driver, respectively, divides each of these images, repeats convolution, and detects features of the image. A weight for each feature is detected in the layer, and based on this weight, it is determined whether the corresponding driver is an elderly driver or a general driver.

한편, 본 실시예에서는 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 방식으로 기계학습 방식의 딥러닝 방식을 이용하는 것을 예시로 설명하였으나, 본 발명의 기술적 범위는 이에 한정되는 것은 아니다.Meanwhile, in the present embodiment, the use of the deep learning method of the machine learning method as a method of determining whether the driver is an elderly driver or a general driver is described as an example, but the technical scope of the present invention is not limited thereto.

운전자 인식부(30)는 촬영부(10)에 의해 촬영된 영상을 분석하여 운전자를 인식한다. 운전자 인식부(30)는 운전자 각각을 식별하기 위해 인식하는데, 상기한 기계학습 방식 등을 포함한 다양한 방식이 이용 가능하다. The driver recognition unit 30 recognizes the driver by analyzing the image captured by the photographing unit 10. The driver recognition unit 30 recognizes each driver to identify each driver, and various methods including the machine learning method described above can be used.

데이터베이스부(40)는 고령 운전자 운전 성향 데이터 및 운전자 운전 성향 프로파일 데이터를 저장한다. The database unit 40 stores driving propensity data for an elderly driver and driver driving propensity profile data.

고령 운전자 운전 성향 데이터는 고령 운전자 운전시 다양한 조건이나 상황에서 고령 운전자의 운전 조작 상태와 이에 따른 차량 상태에 대한 데이터이다. The driving propensity data for an elderly driver is data on a driving state of an elderly driver and a vehicle state accordingly in various conditions or situations when driving an elderly driver.

통상적으로, 고령 운전자의 대부분의 사고 원인으로는 안전운전 의무 불이행, 신호위반, 안전거리미확보, 중앙선침범이 있다. 이에 고령 운전자 운전 성향 데이터에는 상기한 각각의 상황에서 고령 운전자의 운전 조작 상태와 차량 상태 등이 더 포함될 수 있다. Typically, the causes of most accidents of elderly drivers include failure to comply with the duty of safe driving, violation of the signal, non-secure safety distance, and violation of the center line. Accordingly, the elderly driver's driving propensity data may further include a driving operation state and a vehicle state of the elderly driver in each of the above-described situations.

운전자 운전 성향 프로파일 데이터는 운전자 각각의 운전 성향 프로파일 데이터이다. 즉, 운전자는 다양한 주행 환경이나 상황에 따라 자신의 의지에 따라 주행하는데, 운전자 운전 성향 프로파일 데이터는 이러한 각각의 경우에 운전 조작 상태와 차량 상태 등이 포함될 수 있다. The driver driving tendency profile data is the driving tendency profile data of each driver. That is, the driver drives according to his or her will according to various driving environments or situations, and the driver driving propensity profile data may include a driving operation state and a vehicle state in each of these cases.

여기서, 운전자는 고령 운전자와 일반 운전자가 모두 포함될 수 있으며 각 운전자별로 사전에 저장된다. 이에 고령 운전자의 경우에는 해당 고령 운전자의 운전자 운전 성향 프로파일 데이터가 마련될 수 있고, 일반 운전자의 경우에도 해당 일반 운전자의 운전자 운전 성향 프로파일 데이터가 마련될 수 있다. Here, the driver may include both an elderly driver and a general driver, and is stored in advance for each driver. Accordingly, in the case of an elderly driver, driver driving propensity profile data of a corresponding elderly driver may be prepared, and in the case of a general driver, driver driving propensity profile data of a corresponding general driver may be prepared.

따라서, 고령 운전자의 경우에는 해당 고령 운전자를 위한 고령 운전자 운전 성향 데이터 뿐만 아니라, 해당 고령 운전자의 운전 성향이 반영된 운전자 운전 성향 프로파일 데이터가 마련될 수 있다. Accordingly, in the case of an elderly driver, not only the elderly driver driving tendency data for the elderly driver, but also driver driving tendency profile data reflecting the driving tendency of the elderly driver may be provided.

운전자 운전 성향 검출부(70)는 운전자 인식부(30)에 의해 해당 운전자가 인식되면 인식된 운전자별로 운전자 운전 성향을 각각 검출한다. 아울러, 운전자 운전 성향 검출부(70)는 각 운전자별로 검출된 운전자 운전 성향 데이터를 데이터베이스부(40)에 누적 저장하여 업데이트한다. When a corresponding driver is recognized by the driver recognition unit 30, the driver driving propensity detector 70 detects the driver driving propensity for each recognized driver. In addition, the driver driving tendency detection unit 70 accumulates and updates the driver driving tendency data detected for each driver in the database unit 40.

운전 지원 시스템(Driver Assistance System)(60)은 차량의 주행 안정성 향상 및 운전자의 편의성을 확보할 수 있도록 한다. The Driver Assistance System 60 makes it possible to improve driving stability of a vehicle and secure driver's convenience.

운전 지원 시스템(60)에는 스마트 크루즈 컨트롤(SCC, Smart Cruse Control), 어드밴스드 스마트 크루즈 컨트롤(ASCC, Advanced Smart Cruse Control), 차선 유지 지원 시스템(LKAS, Lane Keeping Assist System), 주차 주향 보조 시스템(SPAS, Smart Parking Assist System), 지능형 주차 주향 보조 시스템(ASPAS, Advanced Smart Parking Assist System), TJA(Traffic Jam Assist), 자동 긴급 제동 시스템(AEB, Autonomous Emergency Braking System), 고속도로 주행지원 시스템(HAD, Highway driving assist), 전방충돌방지보조(FCA, Forward Collision-Avoidance Assist), 전방 추돌 경보 시스템(FCWS, Forward Collision Warning System), 급제동 경보 시스템(ESS, Emergency Stop System), 경사로 밀림 방지 장치(HAC, Hill Start Assist Control System), LDWS(Lane Departure Warning System), BSD(Blind Spot Detection) 및 NPA(Narrow Path Assist) 중 적어도 하나가 포함될 수 있다. Driving assistance system 60 includes Smart Cruise Control (SCC), Advanced Smart Cruse Control (ASCC), Lane Keeping Assist System (LKAS), and SPAS. , Smart Parking Assist System), Intelligent Parking Assist System (ASPAS, Advanced Smart Parking Assist System), TJA (Traffic Jam Assist), Autonomous Emergency Braking System (AEB), Highway Driving Assist System (HAD, Highway) driving assist), Forward Collision-Avoidance Assist (FCA), Forward Collision Warning System (FCWS), Emergency Stop System (ESS), and prevention device (HAC, Hill) Start Assist Control System), Lane Departure Warning System (LDWS), Blind Spot Detection (BSD), and Narrow Path Assist (NPA) may be included.

제어모듈(50)은 운전자 판단부(20)에 의해 운전자가 고령 운전자로 판단되는지 또는 일반 운전자로 판단되는지 여부에 따라, 기 저장된 고령 운전자 운전 성향 데이터 및 운전자 인식부(30)에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템(60)을 제어한다. The control module 50 is based on whether the driver is judged as an elderly driver or a general driver by the driver determination unit 20, and the driver recognized by the driver recognition unit 30 The driving assistance system 60 is controlled based on at least one of the driver's driving tendency profile data.

도 2 를 참조하면, 제어모듈(50)은 운전 성향 융합값 생성부(51), 액션 위험성 예측부(52), 시뮬레이션부(53) 및 제어부(54)를 포함한다. Referring to FIG. 2, the control module 50 includes a driving propensity fusion value generating unit 51, an action risk predicting unit 52, a simulation unit 53 and a control unit 54.

운전 성향 융합값 생성부(51)는 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성한다. The driving propensity fusion value generation unit 51 generates a driving propensity fusion value by fusing the driving propensity data of the elderly driver and the driver driving propensity profile data.

운전 성향 융합값 생성부(51)는 운전자 판단부(20)에 의해 운전자가 고령 운전자로 인식될 경우, 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성한다. 이 경우, 운전 성향 융합값 생성부(51)는 이들 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터 각각을 합산 및 평균하여 운전 성향 융합값을 이들 각 데이터의 평균치로 산출할 수 있다. When the driver is recognized as an elderly driver by the driver determination unit 20, the driving propensity fusion value generating unit 51 creates a driving propensity fusion value by fusing the elderly driver driving propensity data and the driver driving propensity profile data. In this case, the driving tendency fusion value generating unit 51 may add up and average each of the elderly driver driving tendency data and the driver driving tendency profile data to calculate a driving tendency fusion value as an average value of these data.

액션 위험성 예측부(52)는 운전자 운전 성향을 기반으로 차량의 액션 위험성을 예측한다. The action risk prediction unit 52 predicts the action risk of the vehicle based on the driver's driving tendency.

즉, 운전자 판단부(20)에 의해 운전자가 고령 운전자로 판단된 경우, 액션 위험성 예측부(52)는 운전 성향 융합값 생성부(51)에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다.That is, when the driver is determined to be an elderly driver by the driver determination unit 20, the action risk prediction unit 52 is the driving situation of the vehicle based on the driving tendency fusion value generated by the driving tendency fusion value generation unit 51. And predicts the action risk of the vehicle according to the surrounding situation.

반면에, 운전자 판단부(20)에 의해 운전자가 일반 운전자로 판단된 경우, 액션 위험성 예측부(52)는 운전자 인식부(30)에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다. On the other hand, when the driver is determined to be a general driver by the driver determination unit 20, the action risk prediction unit 52 drives the vehicle based on the driver's driver driving propensity profile data recognized by the driver recognition unit 30. Predict the vehicle's action risk according to the situation and surrounding conditions.

이 경우, 액션 위험성 예측부(52)는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 각각 구분하여 예측한다. 즉, 액션 위험성 예측부(52)는 차량의 액션 위험성을 전방 충돌 등과 같은 차량의 종방향 액션 위험성과 차선 이탈 등과 같은 회방향 액션 위험성으로 액션 위험성을 구분하여 예측한다.In this case, the action risk predictor 52 predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle, respectively. That is, the action risk prediction unit 52 predicts the action risk by classifying the action risk of the vehicle into a longitudinal action risk of a vehicle such as a front collision and a rotational action risk such as a lane departure.

시뮬레이션부(53)는 액션 위험성 예측부(52)에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션한다. The simulation unit 53 simulates the vehicle behavior in advance according to the action risk of the vehicle predicted by the action risk prediction unit 52.

제어부(54)는 운전자 판단부(20)에 의해 운전자가 고령 운전자인지 또는 일반 운전자인지 여부에 따라 고령 운전자 운전 성향 데이터 및 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 운전 지원 시스템(60)을 제어한다. The control unit 54 controls the driving support system 60 based on at least one of the elderly driver driving tendency data and the driver driving tendency profile data according to whether the driver is an elderly driver or a general driver by the driver determination unit 20 do.

즉, 제어부(54)는 운전자 판단부(20)에 의해 운전자가 고령 운전자로 판단되면 운전 성향 융합값 생성부(51)를 제어하여 운전 성향 융합값을 생성하고, 액션 위험성 예측부(52)를 통해 운전 성향 융합값을 기반으로 차량의 액션 위험성을 예측하도록 한 후, 차량의 액션 위험성에 기반한 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)을 제어한다. That is, when the driver is determined to be an elderly driver by the driver determination unit 20, the control unit 54 generates a driving tendency fusion value by controlling the driving tendency fusion value generation unit 51, and the action risk prediction unit 52 After predicting the action risk of the vehicle based on the driving propensity fusion value, the driving support system 60 is controlled according to the simulation result of the simulation unit 53 based on the action risk of the vehicle.

반면에, 제어부(54)는 운전자 판단부(20)에 의해 운전자가 일반 운전자로 판단되면 액션 위험성 예측부(52)를 통해 차량의 액션 위험성을 예측하도록 한 후, 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)을 제어한다. On the other hand, if the driver is determined to be a normal driver by the driver determination unit 20, the control unit 54 predicts the action risk of the vehicle through the action risk prediction unit 52, and the simulation result of the simulation unit 53 Controls the driving assistance system 60 according to.

이 경우, 제어부(54)는 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 동작을 제어한다. 즉, 제어부(54)는 운전 지원 시스템(60)을 실제로 제어하기 전에 시뮬레이션부(53)를 통해 해당 제어에 대한 시뮬레이션을 수행하도록 하고 시뮬레이션 결과에 따라, 해당 고령 운전자 또는 일반 운전자에게 가장 우선적으로 필요한 동작이 먼저 이루어지도록 하고, 이와 함께 현재 운전자의 운전 조작에 기반하여 각종 경고를 출력함으로써, 최적의 운전 지원이 이루어질 수 있도록 한다. In this case, the control unit 54 determines an operation priority of the driving support system 60 according to the simulation result of the simulation unit 53 and controls the operation according to the determined operation priority. That is, before actually controlling the driving assistance system 60, the control unit 54 performs a simulation for the corresponding control through the simulation unit 53, and according to the simulation result, the elderly driver or general driver needs the most priority. The operation is performed first, and various warnings are output based on the current driver's driving operation, so that optimal driving support can be provided.

이하 본 발명의 일 실시예에 따른 운전자 운전지원 방법을 도 3 을 참조하여 설명한다. Hereinafter, a driver driving assistance method according to an embodiment of the present invention will be described with reference to FIG. 3.

도 3 은 본 발명의 일 실시예에 따른 운전자 운전지원 방법의 순서도이다.3 is a flowchart of a driver driving assistance method according to an embodiment of the present invention.

도 3 을 참조하면, 먼저 촬영부(10)가 차량의 실내에 설치되어 운전자의 얼굴을 촬영한다(S10). Referring to FIG. 3, first, the photographing unit 10 is installed in the interior of the vehicle to photograph the driver's face (S10).

촬영부(10)에 의해 운전자의 얼굴이 촬영됨에 따라, 운전자 인식부(30)는 촬영부(10)에 의해 촬영된 영상을 분석하여 운전자를 인식한다(S20). As the driver's face is photographed by the photographing unit 10, the driver recognition unit 30 recognizes the driver by analyzing the image captured by the photographing unit 10 (S20).

이어 운전자 운전 성향 검출부(70)는 운전자 인식부(30)에 의해 인식된 운전자의 운전 조작 상태 또는 차량 상태를 모니터링함으로써(S30), 해당 운전자의 운전자 운전 성향 데이터를 각각 검출(S40)하여 제어부(54)에 입력하고, 이 운전자의 운전자 운전 성향 데이터를 데이터베이스부(40)에 누적 저장하여 업데이트한다(S50). Then, the driver driving propensity detection unit 70 monitors the driving operation state or vehicle state of the driver recognized by the driver recognition unit 30 (S30), thereby detecting the driver driving propensity data of the corresponding driver (S40), and the control unit ( 54), the driver's driver driving tendency data is accumulated and stored in the database unit 40 and updated (S50).

한편, 단계(S10)에서 촬영부(10)에 의해 운전자의 얼굴이 촬영됨에 따라, 운전자 판단부(20)는 촬영부(10)에 의해 촬영된 영상을 분석하여 운전자를 추론하여 운전자가 고령 운전자인지 또는 일반 운전자인지 여부를 판단한다(S60,S70). Meanwhile, as the driver's face is photographed by the photographing unit 10 in step S10, the driver determination unit 20 infers the driver by analyzing the image photographed by the photographing unit 10, so that the driver is an elderly driver. Whether or not it is a general driver is determined (S60, S70).

이 경우, 운전자 판단부(20)는 운전자가 고령 운전자인지 일반 운전자인지 여부를 판단하기 위해 기계학습 방식, 예를 들어 딥러닝을 이용할 수 있다. In this case, the driver determination unit 20 may use a machine learning method, for example, deep learning, to determine whether the driver is an elderly driver or a general driver.

단계(S70)에서의 판단 결과 운전자가 고령 운전자이면, 제어부(54)는 운전 성향 융합값 생성부(51)를 제어하여 데이터베이스부(40)에서 고령 운전자 운전 성향 데이터를 검출(S80)한다. As a result of the determination in step S70, if the driver is an elderly driver, the control unit 54 controls the driving propensity fusion value generating unit 51 to detect the elderly driver driving propensity data from the database unit 40 (S80).

한편, 제어부(54)는 운전자가 고령 운전자인지 또는 일반 운전자인지 여부에 따라 운전 성향 융합값을 생성한다(S90).Meanwhile, the control unit 54 generates a driving tendency fusion value according to whether the driver is an elderly driver or a general driver (S90).

즉, 제어부(54)는 운전자가 고령 운전자이면 고령 운전자 운전 성향 데이터 및 운전자 운전 성향 프로파일 데이터를 운전 성향 융합값 생성부(51)에 입력하여 운전 성향 융합값을 생성하도록 한다. 이에, 운전 성향 융합값 생성부(51)는 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하고, 생성된 운전 성향 융합값을 액션 위험성 예측부(52)에 입력한다. That is, if the driver is an elderly driver, the controller 54 inputs the driving tendency data and the driver driving tendency profile data to the driving tendency fusion value generating unit 51 to generate the driving tendency fusion value. Accordingly, the driving tendency fusion value generation unit 51 generates a driving tendency fusion value by fusion of the elderly driver’s driving tendency data and the driver’s driving tendency profile data, and inputs the generated driving tendency fusion value to the action risk prediction unit 52 do.

반면에, 제어부(54)는 운전자가 일반 운전자이면 운전자 운전 성향 프로파일 데이터를 액션 위험성 예측부(52)에 입력한다. On the other hand, if the driver is a general driver, the controller 54 inputs driver driving propensity profile data to the action risk prediction unit 52.

이어 제어부(54)는 액션 위험성 예측부(52)를 제어하여 운전자 운전 성향을 기반으로 차량의 액션 위험성을 예측(S100)하도록 하는데, 이 경우 액션 위험성 예측부(52)는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 각각 구분하여 예측한다. Then, the control unit 54 controls the action risk prediction unit 52 to predict the action risk of the vehicle based on the driver's driving tendency (S100). In this case, the action risk prediction unit 52 determines the action risk of the vehicle The risk of longitudinal action and the risk of transverse action of the vehicle are classified and predicted.

여기서, 액션 위험성 예측부(52)는 운전자가 고령 운전자이면 운전 성향 융합값 생성부(51)에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다.Here, if the driver is an elderly driver, the action risk prediction unit 52 predicts the action risk of the vehicle according to the driving situation of the vehicle and the surrounding situation based on the driving tendency fusion value generated by the driving tendency fusion value generation unit 51. .

반면에, 액션 위험성 예측부(52)는 운전자가 일반 운전자로 판단된 경우, 해당 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측한다. On the other hand, when it is determined that the driver is a general driver, the action risk predictor 52 predicts the action risk of the vehicle according to the vehicle driving situation and the surrounding situation based on the driver driving tendency profile data of the corresponding driver.

액션 위험성 예측부(52)에 의해 차량의 액션 위험성이 예측됨에 따라, 제어부(54)는 시뮬레이션부(53)를 제어하여 액션 위험성 예측부(52)에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션한다(S110). As the action risk of the vehicle is predicted by the action risk prediction unit 52, the control unit 54 controls the simulation unit 53 to move the vehicle according to the action risk of the vehicle predicted by the action risk prediction unit 52. Simulate in advance (S110).

이 경우, 제어부(54)는 시뮬레이션부(53)의 시뮬레이션 결과에 따라 운전 지원 시스템(60)의 동작 우선 순위를 결정하고, 결정된 동작 우선 순위에 따라 동작을 제어한다(S120) In this case, the control unit 54 determines the operation priority of the driving support system 60 according to the simulation result of the simulation unit 53, and controls the operation according to the determined operation priority (S120).

즉, 제어부(54)는 운전 지원 시스템(60)을 실제로 제어하기 전에 시뮬레이션부(53)를 통해 해당 액션 위험성을 해소하기 위한 시뮬레이션을 수행하도록 하고 시뮬레이션 결과에 따라, 해당 고령 운전자 또는 일반 운전자에게 가장 우선적으로 필요한 동작을 먼저 수행하며, 이와 함께 현재 운전자의 운전 조작에 기반하여 각종 경고를 출력함으로써, 최적의 운전 지원이 이루어질 수 있도록 한다. That is, before actually controlling the driving support system 60, the control unit 54 performs a simulation to eliminate the risk of the action through the simulation unit 53, and according to the simulation result, the elderly driver or general driver First, a necessary operation is performed first, and various warnings are output based on the current driver's driving operation, so that optimal driving assistance can be achieved.

이와 같이, 본 발명의 일 실시예에 따른 운전자 운전지원 장치 및 방법은 고령 운전자에게 적합한 안전 운전 및 운전 편의를 제공하고, 이를 통해 고령 운전자의 교통사고를 예방할 수 있도록 한다As described above, the driver's driving support apparatus and method according to an embodiment of the present invention provides safe driving and driving convenience suitable for an elderly driver, thereby preventing a traffic accident of an elderly driver.

본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며 당해 기술이 속하는 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호범위는 아래의 특허청구범위에 의하여 정해져야할 것이다.The present invention has been described with reference to the embodiments shown in the drawings, but these are only exemplary, and those of ordinary skill in the art to which the present technology pertains, various modifications and other equivalent embodiments are possible. I will understand. Therefore, the true technical protection scope of the present invention should be determined by the following claims.

10: 촬영부
20: 운전자 판단부
30: 운전자 인식부
40: 데이터베이스부
50: 제어모듈
51: 운전 성향 융합값 생성부
52: 액션 위험성 예측부
53: 시뮬레이션부
54: 제어부
60: 운전 지원 시스템
70: 운전자 운전 성향 검출부
10: filming department
20: driver judgment unit
30: driver recognition unit
40: database unit
50: control module
51: driving tendency fusion value generation unit
52: action risk prediction unit
53: simulation unit
54: control unit
60: driving assistance system
70: driver driving tendency detection unit

Claims (18)

운전자를 촬영하는 촬영부;
상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 일반 운전자인지를 판단하는 운전자 판단부;
상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 운전자 인식부; 및
상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하고, 차량의 액션 위험성에 따라 차량 거동을 시뮬레이션하여 시뮬레이션 결과에 따라 운전 지원 시스템을 제어하는 제어모듈을 포함하는 운전자 운전지원 장치.
A photographing unit for photographing the driver;
A driver determination unit that analyzes the image captured by the photographing unit to determine whether the driver is an elderly driver or a general driver;
A driver recognition unit that recognizes a driver by analyzing the image captured by the photographing unit; And
The driving situation and surroundings of the vehicle based on at least one of the driver's driving propensity data previously stored according to whether the driver is determined to be an elderly driver by the driver determination unit and the driver's driving propensity profile data recognized by the driver recognition unit. Driver driving assistance device including a control module that predicts the risk of action of the vehicle according to the situation, simulates the behavior of the vehicle according to the risk of action of the vehicle, and controls the driving assistance system according to the simulation result.
제 1 항에 있어서, 상기 운전자 판단부는 상기 촬영부에 의해 촬영된 영상을 기계학습 방식을 기반으로 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 것을 특징으로 하는 운전자 운전지원 장치.
The apparatus of claim 1, wherein the driver determination unit determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.
제 1 항에 있어서, 상기 제어모듈은
고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하는 운전 성향 융합값 생성부;
상기 운전 성향 융합값 생성부에 의해 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부;
상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및
상기 운전자 판단부에 의해 운전자가 고령 운전자로 판단되면 상기 운전 성향 융합값 생성부를 제어하여 운전 성향 융합값을 생성하고 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 예측하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 하는 운전자 운전지원 장치.
The method of claim 1, wherein the control module
A driving tendency fusion value generator configured to generate a driving tendency fusion value by fusing the elderly driver driving tendency data and the driver driving tendency profile data;
An action risk prediction unit that predicts an action risk of a vehicle according to a driving situation and surrounding conditions based on the driving tendency fusion value generated by the driving tendency fusion value generation unit;
A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And
If the driver is determined to be an elderly driver by the driver determination unit, the driving tendency fusion value generation unit is controlled to generate a driving tendency fusion value, and the action risk prediction unit is used to predict the action risk of the vehicle, and the simulation result of the simulation unit And a control unit for controlling the driving assistance system according to the driver's driving assistance device.
제 3 항에 있어서, 상기 액션 위험성 예측부는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 하는 운전자 운전지원 장치.
The apparatus of claim 3, wherein the action risk prediction unit predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
제 3 항에 있어서, 상기 제어부는 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 장치.
The driver driving assistance apparatus of claim 3, wherein the control unit determines an operation priority of the driving support system according to a simulation result of the simulation unit and controls the driving support system according to the determined operation priority.
제 1 항에 있어서, 상기 제어모듈은
상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하는 액션 위험성 예측부;
상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및
상기 운전자 판단부에 의해 운전자가 일반 운전자로 판단되면 상기 액션 위험성 예측부를 통해 차량의 액션 위험성을 판단하도록 한 후, 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 제어부를 포함하는 것을 특징으로 하는 운전자 운전지원 장치.
The method of claim 1, wherein the control module
An action risk prediction unit for predicting an action risk of a vehicle according to a vehicle driving situation and a surrounding situation based on the driver driving tendency profile data of the driver recognized by the driver recognition unit;
A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And
And a control unit configured to determine the action risk of the vehicle through the action risk prediction unit when the driver is determined to be a general driver by the driver determination unit, and then control the driving assistance system according to the simulation result of the simulation unit. Driver driving assistance device.
제 6 항에 있어서, 상기 액션 위험성 예측부는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 하는 운전자 운전지원 장치.
The apparatus of claim 6, wherein the action risk prediction unit predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
제 6 항에 있어서, 상기 제어부는 상기 시뮬레이션부의 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 장치.
The driver driving assistance apparatus of claim 6, wherein the control unit determines an operation priority of the driving assistance system according to a simulation result of the simulation unit and controls the driving assistance system according to the determined operation priority.
제 1 항에 있어서, 상기 운전자 인식부에 의해 인식된 운전자에 따라 운전자별로 운전자 운전 성향을 검출하고 검출된 운전자 운전 성향 데이터를 데이터베이스부에 누적 저장하여 업데이트하는 운전자 운전 성향 검출부를 더 포함하는 것을 특징으로 하는 운전자 운전지원 장치.
The method of claim 1, further comprising a driver driving tendency detecting unit for detecting a driver driving tendency for each driver according to a driver recognized by the driver recognition unit and accumulating and storing the detected driver driving tendency data in a database unit for updating. Driver's driving support device.
촬영부가 운전자를 촬영하는 단계;
운전자 판단부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 단계;
운전자 인식부가 상기 촬영부에 의해 촬영된 영상을 분석하여 운전자를 인식하는 단계; 및
제어모듈이 상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되는지 여부에 따라 기 저장된 고령 운전자 운전 성향 데이터 및 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터 중 적어도 하나를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 예측하고, 차량의 액션 위험성에 따라 차량 거동을 시뮬레이션하여 시뮬레이션 결과에 따라 운전 지원 시스템을 제어하는 단계를 포함하는 운전자 운전지원 방법.
Photographing a driver by a photographing unit;
Determining whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit by a driver determination unit;
Recognizing a driver by analyzing the image captured by the photographing unit by a driver recognition unit; And
The control module drives the vehicle based on at least one of the driving propensity data for the elderly driver previously stored according to whether the driver is recognized as an elderly driver by the driver determination unit and the driver driving propensity profile data of the driver recognized by the driver recognition unit A driver driving assistance method comprising the step of predicting an action risk of a vehicle according to a situation and surrounding circumstances, simulating a vehicle behavior according to the action risk of the vehicle, and controlling a driving assistance system according to a simulation result.
제 10 항에 있어서, 상기 운전자 판단부는 상기 촬영부에 의해 촬영된 영상을 기계학습 방식을 기반으로 분석하여 운전자가 고령 운전자인지 또는 일반 운전자인지를 판단하는 것을 특징으로 하는 운전자 운전지원 방법.
The method of claim 10, wherein the driver determination unit determines whether the driver is an elderly driver or a general driver by analyzing the image captured by the photographing unit based on a machine learning method.
제 10 항에 있어서, 상기 운전 지원 시스템을 제어하는 단계는
상기 운전자 판단부에 의해 운전자가 고령 운전자로 인식되면 고령 운전자 운전 성향 데이터와 운전자 운전 성향 프로파일 데이터를 융합하여 운전 성향 융합값을 생성하고, 생성된 운전 성향 융합값을 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 방법.
The method of claim 10, wherein controlling the driving assistance system
When the driver is recognized as an elderly driver by the driver determination unit, a driving tendency fusion value is generated by fusing the elderly driver driving tendency data and the driver driving tendency profile data, and the vehicle driving situation and surrounding situation based on the generated driving tendency fusion value. After determining the action risk of the vehicle according to the method, the driving support system is controlled according to the simulation result by pre-simulating the vehicle behavior according to the action risk of the vehicle.
제 12 항에 있어서, 상기 운전 지원 시스템을 제어하는 단계는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 하는 운전자 운전지원 방법.
The method of claim 12, wherein the controlling of the driving assistance system predicts the action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
제 12 항에 있어서, 상기 운전 지원 시스템을 제어하는 단계는 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 방법.
The driver driving assistance system of claim 12, wherein the controlling of the driving assistance system comprises determining an operation priority of the driving assistance system according to a simulation result, and controlling the driving assistance system according to the determined operation priority. Way.
제 12 항에 있어서, 상기 운전 지원 시스템을 제어하는 단계는
상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량 주행 상황 및 주변 상황에 따라 차량의 액션 위험성을 판단하는 액션 위험성 예측부;
상기 액션 위험성 예측부에 의해 예측된 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하는 시뮬레이션부; 및
상기 운전자 판단부에 의해 운전자가 일반 운전자로 인식되면 상기 운전자 인식부에 의해 인식된 운전자의 운전자 운전 성향 프로파일 데이터를 기반으로 차량의 액션 위험성을 판단한 후, 차량의 액션 위험성에 따라 차량 거동을 사전에 시뮬레이션하여 시뮬레이션 결과에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 방법.
The method of claim 12, wherein controlling the driving assistance system
An action risk prediction unit that determines an action risk of a vehicle according to a driving situation and a surrounding situation based on the driver driving tendency profile data of the driver recognized by the driver recognition unit;
A simulation unit that simulates a vehicle behavior in advance according to an action risk of the vehicle predicted by the action risk prediction unit; And
When the driver is recognized as a general driver by the driver determination unit, the action risk of the vehicle is determined based on the driver's driving tendency profile data recognized by the driver recognition unit, and then the vehicle behavior is determined in advance according to the action risk of the vehicle. A driver driving assistance method, characterized in that by simulating and controlling the driving assistance system according to a simulation result.
제 15 항에 있어서, 상기 운전 지원 시스템을 제어하는 단계는 차량의 액션 위험성을 차량의 종방향 액션 위험성 및 차량의 횡방향 액션 위험성으로 구분하여 예측하는 것을 특징으로 하는 운전자 운전지원 방법.
16. The method of claim 15, wherein the controlling of the driving assistance system predicts an action risk of the vehicle by dividing it into a longitudinal action risk of the vehicle and a lateral action risk of the vehicle.
제 15 항에 있어서, 상기 운전 지원 시스템을 제어하는 단계는 시뮬레이션 결과에 따라 상기 운전 지원 시스템의 동작 우선 순위를 결정하여 결정된 동작 우선 순위에 따라 상기 운전 지원 시스템을 제어하는 것을 특징으로 하는 운전자 운전지원 방법.
The driver driving assistance system of claim 15, wherein the controlling of the driving support system comprises determining an operation priority of the driving support system according to a simulation result, and controlling the driving support system according to the determined operation priority. Way.
제 10 항에 있어서, 운전자 운전 성향 검출부가 상기 운전자 인식부에 의해 인식된 운전자에 따라 운전자별로 운전자 운전 성향을 검출하고 검출된 운전자 운전 성향 데이터를 데이터베이스부에 누적 저장하여 업데이트하는 단계를 더 포함하는 것을 특징으로 하는 운전자 운전지원 방법. The method of claim 10, further comprising: a driver driving tendency detecting unit detecting a driver driving tendency for each driver according to a driver recognized by the driver recognition unit, accumulating and storing the detected driver driving tendency data in a database unit, and updating the driving tendency. Driver driving assistance method, characterized in that.
KR1020170135663A 2017-10-19 2017-10-19 Driving assistant apparatus for older driver KR102216775B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170135663A KR102216775B1 (en) 2017-10-19 2017-10-19 Driving assistant apparatus for older driver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170135663A KR102216775B1 (en) 2017-10-19 2017-10-19 Driving assistant apparatus for older driver

Publications (2)

Publication Number Publication Date
KR20190043734A KR20190043734A (en) 2019-04-29
KR102216775B1 true KR102216775B1 (en) 2021-02-17

Family

ID=66282754

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170135663A KR102216775B1 (en) 2017-10-19 2017-10-19 Driving assistant apparatus for older driver

Country Status (1)

Country Link
KR (1) KR102216775B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017073021A (en) 2015-10-08 2017-04-13 株式会社デンソー Driving support device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100914007B1 (en) * 2007-11-06 2009-08-28 자동차부품연구원 Apparatus for active electronic stability program
KR101500364B1 (en) * 2013-06-24 2015-03-18 현대자동차 주식회사 System and method for providing driving environment of vehicle
KR102113769B1 (en) * 2013-11-26 2020-05-21 현대모비스 주식회사 Warning Apparatus and Method for Safe-Driving Assistance Service Based on V2X
KR102368812B1 (en) * 2015-06-29 2022-02-28 엘지전자 주식회사 Method for vehicle driver assistance and Vehicle

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017073021A (en) 2015-10-08 2017-04-13 株式会社デンソー Driving support device

Also Published As

Publication number Publication date
KR20190043734A (en) 2019-04-29

Similar Documents

Publication Publication Date Title
CN111373335B (en) Method and system for driving mode switching based on self-awareness performance parameters in hybrid driving
CN107640159B (en) Automatic driving human-computer interaction system and method
US9558414B1 (en) Method for calculating a response time
JP6887855B2 (en) How to assist a driver in driving a vehicle and a driver assistance system
EP2949536B1 (en) Method for controlling a driver assistance system
JP2019087143A (en) Driver state detection apparatus
US9851715B2 (en) Method for the automatic operation of a vehicle
WO2017006853A1 (en) Driver abnormality detection device and driver abnormality detection method
JP2009244959A (en) Driving support device and driving support method
JP2020123339A (en) Cooperative blind spot alarm method and apparatus of vehicle-to-vehicle communication infrastructure with fault tolerance and fluctuation robustness under extreme situation
US9978273B2 (en) Method and system for improving a traffic participant's attention
EP3517385B1 (en) Method and driver assistance system for assisting a driver in driving a vehicle
KR20200131951A (en) Adaptive aeb system considering steerable path and the method thereof
KR20190012607A (en) Apparatus for warning rear collision of vehicle and control method thereof
US10220771B2 (en) Method and driver assistance system for assisting a driver of a vehicle
JP2007249757A (en) Warning device
US20230234618A1 (en) Method and apparatus for controlling autonomous vehicle
CN114930264A (en) Method for remote-controlled driving of a motor vehicle comprising a remote-controlled operator, computer program product and remote-controlled driving system
KR20200141428A (en) Method for driver attention-based video output and vehicle control determine
KR102216775B1 (en) Driving assistant apparatus for older driver
JP7004534B2 (en) Vehicle control device and vehicle control method
JP2010009232A (en) Driving support device for vehicle
JP6627787B2 (en) Driver status detection device
KR101729482B1 (en) Error information protection apparatus of stereo camera for vehicle and method thereof
KR20140092451A (en) Lane departure warning apparatus and method

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant