KR102108856B1 - Method for limiting vehicle output based on driver condition estimation and apparatus using the same - Google Patents

Method for limiting vehicle output based on driver condition estimation and apparatus using the same Download PDF

Info

Publication number
KR102108856B1
KR102108856B1 KR1020180027960A KR20180027960A KR102108856B1 KR 102108856 B1 KR102108856 B1 KR 102108856B1 KR 1020180027960 A KR1020180027960 A KR 1020180027960A KR 20180027960 A KR20180027960 A KR 20180027960A KR 102108856 B1 KR102108856 B1 KR 102108856B1
Authority
KR
South Korea
Prior art keywords
output
vehicle
warning
driver
limiting
Prior art date
Application number
KR1020180027960A
Other languages
Korean (ko)
Other versions
KR20190106441A (en
Inventor
권영진
김도현
김경호
김휘
박병준
윤창락
이경희
장병태
전주일
최진규
최현균
황윤숙
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to KR1020180027960A priority Critical patent/KR102108856B1/en
Publication of KR20190106441A publication Critical patent/KR20190106441A/en
Application granted granted Critical
Publication of KR102108856B1 publication Critical patent/KR102108856B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/12Limiting control by the driver depending on vehicle state, e.g. interlocking means for the control input for preventing unsafe operation
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/18Propelling the vehicle
    • B60W30/18009Propelling the vehicle related to particular drive situations
    • B60W30/18163Lane change; Overtaking manoeuvres
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0004In digital systems, e.g. discrete-time systems involving sampling
    • B60W2050/0005Processor details or data handling, e.g. memory registers or chip architecture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0008Feedback, closed loop systems or details of feedback error signal
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/215Selection or confirmation of options
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/802Longitudinal distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/90Driver alarms

Abstract

운전자 상태 추정에 기반한 차량의 출력 제한 방법 및 이를 위한 장치가 개시된다. 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적하는 단계; 상기 발 제스처를 기반으로 판단된 상기 운전자의 감정 상태를 고려하여 상기 차량의 출력 제한을 위한 경고 카운트를 누적하는 단계; 및 상기 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 상기 차량의 출력을 제한하는 단계를 포함하고, 상기 경고 카운트는 상기 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적된다.Disclosed is a method for limiting output of a vehicle based on driver condition estimation and an apparatus therefor. A method for limiting the output of a vehicle according to an embodiment of the present invention includes tracking a driver's foot gesture for operation of an acceleration / deceleration pedal of a vehicle based on a gesture sensor; Accumulating a warning count for limiting the output of the vehicle in consideration of the emotional state of the driver determined based on the foot gesture; And if the accumulated value of the warning count exceeds a preset warning threshold, limiting the output of the vehicle, and the warning count is additionally accumulated when a lane change failure for the vehicle is detected. .

Description

운전자 상태 추정에 기반한 차량의 출력 제한 방법 및 이를 위한 장치 {METHOD FOR LIMITING VEHICLE OUTPUT BASED ON DRIVER CONDITION ESTIMATION AND APPARATUS USING THE SAME}Vehicle output limiting method based on driver condition estimation and device therefor {METHOD FOR LIMITING VEHICLE OUTPUT BASED ON DRIVER CONDITION ESTIMATION AND APPARATUS USING THE SAME}

본 발명은 차량의 출력을 자동으로 제한하는 기술에 관한 것으로, 특히 운전자가 가감속 페달을 조작하기 전 발의 움직임을 지속적으로 추적하여 운전자의 감성 변화를 감지함으로써 차량의 주행 수준을 제한할 수 있는 기술에 관한 것이다.The present invention relates to a technique for automatically limiting the output of a vehicle, in particular, a technique capable of limiting the driving level of the vehicle by continuously detecting the driver's emotional change by continuously tracking the foot movement before the driver operates the acceleration / deceleration pedal It is about.

현재 차량들은 파워트레인의 지속적인 성능 향상을 통해 과거에 비하여 차량의 출력 수준이 월등하게 향상되었다. 따라서, 차량의 출력은 운전자의 의도에 따라 과감하게 조작될 수 있다. Current vehicles have significantly improved the power level of vehicles compared to the past through continuous improvement of powertrain performance. Therefore, the output of the vehicle can be drastically manipulated according to the driver's intention.

그러나, 운전자의 감정 상태에 따라서 평소에는 하지 않던 운전 행동이 나타날 수 있는데, 이는 향상된 차량의 출력과 맞물려서 운전자 자신의 안전위협 및 타 운전자 혹은 보행자의 안전에도 위협이 될 수 있다.However, depending on the emotional state of the driver, a driving behavior that was not normally performed may be exhibited, and this may threaten the driver's own safety threat and the safety of another driver or pedestrian by engaging with the improved vehicle output.

한국 공개 특허 제10-2007-0059678호, 2007년 6월 12일 공개(명칭: 차량 및 운전자 상태 감지를 위한 시스템 및 방법)Published Korean Patent No. 10-2007-0059678, published on June 12, 2007 (name: system and method for detecting vehicle and driver status)

본 발명의 목적은 운전자의 감정 상태 변화를 지속적으로 모니터링하여 운전자 또는 타운전자의 위험상황이 발생하는 것을 사전에 방지하는 것이다.An object of the present invention is to continuously prevent the occurrence of a dangerous situation of the driver or town electronics by continuously monitoring the change in the emotional state of the driver.

또한, 본 발명의 목적은 조급하거나 과격한 운전자에게 경고를 제공하되, 개선이 되지 않는 경우에는 차량의 출력제어를 통해 운전자로 인해 발생할 수 있는 위험을 감소시키는 것이다.In addition, the object of the present invention is to provide a warning to an impatient or radical driver, but if the improvement does not improve, it is possible to reduce the risk that may occur due to the driver through the output control of the vehicle.

또한, 본 발명의 목적은 공동의 사용자가 이용하는 차량에 대해 각각의 사용자를 고려하여 차량 및 고객을 관리하는 것이다.In addition, an object of the present invention is to manage a vehicle and a customer in consideration of each user for a vehicle used by a common user.

상기한 목적을 달성하기 위한 본 발명에 따른 차량의 출력 제한 방법은 제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적하는 단계; 상기 발 제스처를 기반으로 판단된 상기 운전자의 감정 상태를 고려하여 상기 차량의 출력 제한을 위한 경고 카운트를 누적하는 단계; 및 상기 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 상기 차량의 출력을 제한하는 단계를 포함하고, 상기 경고 카운트는 상기 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적된다.A method for limiting output of a vehicle according to the present invention for achieving the above object includes tracking a driver's foot gesture for operation of an acceleration / deceleration pedal of a vehicle based on a gesture sensor; Accumulating a warning count for limiting the output of the vehicle in consideration of the emotional state of the driver determined based on the foot gesture; And if the accumulated value of the warning count exceeds a preset warning threshold, limiting the output of the vehicle, and the warning count is additionally accumulated when a lane change failure for the vehicle is detected. .

이 때, 누적값은 상기 출력 제한이 실행되지 않은 경우, 기설정된 단위 시간 마다 초기화될 수 있다.At this time, the accumulated value may be initialized every predetermined unit time when the output limit is not executed.

이 때, 제한하는 단계는 상기 누적값이 기설정된 1차 경고 임계값을 초과하는 경우에 상기 운전자에게 경고 상황을 피드백하고, 상기 누적값이 기설정된 2차 경고 임계값을 초과하는 경우에 상기 출력을 제한하면서 상기 운전자에게 출력 제한에 대한 피드백을 제공할 수 있다.At this time, the limiting step feedbacks the warning situation to the driver when the cumulative value exceeds a preset first warning threshold value, and outputs the cumulative value when the cumulative value exceeds a preset second warning threshold value. It is possible to provide feedback to the driver while limiting the output.

이 때, 누적하는 단계는 가감속 페달을 조작하기 전 페달 간 발의 이동 속도 및 페달 조작 패턴 중 적어도 하나를 고려하여 상기 감정 상태를 판단하되, 상기 감정 상태가 경고 상태로 판단되는 경우에 상기 경고 카운트를 누적할 수 있다.At this time, the accumulating step determines the emotion state in consideration of at least one of the movement speed of the foot between the pedals and the pedal operation pattern before operating the acceleration / deceleration pedal, but when the emotion state is determined to be a warning state, the warning count Can accumulate.

이 때, 누적하는 단계는 상기 페달 간 발의 이동 속도가 기설정된 기준 속도 이상일 경우 및 상기 페달 조작 패턴이 경고 조건에 만족하는 경우 중 적어도 하나에 상응할 때, 상기 감정 상태를 상기 경고 상태로 판단할 수 있다.At this time, the accumulating step may determine the emotion state as the warning state when the moving speed of the foot between the pedals is equal to or greater than a preset reference speed and when the pedal operation pattern satisfies the warning condition. Can be.

이 때, 누적하는 단계는 상기 차량의 속도를 고려한 선행차량과의 간격 정보 및 상기 운전자의 페달 조작 속도 중 적어도 하나를 더 고려하여 상기 감정 상태를 판단할 수 있다.At this time, the accumulating step may further determine the emotional state by further considering at least one of the interval information with the preceding vehicle in consideration of the speed of the vehicle and the pedal operating speed of the driver.

이 때, 제한하는 단계는 기설정된 출력 제한 시간 동안 상기 차량의 출력을 제한하되, 상기 기설정된 출력 제한 시간은 상기 누적값이 상기 기설정된 경고 임계값을 초과하기까지 걸린 시간에 반비례하게 설정될 수 있다.At this time, the limiting step limits the output of the vehicle for a preset output timeout period, but the preset output timeout period may be set inversely to the time taken until the accumulated value exceeds the preset warning threshold. have.

이 때, 출력 제한은 속도 가속 제한 및 휠 조작 제한 중 적어도 하나에 상응할 수 있다.At this time, the output limit may correspond to at least one of a speed acceleration limit and a wheel operation limit.

이 때, 차선변경 실패는 방향 지시등 활성화 상태, 주행 차선 정보 및 차선변경 소요시간 중 적어도 하나를 고려하여 판단될 수 있다.At this time, the failure to change the lane may be determined in consideration of at least one of the direction indicator activation state, driving lane information, and the time required to change the lane.

이 때, 제한하는 단계는 상기 운전자에게 경고 상황을 피드백하는 경우, 상기 운전자의 기분전환을 위한 추가 옵션을 자동으로 실행할 수 있다.At this time, the limiting step may automatically execute an additional option for the driver's mood change when the warning condition is fed back to the driver.

또한, 본 발명의 일실시예에 따른 차량의 출력 제한 장치는, 제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적하고, 상기 발 제스처를 기반으로 판단된 상기 운전자의 감정 상태를 고려하여 상기 차량의 출력 제한을 위한 경고 카운트를 누적하고, 상기 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 상기 차량의 출력을 제한하는 프로세서; 및 상기 경고 카운트 및 상기 기설정된 경고 임계값을 갱신하여 저장하는 메모리를 포함하고, 상기 경고 카운트는 상기 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적될 수 있다.In addition, the vehicle output limiting device according to an embodiment of the present invention tracks the driver's foot gesture for the vehicle's acceleration / deceleration pedal operation based on the gesture sensor, and the driver's emotion determined based on the foot gesture A processor for accumulating warning counts for limiting the output of the vehicle in consideration of a state, and limiting the output of the vehicle when the accumulated value of the warning counts exceeds a preset warning threshold; And a memory for updating and storing the warning count and the preset warning threshold, and the warning count may be additionally accumulated when a lane change failure for the vehicle is detected.

이 때, 누적값은 상기 출력 제한이 실행되지 않은 경우, 기설정된 단위 시간 마다 초기화될 수 있다.At this time, the accumulated value may be initialized every predetermined unit time when the output limit is not executed.

이 때, 프로세서는 상기 누적값이 기설정된 1차 경고 임계값을 초과하는 경우에 상기 운전자에게 경고 상황을 피드백하고, 상기 누적값이 기설정된 2차 경고 임계값을 초과하는 경우에 상기 출력을 제한하면서 상기 운전자에게 출력 제한에 대한 피드백을 제공할 수 있다.At this time, the processor feedbacks the warning situation to the driver when the cumulative value exceeds a preset first warning threshold, and limits the output when the cumulative value exceeds a preset second warning threshold. While providing feedback to the driver about the output limit.

이 때, 프로세서는 가감속 페달을 조작하기 전 페달 간 발의 이동 속도 및 페달 조작 패턴 중 적어도 하나를 고려하여 상기 감정 상태를 판단하되, 상기 감정 상태가 경고 상태로 판단되는 경우에 상기 경고 카운트를 누적할 수 있다.At this time, the processor determines the emotion state in consideration of at least one of the movement speed of the foot between the pedals and the pedal operation pattern before operating the acceleration / deceleration pedal, but accumulates the warning count when the emotion state is determined to be a warning state. can do.

이 때, 프로세서는 상기 페달 간 발의 이동 속도가 기설정된 기준 속도 이상일 경우 및 상기 페달 조작 패턴이 경고 조건에 만족하는 경우 중 적어도 하나에 상응할 때, 상기 감정 상태를 상기 경고 상태로 판단할 수 있다.At this time, the processor may determine the emotional state as the warning state when the movement speed of the foot between the pedals is equal to or greater than a preset reference speed and when the pedal operation pattern satisfies a warning condition. .

이 때, 프로세서는 상기 차량의 속도를 고려한 선행차량과의 간격 정보 및 상기 운전자의 페달 조작 속도 중 적어도 하나를 더 고려하여 상기 감정 상태를 판단할 수 있다.At this time, the processor may determine the emotional state by further considering at least one of the interval information with the preceding vehicle in consideration of the speed of the vehicle and the pedal operating speed of the driver.

이 때, 프로세서는 기설정된 출력 제한 시간 동안 상기 차량의 출력을 제한하되, 상기 기설정된 출력 제한 시간은 상기 누적값이 상기 기설정된 경고 임계값을 초과하기까지 걸린 시간에 반비례하게 설정될 수 있다.At this time, the processor limits the output of the vehicle for a preset output time limit, but the preset output time limit may be set inversely to the time taken until the accumulated value exceeds the preset warning threshold.

이 때, 출력 제한은 속도 가속 제한 및 휠 조작 제한 중 적어도 하나에 상응할 수 있다.At this time, the output limit may correspond to at least one of a speed acceleration limit and a wheel operation limit.

이 때, 차선변경 실패는 방향 지시등 활성화 상태, 주행 차선 정보 및 차선변경 소요시간 중 적어도 하나를 고려하여 판단될 수 있다.At this time, the failure to change the lane may be determined in consideration of at least one of the direction indicator activation state, driving lane information, and the time required to change the lane.

이 때, 프로세서는 상기 운전자에게 경고 상황을 피드백하는 경우, 상기 운전자의 기분전환을 위한 추가 옵션을 자동으로 실행할 수 있다.At this time, when the processor feeds back the warning situation to the driver, the driver may automatically execute an additional option for the driver to change mood.

본 발명에 따르면, 운전자의 감정 상태 변화를 지속적으로 모니터링하여 운전자 또는 타운전자의 위험상황이 발생하는 것을 사전에 방지할 수 있다.According to the present invention, it is possible to prevent the driver or town electronics from being in danger by continuously monitoring the change in the emotional state of the driver.

또한, 본 발명은 조급하거나 과격한 운전자에게 경고를 제공하되, 개선이 되지 않는 경우에는 차량의 출력제어를 통해 운전자로 인해 발생할 수 있는 위험을 감소시킬 수 있다.In addition, the present invention provides a warning to an impatient or extreme driver, but if the improvement is not possible, it is possible to reduce the risk that may occur due to the driver through output control of the vehicle.

또한, 본 발명은 공동의 사용자가 이용하는 차량에 대해 각각의 사용자를 고려하여 차량 및 고객을 관리할 수 있다.In addition, the present invention can manage a vehicle and a customer in consideration of each user for a vehicle used by a common user.

도 1은 본 발명의 일실시예에 따른 차량의 출력 제한 방법을 나타낸 동작 흐름도이다.
도 2 내지 도 4는 본 발명에 따른 제스처 센서를 이용하여 운전자의 발 제스처를 추적하는 일 예를 나타낸 도면이다.
도 5 내지 도 6은 본 발명에 따른 1개의 PD 센서와 2개의 적외선 LED 센서를 포함하는 제스처 센서의 구조와 인식 결과의 일 예를 나타낸 도면이다.
도 7 내지 도 8은 본 발명에 따른 2개의 PD 센서와 1개의 적외선 LED 센서를 포함하는 제스처 센서의 구조와 인식 결과의 일 예를 나타낸 도면이다.
도 9 내지 도 10은 본 발명에 따른 센서 반응영역 내에서 운전자의 발 위치를 검출하는 일 예를 나타낸 도면이다.
도 11은 본 발명에 따른 운전자 발의 이동시 발생하는 시간차를 이용해 추출된 움직임의 속도와 페달 점유 시간의 일 예를 나타낸 도면이다.
도 12는 본 발명의 일실시예에 따른 차량의 출력 제한 장치를 나타낸 블록도이다.
도 13은 본 발명의 일실시예에 따른 차량의 출력 제한 방법을 상세하게 나타낸 동작흐름도이다.
도 14는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.
1 is an operation flowchart showing a method for limiting output of a vehicle according to an embodiment of the present invention.
2 to 4 are views showing an example of tracking a driver's foot gesture using a gesture sensor according to the present invention.
5 to 6 are views showing an example of a structure and a recognition result of a gesture sensor including one PD sensor and two infrared LED sensors according to the present invention.
7 to 8 are views showing an example of a structure and a recognition result of a gesture sensor including two PD sensors and one infrared LED sensor according to the present invention.
9 to 10 are views showing an example of detecting the position of the driver's foot in the sensor reaction area according to the present invention.
11 is a view showing an example of the speed of the extracted movement and the pedal occupancy time using the time difference generated when the driver's foot moves according to the present invention.
12 is a block diagram showing an output limiting device for a vehicle according to an embodiment of the present invention.
13 is an operation flow chart showing in detail a method for limiting output of a vehicle according to an embodiment of the present invention.
14 is a view showing a computer system according to an embodiment of the present invention.

본 발명을 첨부된 도면을 참조하여 상세히 설명하면 다음과 같다. 여기서, 반복되는 설명, 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능, 및 구성에 대한 상세한 설명은 생략한다. 본 발명의 실시형태는 당 업계에서 평균적인 지식을 가진 자에게 본 발명을 보다 완전하게 설명하기 위해서 제공되는 것이다. 따라서, 도면에서의 요소들의 형상 및 크기 등은 보다 명확한 설명을 위해 과장될 수 있다.If described in detail with reference to the accompanying drawings the present invention. Here, repeated descriptions, well-known functions that may unnecessarily obscure the subject matter of the present invention, and detailed description of the configuration will be omitted. Embodiments of the present invention are provided to more fully describe the present invention to those skilled in the art. Therefore, the shape and size of elements in the drawings may be exaggerated for a more clear description.

이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일실시예에 따른 차량의 출력 제한 방법을 나타낸 동작 흐름도이다.1 is an operation flowchart showing a method for limiting output of a vehicle according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적한다(S110).Referring to FIG. 1, a method for limiting output of a vehicle according to an embodiment of the present invention tracks a driver's foot gesture for operating an acceleration / deceleration pedal of the vehicle based on a gesture sensor (S110).

이 때, 운전자의 발 제스처는 운전자가 가속 페달이나 감속 페달을 밟기 전 발의 이동방향이나 발의 이동속도 또는 페달을 밟는 깊이나 페달을 밟는 속도 등을 포함할 수 있다. At this time, the driver's foot gesture may include a direction in which the driver moves, a moving speed of the foot, a depth of stepping on the pedal, or a speed of pedaling before the driver presses the accelerator or deceleration pedal.

이 때, 제스처 센서는 운전자의 발 움직임을 추적하여 발 제스처를 검출하기 위한 센서에 상응할 수 있다. 따라서, 도 2 내지 도 3에 도시된 것처럼, 본 발명의 일실시예에 따른 제스처 센서(210, 310)는 차량의 페달(220-1~220-3, 320-1~320-3)이 설치된 위치를 기준으로 운전자 발(200, 300)의 움직임 동선(330)을 커버할 수 있는 곳에 설치될 수 있다. At this time, the gesture sensor may correspond to a sensor for detecting a foot gesture by tracking the foot movement of the driver. Therefore, as illustrated in FIGS. 2 to 3, the gesture sensors 210 and 310 according to an embodiment of the present invention are equipped with pedals 220-1 to 220-3 and 320-1 to 320-3 of a vehicle. It may be installed in a location capable of covering the movement line 330 of the driver's feet 200 and 300 based on the position.

또한, 도 4에 도시된 것과 같은 위치에서 제스처 센서(410)가 동작함으로써 운전자 발(400)이 페달(420)을 밟는 깊이를 측정할 수도 있다. 이 때, 제스처 센서(410)는 운전자 발(400)이 페달(420)을 밟고 떼는 움직임을 속도로 추출함으로써 운전자가 각 페달을 점유하는 시간도 추정할 수 있다. In addition, the gesture sensor 410 operates at a position as illustrated in FIG. 4 to measure the depth at which the driver's foot 400 depresses the pedal 420. At this time, the gesture sensor 410 may also estimate the time that the driver occupies each pedal by extracting the speed at which the driver's foot 400 depresses and releases the pedal 420.

이러한 제스처 센서는 적외선, 주파수, 카메라, 3차원 깊이 카메라, 초음파 레이저 등 다양한 종류의 센서를 이용하여 구성될 수 있다. The gesture sensor may be configured using various types of sensors such as infrared, frequency, camera, 3D depth camera, and ultrasonic laser.

예를 들어, 본 발명의 일실시예에 따른 제스처 센서(510)는, 도 5에 도시된 것과 같이 하나의 PD(Photo Diode) 센서(511)와 두 개의 적외선 LED(Light Emitting Diode) 센서(512, 513)들로 구성되어, 도 6에 도시된 것과 같이 운전자의 발 제스처를 추적할 수 있다.For example, the gesture sensor 510 according to an embodiment of the present invention, as shown in Figure 5, one PD (Photo Diode) sensor 511 and two infrared LED (Light Emitting Diode) sensor 512 , 513), it is possible to track the driver's foot gesture as shown in FIG.

다른 예를 들어, 본 발명의 다른 실시예에 따른 제스처 센서(710)는, 도 7에 도시된 것과 같이 두 개의 PD 센서(712, 713)들과 하나의 적외선 LED 센서(711)로 구성되어, 도 8에 도시된 것과 같이 운전자의 발 제스처를 추척할 수도 있다. For another example, the gesture sensor 710 according to another embodiment of the present invention is composed of two PD sensors 712, 713 and one infrared LED sensor 711, as shown in FIG. As illustrated in FIG. 8, the driver's foot gesture may be tracked.

이 때, 도 7에 도시된 것과 같이 적외선 LED 센서가 적은 제스처 센서(710)를 이용함으로써 전력소모를 감소시킬 수 있다.At this time, power consumption can be reduced by using the gesture sensor 710 with less infrared LED sensor as shown in FIG. 7.

이 때, 차량의 가속 페달과 감속 페달(브레이크)을 밟는 발을 주요 추적 대상으로 하여 추적을 수행할 수 있다. 예를 들어, 차량의 주행시에는 주로 오른쪽 발을 이용하여 가감속 페달을 조작하므로 오른쪽 발을 주요 추적 대상으로 할 수 있다.At this time, it is possible to perform tracking by using the vehicle's accelerator and deceleration pedals (brake) as the main tracking target. For example, when driving the vehicle, the right foot can be mainly used as the main tracking target because the right and left pedals are operated using the right foot.

예를 들어, 도 9 내지 도 10을 참조하면, 제스처 센서의 반응영역 내에서 운전자의 발을 추적한 제스처 센싱값(910, 1010)을 이용하여 운전자의 발 위치에 상응하는 검출 신호 값(920, 1020)을 획득할 수 있다. 이 때, 검출 신호값(920, 1020)은 운전자의 발의 위치 정보를 포함하고 있으므로, 도 11에 도시된 것과 같이 운전자의 발이 각 페달을 점유하고 있는 점유시간(1110, 1120)을 추출하는 것이 가능하다. 또한, 검출 신호값에서 나타나는 시간차(1131, 1132)를 이용하여 발의 이동속도를 추출할 수도 있다.For example, referring to FIGS. 9 to 10, a detection signal value 920 corresponding to a driver's foot position using gesture sensing values 910 and 1010 that track the driver's foot in the response area of the gesture sensor, 1020). At this time, since the detection signal values 920 and 1020 include the position information of the driver's foot, it is possible to extract the occupying times 1110 and 1120 in which the driver's foot occupies each pedal as shown in FIG. 11. Do. In addition, the movement speed of the foot may be extracted using the time differences 1131 and 1132 indicated by the detection signal value.

이와 같이, 제스처 센서를 통해 센싱된 정보는 무선 네트워크를 기반으로 본 발명의 일실시예에 따른 출력 제한 장치로 제공할 수도 있다. 따라서, 제스처 센서 및 출력 제한 장치는 무선 또는 유선 네트워크를 기반으로 통신을 수행할 수 있다.As described above, the information sensed through the gesture sensor may be provided as an output limiting device according to an embodiment of the present invention based on a wireless network. Therefore, the gesture sensor and the output limiting device can perform communication based on a wireless or wired network.

또한, 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 발 제스처를 기반으로 판단된 운전자의 감정 상태를 고려하여 차량의 출력 제한을 위한 경고 카운트를 누적한다(S120).In addition, in the method of limiting the output of a vehicle according to an embodiment of the present invention, a warning count for limiting the output of the vehicle is accumulated in consideration of the emotional state of the driver determined based on the foot gesture (S120).

이 때, 가감속 페달을 조작하기 전 페달 간 발의 이동 속도 및 페달 조작 패턴 중 적어도 하나를 고려하여 감정 상태를 판단하되, 감정 상태가 경고 상태로 판단되는 경우에 경고 카운트를 누적할 수 있다. At this time, before operating the acceleration / deceleration pedal, the emotional state is determined by considering at least one of the movement speed of the pedals between the pedals and the pedal operation pattern, but when the emotional state is determined to be a warning state, a warning count may be accumulated.

이 때, 경고 상태는 현재 운전자가 운전이 능숙한 사람이 아니라고 판단되거나 또는 스트레스나 다른 원인으로 인해 안전한 주행을 하기 어렵다고 판단되는 상태에 해당할 수 있다.At this time, the warning state may correspond to a state in which it is determined that the current driver is not a proficient driver or that it is difficult to safely drive due to stress or other causes.

이 때, 페달 간 발의 이동 속도가 기설정된 기준 속도 이상일 경우 및 페달 조작 패턴이 경고 조건에 만족하는 경우 중 적어도 하나에 상응할 때, 감정 상태를 경고 상태로 판단할 수 있다. At this time, when the moving speed of the foot between the pedals is equal to or greater than a preset reference speed and when the pedal operation pattern satisfies at least one of the warning conditions, the emotional state may be determined as a warning state.

예를 들어, 운전자가 가속페달과 감속페달을 기설정된 기준 속도 이상으로 급격하게 조작하는 경우에 경고 상태로 판단할 수 있다. For example, when the driver operates the accelerator pedal and the deceleration pedal abruptly above a preset reference speed, it may be determined as a warning state.

다른 예를 들어, 운전자가 차량의 페달을 조작하기 이전에 가속페달과 감속페달을 밟지 못하고 왔다 갔다 하는 상황이 여러 번 반복되는 경우에 페달 조작 패턴이 경고 조건에 만족하는 것으로 판단하고 경고 상태로 판단할 수도 있다.For another example, if a situation in which the driver is unable to step on or off the accelerator pedal and the deceleration pedal before and after pedaling the vehicle is repeated several times, it is determined that the pedal operation pattern satisfies the warning condition and judged as a warning condition. You may.

이 때, 차량의 속도를 고려한 선행차량과의 간격 정보 및 운전자의 페달 조작 속도 중 적어도 하나를 더 고려하여 감정 상태를 판단할 수 있다.At this time, the emotional state may be determined by further considering at least one of the distance information from the preceding vehicle in consideration of the speed of the vehicle and the pedal operating speed of the driver.

예를 들어, 선행차량과의 간격이 기설정된 차간 간격보다 가까운 상태에서 운전자가 가속 페달을 밟아 차량의 속도를 증가시키는 경우에 운전자의 감정 상태를 경고 상태로 판단할 수 있다. For example, when the driver presses the accelerator pedal to increase the speed of the vehicle in a state in which the distance from the preceding vehicle is closer than a predetermined inter-vehicle interval, the emotional state of the driver may be determined as a warning state.

다른 예를 들어, 운전자가 가감속 페달을 밟거나 또는 페달에서 발을 떼는 속도가 급격한 경우에도 운전자의 감정 상태를 경고 상태로 판단하고 경고 카운트를 누적시킬 수 있다. For another example, the driver's emotional state may be determined as a warning state and the warning count may be accumulated even when the driver depresses or decelerates the acceleration / deceleration pedal.

이 때, 경고 카운트는 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적될 수 있다. At this time, the warning count may be additionally accumulated when a lane change failure for the vehicle is detected.

이 때, 차선변경 실패는 방향 지시등 활성화 상태, 주행 차선 정보 및 차선변경 소요시간 중 적어도 하나를 고려하여 판단될 수 있다.At this time, the failure to change the lane may be determined in consideration of at least one of the direction indicator activation state, driving lane information, and the time required to change the lane.

예를 들어, 방향 지시등이 활성화된 이후 기설정된 차선변경 소요시간 동안 주행 차선이 변경되지 않을 경우에 차량의 운전자가 차선변경에 실패한 것으로 판단할 수 있다.For example, if the driving lane is not changed for a predetermined lane change time after the turn signal is activated, the driver of the vehicle may determine that the lane change has failed.

다른 예를 들어, 운전자가 주행 차선을 지키지 않고 주행하고 있는 경우에도 차선변경에 실패한 것으로 판단하고 경고 카운트를 누적시킬 수도 있다.For another example, even if the driver is driving without keeping the driving lane, it may be determined that the lane change has failed and the warning count may be accumulated.

또한, 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 차량의 출력을 제한한다(S130)In addition, the vehicle output limiting method according to an embodiment of the present invention limits the output of the vehicle when the accumulated value of the warning count exceeds a preset warning threshold (S130).

이 때, 출력 제한은 속도 가속 제한 및 휠 조작 제한 중 적어도 하나에 상응할 수 있다.At this time, the output limit may correspond to at least one of a speed acceleration limit and a wheel operation limit.

예를 들어, 출력 제한이 실행되는 경우, 차량의 최고 시속은 100km/h를 넘지 않도록 제한하거나, 에코(ECO) 모드로 동작하면서 급가속을 억제할 수 있다. 이 때, 출력 제한의 종류는 특별히 한정되지 않는다.For example, when the output limit is executed, the maximum hourly speed of the vehicle may be limited to not exceed 100 km / h, or the rapid acceleration may be suppressed while operating in the ECO mode. At this time, the type of output limitation is not particularly limited.

이 때, 누적값은 출력 제한이 실행되지 않은 경우, 기설정된 단위 시간 마다 초기화될 수 있다.At this time, the cumulative value may be initialized every predetermined unit time when the output limit is not executed.

예를 들어, 기설정된 단위 시간이 10분이고, 기설정된 경고 임계값이 10번이라고 가정할 수 있다. 이 때, 운전자가 차량을 주행하는 10분동안 경고 카운트가 10 미만으로 누적되었다면, 출력 제한이 실행되지 않고 누적값을 다시 0으로 초기화할 수 있다. For example, it can be assumed that the preset unit time is 10 minutes and the preset warning threshold is 10 times. At this time, if the warning count is accumulated to less than 10 for 10 minutes while the driver is driving the vehicle, the output limit is not executed and the accumulated value can be reset to 0 again.

그러나, 단위 시간 이내에 누적값이 기설정된 경고 임계값을 초과하였다면, 출력 제한이 실행되는 동안에도 누적값을 초기화하기 않고 유지할 수 있다. 이 때, 출력 제한이 실행되는 동안에도 계속해서 경고 카운트가 누적되는 경우, 출력 제한이 실행되는 동안 누적된 경고 카운트에 가중치를 부여하여 출력 제한의 강도를 향상시킬 수도 있다. However, if the accumulated value exceeds the preset warning threshold within a unit time, the accumulated value can be maintained without initializing even while the output limit is executed. At this time, if the warning count is continuously accumulated even while the output limit is being executed, the intensity of the output limit may be improved by weighting the accumulated warning count while the output limit is being executed.

이 때, 누적값이 기설정된 1차 경고 임계값을 초과하는 경우에 운전자에게 경고 상황을 피드백하고, 누적값이 기설정된 2차 경고 임계값을 초과하는 경우에 출력을 제한하면서 운전자에게 출력 제한에 대한 피드백을 제공할 수 있다.At this time, when the cumulative value exceeds the preset first warning threshold, the driver is fed back with a warning condition, and when the cumulative value exceeds the preset second warning threshold, output is limited to the driver while limiting output. Can provide feedback on

예를 들어, 누적값이 기설정된 1차 경고 임계값을 초과하는 경우, 차량 내 설치된 디스플레이 모듈, 오디오 모듈, 네비게이션 모듈, 스티어링 진동피드백 등을 통하여 가벼운 경고음 혹은 음성 경고음을 운전자에게 피드백 할 수 있다.For example, when the accumulated value exceeds a preset first warning threshold, a light warning sound or a voice warning sound may be fed back to the driver through a display module, an audio module, a navigation module, and a steering vibration feedback installed in the vehicle.

이 때, 운전자에게 경고 상황을 피드백하는 경우, 운전자의 기분전환을 위한 추가 옵션을 자동으로 실행할 수 있다.At this time, when the warning situation is fed back to the driver, an additional option for the driver's mood may be automatically executed.

예를 들어, 평소에 운전자가 선호하는 음악을 자동으로 재생하거나, 날씨 상태를 고려하여 차내를 환기시키는 방식의 추가 옵션이 자동으로 실행될 수 있다.For example, an additional option of automatically playing the music preferred by the driver automatically or ventilating the vehicle in consideration of weather conditions may be automatically executed.

기설정된 출력 제한 시간 동안 차량의 출력을 제한하되, 기설정된 출력 제한 시간은 누적값이 기설정된 경고 임계값을 초과하기까지 걸린 시간에 반비례하게 설정될 수 있다.The output of the vehicle is limited during the preset output timeout period, but the preset output timeout period may be set inversely to the time taken until the accumulated value exceeds a preset warning threshold.

예를 들어, 누적값이 기설정된 경고 임계값을 초과하기까지 걸린 시간이 짧을수록 기설정된 출력 제한 시간을 길게 설정할 수 있다. 즉, 누적값이 기설정된 경고 임계값을 초과하기까지 걸린 시간이 짧을수록 운전자의 감정 상태가 급격하게 변화한 것으로 판단하고, 보다 안전한 주행을 위해 출력 제한 시간을 증가시킬 수 있다.For example, the shorter the time it takes for the accumulated value to exceed the preset warning threshold, the longer the preset output timeout period can be set. That is, the shorter the time it takes for the cumulative value to exceed the preset warning threshold, it is determined that the driver's emotional state has changed rapidly, and the output time limit can be increased for safer driving.

또한, 도 1에는 도시하지 아니하였으나, 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 네트워크와 같은 통신망을 통해 차량의 출력 제한을 위해 필요한 정보를 송수신할 수 잇다. In addition, although not shown in FIG. 1, the method for limiting the output of a vehicle according to an embodiment of the present invention can transmit and receive information necessary for limiting the output of the vehicle through a communication network such as a network.

또한, 도 1에는 도시하지 아니하였으나, 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 차량의 출력 제한 과정에서 발생되는 다양한 정보를 별도의 저장 모듈에 저장할 수도 있다.In addition, although not shown in FIG. 1, in the method of limiting the output of a vehicle according to an embodiment of the present invention, various information generated in the process of limiting the output of the vehicle may be stored in a separate storage module.

이와 같은, 차량의 출력 제한 방법을 통해 운전자의 감정 상태 변화를 지속적으로 모니터링하여 운전자 또는 타운전자의 위험상황이 발생하는 것을 사전에 방지할 수 있다.Through such a method of limiting the output of the vehicle, the emotional state change of the driver can be continuously monitored to prevent the danger situation of the driver or the town electronics from occurring.

또한, 조급하거나 과격한 운전자에게 경고를 제공하되, 개선이 되지 않는 경우에는 차량의 출력제어를 통해 운전자로 인해 발생할 수 있는 위험을 감소시킬 수도 있다.In addition, a warning is given to an impatient or radical driver, but if improvement is not made, the risk that may be caused by the driver may be reduced through output control of the vehicle.

도 12는 본 발명의 일실시예에 따른 차량의 출력 제한 장치를 나타낸 블록도이다.12 is a block diagram showing a vehicle output limiting device according to an embodiment of the present invention.

도 12를 참조하면, 본 발명의 일실시예에 따른 차량의 출력 제한 장치는 통신부(1210), 프로세서(1220) 및 메모리(1230)를 포함한다.Referring to FIG. 12, an apparatus for limiting output of a vehicle according to an embodiment of the present invention includes a communication unit 1210, a processor 1220, and a memory 1230.

통신부(1210)는 네트워크와 같은 통신망을 통해 차량의 출력 제한을 위해 필요한 정보를 송수신하는 역할을 한다. 특히, 본 발명의 일실시예에 따른 통신부(1210)는 제스처 센서로부터 센싱되는 정보들을 수신하고, 차량을 제어하기 위한 제어 명령들을 차량 제어 모듈로 제공할 수 있다. The communication unit 1210 serves to transmit and receive information necessary for limiting the output of the vehicle through a communication network such as a network. In particular, the communication unit 1210 according to an embodiment of the present invention may receive information sensed from the gesture sensor and provide control commands for controlling the vehicle to the vehicle control module.

프로세서(1220)는 제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적한다.The processor 1220 tracks the driver's foot gesture for the vehicle's acceleration / deceleration pedal operation based on the gesture sensor.

이 때, 운전자의 발 제스처는 운전자가 가속 페달이나 감속 페달을 밟기 전 발의 이동방향이나 발의 이동속도 또는 페달을 밟는 깊이나 페달을 밟는 속도 등을 포함할 수 있다. At this time, the driver's foot gesture may include a direction in which the driver moves, a moving speed of the foot, a depth of stepping on the pedal, or a speed of pedaling before the driver presses the accelerator or deceleration pedal.

이 때, 제스처 센서는 운전자의 발 움직임을 추적하여 발 제스처를 검출하기 위한 센서에 상응할 수 있다. 따라서, 도 2 내지 도 3에 도시된 것처럼, 본 발명의 일실시예에 따른 제스처 센서(210, 310)는 차량의 페달(220-1~220-3, 320-1~320-3)이 설치된 위치를 기준으로 운전자 발(200, 300)의 움직임 동선(330)을 커버할 수 있는 곳에 설치될 수 있다. At this time, the gesture sensor may correspond to a sensor for detecting a foot gesture by tracking the foot movement of the driver. Therefore, as illustrated in FIGS. 2 to 3, the gesture sensors 210 and 310 according to an embodiment of the present invention are equipped with pedals 220-1 to 220-3 and 320-1 to 320-3 of a vehicle. It may be installed in a location capable of covering the movement line 330 of the driver's feet 200 and 300 based on the position.

또한, 도 4에 도시된 것과 같은 위치에서 제스처 센서(410)가 동작함으로써 운전자 발(400)이 페달(420)을 밟는 깊이를 측정할 수도 있다. 이 때, 제스처 센서(410)는 운전자 발(400)이 페달(420)을 밟고 떼는 움직임을 속도로 추출함으로써 운전자가 각 페달을 점유하는 시간도 추정할 수 있다. In addition, the gesture sensor 410 operates at a position as illustrated in FIG. 4 to measure the depth at which the driver's foot 400 depresses the pedal 420. At this time, the gesture sensor 410 may also estimate the time that the driver occupies each pedal by extracting the speed at which the driver's foot 400 depresses and releases the pedal 420.

이러한 제스처 센서는 적외선, 주파수, 카메라, 3차원 깊이 카메라, 초음파 레이저 등 다양한 종류의 센서를 이용하여 구성될 수 있다. The gesture sensor may be configured using various types of sensors such as infrared, frequency, camera, 3D depth camera, and ultrasonic laser.

예를 들어, 본 발명의 일실시예에 따른 제스처 센서(510)는, 도 5에 도시된 것과 같이 하나의 PD(Photo Diode) 센서(511)와 두 개의 적외선 LED(Light Emitting Diode) 센서(512, 513)들로 구성되어, 도 6에 도시된 것과 같이 운전자의 발 제스처를 추적할 수 있다.For example, the gesture sensor 510 according to an embodiment of the present invention, as shown in Figure 5, one PD (Photo Diode) sensor 511 and two infrared LED (Light Emitting Diode) sensor 512 , 513), it is possible to track the driver's foot gesture as shown in FIG.

다른 예를 들어, 본 발명의 다른 실시예에 따른 제스처 센서(710)는, 도 7에 도시된 것과 같이 두 개의 PD 센서(712, 713)들과 하나의 적외선 LED 센서(711)로 구성되어, 도 8에 도시된 것과 같이 운전자의 발 제스처를 추척할 수도 있다. For another example, the gesture sensor 710 according to another embodiment of the present invention is composed of two PD sensors 712, 713 and one infrared LED sensor 711, as shown in FIG. As illustrated in FIG. 8, the driver's foot gesture may be tracked.

이 때, 도 7에 도시된 것과 같이 적외선 LED 센서가 적은 제스처 센서(710)를 이용함으로써 전력소모를 감소시킬 수 있다.At this time, power consumption can be reduced by using the gesture sensor 710 with less infrared LED sensor as shown in FIG. 7.

이 때, 차량의 가속 페달과 감속 페달(브레이크)을 밟는 발을 주요 추적 대상으로 하여 추적을 수행할 수 있다. 예를 들어, 차량의 주행시에는 주로 오른쪽 발을 이용하여 가감속 페달을 조작하므로 오른쪽 발을 주요 추적 대상으로 할 수 있다.At this time, it is possible to perform tracking by using the vehicle's accelerator and deceleration pedals (brake) as the main tracking target. For example, when driving the vehicle, the right foot can be mainly used as the main tracking target because the right and left pedals are operated using the right foot.

예를 들어, 도 9 내지 도 10을 참조하면, 제스처 센서의 반응영역 내에서 운전자의 발을 추적한 제스처 센싱값(910, 1010)을 이용하여 운전자의 발 위치에 상응하는 검출 신호 값(920, 1020)을 획득할 수 있다. 이 때, 검출 신호값(920, 1020)은 운전자의 발의 위치 정보를 포함하고 있으므로, 도 11에 도시된 것과 같이 운전자의 발이 각 페달을 점유하고 있는 점유시간(1110, 1120)을 추출하는 것이 가능하다. 또한, 검출 신호값에서 나타나는 시간차(1131, 1132)를 이용하여 발의 이동속도를 추출할 수도 있다.For example, referring to FIGS. 9 to 10, the detection signal values 920 corresponding to the driver's foot position using gesture sensing values 910 and 1010 that track the driver's foot within the response area of the gesture sensor, 1020). At this time, since the detection signal values 920 and 1020 include the position information of the driver's foot, it is possible to extract the occupying times 1110 and 1120 in which the driver's foot occupies each pedal as shown in FIG. 11. Do. In addition, the movement speed of the foot may be extracted using the time differences 1131 and 1132 indicated by the detection signal value.

이와 같이, 제스처 센서를 통해 센싱된 정보는 무선 네트워크를 기반으로 본 발명의 일실시예에 따른 출력 제한 장치로 제공할 수도 있다. 따라서, 제스처 센서 및 출력 제한 장치는 무선 또는 유선 네트워크를 기반으로 통신을 수행할 수 있다.As described above, the information sensed through the gesture sensor may be provided as an output limiting device according to an embodiment of the present invention based on a wireless network. Therefore, the gesture sensor and the output limiting device can perform communication based on a wireless or wired network.

또한, 프로세서(1220)는 발 제스처를 기반으로 판단된 운전자의 감정 상태를 고려하여 차량의 출력 제한을 위한 경고 카운트를 누적한다.In addition, the processor 1220 accumulates a warning count for limiting the output of the vehicle in consideration of the emotional state of the driver determined based on the foot gesture.

이 때, 가감속 페달을 조작하기 전 페달 간 발의 이동 속도 및 페달 조작 패턴 중 적어도 하나를 고려하여 감정 상태를 판단하되, 감정 상태가 경고 상태로 판단되는 경우에 경고 카운트를 누적할 수 있다. At this time, before operating the acceleration / deceleration pedal, the emotional state is determined by considering at least one of the movement speed of the pedals between the pedals and the pedal operation pattern, but when the emotional state is determined to be a warning state, a warning count may be accumulated.

이 때, 경고 상태는 현재 운전자가 운전이 능숙한 사람이 아니라고 판단되거나 또는 스트레스나 다른 원인으로 인해 안전한 주행을 하기 어렵다고 판단되는 상태에 해당할 수 있다.At this time, the warning state may correspond to a state in which it is determined that the current driver is not a proficient driver or that it is difficult to safely drive due to stress or other causes.

이 때, 페달 간 발의 이동 속도가 기설정된 기준 속도 이상일 경우 및 페달 조작 패턴이 경고 조건에 만족하는 경우 중 적어도 하나에 상응할 때, 감정 상태를 경고 상태로 판단할 수 있다. At this time, when the moving speed of the foot between the pedals is equal to or greater than a preset reference speed and when the pedal operation pattern satisfies at least one of the warning conditions, the emotional state may be determined as a warning state.

예를 들어, 운전자가 가속페달과 감속페달을 기설정된 기준 속도 이상으로 급격하게 조작하는 경우에 경고 상태로 판단할 수 있다. For example, when the driver operates the accelerator pedal and the deceleration pedal abruptly above a preset reference speed, it may be determined as a warning state.

다른 예를 들어, 운전자가 차량의 페달을 조작하기 이전에 가속페달과 감속페달을 밟지 못하고 왔다 갔다 하는 상황이 여러 번 반복되는 경우에 페달 조작 패턴이 경고 조건에 만족하는 것으로 판단하고 경고 상태로 판단할 수도 있다.For another example, if a situation in which the driver is unable to step on or off the accelerator pedal and the deceleration pedal before and after pedaling the vehicle is repeated several times, it is determined that the pedal operation pattern satisfies the warning condition and judged as a warning condition. You may.

이 때, 차량의 속도를 고려한 선행차량과의 간격 정보 및 운전자의 페달 조작 속도 중 적어도 하나를 더 고려하여 감정 상태를 판단할 수 있다.At this time, the emotional state may be determined by further considering at least one of the distance information from the preceding vehicle in consideration of the speed of the vehicle and the pedal operating speed of the driver.

예를 들어, 선행차량과의 간격이 기설정된 차간 간격보다 가까운 상태에서 운전자가 가속 페달을 밟아 차량의 속도를 증가시키는 경우에 운전자의 감정 상태를 경고 상태로 판단할 수 있다. For example, when the driver presses the accelerator pedal to increase the speed of the vehicle in a state in which the distance from the preceding vehicle is closer than a predetermined inter-vehicle interval, the emotional state of the driver may be determined as a warning state.

다른 예를 들어, 운전자가 가감속 페달을 밟거나 또는 페달에서 발을 떼는 속도가 급격한 경우에도 운전자의 감정 상태를 경고 상태로 판단하고 경고 카운트를 누적시킬 수 있다. For another example, the driver's emotional state may be determined as a warning state and the warning count may be accumulated even when the driver depresses or decelerates the acceleration / deceleration pedal.

이 때, 경고 카운트는 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적될 수 있다. At this time, the warning count may be additionally accumulated when a lane change failure for the vehicle is detected.

이 때, 차선변경 실패는 방향 지시등 활성화 상태, 주행 차선 정보 및 차선변경 소요시간 중 적어도 하나를 고려하여 판단될 수 있다.At this time, the failure to change the lane may be determined in consideration of at least one of the direction indicator activation state, driving lane information, and the time required to change the lane.

예를 들어, 방향 지시등이 활성화된 이후 기설정된 차선변경 소요시간 동안 주행 차선이 변경되지 않을 경우에 차량의 운전자가 차선변경에 실패한 것으로 판단할 수 있다.For example, if the driving lane is not changed for a predetermined lane change time after the turn signal is activated, the driver of the vehicle may determine that the lane change has failed.

다른 예를 들어, 운전자가 주행 차선을 지키지 않고 주행하고 있는 경우에도 차선변경에 실패한 것으로 판단하고 경고 카운트를 누적시킬 수도 있다.For another example, even if the driver is driving without keeping the driving lane, it may be determined that the lane change has failed and the warning count may be accumulated.

또한, 프로세서(1220)는 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 차량의 출력을 제한한다.In addition, the processor 1220 limits the output of the vehicle when the accumulated value of the warning count exceeds a preset warning threshold.

이 때, 출력 제한은 속도 가속 제한 및 휠 조작 제한 중 적어도 하나에 상응할 수 있다.At this time, the output limit may correspond to at least one of a speed acceleration limit and a wheel operation limit.

예를 들어, 출력 제한이 실행되는 경우, 차량의 최고 시속은 100km/h를 넘지 않도록 제한하거나, 에코(ECO) 모드로 동작하면서 급가속을 억제할 수 있다. 이 때, 출력 제한의 종류는 특별히 한정되지 않는다.For example, when the output limit is executed, the maximum hourly speed of the vehicle may be limited to not exceed 100 km / h, or the rapid acceleration may be suppressed while operating in the ECO mode. At this time, the type of output limitation is not particularly limited.

이 때, 누적값은 출력 제한이 실행되지 않은 경우, 기설정된 단위 시간 마다 초기화될 수 있다.At this time, the cumulative value may be initialized every predetermined unit time when the output limit is not executed.

예를 들어, 기설정된 단위 시간이 10분이고, 기설정된 경고 임계값이 10번이라고 가정할 수 있다. 이 때, 운전자가 차량을 주행하는 10분동안 경고 카운트가 10 미만으로 누적되었다면, 출력 제한이 실행되지 않고 누적값을 다시 0으로 초기화할 수 있다. For example, it can be assumed that the preset unit time is 10 minutes and the preset warning threshold is 10 times. At this time, if the warning count is accumulated to less than 10 for 10 minutes while the driver is driving the vehicle, the output limit is not executed and the accumulated value can be reset to 0 again.

그러나, 단위 시간 이내에 누적값이 기설정된 경고 임계값을 초과하였다면, 출력 제한이 실행되는 동안에도 누적값을 초기화하기 않고 유지할 수 있다. 이 때, 출력 제한이 실행되는 동안에도 계속해서 경고 카운트가 누적되는 경우, 출력 제한이 실행되는 동안 누적된 경고 카운트에 가중치를 부여하여 출력 제한의 강도를 향상시킬 수도 있다. However, if the accumulated value exceeds the preset warning threshold within a unit time, the accumulated value can be maintained without initializing even while the output limit is executed. At this time, if the warning count is continuously accumulated even while the output limit is being executed, the intensity of the output limit may be improved by weighting the accumulated warning count while the output limit is being executed.

이 때, 누적값이 기설정된 1차 경고 임계값을 초과하는 경우에 운전자에게 경고 상황을 피드백하고, 누적값이 기설정된 2차 경고 임계값을 초과하는 경우에 출력을 제한하면서 운전자에게 출력 제한에 대한 피드백을 제공할 수 있다.At this time, when the cumulative value exceeds the preset first warning threshold, the driver is fed back with a warning condition, and when the cumulative value exceeds the preset second warning threshold, output is limited to the driver while limiting output. Can provide feedback on

예를 들어, 누적값이 기설정된 1차 경고 임계값을 초과하는 경우, 차량 내 설치된 디스플레이 모듈, 오디오 모듈, 네비게이션 모듈, 스티어링 진동피드백 등을 통하여 가벼운 경고음 혹은 음성 경고음을 운전자에게 피드백 할 수 있다.For example, when the accumulated value exceeds a preset first warning threshold value, a light warning sound or a voice warning sound may be fed back to the driver through a display module installed in the vehicle, an audio module, a navigation module, and a steering vibration feedback.

이 때, 운전자에게 경고 상황을 피드백하는 경우, 운전자의 기분전환을 위한 추가 옵션을 자동으로 실행할 수 있다.At this time, when the warning situation is fed back to the driver, an additional option for the driver's mood may be automatically executed.

예를 들어, 평소에 운전자가 선호하는 음악을 자동으로 재생하거나, 날씨 상태를 고려하여 차내를 환기시키는 방식의 추가 옵션이 자동으로 실행될 수 있다.For example, an additional option of automatically playing the music preferred by the driver automatically or ventilating the vehicle in consideration of weather conditions may be automatically executed.

기설정된 출력 제한 시간 동안 차량의 출력을 제한하되, 기설정된 출력 제한 시간은 누적값이 기설정된 경고 임계값을 초과하기까지 걸린 시간에 반비례하게 설정될 수 있다.The output of the vehicle is limited during the preset output timeout period, but the preset output timeout period may be set inversely to the time taken until the accumulated value exceeds a preset warning threshold.

예를 들어, 누적값이 기설정된 경고 임계값을 초과하기까지 걸린 시간이 짧을수록 기설정된 출력 제한 시간을 길게 설정할 수 있다. 즉, 누적값이 기설정된 경고 임계값을 초과하기까지 걸린 시간이 짧을수록 운전자의 감정 상태가 급격하게 변화한 것으로 판단하고, 보다 안전한 주행을 위해 출력 제한 시간을 증가시킬 수 있다.For example, the shorter the time it takes for the accumulated value to exceed the preset warning threshold, the longer the preset output timeout period can be set. That is, the shorter the time it takes for the cumulative value to exceed the preset warning threshold, it is determined that the driver's emotional state has changed rapidly, and the output time limit can be increased for safer driving.

메모리(1230)는 경고 카운트 및 기설정된 경고 임계값을 갱신하여 저장한다.The memory 1230 updates and stores warning counts and preset warning thresholds.

이 때, 경고 카운트는 누적하여 저장되되, 기설정된 단위 시간마다 저장된 누적값은 초기화되어 저장될 수 있다.At this time, the warning count is accumulated and stored, but the accumulated value stored for each preset unit time may be initialized and stored.

또한, 메모리(1230)는 상술한 바와 같이 본 발명의 일실시예에 따른 차량의 출력 제한 과정에서 발생되는 다양한 정보를 저장한다.In addition, as described above, the memory 1230 stores various information generated in the process of limiting the output of a vehicle according to an embodiment of the present invention.

실시예에 따라, 메모리(1230)는 차량의 출력 제한 장치와 독립적으로 구성되어 차량의 출력 제한을 위한 기능을 지원할 수 있다. 이 때, 메모리(1230)는 별도의 대용량 스토리지로 동작할 수 있고, 동작 수행을 위한 제어 기능을 포함할 수도 있다.According to an embodiment, the memory 1230 may be configured independently of the vehicle's output limiting device to support a function for limiting the vehicle's output. At this time, the memory 1230 may operate as a separate large-capacity storage, and may also include a control function for performing the operation.

한편, 차량의 출력 제한 장치는 메모리가 탑재되어 그 장치 내에서 정보를 저장할 수 있다. 일 구현예의 경우, 메모리는 컴퓨터로 판독 가능한 매체이다. 일 구현 예에서, 메모리는 휘발성 메모리 유닛일 수 있으며, 다른 구현예의 경우, 메모리는 비휘발성 메모리 유닛일 수도 있다. 일 구현예의 경우, 저장장치는 컴퓨터로 판독 가능한 매체이다. 다양한 서로 다른 구현 예에서, 저장장치는 예컨대 하드디스크 장치, 광학디스크 장치, 혹은 어떤 다른 대용량 저장장치를 포함할 수도 있다.On the other hand, a vehicle output limiting device is equipped with a memory to store information in the device. In one implementation, the memory is a computer-readable medium. In one implementation, the memory may be a volatile memory unit, and in other implementations, the memory may be a non-volatile memory unit. In one embodiment, the storage device is a computer-readable medium. In various different implementations, the storage device may include, for example, a hard disk device, an optical disk device, or some other mass storage device.

이와 같은, 차량의 출력 제한 장치를 이용함으로써 스트레스나 급격한 감정 변화 등으로 운전자가 사고를 발생시킬 수 있는 위험을 감소시킬 수 있다. By using such an output limiting device of a vehicle, a risk that a driver may cause an accident due to stress or sudden emotional change can be reduced.

도 13은 본 발명의 일실시예에 따른 차량의 출력 제한 방법을 상세하게 나타낸 동작흐름도이다.13 is a flowchart illustrating in detail a method for limiting output of a vehicle according to an embodiment of the present invention.

도 13을 참조하면, 본 발명의 일실시예에 따른 차량의 출력 제한 방법은 먼저 차량의 출력 제한을 위한 시스템을 초기화할 수 있다(S1302).Referring to FIG. 13, a method for limiting output of a vehicle according to an embodiment of the present invention may first initialize a system for limiting output of a vehicle (S1302).

예를 들어, 이전에 누적된 경고 카운트 누적값이나 출력 제한 시간 등을 초기화시킬 수 있다. For example, a previously accumulated warning count value or output timeout may be initialized.

이 후, 운전자의 발 제스처를 추적하면서(S1304), 동시에 주행 중 차선변경 여부를 모니터링 할 수 있다(S1310).Thereafter, while tracking the driver's foot gesture (S1304), it is possible to monitor whether the lane changes while driving (S1310).

이 때, 제스처 센서를 통해 운전자의 발 제스처를 추적한 결과를 판단하여 운전자의 감정 상태가 경고 상태인지 여부를 판단하고(S1306), 경고 상태이면 경고 카운트를 1만큼 누적시킬 수 있다(S1308).At this time, it is possible to determine whether the driver's emotional state is a warning state by determining a result of tracking a driver's foot gesture through a gesture sensor (S1306), and if it is a warning state, a warning count may be accumulated by 1 (S1308).

또한, 차선변경 모니터링 결과를 판단하여 운전자가 차선변경을 실패하였는지 여부를 판단하고(S1312), 차선변경을 실패하였을 때에도 경고 카운트를 1만큼 누적시킬 수 있다(S1308).In addition, by determining the lane change monitoring result, it is determined whether the driver has failed the lane change (S1312), and the warning count can be accumulated by 1 even when the lane change has failed (S1308).

이 때, 단계(S1306) 및 단계(S1312)에서 각각 운전자의 감정 상태가 경고 상태가 아니거나, 차선변경이 실패하지 않은 경우에는 전 단계로 돌아가 반복적으로 발 제스처 추적 또는 차선변경 모니터링을 수행할 수 있다. At this time, in step S1306 and step S1312, if the driver's emotional state is not a warning state or the lane change has not failed, it is possible to repeatedly return to the previous step and repeatedly perform foot gesture tracking or lane change monitoring. have.

단계(S1308)에서 경고 카운트를 누적한 이후, 기설정된 단위 시간이 종료되었는지 여부를 판단하고(S1313), 기설정된 단위 시간이 종료되었으면 다시 차량의 출력 제한을 위한 시스템을 다시 초기화한 뒤 실행할 수 있다(S1302).After accumulating warning counts in step S1308, it is determined whether the preset unit time has ended (S1313), and if the preset unit time has ended, the system for limiting the output of the vehicle may be reinitialized and executed again. (S1302).

또한, 단계(S1313)의 판단결과 기설정된 단위 시간이 종료되지 않았으면, 경고 카운트의 누적값이 2차 경고 임계값을 초과하는지 여부를 판단할 수 있다(S1314).In addition, if the predetermined unit time has not ended as a result of the determination in step S1313, it may be determined whether the accumulated value of the warning count exceeds the second warning threshold (S1314).

단계(S1314)의 판단결과 경고 카운트의 누적값이 2차 경고 임계값을 초과하였으면, 차량의 출력을 제한할 수 있다(S1316). 이 때, 출력 제한 시간만큼 차량의 출력을 제한하되, 출력 제한 시간이 초과되었는지 여부를 판단하여(S1318), 출력 제한 시간이 초과되었으면 출력 제한을 해제하고(S1320) 시스템을 초기화할 수 있다(S1302).If the cumulative value of the warning count exceeds the second warning threshold as a result of the determination in step S1314, the vehicle output may be limited (S1316). At this time, the output of the vehicle is limited by the output timeout period, but it is determined whether the output timeout period has been exceeded (S1318), and if the output timeout period has been exceeded, the output limitation may be canceled (S1320) and the system may be initialized (S1302). ).

또한, 단계(S1318)의 판단결과 출력 제한 시간이 초과되지 않았으면, 출력 제한 시간이 될 때까지 계속 차량의 출력을 제한할 수 있다(S1316).In addition, if the output limit time is not exceeded as a result of the determination in step S1318, the vehicle output may be continuously restricted until the output time limit is reached (S1316).

또한, 단계(S1314)의 판단결과 경고 카운트의 누적값이 2차 경고 임계값을 초과하지 않았으면, 경고 카운트의 누적값이 1차 경고 임계값을 초과하였는지 여부를 판단할 수 있다(S1322).In addition, if the cumulative value of the warning count does not exceed the second warning threshold as a result of the determination in step S1314, it may be determined whether the cumulative value of the warning count exceeds the first warning threshold (S1322).

단계(S1322)의 판단결과 경고 카운트의 누적값이 1차 경고 임계값을 초과하였으면, 운전자에게 경고 상황을 피드백하고(S1324), 운전자의 기분을 전환시키기 위한 추가옵션을 자동으로 실행한 뒤(S1326) 다시 발 제스처 추적과 차선변경 모니터링을 수행할 수 있다(S1304, S1310).If the cumulative value of the warning count exceeds the first warning threshold as a result of the determination in step S1322, the warning situation is fed back to the driver (S1324), and after automatically executing additional options for changing the driver's mood (S1326) ) Again, foot gesture tracking and lane change monitoring may be performed (S1304, S1310).

또한, 단계(S1322)의 판단결과 경고 카운트의 누적값이 1차 경고 임계값을 초과하지 않았을 때에도 다시 발 제스처 추적과 차선변경 모니터링을 수행할 수 있다(S1304, S1310).In addition, as a result of the determination in step S1322, even when the accumulated value of the warning count does not exceed the first warning threshold, foot gesture tracking and lane change monitoring may be performed again (S1304, S1310).

도 14는 본 발명의 일실시예에 따른 컴퓨터 시스템을 나타낸 도면이다.14 is a view showing a computer system according to an embodiment of the present invention.

도 14를 참조하면, 본 발명의 실시예는 컴퓨터로 읽을 수 있는 기록매체와 같은 컴퓨터 시스템에서 구현될 수 있다. 도 14에 도시된 바와 같이, 컴퓨터 시스템(1400)은 버스(1420)를 통하여 서로 통신하는 하나 이상의 프로세서(1410), 메모리(1430), 사용자 입력 장치(1440), 사용자 출력 장치(1450) 및 스토리지(1460)를 포함할 수 있다. 또한, 컴퓨터 시스템(1400)은 네트워크(1480)에 연결되는 네트워크 인터페이스(1470)를 더 포함할 수 있다. 프로세서(1410)는 중앙 처리 장치 또는 메모리(1430)나 스토리지(1460)에 저장된 프로세싱 인스트럭션들을 실행하는 반도체 장치일 수 있다. 메모리(1430) 및 스토리지(1460)는 다양한 형태의 휘발성 또는 비휘발성 저장 매체일 수 있다. 예를 들어, 메모리는 ROM(1431)이나 RAM(1432)을 포함할 수 있다.14, an embodiment of the present invention may be implemented in a computer system such as a computer-readable recording medium. As shown in FIG. 14, computer system 1400 includes one or more processors 1410, memory 1430, user input device 1440, user output device 1450 and storage that communicate with each other via bus 1420. (1460). In addition, the computer system 1400 may further include a network interface 1470 connected to the network 1480. The processor 1410 may be a central processing unit or a semiconductor device that executes processing instructions stored in the memory 1430 or the storage 1460. The memory 1430 and the storage 1460 may be various types of volatile or nonvolatile storage media. For example, the memory may include ROM 1431 or RAM 1432.

따라서, 본 발명의 실시예는 컴퓨터로 구현된 방법이나 컴퓨터에서 실행 가능한 명령어들이 기록된 비일시적인 컴퓨터에서 읽을 수 있는 매체로 구현될 수 있다. 컴퓨터에서 읽을 수 있는 명령어들이 프로세서에 의해서 수행될 때, 컴퓨터에서 읽을 수 있는 명령어들은 본 발명의 적어도 한 가지 측면에 따른 방법을 수행할 수 있다.Accordingly, an embodiment of the present invention may be implemented as a computer-implemented method or a non-transitory computer-readable medium having computer-executable instructions recorded thereon. When computer readable instructions are executed by a processor, computer readable instructions may perform a method in accordance with at least one aspect of the present invention.

이상에서와 같이 본 발명에 따른 운전자 상태 추정에 기반한 차량의 출력 제한 방법 및 이를 위한 장치는 상기한 바와 같이 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.As described above, the method and apparatus for limiting the output of a vehicle based on the estimation of the driver's condition according to the present invention are not limited to the configuration and method of the above-described embodiments, and the above embodiments are variously modified. All or part of each of the embodiments may be selectively combined to constitute this.

200, 300, 400: 운전자 발 210, 310, 410, 510, 710: 제스처 센서
220-1~220-3, 320-1~320-3, 420: 페달
330: 움직임 동선 511, 712, 713: PD(Photo Diode) 센서
512, 513, 711: 적외선 LED(Light Emitting Diode) 센서
910, 1010: 제스처 센싱값 920, 1020: 검출 신호값
1110, 1120: 점유 시간 1131, 1132: 시간차
1210: 통신부 1220: 프로세서
1230: 메모리 1400: 컴퓨터 시스템
1410: 프로세서 1420: 버스
1430: 메모리 1431: 롬
1432: 램 1440: 사용자 입력 장치
1450: 사용자 출력 장치 1460: 스토리지
1470: 네트워크 인터페이스 1480: 네트워크
200, 300, 400: driver's feet 210, 310, 410, 510, 710: gesture sensor
220-1 ~ 220-3, 320-1 ~ 320-3, 420: Pedal
330: movement line 511, 712, 713: PD (Photo Diode) sensor
512, 513, 711: infrared light emitting diode (LED) sensor
910, 1010: gesture sensing value 920, 1020: detection signal value
1110, 1120: occupancy time 1131, 1132: time difference
1210: communication unit 1220: processor
1230: memory 1400: computer system
1410: processor 1420: bus
1430: memory 1431: ROM
1432: RAM 1440: user input device
1450: user output device 1460: storage
1470: network interface 1480: network

Claims (20)

제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적하는 단계;
상기 발 제스처를 기반으로 판단된 상기 운전자의 감정 상태를 고려하여 상기 차량의 출력 제한을 위한 경고 카운트를 누적하는 단계; 및
상기 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 상기 차량의 출력을 제한하는 단계를 포함하고,
상기 경고 카운트는
상기 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적되는 것을 특징으로 하는 차량의 출력 제한 방법.
Tracking a driver's foot gesture for the vehicle's acceleration / deceleration pedal operation based on the gesture sensor;
Accumulating a warning count for limiting the output of the vehicle in consideration of the emotional state of the driver determined based on the foot gesture; And
And when the cumulative value of the warning count exceeds a preset warning threshold, limiting the output of the vehicle.
The warning count is
A method for limiting output of a vehicle, characterized in that it is additionally accumulated when a lane change failure for the vehicle is detected.
청구항 1에 있어서,
상기 누적값은
상기 출력 제한이 실행되지 않은 경우, 기설정된 단위 시간 마다 초기화되는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 1,
The cumulative value is
If the output limit is not executed, the vehicle output limit method characterized in that it is initialized every predetermined unit time.
청구항 2에 있어서,
상기 제한하는 단계는
상기 누적값이 기설정된 1차 경고 임계값을 초과하는 경우에 상기 운전자에게 경고 상황을 피드백하고, 상기 누적값이 기설정된 2차 경고 임계값을 초과하는 경우에 상기 출력을 제한하면서 상기 운전자에게 출력 제한에 대한 피드백을 제공하는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 2,
The limiting step
When the cumulative value exceeds a preset first warning threshold value, a warning condition is fed back to the driver, and when the cumulative value exceeds a preset second warning threshold value, output is sent to the driver while limiting the output. A method for limiting output of a vehicle, characterized by providing feedback on the limit.
청구항 1에 있어서,
상기 누적하는 단계는
가감속 페달을 조작하기 전 페달 간 발의 이동 속도 및 페달 조작 패턴 중 적어도 하나를 고려하여 상기 감정 상태를 판단하되, 상기 감정 상태가 경고 상태로 판단되는 경우에 상기 경고 카운트를 누적하는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 1,
The accumulating step
Before operating the acceleration / deceleration pedal, the emotion state is determined by considering at least one of a movement speed of a pedal between the pedals and a pedal operation pattern, but accumulating the warning count when the emotion state is determined to be a warning state. How to limit the output of the vehicle.
청구항 4에 있어서,
상기 누적하는 단계는
상기 페달 간 발의 이동 속도가 기설정된 기준 속도 이상일 경우 및 상기 페달 조작 패턴이 경고 조건에 만족하는 경우 중 적어도 하나에 상응할 때, 상기 감정 상태를 상기 경고 상태로 판단하는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 4,
The accumulating step
When the moving speed of the foot between the pedals is equal to or greater than a preset reference speed, and when the pedal operation pattern satisfies at least one of the cases in which the warning condition is satisfied, the vehicle output is characterized by determining the emotional state as the warning state Limitation method.
청구항 4에 있어서,
상기 누적하는 단계는
상기 차량의 속도를 고려한 선행차량과의 간격 정보 및 상기 운전자의 페달 조작 속도 중 적어도 하나를 더 고려하여 상기 감정 상태를 판단하는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 4,
The accumulating step
A method for limiting output of a vehicle, characterized in that the emotional state is determined by further considering at least one of interval information with a preceding vehicle in consideration of the speed of the vehicle and a pedal operating speed of the driver.
청구항 2에 있어서,
상기 제한하는 단계는
기설정된 출력 제한 시간 동안 상기 차량의 출력을 제한하되, 상기 기설정된 출력 제한 시간은 상기 누적값이 상기 기설정된 경고 임계값을 초과하기까지 걸린 시간에 반비례하게 설정되는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 2,
The limiting step
Limiting the output of the vehicle during a preset output timeout period, wherein the preset output timeout period is set inversely to a time taken until the accumulated value exceeds the preset warning threshold. Way.
청구항 1에 있어서,
상기 출력 제한은
속도 가속 제한 및 휠 조작 제한 중 적어도 하나에 상응하는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 1,
The output limit is
A vehicle power limiting method characterized in that it corresponds to at least one of a speed acceleration limit and a wheel operation limit.
청구항 1에 있어서,
상기 차선변경 실패는
방향 지시등 활성화 상태, 주행 차선 정보 및 차선변경 소요시간 중 적어도 하나를 고려하여 판단되는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 1,
The above lane change failure
A method for limiting output of a vehicle, characterized in that it is determined in consideration of at least one of a turn signal activation state, driving lane information, and lane change time.
청구항 3에 있어서,
상기 제한하는 단계는
상기 운전자에게 경고 상황을 피드백하는 경우, 상기 운전자의 기분전환을 위한 추가 옵션을 자동으로 실행하는 것을 특징으로 하는 차량의 출력 제한 방법.
The method according to claim 3,
The limiting step
When the warning situation is fed back to the driver, a method for limiting output of the vehicle, characterized in that automatically executing an additional option for the driver to change mood.
제스처 센서를 기반으로 차량의 가감속 페달 조작에 대한 운전자의 발 제스처를 추적하고, 상기 발 제스처를 기반으로 판단된 상기 운전자의 감정 상태를 고려하여 상기 차량의 출력 제한을 위한 경고 카운트를 누적하고, 상기 경고 카운트의 누적값이 기설정된 경고 임계값을 초과하는 경우, 상기 차량의 출력을 제한하는 프로세서; 및
상기 경고 카운트 및 상기 기설정된 경고 임계값을 갱신하여 저장하는 메모리를 포함하고,
상기 경고 카운트는
상기 차량에 대한 차선변경 실패가 감지되는 경우에 추가로 누적되는 것을 특징으로 하는 차량의 출력 제한 장치.
Tracking a driver's foot gesture for the vehicle's acceleration / deceleration pedal operation based on a gesture sensor, and accumulating a warning count for limiting the output of the vehicle in consideration of the driver's emotional state determined based on the foot gesture, A processor that limits the output of the vehicle when the cumulative value of the warning count exceeds a preset warning threshold; And
And a memory for updating and storing the warning count and the preset warning threshold,
The warning count is
A device for limiting output of a vehicle, characterized in that it is additionally accumulated when a lane change failure for the vehicle is detected.
청구항 11에 있어서,
상기 누적값은
상기 출력 제한이 실행되지 않은 경우, 기설정된 단위 시간 마다 초기화되는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 11,
The cumulative value is
When the output limit is not executed, the vehicle output limit device, characterized in that is initialized every predetermined unit time.
청구항 12에 있어서,
상기 프로세서는
상기 누적값이 기설정된 1차 경고 임계값을 초과하는 경우에 상기 운전자에게 경고 상황을 피드백하고, 상기 누적값이 기설정된 2차 경고 임계값을 초과하는 경우에 상기 출력을 제한하면서 상기 운전자에게 출력 제한에 대한 피드백을 제공하는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 12,
The processor
When the cumulative value exceeds a preset first warning threshold value, a warning condition is fed back to the driver, and when the cumulative value exceeds a preset second warning threshold value, output is sent to the driver while limiting the output. Vehicle output limiting device, characterized in that to provide feedback on the limit.
청구항 11에 있어서,
상기 프로세서는
가감속 페달을 조작하기 전 페달 간 발의 이동 속도 및 페달 조작 패턴 중 적어도 하나를 고려하여 상기 감정 상태를 판단하되, 상기 감정 상태가 경고 상태로 판단되는 경우에 상기 경고 카운트를 누적하는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 11,
The processor
Before operating the acceleration / deceleration pedal, the emotion state is determined by considering at least one of a movement speed of a pedal between the pedals and a pedal operation pattern, but accumulating the warning count when the emotion state is determined to be a warning state. Vehicle power limiter.
청구항 14에 있어서,
상기 프로세서는
상기 페달 간 발의 이동 속도가 기설정된 기준 속도 이상일 경우 및 상기 페달 조작 패턴이 경고 조건에 만족하는 경우 중 적어도 하나에 상응할 때, 상기 감정 상태를 상기 경고 상태로 판단하는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 14,
The processor
When the speed of movement of the foot between the pedals is equal to or greater than a preset reference speed and when the pedal operation pattern satisfies at least one of the conditions that satisfy the warning condition, the vehicle output is characterized by determining the emotional state as the warning state. Limiting device.
청구항 14에 있어서,
상기 프로세서는
상기 차량의 속도를 고려한 선행차량과의 간격 정보 및 상기 운전자의 페달 조작 속도 중 적어도 하나를 더 고려하여 상기 감정 상태를 판단하는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 14,
The processor
The apparatus for limiting output of a vehicle, characterized in that the emotional state is determined by further considering at least one of an interval information with a preceding vehicle in consideration of the speed of the vehicle and a pedal operating speed of the driver.
청구항 12에 있어서,
상기 프로세서는
기설정된 출력 제한 시간 동안 상기 차량의 출력을 제한하되, 상기 기설정된 출력 제한 시간은 상기 누적값이 상기 기설정된 경고 임계값을 초과하기까지 걸린 시간에 반비례하게 설정되는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 12,
The processor
Limiting the output of the vehicle during a preset output timeout period, wherein the preset output timeout period is set inversely to a time taken until the accumulated value exceeds the preset warning threshold. Device.
청구항 11에 있어서,
상기 출력 제한은
속도 가속 제한 및 휠 조작 제한 중 적어도 하나에 상응하는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 11,
The output limit is
A vehicle output limiting device, characterized in that it corresponds to at least one of a speed acceleration limit and a wheel operation limit.
청구항 11에 있어서,
상기 차선변경 실패는
방향 지시등 활성화 상태, 주행 차선 정보 및 차선변경 소요시간 중 적어도 하나를 고려하여 판단되는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 11,
The above lane change failure
A device for limiting output of a vehicle, characterized in that it is determined in consideration of at least one of a turn signal activation state, driving lane information, and lane change time.
청구항 13에 있어서,
상기 프로세서는
상기 운전자에게 경고 상황을 피드백하는 경우, 상기 운전자의 기분전환을 위한 추가 옵션을 자동으로 실행하는 것을 특징으로 하는 차량의 출력 제한 장치.
The method according to claim 13,
The processor
When the warning situation is fed back to the driver, the vehicle output limiting device, characterized in that automatically executes an additional option for the driver to change mood.
KR1020180027960A 2018-03-09 2018-03-09 Method for limiting vehicle output based on driver condition estimation and apparatus using the same KR102108856B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180027960A KR102108856B1 (en) 2018-03-09 2018-03-09 Method for limiting vehicle output based on driver condition estimation and apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180027960A KR102108856B1 (en) 2018-03-09 2018-03-09 Method for limiting vehicle output based on driver condition estimation and apparatus using the same

Publications (2)

Publication Number Publication Date
KR20190106441A KR20190106441A (en) 2019-09-18
KR102108856B1 true KR102108856B1 (en) 2020-05-11

Family

ID=68070417

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180027960A KR102108856B1 (en) 2018-03-09 2018-03-09 Method for limiting vehicle output based on driver condition estimation and apparatus using the same

Country Status (1)

Country Link
KR (1) KR102108856B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010023769A (en) 2008-07-23 2010-02-04 Denso Corp Vehicle control system
CN103303307A (en) 2012-03-13 2013-09-18 通用汽车环球科技运作有限责任公司 Driver assistance system
JP2017518915A (en) 2014-05-16 2017-07-13 ジャガー ランド ローバー リミテッドJaguar Land Rover Limited Vehicle speed control system and method for limiting the rate of acceleration when changing from the first target speed to the second target speed in response to a request from the accelerator pedal
US20170341658A1 (en) 2013-03-15 2017-11-30 Honda Motor Co., Ltd. System and method for responding to driver state

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100732149B1 (en) 2005-12-07 2007-06-25 에스앤티대우(주) The syseem and method for automobile and driver condition sensing
KR101631962B1 (en) * 2014-02-10 2016-06-20 엘지전자 주식회사 Footrest of vehicle and control method thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010023769A (en) 2008-07-23 2010-02-04 Denso Corp Vehicle control system
CN103303307A (en) 2012-03-13 2013-09-18 通用汽车环球科技运作有限责任公司 Driver assistance system
US20170341658A1 (en) 2013-03-15 2017-11-30 Honda Motor Co., Ltd. System and method for responding to driver state
JP2017518915A (en) 2014-05-16 2017-07-13 ジャガー ランド ローバー リミテッドJaguar Land Rover Limited Vehicle speed control system and method for limiting the rate of acceleration when changing from the first target speed to the second target speed in response to a request from the accelerator pedal

Also Published As

Publication number Publication date
KR20190106441A (en) 2019-09-18

Similar Documents

Publication Publication Date Title
EP2975862B1 (en) Spatial sonification of accelerating objects
JP6412070B2 (en) Driving support device and driving support method
EP2682318B1 (en) Motor vehicle collision warning system
JP2017167587A5 (en)
JP2009001066A (en) Accelerator pedal erroneous operation detector for vehicle
EP3482269B1 (en) Method for automatically following a vehicle and autonomous driving apparatus
KR101963481B1 (en) Method and device for determining an adaptive response time of vehicle driver
JP6611085B2 (en) Vehicle control device
JP4671242B2 (en) Vehicle control device
KR20190098751A (en) How to fly an autonomous car
CN110770100B (en) Emergency braking system for single-track vehicle
CN107848528B (en) Driving support device and driving support method
JPWO2019003280A1 (en) Driving support method and driving support device for vehicle
KR101521118B1 (en) Driver-customized automotive active safety system
US20170174212A1 (en) Method for operating a motor vehicle
US20150254515A1 (en) Method for Identification of a Projected Symbol on a Street in a Vehicle, Apparatus and Vehicle
US10558216B2 (en) Method for controlling an automated driver-assistance system of a motor vehicle
KR102108856B1 (en) Method for limiting vehicle output based on driver condition estimation and apparatus using the same
US10486713B2 (en) Dynamic stuck switch monitoring
JP2021030882A (en) Vehicle pedal erroneous stepping correspondence control device
KR102199787B1 (en) Apparatus for preventing collision rear vehicle and control method thereof
JP2006168614A (en) Vehicular traveling control device
US9305464B2 (en) Parking assistance system, method for operating a parking assistance system, computer program, computer-readable medium and motor vehicle
WO2021050705A1 (en) Audio recognition of traffic participants
KR102258577B1 (en) Vehicle control apparatus and vehicle control method for based on condition of driver

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant