KR102202638B1 - Driving assistance and driving assistance method thereof - Google Patents

Driving assistance and driving assistance method thereof Download PDF

Info

Publication number
KR102202638B1
KR102202638B1 KR1020190121733A KR20190121733A KR102202638B1 KR 102202638 B1 KR102202638 B1 KR 102202638B1 KR 1020190121733 A KR1020190121733 A KR 1020190121733A KR 20190121733 A KR20190121733 A KR 20190121733A KR 102202638 B1 KR102202638 B1 KR 102202638B1
Authority
KR
South Korea
Prior art keywords
foot
information
user
vehicle
hand
Prior art date
Application number
KR1020190121733A
Other languages
Korean (ko)
Inventor
손은영
Original Assignee
주식회사대성엘텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사대성엘텍 filed Critical 주식회사대성엘텍
Priority to KR1020190121733A priority Critical patent/KR102202638B1/en
Application granted granted Critical
Publication of KR102202638B1 publication Critical patent/KR102202638B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/20Conjoint control of vehicle sub-units of different type or different function including control of steering systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • B60K2370/152
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2520/00Input parameters relating to overall vehicle dynamics
    • B60W2520/10Longitudinal speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/18Steering angle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00Special features of vehicle units
    • B60Y2400/30Sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Human Computer Interaction (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)

Abstract

The present invention may provide a driving assistance device capable of acquiring driving information of a vehicle. According to an embodiment of the present invention, a driving assistance device may comprise: a hand sensor which is attached to the user′s hand and detects a location of the hand; a foot sensor which is attached to the user′s right foot and detects position information of the right foot; a control unit which acquires steering information of a steering wheel based on the location information of the hand, and acquires pedal operation information regarding operation of a brake pedal and an accelerator pedal based on the position information of the right foot; and a display for displaying vehicle driving information based on the steering information of the steering wheel of the steering wheel and the pedal operation information.

Description

운전 보조 장치 및 이를 이용한 운전 보조 방법{DRIVING ASSISTANCE AND DRIVING ASSISTANCE METHOD THEREOF}Driving assistance device and driving assistance method using the same {DRIVING ASSISTANCE AND DRIVING ASSISTANCE METHOD THEREOF}

본 출원에 의해 개시되는 발명은 운전 보조 장치 및 이를 이용한 운전 보조 방법에 관한 것이다.The invention disclosed by the present application relates to a driving assistance device and a driving assistance method using the same.

미숙한 차량 운전 능력은 교통 사고와 직결될 수 있고, 교통 체증을 유발하는 원인이 될 수 있다. 그러나, 운전 능력을 기르기 위해서는 직접 운전을 통해 경험을 쌓는 것이 중요하기 때문에, 여전히 많은 초보 운전자들은 두려움을 갖고 도로로 내몰리고 있으며, 이는 다른 운전자들에게 피해를 유발하고 있다.Inexperienced vehicle driving ability can be directly related to traffic accidents and cause traffic jams. However, since it is important to gain experience through direct driving in order to develop driving skills, many novice drivers are still being driven to the road with fear, which causes damage to other drivers.

따라서, 효과적으로 운전 능력을 배양하기 위한 장치 및 방법에 대한 수요가 증가하는 실정이다.Therefore, there is an increasing demand for devices and methods for effectively cultivating driving capability.

일 실시예에 따르면, 사용자 신체에 부착되는 센서를 통해 사용자가 차량을 제어하는 동작들을 센싱하고, 센싱한 정보들에 기초하여 차량의 운행 정보를 획득할 수 있는 운전 보조 장치가 제공될 수 있다.According to an embodiment, a driving assistance device capable of sensing operations for controlling a vehicle by a user through a sensor attached to a user's body and acquiring driving information of a vehicle based on the sensed information may be provided.

해결하고자 하는 과제가 상술한 과제로 제한되는 것은 아니며, 언급되지 아니한 과제들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.The problem to be solved is not limited to the above-described problems, and problems that are not mentioned will be clearly understood by those of ordinary skill in the art from the present specification and the accompanying drawings.

일 양상에 따르면, 사용자의 손에 부착되어 손의 위치 정보를 감지하는 손 센서, 사용자의 오른발의 발에 부착되어 오른발의 위치 정보를 감지하는 발 센서, 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득하고, 오른발의 위치 정보에 기초하여 브레이크 페달 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득하는 제어부 및 핸들의 조향 정보 및 페달 조작 정보에 기초하여, 차량의 운행 정보를 표시하는 디스플레이를 포함하는 운전 보조 장치가 제공될 수 있다.According to an aspect, a hand sensor attached to the user's hand to detect hand position information, a foot sensor attached to the user's right foot to detect position information of the right foot, steering information of a steering wheel based on the hand position information And a display for displaying vehicle driving information based on steering information and pedal manipulation information of a steering wheel and a control unit for acquiring pedal operation information regarding operation of the brake pedal and the accelerator pedal based on the position information of the right foot. A driving assistance device may be provided.

발 센서는, 사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서, 사용자 오른발의 연장 방향으로 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서를 포함할 수 있다.The foot sensor may include a first foot sensor attached to a first point positioned on the ankle of the user's right foot, and a second foot sensor attached to a second point spaced apart from the first point in the extension direction of the user's right foot.

제1 발 센서를 통해 발목의 위치를 감지하고, 제1 발 센서 및 제2 발 센서 간의 제1 방향으로 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 여부를 판별하고, 제1 발 센서 및 제2 발 센서 간의 제2 방향으로 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 강도를 판별 할 수 있다.It detects the position of the ankle through the first foot sensor, determines whether the brake pedal and the accelerator pedal are operated based on a change in the relative position in the first direction between the first foot sensor and the second foot sensor, and the first foot sensor And based on the relative position change in the second direction between the second foot sensors, it is possible to determine the operation strength of the brake pedal and the accelerator pedal.

제어부는 손의 위치 정보에 기초하여, 핸들 상에서 사용자의 손의 위치 및 핸들의 조향 각도를 감지할 수 있다.The control unit may detect the position of the user's hand on the handle and the steering angle of the handle based on the position information of the hand.

운전 보조 장치는 알람을 제공하는 알람부를 포함하고, 조향 정보는 조향 각도를 포함하고, 제어부는 페달 조작 정보에 기초하여 차량의 속도를 획득할 수 있고, 조향 각도가 소정의 제1 임계값을 초과하고, 차량의 속도가 제1 임계값에 의해 결정되는 제2 임계값을 초과할 때, 알람부를 동작할 수 있다.The driving assistance device includes an alarm unit that provides an alarm, the steering information includes a steering angle, and the control unit can acquire the vehicle speed based on the pedal operation information, and the steering angle exceeds a predetermined first threshold. And, when the speed of the vehicle exceeds the second threshold value determined by the first threshold value, the alarm unit may be operated.

운전 보조 장치는, 알람을 제공하는 알람부 및 사용자의 머리에 부착되어, 머리의 위치 정보를 감지하는 머리 센서를 더 포함하고,The driving assistance device further includes an alarm unit for providing an alarm and a head sensor attached to the user's head to detect position information of the head,

제어부는 머리의 위치 정보에 기초하여, 사용자의 머리가 소정의 방향으로 소정의 임계값 이상 이동한 것으로 판단하면, 알람부를 동작할 수 있다.The controller may operate the alarm unit if it is determined that the user's head has moved in a predetermined direction by a predetermined threshold value or more based on the location information of the head.

다른 일 실시예에 따르면, 사용자의 손에 부착된 손 센서를 통해 감지한 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득하는 단계, 사용자의 오른발의 발에 부착된 발 센서를 통해 감지한 오른발의 위치 정보에 기초하여 브레이크 페달 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득하는 단계 및 핸들의 조향 정보 및 페달 조작 정보에 기초하여, 디스플레이를 통해 차량의 운행 정보를 출력하는 단계를 포함하는 운전 보조 장치의 동작 방법이 제공될 수 있다.According to another embodiment, acquiring steering information of a handle based on position information of a hand sensed through a hand sensor attached to a user's hand, a right foot sensed through a foot sensor attached to the user's right foot Driving comprising: acquiring pedal operation information regarding operation of the brake pedal and the accelerator pedal based on the position information of and outputting driving information of the vehicle through a display based on steering information and pedal operation information of the steering wheel A method of operating an auxiliary device may be provided.

또 다른 일 실시예에 따르면, 운전 보조 방법을 수행하는 컴퓨터 프로그램이 저장된 컴퓨터로 판독 가능한 기록 매체로서, 기록 매체는 사용자의 손에 부착된 손 센서를 통해 손의 위치 정보를 감지하는 프로그램, 사용자의 오른발의 발에 부착된 발 센서를 통해 오른발의 위치 정보를 감지하는 프로그램, 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득하는 프로그램, 오른발의 위치 정보에 기초하여 브레이크 페달 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득하는 프로그램 및 핸들의 조향 정보 및 페달 조작 정보에 기초하여, 디스플레이를 통해 차량의 운행 정보를 표시하는 프로그램을 포함하는 기록 매체가 제공될 수 있다.According to another embodiment, as a computer-readable recording medium in which a computer program for performing a driving assistance method is stored, the recording medium is a program that detects hand position information through a hand sensor attached to the user's hand, A program that detects the position information of the right foot through the foot sensor attached to the foot of the right foot, a program that acquires steering information of the steering wheel based on the position information of the hand, and controls the operation of the brake pedal and the accelerator pedal based on the position information of the right foot. A recording medium including a program for obtaining related pedal operation information and a program for displaying vehicle operation information through a display based on steering information and pedal operation information of a steering wheel may be provided.

또 다른 일 실시예에 따르면, 사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서, 사용자 오른발의 연장 방향으로 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서, 제1 발 센서를 통해 발목의 위치를 감지하고, 제1 발 센서 및 제2 발 센서 간의 제1 방향 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 여부를 판별하고, 제1 발 센서 및 제2 발 센서 간의 제1 방향 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 강도를 판별하는 제어부 및 브레이크 페달 및 가속 페달의 조작 여부 및 페달의 조작 강도를 차량 내부 제어부에게 전송하는 통신부를 포함하는 운전 보조 장치가 제공될 수 있다.According to another embodiment, a first foot sensor attached to a first point positioned on the ankle of the user's right foot, a second foot sensor attached to a second point spaced apart from the first point in the extension direction of the user's right foot, The first foot sensor detects the position of the ankle, determines whether the brake pedal and the accelerator pedal are operated based on the change in the relative position in the first direction between the first foot sensor and the second foot sensor, 2 Based on the change in the relative position in the first direction between the foot sensors, a control unit for determining the operation strength of the brake pedal and the accelerator pedal, and a communication unit for transmitting the operation strength of the brake pedal and the accelerator pedal and the operation strength of the pedal to the vehicle interior control unit A driving assistance device may be provided.

또 다른 일 실시예에 따르면, 차량의 진행 방향을 결정하는 조향 장치를 제어하는 조향 구동부, 차량의 동력원을 제어하는 동력원 구동부, 차량의 브레이크 장치를 제어하는 브레이크 구동부, 사용자의 손에 부착되어 손의 위치 정보를 감지하는 손 센서, 사용자의 오른발의 발에 부착되어 오른발의 위치 정보를 감지하는 발 센서 및 손의 위치 정보에 기초하여 획득한 핸들의 조향 정보에 따라 조향 구동부를 제어하고, 오른발의 위치 정보에 기초하여 획득한 엑셀 페달의 조작에 관한 정보에 따라 동력원 구동부를 제어하고, 발의 위치 정보에 기초하여 획득한 브레이크 페달의 조작에 관한 정보에 따라 브레이크 구동부를 제어하는 제어부를 포함하는 차량이 제공될 수 있다. According to another embodiment, a steering drive unit that controls a steering device that determines the traveling direction of a vehicle, a power source drive unit that controls a power source of a vehicle, a brake drive unit that controls a brake device of a vehicle, and is attached to the user's hand A hand sensor that senses position information, a foot sensor that is attached to the user's right foot and detects the position information of the right foot, and controls the steering drive according to the steering information of the steering wheel acquired based on the position information of the hand, and the position of the right foot Provided by a vehicle including a control unit that controls the power source driving unit according to the information on the operation of the accelerator pedal obtained based on the information, and controls the brake driving unit according to the information on the operation of the brake pedal obtained based on the position information of the foot Can be.

일 실시예에 따르면, 사용자는 운전 보조 장치를 통해 차량이 없는 곳에서도 운전 연습 및 운전 교육을 수행할 수 있다. According to an embodiment, a user may perform driving practice and driving training even in a place without a vehicle through the driving assistance device.

또, 운전 보조 장치의 센서들을 통해 사용자의 사용자 운전 자세 및 운전 습관 등이 기록되므로, 사용자는 운전 보조 장치를 통해 운전 자세 및 습관을 일정하게 유지하고, 잘못된 자세 및 습관을 교정할 수 있다.In addition, since the user's driving posture and driving habit are recorded through the sensors of the driving assistance device, the user can maintain a constant driving posture and habit through the driving assistance device, and correct incorrect postures and habits.

또, 운전 보조 장치는 차량을 제어하는 입력 장치 자체로서, 핸들 또는 페달을 대체할 수 있다. 운전 보조 장치는 센서를 통해 사용자의 입력 동작을 센싱하고, 통신부를 통해 차량의 제어부에 사용자의 입력 동작을 전달할 수 있다. 이로써, 차량에서 핸들 및 페달은 제거될 수 있다.In addition, the driving assistance device is an input device that controls a vehicle and may replace a steering wheel or a pedal. The driving assistance device may sense a user's input motion through a sensor and transmit the user's input motion to a controller of the vehicle through a communication unit. Thereby, the steering wheel and pedal can be removed from the vehicle.

실시예들에 따른 효과가 상술한 효과들로 제한되는 것은 아니며, 언급되지 아니한 효과들은 본 명세서 및 첨부된 도면으로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확히 이해될 수 있을 것이다.Effects according to the embodiments are not limited to the above-described effects, and effects not mentioned will be clearly understood by those of ordinary skill in the art from the present specification and the accompanying drawings.

도 1은, 일 실시예에 따른 운전 보조 장치를 포함하는 차량의 내부 블록도이다.
도 2는, 일 실시예에 따른 운전 보조 장치의 내부 블록도이다.
도 3은, 일 실시예에 따른 운전 보조 장치의 발 센서의 일 사용 상태도이다.
도 4는, 일 실시예에 따른 운전 보조 장치의 발 센서의 다른 일 사용 상태도이다.
도 5는, 일 실시예에 따른 운전 보조 장치의 손 센서의 일 사용 상태도이다.
도 6은, 일 실시예에 따른 운전 보조 장치의 머리 센서의 일 사용 상태도이다.
도 7은, 일 실시예에 따른 운전 보조 장치의 동작 방법에 관한 순서도이다.
1 is a block diagram of a vehicle including a driving assistance device according to an exemplary embodiment.
2 is an internal block diagram of a driving assistance device according to an embodiment.
3 is a diagram illustrating a state of use of a foot sensor of a driving assistance device according to an exemplary embodiment.
4 is a diagram illustrating another state of use of a foot sensor of the driving assistance apparatus according to an exemplary embodiment.
5 is a diagram illustrating a use state of a hand sensor of a driving assistance apparatus according to an exemplary embodiment.
6 is a diagram illustrating a state of use of a head sensor of a driving assistance device according to an exemplary embodiment.
7 is a flowchart illustrating a method of operating a driving assistance device according to an exemplary embodiment.

실시예들에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.The terms used in the embodiments have selected general terms that are currently widely used as possible while considering functions in the present invention, but this may vary depending on the intention or precedent of a technician working in the field, the emergence of new technologies, and the like. In addition, in certain cases, there are terms arbitrarily selected by the applicant, and in this case, the meaning of the terms will be described in detail in the description of the corresponding invention. Therefore, the terms used in the present invention should be defined based on the meaning of the term and the overall contents of the present invention, not a simple name of the term.

명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "…부", "…모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.When a part of the specification is said to "include" a certain component, it means that other components may be further included rather than excluding other components unless otherwise stated. In addition, terms such as "... unit" and "... module" described in the specification mean a unit that processes at least one function or operation, which may be implemented as hardware or software or a combination of hardware and software.

본 개시의 일부 실시 예는 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들의 일부 또는 전부는, 특정 기능들을 실행하는 다양한 개수의 하드웨어 및/또는 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 개시의 기능 블록들은 하나 이상의 마이크로프로세서들에 의해 구현되거나, 소정의 기능을 위한 회로 구성들에 의해 구현될 수 있다. 또한, 예를 들어, 본 개시의 기능 블록들은 다양한 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능 블록들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 개시는 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. “메커니즘”, “요소”, “수단” 및 “구성” 등과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다.Some embodiments of the present disclosure may be represented by functional block configurations and various processing steps. Some or all of these functional blocks may be implemented with various numbers of hardware and/or software components that perform specific functions. For example, the functional blocks of the present disclosure may be implemented by one or more microprocessors, or may be implemented by circuit configurations for a predetermined function. In addition, for example, the functional blocks of the present disclosure may be implemented in various programming or scripting languages. The functional blocks may be implemented as an algorithm executed on one or more processors. In addition, the present disclosure may employ conventional techniques for electronic environment setting, signal processing, and/or data processing. Terms such as “mechanism”, “element”, “means” and “composition” may be used widely, and are not limited to mechanical and physical configurations.

또한, 도면에 도시된 구성 요소들 간의 연결 선 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것일 뿐이다. 실제 장치에서는 대체 가능하거나 추가된 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들에 의해 구성 요소들 간의 연결이 나타내어질 수 있다.In addition, the connecting lines or connecting members between the components illustrated in the drawings are merely illustrative of functional connections and/or physical or circuit connections. In an actual device, connections between components may be represented by various functional connections, physical connections, or circuit connections that can be replaced or added.

아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those of ordinary skill in the art may easily implement the present invention. However, the present invention may be implemented in various different forms and is not limited to the embodiments described herein.

도 1은, 일 실시예에 따른 운전 보조 장치(200)를 포함하는 차량(100)의 내부 블록도이다. 도 1을 참조하면, 차량(100)는, 통신부(110), 입력부(120), 센싱부(125) 메모리(130), 출력부(140), 차량(100) 구동부(150), 차량(100) 운전 보조 시스템(ADAS, 160), 제어부(170), 인터페이스부(180) 및 전원 공급부(190)를 포함할 수 있다.1 is a block diagram of a vehicle 100 including a driving assistance device 200 according to an exemplary embodiment. Referring to FIG. 1, the vehicle 100 includes a communication unit 110, an input unit 120, a sensing unit 125, a memory 130, an output unit 140, a vehicle 100, a driving unit 150, and a vehicle 100. ) A driving assistance system (ADAS) 160, a control unit 170, an interface unit 180, and a power supply unit 190 may be included.

상술한 구성 요소들은 차량(100) 구성 요소들의 일 실시예이며, 차량(100)가 상술한 구성 요소들을 모두 포함해야 하는 것은 아니고, 또한, 차량(100)는 상술한 구성 요소들 외에도 다른 구성 요소들을 더 포함할 수 있음은 물론이다. The above-described constituent elements are an embodiment of the constituent elements of the vehicle 100, and the vehicle 100 does not have to include all of the above-described constituent elements, and the vehicle 100 includes other constituent elements other than the above-described constituent elements. Of course, it may include more.

예를 들어, 차량(100)가 사용자 차량(100)의 운행에 개입하는 정도에 따라, 차량(100)는 출력부를 통해 사용자 차량(100)을 간접적으로 가이드할 수도 있고, 또는 차량(100)는 차량(100) 구동부를 통해 사용자 차량(100)을 보다 적극적이고 직접적으로 가이드할 수도 있다. For example, depending on the degree to which the vehicle 100 intervenes in the operation of the user vehicle 100, the vehicle 100 may indirectly guide the user vehicle 100 through an output unit, or the vehicle 100 The user vehicle 100 may be more actively and directly guided through the vehicle 100 driving unit.

차량(100)는 일반적인 차량(100)의 구성요소들을 포함할 수 있다. 또는 차량(100)는 일반적인 네비게이션과 같은 영상 기록 장치의 형태로 제공될 수도 있다.The vehicle 100 may include components of a general vehicle 100. Alternatively, the vehicle 100 may be provided in the form of an image recording device such as a general navigation system.

통신부(110)는, 근거리 통신 모듈, 위치 정보 모듈, 광통신 모듈 및 V2X 통신 모듈을 포함할 수 있다.The communication unit 110 may include a short-range communication module, a location information module, an optical communication module, and a V2X communication module.

통신부(110)는 외부 기기로부터 사용자 차량(100)이 위치하는 지역의 도로 및 차로에 관한 정보들을 수신할 수 있다. 외부 기기는 예를 들면, 해당 지역의 교통 정보 및 교통 관련 법규 등을 제공하는 서버일 수 있다.The communication unit 110 may receive information about roads and lanes in an area where the user vehicle 100 is located from an external device. The external device may be, for example, a server that provides traffic information and traffic-related laws of a corresponding region.

입력부(120)는, 운전 조작 수단, 카메라, 마이크로폰 및 사용자 입력부를 포함할 수 있다.The input unit 120 may include a driving operation means, a camera, a microphone, and a user input unit.

운전 조작 수단은, 차량(100) 운전을 위한 사용자 입력을 수신한다. 운전 조작 수단은 조향 입력 수단, 쉬프트 입력 수단, 가속 입력 수단, 브레이크 입력 수단을 포함할 수 있다.The driving operation means receives a user input for driving the vehicle 100. The driving operation means may include a steering input means, a shift input means, an acceleration input means, and a brake input means.

가속 입력 수단은, 사용자로부터 차량(100)의 가속을 위한 입력을 수신한다. 브레이크 입력 수단은, 사용자로부터 차량(100)의 감속을 위한 입력을 수신한다.The acceleration input means receives an input for acceleration of the vehicle 100 from a user. The brake input means receives an input for deceleration of the vehicle 100 from a user.

카메라는, 이미지 센서와 영상 처리 모듈을 포함할 수 있다. 카메라는 이미지 센서(예를 들면, CMOS 또는 CCD)에 의해 얻어지는 정지영상 또는 동영상을 처리할 수 있다. 영상 처리 모듈은 이미지 센서를 통해 획득된 정지영상 또는 동영상을 가공하여, 필요한 정보를 추출하고, 추출된 정보를 제어부(170)에 전달할 수 있다.The camera may include an image sensor and an image processing module. The camera can process still or moving images obtained by an image sensor (eg CMOS or CCD). The image processing module may process a still image or a moving image acquired through an image sensor, extract necessary information, and transmit the extracted information to the controller 170.

한편, 차량(100)은 차량(100) 전방 영상을 촬영하는 전방 카메라, 차량(100) 주변 영상을 촬영하는 어라운드 뷰 카메라 및 차량(100) 후방 영상을 촬영하는 후방카메라를 포함할 수 있다. 각각의 카메라는 렌즈, 이미지 센서 및 프로세서를 포함할 수 있다. 프로세서는, 촬영되는 영상을 컴퓨터 처리하여, 데이터 또는 정보를 생성하고, 생성된 데이터 또는 정보를 제어부(170)에 전달할 수 있다. 카메라에 포함되는 프로세서는, 제어부(170)의 제어를 받을 수 있다.Meanwhile, the vehicle 100 may include a front camera for photographing a front image of the vehicle 100, an around view camera for photographing an image around the vehicle 100, and a rear camera for photographing a rear image of the vehicle 100. Each camera may include a lens, an image sensor and a processor. The processor may computer-process the captured image to generate data or information, and transmit the generated data or information to the controller 170. The processor included in the camera may be controlled by the controller 170.

카메라는 스테레오 카메라를 포함할 수 있다. 이 경우, 카메라의 프로세서는, 스테레오 영상에서 검출된 디스페리티(disparity) 차이를 이용하여, 오브젝트와의 거리, 영상에서 검출된 오브젝트와의 상대 속도, 복수의 오브젝트 간의 거리를 검출할 수 있다.The camera may comprise a stereo camera. In this case, the processor of the camera may detect a distance to an object, a relative speed with an object detected in the image, and distances between a plurality of objects using a difference in disparity detected in the stereo image.

카메라는 TOF(Time of Flight) 카메라를 포함할 수 있다. 이 경우, 카메라는, 광원(예를 들면, 적외선 또는 레이저) 및 수신부를 포함할 수 있다. 이 경우, 카메라의 프로세서는, 광원에서 발신되는 적외선 또는 레이저가 오브젝트에 반사되어 수신될 때까지의 시간(TOF)에 기초하여 오브젝트와의 거리, 오브젝트와의 상대 속도, 복수의 오브젝트 간의 거리를 검출할 수 있다.The camera may include a Time of Flight (TOF) camera. In this case, the camera may include a light source (eg, infrared or laser) and a receiver. In this case, the processor of the camera detects the distance to the object, the relative speed with the object, and the distance between a plurality of objects based on the time until the infrared or laser emitted from the light source is reflected and received (TOF). can do.

한편, 후방 카메라는, 후방 번호판 또는 트렁크 또는 테일 게이트 스위치 부근에 배치될 수 있으나, 후방 카메라가 배치되는 위치는 이에 제한되지 않는다.Meanwhile, the rear camera may be disposed near the rear license plate or the trunk or the tail gate switch, but the position at which the rear camera is disposed is not limited thereto.

복수의 카메라에서 촬영된 각각의 이미지는, 카메라의 프로세서에 전달되고, 프로세서는 각각의 이미지를 합성하여, 차량(100) 주변 영상을 생성할 수 있다. 이때, 차량(100) 주변 영상은 탑뷰 이미지 또는 버드 아이 이미지로 디스플레이부를 통해 표시될 수 있다.Each image captured by the plurality of cameras is transmitted to a processor of the camera, and the processor may generate an image around the vehicle 100 by synthesizing each image. In this case, the image around the vehicle 100 may be displayed as a top view image or a bird's eye image through the display unit.

센싱부(125)는, 차량(100)의 각종 상황을 센싱한다. 이를 위해, 센싱부(125)는, 충돌 센서, 휠 센서(wheel sensor), 속도 센서, 경사 센서, 중량 감지 센서, 헤딩 센서(heading sensor), 요 센서(yaw sensor), 자이로 센서(gyro sensor), 포지션 모듈(position module), 차량(100) 전진/후진 센서, 배터리 센서, 연료 센서, 타이어 센서, 핸들 회전에 의한 스티어링 센서, 차량(100) 내부 온도 센서, 차량(100) 내부 습도 센서, 초음파 센서, 조도 센서, 레이더, 라이더 등을 포함할 수 있다.The sensing unit 125 senses various situations of the vehicle 100. To this end, the sensing unit 125 includes a collision sensor, a wheel sensor, a speed sensor, a tilt sensor, a weight detection sensor, a heading sensor, a yaw sensor, and a gyro sensor. , Position module, vehicle (100) forward/reverse sensor, battery sensor, fuel sensor, tire sensor, steering sensor by steering wheel rotation, vehicle (100) internal temperature sensor, vehicle (100) internal humidity sensor, ultrasonic It may include a sensor, an illuminance sensor, a radar, a lidar, and the like.

이에 의해, 센싱부(125)는, 차량(100) 충돌 정보, 차량(100) 방향 정보, 차량(100) 위치 정보(GPS 정보), 차량(100) 각도 정보, 차량(100) 속도 정보, 차량(100) 가속도 정보, 차량(100) 기울기 정보, 차량(100) 전진/후진 정보, 배터리 정보, 연료 정보, 타이어 정보, 차량(100) 램프 정보, 차량(100) 내부 온도 정보, 차량(100) 내부 습도 정보, 스티어링 휠 회전 각도, 차량(100) 외부 조도 등에 대한 센싱 신호를 획득할 수 있다.Accordingly, the sensing unit 125 includes vehicle 100 collision information, vehicle 100 direction information, vehicle 100 location information (GPS information), vehicle 100 angle information, vehicle 100 speed information, vehicle (100) acceleration information, vehicle 100 tilt information, vehicle 100 forward/reverse information, battery information, fuel information, tire information, vehicle 100 ramp information, vehicle 100 internal temperature information, vehicle 100 Sensing signals for internal humidity information, steering wheel rotation angle, and external illuminance of the vehicle 100 may be obtained.

센싱부는 사용자 차량(100)의 주변에 위치하는 물체를 감지할 수 있다. 예를 들면, 센싱부는 사용자 차량(100)에 대해 각 방향에 위치하는 물체들의 존재, 물체까지의 거리, 물체의 이동 방향 및 이동 속도 등을 감지할 수 있다.The sensing unit may detect an object located around the user vehicle 100. For example, the sensing unit may detect the presence of objects located in each direction with respect to the user vehicle 100, a distance to the object, a moving direction and a moving speed of the object.

메모리(130)는, 제어부(170)와 전기적으로 연결된다. 메모리(130)는 유닛에 대한 기본데이터, 유닛의 동작제어를 위한 제어데이터, 입출력되는 데이터를 저장할 수 있다. 메모리(130)는, 하드웨어적으로, ROM, RAM, EPROM, 플래시 드라이브, 하드 드라이브 등과 같은 다양한 저장기기 일 수 있다. 메모리(130)는 제어부(170)의 처리 또는 제어를 위한 프로그램 등, 차량(100) 전반의 동작을 위한 다양한 데이터를 저장할 수 있다.The memory 130 is electrically connected to the control unit 170. The memory 130 may store basic data for a unit, control data for controlling the operation of the unit, and input/output data. In terms of hardware, the memory 130 may be various storage devices such as ROM, RAM, EPROM, flash drive, and hard drive. The memory 130 may store various data for overall operation of the vehicle 100, such as a program for processing or controlling the controller 170.

메모리(130)는 사용자 차량(100)이 위치하는 지역의 도로 및 차로에 관한 정보들을 저장할 수 있다. 메모리(130)는 통신부(110)를 통해 수신한 도로 및 차로에 관한 정보들을 저장할 수도 있고, 또는 입력부를 통해 사용자로부터 입력 받은 도로 및 차로에 관한 정보들을 저장할 수도 있다.The memory 130 may store information on roads and lanes in an area where the user vehicle 100 is located. The memory 130 may store information on roads and lanes received through the communication unit 110 or may store information on roads and lanes received from a user through an input unit.

출력부(140)는, 제어부(170)에서 처리된 정보를 출력하기 위한 것으로, 디스플레이부, 음향 출력부 및 햅틱 출력부를 포함할 수 있다.The output unit 140 is for outputting information processed by the control unit 170 and may include a display unit, an audio output unit, and a haptic output unit.

출력부(140)는 제어부의 명령에 따라 사용자 차량(100)이 위치하는 차로가 변경되면, 디스플레이부를 통해 시각적인 방법으로, 음향 출력부를 통해 청각적인 방법으로 또는 햅틱 출력부를 통해 촉각적인 방법 등 다양한 방법으로 차로의 변경을 사용자에게 알릴 수 있다. When the lane in which the user's vehicle 100 is located is changed according to a command from the control unit, the output unit 140 provides various types such as a visual method through a display unit, an audible method through an acoustic output unit, or a tactile method through a haptic output unit. In this way, the user can be notified of the change of lane.

디스플레이부는 제어부(170)에서 처리되는 정보를 표시할 수 있다. 예를 들면, 디스플레이부는 차량(100) 관련 정보를 표시할 수 있다. 여기서, 차량(100) 관련 정보는, 현재 차량(100)의 상태를 알려주는 차량(100) 상태 정보 또는 차량(100)의 운행과 관련되는 차량(100) 운행 정보를 포함할 수 있다. 예를 들어, 디스플레이부는 현재 차량(100)의 속도(또는 속력), 주변차량(100)의 속도(또는 속력) 및 현재 차량(100)과 주변차량(100) 간의 거리 정보를 표시할 수 있다. 디스플레이부는 제어부의 명령에 따라 제어부가 인식한 사용자 차량(100)이 위치하는 차로의 차선 등을 표시할 수 있다.The display unit may display information processed by the controller 170. For example, the display unit may display information related to the vehicle 100. Here, the vehicle 100 related information may include vehicle 100 status information indicating the current status of the vehicle 100 or vehicle 100 driving information related to the operation of the vehicle 100. For example, the display unit may display current speed (or speed) of the vehicle 100, speed (or speed) of the surrounding vehicle 100, and distance information between the current vehicle 100 and the surrounding vehicle 100. The display unit may display a lane of a lane in which the user vehicle 100 is located, recognized by the controller according to a command from the controller.

한편, 디스플레이부는 운전자가 운전을 함과 동시에 차량(100) 상태 정보 또는 차량(100) 운행 정보를 확인할 수 있도록 클러스터(cluster)를 포함할 수 있다. 클러스터는 대시보드 위에 위치할 수 있다. 이 경우, 운전자는, 시선을 차량(100) 전방에 유지한 채로 클러스터에 표시되는 정보를 확인할 수 있다.Meanwhile, the display unit may include a cluster so that the driver can check vehicle 100 status information or vehicle 100 driving information while driving. Clusters can be placed on the dashboard. In this case, the driver may check information displayed on the cluster while keeping the gaze in front of the vehicle 100.

음향 출력부는 제어부(170)로부터의 전기 신호를 오디오 신호로 변환하여 출력한다. 이를 위해, 음향 출력부는 스피커 등을 구비할 수 있다.The sound output unit converts the electrical signal from the control unit 170 into an audio signal and outputs it. To this end, the sound output unit may include a speaker or the like.

차량(100) 구동부(150)는, 차량(100) 각종 장치의 동작을 제어할 수 있다. 차량(100) 구동부(150)는 동력원 구동부, 조향 구동부, 브레이크 구동부, 램프 구동부, 공조 구동부, 윈도우 구동부, 에어백 구동부, 썬루프 구동부 및 서스펜션 구동부를 포함할 수 있다.The vehicle 100 driving unit 150 may control operations of various devices of the vehicle 100. The vehicle 100 driving unit 150 may include a power source driving unit, a steering driving unit, a brake driving unit, a lamp driving unit, an air conditioning driving unit, a window driving unit, an airbag driving unit, a sunroof driving unit, and a suspension driving unit.

동력원 구동부는, 차량(100) 내의 동력원에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 화석 연료 기반의 엔진(미도시)이 동력원인 경우, 동력원 구동부는, 엔진에 대한 전자식 제어를 수행할 수 있다. 이에 의해, 엔진의 출력 토크 등을 제어할 수 있다. 동력원 구동부가 엔진인 경우, 제어부(170)의 제어에 따라, 엔진 출력 토크를 제한하여 차량(100)의 속도를 제한할 수 있다.The power source driving unit may perform electronic control on the power source in the vehicle 100. For example, when a fossil fuel-based engine (not shown) is a power source, the power source driving unit may perform electronic control on the engine. Thereby, it is possible to control the output torque of the engine and the like. When the power source driver is an engine, the speed of the vehicle 100 may be limited by limiting the engine output torque according to the control of the controller 170.

브레이크 구동부는, 차량(100) 내의 브레이크 장치(brake apparatus)(미도시)에 대한 전자식 제어를 수행할 수 있다. 예를 들면, 바퀴에 배치되는 브레이크의 동작을 제어하여, 차량(100)의 속도를 줄일 수 있다. 다른 예로, 좌측 바퀴와 우측 바퀴에 각각 배치되는 브레이크의 동작을 달리하여, 차량(100)의 진행 방향을 좌측, 또는 우측으로 조정할 수 있다.The brake driving unit may perform electronic control of a brake apparatus (not shown) in the vehicle 100. For example, it is possible to reduce the speed of the vehicle 100 by controlling the operation of the brake disposed on the wheel. As another example, the driving direction of the vehicle 100 may be adjusted to the left or to the right by different operations of the brakes disposed on the left and right wheels.

램프 구동부는, 차량(100) 내, 외부에 배치되는 램프의 턴 온/턴 오프를 제어할 수 있다. 또한, 램프의 빛의 세기, 방향 등을 제어할 수 있다. 예를 들면, 방향 지시 램프, 브레이크 램프 등의 대한 제어를 수행할 수 있다.The lamp driver may control turn on/off of lamps disposed inside or outside the vehicle 100. In addition, it is possible to control the light intensity and direction of the lamp. For example, it is possible to control a direction indicator lamp, a brake lamp, and the like.

차량(100) 운전 보조 시스템(ADAS, 160)은 운전자의 운전을 돕는 각종 운전 보조 방법들을 수행하는 운전 보조 장치(200) 및 시스템으로서, 예를 들면, 카메라, 레이더, 라이다(LIDAR), 초음파 센서 등을 통해 정보를 수집하고, 수집된 정보에 기초하여 운전을 보조 하기 위한 각종 기능들을 수행할 수 있다.The vehicle 100 driving assistance system (ADAS, 160) is a driving assistance device 200 and a system that performs various driving assistance methods to assist the driver in driving. For example, a camera, a radar, a lidar, an ultrasonic wave It is possible to collect information through a sensor or the like, and perform various functions to assist driving based on the collected information.

제어부(170)는, 차량(100) 내의 각 유닛의 전반적인 동작을 제어할 수 있다. 제어부(170)는 ECU(Electronic Contol Unit)로 명명될 수 있다. 상술한 추돌 방지 장치는 제어부(170)에 의해 구동될 수 있다.The controller 170 may control the overall operation of each unit in the vehicle 100. The control unit 170 may be referred to as an ECU (Electronic Control Unit). The above-described collision preventing device may be driven by the control unit 170.

제어부(170)는, 하드웨어적으로, ASICs (application specific integrated circuits), DSPs(digital signal processors), DSPDs(digital signal processing devices), PLDs(programmable logic devices), FPGAs(field programmable gate arrays), 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(micro-controllers), 마이크로프로세서(microprocessors), 기타 기능 수행을 위한 전기적 유닛 중 적어도 하나를 이용하여 구현될 수 있다.In hardware, the control unit 170 includes application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), and processors. processors), controllers, micro-controllers, microprocessors, and electrical units for performing other functions.

일 실시예에서 제어부(170)는 차량(100)의 주행 중 ADAS 카메라를 이용하여 도로 영상을 촬영하고, 촬영된 도로 영상으로부터 도로의 수평 데이터를 획득하고, 차량(100)의 주행 중 차량(100)의 센서를 이용하여 차체 기울기를 측정한 기울기 데이터를 획득하고, 획득된 수평 데이터 및 기울기 데이터를 기초로 ADAS 카메라의 위치를 보정한다.In one embodiment, the controller 170 captures a road image using an ADAS camera while the vehicle 100 is driving, acquires horizontal data of the road from the photographed road image, and the vehicle 100 while the vehicle 100 is driving. ) Using the sensor of the vehicle body inclination is obtained, and the position of the ADAS camera is corrected based on the obtained horizontal data and inclination data.

인터페이스부(180)는, 차량(100)에 연결되는 다양한 종류의 외부 기기와의 통로 역할을 수행할 수 있다. 예를 들면, 인터페이스부(180)는 이동 단말기(미도시)와 연결 가능한 포트를 구비할 수 있고, 포트를 통해, 이동 단말기(미도시)와 연결할 수 있다. 이 경우, 인터페이스부(180)는 이동 단말기와 데이터를 교환할 수 있다.The interface unit 180 may serve as a passage for various types of external devices connected to the vehicle 100. For example, the interface unit 180 may include a port that can be connected to a mobile terminal (not shown), and can be connected to a mobile terminal (not shown) through the port. In this case, the interface unit 180 may exchange data with the mobile terminal.

전원 공급부(190)는, 제어부(170)의 제어에 따라, 각 구성요소들의 동작에 필요한 전원을 공급할 수 있다. 특히, 전원 공급부(190)는, 차량(100) 내부의 배터리(미도시) 등으로부터 전원을 공급받을 수 있다.The power supply unit 190 may supply power required for operation of each component under the control of the controller 170. In particular, the power supply unit 190 may receive power from a battery (not shown) inside the vehicle 100.

도 2는, 일 실시예에 따른 운전 보조 장치(200)의 내부 블록도이다. 2 is an internal block diagram of a driving assistance device 200 according to an exemplary embodiment.

도 2를 참조하면, 운전 보조 장치(200)는 센싱부(210), 디스플레이(220), 알람부(230), 통신부(240) 및 제어부(250)를 포함할 수 있다. 운전 보조 장치(200)가 상술한 구성들을 모두 포함해야 하는 것은 아니며, 이들 중 일부를 선택적으로 포함할 수도 있다.Referring to FIG. 2, the driving assistance device 200 may include a sensing unit 210, a display 220, an alarm unit 230, a communication unit 240, and a control unit 250. The driving assistance device 200 does not have to include all of the above-described configurations, but may selectively include some of them.

센싱부(210)는 사용자 신체 일부에 부착되어 사용자로부터 제어 신호를 수신할 수 있다. 센싱부(210)는 사용자의 손에 부착되어 손의 위치 정보를 감지하는 손 센서(212), 사용자의 오른발의 발에 부착되어 오른발의 위치 정보를 감지하는 발 센서(214) 및 사용자의 머리에 부착되어, 머리의 위치 정보를 감지하는 머리 센서(216)를 포함할 수 있다.The sensing unit 210 may be attached to a part of the user's body to receive a control signal from the user. The sensing unit 210 includes a hand sensor 212 that is attached to the user's hand and detects location information of the hand, a foot sensor 214 that is attached to the user's right foot and detects the location information of the right foot, and the user's head. It may include a head sensor 216 that is attached and detects position information of the head.

제어부(250)는 운전 보조 장치(200)의 각 구성 요소와 전기적으로 연결되고, 각 구성 요소의 동작 및 운전 보조 장치(200)를 전반적으로 제어한다. 제어부(250)는 손 센서(212)에서 획득한 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득할 수 있다. 제어부(250)는 발 센서(214)에서 획득한 오른발의 위치 정보에 기초하여 브레이크 페달(152) 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득할 수 있다.The controller 250 is electrically connected to each component of the driving assistance device 200 and controls the operation of each component and the driving assistance device 200 as a whole. The controller 250 may acquire steering information of a handle based on position information of a hand acquired from the hand sensor 212. The control unit 250 may acquire pedal operation information regarding operation of the brake pedal 152 and the accelerator pedal based on the position information of the right foot obtained from the foot sensor 214.

디스플레이(220)는 제어부(250)의 명령에 따라 차량(100)의 운행 정보를 표시할 수 있다.The display 220 may display driving information of the vehicle 100 according to a command of the controller 250.

알람부(230)는 알람을 제공함으로써 사용자에게 차량(100) 운행 정보를 제공할 수 있다. 예를 들면, 제어부(250)가 차량(100) 운행 정보에 따라 위험한 상황인 것으로 판단하면, 알람부(230)는 알람을 제공할 수 있다.The alarm unit 230 may provide the vehicle 100 operation information to a user by providing an alarm. For example, if the control unit 250 determines that the vehicle 100 is in a dangerous situation according to the driving information of the vehicle 100, the alarm unit 230 may provide an alarm.

더 구체적으로는, 제어부(250)는 조향 각도가 소정의 제1 임계값을 초과하고, 차량(100)의 속도가 제1 임계값에 의해 결정되는 제2 임계값을 초과할 때, 위험한 것으로 판단하고, 알람부(230)를 통해 알람을 제공할 수 있다. More specifically, when the steering angle exceeds a predetermined first threshold and the speed of the vehicle 100 exceeds a second threshold determined by the first threshold, the controller 250 determines that it is dangerous. And, it is possible to provide an alarm through the alarm unit 230.

통신부(240)는 차량(100) 내 통신부(110)과 정보를 송수신할 수 있다. 이로써, 센서(210)를 통해 측정된 정보는 차량(100) 내 제어부(170)에 의해 사용될 수 있고, 센싱부(125)에 의해 측정된 정보는 제어부(250)에 의해 사용될 수 있다. 예를 들면, 통신부(240)는 브레이크 페달(152) 및 가속 페달(154)의 조작 여부 및 페달의 조작 강도를 차량(100) 내부 제어부(170)에게 전송할 수 있다.The communication unit 240 may transmit and receive information with the communication unit 110 in the vehicle 100. Accordingly, the information measured by the sensor 210 may be used by the control unit 170 in the vehicle 100, and the information measured by the sensing unit 125 may be used by the control unit 250. For example, the communication unit 240 may transmit whether the brake pedal 152 and the accelerator pedal 154 are operated and the operation intensity of the pedal to the control unit 170 inside the vehicle 100.

운전 보조 장치(200)는 차량(100)과 별도의 구성일 수 있으나. 일 실시예에 따르면, 운전 보조 장치(200)의 구성 요소들 중 일부는 차량(100)의 구성 요소들과 일치할 수 있다. 예를 들어, 운전 보조 장치(200)의 디스플레이(220)는 차량(100)의 출력부(140)의 일 구성 요소일 수 있다. 또는 운전 보조 장치(200)의 알람부(230)는 차량(100)의 음향 출력부일 수 있다. 또, 운전 보조 장치(200)의 센서(210)는 차량(100)의 센싱부(125)일 수도 있다.The driving assistance device 200 may be a separate configuration from the vehicle 100. According to an embodiment, some of the components of the driving assistance device 200 may match the components of the vehicle 100. For example, the display 220 of the driving assistance device 200 may be a component of the output unit 140 of the vehicle 100. Alternatively, the alarm unit 230 of the driving assistance device 200 may be an audio output unit of the vehicle 100. Also, the sensor 210 of the driving assistance device 200 may be the sensing unit 125 of the vehicle 100.

또, 운전 보조 장치(200)의 제어부(250)는 차량(100)의 제어부(170)와 동일한 구성일 수도 있다. 차량(100)의 제어부(170, 250)는 손의 위치 정보에 기초하여 획득한 핸들의 조향 정보에 따라 조형 구동부를 제어하고, 오른발의 위치 정보에 기초하여 획득한 엑셀 페달의 조작에 관한 정보에 따라 동력원 구동부를 제어하고, 발의 위치 정보에 기초하여 획득한 브레이크 페달(152)의 조작에 관한 정보에 따라 브레이크 구동부를 제어할 수 있다.Further, the control unit 250 of the driving assistance device 200 may have the same configuration as the control unit 170 of the vehicle 100. The controllers 170 and 250 of the vehicle 100 control the modeling driving unit according to steering information of the steering wheel obtained based on the position information of the hand, and provide information on the operation of the accelerator pedal obtained based on the position information of the right foot. Accordingly, the power source driving unit may be controlled, and the brake driving unit may be controlled according to information on the operation of the brake pedal 152 obtained based on the position information of the foot.

도 3은 일 실시예에 따른 운전 보조 장치(200)의 발 센서(214)의 일 사용 상태도이고, 도 4는 운전 보조 장치(200)의 발 센서(214)의 다른 일 사용 상태도이다.3 is a diagram illustrating a state of use of the foot sensor 214 of the driving assistance device 200 according to an exemplary embodiment, and FIG. 4 is a diagram illustrating another state of use of the foot sensor 214 of the driving assistance device 200.

도 3을 참조하면, 발 센서(214)는, 사용자 오른발의 발목에 위치하는 제1 발 센서(214-1), 사용자 오른발의 연장 방향으로 제1 지점으로부터 이격되어 위치하는 제2 발 센서(214-2)를 포함할 수 있다.Referring to FIG. 3, the foot sensor 214 includes a first foot sensor 214-1 positioned at an ankle of a user's right foot, and a second foot sensor 214 positioned spaced apart from a first point in the extension direction of the user's right foot. -2) may be included.

운전 보조 장치(200)는 제1 발 센서(214-1) 및 제2 발 센서(214-2)의 위치 정보 및 운동 정보 등을 감지할 수 있다. 즉 운전 보조 장치(200)는, 제1 발 센서(214-1)를 통해 발목의 위치 및 운동 상태를 판단하고, 제2 발 센서(214-2)를 통해 페달과 접촉하는 발의 앞 부분의 위치 및 운동 상태를 판단할 수 있다. 발 센서(214)는 예를 들면, 가속도 센서, 위치 센서 또는 자이로스코프 등을 포함할 수 있다.The driving assistance device 200 may detect location information and exercise information of the first foot sensor 214-1 and the second foot sensor 214-2. That is, the driving assistance device 200 determines the position of the ankle and the motion state through the first foot sensor 214-1, and the position of the front part of the foot contacting the pedal through the second foot sensor 214-2. And the exercise state can be determined. The foot sensor 214 may include, for example, an acceleration sensor, a position sensor, or a gyroscope.

운전 보조 장치(200)는 제1 발 센서(214-1)와 제2 발 센서(214-2) 간의 Z축 방향을 중심으로 하는 상대적 회전 운동에 기초하여, 브레이크 페달(152) 및 가속 페달(154)의 조작 여부를 판별할 수 있다. The driving assistance device 200 includes a brake pedal 152 and an accelerator pedal based on a relative rotational motion centered on the Z-axis direction between the first foot sensor 214-1 and the second foot sensor 214-2. 154) can be determined.

예를 들어, 도 3(a)와 같이 제2 발 센서(214-2)가 좌측에서 감지되고, 제1 발 센서(214-1)는 우측에서 감지되는 경우, 운전 보조 장치(200)는 브레이크 페달(152)이 조작되고 있는 것으로 판단할 수 있다.For example, when the second foot sensor 214-2 is sensed from the left and the first foot sensor 214-1 is sensed from the right as shown in FIG. 3(a), the driving assistance device 200 is It can be determined that the pedal 152 is being operated.

또, 도 3(b)와 같이 제1 발 센서(214-1)가 좌측에서 감지되고, 제2 발 센서(214-2)는 우측에서 감지되는 경우, 운전 보조 장치(200)는 가속 페달(154)이 조작되고 있는 것으로 판단할 수 있다. In addition, as shown in FIG. 3(b), when the first foot sensor 214-1 is sensed on the left and the second foot sensor 214-2 is sensed on the right, the driving assistance device 200 is an accelerator pedal ( It can be determined that 154) is being manipulated.

도 4를 참조하면, 운전 보조 장치(200)는 제1 발 센서(214-1) 및 제2 발 센서(214-2) 간의 X축 방향을 중심으로 하는 상대적 회전 운동에 기초하여, 브레이크 페달(152) 및 가속 페달(154)의 조작 강도를 판단할 수 있다. Referring to FIG. 4, the driving assistance device 200 includes a brake pedal based on a relative rotational motion centering on the X-axis direction between the first foot sensor 214-1 and the second foot sensor 214-2. The intensity of operation of the 152 and accelerator pedal 154 may be determined.

예를 들어, 도 4(a)와 같이 제1 발 센서(214-1)의 동작은 감지되지 않으나, 제2 발 센서(214-2)가 X축을 중심으로 시계 방향으로 회전 운동하는 것이 감지될 경우, 운전 보조 장치(200)는 페달이 가압되고 있음을 판단할 수 있다. 또, 운전 보조 장치(200)는 제2 발 센서(214-2)가 X축을 중심으로 시계 방향으로 이동한 거리에 기초하여, 페달이 이동한 정도를 판단할 수 있다. For example, as shown in Fig. 4(a), the motion of the first foot sensor 214-1 is not detected, but the second foot sensor 214-2 rotates clockwise around the X axis. In this case, the driving assistance device 200 may determine that the pedal is being pressed. In addition, the driving assistance device 200 may determine the degree to which the pedal has moved based on the distance that the second foot sensor 214-2 has moved clockwise around the X-axis.

또, 도 4(b)와 같이 운전 보조 장치(200)는 제2 발 센서(214-2)가 X축을 중심으로 반시계 방향으로 이동한 거리에 기초하여 페달에 대한 입력이 해제되는 것을 판단할 수 있다.In addition, as shown in FIG. 4(b), the driving assistance device 200 may determine that the input to the pedal is released based on the distance the second foot sensor 214-2 has moved counterclockwise around the X-axis. I can.

도 5는, 일 실시예에 따른 운전 보조 장치(200)의 손 센서(212)의 일 사용 상태도이다.5 is a diagram illustrating a state of use of the hand sensor 212 of the driving assistance device 200 according to an exemplary embodiment.

도 5를 참조하면, 손 센서(212)는 각각 양 손 중 하나에 부착되는 제1 손 센서(212-1) 및 제2 손 센서(212-2)를 포함할 수 있다. Referring to FIG. 5, the hand sensor 212 may include a first hand sensor 212-1 and a second hand sensor 212-2 attached to one of both hands, respectively.

운전 보조 장치(200)는 제1 손 센서(212-1) 및 제2 손 센서(212-2)의 위치 정보 및 운동 정보 등을 감지할 수 있다. 즉 운전 보조 장치(200)는, 손 센서(212)들을 통해 양 손의 위치 및 운동 상태를 판단할 수 있다. 손 센서(212)는 예를 들면, 가속도 센서, 위치 센서 또는 자이로스코프 등을 포함할 수 있다.The driving assistance device 200 may detect location information and exercise information of the first hand sensor 212-1 and the second hand sensor 212-2. That is, the driving assistance device 200 may determine the position and movement state of both hands through the hand sensors 212. The hand sensor 212 may include, for example, an acceleration sensor, a position sensor, or a gyroscope.

운전 보조 장치(200)는 손의 위치 정보에 기초하여, 핸들 상에서 사용자의 손의 위치 및 핸들의 조향 각도를 감지할 수 있다.The driving assistance device 200 may detect the position of the user's hand on the handle and the steering angle of the handle based on the position information of the hand.

운전 보조 장치(200)는 손 센서(212)가 반시계 방향으로 회전하는 경우, 운전 보조 장치(200)는 핸들이 반시계 방향으로 회전함을 감지하고, 손 센서(212)의 회전 정도에 기초하여 핸들의 회전 정도를 판단할 수 있다.When the hand sensor 212 rotates counterclockwise, the driving assistance device 200 detects that the handle rotates counterclockwise, and based on the degree of rotation of the hand sensor 212 Thus, the degree of rotation of the handle can be determined.

도 6은, 일 실시예에 따른 운전 보조 장치(200)의 머리 센서(216)의 일 사용 상태도이다. 도 6을 참조하면, 머리 센서(216)는 사용자의 머리에 부착되어, 머리의 위치 정보를 감지할 수 있다. 머리 센서(216)는 예를 들면, 가속도 센서, 위치 센서 또는 자이로스코프 등을 포함할 수 있다.6 is a diagram illustrating a state of use of the head sensor 216 of the driving assistance device 200 according to an exemplary embodiment. Referring to FIG. 6, the head sensor 216 is attached to the user's head and may detect position information of the head. The head sensor 216 may include, for example, an acceleration sensor, a position sensor, or a gyroscope.

운전 보조 장치(200)는 머리 센서(216)의 위치 정보에 기초하여, 사용자의 머리가 소정의 방향으로 소정의 임계값 이상 이동한 것을 감지하면, 위험한 상태로 판단하고, 알람부(230)를 동작할 수 있다.Based on the location information of the head sensor 216, the driving assistance device 200 determines that the user's head has moved more than a predetermined threshold value in a predetermined direction, and determines that the user's head is in a dangerous state, and the alarm unit 230 It can work.

도 7은, 일 실시예에 따른 운전 보조 장치(200)의 동작 방법에 관한 순서도이다. 도 7을 참조하면, 운전 보조 장치(200)는 사용자의 손에 부착된 손 센서(212)를 통해 감지한 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득할 수 있다(S1100). 도 5를 통해 상술한 사항들이 단계 S1100에 적용될 수 있다. 7 is a flowchart illustrating a method of operating the driving assistance apparatus 200 according to an exemplary embodiment. Referring to FIG. 7, the driving assistance device 200 may acquire steering information of a steering wheel based on position information of a hand sensed through a hand sensor 212 attached to a user's hand (S1100). The above-described matters through FIG. 5 may be applied to step S1100.

또, 운전 보조 장치(200)는 사용자의 오른발의 발에 부착된 발 센서(214)를 통해 발의 감지한 위치 정보에 기초하여 브레이크 페달(152) 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득할 수 있다(S1200). 도 3 및 도 4를 통해 상술한 사항들이 단계 S1200에 적용될 수 있다.In addition, the driving assistance device 200 may acquire pedal operation information regarding operation of the brake pedal 152 and the accelerator pedal based on the position information detected of the foot through the foot sensor 214 attached to the foot of the user's right foot. Can be (S1200). The items described above with reference to FIGS. 3 and 4 may be applied to step S1200.

운전 보조 장치(200)는 핸들의 조향 정보 및 페달 조작 정보에 기초하여, 차량(100)의 운행 정보를 출력할 수 있다(S1300). The driving assistance device 200 may output driving information of the vehicle 100 based on steering information of a steering wheel and pedal operation information (S1300).

예를 들면 운전 보조 장치(200)는 조향 각도가 소정의 제1 임계값을 초과하고, 차량(100)의 속도가 제1 임계값에 의해 결정되는 제2 임계값을 초과할 때, 위험한 것으로 판단하고, 알람부(230)를 통해 알람을 제공할 수 있다. For example, the driving assistance device 200 determines that it is dangerous when the steering angle exceeds a predetermined first threshold value and the speed of the vehicle 100 exceeds a second threshold value determined by the first threshold value. And, it is possible to provide an alarm through the alarm unit 230.

제1 임계값이 증가할수록 제2 임계값은 증가한다. 이는 차량(100)의 속도가 빠를수록 원심력이 증가하므로, 원심력을 견딜 수 있도록 조향 각도는 감소되어야 하는 것을 의미한다.As the first threshold increases, the second threshold increases. This means that as the speed of the vehicle 100 increases, the centrifugal force increases, and thus the steering angle must be decreased to withstand the centrifugal force.

출력 형태는 다양할 수 있다. 운전 보조 장치(200)는 디스플레이(220)를 통해 차량(100)의 운행 정보를 시각적으로 표시하거나, 스피커를 통해 차량(100) 운행 정보를 청각적으로 출력할 수도 있다. The format of the output can vary. The driving assistance apparatus 200 may visually display driving information of the vehicle 100 through the display 220 or may audibly output driving information of the vehicle 100 through a speaker.

운전 보조 장치(200)는 사용자 신체에 부착되는 센서를 통해 사용자의 차량(100)을 제어하는 동작들을 센싱할 수 있다. 이에 따라, 사용자는 운전 보조 장치(200)를 통해 차량(100)이 없는 곳에서도 운전 연습 및 운전 교육을 수행할 수 있다. The driving assistance device 200 may sense operations that control the user's vehicle 100 through a sensor attached to the user's body. Accordingly, the user can perform driving practice and driving training even in a place without the vehicle 100 through the driving assistance device 200.

또, 운전 보조 장치(200)의 센서들을 통해 사용자의 사용자 운전 자세 및 운전 습관 등이 기록되므로, 사용자는 운전 보조 장치(200)를 통해 운전 자세 및 습관을 일정하게 유지하고, 잘못된 자세 및 습관을 교정할 수 있다.In addition, since the user's driving posture and driving habit, etc. are recorded through the sensors of the driving assistance device 200, the user maintains the driving posture and habit through the driving assistance device 200 and makes wrong postures and habits. Can be corrected.

또, 운전 보조 장치(200)는 차량(100)을 제어하는 입력 장치 자체로서, 핸들 또는 페달을 대체할 수 있다. 운전 보조 장치(200)는 센서를 통해 사용자의 입력 동작을 센싱하고, 통신부(240)를 통해 차량(100)의 제어부(170)에 사용자의 입력 동작을 전달할 수 있다. 이로써, 차량(100)에서 핸들 및 페달은 제거될 수 있다.Further, the driving assistance device 200 is an input device that controls the vehicle 100 and may replace a steering wheel or a pedal. The driving assistance device 200 may sense a user's input motion through a sensor and transmit the user's input motion to the control unit 170 of the vehicle 100 through the communication unit 240. Accordingly, the steering wheel and the pedal can be removed from the vehicle 100.

일 실시예에 따른 장치는 프로세서, 프로그램 데이터를 저장하고 실행하는 메모리, 디스크 드라이브와 같은 영구 저장부(permanent storage), 외부 장치와 통신하는 통신 포트, 터치 패널, 키(key), 버튼 등과 같은 사용자 인터페이스 장치 등을 포함할 수 있다. 소프트웨어 모듈 또는 알고리즘으로 구현되는 방법들은 상기 프로세서상에서 실행 가능한 컴퓨터가 읽을 수 있는 코드들 또는 프로그램 명령들로서 컴퓨터가 읽을 수 있는 기록 매체 상에 저장될 수 있다. 여기서 컴퓨터가 읽을 수 있는 기록 매체로 마그네틱 저장 매체(예컨대, ROM(read-only memory), RAM(random-access memory), 플로피 디스크, 하드 디스크 등) 및 광학적 판독 매체(예컨대, 시디롬(CD-ROM), 디브이디(DVD: Digital Versatile Disc)) 등이 있다. 컴퓨터가 읽을 수 있는 기록 매체는 네트워크로 연결된 컴퓨터 시스템들에 분산되어, 분산 방식으로 컴퓨터가 판독 가능한 코드가 저장되고 실행될 수 있다. 매체는 컴퓨터에 의해 판독가능하며, 메모리에 저장되고, 프로세서에서 실행될 수 있다. A device according to an embodiment includes a processor, a memory for storing and executing program data, a permanent storage such as a disk drive, a communication port for communicating with an external device, a touch panel, a user such as a key, a button, etc. It may include an interface device or the like. Methods implemented as software modules or algorithms may be stored on a computer-readable recording medium as computer-readable codes or program instructions executable on the processor. Here, as a computer-readable recording medium, a magnetic storage medium (e.g., read-only memory (ROM), random-access memory (RAM), floppy disk, hard disk, etc.) and optical reading medium (e.g., CD-ROM ) And DVD (Digital Versatile Disc). The computer-readable recording medium is distributed over network-connected computer systems, so that computer-readable codes can be stored and executed in a distributed manner. The medium is readable by a computer, stored in memory, and executed on a processor.

도면에 도시된 실시 예들에서 참조 부호를 기재하였으며, 실시 예들을 설명하기 위하여 특정 용어들을 사용하였으나, 특정 용어에 의해 본 발명이 한정되는 것은 아니며, 실시 예는 당업자에 있어서 통상적으로 생각할 수 있는 모든 구성 요소들을 포함할 수 있다. Reference numerals are described in the embodiments shown in the drawings, and specific terms are used to describe the embodiments, but the present invention is not limited by specific terms, and the embodiments are all configurations commonly conceived by those skilled in the art. It can contain elements.

실시 예는 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들은 특정 기능들을 실행하는 다양한 개수의 하드웨어 또는/및 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 실시 예는 하나 이상의 마이크로프로세서들의 제어 또는 다른 제어 장치들에 의해서 다양한 기능들을 실행할 수 있는, 메모리, 프로세싱, 로직(logic), 룩 업 테이블(look-up table) 등과 같은 직접 회로 구성들을 채용할 수 있다. 본 발명에의 구성 요소들이 소프트웨어 프로그래밍 또는 소프트웨어 요소들로 실행될 수 있는 것과 유사하게, 실시 예는 데이터 구조, 프로세스들, 루틴들 또는 다른 프로그래밍 구성들의 조합으로 구현되는 다양한 알고리즘을 포함하여, C, C++, 자바(Java), 어셈블러(assembler) 등과 같은 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능적인 측면들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 실시 예는 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. “매커니즘”, “요소”, “수단”, “구성”과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다. 상기 용어는 프로세서 등과 연계하여 소프트웨어의 일련의 처리들(routines)의 의미를 포함할 수 있다.An embodiment may be represented by functional block configurations and various processing steps. These functional blocks may be implemented with various numbers of hardware or/and software configurations that perform specific functions. For example, the embodiment is an integrated circuit configuration such as memory, processing, logic, a look-up table, etc., capable of executing various functions by controlling one or more microprocessors or other control devices Can be hired. Similar to how the components of the present invention can be implemented with software programming or software elements, embodiments include various algorithms implemented with a combination of data structures, processes, routines or other programming components, including C, C++. , Java, assembler, or the like may be implemented in a programming or scripting language. Functional aspects can be implemented with an algorithm running on one or more processors. In addition, the embodiments may employ conventional techniques for electronic environment setting, signal processing, and/or data processing. Terms such as “mechanism”, “element”, “means”, and “composition” can be used widely, and are not limited to mechanical and physical configurations. The term may include a meaning of a series of routines of software in connection with a processor or the like.

실시 예에서 설명하는 특정 실행들은 일 실시 예들로서, 어떠한 방법으로도 실시 예의 범위를 한정하는 것은 아니다. 명세서의 간결함을 위하여, 종래 전자적인 구성들, 제어 시스템들, 소프트웨어, 상기 시스템들의 다른 기능적인 측면들의 기재는 생략될 수 있다. 또한, 도면에 도시된 구성 요소들 간의 선들의 연결 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것으로서, 실제 장치에서는 대체 가능하거나 추가의 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들로서 나타내어질 수 있다. 또한, “필수적인”, “중요하게” 등과 같이 구체적인 언급이 없다면 본 발명의 적용을 위하여 반드시 필요한 구성 요소가 아닐 수 있다.Specific implementations described in the embodiments are examples, and do not limit the scope of the embodiments in any way. For brevity of the specification, descriptions of conventional electronic configurations, control systems, software, and other functional aspects of the systems may be omitted. In addition, the connection or connection members of the lines between the components shown in the drawings exemplarily represent functional connections and/or physical or circuit connections, and in an actual device, various functional connections that can be replaced or additionally It may be referred to as a connection, or circuit connections. In addition, if there is no specific mention such as "essential" or "important", it may not be a necessary component for the application of the present invention.

실시 예의 명세서(특히 특허청구범위에서)에서 “상기”의 용어 및 이와 유사한 지시 용어의 사용은 단수 및 복수 모두에 해당하는 것일 수 있다. 또한, 실시 예에서 범위(range)를 기재한 경우 상기 범위에 속하는 개별적인 값을 적용한 발명을 포함하는 것으로서(이에 반하는 기재가 없다면), 상세한 설명에 상기 범위를 구성하는 각 개별적인 값을 기재한 것과 같다. 마지막으로, 실시 예에 따른 방법을 구성하는 단계들에 대하여 명백하게 순서를 기재하거나 반하는 기재가 없다면, 상기 단계들은 적당한 순서로 행해질 수 있다. 반드시 상기 단계들의 기재 순서에 따라 실시 예들이 한정되는 것은 아니다. 실시 예에서 모든 예들 또는 예시적인 용어(예들 들어, 등등)의 사용은 단순히 실시 예를 상세히 설명하기 위한 것으로서 특허청구범위에 의해 한정되지 않는 이상 상기 예들 또는 예시적인 용어로 인해 실시 예의 범위가 한정되는 것은 아니다. 또한, 당업자는 다양한 수정, 조합 및 변경이 부가된 특허청구범위 또는 그 균등물의 범주 내에서 설계 조건 및 팩터에 따라 구성될 수 있음을 알 수 있다.In the specification of the embodiment (especially in the claims), the use of the term “above” and a similar reference term may correspond to both the singular and the plural. In addition, when a range is described in an embodiment, the invention to which individual values falling within the range are applied (unless otherwise stated), it is the same as describing each individual value constituting the range in the detailed description. . Finally, if there is no clearly stated or contrary to the order of steps constituting the method according to the embodiment, the steps may be performed in an appropriate order. The embodiments are not necessarily limited according to the order of description of the steps. The use of all examples or illustrative terms (for example, etc.) in the embodiments is merely for describing the embodiments in detail, and the scope of the embodiments is limited by the above examples or illustrative terms unless limited by the claims. It is not. In addition, those skilled in the art can recognize that various modifications, combinations, and changes may be configured according to design conditions and factors within the scope of the appended claims or their equivalents.

100 차량
200 운전 보조 장치
210 센싱부
220 디스플레이
230 알람부
240 통신부
250 제어부
100 vehicles
200 driving aids
210 sensing unit
220 displays
230 alarm unit
240 Communications Department
250 control unit

Claims (10)

사용자의 손에 부착되어 상기 손의 위치 정보를 감지하는 손 센서;
사용자의 오른발의 발에 부착되어 상기 오른발의 위치 정보를 감지하는 발 센서;
상기 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득하고,
상기 오른발의 위치 정보에 기초하여 브레이크 페달 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득하는 제어부; 및
상기 핸들의 조향 정보 및 상기 페달 조작 정보에 기초하여, 차량의 운행 정보를 표시하는 디스플레이;를 포함하고,
상기 발 센서는,
사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서, 사용자 오른발의 연장 방향으로 상기 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서를 포함하는 운전 보조 장치.
A hand sensor attached to a user's hand to sense location information of the hand;
A foot sensor attached to the foot of the user's right foot to detect position information of the right foot;
Acquiring steering information of the handle based on the position information of the hand,
A control unit for acquiring pedal operation information regarding operation of a brake pedal and an accelerator pedal based on the position information of the right foot; And
Includes; a display for displaying driving information of the vehicle based on the steering information of the steering wheel and the pedal operation information,
The foot sensor,
A driving assistance device comprising a first foot sensor attached to a first point positioned on the ankle of the user's right foot, and a second foot sensor attached to a second point spaced apart from the first point in an extension direction of the user's right foot.
삭제delete 제1 항에 있어서,
상기 제1 발 센서를 통해 발목의 위치를 감지하고,
상기 제1 발 센서 및 상기 제2 발 센서 간의 제1 방향으로 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 여부를 판별하고,
상기 제1 발 센서 및 상기 제2 발 센서 간의 제2 방향으로 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 강도를 판별하는
운전 보조 장치.
The method of claim 1,
Detecting the position of the ankle through the first foot sensor,
It is determined whether the brake pedal and the accelerator pedal are operated based on a change in the relative position between the first foot sensor and the second foot sensor in a first direction,
Based on the relative position change in the second direction between the first foot sensor and the second foot sensor, to determine the operation strength of the brake pedal and the accelerator pedal
Driving aids.
제1 항에 있어서,
상기 제어부는
상기 손의 위치 정보에 기초하여, 핸들 상에서 사용자의 손의 위치 및 핸들의 조향 각도를 감지할 수 있는
운전 보조 장치.
The method of claim 1,
The control unit
Based on the position information of the hand, it is possible to detect the position of the user's hand on the handle and the steering angle of the handle.
Driving aids.
제1 항에 있어서,
상기 운전 보조 장치는 알람을 제공하는 알람부를 포함하고,
상기 조향 정보는 조향 각도를 포함하고,
상기 제어부는
상기 페달 조작 정보에 기초하여 차량의 속도를 획득할 수 있고,
상기 조향 각도가 소정의 제1 임계값을 초과하고,
상기 차량의 속도가 상기 제1 임계값에 의해 결정되는 제2 임계값을 초과할 때, 상기 알람부를 동작하는
운전 보조 장치.
The method of claim 1,
The driving assistance device includes an alarm unit for providing an alarm,
The steering information includes a steering angle,
The control unit
It is possible to obtain the speed of the vehicle based on the pedal operation information,
The steering angle exceeds a predetermined first threshold value,
When the vehicle speed exceeds a second threshold value determined by the first threshold value, the alarm unit is operated.
Driving aids.
제1 항에 있어서,
상기 운전 보조 장치는, 알람을 제공하는 알람부 및 사용자의 머리에 부착되어, 상기 머리의 위치 정보를 감지하는 머리 센서를 더 포함하고,
상기 제어부는
상기 머리의 위치 정보에 기초하여, 사용자의 머리가 소정의 방향으로 소정의 임계값 이상 이동한 것으로 판단하면, 상기 알람부를 동작하는
운전 보조 장치.
The method of claim 1,
The driving assistance device further includes an alarm unit for providing an alarm and a head sensor attached to the user's head to detect position information of the head,
The control unit
If it is determined that the user's head has moved by a predetermined threshold or more in a predetermined direction based on the location information of the head, the alarm unit operates
Driving aids.
사용자의 손에 부착된 손 센서를 통해 감지한 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득하는 단계;
사용자의 오른발의 발에 부착된 발 센서를 통해 감지한 상기 오른발의 위치 정보에 기초하여 브레이크 페달 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득하는 단계; 및
상기 핸들의 조향 정보 및 상기 페달 조작 정보에 기초하여, 차량의 운행 정보를 출력하는 단계;를 포함하고,
상기 발 센서는,
사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서, 사용자 오른발의 연장 방향으로 상기 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서를 포함하는 운전 보조 장치의 동작 방법.
Acquiring steering information of a handle based on position information of a hand sensed through a hand sensor attached to a user's hand;
Acquiring pedal operation information regarding operation of a brake pedal and an accelerator pedal based on the position information of the right foot detected through a foot sensor attached to the foot of the user's right foot; And
Including; based on the steering information of the steering wheel and the pedal operation information, outputting the driving information of the vehicle; Including,
The foot sensor,
A method of operating a driving assistance device comprising a first foot sensor attached to a first point positioned on the ankle of the user's right foot, and a second foot sensor attached to a second point spaced apart from the first point in the extension direction of the user's right foot .
운전 보조 방법을 수행하는 컴퓨터 프로그램이 저장된 컴퓨터로 판독 가능한 기록 매체로서,
상기 기록 매체는
사용자의 손에 부착된 손 센서를 통해 상기 손의 위치 정보를 감지하는 프로그램;
사용자의 오른발의 발에 부착된 발 센서를 통해 상기 오른발의 위치 정보를 감지하는 프로그램;
상기 손의 위치 정보에 기초하여 핸들의 조향 정보를 획득하는 프로그램;
상기 오른발의 위치 정보에 기초하여 브레이크 페달 및 엑셀 페달의 조작에 관한 페달 조작 정보를 획득하는 프로그램; 및
상기 핸들의 조향 정보 및 상기 페달 조작 정보에 기초하여, 디스플레이를 통해 차량의 운행 정보를 표시하는 프로그램을 포함하고,
상기 발 센서는,
사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서, 사용자 오른발의 연장 방향으로 상기 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서를 포함하는 기록 매체.
As a computer-readable recording medium in which a computer program for performing a driving assistance method is stored,
The recording medium is
A program for detecting location information of the hand through a hand sensor attached to the user's hand;
A program for detecting position information of the right foot through a foot sensor attached to the user's right foot;
A program for acquiring steering information of a steering wheel based on the position information of the hand;
A program for acquiring pedal operation information regarding operation of a brake pedal and an accelerator pedal based on the position information of the right foot; And
Based on the steering information of the steering wheel and the pedal operation information, including a program for displaying the driving information of the vehicle through a display,
The foot sensor,
A recording medium comprising a first foot sensor attached to a first point positioned on the ankle of the user's right foot, and a second foot sensor attached to a second point spaced apart from the first point in an extension direction of the user's right foot.
사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서;
사용자 오른발의 연장 방향으로 상기 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서;
상기 제1 발 센서를 통해 발목의 위치를 감지하고,
상기 제1 발 센서 및 상기 제2 발 센서 간의 제1 방향 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 여부를 판별하고,
상기 제1 발 센서 및 상기 제2 발 센서 간의 제1 방향 상대 위치 변화에 기초하여, 브레이크 페달 및 가속 페달의 조작 강도를 판별하는 제어부;및
브레이크 페달 및 가속 페달의 조작 여부 및 페달의 조작 강도를 차량 내부 제어부에게 전송하는 통신부를 포함하는
운전 보조 장치.
A first foot sensor attached to a first point located on the ankle of the user's right foot;
A second foot sensor attached to a second point spaced apart from the first point in the extension direction of the user's right foot;
Detecting the position of the ankle through the first foot sensor,
It is determined whether the brake pedal and the accelerator pedal are operated based on the change in the relative position in the first direction between the first foot sensor and the second foot sensor,
A control unit for determining an operation strength of a brake pedal and an accelerator pedal based on a change in a relative position in the first direction between the first foot sensor and the second foot sensor; And
Including a communication unit that transmits the operation of the brake pedal and the accelerator pedal and the operation intensity of the pedal to the vehicle interior
Driving aids.
차량의 진행 방향을 결정하는 조향 장치를 제어하는 조향 구동부;
차량의 동력원을 제어하는 동력원 구동부;
차량의 브레이크 장치를 제어하는 브레이크 구동부;
사용자의 손에 부착되어 상기 손의 위치 정보를 감지하는 손 센서;
사용자의 오른발의 발에 부착되어 상기 오른발의 위치 정보를 감지하는 발 센서; 및
상기 손의 위치 정보에 기초하여 획득한 핸들의 조향 정보에 따라 상기 조향 구동부를 제어하고, 상기 오른발의 위치 정보에 기초하여 획득한 엑셀 페달의 조작에 관한 정보에 따라 상기 동력원 구동부를 제어하고, 상기 발의 위치 정보에 기초하여 획득한 브레이크 페달의 조작에 관한 정보에 따라 상기 브레이크 구동부를 제어하는 제어부를 포함하고,
상기 발 센서는,
사용자 오른발의 발목에 위치하는 제1 지점에 부착되는 제1 발 센서, 사용자 오른발의 연장 방향으로 상기 제1 지점과 이격된 제2 지점에 부착되는 제2 발 센서를 포함하는 차량.
A steering drive unit that controls a steering device that determines a traveling direction of the vehicle;
A power source driving unit for controlling a power source of the vehicle;
A brake driving unit for controlling a brake device of a vehicle;
A hand sensor attached to a user's hand to sense location information of the hand;
A foot sensor attached to the foot of the user's right foot to detect position information of the right foot; And
Controls the steering driving unit according to steering information of the handle obtained based on the position information of the hand, and controls the power source driving unit according to information on the operation of the excel pedal obtained based on the position information of the right foot, and the And a control unit for controlling the brake driving unit according to information on operation of the brake pedal obtained based on the position information of the foot,
The foot sensor,
A vehicle comprising a first foot sensor attached to a first point positioned on an ankle of a user's right foot, and a second foot sensor attached to a second point spaced apart from the first point in an extension direction of the user's right foot.
KR1020190121733A 2019-10-01 2019-10-01 Driving assistance and driving assistance method thereof KR102202638B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190121733A KR102202638B1 (en) 2019-10-01 2019-10-01 Driving assistance and driving assistance method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190121733A KR102202638B1 (en) 2019-10-01 2019-10-01 Driving assistance and driving assistance method thereof

Publications (1)

Publication Number Publication Date
KR102202638B1 true KR102202638B1 (en) 2021-01-14

Family

ID=74141182

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190121733A KR102202638B1 (en) 2019-10-01 2019-10-01 Driving assistance and driving assistance method thereof

Country Status (1)

Country Link
KR (1) KR102202638B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012164131A (en) * 2011-02-07 2012-08-30 Yazaki Corp Drive recorder device and event identification of the same
JP2013130924A (en) * 2011-12-20 2013-07-04 Luna Co Ltd Travel video display program and travel video display system
JP2017030530A (en) * 2015-07-31 2017-02-09 スズキ株式会社 Image display system
WO2018097818A1 (en) * 2016-11-22 2018-05-31 Ford Global Technologies, Llc Virtual reality interface to an autonomous vehicle
JP2019012480A (en) * 2017-06-30 2019-01-24 株式会社デンソーテン Driving diagnostic device and driving diagnostic method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012164131A (en) * 2011-02-07 2012-08-30 Yazaki Corp Drive recorder device and event identification of the same
JP2013130924A (en) * 2011-12-20 2013-07-04 Luna Co Ltd Travel video display program and travel video display system
JP2017030530A (en) * 2015-07-31 2017-02-09 スズキ株式会社 Image display system
WO2018097818A1 (en) * 2016-11-22 2018-05-31 Ford Global Technologies, Llc Virtual reality interface to an autonomous vehicle
JP2019012480A (en) * 2017-06-30 2019-01-24 株式会社デンソーテン Driving diagnostic device and driving diagnostic method

Similar Documents

Publication Publication Date Title
US11794788B2 (en) Automatic driving system
JP6544320B2 (en) Control system and control method of autonomous driving vehicle
US20170028995A1 (en) Vehicle control apparatus
EP3121076A2 (en) Vehicle control device
JP4134891B2 (en) Collision possibility judgment device
JP2017159754A (en) Automatic drive control device
CN107818581B (en) Image processing system for vehicle
US9987927B2 (en) Method for operating a communication device for a motor vehicle during an autonomous drive mode, communication device as well as motor vehicle
JP6509940B2 (en) Driving support device and driving support method
JP2018030531A (en) Control system and control method for automatic operation vehicle
US11597382B2 (en) Driving assistance apparatus, driving assistance method, and recording medium storing driving assistance program and readable by computer
JP6855759B2 (en) Self-driving vehicle control system
US11704827B2 (en) Electronic apparatus and method for assisting with driving of vehicle
JP6648551B2 (en) Automatic driving device
KR102202638B1 (en) Driving assistance and driving assistance method thereof
CN111332291B (en) Vehicle control device and vehicle control method
KR102219339B1 (en) Driving assistance and driving assistance method thereof
KR102217973B1 (en) Lane guide apparatus and method for guiding lane
KR102244026B1 (en) Image processing apparatus and image processing method
KR102296213B1 (en) Video recording apparatus and operating method thereof
JP7298456B2 (en) Vehicle display control device, vehicle display control method, and vehicle display control program
CN111532271B (en) Vehicle control device, vehicle, and vehicle control method
KR102541416B1 (en) Method and apparatus for displaying a HUD image based on realtime traffic information
KR102175793B1 (en) Method and apparatus for outputting an alarm for congitive impairment of driver
KR20240022212A (en) Method and apparatus for sharing a lane of driving vehicle

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant