KR20140077296A - Multimodal feedback alarm system for approach obstacle recognition - Google Patents

Multimodal feedback alarm system for approach obstacle recognition Download PDF

Info

Publication number
KR20140077296A
KR20140077296A KR1020120145908A KR20120145908A KR20140077296A KR 20140077296 A KR20140077296 A KR 20140077296A KR 1020120145908 A KR1020120145908 A KR 1020120145908A KR 20120145908 A KR20120145908 A KR 20120145908A KR 20140077296 A KR20140077296 A KR 20140077296A
Authority
KR
South Korea
Prior art keywords
vehicle
alarm
driver
vibration
noise
Prior art date
Application number
KR1020120145908A
Other languages
Korean (ko)
Inventor
최진혁
권구도
윤성원
신동인
Original Assignee
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020120145908A priority Critical patent/KR20140077296A/en
Publication of KR20140077296A publication Critical patent/KR20140077296A/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

The present invention relates to a warning system and, more specifically, to a multimodal feedback warning system capable of providing proper warnings with consideration for visual, acoustic, and tactile conditions of a driver in case of recognizing obstacles approaching a vehicle. In a more detailed manner, the present invention provides the multimodal feedback warning system in case of recognizing approaching obstacles including: a sensor unit capable of recognizing the obstacles approaching the vehicle; a condition analyzing unit capable of measuring a line of vision of the driver, a noise degree inside the vehicle, and a vibration degree inside the vehicle in a case that the sensor unit recognizes the obstacles approaching the vehicle; a warning determination unit capable of selecting a sort of warnings to be sent to the driver based on the result of the measurement by the condition analyzing unit; and a warning unit capable of sending the warning selected by the warning determination unit to the driver.

Description

접근장애물 인식 시 멀티모달 피드백 경보 시스템{MULTIMODAL FEEDBACK ALARM SYSTEM FOR APPROACH OBSTACLE RECOGNITION}[0001] MULTIMODAL FEEDBACK ALARM SYSTEM FOR APPROACH OBSTACLE RECOGNITION [0002]

본 발명은 경보 시스템에 관한 것으로서, 보다 상세하게는 차량에 접근하는 장애물의 인식 시 운전자의 시각적, 청각적, 촉각적 상황을 고려하여 적절한 경보를 제공할 수 있는 멀티모달 피드백 경보 시스템에 관한 것이다.
The present invention relates to an alarm system, and more particularly, to a multimodal feedback alarm system capable of providing an appropriate alarm in consideration of a driver's visual, auditory, and tactile situations when recognizing an obstacle approaching a vehicle.

차체의 대부분은 불투명한 금속 재질로 형성되는 것이 일반적이고, 따라서 차량의 전방, 후방, 측전방 및 측후방에 접근하는 장애물을 운전자가 인식하기란 매우 어려운 일이다.Most of the vehicle body is formed of an opaque metal material, and therefore it is very difficult for a driver to recognize obstacles approaching the front, rear, side front, and rear side of the vehicle.

따라서 운전자가 차량 주변의 장애물을 인지할 수 있는 경보 시스템이 개발되었고, 근래에는 차량에 적용될 수 있는 경보 시스템이 점점 더 다양해지고 있는 추세이다.Accordingly, an alarm system capable of recognizing an obstacle around a driver has been developed, and in recent years, an alarm system that can be applied to a vehicle is becoming more and more diverse.

현재 상용차량에 적용되는 경보 시스템은 디스플레이를 이용한 시각적 경보 방법이 주를 이루고 있다.Currently, alarm systems applied to commercial vehicles are mainly visual alarm methods using displays.

그러나 이는 운전자가 지속적으로 출력부를 응시해야 하는 부담을 주고, 이에 따라 시각적인 피로감 및 긴장감을 가중시키는 요인이 된다.However, this causes a burden on the driver to constantly look at the output portion, thereby increasing the visual fatigue and tension.

이미 개발되어 있는 종래의 경보 시스템들을 살펴보면, 후방, 측전방 및 측후방의 화면을 출력부에 중첩하여 표시함으로써 접근장애물을 시각적으로 표시해주는 기술이 있으며, 도 1에 위와 같은 기술이 적용된 경보 장치의 디스플레이가 도시된다.Conventional alarm systems which have been already developed include a technique of visually displaying an obstacle by superimposing a rear screen, a front screen and a rear screen on an output unit, and FIG. 1 shows an alarm system The display is shown.

상기 기술은 차량 외부 방향에 따른 접근장애물을 하나의 화면으로 동시에 관찰할 수 있다는 장점이 있으나, 이는 운전자의 시각적 혼란을 일으킬 수 있을 뿐만 아니라 위에서 언급한 시각적인 피로감 및 긴장감을 가중시키는 문제점이 있다.The above technique has the advantage of simultaneously observing the access obstacles along the outside direction of the vehicle on a single screen. However, this not only causes visual confusion of the driver, but also increases the above-mentioned visual fatigue and tension.

또한, 검출된 장애물을 시각적인 심볼로 형상화하여 표시해주는 장치의 디스플레이가 도 2에 도시되어 있으나, 이 또한 운전자에게 시각적인 피드백만을 제공한다는 단점이 존재한다.Also shown in FIG. 2 is a display of a device for visualizing and displaying detected obstacles as visual symbols, but this also has the disadvantage of providing only visual feedback to the driver.

한편, 접근장애물을 인식하는 경우 해당 화면의 면적을 상대적으로 확대하여 운전자의 인지 가능성을 높여주는 기술에 대한 디스플레이가 도 3에 도시되나, 마찬가지로 운전자의 지속적인 관찰을 필요로 한다는 문제가 있다.Meanwhile, FIG. 3 shows a display of a technique for enhancing the perception of the driver by enlarging the area of the screen relatively when the obstacle is recognized. However, there is a problem that continuous observation of the driver is required.

또한, 인식된 장애물이 표시되는 화면을 운전자가 확대하거나 축소하도록 조작할 수 있는 하는 기술도 개발되었으나, 상기와 같은 기술은 운행 중에는 용이하게 조작하기 어려울뿐더러 위의 문제들과 마찬가지로 시각적인 경보만을 제공한다는 단점이 있다.In addition, a technique has been developed in which a driver can enlarge or reduce a screen on which a recognized obstacle is displayed. However, such a technology is not easy to operate while operating, and also provides only a visual alert .

따라서, 운전자의 시각적인 피로 및 긴장을 유발시키지 않으면서 운전자의 상황 및 상태에 따른 피드백을 통한 적절한 경보를 제공할 수 있는 경보 시스템의 개발이 절실한 상황이다.
Therefore, it is necessary to develop an alarm system capable of providing an appropriate alarm through feedback according to the driver's situation and condition without causing the driver's visual fatigue and tension.

본 발명은 전술한 종래기술의 문제점을 해결하기 위해 안출된 것으로서, 운전자 및 차량의 조건에 따라 가장 적절한 경보를 제공함으로써 운전자가 접근장애물을 빠르게 인지할 수 있는 시스템을 제공하는데 그 목적이 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a system in which a driver can quickly recognize an access obstacle by providing the most appropriate alarm in accordance with conditions of a driver and a vehicle.

또한, 본 발명은 시각적인 경보뿐만 아니라 청각적 및 촉각적 경보를 별도 또는 동시에 제공함으로써 경보 효과를 향상시키고, 운전자가 졸음 운전을 하는 경우에도 운전자의 의식을 돌아올 수 있게 하는데 또 다른 목적이 있다.It is another object of the present invention to improve the alarm effect by separately or simultaneously providing audible and tactile alerts as well as visual alerts, and to return the driver's consciousness even when the driver is driving the drowsy.

본 발명이 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 본 발명의 기재로부터 당해 분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.
The technical objects to be achieved by the present invention are not limited to the above-mentioned technical problems, and other technical subjects which are not mentioned can be clearly understood by those skilled in the art from the description of the present invention .

상술한 종래기술의 문제점을 해결하기 위한 본 발명에 의하면, 차량의 접근장애물을 인식할 수 있는 센서부, 상기 센서부에서 차량의 접근장애물을 인식한 경우 차량 운전자의 시선 방향, 차량 내 소음의 정도 및 차량 내 진동의 정도를 측정할 수 있는 상황 분석부, 상기 상황 분석부에서 측정한 결과를 이용하여 상기 차량 운전자에게 전달할 경보의 종류를 선택할 수 있는 경보 판단부 및 상기 경보 판단부에서 선택된 경보를 상기 차량 운전자에게 전달할 수 있는 경보부를 포함하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템을 제공한다.According to an aspect of the present invention, there is provided an information processing apparatus including a sensor unit capable of recognizing an access obstacle of a vehicle, a visual direction of a vehicle driver when the obstacle is recognized by the sensor unit, An alarm determination unit for selecting a type of alarm to be transmitted to the vehicle driver based on the measurement result of the situation analyzing unit, and an alarm selection unit for selecting an alarm selected by the alarm determination unit And a multi-modal feedback alarm system for recognizing an access obstacle including an alarm unit capable of transmitting to the vehicle driver.

본 발명의 상기 상황 분석부는, 차량 운전자의 눈 또는 얼굴 부분의 존재 여부를 파악하여 차량 운전자의 시선 방향을 측정할 수 있는 시선방향인지센서, 차량 내 소음의 정도를 측정할 수 있는 소음측정기 및 차량 내 진동의 정도를 측정할 수 있는 진동측정기를 포함하도록 구성되는 것이 바람직하다.The situation analyzing unit of the present invention may include a sensor for recognizing the presence or absence of an eye or a facial portion of a vehicle driver and a sight direction sensor capable of measuring the direction of the driver's eyes, a noise meter capable of measuring the degree of noise in the vehicle, It is preferable to include a vibration measuring device capable of measuring the degree of vibration.

본 발명에서 상기 시선방향인지센서는 백미러의 내부 또는 외부에 부착되고, 상기 소음측정기는 차량 운전자의 시트 양 옆에 부착되며, 상기 진동측정기는 차량 운전자의 시트 아래에 부착되는 것이 바람직하다.In the present invention, the gaze direction recognition sensor is attached to the inside or the outside of the rearview mirror, the noise measurement device is attached to both sides of the seat of the vehicle driver, and the vibration meter is preferably attached under the seat of the vehicle driver.

본 발명의 상기 경보 판단부는, 상기 상황 분석부에서 측정한 차량 운전자의 시선이 정면인 경우 시각적 경보의 발생을 결정하고, 상기 상황 분석부에서 측정한 소음이 소정의 수치 이하인 경우 청각적 경보의 발생을 결정하며, 상기 상황 분석부에서 측정한 진동이 소정의 수치 이하인 경우 촉각적 경보의 발생을 결정하는 것이 바람직하다.The alarm determination unit of the present invention determines whether a visual alert is generated when the vehicle driver's gaze measured by the situation analyzer is frontal and if the noise measured by the situation analysis unit is equal to or less than a predetermined value, And determines the occurrence of the tactile alert when the vibration measured by the situation analyzer is less than or equal to a predetermined value.

본 발명의 상기 경보 판단부는, 상기 상황 분석부에서 측정한 차량 운전자의 시선이 정면 외의 방향을 향함과 동시에 측정한 소음 및 진동이 소정의 수치를 초과하는 경우 청각적 경보, 촉각적 경보 및 접근물에 대한 경보 발생을 결정하는 것이 바람직하다.The alarm determination unit of the present invention is characterized in that when the eyes of a driver of the vehicle measured by the situation analyzer are directed to a direction outside the front face and the measured noise and vibration exceed a predetermined value, It is desirable to determine the occurrence of an alarm for

본 발명의 상기 접근물에 대한 경보는, 헤드라이트를 이용한 제1외부경보 및 클락션을 이용한 제2외부경보를 포함하도록 구성되는 것이 바람직하다.Preferably, the alarm for the approach of the present invention is configured to include a first external alarm using headlights and a second external alarm using a clock.

본 발명의 상기 상황 분석부에서 측정한 소음의 소정의 수치는 40 내지 80데시벨(㏈) 사이의 값이고, 상기 상황 분석부에서 측정한 진동의 소정의 수치는 0.2 내지 2.0카인(kine) 사이의 값인 것이 바람직하다.
The predetermined value of the noise measured by the situation analyzer of the present invention is a value between 40 and 80 decibels (dB), and the predetermined value of the vibration measured by the situation analyzer is between 0.2 and 2.0 kines Value.

본 발명의 운전자 및 차량의 상황에 맞는 경보를 제공할 수 있는 멀티모달 피드백 경보 시스템에 의하면, 운전자의 시선 방향 및 차량 내부의 소음과 진동에 따라 시각적, 청각적, 촉각적 경보 중 적어도 어느 하나 이상의 경보를 제공할 수 있게 되어 운전자가 접근장애물을 빠르게 인식할 수 있는 효과가 있다.According to the multimodal feedback alarm system of the present invention, it is possible to provide a multimodal feedback alarm system capable of providing at least one of visual, audible and tactile alarms according to the driver's direction of sight and noise and vibration of the interior of the vehicle. It is possible to provide an alarm so that the driver can quickly recognize the access obstacle.

또한, 운전자의 시선 방향 및 차량 내부의 소음과 진동에 따라 시각적, 청각적, 촉각적 경보 중 적어도 어느 하나 이상의 경보를 제공할 수 있는 멀티모달 피드백 경보 시스템에 의하면, 운전자가 졸음 운전을 하는 상황에서도 청각적 경보 및/또는 촉각적 경보를 통해 운전자의 의식을 용이하게 돌아올 수 있게 하는 효과가 있다.Further, according to the multi-modal feedback alarm system capable of providing at least one of visual, audible and tactile alarms in accordance with the driver's gaze direction and the noise and vibration inside the vehicle, There is an effect that the driver's consciousness can be easily returned through the audible alarm and / or the tactile alert.

아울러 시각적 경보뿐만 아니라 청각적 및/또는 촉각적 경보를 제공할 수 있는 멀티모달 피드백 경보 시스템에 의하면, 운전자가 지속적으로 출력부를 응시해야 하는 부담이 줄어 시각적인 피로감 및 긴장감을 덜 수 있는 효과가 있다.
In addition, according to the multi-modal feedback alarm system capable of providing audible and / or tactile alerts as well as visual alerts, the burden of the driver continuously gazing at the output section is reduced, thereby reducing visual fatigue and tension .

도 1은 종래의 장애물 경보 장치의 디스플레이를 나타낸 예시도.
도 2는 종래의 장애물 경보 장치의 디스플레이를 나타낸 예시도.
도 3은 종래의 장애물 경보 장치의 디스플레이를 나타낸 예시도.
도 4는 본 발명의 일실시예에 따른 접근장애물 인식 시 멀티모달 피드백 경보 시스템의 구성도.
도 5a는 본 발명의 일실시예에 따른 운전자의 시선 방향 측정 방법을 나타낸 예시도.
도 5b는 본 발명의 일실시예에 따른 운전자의 시선 방향 측정 방법을 나타낸 또 다른 예시도.
도 6은 본 발명의 일실시예에 따른 차량 내 소음 측정 방법을 나타낸 예시도.
도 7은 본 발명의 일실시예에 따른 차량 내 진동 측정 방법을 나타낸 예시도.
도 8 내지 도 15는 본 발명의 일실시예에 따른 운전자의 시선 방향, 차량 내 소음 정도 및 진동 정도에 대응하는 경보 방법을 나타낸 예시도.
1 is an exemplary view showing a display of a conventional obstacle warning device.
2 is an exemplary view showing a display of a conventional obstacle warning device.
3 is an exemplary view showing a display of a conventional obstacle warning device.
FIG. 4 is a block diagram of a multimodal feedback alarm system for recognizing an access obstacle according to an embodiment of the present invention; FIG.
FIG. 5A is an exemplary view illustrating a method of measuring a driver's gaze direction according to an embodiment of the present invention; FIG.
FIG. 5B is a view illustrating another example of a method of measuring a driver's gaze direction according to an embodiment of the present invention; FIG.
6 is a diagram illustrating an example of a method for measuring noise in a vehicle according to an embodiment of the present invention.
7 is an exemplary view showing a method for measuring vibration in a vehicle according to an embodiment of the present invention.
8 to 15 are views showing an alarm method corresponding to a direction of a driver's eyes, a degree of noise in a vehicle, and a degree of vibration according to an embodiment of the present invention.

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

운전자 및 차량 내 조건에 따라 가장 효율적이고 적절한 경보를 제공함으로써 운전자가 접근장애물을 빠르게 인지할 수 있도록 하기 위한 본 발명은, 차량의 접근장애물을 인식할 수 있는 센서부(100)와, 상기 센서부(100)에서 차량의 접근장애물을 인식한 경우 차량 운전자의 시선 방향, 차량 내 소음의 정도 및 차량 내 진동의 정도를 측정할 수 있는 상황 분석부(200)와, 상기 상황 분석부(200)에서 측정한 결과를 이용하여 상기 차량 운전자에게 전달할 경보의 종류를 선택할 수 있는 경보 판단부(300)와, 상기 경보 판단부(300)에서 선택된 경보를 상기 차량 운전자에게 전달할 수 있는 경보부(400)를 포함하여 구성된다.The present invention provides a vehicle control apparatus for a vehicle, comprising: a sensor unit (100) capable of recognizing an obstacle approaching a vehicle by providing a most efficient and appropriate alarm according to conditions of a driver and a vehicle so that a driver can quickly recognize an approaching obstacle; A situation analyzer 200 for measuring the direction of the vehicle driver's eyes, the degree of noise in the vehicle and the degree of vibration in the vehicle when the vehicle 100 recognizes an obstacle approaching the vehicle, An alarm determination unit 300 that can select the type of alarm to be transmitted to the vehicle driver using the measured result and an alarm unit 400 that can transmit the alarm selected by the alarm determination unit 300 to the vehicle driver .

이에 대한 구성도가 도 4에 도시되어 있다.A schematic diagram thereof is shown in Fig.

상기 센서부(100)는 차량의 전면, 측면 또는 후면에 설치되어 전방, 후방, 측전방 및 측후방의 장애물을 인식하기 위한 기능을 할 수 있다.The sensor unit 100 may be installed on a front surface, a side surface, or a rear surface of the vehicle so as to recognize obstacles in the front, rear, side front, and rear side.

상기 상황 분석부(200)는 차량 운전자의 눈 또는 얼굴 부분의 존재 여부를 파악하여 차량 운전자의 시선 방향을 측정할 수 있는 시선방향인지센서(210)와, 차량 내 소음의 정도를 측정할 수 있는 소음측정기(220)와, 차량 내 진동의 정도를 측정할 수 있는 진동측정기(230)를 포함하여 구성될 수 있다.The situation analyzer 200 includes a gaze direction recognition sensor 210 for measuring the gaze direction of the vehicle driver by recognizing the presence or absence of an eye or face portion of the vehicle driver, A noise measuring device 220 and a vibration measuring device 230 capable of measuring the degree of vibration in the vehicle.

도 5a 및 도 5b에 본 발명의 일실시예에 따른 운전자의 시선 방향 측정 방법이 도시되어 있다.5A and 5B show a method of measuring a driver's gaze direction according to an embodiment of the present invention.

차량 운전자의 시선 방향을 측정하기 위한 상기 시선방향인지센서(210)는 백미러(10)의 내부 또는 외부에 부착되어 운전자의 눈이 존재하는지 여부를 파악하거나, 운전자의 얼굴 부분이 존재하는지를 파악하여 상기 운전자가 정면을 응시하고 있는지 여부를 파악할 수 있다.The gaze direction recognition sensor 210 for measuring the gaze direction of the driver of the vehicle is attached to the inside or the outside of the rearview mirror 10 to determine whether the driver's eyes are present or not, It is possible to determine whether or not the driver is staring at the front.

또한, 도 6에 본 발명의 일실시예에 따른 차량 내 소음 측정 방법을 나타낸 예시도가 도시된다.6 is a view illustrating an example of a method for measuring in-vehicle noise according to an embodiment of the present invention.

상기 소음측정기(220)는 차량 운전자의 시트(20) 양 옆에 부착되어 현재 차량 내부의 소음을 측정하기 위한 기능을 할 수 있다. 보다 적절한 소음 정도의 측정을 위해 운전자의 귀 위치와 가장 근접한 헤드시트 양 옆에 부착되는 것이 더욱 바람직하다.The noise measuring device 220 may be attached to both sides of the seat 20 of the vehicle driver to measure the noise inside the vehicle. It is more preferable to attach both sides of the head seat closest to the ear position of the driver for more appropriate measurement of the noise level.

그리고 도 7에 본 발명의 일실시예에 따른 차량 내 진동 측정 방법을 나타낸 예시도가 도시되어 있다.FIG. 7 is a view illustrating an exemplary in-vehicle vibration measurement method according to an embodiment of the present invention.

상기 진동측정기(230)는 차량 운전자의 시트(20) 아래에 부착되어 현재 차량 내부의 진동 정도를 측정하기 위한 기능을 할 수 있다. 필요에 따라 시트(20) 아래가 아닌 시트(20) 등받이 또는 그 반대편에 부착되어 기능할 수도 있다.The vibration meter 230 may be attached under the seat 20 of the vehicle driver to measure the degree of vibration of the interior of the vehicle. And may be attached and functioned as needed, not under the seat 20, or on the back of the seat 20 or the opposite side thereof.

따라서 상기 시선방향인지센서(210), 소음측정기(220) 및 진동측정기(230)를 통해 운전자 및 차량 내부 상황을 파악하게 되고, 이를 이용해 가장 적절한 경보를 운전자에게 전달할 수 있는 효과가 있다.Therefore, it is possible to grasp the internal situation of the driver and the vehicle through the sight direction recognition sensor 210, the noise level meter 220 and the vibration level meter 230, and to transmit the most appropriate alarm to the driver by using the same.

본 발명의 상기 경보 판단부(300)는 상기 상황 분석부(200)에서 측정한 차량 운전자의 시선이 정면인 경우 시각적 경보의 발생을 결정하고, 상기 상황 분석부(200)에서 측정한 소음이 소정의 수치 이하인 경우 청각적 경보의 발생을 결정하며, 상기 상황 분석부(200)에서 측정한 진동이 소정의 수치 이하인 경우 촉각적 경보의 발생을 결정하도록 구성된다.The alarm determination unit 300 determines whether a visual alert is generated when the vehicle driver's gaze measured by the situation analysis unit 200 is frontal and if the noise measured by the situation analysis unit 200 is a predetermined And determines the occurrence of the tactile alert when the vibration measured by the situation analyzer 200 is equal to or less than a predetermined value.

운전자가 정면을 응시하고 있지 않은 경우 시각적 경보를 발생시켜도 운전자가 확인할 수 없고, 차량 내 소음이 과도한 상태에서 청각적 경보를 발생시켜도 운전자가 인식하기란 어려운 일이며, 차량 내 진동이 과도한 상태에서 촉각적 경보가 발생한다 하여 운전자가 이를 알아채기가 난해하기 때문이다.If the driver is not staring at the front, even if a visual alarm is generated, it can not be confirmed by the driver. Even if an audible alarm is generated in an excessive noise in the vehicle, it is difficult for the driver to recognize. This is because it is difficult for the driver to recognize it because an enemy alarm occurs.

여러 가지 조건을 파악하고, 이에 부합하는 경보를 운전자에게 제공하는 것이 무작정 특정 경보를 발생시키는 것보다 효율적인 것은 자명한 일이다.It is self-evident that it is more efficient to identify the various conditions and provide the driver with the corresponding alarms than to generate the specific alarms.

그러나 최악의 조건에 처한 경우 즉, 차량 운전자의 시선이 정면 외의 방향을 향함과 동시에 차량 내 소음 및 진동이 과도한 경우에는 이에 특정한 경보 형태를 제공하기 어렵기 때문에 본 발명에서는 상기와 같은 상황에서 청각적 경보, 촉각적 경보 및 접근물에 대한 경보를 모두 발생시키게 된다.However, in the worst case, that is, when the eyes of the driver of the vehicle are directed toward the outside of the vehicle, and the noise and vibration in the vehicle are excessive, it is difficult to provide a specific alarm form. Therefore, Alarms, tactile alarms, and alarms for accesses.

여기서 상기 접근물에 대한 경보란 헤드라이트를 이용해 시각적으로 외부 장애물에 경보를 전달할 수 있는 제1외부경보 및 클락션을 이용해 청각적으로 외부 장애물에 경보를 전달할 수 있는 제2외부경보를 포함할 수 있다.Wherein the alert for the accessory may include a first external alert that can visually alert the external obstacle using the headlight and a second external alert that can audibly alert the external obstacle using the headlight .

운전자에 대한 경보를 통해 접근장애물을 피하기 위한 것이 경보 시스템의 주 목적이나, 운전자가 의식을 잃은 상태 또는 부득이한 상태에서는 상기 접근물에 대한 경보를 통해 접근장애물에게도 경보를 제공하여 충돌로 인한 피해를 최소화하기 위한 방안에 해당한다.In the main purpose of the alarm system to avoid access obstacles through alarm to the driver, or in the state where the driver is unconscious or unavoidable, by providing an alarm to the access obstacle through the alarm for the access, the damage caused by the collision is minimized .

아울러 본 발명의 청각적 경보 발생의 기준이 되는 소음의 소정의 수치는 40데시벨(㏈) 내지 80데시벨 사이의 값을 가질 수 있으며, 차량 내 기본적 소음을 고려하여 50데시벨로 설정하는 것이 바람직하다.In addition, the predetermined numerical value of the noise that is the basis of the audible alarm of the present invention may have a value between 40 decibels (dB) and 80 decibels, and is preferably set to 50 decibels in consideration of basic noise in the vehicle.

또한, 본 발명의 촉각적 경보 발생의 기준이 되는 진동의 소정의 수치는 0.2카인(kine) 내지 2카인 사이의 값을 가질 수 있고, 차량 내 기본적 진동을 고려하여 0.5카인으로 설정하는 것이 바람직하다.Further, the predetermined numerical value of the vibration which is a reference for generation of the tactile alert of the present invention may have a value between 0.2 kine and 2 cine, and is preferably set at 0.5 cine in consideration of basic vibration in the vehicle .

상기 경보 판단부(300)에서 선택된 경보를 차량 운전자에게 전달하기 위한 상기 경보부(400)는 시각적 경보를 위한 디스플레이 장치, 청각적 경보를 위한 스피커 및 촉각적 경보를 위한 진동 장치를 포함할 수 있다.The alarm unit 400 for transmitting the alarm selected by the alarm determination unit 300 to the vehicle driver may include a display device for visual alarm, a speaker for audible alarm, and a vibration device for tactile alarm.

그리고 접근물에 대한 경보 발생을 위해 헤드라이트, 보조라이트 및 클락션 등을 포함하는 것이 바람직하다.It is also desirable to include a headlight, an auxiliary light, a climbing, and the like in order to generate an alarm for approaching objects.

도 8 내지 도 15에는 본 발명의 일실시예에 따른 운전자의 시선 방향(A), 차량 내 소음 정도(B) 및 진동 정도(C)에 대응하는 경보 방법을 나타낸 예시도가 도시되어 있다.8 to 15 are diagrams illustrating an alarm method corresponding to the driver's sight direction A, the in-vehicle noise level B, and the vibration degree C according to an embodiment of the present invention.

각각의 상황에 맞는 경보 시스템의 작동을 살펴보면 다음과 같다.The operation of the alarm system according to each situation is as follows.

도 8은 운전자의 시선 방향(A)이 정면이고, 차량 내 소음 정도(B)가 약하며, 차량 내 진동 정도(C)가 약한 경우 시각적 경보, 청각적 경보 및 촉각적 경보의 발생을 나타낸다.FIG. 8 shows the occurrence of a visual alarm, audible alarm, and tactile alarm when the driver's sight direction A is front, the vehicle noise level B is weak, and the in-vehicle vibration level C is weak.

도 9는 운전자의 시선 방향(A)이 정면이고, 차량 내 소음 정도(B)가 약하며, 차량 내 진동 정도(C)가 강한 경우 시각적 경보 및 청각적 경보의 발생을 나타낸다.9 shows the occurrence of a visual alarm and audible alarm when the driver's sight direction A is front, the in-vehicle noise level B is weak, and the in-vehicle vibration level C is strong.

도 10은 운전자의 시선 방향(A)이 정면이고, 차량 내 소음 정도(B)가 강하며, 차량 내 진동 정도(C)가 약한 경우 시각적 경보 및 촉각적 경보의 발생을 나타낸다.Fig. 10 shows the occurrence of a visual alarm and a tactile alarm when the driver's sight direction A is front, the vehicle noise level B is strong, and the in-vehicle vibration level C is weak.

도 11은 운전자의 시선 방향(A)이 정면이고, 차량 내 소음 정도(B)가 강하며, 차량 내 진동 정도(C)가 강한 경우 시각적 경보의 발생을 나타낸다.Fig. 11 shows the occurrence of a visual alarm when the sight direction A of the driver is front, the noise level B in the vehicle is strong, and the degree of vibration C in the vehicle is strong.

도 12는 운전자의 시선 방향(A)이 정면이 아니고, 차량 내 소음 정도(B)가 약하며, 차량 내 진동 정도(C)가 약한 경우 청각적 경보 및 촉각적 경보의 발생을 나타낸다.12 shows the occurrence of audible alarm and tactile alarm when the driver's sight direction A is not the front, the noise level B in the vehicle is weak, and the degree of vibration C in the vehicle is weak.

도 13은 운전자의 시선 방향(A)이 정면이 아니고, 차량 내 소음 정도(B)가 약하며, 차량 내 진동 정도(C)가 강한 경우 청각적 경보의 발생을 나타낸다.13 shows the occurrence of an audible alarm when the driver's sight direction A is not the front, the vehicle noise level B is weak, and the in-vehicle vibration level C is strong.

도 14는 운전자의 시선 방향(A)이 정면이 아니고, 차량 내 소음 정도(B)가 강하며, 차량 내 진동 정도(C)가 약한 경우 촉각적 경보의 발생을 나타낸다.Fig. 14 shows the occurrence of a tactile alert when the driver's sight direction A is not the front, the vehicle noise level B is strong, and the in-vehicle vibration level C is weak.

마지막으로 도 15는 운전자의 시선 방향(A)이 정면이 아니고, 차량 내 소음 정도(B)가 강하며, 차량 내 진동 정도(C)가 강한 경우 청각적 경보, 촉각적 경보 및 접근물에 대한 경보의 발생을 나타낸다.Finally, FIG. 15 shows a case where the driver's sight line direction A is not frontal, the noise level B in the vehicle is strong, and the degree of vibration V in the vehicle is strong, the audible alarm, tactile alert, Indicates occurrence of alarm.

즉, 위의 실시예들을 간략히 요약하면, 운전자의 시선 방향(A)이 정면인 경우 시각적 경보를 발생시키고, 차량 내 소음 정도(B)가 약한 경우 청각적 경보를 발생시키며, 차량 내 진동 정도(C)가 약한 경우 촉각적 경보를 발생시키고, 상기 세 가지 조건에 따른 결과는 각각 별도로 작용하며, 위 세 가지 조건을 모두 만족하지 않는 경우에만 청각적 경보, 촉각적 경보 및 접근물에 대한 경보를 모두 발생시키게 된다.That is, the above embodiments are briefly summarized as follows. A visual alarm is generated when the driver's sight direction A is front, an audible alarm is generated when the in-vehicle noise B is weak, C) is weak, the tactile alert is triggered, and the results according to the three conditions act separately, and only audible, tactile, and access warnings .

결과적으로 본 발명은 운전자의 시선 방향, 차량 내 소음 정도 및 차량 내 진동 정도를 파악하여 상황에 적절한 경보를 운전자에게 제공함으로써 접근장애물을 빠르게 인식하여 보다 안전한 운전을 할 수 있도록 하는 장점이 있다.As a result, the present invention is advantageous in that it can recognize the approach obstacle quickly by providing the driver with an appropriate alarm by grasping the direction of the driver's eyes, the degree of noise in the vehicle, and the degree of vibration in the vehicle.

또한, 운전자가 졸음 운전을 하는 상황에서도 청각적 경보 및/또는 촉각적 경보를 제공할 수 있어 운전자의 의식을 돌아오게 할뿐만 아니라, 접근장애물에 대해 경보를 제공할 수 있어 사고를 미연에 방지할 수 있는 장점이 있다.In addition, it is possible to provide audible alarms and / or tactile alarms even when the driver is in the drowsy driving mode, thereby not only returning the driver's consciousness but also providing an alarm for access obstacles, There are advantages to be able to.

아울러 종래의 시각적으로만 제공되는 경보와 달리 청각적 및/또는 촉각적 경보를 제공하게 되어 운전자가 지속적으로 출력부를 관찰해야 하는 불편함이 감소하는 장점이 있다.In addition, unlike conventional visual only alarms, audible and / or tactile alerts are provided, which reduces the inconvenience that the driver must continuously observe the output.

이상 본 발명의 구체적 실시형태와 관련하여 본 발명을 설명하였으나, 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다. 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명의 범위를 벗어나지 않고 설명된 실시형태를 변경 또는 변형할 수 있으며, 본 발명의 기술사상과 아래에 기재될 특허청구범위의 균등범위 내에서 다양한 수정 및 변형이 가능하다.
While the present invention has been described with reference to the specific embodiments, it is to be understood that the invention is not limited thereto. It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined by the appended claims and their equivalents. Various modifications and variations are possible.

10: 백미러
20: 시트
100: 센서부
200: 상황 분석부
210: 시선방향인지센서
220: 소음측정기
230: 진동측정기
300: 경보판단부
400: 경보부
10: Rearview mirror
20: Sheet
100:
200: Situation Analysis Department
210: Eye-line direction recognition sensor
220: Noise meter
230: Vibration Meter
300:
400:

Claims (6)

차량의 접근장애물을 인식할 수 있는 센서부;
상기 센서부에서 차량의 접근장애물을 인식한 경우 차량 운전자의 시선 방향, 차량 내 소음의 정도 및 차량 내 진동의 정도를 측정할 수 있는 상황 분석부;
상기 상황 분석부에서 측정한 결과를 이용하여 상기 차량 운전자에게 전달할 경보의 종류를 선택할 수 있는 경보 판단부; 및
상기 경보 판단부에서 선택된 경보를 상기 차량 운전자에게 전달할 수 있는 경보부; 를 포함하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템.
A sensor unit capable of recognizing an access obstacle of the vehicle;
A situation analyzer capable of measuring a direction of a driver of the vehicle, a degree of noise in the vehicle, and a degree of vibration in the vehicle when the sensor unit recognizes an obstacle approaching the vehicle;
An alarm determining unit that can select a type of an alarm to be transmitted to the vehicle driver based on a result of the measurement performed by the situation analyzing unit; And
An alarm unit capable of delivering the alarm selected by the alarm determination unit to the vehicle driver; A multi-modal feedback alarm system for recognizing access obstacles,
제 1항에 있어서 상기 상황 분석부는,
차량 운전자의 눈 또는 얼굴 부분의 존재 여부를 파악하여 차량 운전자의 시선 방향을 측정할 수 있는 시선방향인지센서;
차량 내 소음의 정도를 측정할 수 있는 소음측정기; 및
차량 내 진동의 정도를 측정할 수 있는 진동측정기; 를 포함하는 것을 특징으로 하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템.
The apparatus of claim 1,
A gaze direction recognition sensor capable of measuring the gaze direction of the vehicle driver by detecting the presence or absence of an eye or a face portion of the driver of the vehicle;
A noise measuring device for measuring the degree of noise in the vehicle; And
A vibration measuring device capable of measuring the degree of vibration in the vehicle; And a multi-modal feedback alarm system for recognizing an access obstacle.
제 2항에 있어서,
상기 시선방향인지센서는 백미러의 내부 또는 외부에 부착되고,
상기 소음측정기는 차량 운전자의 시트 양 옆에 부착되며,
상기 진동측정기는 차량 운전자의 시트 아래에 부착되는 것을 특징으로 하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템.
3. The method of claim 2,
The sight direction recognition sensor is attached inside or outside the rearview mirror,
The noise measuring device is attached to both sides of a seat of a vehicle driver,
Wherein the vibration meter is attached under the seat of a vehicle operator.
제 1항에 있어서 상기 경보 판단부는,
상기 상황 분석부에서 측정한 차량 운전자의 시선이 정면인 경우 시각적 경보의 발생을 결정하고,
상기 상황 분석부에서 측정한 소음이 소정의 수치 이하인 경우 청각적 경보의 발생을 결정하며,
상기 상황 분석부에서 측정한 진동이 소정의 수치 이하인 경우 촉각적 경보의 발생을 결정하는 것을 특징으로 하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템.
The apparatus of claim 1,
A visual alarm is generated when the vehicle driver's gaze measured by the situation analyzer is frontal,
Determining whether the audible alarm occurs when the noise measured by the situation analyzer is less than a predetermined value,
Wherein the occurrence of the tactile alert is determined when the vibration measured by the situation analyzer is less than or equal to a predetermined value.
제 1항에 있어서 상기 경보 판단부는,
상기 상황 분석부에서 측정한 차량 운전자의 시선이 정면 외의 방향을 향함과 동시에 측정한 소음 및 진동이 소정의 수치를 초과하는 경우 청각적 경보, 촉각적 경보 및 접근물에 대한 경보 발생을 결정하는 것을 특징으로 하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템.
The apparatus of claim 1,
The driver of the vehicle, which is measured by the situation analyzer, faces the direction outside the front face, and when the measured noise and vibration exceed a predetermined value, an audible alarm, a tactile alert, Multi - modal feedback alarm system for obstacle recognition.
제 5항에 있어서 상기 접근물에 대한 경보는,
헤드라이트를 이용한 제1외부경보 및 클락션을 이용한 제2외부경보를 포함하는 것을 특징으로 하는 접근장애물 인식 시 멀티모달 피드백 경보 시스템.
6. The method according to claim 5,
And a second external alarm using a first external alarm using a headlight and a second external alarm using a clock.
KR1020120145908A 2012-12-14 2012-12-14 Multimodal feedback alarm system for approach obstacle recognition KR20140077296A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120145908A KR20140077296A (en) 2012-12-14 2012-12-14 Multimodal feedback alarm system for approach obstacle recognition

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120145908A KR20140077296A (en) 2012-12-14 2012-12-14 Multimodal feedback alarm system for approach obstacle recognition

Publications (1)

Publication Number Publication Date
KR20140077296A true KR20140077296A (en) 2014-06-24

Family

ID=51129248

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120145908A KR20140077296A (en) 2012-12-14 2012-12-14 Multimodal feedback alarm system for approach obstacle recognition

Country Status (1)

Country Link
KR (1) KR20140077296A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI646306B (en) * 2017-12-15 2019-01-01 財團法人車輛研究測試中心 Method for analyzing error and existence probability of multi-sensor fusion of obstacle detection

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI646306B (en) * 2017-12-15 2019-01-01 財團法人車輛研究測試中心 Method for analyzing error and existence probability of multi-sensor fusion of obstacle detection

Similar Documents

Publication Publication Date Title
JP2929927B2 (en) Driving information providing device
US7847678B2 (en) Vehicle surroundings information output system and method for outputting vehicle surroundings information
JP5406328B2 (en) VEHICLE DISPLAY DEVICE, ITS CONTROL METHOD AND PROGRAM
JP6241235B2 (en) Vehicle driving support device
JP6516298B2 (en) Information display device
US11518305B2 (en) Techniques for generating vehicle-to-pedestrian (V2P) communications based on driver monitoring
JP2004519788A (en) A system that monitors the driver's attention to driving
JP2017151637A (en) Display device
KR20120058230A (en) Safe operation apparatus for mobile objects and method thereof
BR112016023042B1 (en) VEHICLE INFORMATION PRESENTATION DEVICE
JP2005135037A (en) Vehicular information presentation system
JP4946661B2 (en) Warning display device for vehicles
JP2018156172A (en) Display system in vehicle and method for controlling display system in vehicle
JP2005517484A (en) System and method for monitoring and managing driver attention load
KR20130054830A (en) Method and system for alarming dangerous situation at road with driver state monitoring and traffic report
US20150158494A1 (en) Method and apparatus for determining carelessness of driver
KR20210113070A (en) Attention-based notifications
JPH07117593A (en) Alarm device for vehicle
US11556175B2 (en) Hands-free vehicle sensing and applications as well as supervised driving system using brainwave activity
KR20150061943A (en) Device for detecting the status of the driver and method thereof
JPH11245683A (en) Information presenting device for vehicle
JP2009154775A (en) Attention awakening device
KR20140036722A (en) Method, apparatus and system for alert approaching vehicular considering driver's eyes
JPH11139229A (en) Running environment supervisory alarm device
JP4857891B2 (en) Driving support device and program

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application