KR101535722B1 - Driver assistance systems and controlling method for the same - Google Patents

Driver assistance systems and controlling method for the same Download PDF

Info

Publication number
KR101535722B1
KR101535722B1 KR1020130133123A KR20130133123A KR101535722B1 KR 101535722 B1 KR101535722 B1 KR 101535722B1 KR 1020130133123 A KR1020130133123 A KR 1020130133123A KR 20130133123 A KR20130133123 A KR 20130133123A KR 101535722 B1 KR101535722 B1 KR 101535722B1
Authority
KR
South Korea
Prior art keywords
road
distance
camera
image information
module
Prior art date
Application number
KR1020130133123A
Other languages
Korean (ko)
Other versions
KR20150051546A (en
Inventor
김현우
배상진
신승환
이상호
Original Assignee
현대오트론 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대오트론 주식회사 filed Critical 현대오트론 주식회사
Priority to KR1020130133123A priority Critical patent/KR101535722B1/en
Publication of KR20150051546A publication Critical patent/KR20150051546A/en
Application granted granted Critical
Publication of KR101535722B1 publication Critical patent/KR101535722B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06Road conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146Display means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera

Abstract

본 발명은 자동차에 장착되고 상기 자동차가 주행하는 도로 정보를 제공하는 위치 감지 모듈, 상기 도로 상의 객체를 촬영하여 제1 영상정보를 획득하는 제1 카메라, 상기 제1 카메라와 다른 각도에서 상기 도로 상의 객체를 촬영하여 제2 영상정보를 획득하는 제2 카메라 및 상기 제1 영상정보 및 상기 제2 영상정보를 바탕으로 상기 객체와의 거리(r)를 측정하는 거리측정부를 포함하고, 상기 자동차에 장착되는 비전모듈, 상기 도로 정보로부터 상기 도로의 종류를 판단하고, 상기 도로가 이면도로인 경우, 상기 제1 영상 정보 또는 상기 제2 영상 정보에서 과속방지턱이 존재하는지 판단하는 컨트롤러, 상기 도로가 이면도로이고, 상기 도로 상에 과속방지턱이 존재하는 경우, 상기 거리측정부에서 측정한 객체와의 거리(r)를 기초로 상기 자동차의 속도를 줄이는 동력/제동 모듈을 포함하고, 상기 거리측정부에서 측정한 객채와의 거리(r)는 아래 수학식1에 의해 계산되는 스테레오 비전을 이용한 과속 방지턱 감지장치에 관한 것이다.The present invention relates to a position detection module, which is mounted on an automobile and provides road information on which the automobile travels, a first camera for photographing an object on the road to obtain first image information, And a distance measuring unit measuring a distance r between the first camera and the second camera based on the first image information and the second image information, A controller for determining whether the road is a reverse road or not, and a controller for determining whether the road surface is a reverse road, whether a speed overshoot exists in the first image information or the second image information, , And when there is an overspeed preventing jaw on the road, the speed of the automobile is calculated based on the distance (r) between the object measured by the distance measuring unit This power / brake comprises a module, and the distance (r) of the gaekchae as measured by the distance measuring unit, to a speed bump detection apparatus using stereo vision is calculated by the equation (1) below.

Description

스테레오 비전을 이용한 과속 방지턱 감지장치 및 그 제어 방법 {Driver assistance systems and controlling method for the same}Technical Field [0001] The present invention relates to a speed bust detection apparatus using a stereo vision,

본 발명은 스테레오 비전을 이용한 과속 방지턱 감지장치 및 그 제어 방법 에 관한 것으로, 보다 상세하게는 이면도로에서 과속방지턱이 감지되는 경우 운전자에게 경고하고 차속을 제어하는 스테레오 비전을 이용한 과속 방지턱 감지장치 및 그 제어 방법에 관한 것이다.More particularly, the present invention relates to an overspeed detection apparatus using a stereoscopic vision that warns a driver when a speed braking tack is detected on a back road and controls a vehicle speed, And a control method.

운전보조시스템은 첨단 감지 센서가 위험 사항을 감지하여 시각적, 청각적, 촉각적 요소를 통해 사고의 위험이 있음을 경고는 물론, 전방 충돌 회피를 위한 속도 감속 또는 제동을 적극적으로 수행하는 차량의 안전장치이다. 또한, 운전보조시시템은 차선 이탈 경고, 사각지대 감시, 향상된 후방감시 등을 수행할 수 있다.The driver assistance system is designed to detect the danger and detect the risk of accident through visual, auditory and tactile factors, as well as speed deceleration for avoiding front collision or vehicle safety Device. In addition, the driving assistance system can perform lane departure warning, blind spot monitoring, and improved rearward surveillance.

운전보조시스템은 그 기능에 따라 다양한 종류로 구분된다. 전방충돌 경고 시스템(Forward Collision Warning System, FCW)은 주행 차선의 전방에서 동일한 방향으로 주행 중인 자동차를 감지하여 전방 자동차와의 충돌 회피를 목적으로 운전자에게 시각적, 청각적, 촉각적 경고를 주기 위한 시스템이다.The driving assist system is divided into various types according to its functions. The Forward Collision Warning System (FCW) is a system that provides visual, auditory, and tactile warning to drivers for the purpose of avoiding collision with the forward vehicle by detecting the vehicle in the same direction ahead of the driving lane to be.

긴급 제동 시스템(Advanced Emergency Braking System, AEBS)은 주행 차선의 전방에 위치한 자동차와의 충돌 가능성을 감지하여 운전자에게 경고를 주고 운전자의 반응이 없거나 충돌이 불가피하다고 판단되는 경우, 충돌을 완화 및 회피시킬 목적으로 자동차를 자동적으로 감속시키기 위한 시스템이다.The Advanced Emergency Braking System (AEBS) detects the possibility of collision with a vehicle located in front of the driving lane and warns the driver. If the driver does not respond or it is determined that a collision is inevitable, the collision can be alleviated and avoided It is a system for automatically decelerating a car for the purpose.

적응 순항제어 시스템(Adaptive Cruise Control, ACC)은 운전자의 설정조건에 의해 주행차선의 전방에서 동일한 방향으로 주행 중인 자동차를 자동으로 감지하여 그 자동차의 속도에 따라 자동적으로 가속 또는 감속하며 안전거리를 유지하고 목표 속도로 자동 주행하기 위한 시스템이다.The Adaptive Cruise Control (ACC) automatically detects the vehicle in the same direction in front of the driving lane according to the driver's setting conditions and automatically accelerates or decelerates according to the speed of the vehicle and maintains the safety distance And automatically runs at the target speed.

이 밖에 운전보조시스템은 차선이탈 경고 시스템(Lane Departure Warning System, LDWS), 차선유지 보조 시스템(Lane Keeping Assist System, LKAS), 사각지대 감시장치(Blind Spot Detection, BSD) 및 후방충돌 경고 시스템(Rear-end Collision Warning System, RCW) 등이 있다.In addition, the driving assistance system includes a lane departure warning system (LDWS), a lane keeping assist system (LKAS), blind spot detection (BSD) -end Collision Warning System, RCW).

일반적으로 네비게이션은 자동차가 과속방지턱이 있는 도로를 주행하는 경우 미리 알려준다. 하지만 네비게이션에 저장된 과속방지턱 정보와 실제 과속방지턱이 일치하지 않는 경우가 있다. 실제로 과속방지턱이 있음에도 운전자가 이를 인지하지 못하여 고속으로 과속방지턱을 지나는 경우 자동차의 손상이 발생하는 문제점이 있을 수 있다. 또한 자동차의 탑승자에게도 불편함을 주는 문제점이 있을 수 있다.Navigation usually informs you when your car is driving on a road with speed bumps. However, there is a case where the speed limiting braking information stored in the navigation does not match the actual speed braking tack. In fact, even if there is a speed limiter, the driver does not recognize the speed limiter. In addition, there may be a problem of inconvenience to passengers of a car.

본 발명이 해결하고자 하는 과제는 이면도로에서 과속방지턱을 사전에 감지하여 자동으로 자동차의 속도를 줄이는 스테레오 비전을 이용한 과속 방지턱 감지장치를 제공하는 것이다.SUMMARY OF THE INVENTION It is an object of the present invention to provide an overspeed protection device using a stereoscopic vision that automatically senses a speed restriction protector on a back road to reduce the speed of the vehicle.

본 발명의 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The problems of the present invention are not limited to the above-mentioned problems, and other problems not mentioned can be clearly understood by those skilled in the art from the following description.

상기 과제를 달성하기 위하여, 본 발명의 실시예에 따른 스테레오 비전을 이용한 과속 방지턱 감지장치는 자동차에 장착되고 상기 자동차가 주행하는 도로 정보를 제공하는 위치 감지 모듈, 상기 도로 상의 객체를 촬영하여 제1 영상정보를 획득하는 제1 카메라, 상기 제1 카메라와 다른 각도에서 상기 도로 상의 객체를 촬영하여 제2 영상정보를 획득하는 제2 카메라 및 상기 제1 영상정보 및 상기 제2 영상정보를 바탕으로 상기 객체와의 거리(r)를 측정하는 거리측정부를 포함하고, 상기 자동차에 장착되는 비전모듈, 상기 도로 정보로부터 상기 도로의 종류를 판단하고, 상기 도로가 이면도로인 경우, 상기 제1 영상 정보 또는 상기 제2 영상 정보에서 과속방지턱이 존재하는지 판단하는 컨트롤러, 상기 도로가 이면도로이고, 상기 도로 상에 과속방지턱이 존재하는 경우, 상기 거리측정부에서 측정한 객체와의 거리(r)를 기초로 상기 자동차의 속도를 줄이는 동력/제동 모듈을 포함하고,상기 거리측정부에서 측정한 객채와의 거리(r)는 아래 수학식1에 의해 계산된다. According to an aspect of the present invention, there is provided an overspeed protection threshold sensing apparatus using stereovision, comprising: a position sensing module mounted on an automobile and providing road information on which the automobile travels; A second camera for acquiring second image information by photographing an object on the road at an angle different from that of the first camera, and a second camera for acquiring second image information based on the first image information and the second image information, And a distance measuring unit for measuring a distance r to the object, wherein the vision module is mounted on the vehicle, the type of the road is determined from the road information, and when the road is a back road, A controller for determining whether an overspeed prevention jaw exists in the second image information, And a power / braking module for reducing the speed of the automobile based on the distance r to the object measured by the distance measuring unit, wherein the distance r from the object measured by the distance measuring unit is Is calculated by the following equation (1).

기타 실시예들의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.The details of other embodiments are included in the detailed description and drawings.

본 발명의 스테레오 비전을 이용한 과속 방지턱 감지장치 및 그 제어방법에 따르면 다음과 같은 효과가 하나 혹은 그 이상 있다.According to the present invention, there is provided one or more of the following effects according to an overspeed-up-tact detection apparatus using a stereovision and a control method thereof.

첫째, 스테레오 비전을 이용하여 과속 방지턱과의 거리를 측정하여 과속 방지턱을 미연에 감지하고 운전자에게 알려주는 장점이 있다.First, there is an advantage that it is possible to measure the distance between the speed limiter and the speed limiter using stereo vision, and to notify the driver of the speed limiter.

둘째, 네비게이션에 의해 획득하는 과속방지턱에 대한 정보가 정확하지 않은 경우에도 과속 방지턱에 대한 정확한 정보를 획득할 수 있는 장점이 있다. Secondly, there is an advantage that accurate information on the speed braking assist can be obtained even when information on the speed braking assist obtained by navigation is not accurate.

셋째, 보다 정확한 과속 방지턱의 감지로 인해 차량의 손상을 방지하고 승차감이 좋아지는 장점도 있다.Third, there is an advantage of preventing the damage of the vehicle due to the detection of a more accurate speed bump and improving the ride quality.

본 발명의 효과들은 이상에서 언급한 효과들로 제한되지 않으며, 언급되지 않은 또 다른 효과들은 청구범위의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The effects of the present invention are not limited to the effects mentioned above, and other effects not mentioned can be clearly understood by those skilled in the art from the description of the claims.

도 1은 본 발명의 일 실시예에 따른 운전보조시스템에 대한 블럭도이다.
도 2는 본 발명의 일 실시예에 따른 운전보조시스템의 비전 모듈 및 레이더 모듈의 동작을 나타내는 도면이다.
도 3은 본 발명의 실시예에 의한 스테레오 비전을 이용한 과속 방지턱 감지장치의 구성도이다.
도 4는 본 발명의 실시예에 의한 비전 모듈의 구성도이다.
도 5는 본 발명의 실시예에 의한 거리 측정을 설명하는 도면이다.
도 6은 본 발명의 실시예에 의한 순서도이다.
1 is a block diagram of a driving assistance system according to an embodiment of the present invention.
2 is a diagram illustrating the operation of a vision module and a radar module of a driving assistance system according to an embodiment of the present invention.
FIG. 3 is a block diagram of an overspeed inhibition threshold sensing apparatus using stereo vision according to an embodiment of the present invention.
4 is a configuration diagram of a vision module according to an embodiment of the present invention.
5 is a view for explaining distance measurement according to an embodiment of the present invention.
6 is a flowchart according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.BRIEF DESCRIPTION OF THE DRAWINGS The advantages and features of the present invention and the manner of achieving them will become apparent with reference to the embodiments described in detail below with reference to the accompanying drawings. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, and will fully convey the scope of the invention to those skilled in the art. To fully disclose the scope of the invention to those skilled in the art, and the invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout the specification.

이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "~부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다.The suffix "module" and "part" for constituent elements used in the following description are given or mixed in consideration of ease of specification, and do not have their own meaning or role.

이하, 본 발명의 실시예들에 의하여 스테레오 비전을 이용한 과속 방지턱 감지장치 및 그 제어방법을 설명하기 위한 도면들을 참고하여 본 발명에 대해 설명하도록 한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, the present invention will be described with reference to the drawings for explaining an overspeed protection tactile device using stereo vision and a control method thereof according to embodiments of the present invention.

도 1은 본 발명의 일 실시예에 따른 운전보조시스템에 대한 블럭도이고, 도 2는 본 발명의 일 실시예에 따른 운전보조시스템의 비전 모듈 및 레이더 모듈의 동작을 나타내는 도면이다.FIG. 1 is a block diagram of a driving assistance system according to an embodiment of the present invention, and FIG. 2 is a diagram illustrating an operation of a vision module and a radar module of a driving assist system according to an embodiment of the present invention.

본 발명의 일 실시예에 따른 운전보조시스템은, 가속 입력 모듈(10), 제동 입력 모듈(20), 비전 모듈(220), 레이더 모듈(40), 속도 감지 모듈(50), 자세 감지 모듈(60), 위치 감지 모듈(210), 컨트롤러(200), 메모리(150), 경고 모듈(240), 동력/제동 모듈(230)을 포함할 수 있다.The driving assistance system according to an embodiment of the present invention includes an acceleration input module 10, a brake input module 20, a vision module 220, a radar module 40, a velocity sensing module 50, A position sensing module 210, a controller 200, a memory 150, a warning module 240, and a power / braking module 230.

가속 입력 모듈(10)은 차량의 속도를 증가시키기 위한 사용자의 조작 장치이다. 가속 입력 모듈(10)은 동력/제동 모듈(230)의 동력을 증가시켜 차량의 속도를 증가시킨다. 일반적으로 가속 입력 모듈(10)은 차량 엔진의 회전을 증가시켜 차량의 속도를 증가시킨다. 가속 입력 모듈(10)은 일반적으로 가속 페달로서 차량의 운전석 하부에 페달 형태로 구비된다.The acceleration input module 10 is a user's operation device for increasing the speed of the vehicle. The acceleration input module 10 increases the power of the power / braking module 230 to increase the speed of the vehicle. Generally, the acceleration input module 10 increases the speed of the vehicle by increasing the rotation of the vehicle engine. The acceleration input module 10 is generally provided as an accelerator pedal in the form of a pedal below the driver's seat of the vehicle.

가속 입력 모듈(10)은 사용자의 조작에 따라 가속 정도가 입력될 수 있다. 가속 입력 모듈(10)이 가속 페달인 경우 답력에 따라 가속 정도가 입력될 수 있다.Acceleration input module 10 may be inputted with an acceleration degree in accordance with a user's operation. If the acceleration input module 10 is an accelerator pedal, the degree of acceleration may be input according to the pedal pressure.

사용자가 가속 입력 모듈(10)을 작동하면, 가속 입력 모듈(10)은 가속 정도가 포함된 가속 신호를 컨트롤러(200)에 출력한다. 컨트롤러(200)는 입력된 가속 신호에 따라 동력/제동 모듈(230)을 제어하여 차량을 가속시킨다. 실시예에 따라 가속 입력 모듈(10)은 동력/제동 모듈(230)을 직접 제어하여 차량을 가속시킬 수 있다.When the user operates the acceleration input module 10, the acceleration input module 10 outputs an acceleration signal including the degree of acceleration to the controller 200. The controller 200 controls the power / braking module 230 according to the input acceleration signal to accelerate the vehicle. According to the embodiment, the acceleration input module 10 can directly control the power / braking module 230 to accelerate the vehicle.

제동 입력 모듈(20)은 차량의 속도를 감소시키거나 차량을 정지시키기 위한 사용자의 조작 장치이다. 제동 입력 모듈(20)은 동력/제동 모듈(230)의 동력을 감소시키거나 제동력을 발생시켜 차량을 감속하거나 정지시킨다. 일반적으로 제동 입력 모듈(20)은 차량의 바퀴의 디스크에 마찰력을 인가하는 브레이크를 동작하여 차량의 속도를 감소시킨다. 실시예에 따라 제동 입력 모듈(20)은 차량 엔진의 회전을 직접 감소시키거나 리타더(retarder)와 같은 감속장치를 작동시킬 수 있다. 제동 입력 모듈(20)은 일반적으로 브레이크 페달로서 차량의 운전석 하부에 페달 형태로 구비된다.The braking input module 20 is a user's operating device for reducing the speed of the vehicle or for stopping the vehicle. The braking input module 20 reduces the power of the power / braking module 230 or generates a braking force to decelerate or stop the vehicle. Generally, the braking input module 20 operates a brake that applies a frictional force to a disk of a wheel of a vehicle to reduce the speed of the vehicle. Depending on the embodiment, the braking input module 20 may directly reduce the rotation of the vehicle engine or operate a reduction device such as a retarder. The braking input module 20 is generally provided as a brake pedal in the form of a pedal below the driver's seat of the vehicle.

제동 입력 모듈(20)은 사용자의 조작에 따라 감속 정도가 입력될 수 있다. 제동 입력 모듈(20)이 브레이크 페달인 경우 답력에 따라 감속 정도가 입력될 수 있다.The braking input module 20 can be inputted with the degree of deceleration according to the operation of the user. If the braking input module 20 is a brake pedal, the degree of deceleration may be inputted according to the pedal pressure.

사용자가 제동 입력 모듈(20)을 작동하면, 제동 입력 모듈(20)은 감속 정도가 포함된 제동 신호를 컨트롤러(200)에 출력한다. 컨트롤러(200)는 입력된 제동 신호에 따라 동력/제동 모듈(230)을 제어하여 차량을 감속시키거나 정지시킨다. 실시예에 따라 제동 입력 모듈(20)은 동력/제동 모듈(230)을 직접 제어하여 차량을 감속시키거나 정지시킬 수 있다.When the user operates the braking input module 20, the braking input module 20 outputs the braking signal including the deceleration degree to the controller 200. [ The controller 200 controls the power / braking module 230 according to the input braking signal to decelerate or stop the vehicle. The braking input module 20 may directly control the power / braking module 230 to decelerate or stop the vehicle.

속도 감지 모듈(50)은 차량의 현재 속도를 감지한다. 속도 감지 모듈(50)은 차량의 바퀴의 회전속도를 감지하거나 차량의 엔진과 연결된 변속기의 출력축의 회전속도를 감지하여 차량의 현재 속도를 산출한다. 속도 감지 모듈(50)은 회전속도를 감지하는 속도 센서와 차량의 현재 속도값을 산출하는 프로세서 등을 포함할 수 있다.The speed sensing module 50 senses the current speed of the vehicle. The speed sensing module 50 senses the rotation speed of the wheels of the vehicle or senses the rotation speed of the output shaft of the transmission connected to the engine of the vehicle to calculate the current speed of the vehicle. The speed sensing module 50 may include a speed sensor for sensing a rotation speed and a processor for calculating a current speed value of the vehicle.

속도 감지 모듈(50)은 감지된 차량의 속도값을 컨트롤러(200)에 출력한다.The speed sensing module 50 outputs the sensed speed value of the vehicle to the controller 200.

자세 감지 모듈(60)은 차량의 자세 변동을 감지한다. 자세 감지 모듈(60)은 피치(pitch)축, 요(yaw)축, 롤(roll)축 중 적어도 하나의 변동을 감지하며 본 실시예에서는 요축의 변동(yaw rate)을 감지한다. 즉, 본 실시예에서 자세 감지 모듈(60)은 차량의 요축 변화(yaw rate)를 감지하여 차량의 회전 정도를 감지한다. 자세 감지 모듈(60)은 자세 변동을 감지하는 자이로 센서 또는 가속도 센서와, 변동값을 산출하는 프로세서 등을 포함할 수 있다.The posture sensing module 60 senses the posture variation of the vehicle. The posture sensing module 60 senses a variation of at least one of a pitch axis, a yaw axis, and a roll axis, and senses a yaw rate in the present embodiment. That is, in the present embodiment, the attitude sensing module 60 senses the yaw rate of the vehicle and senses the degree of rotation of the vehicle. The attitude detection module 60 may include a gyro sensor or an acceleration sensor for detecting the attitude change, a processor for calculating the variation value, and the like.

자세 감지 모듈(60)은 감지된 차량의 자세 변동값을 컨트롤러(200)에 출력한다.The attitude detection module (60) outputs the detected attitude variation value of the vehicle to the controller (200).

위치 감지 모듈(210)은 차량의 위치를 감지한다. 위치 감지 모듈(210)은 일반적으로 위성 항법 장치(Global Positioning System, GPS)의 수신기로서, 위성으로부터 위도와 경도 값을 입력 받아 차량의 위치를 산출한다. 실시예에 따라 위치 감지 모듈(210)은 차량의 속도를 산출하여 상술한 속도 감지 모듈(50)을 대체할 수 있다. 실시예에 따라, 위치 감지 모듈(210)은 자동차가 주행하는 도로 정보를 제공하는 네비게이션을 포함할 수 있다. 위치 감지 모듈(210)은 네비게이션으로부터 도로의 정보를 제공받아 자동차가 주행중인 도로가 직선 도로인지 곡선 도로인지에 대한 정보를 제공할 수 있다. 또한, 위치 감지 모듈(210)은 도로의 차선에 대한 정보 또는 주행중인 도로의 과속방지턱이 존재하는지에 대한 정보를 제공할 수 있다. 위치 감지 모듈(210)에서 제공하는 정보는 컨트롤러(200)로 전송된다.The position sensing module 210 senses the position of the vehicle. The position sensing module 210 is a receiver of a global positioning system (GPS), and receives latitude and longitude values from a satellite to calculate the position of the vehicle. According to the embodiment, the position sensing module 210 may replace the speed sensing module 50 by calculating the speed of the vehicle. According to an embodiment, the location sensing module 210 may include navigation to provide road information for the vehicle to travel. The position sensing module 210 may receive information on the road from navigation and provide information on whether the road in which the automobile is traveling is a straight road or a curved road. In addition, the position sensing module 210 may provide information on the lane of the road or information on whether there is a speed braking obstacle on the road during driving. The information provided by the position sensing module 210 is transmitted to the controller 200.

비전 모듈(220)은 차량 외부의 영상을 촬영하여 차량 외부의 객체(Object)를 인식하고 객체의 종류를 분간하는 장치이다. 비전 모듈(220)은 일반적으로 차량의 전단에 배치되어 차량 전방의 영상을 촬영한다.The vision module 220 is a device that recognizes an object outside the vehicle by photographing an image outside the vehicle and discriminates the type of the object. The vision module 220 is generally disposed at the front end of the vehicle and photographs an image of the front of the vehicle.

도 2의 (a)에 도시된 바와 같이 비전 모듈(220)은 도로(R)를 구분할 수 있으며, 도로(R) 상의 다양한 객체(O)를 촬영하여 인식하고 이를 분간할 수 있다. 비전 모듈(220)은 객체(O)의 형상을 인식하여 객체(O)가 차량인지 사람인지 단순한 물체인지 분간할 수 있으며, 차량인 경우 승용차인지 트럭인지 이륜차인지 분간할 수 있다. As shown in FIG. 2 (a), the vision module 220 can distinguish the road R and recognize various objects O on the road R to recognize and distinguish the objects. The vision module 220 can recognize whether the object O is a vehicle, a person, or a simple object by recognizing the shape of the object O. In the case of a vehicle, the vision module 220 can discriminate whether it is a passenger car, a truck, or a two-wheeled vehicle.

비전 모듈(220)은 도로(R) 상의 차선(L)을 인식할 수 있으며, 차선(L)이 일반적인 차선인지 중앙선인지 연석선인지 분리차선인지 분간할 수 있다. 또한, 비전 모듈(220)은 도로 상의 연석이나 도보 등을 인식하여 분간할 수 있다.The vision module 220 can recognize the lane L on the road R and discriminate whether the lane L is a general lane, a center line, a curb line, or a divided lane. In addition, the vision module 220 can recognize and distinguish a curb or a walk on the road.

비전 모듈(220)은 인식된 차선(L)을 통하여 차선(L)과 차선(L) 사이인 차로(N)를 인식할 수 있다. 비전 모듈(220)은 비전 모듈(220)이 설치된 주체 차량(H)이 주행중인 차로(N)를 인식할 수 있다. 또한, 비전 모듈(220)은 인식된 객체(O)가 어느 차로(N) 상에 배치되었는지 또는 인식된 객체(O)가 차선(L) 상에 걸쳐있는지 인식할 수 있다.The vision module 220 can recognize the lane N between the lane L and the lane L through the recognized lane L. [ The vision module 220 can recognize the lane N in which the subject vehicle H equipped with the vision module 220 is running. In addition, the vision module 220 can recognize which lane N the recognized object O is located on, or whether the recognized object O lies on the lane L.

상술한 객체(O)의 인식과 분간은 비전 모듈(220) 자체에서 수행되거나 비전 모듈(220)에서 촬영된 영상을 통하여 컨트롤러(200)에서 수행될 수 있다.The recognition and identification of the object O can be performed in the vision module 220 itself or in the controller 200 through the image photographed by the vision module 220.

비전 모듈(220)은 일정한 시계(Field of View)를 가지고 있다. 도 2의 (a)에 도시된 바와 같이 비전 모듈(220)은 시계(F) 내에 객체(O) 들을 촬영한다. 실시예에 따라 비전 모듈(220)은 촬영 방향을 상하 및/또는 좌우로 변경할 수 있다. 즉, 비전 모듈(220)은 시계(F)의 중심을 상하 및/또는 좌우로 변경할 수 있다.The vision module 220 has a constant field of view. As shown in FIG. 2 (a), the vision module 220 photographs the objects O in the clock F. FIG. According to the embodiment, the vision module 220 can change the photographing direction up and down and / or left and right. That is, the vision module 220 can change the center of the clock F up and down and / or right and left.

비전 모듈(220)은, 영상을 촬영하는 카메라와, 촬영된 영상을 처리하는 프로세서와, 데이터를 저장하는 메모리를 포함할 수 있다. 실시예에 따라 비전 모듈(220)은 카메라의 촬영 방향을 변경할 수 있는 구동장치를 포함할 수 있다.The vision module 220 may include a camera that captures an image, a processor that processes the captured image, and a memory that stores data. According to an embodiment, the vision module 220 may include a driving device capable of changing the shooting direction of the camera.

비전 모듈(220)은 촬영된 영상 데이터를 컨트롤러(200)에 출력하거나, 인식되어 분간된 객체(O)의 정보를 컨트롤러(200)에 출력할 수 있다.The vision module 220 may output photographed image data to the controller 200 or output information of the recognized object O to the controller 200. [

레이더 모듈(40)은 특정 객체(O)에 전자기파를 발사한 후 객체(O)에서 반사되는 전자기파를 수신하여 객체(O)와의 거리, 위치, 각도, 상대속도 등을 감지하는 장치이다. 레이더 모듈(40)은 일반적으로 차량의 전단에 배치되어 차량 전방의 특정 객체(O)와의 거리 등을 산출한다. 실시예에 따라, 레이더 모듈(40)은 객체(O)에 레이저를 발사하는 라이더(Lidar)일 수 있다.The radar module 40 is a device that emits an electromagnetic wave to a specific object O and then receives an electromagnetic wave reflected from the object O to sense distance to the object O, The radar module 40 is generally disposed at the front end of the vehicle to calculate the distance to a specific object O in front of the vehicle, and the like. According to an embodiment, the radar module 40 may be a lidar that fires a laser at the object O.

레이더 모듈(40)은 도 2의 (b)에 도시된 바와 같은 다양한 객체(O) 중 특정된 객체인 목표 차량(T)까지의 거리, 위치, 각도, 상대속도 등을 감지한다. 목표 차량(T)은 레이더 모듈(40) 및 비전 모듈(220)이 감지한 데이터로부터 컨트롤러(200)가 추적할 객체(O)로 선정한 것으로서, 일반적으로 레이더 모듈(40) 및 비전 모듈(220)이 설치된 주체 차량(H)이 운행중인 차로(N) 상에 주체 차량(H)의 전방에서 가장 가까운 거리에 있는 차량으로 인식된 객체(O)이다.The radar module 40 detects the distance, position, angle, relative speed, etc. to the target vehicle T, which is a specified object among the various objects O as shown in FIG. The target vehicle T is selected from the data detected by the radar module 40 and the vision module 220 as the object O to be tracked by the controller 200 and is generally set to the radar module 40 and the vision module 220, Is an object O recognized as a vehicle at a distance closest to the front of the subject vehicle H on the lane N in which the subject vehicle H is installed.

레이더 모듈(40)은, 전자기파를 발사하는 레이더와, 레이더가 수신된 전자기파에 대한 정보를 처리하는 프로세서와, 데이터를 저장하는 메모리를 포함할 수 있다.The radar module 40 may include a radar that emits electromagnetic waves, a processor that processes information about the electromagnetic waves received by the radar, and a memory that stores data.

레이더 모듈(40)은 객체(O)와의 거리, 위치, 각도, 상대속도 등의 정보를 컨트롤러(200)에 출력한다.The radar module 40 outputs information such as the distance to the object O, the position, the angle, and the relative speed to the controller 200.

경고 모듈(240)은 차량을 운전하는 운전자에게 경고를 하는 장치로서, 실시예에 따라 시각적, 청각적, 촉각적으로 다양하게 경고를 할 수 있다. 경고 모듈(240)은 운전석의 계기판, 헤드업 디스플레이, 내비게이션, 통합 정보 디스플레이 장치 등에 경고를 표시할 수 있다. 경고 모듈(240)은 차량의 스피커를 통하여 경고를 할 수 있다. 경고 모듈(240)은 차량의 핸들을 진동시키거나 안전벨트를 조여 운전자에게 경고할 수 있다.The warning module 240 is a device for giving a warning to a driver who drives the vehicle, and can warn various audiences, audiences, and tactiles according to embodiments. The warning module 240 may display a warning on a dash panel of a driver's seat, a head-up display, navigation, an integrated information display device, and the like. The warning module 240 can provide a warning through the speaker of the vehicle. The warning module 240 can warn the driver by vibrating the steering wheel of the vehicle or tightening the seat belt.

경고 모듈(240)은 컨트롤러(200)의 제어에 따라 동작하여 운전자에게 경고를 할 수 있다.The warning module 240 operates according to the control of the controller 200 to alert the driver.

동력/제동 모듈(230)은 차량을 가속시키거나 감속시키거나 정지시키는 장치이다. 동력/제동 모듈(230)은 회전력을 발생시켜 차량의 바퀴를 회전시키는 엔진 및/또는 모터와, 엔진 및/또는 모터의 회전비를 변경하는 변속기를 포함할 수 있다. 동력/제동 모듈(230)은 제동력을 발생하거나 엔진 및/또는 모터의 회전을 감소시키는 브레이크 및/또는 리타더를 포함할 수 있다.The power / braking module 230 is a device for accelerating, decelerating or stopping the vehicle. The power / brake module 230 may include an engine and / or a motor that generates a rotational force to rotate the wheels of the vehicle, and a transmission that changes the rotation ratio of the engine and / or the motor. The power / brake module 230 may include a brake and / or retarder that generates braking force or reduces rotation of the engine and / or motor.

동력/제동 모듈(230)은 컨트롤러(200)의 제어에 따라 동작하거나, 가속 입력 모듈(10) 또는 제동 입력 모듈(20)에 의하여 동작될 수 있다.The power / braking module 230 may operate under the control of the controller 200 or may be operated by the acceleration input module 10 or the braking input module 20.

컨트롤러(200)는 가속 입력 모듈(10), 제동 입력 모듈(20), 비전 모듈(220), 레이더 모듈(40), 속도 감지 모듈(50), 자세 감지 모듈(60) 및 위치 감지 모듈(210)로부터 데이터를 전달받아 이를 처리하며 처리된 결과에 따라 경고 모듈(240) 및 동력/제동 모듈(230)을 제어한다. 컨트롤러(200)는 각 모듈과의 데이터 통신을 위한 CAN(Controller Area Network)을 포함할 수 있다. 한편, 본 발명의 범위는 CAN(Controller Area Network)을 이용한 통신에 한정되지 않으며, 자동차 네트워크에 이용되는 통신 방식은 본 발명의 범위에 포함된다.The controller 200 includes an acceleration input module 10, a braking input module 20, a vision module 220, a radar module 40, a velocity sensing module 50, a position sensing module 60 and a position sensing module 210 And controls the warning module 240 and the power / braking module 230 according to the processed result. The controller 200 may include a CAN (Controller Area Network) for data communication with each module. On the other hand, the scope of the present invention is not limited to the communication using the CAN (Controller Area Network), and the communication method used in the automobile network is included in the scope of the present invention.

메모리(150)는 프로그램, 명령 및 데이터를 저장한다. 컨트롤러(200)는 메모리(150)에 데이터를 저장하거나 메모리(150)에 저장된 프로그램, 명령 또는 데이터를 호출한다.Memory 150 stores programs, instructions, and data. The controller 200 stores data in the memory 150 or calls programs, commands, or data stored in the memory 150. [

도 3은 본 발명의 실시예에 의한 스테레오 비전을 이용한 과속 방지턱 감지장치의 구성도이다.FIG. 3 is a block diagram of an overspeed inhibition threshold sensing apparatus using stereo vision according to an embodiment of the present invention.

도 3을 참조하면, 스테레오 비전을 이용한 과속 방지턱 감지장치는 컨트롤러(200), 위치 감지 모듈(210), 비전 모듈(220), 동력/제동 모듈(230), 경고 모듈(240)을 포함할 수 있다.Referring to FIG. 3, an overspeed detection device using stereo vision may include a controller 200, a position sensing module 210, a vision module 220, a power / braking module 230, and a warning module 240 have.

위치 감지 모듈(210)은 자동차가 주행하는 도로의 정보를 제공할 수 있다. 위치 감지 모듈(210)은 자동차에 장착될 수 있다. 위치 감지 모듈(210)은 자동차가 주행하는 도로 정보를 제공하는 네비게이션을 포함할 수 있다. 위치 감지 모듈(210)은 자동차가 주행중인 도로가 이면도로인지, 고속도로인지 또는 국도인지에 대한 정보를 제공할 수 있다. 위치 감지 모듈(210)은 네비게이션으로부터 도로의 정보를 제공받아 자동차가 주행중인 도로가 직선 도로인지 곡선 도로인지에 대한 정보를 제공할 수 있다. 또한, 위치 감지 모듈(210)은 주행중인 도로의 차선에 대한 정보 또는 주행중인 도로에 과속방지턱이 존재하는지에 대한 정보를 제공할 수 있다. 위치 감지 모듈(210)에서 제공한 정보는 컨트롤러(200)로 전송된다.The position sensing module 210 may provide information on the road on which the vehicle is traveling. The position sensing module 210 may be mounted in a vehicle. The location sensing module 210 may include navigation to provide road information that the vehicle travels. The position sensing module 210 may provide information on whether the road in which the vehicle is traveling is a back road, a highway, or a national road. The position sensing module 210 may receive information on the road from navigation and provide information on whether the road in which the automobile is traveling is a straight road or a curved road. In addition, the position sensing module 210 may provide information on the lane of the road during driving, or information on whether a speed braking tack exists on the road during driving. The information provided by the position sensing module 210 is transmitted to the controller 200.

비전 모듈(220)은 제1 카메라를 통하여 자동차 전방의 제1 영상정보 및 제2카메라를 통하여 자동차 전방의 제2 영상정보를 획득할 수 있다. 획득되는 제1 영상정보 또는 제2 영상정보에는 도로 및 객체가 존재한다. 여기서, 객체는 과속방지턱일 수 있다. 비전 모듈(220)에서 획득한 제1 영상 정보 또는 제2 영상 정보는 컨트롤러(200)로 전송된다. 즉, 비전 모듈(220)에서 과속방지턱에 대한 영상정보를 획득한 경우 상기 영상정보는 컨트롤러(200)로 전송된다. 실시예에 따르면, 비전 모듈(220)에서 획득한 제1 영상 정보 또는 제2 영상 정보는 메모리(150)에 저장될 수 있다. 예를 들면, 비전 모듈(220)에서 획득한 과속방지턱의 영상은 메모리(150)에 저장될 수 있다.The vision module 220 may acquire first image information of the front of the automobile through the first camera and second image information of the front of the automobile through the second camera. There are roads and objects in the acquired first image information or second image information. Here, the object may be an overspeed inhibiting jaw. The first image information or the second image information acquired by the vision module 220 is transmitted to the controller 200. That is, when the vision module 220 acquires image information on the overspeed prevention jaw, the image information is transmitted to the controller 200. According to the embodiment, the first image information or the second image information acquired by the vision module 220 may be stored in the memory 150. [ For example, the image of the excessive speed bump obtained in the vision module 220 may be stored in the memory 150. [

한편, 비전 모듈(220)은 획득한 영상정보를 처리할 수 있는 프로세서를 포함할 수 있다. 예를 들면, 비전 모듈이 획득한 영상정보에 포함된 객체가 과속방지턱인 경우, 프로세서는 과속방지턱의 폭 및 높이를 계산할 수 있다. 본 실시예에서는 비전 모듈(220)에 포함된 프로세서에서 영상정보를 처리하는 것으로 설명하였지만 이에 한정되지 아니한다. 비전 모듈(220)에서 획득한 영상정보의 처리는 컨트롤러(200)에서 수행 할 수도 있다.Meanwhile, the vision module 220 may include a processor capable of processing the acquired image information. For example, when the object included in the image information acquired by the vision module is a speed braking jaw, the processor can calculate the width and height of the overbraking braking jaw. In the present embodiment, the processor included in the vision module 220 processes image information, but the present invention is not limited thereto. The processing of the image information acquired by the vision module 220 may be performed by the controller 200. [

한편, 비전 모듈(220)은 제1 카메라, 제2 카메라 및 거리측정부를 포함할 수 있다. 비전 모듈(220) 구성에 대한 상세한 설명은 도 4를 참조하여 설명한다.Meanwhile, the vision module 220 may include a first camera, a second camera, and a distance measuring unit. A detailed description of the configuration of the vision module 220 will be described with reference to FIG.

컨트롤러(200)는 위치 감지 모듈(210)로부터 도로 정보를 수신한다. 예를들어, 컨트롤러(200)는 위치 감지 모듈(210)로부터 과속방지턱에 대한 정보를 수신할 수 있다. 컨트롤러(200)는 비전 모듈(220)로부터 제1 영상 정보 또는 제2 영상 정보를 수신한다. 예를 들어, 컨트롤러(200)는 비전 모듈(220)로부터 과속방지턱에 대한 영상정보를 수신할 수 있다. The controller 200 receives road information from the position sensing module 210. For example, the controller 200 may receive information on the overspeed inhibition from the position sensing module 210. For example, The controller 200 receives the first image information or the second image information from the vision module 220. For example, the controller 200 may receive image information on the overspeed preventing jaw from the vision module 220.

컨트롤러(200)는 위치 감지 모듈(210)로부터 제공된 도로 정보로부터 자동차가 주행 중인 도로의 종류를 판단한다. 예를들어, 컨트롤러(200)는 자동차가 주행 중인 도로가 이면도로인지, 고속도로인지, 국도인지 판단할 수 있다.The controller 200 determines the type of the road on which the automobile is traveling based on the road information provided from the position sensing module 210. For example, the controller 200 can determine whether the road on which the vehicle is traveling is a back road, a highway, or a national road.

컨트롤러(200)는 위치 감지 모듈(210)로부터 수신한 도로 정보로부터 자동차가 주행 중인 도로가 이면도로인지 판단한다. 이면도로는 왕복 차로의 구분이 없는 도로일 수 있다. 판단 결과, 이면 도로인 경우, 컨트롤러(200)는 비전 모듈(220)에서 수신한 제1 영상 정보 또는 제2 영상 정보에서 과속 방지턱이 존재하는지 판단한다. 판단 결과, 과속방지턱이 존재하는 경우, 컨트롤러(200)는 동력/제동모듈을 제어하여 자동차의 속도를 자동으로 줄인다. The controller 200 determines whether the road on which the vehicle is traveling is on the back road from the road information received from the position sensing module 210. The back road may be a road without a distinction of a round trip lane. As a result of the determination, if the road surface is a back road, the controller 200 determines whether a speed braking obstacle exists in the first image information or the second image information received by the vision module 220. As a result of the determination, when there is an overspeed prevention jaw, the controller 200 automatically controls the power / braking module to reduce the speed of the vehicle.

또한, 컨트롤러(200)는 위치 감지 모듈(210)로부터 수신한 도로 정보로부터 자동차가 주행 중인 도로가 고속도로 또는 국도인지 판단한다. 판단 결과, 고속 도로 또는 국도인 경우, 컨트롤러(200)는 비전 모듈(220)에서 수신한 영상정보에서 과속 방지턱이 존재하는지 판단한다. 과속방지턱이 존재하는 경우, 컨트롤러(200)는 동력/제동모듈을 제어하여 자동차의 속도를 자동으로 줄인다.Also, the controller 200 determines whether the road on which the vehicle is traveling is a highway or a national road, based on the road information received from the position sensing module 210. If it is determined that the vehicle is a highway or a highway, the controller 200 determines whether there is a speed limit jaw in the image information received by the vision module 220. When there is an overspeed inhibition jaw, the controller 200 controls the power / brake module to automatically reduce the speed of the vehicle.

컨트롤러(200)는 비전 모듈(220)로부터 수신한 제1 영상 정보 또는 제2 영상 정보에 존재하는 객체의 폭 및 높이에 기초하여 상기 객체가 과속방지턱인지 판단할 수 있다. 실시예에 따르면, 기존 비전 모듈(220)로부터 획득되어 메모리(150)에 저장된 과속방지턱의 폭 및 높이와 현재 주행중인 도로에서 획득된 영상에서 객체의 폭 및 높이를 비교하여 기설정된 오차 범위 내인 경우, 컨트롤러(200)는 과속방지턱이라고 판단할 수 있다. 실시예에 따르면, 상기 객체의 폭 및 높이가 기 설정된 범위 내에 해당하는 경우, 컨트롤러(200)는 과속방지턱이라고 판단할 수 있다.The controller 200 may determine whether the object is an overspeed inhibition based on the width and height of the object existing in the first image information or the second image information received from the vision module 220. [ According to the embodiment, the width and height of the speed limit braking force obtained from the existing vision module 220 and stored in the memory 150 and the width and height of the object are compared with each other in the image obtained from the current road, , The controller 200 can determine that it is the overspeed inhibition threshold. According to the embodiment, when the width and the height of the object fall within a predetermined range, the controller 200 can determine that the object is the overspeed inhibition jaw.

동력/제동 모듈(230)은 컨트롤러(200)의 제어에 의해 자동차의 속도를 줄인다.The power / braking module 230 reduces the speed of the vehicle under the control of the controller 200.

경고 모듈(240)은 컨트롤러(200)의 제어를 받는다. 경고 모듈(240)은 자동차가 주행중인 도로가 이면도로이고, 상기 도로 상에 과속방지턱이 존재하는 경우 시각적, 청각적 또는 촉각적 알람을 발생할 수 있다. The warning module 240 is under the control of the controller 200. The warning module 240 may generate a visual, audible or tactile alarm in the presence of an overspeed braking obstacle on the road where the vehicle is running.

도 4는 본 발명의 실시예에 의한 비전 모듈의 구성도이다. 4 is a configuration diagram of a vision module according to an embodiment of the present invention.

도 4를 참조하면, 비전 모듈(220)은 제1카메라(221), 제2카메라(222), 거리측정부(223)를 포함할 수 있다.Referring to FIG. 4, the vision module 220 may include a first camera 221, a second camera 222, and a distance measurement unit 223.

제1카메라(221)는 자동차의 전방에 장착될 수 있으며, 도로 또는 도로 상의 객체를 촬영할 수 있다. The first camera 221 can be mounted in front of the automobile and can photograph an object on the road or a road.

제2카메라(222)는 자동차의 전방에 장착될 수 있으며, 객체를 제1카메라(221)와 다른 각도에서 도로 또는 도로 상의 객체를 촬영할 수 있다. The second camera 222 may be mounted in front of the vehicle and may take an object on the road or an object on the road at a different angle from the first camera 221.

예를 들면, 제1카메라(221)는 자동차의 전방 좌측에 장착되어 도로 상의 객체를 촬영할 수 있고, 제2카메라(222)는 자동차의 전방 우측에 장착되어 제1카메라(221)와 다른 각도에서 도로상의 객체를 촬영할 수 있다.For example, the first camera 221 can be mounted on the front left side of the automobile to photograph an object on the road, and the second camera 222 can be mounted on the front right side of the automobile, You can shoot objects on the road.

거리 측정부(223)는 제1카메라(221)에서 획득한 제1 영상정보 및 제2카메라(222)에서 획득한 제2 영상정보로부터 도로 상의 객체와의 거리를 측정할 수 있다. 거리 측정 방식은 시차 맵(Disparity Map)에 의할 수 있다. 거리 측정 방식은 도 5를 참조하여 설명한다.The distance measuring unit 223 may measure the distance from the object on the road from the first image information acquired by the first camera 221 and the second image information acquired by the second camera 222. [ The distance measurement method can be based on a disparity map. The distance measuring method will be described with reference to FIG.

거리 측정부(223)에서 측정한 객체와의 거리에 대응하여 컨트롤러(200)는 동력/제동 모듈(230)을 제어하여 자동으로 차속을 줄일 수 있다. 즉, 동력/제동 모듈(230)은 컨트롤러(200)의 제어를 받아, 거리 측정부(223)에서 측정한 거리에 대응하여 자동으로 자동차의 속도를 줄일 수 있다. 예를 들면, 거리측정부(223)는 자동차부터 제1카메라(221) 및 제2카메라(222)에서 촬영한 영상에 존재하는 과속방지턱까지 거리를 측정한다. 컨트롤러(200)는 거리 측정부(223)에서 측정한 자동차에서 과속방지턱까지의 거리에 대응하여 자동차의 속도를 줄이도록 동력/제동 모듈(230)을 제어한다.The controller 200 may control the power / braking module 230 to automatically reduce the vehicle speed in accordance with the distance from the object measured by the distance measuring unit 223. [ That is, under the control of the controller 200, the power / braking module 230 can automatically reduce the speed of the vehicle in accordance with the distance measured by the distance measuring unit 223. For example, the distance measuring unit 223 measures the distance from the automobile to the overspeed prevention threshold present in the image photographed by the first camera 221 and the second camera 222. The controller 200 controls the power / braking module 230 so as to reduce the speed of the vehicle in accordance with the distance from the vehicle measured by the distance measuring unit 223 to the overspeed inhibition threshold.

도 5는 본 발명의 실시예에 의한 거리 측정을 설명하는 도면이다.5 is a view for explaining distance measurement according to an embodiment of the present invention.

일반적으로 객체와의 거리를 측정하는 방법은 스테레오 매칭(Stereco Matching)을 이용하는 방법과 모노 영상만을 사용하는 원근법(perspective)이 있다.Generally, there are two methods of measuring the distance to an object: a method using stereo matching (Stereo Matching) and a method using only a mono image.

원근법은 거리가 멀수록 객체가 작게 보이고 물체가 가까이 있을수록 크게 보이는 성질과 대략적인 비례관계를 이용하여 거리를 추정하는 방법이지만 한 개의 영상만을 사용하는 방식의 경우 3차원 객체를 인지함에 있어 그림자등과 같은 2차원 객체를 잘못 인식할 수도 있고, 2차원 정보만으로 3차원 대상을 탐지하기 위해 복잡한 알고리즘을 사용해야 한다. 또한, 한 개의 영상을 이용하는 방식은 물체의 크기에 따라 오차가 생기고 특히 물체와 카메라의 수직위치가 동일하지 않은 언덕, 내리막길 등에서는 많은 오차를 보이는 문제점이 있다.The perspective is a method to estimate the distance by using the approximate proportional relationship and the property that the object looks small as the distance increases and the object becomes closer as the object approaches. However, in the case of using only one image, Dimensional object such as a three-dimensional object, or a complex algorithm to detect a three-dimensional object with only two-dimensional information. In addition, there is a problem in that a method using one image causes an error according to the size of the object, and particularly, it shows a lot of errors in a hill or a downhill where the vertical position of the object and the camera are not the same.

한편, 두 개의 영상을 이용하는 스테레오 매칭(Stereo Matching)은 제1 카메라 및 제2 카메라에 입력되는 두 개의 영상으로부터 입체 영상 정보를 추출하는 기술이다.Stereo matching using two images is a technique of extracting stereoscopic image information from two images input to the first camera and the second camera.

이러한 스테레오 매칭은 사람의 두 눈이 특정 사물 또는 영상 패턴까지의 거리 정보를 획득하는 방법과 마찬가지로, 한쪽 영상 내의 특정 위치에 있는 패턴이 다른 쪽 영상에서는 어트 위치에 있는지 검출하여 두 위치의 차이 즉 양안차(disparity)를 추출함으로써, 카메라에서 그 패턴의 실제 위치까지의 거리를 직접 계산하는 것이다.This stereo matching detects whether a pattern at a specific position in one image is located at an attitude position in the other image, as in a method in which two eyes of a person acquire distance information to a specific object or image pattern, By extracting the disparity, the distance from the camera to the actual position of the pattern is directly calculated.

도 5를 참조하여 스테레오 매칭(Stereo Matching)을 이용한 객체와의 거리를 측정하는 수학식을 설명하면, r은 객체까지 거리이다. f는 제1카메라(221) 또는 제2카메라(222)의 초점 거리이다. b는 제1카메라(221) 및 제2카메라(222) 사이의 거리이다. dl은 제1카메라(221)에서 획득된 영상의 중심에서 객체의 x축 거리이다. dr은 제2카메라(222)에서 획득된 영상의 중심에서 객체의 x축 거리이다. d는 dl에서 dr을 뺀 값이다. 물체까지의 거리(r)은 초점 거리(f) 및 제1카메라(221) 및 제2카메라(222)사이의 거리의 곱에서 dl에서 dr을 뺀 값을 나눈값이다. Referring to FIG. 5, a formula for measuring a distance to an object using stereo matching is described. R is a distance to an object. f is the focal length of the first camera 221 or the second camera 222. [ and b is the distance between the first camera 221 and the second camera 222. dl is the x-axis distance of the object from the center of the image acquired by the first camera 221. [ and dr is the x-axis distance of the object from the center of the image acquired by the second camera 222. [ d is the value obtained by subtracting dr from dl. The distance r to the object is the product of the focal length f and the distance between the first camera 221 and the second camera 222 divided by dl minus dr.

Figure 112013100378074-pat00001
Figure 112013100378074-pat00001

도 6은 본 발명의 실시예에 의한 순서도이다.6 is a flowchart according to an embodiment of the present invention.

도 6을 참조하면, 컨트롤러(200)는 위치 감지 모듈(210)로부터 자동차가 주행 중인 도로 정보를 수신한다(S310). 여기서, 위치 감지 모듈(210)은 자동차에 장착된 네비게이션일 수 있고, 도로 정보는 자동차가 주행 중인 도로가 직선도로, 곡선도로 또는 이면도로인지 여부일 수 있다. 또한 도로 정보는 자동차가 주행 중인 도로에 과속방지턱이 존재하는지에 대한 여부도 포함할 수 있다. Referring to FIG. 6, the controller 200 receives the road information of the vehicle running from the position sensing module 210 (S310). Here, the position sensing module 210 may be navigation mounted on the vehicle, and the road information may be whether the road on which the automobile is traveling is a straight road, a curved road or a back road. The road information may also include whether or not a speed bump exists on the road on which the automobile is traveling.

컨트롤러(200)는 비전 모듈(220)로부터 도로 또는 도로상의 객체에 대한 영상정보를 획득할 수 있다(S320). 여기서 비전 모듈(220)은 제1카메라(221), 제2카메라(222), 거리측정부(223)를 포함할 수 있다.The controller 200 may acquire image information of an object on a road or a road from the vision module 220 (S320). Here, the vision module 220 may include a first camera 221, a second camera 222, and a distance measurement unit 223.

제1카메라(221)는 자동차의 전방에 장착될 수 있으며, 도로 또는 도로 상의 객체를 촬영할 수 있다. 즉, 비전 모듈(220)은 제1 카메라(221)를 통하여 도로 상의 객체에 대한 제1 영상정보를 획득할 수 있다.The first camera 221 can be mounted in front of the automobile and can photograph an object on the road or a road. That is, the vision module 220 can acquire the first image information about the object on the road through the first camera 221.

제2카메라(222)는 자동차의 전방에 장착될 수 있으며, 객체를 제1카메라(221)와 다른 각도에서 도로 또는 도로 상의 객체를 촬영할 수 있다. 즉, 비전 모듈(220)은 제2 카메라(222)를 통하여 도로 상의 객체에 대한 제2 영상정보를 획득할 수 있다. The second camera 222 may be mounted in front of the vehicle and may take an object on the road or an object on the road at a different angle from the first camera 221. That is, the vision module 220 can acquire the second image information about the object on the road through the second camera 222.

예를 들면, 제1카메라(221)는 자동차의 전방 좌측에 장착되어 도로 상의 객체를 촬영할 수 있고, 제2카메라(222)는 자동차의 전방 우측에 장착되어 제1카메라(221)와 다른 각도에서 도로상의 객체를 촬영할 수 있다.For example, the first camera 221 can be mounted on the front left side of the automobile to photograph an object on the road, and the second camera 222 can be mounted on the front right side of the automobile, You can shoot objects on the road.

거리 측정부(223)는 제1카메라(221)에서 획득한 제1 영상정보 및 제2카메라(222)에서 획득한 제2 영상정보로부터 도로 상의 객체와의 거리를 측정할 수 있다.The distance measuring unit 223 may measure the distance from the object on the road from the first image information acquired by the first camera 221 and the second image information acquired by the second camera 222. [

본 실시예에서는 도로정보를 수신하는 단계(S310) 이후에 영상정보를 획득하는 단계(S320)가 수행되는 것으로 설명하나 이에 한정되지 아니한다. S320 단계가 S310단계 이전에 수행 될 수 있다.In this embodiment, it is described that the step of acquiring image information (S320) is performed after the step of receiving the road information (S310), but is not limited thereto. Step S320 may be performed before step S310.

컨트롤러(200)는 위치 감지 모듈(210)에서 수신한 도로 정보로부터 자동차가 주행 중인 도로의 종류를 판단한다. 예를들면, 컨트롤러(200)는 자동차가 주행 중인 도로가 이면도로인지 판단한다(S330). 만약, 이면도로인 경우, 컨트롤러(200)는 비전 모듈(220)에서 수신한 영상정보에서 과속방지턱이 존재하는지 판단한다(S340). 컨트롤러(200)는 비전 모듈(220)로부터 수신한 영상정보에 존재하는 객체의 폭 및 높이에 근거하여 상기 객체가 과속방지턱인지 판단할 수 있다. 실시예에 따르면, 기존 비전 모듈(220)로부터 획득되어 메모리(150)에 저장된 과속방지턱의 폭 및 높이와 현재 주행중인 도로에서 획득된 영상에서 객체의 폭 및 높이를 비교하여 기설정된 오차 범위 내인 경우, 컨트롤러(200)는 과속방지턱이라고 판단할 수 있다. 실시예에 따르면, 상기 객체의 폭 및 높이가 기 설정된 범위 내에 해당하는 경우, 컨트롤러(200)는 과속방지턱이라고 판단할 수 있다.The controller 200 determines the type of the road on which the vehicle is traveling based on the road information received by the position sensing module 210. For example, the controller 200 determines whether the road on which the automobile is traveling is on the back road (S330). If the road surface is a back road, the controller 200 determines whether a speed bump exists in the image information received by the vision module 220 (S340). The controller 200 can determine whether the object is an overspeed inhibition based on the width and height of an object existing in the image information received from the vision module 220. [ According to the embodiment, the width and height of the speed limit braking force obtained from the existing vision module 220 and stored in the memory 150 and the width and height of the object are compared with each other in the image obtained from the current road, , The controller 200 can determine that it is the overspeed inhibition threshold. According to the embodiment, when the width and the height of the object fall within a predetermined range, the controller 200 can determine that the object is the overspeed inhibition jaw.

만약, 과속방지턱이 존재하는 경우, 컨트롤러(200)는 상기 거리측정부(223)에서 측정된 객체와의 거리를 기초로 경고 모듈(240)을 제어하여 알람을 발생하거나 동력/제동 모듈(230)을 제어하여 자동차의 속도를 줄일 수 있다.The controller 200 controls the warning module 240 based on the distance to the object measured by the distance measuring unit 223 to generate an alarm or to output the alarm to the power / The speed of the vehicle can be reduced.

이 때, 처리 흐름도 도면들의 각 블록과 흐름도 도면들의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수 있음을 이해할 수 있을 것이다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 흐름도 블록(들)에서 설명된 기능들을 수행하는 수단을 생성하게 된다. 이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 흐름도 블록(들)에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다. 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 흐름도 블록(들)에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.At this point, it will be appreciated that the combinations of blocks and flowchart illustrations in the process flow diagrams may be performed by computer program instructions. These computer program instructions may be loaded into a processor of a general purpose computer, special purpose computer, or other programmable data processing apparatus, so that those instructions, which are executed through a processor of a computer or other programmable data processing apparatus, Thereby creating means for performing functions. These computer program instructions may also be stored in a computer usable or computer readable memory capable of directing a computer or other programmable data processing apparatus to implement the functionality in a particular manner so that the computer usable or computer readable memory The instructions stored in the block diagram (s) are also capable of producing manufacturing items containing instruction means for performing the functions described in the flowchart block (s). Computer program instructions may also be stored on a computer or other programmable data processing equipment so that a series of operating steps may be performed on a computer or other programmable data processing equipment to create a computer- It is also possible for the instructions to perform the processing equipment to provide steps for executing the functions described in the flowchart block (s).

또한, 각 블록은 특정된 논리적 기능(들)을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실행 예들에서는 블록들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.In addition, each block may represent a module, segment, or portion of code that includes one or more executable instructions for executing the specified logical function (s). It should also be noted that in some alternative implementations, the functions mentioned in the blocks may occur out of order. For example, two blocks shown in succession may actually be executed substantially concurrently, or the blocks may sometimes be performed in reverse order according to the corresponding function.

본 실시예에서 사용되는 '모듈'이라는 용어는 소프트웨어 또는 FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, 모듈은 어떤 역할들을 수행한다. 그렇지만 모듈은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. 모듈은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 모듈은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 모듈들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 모듈들로 결합되거나 추가적인 구성요소들과 모듈들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 모듈들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.The term " module " used in this embodiment means a hardware component such as software or an FPGA or an ASIC, and the module performs certain roles. However, a module is not limited to software or hardware. A module may be configured to reside on an addressable storage medium and configured to play back one or more processors. Thus, by way of example, a module may include components such as software components, object-oriented software components, class components and task components, and processes, functions, attributes, procedures, Microcode, circuitry, data, databases, data structures, tables, arrays, and variables, as will be appreciated by those skilled in the art. The functionality provided within the components and modules may be combined into a smaller number of components and modules or further separated into additional components and modules. In addition, the components and modules may be implemented to play back one or more CPUs in a device or a secure multimedia card.

이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안될 것이다.
While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It should be understood that various modifications may be made by those skilled in the art without departing from the spirit and scope of the present invention.

200 : 컨트롤러
210 : 위치 감지 모듈
220 : 비전 모듈
230 : 동력/제동 모듈
240 : 경고 모듈
200: controller
210: Position sensing module
220: Vision module
230: Power / Brake Module
240: Warning module

Claims (7)

자동차에 장착되고 상기 자동차가 주행하는 도로 정보를 제공하는 위치 감지 모듈;
상기 도로 상의 객체를 촬영하여 제1 영상정보를 획득하는 제1 카메라, 상기 제1 카메라와 다른 각도에서 상기 도로 상의 객체를 촬영하여 제2 영상정보를 획득하는 제2 카메라 및 상기 제1 영상정보 및 상기 제2 영상정보를 바탕으로 상기 객체와의 거리(r)를 측정하는 거리측정부를 포함하고, 상기 자동차에 장착되는 비전모듈;
상기 도로 정보로부터 상기 도로의 종류를 판단하고, 상기 도로가 이면도로인 경우, 상기 제1 영상 정보 또는 상기 제2 영상 정보에서 과속방지턱이 존재하는지 판단하는 컨트롤러; 및
상기 도로가 이면도로이고, 상기 도로 상에 과속방지턱이 존재하는 경우, 상기 거리측정부에서 측정한 객체와의 거리(r)를 기초로 상기 자동차의 속도를 줄이는 동력/제동 모듈;을 포함하고,
상기 거리측정부에서 측정한 객채와의 거리(r)는 아래 수학식1에 의해 계산되고,
상기 컨트롤러는, 상기 제1 영상정보 또는 상기 제2 영상정보에 존재하는 객체의 폭 및 높이를 기초로 과속방지턱인지 판단하는 스테레오 비전을 이용한 과속 방지턱 감지장치.
[수학식1]
Figure 112015010395525-pat00002

r : 객체까지 거리
f : 제1 카메라 및 제2 카메라의 초점 거리
b : 제1 카메라 및 제2 카메라 사이의 거리
d : 제1 카메라에 입력된 객체의 x축 거리에서 제2 카메라에 입력된 상기 객체의 x축 거리를 뺀 길이
A position sensing module mounted on the vehicle and providing road information on which the vehicle travels;
A first camera for photographing an object on the road to acquire first image information, a second camera for photographing an object on the road at a different angle from the first camera to acquire second image information, And a distance measuring unit for measuring a distance (r) to the object based on the second image information, the vision module being mounted on the vehicle;
A controller for determining the type of the road from the road information, and determining whether a speed overshoot exists in the first image information or the second image information when the road is a back road; And
And a power / braking module for reducing a speed of the automobile based on a distance r from the object measured by the distance measuring unit when the road is a back road and an overspeed prevention jaw exists on the road,
The distance r to the object measured by the distance measuring unit is calculated by the following equation (1)
Wherein the controller determines whether the object is an overspeed preventing threshold based on a width and a height of an object existing in the first image information or the second image information.
[Equation 1]
Figure 112015010395525-pat00002

r: distance to object
f: focal length of the first camera and the second camera
b: distance between the first camera and the second camera
d is a length obtained by subtracting the x-axis distance of the object input to the second camera from the x-axis distance of the object input to the first camera,
삭제delete 제 1항에 있어서,
상기 도로가 이면도로이고, 상기 도로 상에 과속방지턱이 존재하는 경우, 상기 상기 거리측정부에서 측정한 객체와의 거리(r)를 기초로 시각적, 청각적 또는 촉각적 알람을 발생하는 경고 모듈을 더 포함하는 스테레오 비전을 이용한 과속 방지턱 감지장치.
The method according to claim 1,
And a warning module for generating a visual, audible or tactile alarm based on the distance r from the object measured by the distance measuring unit when the road is a back road and an overspeed preventing jaw exists on the road Speed vision sensor with stereo vision.
제 1항에 있어서,
상기 컨트롤러는,
상기 도로가 고속도로 또는 국도인 경우, 상기 제1 영상 정보 또는 상기 제2 영상 정보에서 과속방지턱이 존재하는지 판단하고,
상기 동력/제동 모듈은,
상기 도로가 고속도로 또는 국도이고, 상기 도로 상에 과속방지턱이 존재하는 경우, 상기 거리측정부에서 측정한 객체와의 거리(r)를 기초로 상기 자동차의 속도를 줄이는 스테레오 비전을 이용한 과속 방지턱 감지장치.
The method according to claim 1,
The controller comprising:
Determining whether a speed braking force is present in the first image information or the second image information when the road is an expressway or a national road,
The power / braking module includes:
Wherein the vehicle speed is reduced based on the distance r to the object measured by the distance measuring unit when the road is an expressway or a national road and an overspeed preventing jaw exists on the road, .
위치 감지 모듈을 통하여 도로 정보를 수신하는 단계;
제1 카메라를 통하여 상기 도로 상의 객체에 대한 제1 영상정보를 획득하는 단계;
제2 카메라를 통하여 상기 제1 카메라와 다른 각도에서 상기 도로 상의 객체에 대한 제2 영상정보를 획득하는 단계;
상기 제1 영상정보 및 상기 제2 영상정보를 바탕으로 상기 객체와의 거리(r)를 측정하는 단계;
상기 도로 정보로부터 상기 도로의 종류를 판단하고, 상기 도로가 이면도로인 경우, 상기 제1 영상정보 또는 상기 제2 영상정보에 존재하는 객체의 폭 및 높이를 기초로 과속방지턱인지 판단하는 단계;
상기 도로가 이면도로이고, 상기 도로 상에 과속방지턱이 존재하는 경우, 상기 측정된 객체와의 거리(r)를 기초로 자동으로 자동차의 속도를 줄이는 단계;를 포함하고,
거리측정부에서 측정한 객채와의 거리(r)는 아래 수학식1에 의해 계산되는 스테레오 비전을 이용한 과속 방지턱 감지 제어방법.
[수학식1]
Figure 112015010395525-pat00003

r : 객체까지 거리
f : 제1 카메라 및 제2 카메라의 초점 거리
b : 제1 카메라 및 제2 카메라 사이의 거리
d : 제1 카메라에 입력된 객체의 x축 거리에서 제2 카메라에 입력된 상기 객체의 x축 거리를 뺀 길이
Receiving road information through a position sensing module;
Acquiring first image information on an object on the road through a first camera;
Acquiring second image information for an object on the road at a different angle than the first camera through a second camera;
Measuring a distance (r) to the object based on the first image information and the second image information;
Determining a type of the road from the road information, and determining whether the road surface is a road surface, based on the width and height of the object existing in the first image information or the second image information;
And automatically reducing the speed of the automobile on the basis of the distance r from the measured object when the road is a back road and a speed braking obstacle is present on the road,
Wherein the distance r from the object measured by the distance measuring unit is calculated by Equation (1) below.
[Equation 1]
Figure 112015010395525-pat00003

r: distance to object
f: focal length of the first camera and the second camera
b: distance between the first camera and the second camera
d is a length obtained by subtracting the x-axis distance of the object input to the second camera from the x-axis distance of the object input to the first camera,
삭제delete 제 5항에 있어서,
상기 도로가 이면도로이고, 상기 도로 상의 객체가 과속방지턱인 경우, 상기측정된 객체와의 거리(r)를 기초로 시각적, 청각적 또는 촉각적 알람을 발생하는 단계를 더 포함하는 스테레오 비전을 이용한 과속 방지턱 감지 제어방법.
6. The method of claim 5,
Further comprising the step of generating a visual, auditory or tactile alarm based on the distance r to the measured object when the road is a back road and the object on the road is an overspeed braking obstacle, Speed overshoot detection control method.
KR1020130133123A 2013-11-04 2013-11-04 Driver assistance systems and controlling method for the same KR101535722B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130133123A KR101535722B1 (en) 2013-11-04 2013-11-04 Driver assistance systems and controlling method for the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130133123A KR101535722B1 (en) 2013-11-04 2013-11-04 Driver assistance systems and controlling method for the same

Publications (2)

Publication Number Publication Date
KR20150051546A KR20150051546A (en) 2015-05-13
KR101535722B1 true KR101535722B1 (en) 2015-07-24

Family

ID=53388992

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130133123A KR101535722B1 (en) 2013-11-04 2013-11-04 Driver assistance systems and controlling method for the same

Country Status (1)

Country Link
KR (1) KR101535722B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109263636A (en) * 2018-08-31 2019-01-25 深圳市易成自动驾驶技术有限公司 Speed adjusting method, device and computer readable storage medium

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3072633B1 (en) * 2017-10-24 2019-11-01 Valeo Schalter Und Sensoren Gmbh ASSISTING THE DRIVING OF A MOTOR VEHICLE ON THE APPROACH OF A SPEED RETARDER
CN108860101A (en) * 2018-04-20 2018-11-23 深圳市路畅智能科技有限公司 For the safety assistant driving method of deceleration strip
KR102506878B1 (en) * 2018-11-02 2023-03-08 현대자동차주식회사 Apparatus and method for controlling transmission of vehicle
CN111688691B (en) * 2019-12-03 2021-09-24 矩阵数据科技(上海)有限公司 Intelligent driving data parameter adjusting system
KR102353530B1 (en) * 2021-01-21 2022-01-21 주식회사 자동기 Automatic cruise maintaining method for clean vehicles
KR20230020853A (en) * 2021-08-04 2023-02-13 주식회사 넥스트칩 Object detection method and electronic device performing the method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003057051A (en) * 2001-08-10 2003-02-26 Matsushita Electric Ind Co Ltd Navigation system and judgment method for vehicle running position in the same
KR101030211B1 (en) * 2010-01-07 2011-04-22 쓰리에이치비젼주식회사 System and method for detecting road and object
KR20120051552A (en) * 2010-11-12 2012-05-22 현대자동차주식회사 System for controlling vehicle and detecting a speed bump

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003057051A (en) * 2001-08-10 2003-02-26 Matsushita Electric Ind Co Ltd Navigation system and judgment method for vehicle running position in the same
KR101030211B1 (en) * 2010-01-07 2011-04-22 쓰리에이치비젼주식회사 System and method for detecting road and object
KR20120051552A (en) * 2010-11-12 2012-05-22 현대자동차주식회사 System for controlling vehicle and detecting a speed bump

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109263636A (en) * 2018-08-31 2019-01-25 深圳市易成自动驾驶技术有限公司 Speed adjusting method, device and computer readable storage medium

Also Published As

Publication number Publication date
KR20150051546A (en) 2015-05-13

Similar Documents

Publication Publication Date Title
KR101535722B1 (en) Driver assistance systems and controlling method for the same
US11577744B2 (en) Vehicle system and vehicle
CN108263278B (en) Pedestrian detection and pedestrian anti-collision device and method based on sensor integration
US9963149B2 (en) Vehicle control device
JP6460008B2 (en) Automatic driving device
US9429946B2 (en) Driving control system and dynamic decision control method thereof
KR101511858B1 (en) Advanced Driver Assistance System(ADAS) and controlling method for the same
JP6269606B2 (en) Vehicle control device
KR101545054B1 (en) Driver assistance systems and controlling method for the same
US7145441B2 (en) Method and device for preventing collision of vehicles
KR101552017B1 (en) Performance enhanced driver assistance systems and controlling method for the same
CN111383477B (en) Information presentation device
JP2017151703A (en) Automatic driving device
CN110920618A (en) Vehicle control system and vehicle control method
KR101511860B1 (en) Driver assistance systems and controlling method for the same
KR101519215B1 (en) Driver assistance systems and controlling method for the same
JP2005280538A (en) Driving safety device
JP2006024103A (en) Device for supporting vehicle driving
KR101511864B1 (en) An Active Cruise Control Apparatus and A Method for the same
KR101602021B1 (en) An Active Cruise Control Apparatus and A Method for the same
JP2017151704A (en) Automatic driving device
KR101535723B1 (en) An Active Cruise Control Apparatus and A Method for the same
KR101511863B1 (en) Driver assistance systems and controlling method for the same
JP7216695B2 (en) Surrounding vehicle monitoring device and surrounding vehicle monitoring method
KR101519214B1 (en) Driver Assistance apparatus and controlling method for the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180627

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190625

Year of fee payment: 5