KR101622041B1 - Detection system and method for preceding vehicle at close range - Google Patents

Detection system and method for preceding vehicle at close range Download PDF

Info

Publication number
KR101622041B1
KR101622041B1 KR1020140134311A KR20140134311A KR101622041B1 KR 101622041 B1 KR101622041 B1 KR 101622041B1 KR 1020140134311 A KR1020140134311 A KR 1020140134311A KR 20140134311 A KR20140134311 A KR 20140134311A KR 101622041 B1 KR101622041 B1 KR 101622041B1
Authority
KR
South Korea
Prior art keywords
preceding vehicle
vehicle
image
distance
speed
Prior art date
Application number
KR1020140134311A
Other languages
Korean (ko)
Other versions
KR20160041136A (en
Inventor
한재현
강용규
장재환
김경원
Original Assignee
주식회사 만도
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 만도 filed Critical 주식회사 만도
Priority to KR1020140134311A priority Critical patent/KR101622041B1/en
Publication of KR20160041136A publication Critical patent/KR20160041136A/en
Application granted granted Critical
Publication of KR101622041B1 publication Critical patent/KR101622041B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/14Adaptive cruise control
    • B60W30/16Control of distance between vehicles, e.g. keeping a distance to preceding vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo or light sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4042Longitudinal speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/802Longitudinal distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/804Relative longitudinal speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/08Predicting or avoiding probable or impending collision

Abstract

본 발명은 근거리 선행차량 감지시스템 및 방법에 관한 것으로서, 본 감지시스템은, 차량의 전방을 촬영하는 전방 카메라로부터 촬영된 영상을 처리하여 선행차량과의 거리, 선행차량의 속도 및 가속도를 산출하는 제1선행차량 감지유닛; 차량주변을 촬영하는 복수의 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하고, 어라운드 뷰 영상으로부터 선행차량을 감지하여 선행차량과의 거리, 상기 선행차량의 속도 및 가속도를 산출하는 제2선행차량 감지유닛; 및 전방 카메라에서 촬영된 영상의 처리결과에 따라 제1선행차량 감지유닛과 제2선행차량 감지유닛 중 하나를 작동시키는 운행제어모듈;을 포함한다. 이에 의해, 어라운드 뷰 모니터링 시스템을 이용하여 선행차량의 정확한 위치를 파악하고, 선행차량의 속도와 가속도를 정확히 산출할 수 있다. 또한, 정확한 위치 파악으로 인해, 선행차량과의 추돌 가능성을 운전자에게 경고하거나 자차를 제동시킬 수 있으므로, 선행차량과의 추돌을 방지하여 안전한 차량 운행이 가능하도록 한다. [0001] The present invention relates to a system and method for detecting a near-by-the-preceding vehicle, and more particularly, to a system and method for detecting a near-by preceding vehicle, which comprises processing the image photographed by a front camera for photographing the front of the vehicle, 1 preceding vehicle detection unit; A system for processing an image photographed by a plurality of cameras for photographing the surroundings of a vehicle to form an aurally view image of the vehicle, detecting a preceding vehicle from the surrounding view image and calculating a distance to the preceding vehicle, a speed and an acceleration of the preceding vehicle 2 preceding vehicle detection unit; And a driving control module for operating one of the first preceding vehicle detecting unit and the second preceding vehicle detecting unit according to the processing result of the image photographed by the front camera. Thus, the accurate position of the preceding vehicle can be grasped by using the surrounding view monitoring system, and the speed and acceleration of the preceding vehicle can be accurately calculated. In addition, due to the precise positioning, it is possible to warn the driver of the possibility of a collision with the preceding vehicle or braking the vehicle, so that collision with the preceding vehicle can be prevented to enable safe driving.

Description

근거리 선행차량 감지시스템 및 방법{DETECTION SYSTEM AND METHOD FOR PRECEDING VEHICLE AT CLOSE RANGE}TECHNICAL FIELD [0001] The present invention relates to a proximity antecedent vehicle detection system and a proximity antecedent vehicle detection system,

본 발명은 근거리 선행차량 감지시스템 및 방법에 관한 것으로서, 보다 상세하게는, 자차와 선행차량과의 거리가 근접한 경우, 어라운드 뷰 모니터링 시스템을 통해 촬영된 영상을 이용하여 선행차량과의 거리, 선행차량의 속도와 가속도를 정확하게 산출할 수 있도록 하는 근거리 선행차량 감지시스템 및 방법에 관한 것이다. More particularly, the present invention relates to a system and method for detecting a near ahead vehicle, and more particularly, to a system and method for detecting a near ahead vehicle, And more particularly, to a system and method for detecting a proximity to a preceding vehicle that can accurately calculate a speed and an acceleration of the vehicle.

현대사회에서 자동차의 사용이 급격히 증가함에 따라, 매년 자동차 사고로 인한 사망자나 부상자의 수가 수천만명에 이르고 있다. 이러한 교통사고의 90%가 운전자의 부주의에 의해 발생하거나, 앞차와 간격을 충분히 두지 않고 운전하기 때문에 발생한다. With the rapid increase in the use of cars in modern society, the number of fatalities and casualties due to car accidents has reached tens of millions of people every year. Ninety percent of these traffic accidents occur because of carelessness by the driver, or because they drive without enough space between the front and the rear.

이에 따라, 운전자에게 잠재적 추돌에 대한 경보를 제공하거나 운전을 보조함으로써, 교통사고로 발생하는 인명 및 경제적 손실을 감소시키기 위해 다양한 자동차 기술이 개발되고 있다. 이러한 기술에는 적응 순항 제어(ACC: Active Cruise Control) 기술, 차선 변경 보조 (Lane Change Assistance) 기술, 차선 이탈 경보 (Lane Departure Warning) 기술, 전방 충돌 경고 (FCW: Forward Collision Warning) 기술, 및 주차 보조 (Parking Assistance) 기술 등이 있다. Accordingly, a variety of automotive technologies are being developed to reduce the loss of life and the economy caused by traffic accidents by providing the driver with an alert for potential collisions or by assisting the driver. These technologies include Active Cruise Control (ACC) technology, Lane Change Assistance technology, Lane Departure Warning technology, Forward Collision Warning (FCW) technology, and Parking Assist (Parking Assistance) technology.

이 중, 적응 순항 제어 기술, 차선 변경 보조 기술, 차선 이탈 경보 기술, 전방 충돌 경고 기술 등을 구현하기 위해서는 주행 중 선행차량을 감지하여 선행차량과의 거리, 선행차량의 속도와 가속도를 정확히 산출해야 한다. In order to implement the adaptive cruise control technology, lane change assistant technology, lane departure warning technology, and forward collision warning technology, it is necessary to accurately detect the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle by sensing the preceding vehicle while driving do.

이를 위해, 종래에는 전방 카메라로 선행차량을 촬영하고, 다음의 두 가지 방법으로 선행차량과의 거리, 선행차량의 속도와 가속도를 산출하였다. 하나는 선행차량과 도로가 만나는 지점, 즉 선행차량의 바닥면을 검출하여 추정하는 방법으로서, 이 방법은 차량의 바닥면이 촬영되지 않은 경우, 오차가 발생하게 된다. 다른 하나는 차량의 차폭 또는 크기를 추정하는 방법으로서, 이 방법은 차폭 또는 크기 추정시 오차가 발생할 경우, 선행차량과의 거리 추정에도 오차가 발생하게 된다. 이에 따라, 선행차량과의 거리, 선행차량의 속도와 가속도를 산출함에 있어서, 오차 발생을 최소한으로 감소시킬 수 있는 방법을 모색하여야 할 것이다. For this purpose, the preceding vehicle was photographed with a front camera, and the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle were calculated by the following two methods. One is a method of detecting and estimating a point at which a preceding vehicle meets a road, that is, a bottom surface of a preceding vehicle. In this method, an error occurs when the bottom surface of the vehicle is not photographed. The other is a method for estimating the width or size of a vehicle. In this method, when an error occurs in estimating the width or size, an error also occurs in the distance estimation with respect to the preceding vehicle. Accordingly, in calculating the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle, a method of minimizing the occurrence of errors should be sought.

본 발명은, 어라운드 뷰 모니터링 시스템을 통해 촬영된 영상을 이용하여 선행차량과의 거리, 선행차량의 속도와 가속도를 정확하게 산출할 수 있도록 하는 근거리 선행차량 감지시스템 및 방법을 제안한다. The present invention proposes a proximity lead vehicle detection system and method that can accurately calculate a distance to a preceding vehicle, a speed and an acceleration of a preceding vehicle by using an image captured through the surround view monitoring system.

상기 목적은, 차량의 전방을 촬영하는 전방 카메라로부터 촬영된 영상을 처리하여 선행차량과의 거리, 상기 선행차량의 속도 및 가속도를 산출하는 제1선행차량 감지유닛; 차량주변을 촬영하는 복수의 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하고, 상기 어라운드 뷰 영상으로부터 선행차량을 감지하여 상기 선행차량과의 거리, 상기 선행차량의 속도 및 가속도를 산출하는 제2선행차량 감지유닛; 및 상기 전방 카메라에서 촬영된 영상의 처리결과에 따라 상기 제1선행차량 감지유닛과 제2선행차량 감지유닛 중 하나를 작동시키는 운행제어모듈;을 포함하는 것을 특징으로 하는 근거리 선행차량 감지시스템에 의해 달성될 수 있다.The above-described object is achieved by a first vehicle detection unit for processing an image photographed from a front camera for photographing a front of a vehicle to calculate a distance to the preceding vehicle, a speed and an acceleration of the preceding vehicle; A method for controlling a vehicle, the method comprising the steps of: processing an image taken by a plurality of cameras taken around a vehicle to form an arousal view image of the vehicle; sensing a preceding vehicle from the surrounding view image and calculating a distance to the preceding vehicle, A second preceding vehicle detecting unit for detecting a second preceding vehicle; And a driving control module for operating one of the first preceding vehicle detecting unit and the second preceding vehicle detecting unit according to a processing result of the image photographed by the front camera Can be achieved.

상기 목적은, 차체에 설치되어 차량주변을 촬영하는 복수의 카메라; 상기 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하는 제2영상처리부; 상기 어라운드 뷰 영상에서 선행차량의 에지를 감지하는 제2차량감지부; 상기 제2차량감지부에서 감지된 상기 선행차량과의 거리를 산출하는 제2거리산출부; 상기 선행차량과의 거리를 이용하여 상기 선행차량의 속도와 가속도를 산출하는 제2속도산출부;를 포함하는 것을 특징으로 하는 근거리 선행차량 감지시스템에 의해서도 달성될 수 있다. The above objects are achieved by a vehicle comprising: a plurality of cameras installed in a vehicle body and photographing the surroundings of the vehicle; A second image processing unit for processing an image photographed by the camera to form an overview image of the vehicle; A second vehicle sensing unit for sensing an edge of the preceding vehicle in the surround view image; A second distance calculation unit for calculating a distance to the preceding vehicle detected by the second vehicle sensing unit; And a second speed calculation unit for calculating a speed and an acceleration of the preceding vehicle by using the distance from the preceding vehicle.

상기 목적은, 전방 카메라로부터 촬영된 차량의 전방 영상을 처리하는 제1처리단계; 상기 전방 영상에 선행차량의 전체 이미지가 촬영되었는지 여부를 판단하는 판단단계; 상기 전방 영상에 선행차량의 전체 이미지가 촬영되지 아니한 경우, 상기 차량주변을 촬영하는 촬영단계; 상기 복수의 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하는 제2처리단계; 상기 어라운드 뷰 영상으로부터 선행차량을 감지하는 감지단계; 및 상기 선행차량과의 거리, 상기 선행차량의 속도와 가속도를 산출하는 산출단계;를 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법에 의해서도 달성될 수 있다. The above object can be achieved by a vehicle comprising: a first processing step of processing a forward image of a vehicle photographed from a front camera; A determination step of determining whether the entire image of the preceding vehicle is photographed in the forward image; A photographing step of photographing the vicinity of the vehicle when the entire image of the preceding vehicle is not taken in the forward image; A second processing step of processing an image photographed by the plurality of cameras to form an overview image of the vehicle; A sensing step of sensing a preceding vehicle from the surround view image; And a calculating step of calculating a distance between the preceding vehicle and the preceding vehicle, and a speed and an acceleration of the preceding vehicle.

본 발명에 따른 근거리 선행차량 감지시스템 및 방법에서는, 선행차량이 자차에 근접하여 전방 카메라로는 선행차량 전체를 촬영하지 못하는 경우, 어라운드 뷰 영상을 이용하여 선행차량의 정확한 위치를 파악하고, 이를 이용하여 선행차량의 속도와 가속도를 정확히 산출할 수 있다. 또한, 추돌 가능성이 있는 경우, 운전자에게 이를 정확히 경고하거나 자차를 제동시킬 수 있으므로, 선행차량과의 추돌을 방지하여 안전한 차량 운행이 가능하도록 한다. In the proximity preceding vehicle detection system and method according to the present invention, when the preceding vehicle is close to the vehicle and the front camera can not photograph the entire preceding vehicle, the accurate position of the preceding vehicle is detected using the surrounding view image, So that the speed and acceleration of the preceding vehicle can be accurately calculated. Further, when there is a possibility of a collision, the driver can be warned or braked the vehicle precisely, thereby preventing a collision with the preceding vehicle, thereby enabling safe vehicle operation.

도 1은 본 발명에 따른 근거리 선행차량 감지시스템의 구성블록도,
도 2는 전방 카메라에서 촬영된 전방 영상의 일 실시예,
도 3은 어라운드 뷰 영상의 일 실시예,
도 4는 본 발명에 따른 근거리 선행차량 감지시스템에서 선행차량과의 거리, 선행차량의 속도 및 가속도를 구하는 과정을 보인 흐름도이다.
FIG. 1 is a block diagram of a system for detecting a near-by vehicle in accordance with the present invention.
FIG. 2 shows an embodiment of a front image photographed by a front camera,
3 shows an embodiment of the surround view image,
FIG. 4 is a flowchart illustrating a process of calculating a distance to a preceding vehicle, a speed of a preceding vehicle, and an acceleration in a near-by preceding vehicle detection system according to the present invention.

이하, 본 발명의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성 요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명을 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, some embodiments of the present invention will be described in detail with reference to exemplary drawings. It should be noted that, in adding reference numerals to the constituent elements of the drawings, the same constituent elements are denoted by the same reference symbols as possible even if they are shown in different drawings. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

또한, 본 발명의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 또는 접속될 수 있지만, 각 구성 요소 사이에 또 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.In describing the components of the present invention, terms such as first, second, A, B, (a), and (b) may be used. These terms are intended to distinguish the constituent elements from other constituent elements, and the terms do not limit the nature, order or order of the constituent elements. When a component is described as being "connected", "coupled", or "connected" to another component, the component may be directly connected to or connected to the other component, It should be understood that an element may be "connected," "coupled," or "connected."

도 1은 본 발명에 따른 근거리 선행차량 감지시스템의 구성블록도이고, 도 2는 전방 카메라에서 촬영된 전방 영상의 일 실시예이고, 도 3은 어라운드 뷰 영상의 일 실시예이다. FIG. 1 is a block diagram of a proximity prior vehicle detection system according to the present invention. FIG. 2 is an embodiment of a front image captured by a front camera, and FIG. 3 is an embodiment of an surround view image.

본 발명에 따른 근거리 선행차량 감지시스템은, 자차와 선행차량과의 거리가 과도하게 근접하여 전방 카메라(11)를 통해 촬영된 영상으로 선행차량과의 거리, 선행차량의 속도, 가속도를 정확하게 산출하기 곤란한 경우, 어라운드 뷰 모니터링 시스템을 통해 촬영된 영상을 이용하여 선행차량과의 거리, 속도, 가속도를 정확하게 산출할 수 있도록 한다. The proximity preceding vehicle detection system according to the present invention is a system for accurately detecting the distance to the preceding vehicle, the speed of the preceding vehicle, and the acceleration with a video captured through the front camera 11 so that the distance between the vehicle and the preceding vehicle is excessively close In case of difficulty, it is possible to accurately calculate the distance, speed and acceleration with respect to the preceding vehicle by using an image captured through the surround view monitoring system.

본 근거리 선행차량 감지시스템은, 전방 카메라(11)를 이용하여 선행차량을 감지하는 제1선행차량 감지유닛(10)과, 어라운드 뷰 모니터링 시스템의 카메라를 이용하여 선행차량을 감지하는 제2선행차량 감지유닛(20)과, 제1선행차량 감지유닛(10)과 제2선행차량 감지유닛(20)의 동작을 제어하고 제1선행차량 감지유닛(10)과 제2선행차량 감지유닛(20)에서 감지된 결과에 따라 운전자에게 경보를 제공하거나 차량을 제동하는 등의 운행제어를 수행하는 운행제어모듈(30)을 포함할 수 있다. The proximity lead vehicle detection system includes a first preceding vehicle detection unit (10) for detecting a preceding vehicle using a front camera (11), a second preceding vehicle detection unit The first preceding vehicle detection unit 10 and the second preceding vehicle detection unit 20 are controlled to control the operation of the first preceding vehicle detection unit 10 and the second preceding vehicle detection unit 20, And an operation control module 30 for performing an operation control such as providing an alarm to the driver or braking the vehicle according to a result sensed by the operation control module 30.

제1선행차량 감지유닛(10)은, 전방 카메라(11), 제1영상처리부(13), 제1차량감지부(15), 제1거리산출부(17), 제1속도산출부(19)를 포함할 수 있다. The first preceding vehicle sensing unit 10 includes a front camera 11, a first image processing unit 13, a first vehicle sensing unit 15, a first distance calculating unit 17, a first speed calculating unit 19 ).

전방 카메라(11)는 차량의 전방에 설치되어 차량의 전방을 촬영하며, 하나가 설치될 수도 있고 복수개가 설치될 수도 있음은 물론이다. 전방 카메라(11)의 위치는 차량에 따라 상호 상이한 위치에 설치될 수 있다. It is needless to say that the front camera 11 is installed in front of the vehicle to photograph the front of the vehicle, and one or a plurality of front cameras may be installed. The positions of the front cameras 11 can be set at mutually different positions according to the vehicle.

제1영상처리부(13)는, 전방 카메라(11)에서 촬영된 영상을 처리하여 영상내에 촬영된 선행차량의 이미지를 감지할 수 있도록 한다. The first image processor 13 processes the image photographed by the front camera 11 to detect the image of the preceding vehicle photographed in the image.

제1차량감지부(15)는 제1영상처리부(13)에서 처리된 전방 영상에서 선행차량의 에지를 검출하여 선행차량을 인식하고, 선행차량 전체가 찰영되었는지 여부를 판단한다. 도 2의 경우, 선행차량이 자차에 인접하여 선행차량의 상부만이 촬영되었으며, 이에 따라, 선행차량은 사각형으로 인식되었다. The first vehicle sensing unit 15 detects an edge of the preceding vehicle in the forward image processed by the first image processing unit 13, recognizes the preceding vehicle, and determines whether or not the entire preceding vehicle has been picked up. In the case of FIG. 2, only the upper portion of the preceding vehicle was photographed by the preceding vehicle adjacent to the preceding vehicle, whereby the preceding vehicle was recognized as a rectangle.

제1차량감지부(15)에서 선행차량의 전체가 촬영되었는지를 판단할 때, 두 가지 방법을 사용할 수 있다. 하나는 촬영된 선행차량의 이미지를 미리 학습된 차량 이미지와 비교하는 방법으로서, 제1차량감지부(15)는 차량의 차제와 타이어를 모두 포함한 전체 차량 이미지에 대한 정보를 가지고 있으며, 전방 카메라(11)에서 촬영된 영상과 미리 학습된 이미지를 비교하여 두 이미지가 상호 유사한 형태를 띠고 있는지 여부를 판단하게 된다. 이에 따라, 두 이미지가 유사하면, 선행차량의 타이어를 비롯한 도로면을 포함하는 선행차량의 전체이미지가 촬영되었다고 볼 수 있다. 만약 두 이미지가 상이하면, 제1차량감지부(15)는 선행차량의 일부만 촬영된 것으로 판단할 수 있다. When the first vehicle sensing unit 15 determines whether the entire preceding vehicle has been photographed, two methods can be used. One is a method of comparing an image of a captured preceding vehicle with a previously learned vehicle image, wherein the first vehicle sensing unit 15 has information on the entire vehicle image including both the car's tires and the tires, 11 and the previously learned image are compared with each other to determine whether the two images have similar shapes. Accordingly, if the two images are similar, it can be seen that the entire image of the preceding vehicle including the road surface including the tires of the preceding vehicle is photographed. If the two images are different, the first vehicle sensing unit 15 can determine that only a part of the preceding vehicle is photographed.

다른 하나는 선행차량의 이미지의 크기와, 미리 저장하고 있는 차량 이미지의 폭 정보를 비교하는 방법으로서, 일반적으로 전방 카메라(11)에서 촬영된 차량이미지의 폭은 1.4 ~ 1.6m 정도에서 형성되므로, 촬영된 선행차량 이미지의 폭과 이 값을 비교하면 선행차량의 전체이미지가 촬영되었는지 여부를 추정할 수 있다. The other is a method of comparing the size of the image of the preceding vehicle with the width information of the vehicle image stored in advance. In general, the width of the vehicle image taken by the front camera 11 is about 1.4 to 1.6 m, By comparing this value with the width of the captured preceding vehicle image, it is possible to estimate whether or not the entire image of the preceding vehicle has been photographed.

제1차량감지부(15)에서 선행차량 전체가 촬영되지 아니한 것으로 판단되면, 제1차량감지부(15)는 선행차량 전체가 촬영되지 아니하였다는 정보를 운행제어모듈(30)로 제공한다. 선행차량 전체가 촬영되지 아니한 경우, 선행차량과의 거리 산출에 오차가 발생할 확률이 크므로, 이러한 오차를 방지하기 위해, 운행제어모듈(30)은 제1선행차량 감지유닛(10)의 동작을 정지시키고, 제2선행차량 감지유닛(20)을 동작시키게 된다. If the first vehicle sensing unit 15 determines that the entire preceding vehicle has not been photographed, the first vehicle sensing unit 15 provides the operation control module 30 with information that the entire preceding vehicle has not been photographed. If the entire preceding vehicle is not photographed, the probability of occurrence of an error in the distance calculation with respect to the preceding vehicle is high. Therefore, in order to prevent such an error, the operation control module 30 controls the operation of the first preceding vehicle sensing unit 10 And operates the second preceding vehicle detecting unit 20.

반면, 제1차량감지부(15)에서 선행차량의 전체가 촬영되었다고 판단되면, 해당 이미지는 제1거리산출부(17)로 전달된다. 제1거리산출부(17)에서는 선행차량 이미지의 크기 등을 이용하여 선행차량과 자차와의 거리를 산출한다. 선행차량과 자차와의 거리를 산출하는 것은 여러가지 다양한 방법을 사용할 수 있고, 본 발명의 요지와는 무관하므로 상세한 설명은 생략하기로 한다. On the other hand, if it is determined that the entire preceding vehicle is photographed in the first vehicle sensing unit 15, the image is transmitted to the first distance calculating unit 17. The first distance calculating unit 17 calculates the distance between the preceding vehicle and the vehicle using the size of the preceding vehicle image or the like. Various methods can be used to calculate the distance between the preceding vehicle and the vehicle, and are not related to the gist of the present invention, so a detailed description thereof will be omitted.

제1속도산출부(19)는 제1거리산출부(17)에서 산출된 선행차량과 자차와의 거리 정보를 제공받으며, 제공받은 거리를 미분하여 선행차량의 속도를 산출하고, 선행차량의 속도를 다시 미분하여 선행차량의 가속도를 산출할 수 있다. The first speed calculating section 19 is provided with the distance information between the preceding vehicle and the own vehicle calculated by the first distance calculating section 17, calculates the speed of the preceding vehicle by differentiating the provided distance, The acceleration of the preceding vehicle can be calculated.

제1속도산출부(19)는 산출된 선행차량과의 거리, 선행차량의 속도와 가속도 정보를 운행제어모듈(30)로 제공할 수 있다. The first speed calculating section 19 can provide the travel control module 30 with the distance to the calculated preceding vehicle, the speed of the preceding vehicle and the acceleration information.

운행제어모듈(30)은, 제1선행차량 감지유닛(10) 또는 제2선행차량 감지유닛(20)에서 선행차량과의 거리, 선행차량의 속도와 가속도 정보를 제공하면, 선행차량이 자차와 추돌할 가능성이 있는지 여부를 판단할 수 있다. When the driving control module 30 provides the distance to the preceding vehicle, the speed and the acceleration information of the preceding vehicle in the first preceding vehicle sensing unit 10 or the second preceding vehicle sensing unit 20, It is possible to judge whether or not there is a possibility of a collision.

판단결과, 추돌가능성이 있는 경우, 운행제어모듈(30)은, 네비게이션, 디스플레이부, HMI(Human Machine Interface)를 통해 추돌 가능성이 있음을 표시하거나 화면을 깜박여 운전자에게 경고를 줄 수 있다. 또는 음성메시지를 통해 추돌 가능성이 있음을 알릴 수도 있다. 또한, 운행제어모듈(30)은 급박한 상황이 되면, 제동장치로 명령신호를 제공함으로써, 제동기능을 동작시켜 자차가 정지하도록 제어할 수도 있다. As a result of the determination, if there is a possibility of a collision, the operation control module 30 may display a possibility of collision through navigation, a display unit, and an HMI (Human Machine Interface), or may warn the driver by flashing the screen. Alternatively, a voice message may indicate a possibility of a collision. In addition, when the driving control module 30 becomes imminent, the braking function may be operated by providing a command signal to the braking device so as to stop the vehicle.

운행제어모듈(30)은, 제1선행차량 감지유닛(10)의 제1차량감지부(15)로부터 선행차량의 일부만 촬영된 것으로 판단되면, 제1선행차량 감지유닛(10)의 작동을 정지시키고, 제2선행차량 감지유닛(20)을 작동시킬 수 있다. The operation control module 30 stops the operation of the first preceding vehicle sensing unit 10 when it is determined that only a part of the preceding vehicle is photographed from the first vehicle sensing portion 15 of the first preceding vehicle sensing unit 10 , And can activate the second preceding vehicle sensing unit 20.

제2선행차량 감지유닛(20)은, 복수의 카메라(21), 제2영상처리부(23), 제2차량감지부(25), 제2거리산출부(27), 제2속도산출부(29)를 포함할 수 있다. The second preceding vehicle detecting unit 20 includes a plurality of cameras 21, a second image processing unit 23, a second vehicle sensing unit 25, a second distance calculating unit 27, a second speed calculating unit 29).

복수의 카메라(21)는 어라운드 뷰 영상을 형성하기 위해 차량주변을 촬영하며, 차량의 둘레를 따라 일정 간격을 두고 장착될 수 있다. 복수의 카메라(21)는 차량의 하부 또는 측부를 촬영하여 어라운드 뷰 영상을 형성할 수 있는 위치에 장착된다. 여기서, 어라운드 뷰 영상은 기존의 어라운드 뷰 모니터링 시스템에 의해 처리되어 형성되는 영상으로서, 차량 주변의 영상을 차량의 상부에서 내려다본 것처럼 처리한 영상이다. The plurality of cameras 21 photograph the periphery of the vehicle to form the surround view image, and can be mounted at regular intervals along the periphery of the vehicle. The plurality of cameras 21 are mounted at positions where they can take an image of the lower portion or the side portion of the vehicle to form the surround view image. Here, the surround view image is an image formed by processing by a conventional surround view monitoring system, and is an image obtained by processing the image around the vehicle as viewed from above the vehicle.

제2영상처리부(23)는, 도 3에 도시된 바와 같이, 복수의 카메라(21)에서 촬영된 복수의 영상을 제공받아 미리 설정된 어라운드 뷰 모니터링 알고리즘을 이용하여 어라운드 뷰 영상을 생성할 수 있다. As shown in FIG. 3, the second image processing unit 23 can generate a plurality of images captured by the plurality of cameras 21, and generate an overview view image using a predetermined surrounding view monitoring algorithm.

제2차량감지부(25)는 제2영상처리부(23)에서 생성된 어라운드 뷰 영상에서 선행차량의 에지를 검출할 수 있다. 제2차량감지부(25)에서 선행차량의 에지가 검출되면, 제2차량감지부(25)는 선행차량의 위치에 대한 정보를 제2거리산출부(27)로 제공할 수 있다. The second vehicle sensing unit 25 can detect an edge of the preceding vehicle from the surrounding view image generated by the second image processing unit 23. [ When the edge of the preceding vehicle is detected in the second vehicle sensing section 25, the second vehicle sensing section 25 can provide the second distance calculating section 27 with information on the position of the preceding vehicle.

제2거리산출부(27)는 선행차량으로부터 자차까지의 거리를 산출할 수 있다. 이때, 어라운드 뷰 알고리즘에 의해 생성된 어라운드 뷰 영상의 폭은 이미 결정되어 있으므로, 제2거리산출부(27)는 어라운드 뷰 영상의 폭과 선행차량의 위치를 비교하여 선행차량과 자차 간의 거리를 산출할 수 있다. The second distance calculating section 27 can calculate the distance from the preceding vehicle to the own vehicle. At this time, since the width of the surrounding view image generated by the surround view algorithm has already been determined, the second distance calculating unit 27 compares the width of the surrounding view image with the position of the preceding vehicle and calculates the distance between the preceding vehicle and the preceding vehicle can do.

제2거리산출부(27)에서 산출된 선행차량과 자차 간의 거리 정보는 제2속도산출부(29)로 제공될 수 있다. 제2속도산출부(29)는, 제1속도산출부(19)와 마찬가지로, 선행차량과의 거리를 미분하여 선행차량의 속도를 산출할 수 있다. 그런 다음, 제2속도산출부(29)는 선행차량의 속도를 미분하여 선행차량의 가속도를 산출할 수 있다. The distance information between the preceding vehicle and the preceding vehicle calculated by the second distance calculating section 27 may be provided to the second speed calculating section 29. [ Similarly to the first speed calculating section 19, the second speed calculating section 29 can calculate the speed of the preceding vehicle by differentiating the distance from the preceding vehicle. Then, the second speed calculating section 29 can calculate the acceleration of the preceding vehicle by differentiating the speed of the preceding vehicle.

제2거리산출부(27)에서 산출된 선행차량과의 거리 정보와, 제2속도산출부(29)에서 산출된 선행차량의 속도와 가속도는 운행제어모듈(30)로 제공될 수 있다. The distance information to the preceding vehicle calculated by the second distance calculating section 27 and the speed and acceleration of the preceding vehicle calculated by the second speed calculating section 29 may be provided to the travel control module 30. [

운행제어모듈(30)에서는 상술한 바와 마찬가지로, 선행차량과의 거리, 선행차량의 속도와 가속도에 기초하여 선행차량과 자차가 추돌할 가능성이 있는지 여부를 판단할 수 있다. 판단결과 추돌할 가능성이 있는 경우, 운행제어모듈(30)은 운전자에게 경고할 수도 있고, 직접 제동장치를 제어하여 차량을 제동할 수도 있음은 물론이다. The operation control module 30 can determine whether there is a possibility of collision between the preceding vehicle and the own vehicle based on the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle as described above. If it is determined that there is a possibility of a collision, the operation control module 30 may warn the driver or may directly brak the vehicle by controlling the braking device.

한편, 상술한 실시예에서는 별도의 운행제어모듈(30)을 두고, 운행제어모듈(30)에서 제1선행차량 감지유닛(10)과 제2선행차량 감지유닛(20)의 동작을 제어하고, 제1선행차량 감지유닛(10)과 제2선행차량 감지유닛(20)로부터의 감지결과에 따라 운전자에게 경고하거나 제동장치를 제어하도록 하고 있다. 그러나, 제1선행차량 감지유닛(10)과 제2선행차량 감지유닛(20) 모두에 운행제어모듈(30)과 동일한 기능을 갖는 구성요소를 포함시킬 수도 있음은 물론이다. 또한, 제1선행차량 감지유닛(10)과 제2선행차량 감지유닛(20) 중 한 곳에만 운행제어모듈(30)과 동일한 기능을 갖는 구성요소를 구비하도록 한 다음, 타측 감지유닛에서 감지된 결과를 해당 구성요소에 제공하여 제어가 이루어지도록 하는 방법도 가능하다. Meanwhile, in the above-described embodiment, a separate operation control module 30 is provided to control operations of the first preceding vehicle sensing unit 10 and the second preceding vehicle sensing unit 20 in the operation control module 30, And warns the driver or controls the braking device according to the detection results from the first preceding vehicle detecting unit 10 and the second preceding vehicle detecting unit 20. [ However, it goes without saying that both of the first preceding vehicle sensing unit 10 and the second preceding vehicle sensing unit 20 may include components having the same functions as the operation control module 30. In addition, only one of the first preceding vehicle sensing unit 10 and the second preceding vehicle sensing unit 20 is provided with components having the same function as the operation control module 30, and then the result detected by the other sensing unit May be provided to the corresponding component so that the control is performed.

이러한 구성에 따른 근거리 선행차량 감지시스템에서 선행차량과의 거리, 선행차량의 속도 및 가속도를 구하는 과정을 도 4를 참조하여 설명하기로 한다. The process of determining the distance to the preceding vehicle, the speed and acceleration of the preceding vehicle in the near-by preceding vehicle detection system according to this configuration will be described with reference to FIG.

제1선행차량 감지유닛(10)의 전방 카메라(11)에서 차량의 전방을 촬영하면(S400), 차량의 전방 영상은 제1영상처리부(13)로 전달되어 처리된 다음, 제1차량감지부(15)로 제공되어 전방 영상에서 선행차량의 이미지가 검출된다. 그런 다음, 제1차량감지부(15)는 검출된 선행차량의 이미지와 미리 학습된 이미지를 비교하고, 비교결과 선행차량의 바닥면이 촬영되어 선행차량 전체가 촬영되었다고 판단되면(S405-Y), 해당 이미지를 제1거리산출부(17)로 제공한다. When the front of the vehicle is photographed by the front camera 11 of the first preceding vehicle sensing unit 10 at step S400, the forward image of the vehicle is transmitted to the first image processing unit 13 and processed, (15) to detect the image of the preceding vehicle in the forward image. Then, the first vehicle sensing unit 15 compares the detected image of the preceding vehicle with the previously learned image, and if the bottom surface of the preceding vehicle is photographed as a result of the comparison and it is determined that the entire preceding vehicle has been photographed (S405-Y) , And provides the image to the first distance calculating unit 17.

제1거리산출부(17)에서는 미리 설정된 방법을 이용하여 선행차량과의 거리를 산출하고(S407), 산출된 거리 정보를 제1속도산출부(19)로 제공한다. 제1속도산출부(19)에서는 거리를 미분하여 선행차량의 속도를 산출하고, 속도를 미분하여 선행차량의 가속도를 산출한다(S409). 산출된 선행차량과의 거리, 선행차량의 속도와 가속도 정보는 운행제어모듈(30)로 제공된다(S440). The first distance calculating section 17 calculates the distance to the preceding vehicle by a predetermined method (S407), and provides the calculated distance information to the first speed calculating section 19. [ The first speed calculating unit 19 calculates the speed of the preceding vehicle by differentiating the distance, and calculates the acceleration of the preceding vehicle by differentiating the speed (S409). The distance to the calculated preceding vehicle, the speed and acceleration information of the preceding vehicle are provided to the operation control module 30 (S440).

운행제어모듈(30)에서는 선행차량과의 거리, 선행차량의 속도와 가속도에 기초하여 선행차량과 자차가 추돌할 가능성이 있는지 판단하고, 판단결과 추돌가능성이 있는 경우, 운전자에게 경보를 제공하거나 제동장치를 제어하는 제어신호를 생성하여 제공한다. The operation control module 30 judges whether there is a possibility that the preceding vehicle and the preceding vehicle collide with each other based on the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle. And generates and provides a control signal for controlling the apparatus.

한편, 제1선행차량 감지유닛(10)의 제1차량감지부(15)에서 선행차량의 일부만 촬영되었다고 판단하면(S406-N), 운행제어모듈(30)로 선행차량의 일부만 촬영되었다는 것을 알린다. 그러면 운행제어모듈(30)은 제2선행차량 감지유닛(20)을 작동시킨다(S410). On the other hand, when the first vehicle sensing unit 15 of the first preceding vehicle sensing unit 10 determines that only a part of the preceding vehicle is photographed (S406-N), the operation control module 30 informs that only a part of the preceding vehicle has been photographed . Then, the operation control module 30 activates the second preceding vehicle sensing unit 20 (S410).

제2선행차량 감지유닛(20)의 복수의 카메라(21)에서는 차량 주변을 촬영하여 촬영된 영상을 제2영상처리부(23)로 전달하고(S415), 제2영상처리부(23)에서는 어라운드 뷰 영상을 형성한다(S420). 그런 다음, 제2차량감지부(25)에서는 어라운드 뷰 영상에서 선행차량의 에지를 검출하여 선행차량을 감지하여 선행차량에 대한 정보를 제2거리산출부(27)로 전달한다(S425). 제2거리산출부(27)에서는 선행차량과 자차와의 거리를 산출하여 제2속도산출부(29)로 제공한다(S430). The plurality of cameras 21 of the second preceding vehicle sensing unit 20 photographs the surroundings of the vehicle and transmits the photographed images to the second image processing unit 23 in step S415. In the second image processing unit 23, Thereby forming an image (S420). Then, the second vehicle sensing unit 25 detects an edge of the preceding vehicle in the vicinity view image, detects the preceding vehicle, and transmits information on the preceding vehicle to the second distance calculating unit 27 (S425). The second distance calculating unit 27 calculates the distance between the preceding vehicle and the preceding vehicle and provides the distance to the second speed calculating unit 29 (S430).

제2속도산출부(29)에서는 선행차량과의 거리를 미분하여 선행차량의 속도와 가속도를 산출하고(S435), 산출된 선행차량의 속도와 가속도와 함께 선행차량과의 거리에 대한 정보를 운행제어모듈(30)로 제공한다(S440). The second speed calculating section 29 calculates the speed and acceleration of the preceding vehicle by differentiating the distance from the preceding vehicle (S435), and calculates information about the distance between the calculated preceding vehicle and the preceding vehicle together with the calculated speed and acceleration To the control module 30 (S440).

운행제어모듈(30)에서는 선행차량과의 거리, 선행차량의 속도와 가속도에 기초하여 선행차량과 자차가 추돌할 가능성이 있는지 판단하고, 판단결과 추돌가능성이 있는 경우, 운전자에게 경보를 제공하거나 제동장치를 제어하는 제어신호를 생성하여 제공한다. The operation control module 30 judges whether there is a possibility that the preceding vehicle and the preceding vehicle collide with each other based on the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle. And generates and provides a control signal for controlling the apparatus.

이러한 본 발명에 따른 근거리 선행차량 감지시스템에서는, 선행차량이 자차에 근접하여 전방 카메라(11)로는 선행차량 전체를 촬영하지 못하는 경우, 어라운드 뷰 모니터링 시스템을 이용하여 선행차량의 정확한 위치를 파악하고, 이를 이용하여 선행차량의 속도와 가속도를 정확히 산출할 수 있다. 이에 따라, 근거리 선행차량 감지시스템의 성능 및 품질을 향상시킬 수 있다. 또한, 선행차량이 자차와 거리가 근접하여 추돌 가능성이 있는 경우, 운전자에게 이를 정확히 경고하거나 자차를 제동시킬 수 있으므로, 선행차량과의 추돌을 방지하여 안전한 차량 운행이 가능하도록 한다. In the proximity preceding vehicle detection system according to the present invention, when the preceding vehicle is close to the vehicle and the front camera 11 can not shoot the entire preceding vehicle, the precise location of the preceding vehicle is detected using the surrounding view monitoring system, The speed and the acceleration of the preceding vehicle can be accurately calculated. Accordingly, the performance and quality of the near-by-lead vehicle detection system can be improved. Further, when the preceding vehicle is close to the vehicle and there is a possibility of a collision, the driver can be warned or braked by the driver precisely, so that collision with the preceding vehicle can be prevented to enable safe driving.

전술한 실시예에서 언급한 표준내용 또는 표준문서들은 명세서의 설명을 간략하게 하기 위해 생략한 것으로 본 명세서의 일부를 구성한다. 따라서, 위 표준내용 및 표준문서들의 일부의 내용을 본 명세서에 추가하거나 청구범위에 기재하는 것은 본 발명의 범위에 해당하는 것으로 해석되어야 한다. The standard content or standard documents referred to in the above-mentioned embodiments constitute a part of this specification, for the sake of simplicity of description of the specification. Therefore, it is to be understood that the content of the above standard content and portions of the standard documents are added to or contained in the scope of the present invention.

이상의 설명은 본 발명의 기술사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술사상의 범위가 한정되는 것은 아니다. 본 발명의 보호범위는 아래의 청구범위에 의하여 해석되어야하며, 그와 동등한 범위내에 있는 모든 기술사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.The foregoing description is merely illustrative of the technical idea of the present invention, and various changes and modifications may be made by those skilled in the art without departing from the essential characteristics of the present invention. Therefore, the embodiments disclosed in the present invention are intended to illustrate rather than limit the scope of the present invention, and the scope of the technical idea of the present invention is not limited by these embodiments. The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents thereof should be construed as falling within the scope of the present invention.

10 : 제1선행차량 감지유닛 11 : 전방 카메라
13 : 제1영상처리부 15 : 제1차량감지부
17 : 제1거리산출부 19 : 제1속도산출부
20 : 제2선행차량 감지유닛 21 : 복수의 카메라
23 : 제2영상처리부 25 : 제2차량감지부
27 : 제2거리산출부 29 : 제2속도산출부
30 : 운행제어모듈
10: first preceding vehicle detecting unit 11: front camera
13: first image processing unit 15: first vehicle sensing unit
17: first distance calculating section 19: first speed calculating section
20: a second preceding vehicle detecting unit 21: a plurality of cameras
23: second image processing unit 25: second vehicle sensing unit
27: second distance calculating section 29: second speed calculating section
30: Operation control module

Claims (17)

차량의 전방을 촬영하는 전방 카메라로부터 촬영된 영상을 처리하여 선행차량과의 거리, 상기 선행차량의 속도 및 가속도를 산출하는 제1선행차량 감지유닛;
차량주변을 촬영하는 복수의 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하고, 상기 어라운드 뷰 영상으로부터 선행차량을 감지하여 상기 선행차량과의 거리, 상기 선행차량의 속도 및 가속도를 산출하는 제2선행차량 감지유닛; 및
상기 전방 카메라에서 촬영된 영상의 처리결과에 따라 상기 제1선행차량 감지유닛과 제2선행차량 감지유닛 중 하나를 작동시키는 운행제어모듈;을 포함하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
A first preceding vehicle detecting unit for processing an image photographed from a front camera for photographing the front of the vehicle to calculate a distance to the preceding vehicle, a speed and an acceleration of the preceding vehicle;
A method for controlling a vehicle, the method comprising the steps of: processing an image taken by a plurality of cameras taken around a vehicle to form an arousal view image of the vehicle; sensing a preceding vehicle from the surrounding view image and calculating a distance to the preceding vehicle, A second preceding vehicle detecting unit for detecting a second preceding vehicle; And
And a driving control module for activating one of the first preceding vehicle detecting unit and the second preceding vehicle detecting unit according to the processing result of the image photographed by the front camera.
제1항에 있어서,
상기 제1선행차량 감지유닛은,
상기 전방 카메라;
상기 전방 카메라로부터 촬영된 영상을 처리하는 제1영상처리부;
상기 제1영상처리부에서 처리된 영상에서 선행차량을 감지하는 제1차량감지부;
상기 선행차량과의 거리를 산출하는 제1거리산출부;
상기 선행차량과의 거리를 이용하여 상기 선행차량의 속도와 가속도를 산출하는 제1속도산출부;를 포함하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method according to claim 1,
Wherein the first preceding vehicle detection unit comprises:
The front camera;
A first image processing unit for processing an image photographed from the front camera;
A first vehicle sensing unit for sensing a preceding vehicle in an image processed by the first image processing unit;
A first distance calculating unit for calculating a distance to the preceding vehicle;
And a first speed calculating unit for calculating a speed and an acceleration of the preceding vehicle by using a distance between the preceding vehicle and the preceding vehicle.
제2항에 있어서,
상기 제2선행차량 감지유닛은,
차체에 설치되어 차량주변을 촬영하는 복수의 카메라;
상기 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하는 제2영상처리부;
상기 어라운드 뷰 영상에서 선행차량을 감지하는 제2차량감지부;
상기 선행차량이 감지되면, 선행차량과의 거리를 산출하는 제2거리산출부;
상기 선행차량과의 거리를 이용하여 상기 선행차량의 속도와 가속도를 산출하는 제2속도산출부;를 포함하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
3. The method of claim 2,
Wherein the second preceding vehicle detection unit comprises:
A plurality of cameras installed on the vehicle body and photographing the surroundings of the vehicle;
A second image processing unit for processing an image photographed by the camera to form an overview image of the vehicle;
A second vehicle sensing unit for sensing a preceding vehicle in the surround view image;
A second distance calculation unit for calculating a distance to the preceding vehicle when the preceding vehicle is sensed;
And a second speed calculation unit for calculating a speed and an acceleration of the preceding vehicle by using the distance from the preceding vehicle.
제3항에 있어서,
상기 제2차량감지부는, 상기 어라운드 뷰 영상에서 상기 선행차량의 에지를 검출하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method of claim 3,
Wherein the second vehicle sensing unit detects an edge of the preceding vehicle in the far view image.
제3항에 있어서,
상기 제2거리산출부는, 상기 제2차량감지부에서 검출한 상기 선행차량의 위치로부터 상기 차체까지의 거리를 산출하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method of claim 3,
Wherein the second distance calculation unit calculates a distance from the position of the preceding vehicle detected by the second vehicle sensing unit to the vehicle body.
제3항에 있어서,
상기 제1속도산출부와 제2속도산출부는, 각각 상기 제1거리산출부와 제2거리산출부에서 산출된 거리를 미분하여 속도를 산출하고, 상기 속도를 미분하여 가속도를 산출하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method of claim 3,
The first speed calculating section and the second speed calculating section calculate the speed by differentiating the distances calculated by the first distance calculating section and the second distance calculating section and calculate the acceleration by differentiating the speed Proximity lead vehicle detection system.
제1항에 있어서,
상기 운행제어모듈은, 상기 제1선행차량 감지유닛에서 감지된 상기 선행차량의 이미지가 상기 선행차량의 전체 이미지가 아닌 경우, 상기 제2선행차량 감지유닛을 동작시키는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method according to claim 1,
Wherein the operation control module operates the second preceding vehicle detection unit when the image of the preceding vehicle detected by the first preceding vehicle detection unit is not the entire image of the preceding vehicle system.
제1항에 있어서,
상기 운행제어모듈은, 상기 선행차량과의 거리, 상기 선행차량의 속도와 가속도에 기초하여 상기 선행차량과 추돌가능성이 있다고 판단되면, 자차의 운전자에게 추돌경보를 제공하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method according to claim 1,
Wherein the travel control module provides a collision alarm to the driver of the own vehicle when it is determined that there is a possibility of a collision with the preceding vehicle based on the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle Detection system.
제1항에 있어서,
상기 운행제어모듈은, 상기 선행차량과의 거리, 상기 선행차량의 속도와 가속도에 기초하여 상기 선행차량과 추돌가능성이 있다고 판단되면, 자차의 제동을 제어하는 제어신호를 생성하는 것을 특징으로 하는 근거리 선행차량 감지시스템.
The method according to claim 1,
Wherein the operation control module generates a control signal for controlling the braking of the vehicle if it is determined that there is a possibility of collision with the preceding vehicle based on the distance from the preceding vehicle and the speed and acceleration of the preceding vehicle Leading vehicle detection system.
삭제delete 전방 카메라로부터 촬영된 차량의 전방 영상을 처리하는 제1처리단계;
상기 전방 영상에 선행차량의 전체 이미지가 촬영되었는지 여부를 판단하는 판단단계;
상기 전방 영상에 선행차량의 전체 이미지가 촬영되지 아니한 경우, 복수의 카메라를 이용하여 차량주변을 촬영하는 촬영단계;
상기 복수의 카메라에서 촬영된 영상을 처리하여 차량의 어라운드 뷰 영상을 형성하는 제2처리단계;
상기 어라운드 뷰 영상으로부터 선행차량을 감지하는 감지단계; 및
감지단계에서 감지된 상기 선행차량과의 거리, 상기 선행차량의 속도와 가속도를 산출하는 산출단계;를 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법.
A first processing step of processing a forward image of a vehicle photographed from a forward camera;
A determination step of determining whether the entire image of the preceding vehicle is photographed in the forward image;
A photographing step of photographing the surroundings of the vehicle using a plurality of cameras when the entire image of the preceding vehicle is not captured in the forward image;
A second processing step of processing an image photographed by the plurality of cameras to form an overview image of the vehicle;
A sensing step of sensing a preceding vehicle from the surround view image; And
And a calculating step of calculating a distance between the preceding vehicle and the preceding vehicle detected in the sensing step, and a speed and an acceleration of the preceding vehicle.
제11항에 있어서,
상기 감지단계는, 상기 어라운드 뷰 영상에서 상기 선행차량의 에지를 검출하는 단계인 것을 특징으로 하는 근거리 선행차량 감지방법.
12. The method of claim 11,
Wherein the detecting step is a step of detecting an edge of the preceding vehicle in the far view image.
제11항에 있어서,
상기 산출단계는, 상기 어라운드 뷰 영상에서 검출한 상기 선행차량으로부터 차량까지의 거리를 산출하는 단계를 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법.
12. The method of claim 11,
Wherein the calculating step includes calculating a distance from the preceding vehicle detected in the far view image to the vehicle.
제11항에 있어서,
상기 산출단계는, 상기 선행차량과의 거리를 미분하여 속도를 산출하고, 상기 속도를 미분하여 가속도를 산출하는 단계를 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법.
12. The method of claim 11,
Wherein the calculating step includes a step of calculating a speed by differentiating a distance from the preceding vehicle and calculating an acceleration by differentiating the speed.
제11항에 있어서,
상기 선행차량과의 거리, 상기 선행차량의 속도 및 가속도에 기초하여 상기 선행차량과 추돌가능성이 있는 경우, 자차의 운전자에게 추돌경보를 제공하는 단계를 더 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법.
12. The method of claim 11,
Further comprising the step of providing a collision warning to the driver of the preceding vehicle when there is a possibility of a collision with the preceding vehicle based on the distance to the preceding vehicle and the speed and acceleration of the preceding vehicle .
제11항에 있어서,
상기 선행차량과의 거리, 상기 선행차량의 속도 및 가속도에 기초하여 상기 선행차량과 추돌가능성이 있는 경우, 자차의 제동을 제어하는 제어신호를 생성하는 단계를 더 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법.
12. The method of claim 11,
Further comprising the step of generating a control signal for controlling the braking of the preceding vehicle when there is a possibility of a collision with the preceding vehicle based on the distance from the preceding vehicle and the speed and acceleration of the preceding vehicle Detection method.
제11항에 있어서,
상기 판단단계의 판단결과, 상기 전방 영상에 선행차량의 전체 이미지가 촬영된 경우, 상기 선행차량과의 거리, 상기 선행차량의 속도와 가속도를 산출하는 단계;를 더 포함하는 것을 특징으로 하는 근거리 선행차량 감지방법.
12. The method of claim 11,
And calculating a distance between the preceding vehicle and a speed and an acceleration of the preceding vehicle when the entire image of the preceding vehicle is photographed in the forward image as a result of the determining step Vehicle detection method.
KR1020140134311A 2014-10-06 2014-10-06 Detection system and method for preceding vehicle at close range KR101622041B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140134311A KR101622041B1 (en) 2014-10-06 2014-10-06 Detection system and method for preceding vehicle at close range

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140134311A KR101622041B1 (en) 2014-10-06 2014-10-06 Detection system and method for preceding vehicle at close range

Publications (2)

Publication Number Publication Date
KR20160041136A KR20160041136A (en) 2016-04-18
KR101622041B1 true KR101622041B1 (en) 2016-06-01

Family

ID=55916312

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140134311A KR101622041B1 (en) 2014-10-06 2014-10-06 Detection system and method for preceding vehicle at close range

Country Status (1)

Country Link
KR (1) KR101622041B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102099082B1 (en) * 2019-01-24 2020-04-09 주식회사 에스더블유엠 Method for monitering tire defect of front vehicles

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013093865A (en) * 2012-12-07 2013-05-16 Mitsubishi Motors Corp Vehicle periphery monitoring device

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101407520B1 (en) * 2011-09-09 2014-06-16 주식회사 만도 Collision warning system for vehicle

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013093865A (en) * 2012-12-07 2013-05-16 Mitsubishi Motors Corp Vehicle periphery monitoring device

Also Published As

Publication number Publication date
KR20160041136A (en) 2016-04-18

Similar Documents

Publication Publication Date Title
KR101996419B1 (en) Sensor integration based pedestrian detection and pedestrian collision prevention apparatus and method
EP3141926B1 (en) Automated detection of hazardous drifting vehicles by vehicle sensors
KR101276871B1 (en) Method and apparatus for collision avoidance of vehicle
JP5910046B2 (en) Obstacle detection device
JP5410730B2 (en) Automobile external recognition device
US9020747B2 (en) Method for recognizing a turn-off maneuver
KR20180078983A (en) Sensor integration based pedestrian detection and pedestrian collision prevention apparatus and method
JP2008123462A (en) Object detector
WO2017111135A1 (en) Travel assistance device and travel assistance method
KR101545054B1 (en) Driver assistance systems and controlling method for the same
JP6063319B2 (en) Lane change support device
JP4876772B2 (en) Interrupting vehicle determination device
CN111645679A (en) Side impact risk estimation system for vehicle
JP5298104B2 (en) Vehicle control device
KR101745015B1 (en) Apparatus and method for controlling obstacle sensing zone
JP2004280453A (en) Vehicular right turn safety confirming system
JP2014229197A (en) Vehicle notification device
JP2009276906A (en) Travelling information providing device
KR101622041B1 (en) Detection system and method for preceding vehicle at close range
JP2018097689A (en) Vehicle control device and vehicle control method
JP5717416B2 (en) Driving support control device
JP2012098776A (en) Driving support device
JP6456761B2 (en) Road environment recognition device, vehicle control device, and vehicle control method
KR20180024479A (en) Distance display device and a method for the forward vehicle
JP6548147B2 (en) Vehicle control device

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190403

Year of fee payment: 4