KR20180001364A - Apparatus and method for dectecting front vehicle - Google Patents

Apparatus and method for dectecting front vehicle Download PDF

Info

Publication number
KR20180001364A
KR20180001364A KR1020160080401A KR20160080401A KR20180001364A KR 20180001364 A KR20180001364 A KR 20180001364A KR 1020160080401 A KR1020160080401 A KR 1020160080401A KR 20160080401 A KR20160080401 A KR 20160080401A KR 20180001364 A KR20180001364 A KR 20180001364A
Authority
KR
South Korea
Prior art keywords
vehicle
image
target area
target
camera
Prior art date
Application number
KR1020160080401A
Other languages
Korean (ko)
Other versions
KR102371589B1 (en
Inventor
김화영
우하용
Original Assignee
현대자동차주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사 filed Critical 현대자동차주식회사
Priority to KR1020160080401A priority Critical patent/KR102371589B1/en
Publication of KR20180001364A publication Critical patent/KR20180001364A/en
Application granted granted Critical
Publication of KR102371589B1 publication Critical patent/KR102371589B1/en

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/10Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to vehicle motion
    • B60W40/105Speed
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • B60W2420/42

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

According to an embodiment of the present invention, an apparatus for detecting a vehicle ahead can comprise: a first camera acquiring a first image by photographing the front; a second camera acquiring a second image displaying a brightness change degree of light by photographing the front; and a control unit detecting a red area in the first image, designating one or more target areas corresponding to the detected red area in the second image, and detecting a target area linearly moving among the designated target areas to a vehicle.

Description

전방 차량 검출 장치 및 방법{APPARATUS AND METHOD FOR DECTECTING FRONT VEHICLE}[0001] APPARATUS AND METHOD FOR DECTECTING FRONT VEHICLE [0002]

본 발명은 전방 차량 검출 장치 및 방법에 관한 것이다.The present invention relates to a front vehicle detection apparatus and method.

최근, 차량에는 다양한 센서를 이용하여 차량안전 및 운전 편의를 높이기 위한 시스템이 도입되고 있다. 특히, 사고 예방을 위해 차량의 주위 환경을 인식하고 위험 상황 발생시 운전자에 경고하는 시스템이 필요하다.2. Description of the Related Art In recent years, a system for increasing vehicle safety and driving comfort using various sensors has been introduced into vehicles. Especially, to prevent accidents, it is necessary to recognize the environment of the vehicle and warn the driver in case of a dangerous situation.

차량의 주위 환경 중 위험 상황 발생 주된 원인은 주위의 차량이며, 전방 차량은 가장 우선시 하는 인식 대상이다. 이를 위해, 최근 개발된 많은 시스템은 도로 상에서 전방차량의 유무를 확인하고, 상대속도 또는 움직임을 추적하여 위험상황을 알려준다.The main cause of the dangerous situation in the surrounding environment of the vehicle is the surrounding vehicle, and the forward vehicle is the first priority recognition object. To this end, many recently developed systems track the presence or absence of a forward vehicle on the road and track the relative speed or movement to alert them of the danger.

이러한 전방 차량을 감지하는 시스템은 카메라로 전방을 촬영하고, 촬영한 영상에서 차량을 인식한다. 종래의 시스템은 차량의 외형적인 특징을 저장하여 실시간으로 입력되는 영상에서 기 저장된 템플릿과 매칭하며 차량을 인식한다.The system for detecting such a front vehicle photographs the front side with the camera and recognizes the vehicle from the photographed image. The conventional system stores the external features of the vehicle, matches the pre-stored template in the input image in real time, and recognizes the vehicle.

그러나 이러한 종래의 시스템에서 사용하는 방식은 프로세서가 방대한 양의 데이터를 처리해야 되므로, 차량 인식을 위해 고성능의 프로세서를 사용해야한다는 문제가 있었다.However, the method used in such a conventional system has a problem that a high-performance processor must be used for recognition of a vehicle because a processor has to process a large amount of data.

본 발명은 상기와 같은 종래의 문제점을 해결하기 위하여 안출된 것으로서, 데이터 처리량으로 전방 차량을 검출하는 장치 및 방법을 제공하는 데 그 목적이 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide an apparatus and method for detecting a vehicle ahead by data throughput.

한편, 본 발명에서 이루고자 하는 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급하지 않은 또 다른 기술적 과제들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.It is to be understood that both the foregoing general description and the following detailed description of the present invention are exemplary and explanatory and are not intended to limit the invention to the precise form disclosed. It can be understood.

상술한 과제를 실현하기 위한 본 발명의 일예와 관련된 전방 차량 검출 장치는 전방을 촬영하여 제 1 영상을 획득하는 제 1 카메라, 상기 전방을 촬영하여 빛의 밝기 변화 정도를 나타내는 제 2 영상을 획득하는 제 2 카메라 및 상기 제 1 영상에서 붉은 영역을 검출하고, 상기 제 2 영상에서 상기 검출된 붉은 영역에 대응되는 하나 이상의 타겟 영역을 지정하며, 상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 제어부를 포함할 수 있다.A front vehicle detecting apparatus according to an embodiment of the present invention for realizing the above-described object includes a first camera for capturing a front image and acquiring a first image, a second image capturing the front image and representing a degree of brightness change of light A red region in the second camera and the first image, one or more target regions corresponding to the detected red regions in the second image, and a linearly moving target region in the designated target region, As shown in FIG.

일 실시예에서, 상기 제어부는 상기 차량의 속도에 비례하여 상기 제 2 카메라의 프레임 레이트(Frame rate)가 증가하도록 제어할 수 있다.In one embodiment, the control unit may control the frame rate of the second camera to increase in proportion to the speed of the vehicle.

일 실시예에서, 상기 제어부는 상기 선형적으로 이동하는 타겟 영역 중 동시에 이동하는 한 쌍의 타겟 영역을 상기 차량으로 검출할 수 있다.In one embodiment, the control unit may detect a pair of target areas simultaneously moving among the linearly moving target areas with the vehicle.

일 실시예에서, 상기 제어부는 상기 타겟 영역이 이동하는 방향 또는 이동하는 방향의 반대 방향이 상기 제 2 영상의 소실점을 향한 방향인 경우, 상기 타겟 영역을 차량으로 검출할 수 있다.In one embodiment, the control unit may detect the target area as a vehicle when the direction in which the target area moves or the direction opposite to the moving direction is a direction toward the vanishing point of the second image.

한편, 상술한 과제를 실현하기 위한 본 발명의 일예와 관련된 전방 차량 검출 방법은 전방을 촬영하여 제 1 영상 및 빛의 밝기 변화 정도를 나타내는 제 2 영상을 획득하는 단계, 상기 제 1 영상에서 붉은 영역을 검출하는 단계, 상기 제 2 영상에서 상기 붉은 영역에 대응되는 하나 이상의 타겟 영역을 지정하는 단계 및 상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출할 수 있다.According to another aspect of the present invention, there is provided a front vehicle detecting method for detecting a front image of a vehicle, the method comprising: acquiring a first image and a second image representing a degree of brightness change of light; , Designating one or more target areas corresponding to the red areas in the second image, and detecting a linearly moving target area among the designated target areas as a vehicle.

일 실시예에서, 상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 단계는 상기 선형적으로 이동하는 타겟 영역 중 동시에 이동하는 한 쌍의 타겟 영역을 상기 차량으로 검출할 수 있다.In one embodiment, the step of detecting as a vehicle a linearly moving target area of the designated target area may detect a pair of target areas simultaneously moving among the linearly moving target areas.

일 실시예에서, 상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 단계는 상기 타겟 영역이 이동하는 방향 또는 이동하는 방향의 반대 방향이 상기 제 2 영상의 소실점을 향한 방향인 경우, 상기 타겟 영역을 차량으로 검출할 수 있다.In one embodiment, the step of detecting as a vehicle a linearly moving target area of the designated target area may be performed when the direction in which the target area moves or the direction opposite to the moving direction is a direction toward the vanishing point of the second image , The target area can be detected as a vehicle.

본 발명의 실시예들은 데이터 처리량으로 전방 차량을 검출하는 장치 및 방법을 제공할 수 있다.Embodiments of the present invention can provide an apparatus and method for detecting a vehicle ahead with data throughput.

한편, 본 발명에서 얻을 수 있는 효과는 이상에서 언급한 효과들로 제한되지 않으며, 언급하지 않은 또 다른 효과들은 아래의 기재로부터 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 명확하게 이해될 수 있을 것이다.It should be understood, however, that the effects obtained by the present invention are not limited to the above-mentioned effects, and other effects not mentioned may be clearly understood by those skilled in the art to which the present invention belongs It will be possible.

본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 일 실시예를 예시하는 것이며, 발명의 상세한 설명과 함께 본 발명의 기술적 사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석 되어서는 아니 된다.
도 1은 본 발명의 일 실시예에 따른 전방 차량 검출 장치의 블록도이다.
도 2는 본 발명의 일 실시예에 따른 비동기식 카메라가 촬영한 영상의 일예이다.
도 3는 본 발명의 일 실시예에 따른 영상 내 차량의 후방을 나타내는 도면이다.
도 4는 본 발명의 일 실시예에 따른 영상 내 붉은 영역이 시간에 따라 이동하는 것을 나타내는 도면이다.
도 5는 본 발명의 일 실시예에 따른 전방 차량 검출 방법을 나타내는 순서도이다.
도 6는 본 발명의 일 실시예에 따른 전방 차량 검출 방법을 실행하는 컴퓨팅 시스템을 보여주는 블록도이다.
BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are incorporated in and constitute a part of the specification, illustrate preferred embodiments of the invention and, together with the description, serve to further the understanding of the technical idea of the invention, It should not be construed as limited.
1 is a block diagram of a front vehicle detection apparatus according to an embodiment of the present invention.
2 is an example of an image taken by an asynchronous camera according to an embodiment of the present invention.
3 is a view showing the rear of a vehicle in an image according to an embodiment of the present invention.
FIG. 4 is a diagram illustrating that a red region in an image moves according to time according to an embodiment of the present invention.
5 is a flowchart showing a front vehicle detection method according to an embodiment of the present invention.
6 is a block diagram illustrating a computing system that implements a forward vehicle detection method in accordance with an embodiment of the present invention.

이하, 본 발명의 일부 실시예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다.Hereinafter, some embodiments of the present invention will be described in detail with reference to exemplary drawings. It should be noted that, in adding reference numerals to the constituent elements of the drawings, the same constituent elements are denoted by the same reference symbols as possible even if they are shown in different drawings. In the following description of the embodiments of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the difference that the embodiments of the present invention are not conclusive.

본 발명의 실시예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 또한, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.In describing the components of the embodiment of the present invention, terms such as first, second, A, B, (a), and (b) may be used. These terms are intended to distinguish the constituent elements from other constituent elements, and the terms do not limit the nature, order or order of the constituent elements. Also, unless otherwise defined, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries should be interpreted as having a meaning consistent with the meaning in the context of the relevant art and are to be interpreted in an ideal or overly formal sense unless explicitly defined in the present application Do not.

도 1은 본 발명의 일 실시예에 따른 전방 차량 검출 장치의 블록도이다. 도 2는 본 발명의 일 실시예에 따른 비동기식 카메라가 촬영한 영상의 일예이다. 도 3는 본 발명의 일 실시예에 따른 영상 내 차량의 후방을 나타내는 도면이다. 도 4는 본 발명의 일 실시예에 따른 영상 내 붉은 영역이 시간에 따라 이동하는 것을 나타내는 도면이다.1 is a block diagram of a front vehicle detection apparatus according to an embodiment of the present invention. 2 is an example of an image taken by an asynchronous camera according to an embodiment of the present invention. 3 is a view showing the rear of a vehicle in an image according to an embodiment of the present invention. FIG. 4 is a diagram illustrating that a red region in an image moves according to time according to an embodiment of the present invention.

도 1을 참조하면, 전방 차량 검출 장치(100)는 제 1 카메라(110), 제 2 카메라(120) 및 제어부(130)를 포함할 수 있다.Referring to FIG. 1, the front vehicle detection apparatus 100 may include a first camera 110, a second camera 120, and a controller 130.

다만, 도 1에 도시된 구성요소들이 필수적인 것은 아니어서, 그보다 많은 구성요소들을 갖거나 그보다 적은 구성요소들을 갖는 전방 차량 검출 장치(100)가 구현될 수도 있다.However, the components shown in Fig. 1 are not essential, so that the vehicle detection apparatus 100 having more components or fewer components may be implemented.

제 1 카메라(110)는 자차의 전방을 촬영하여 영상을 획득할 수 있다. 제 1 카메라(110)는 일반적으로 사용되는 디지털 카메라일 수 있으며, 컬러 영상을 획득할 수 있다.The first camera 110 may capture an image of the front side of the vehicle. The first camera 110 may be a commonly used digital camera and may acquire color images.

또한, 제 2 카메라(120)는 자차의 전방을 촬영하여 빛의 밝기 변화 정도를 나타내는 영상을 획득할 수 있다. 제 2 카메라(120)는 비동기식 카메라일 수 있으며, 비동기식 카메라의 예로서, ACTIVE PIXEL VISION, DYNAMIC VISION, NEUROMORPHIC VISION, SILICON RETINA 센서 등이 있다.In addition, the second camera 120 may capture an image representing the degree of brightness change of light by photographing the front of the vehicle. The second camera 120 may be an asynchronous camera. Examples of the asynchronous camera include an ACTIVE PIXEL VISION, a DYNAMIC VISION, a NEUROMORPHIC VISION, and a SILICON RETINA sensor.

제 2 카메라(120)가 획득하는 영상은 제 1 카메라(110)가 획득하는 영상과 달리 컬러 영상이 아닌 도 2와 같이 빛의 밝기 변화 정도가 나타나는 영상일 수 있다. 즉, 픽셀마다 들어오는 빛의 변화량을 이용하여 영상을 획득하는 것이며, 제 2 카메라(120)가 획득한 영상으로부터 빛의 변화를 확인할 수 있다. The image captured by the second camera 120 may be an image in which the degree of brightness change of light is displayed as shown in FIG. 2, rather than a color image, unlike the image captured by the first camera 110. That is, an image is acquired by using the amount of change of light entering each pixel, and the change of light can be confirmed from the image acquired by the second camera 120.

제 2 카메라(120)는 제 1 카메라(110)와 달리 빛의 밝기 변화만을 획득할 수 있으므로, 움직이는 물체를 촬영할 때 모션 블러(MOTION BLUR)가 나타나지 않는 장점이 있다.Unlike the first camera 110, the second camera 120 can acquire only a change in brightness of light. Therefore, there is an advantage that a motion blur does not appear when a moving object is photographed.

또한, 제어부(130)는 제 1 카메라(110)가 획득한 영상인 제 1 영상과 제 2 카메라(120)가 획득한 영상인 제 2 영상을 이용하여 차량을 검출할 수 있다.Also, the controller 130 can detect the vehicle using the first image, which is obtained by the first camera 110, and the second image, which is obtained by the second camera 120.

구체적으로, 제어부(130)는 제 1 영상에서 붉은 영역을 검출한다. 차량은 도 3과 같이 주행 중 후미등(a)을 작동시키며, 후미등(a)의 색은 붉은 색이다. 따라서 도로 상에서 촬영된 제 1 영상에서 차량은 붉은 영역을 포함하고 있다고 볼 수 있고, 제어부(130)는 차량을 검출하기 위해 제 1 영상에서 붉은 영역을 검출할 수 있다.Specifically, the controller 130 detects a red region in the first image. The vehicle operates the taillight (a) during traveling as shown in Fig. 3, and the color of the taillight (a) is red. Accordingly, the first image captured on the road may include a red region, and the controller 130 may detect a red region in the first image to detect the vehicle.

그리고 제어부(130)는 제 1 영상에서 검출된 붉은 영역의 위치를 제 2 영상에 대응시켜 하나 이상의 타겟 영역을 지정할 수 있다. 제 2 영상에는 색이 나타나지 않지만 빛의 밝기 변화 정도가 나타나므로 제 1 영상에서 붉은 영역으로 검출된 부분이 제 2 영상에서도 두드러지게 된다. 제어부(130)는 이러한 두드러진 영역을 타겟 영역으로 지정하게 된다.In addition, the controller 130 may designate one or more target regions corresponding to the second image with the position of the red region detected from the first image. The color of the second image is not displayed, but the degree of brightness change of the light is displayed, so that a portion detected as a red region in the first image becomes prominent in the second image. The control unit 130 designates such a prominent area as a target area.

제어부(130)는 지정한 타겟 영역이 선형적으로 이동하는지 여부를 판단하여, 선형적으로 이동하는 타겟 영역을 차량으로 검출할 수 있다. 일반적으로, 주행하는 차량은 시간에 따라 선형적으로 움직이므로, 선형적으로 움직이는 타겟 영역을 차량으로 판단할 수 있다.The controller 130 may determine whether the designated target area moves linearly and detect the linearly moving target area as a vehicle. In general, since a vehicle that travels linearly moves with time, a linearly moving target area can be judged as a vehicle.

한편, 차량의 후미등은 좌우측 한 쌍으로 구성되고, 이에 따라 제 1 영상에서 차량의 후미등은 한 쌍의 붉은 영역으로 나타난다. 도 4를 참조하면 제 1 영상의 붉은 영역(b)이 시간에 따라 움직이는 자취를 확인할 수 있으며, 붉은 영역(b)은 한 쌍으로 함께 이동한다.On the other hand, the tail light of the vehicle is constituted by a pair of right and left sides, and accordingly, the tail light of the vehicle appears as a pair of red regions in the first image. Referring to FIG. 4, it can be seen that the red region b of the first image moves with time, and the red regions b move together as a pair.

따라서 본 발명의 일 실시예에 따라 제어부(130)는 타겟 영역 중 동시에 이동하는 한 쌍의 타겟 영역만을 차량으로 판단할 수 있다. 이 때, 제어부(130)는 선형적으로 움직이는 타겟 영역이 한 쌍을 이루지 않고 별개로 움직인다면, 별개로 움직이는 타겟 영역은 차량으로 판단하지 않게 된다.Accordingly, the controller 130 may determine only a pair of target areas that are simultaneously moving among the target areas as a vehicle according to an embodiment of the present invention. At this time, if the control unit 130 moves the target regions that are linearly moved but do not form a pair, the target regions that are separately moved do not judge to be vehicles.

본 발명의 다른 실시예에 따라 제어부(130)는 선형적으로 이동하는 타겟 영역의 이동 방향 또는 이동방향의 반대 방향이 제 2 영상의 소실점을 향한 방향인 경우, 타겟 영역을 차량으로 판단할 수 있다.According to another embodiment of the present invention, the controller 130 may determine the target area as a vehicle when the moving direction of the target area moving linearly or the direction opposite to the moving direction is toward the vanishing point of the second image .

직진하는 차량은 영상에서 소실점을 향한 방향으로 이동하며, 도 4에 나타난 바와 같이 차량의 후미등에 해당하는 붉은 영역(b) 또한 소실점을 향한 방향으로 이동한다. 이와는 달리, 신호등은 고정되어 있으므로 신호등의 빨간 불은 영상에서 이동하더라도 그 이동방향이 소실점을 향하지 않는다. 제어부(130)는 이러한 특성을 반영하여 제 1 영상의 붉은 영역에 대응하는 제 2 영상의 타겟 영역 이동 방향이 소실점을 향하는 경우, 타겟 영역을 차량으로 판단할 수 있는 것이다.The straight moving vehicle moves in the direction from the image toward the vanishing point, and the red region (b) corresponding to the tail light of the vehicle also moves toward the vanishing point as shown in Fig. On the other hand, the signal light is fixed, so the red light of the traffic light does not move toward the vanishing point even if it moves from the image. The controller 130 may determine the target area as a vehicle when the target area moving direction of the second image corresponding to the red area of the first image is directed to the vanishing point by reflecting such a characteristic.

한편, 본 발명의 전방 차량 검출 장치(100)가 설치되는 자차의 속도가 빨라짐에 따라 상대적으로 영상 내의 객체는 빠르게 이동한다. 따라서 제 2 카메라(120)가 영상을 획득하는 속도인 프레임 레이트(Frame rate, 초당 프레임수)가 낮다면 제어부(130)가 차량을 검출하지 못하는 상황이 발생할 수 있다.On the other hand, as the speed of the vehicle on which the front vehicle detection apparatus 100 of the present invention is installed increases, the object in the image relatively moves. Accordingly, if the frame rate (frame rate) at which the second camera 120 acquires an image is low, the controller 130 may not detect the vehicle.

따라서 본 발명의 일 실시예에 따라 제어부(130)는 자차의 속도에 비례하여 제 2 카메라(120)의 프레임 레이트가 증가하도록 제어할 수 있다. 제어부(130)는 자차의 속도에 비례하여 제 2 카메라(120)의 프레임 레이트를 증가시킴으로써 다른 차량간의 상대속도가 크더라도 차량을 놓치지 않고 검출할 수 있다.Therefore, the controller 130 may control the frame rate of the second camera 120 to increase in proportion to the speed of the own vehicle according to an embodiment of the present invention. The controller 130 increases the frame rate of the second camera 120 in proportion to the speed of the own vehicle, so that the vehicle can be detected without missing even if the relative speed between the other vehicles is large.

도 5는 본 발명의 일 실시예에 따른 전방 차량 검출 방법을 나타내는 순서도이다.5 is a flowchart showing a front vehicle detection method according to an embodiment of the present invention.

이하에서는 도 5를 참조하여 전술한 구성들을 기초로 전방 차량 검출 방법에 대해 구체적으로 설명한다.Hereinafter, the forward vehicle detection method will be described in detail based on the above-described configurations with reference to FIG.

도 5를 참조하면 전방 차량 검출 방법은 전방을 촬영하여 제 1 영상 및 빛의 밝기 변화 정도를 나타내는 제 2 영상을 획득하는 단계(S100), 상기 제 1 영상에서 붉은 영역을 검출하는 단계(S200), 상기 제 2 영상에서 상기 붉은 영역에 대응되는 하나 이상의 타겟 영역을 지정하는 단계(S300) 및 상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 단계(S400)를 포함할 수 있다.Referring to FIG. 5, the forward vehicle detection method includes a step S100 of acquiring a first image and a second image representing a degree of brightness change of light by capturing a forward image, detecting a red region in the first image S200, , Designating (S300) one or more target areas corresponding to the red areas in the second image (S300), and detecting (S400) a linearly moving target area among the designated target areas as a vehicle .

이하에서, 상술한 S100 단계 내지 S400 단계가 구체적으로 설명될 것이다. Hereinafter, steps S100 to S400 will be described in detail.

S100 단계에서, 제 1 카메라(110)는 자차의 전방을 촬영하여 제 1 영상을 획득하고, 제 2 카메라(120)는 자차의 전방을 촬영하여 빛의 밝기 변화 정도를 나타내는 제 2 영상을 획득할 수 있다. 전술한 바와 같이 제 2 카메라(120)는 비동기식 카메라일 수 있다.In step S100, the first camera 110 acquires a first image by capturing the front of the vehicle, and the second camera 120 photographs the front of the vehicle to acquire a second image representing a degree of brightness change of light . As described above, the second camera 120 may be an asynchronous camera.

S200 단계에서, 제어부(130)는 제 1 영상에서 붉은 영역을 검출할 수 있다. 제 1 영상에서 붉은 영역은 차량의 후미등일 수 있는 후보군으로서, 제어부(130)는 차량으로 검출할 수 있는 후보군을 먼저 검출하는 것이다.In step S200, the controller 130 may detect a red region in the first image. In the first image, the red region is a candidate group that can be the tail lamp of the vehicle, and the control unit 130 detects a candidate group that can be detected by the vehicle.

S300 단계에서, 제어부(130)는 제 1 영상의 붉은 영역에 대응되는 하나 이상의 타겟 영역을 제 2 영상에서 지정할 수 있다. 제어부(130)는 전방 차량의 후미등일 수 있는 후보군을 제 2 영상에서 지정하는 것이다.In step S300, the controller 130 may designate one or more target areas corresponding to red areas of the first image on the second image. The control unit 130 designates a candidate group that can be the tail lamp of the preceding vehicle in the second image.

S400 단계에서, 제어부(130)는 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출할 수 있다.In step S400, the control unit 130 may detect a linearly moving target area of the designated target area as a vehicle.

제어부(130)는 지정한 타겟 영역이 선형적으로 이동하는지 여부를 판단하여, 선형적으로 이동하는 타겟 영역을 차량으로 검출할 수 있다.The controller 130 may determine whether the designated target area moves linearly and detect the linearly moving target area as a vehicle.

또한, 본 발명의 일 실시예에 따라 제어부(130)는 타겟 영역 중 동시에 이동하는 한 쌍의 타겟 영역만을 차량으로 판단할 수 있다. 이 때, 제어부(130)는 선형적으로 움직이는 타겟 영역이 한 쌍을 이루지 않고 별개로 움직인다면, 별개로 움직이는 타겟 영역은 차량으로 판단하지 않게 된다.In addition, according to an embodiment of the present invention, the controller 130 may determine only a pair of target regions simultaneously moving among the target regions as vehicles. At this time, if the control unit 130 moves the target regions that are linearly moved but do not form a pair, the target regions that are separately moved do not judge to be vehicles.

본 발명의 다른 실시예에 따라 제어부(130)는 선형적으로 이동하는 타겟 영역의 이동 방향 또는 이동방향의 반대 방향이 제 2 영상의 소실점을 향한 방향인 경우, 타겟 영역을 차량으로 판단할 수 있다.According to another embodiment of the present invention, the controller 130 may determine the target area as a vehicle when the moving direction of the target area moving linearly or the direction opposite to the moving direction is toward the vanishing point of the second image .

도 6는 본 발명의 일 실시예에 따른 전방 차량 검출 방법을 실행하는 컴퓨팅 시스템을 보여주는 블록도이다. 6 is a block diagram illustrating a computing system that implements a forward vehicle detection method in accordance with an embodiment of the present invention.

도 6을 참조하면, 컴퓨팅 시스템(1000)은 버스(1200)를 통해 연결되는 적어도 하나의 프로세서(1100), 메모리(1300), 사용자 인터페이스 입력 장치(1400), 사용자 인터페이스 출력 장치(1500), 스토리지(1600), 및 네트워크 인터페이스(1700)를 포함할 수 있다. 6, a computing system 1000 includes at least one processor 1100, a memory 1300, a user interface input device 1400, a user interface output device 1500, (1600), and a network interface (1700).

프로세서(1100)는 중앙 처리 장치(CPU) 또는 메모리(1300) 및/또는 스토리지(1600)에 저장된 명령어들에 대한 처리를 실행하는 반도체 장치일 수 있다. 메모리(1300) 및 스토리지(1600)는 다양한 종류의 휘발성 또는 불휘발성 저장 매체를 포함할 수 있다. 예를 들어, 메모리(1300)는 ROM(Read Only Memory) 및 RAM(Random Access Memory)을 포함할 수 있다. The processor 1100 may be a central processing unit (CPU) or a memory device 1300 and / or a semiconductor device that performs processing for instructions stored in the storage 1600. Memory 1300 and storage 1600 may include various types of volatile or non-volatile storage media. For example, the memory 1300 may include a ROM (Read Only Memory) and a RAM (Random Access Memory).

따라서, 본 명세서에 개시된 실시예들과 관련하여 설명된 방법 또는 알고리즘의 단계는 프로세서(1100)에 의해 실행되는 하드웨어, 소프트웨어 모듈, 또는 그 2 개의 결합으로 직접 구현될 수 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈형 디스크, CD-ROM과 같은 저장 매체(즉, 메모리(1300) 및/또는 스토리지(1600))에 상주할 수도 있다. 예시적인 저장 매체는 프로세서(1100)에 커플링되며, 그 프로세서(1100)는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있다. 다른 방법으로, 저장 매체는 프로세서(1100)와 일체형일 수도 있다. 프로세서 및 저장 매체는 주문형 집적회로(ASIC) 내에 상주할 수도 있다. ASIC는 사용자 단말기 내에 상주할 수도 있다. 다른 방법으로, 프로세서 및 저장 매체는 사용자 단말기 내에 개별 컴포넌트로서 상주할 수도 있다.Thus, the steps of a method or algorithm described in connection with the embodiments disclosed herein may be embodied directly in hardware, in a software module executed by processor 1100, or in a combination of the two. The software module may reside in a storage medium (i.e., memory 1300 and / or storage 1600) such as a RAM memory, a flash memory, a ROM memory, an EPROM memory, an EEPROM memory, a register, a hard disk, a removable disk, You may. An exemplary storage medium is coupled to the processor 1100, which can read information from, and write information to, the storage medium. Alternatively, the storage medium may be integral to the processor 1100. [ The processor and the storage medium may reside within an application specific integrated circuit (ASIC). The ASIC may reside within the user terminal. Alternatively, the processor and the storage medium may reside as discrete components in a user terminal.

상기와 같이 설명된 전방 차량 검출 장치 및 방법은 상기 설명된 실시예들의 구성과 방법이 한정되게 적용될 수 있는 것이 아니라, 상기 실시예들은 다양한 변형이 이루어질 수 있도록 각 실시예들의 전부 또는 일부가 선택적으로 조합되어 구성될 수도 있다.The above-described front vehicle detecting apparatus and method are not limited to the configuration and method of the embodiments described above, but the embodiments may be modified so that all or some of the embodiments may be selectively And may be configured in combination.

100 : 전방 차량 검출 장치
110 : 제 1 카메라
120 : 제 2 카메라
130 : 제어부
1000: 컴퓨팅 시스템
1100: 프로세서
1200: 시스템 버스
1300: 메모리
1310: ROM
1320: RAM
1400: 사용자 인터페이스
100: Front vehicle detection device
110: First camera
120: Second camera
130:
1000: Computing System
1100: Processor
1200: System bus
1300: Memory
1310: ROM
1320: RAM
1400: User interface

Claims (7)

자차의 전방을 촬영하여 제 1 영상을 획득하는 제 1 카메라;
상기 자차의 전방을 촬영하여 빛의 밝기 변화 정도를 나타내는 제 2 영상을 획득하는 제 2 카메라; 및
상기 제 1 영상에서 붉은 영역을 검출하고, 상기 제 2 영상에서 상기 검출된 붉은 영역에 대응되는 하나 이상의 타겟 영역을 지정하며, 상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 제어부를 포함하는 전방 차량 검출 장치.
A first camera for capturing a first image by capturing a forward portion of the vehicle;
A second camera for capturing a front side of the vehicle and acquiring a second image indicating a degree of brightness change of light; And
A control unit that detects a red region in the first image, designates one or more target regions corresponding to the detected red regions in the second image, and detects a linearly moving target region of the specified target region as a vehicle And a control unit for controlling the vehicle.
제 1 항에 있어서,
상기 제어부는 상기 자차의 속도에 비례하여 상기 제 2 카메라의 프레임 레이트(Frame rate)가 증가하도록 제어하는 것을 특징으로 하는 전방 차량 검출 장치.
The method according to claim 1,
Wherein the control unit controls the frame rate of the second camera to increase in proportion to the speed of the vehicle.
제 1 항에 있어서,
상기 제어부는 상기 선형적으로 이동하는 타겟 영역 중 동시에 이동하는 한 쌍의 타겟 영역을 상기 차량으로 검출하는 것을 특징으로 하는 전방 차량 검출 장치.
The method according to claim 1,
Wherein the control unit detects, as the vehicle, a pair of target areas simultaneously moving among the linearly moving target areas.
제 1 항에 있어서,
상기 제어부는 상기 타겟 영역이 이동하는 방향 또는 이동하는 방향의 반대 방향이 상기 제 2 영상의 소실점을 향한 방향인 경우, 상기 타겟 영역을 차량으로 검출하는 것을 특징으로 하는 전방 차량 검출 장치.
The method according to claim 1,
Wherein the control unit detects the target area as a vehicle when the direction in which the target area moves or the direction opposite to the moving direction is a direction toward the vanishing point of the second image.
자차의 전방을 촬영하여 제 1 영상 및 빛의 밝기 변화 정도를 나타내는 제 2 영상을 획득하는 단계;
상기 제 1 영상에서 붉은 영역을 검출하는 단계;
상기 제 2 영상에서 상기 붉은 영역에 대응되는 하나 이상의 타겟 영역을 지정하는 단계; 및
상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 단계를 포함하는 전방 차량 검출 방법.
Capturing a front side of the vehicle and obtaining a first image and a second image indicating a degree of brightness change of the light;
Detecting a red region in the first image;
Designating one or more target areas corresponding to the red areas in the second image; And
Detecting a linearly moving target area of the designated target area as a vehicle.
제 5 항에 있어서,
상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 단계는 상기 선형적으로 이동하는 타겟 영역 중 동시에 이동하는 한 쌍의 타겟 영역을 상기 차량으로 검출하는 것을 특징으로 하는 전방 차량 검출 방법.
6. The method of claim 5,
Wherein the step of detecting as a vehicle a linearly moving target area among the designated target areas detects a pair of target areas simultaneously moving among the linearly moving target areas as the vehicle .
제 5 항에 있어서,
상기 지정된 타겟 영역 중 선형적으로 이동하는 타겟 영역을 차량으로 검출하는 단계는 상기 타겟 영역이 이동하는 방향 또는 이동하는 방향의 반대 방향이 상기 제 2 영상의 소실점을 향한 방향인 경우, 상기 타겟 영역을 차량으로 검출하는 것을 특징으로 하는 전방 차량 검출 방법.
6. The method of claim 5,
Wherein the step of detecting as a vehicle a linearly moving target area of the designated target area includes a step of moving the target area when the direction in which the target area moves or the direction opposite to the moving direction is a direction toward the vanishing point of the second image The vehicle is detected as a vehicle.
KR1020160080401A 2016-06-27 2016-06-27 Apparatus and method for dectecting front vehicle KR102371589B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160080401A KR102371589B1 (en) 2016-06-27 2016-06-27 Apparatus and method for dectecting front vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160080401A KR102371589B1 (en) 2016-06-27 2016-06-27 Apparatus and method for dectecting front vehicle

Publications (2)

Publication Number Publication Date
KR20180001364A true KR20180001364A (en) 2018-01-04
KR102371589B1 KR102371589B1 (en) 2022-03-07

Family

ID=60998128

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160080401A KR102371589B1 (en) 2016-06-27 2016-06-27 Apparatus and method for dectecting front vehicle

Country Status (1)

Country Link
KR (1) KR102371589B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981889A (en) * 1995-09-19 1997-03-28 Toshiba Corp Vehicle detector
JP2006516507A (en) * 2003-02-06 2006-07-06 バイエリッシェ モートーレン ウエルケ アクチエンゲゼルシャフト Method and apparatus for visualizing the periphery of a vehicle by fusing infrared and visual images depending on the periphery
JP2009205386A (en) * 2008-02-27 2009-09-10 Nikon Corp In-vehicle camera system and control method thereof
WO2015114654A1 (en) * 2014-01-17 2015-08-06 Kpit Technologies Ltd. Vehicle detection system and method thereof
KR101624426B1 (en) * 2014-12-18 2016-05-25 주식회사 만도 Vehicle detection system

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981889A (en) * 1995-09-19 1997-03-28 Toshiba Corp Vehicle detector
JP2006516507A (en) * 2003-02-06 2006-07-06 バイエリッシェ モートーレン ウエルケ アクチエンゲゼルシャフト Method and apparatus for visualizing the periphery of a vehicle by fusing infrared and visual images depending on the periphery
JP2009205386A (en) * 2008-02-27 2009-09-10 Nikon Corp In-vehicle camera system and control method thereof
WO2015114654A1 (en) * 2014-01-17 2015-08-06 Kpit Technologies Ltd. Vehicle detection system and method thereof
KR101624426B1 (en) * 2014-12-18 2016-05-25 주식회사 만도 Vehicle detection system

Also Published As

Publication number Publication date
KR102371589B1 (en) 2022-03-07

Similar Documents

Publication Publication Date Title
US11461595B2 (en) Image processing apparatus and external environment recognition apparatus
EP2471691B1 (en) Obstacle detection device, obstacle detection system provided therewith, and obstacle detection method
JP6649738B2 (en) Parking lot recognition device, parking lot recognition method
JP2007257449A (en) Road division line detector
WO2015118806A1 (en) Image analysis apparatus and image analysis method
JP6447289B2 (en) Imaging apparatus, imaging method, program, vehicle control system, and vehicle
US20170136962A1 (en) In-vehicle camera control device
JP2009277021A (en) Approaching object detection apparatus and approaching object detection method
JPH11153406A (en) Obstacle detector for vehicle
JP2012073927A (en) Driving support apparatus
US10247551B2 (en) Vehicle image processing device for environment recognition
KR20200133920A (en) Apparatus for recognizing projected information based on ann and method tnereof
US10354148B2 (en) Object detection apparatus, vehicle provided with object detection apparatus, and non-transitory recording medium
KR20180001364A (en) Apparatus and method for dectecting front vehicle
JP2008042759A (en) Image processing apparatus
JP4679469B2 (en) In-vehicle image processing device
JP4818027B2 (en) In-vehicle image processing device
JP7117922B2 (en) Perimeter recognition device and in-vehicle camera system
JP2013060108A (en) Headlight control device
JP2006036048A (en) Vehicle light controlling device
JP4598011B2 (en) Vehicle display device
WO2018101055A1 (en) Image correction device and image correction method
WO2023112127A1 (en) Image recognition device and image recognition method
WO2022254795A1 (en) Image processing device and image processing method
KR20120046954A (en) System for lane departure warning of vehicle

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant