KR101991067B1 - Apparatus and method for controlling autonomous vehicle - Google Patents

Apparatus and method for controlling autonomous vehicle Download PDF

Info

Publication number
KR101991067B1
KR101991067B1 KR1020160120181A KR20160120181A KR101991067B1 KR 101991067 B1 KR101991067 B1 KR 101991067B1 KR 1020160120181 A KR1020160120181 A KR 1020160120181A KR 20160120181 A KR20160120181 A KR 20160120181A KR 101991067 B1 KR101991067 B1 KR 101991067B1
Authority
KR
South Korea
Prior art keywords
vehicle
state information
braking
autonomous
traffic light
Prior art date
Application number
KR1020160120181A
Other languages
Korean (ko)
Other versions
KR20180031892A (en
Inventor
김종옥
Original Assignee
(주)큐알온텍
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)큐알온텍 filed Critical (주)큐알온텍
Priority to KR1020160120181A priority Critical patent/KR101991067B1/en
Publication of KR20180031892A publication Critical patent/KR20180031892A/en
Application granted granted Critical
Publication of KR101991067B1 publication Critical patent/KR101991067B1/en

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00Conjoint control of vehicle sub-units of different type or different function
    • B60W10/18Conjoint control of vehicle sub-units of different type or different function including control of braking systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0234Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/095Traffic lights
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • B60W2420/42
    • B60W2550/22
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2555/00Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
    • B60W2555/60Traffic rules, e.g. speed limits or right of way
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2300/00Purposes or special features of road vehicle drive control systems
    • B60Y2300/14Cruise control

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Electromagnetism (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mathematical Physics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 기술은 자율 주행 차량의 제어 장치 및 방법이 개시된다. 본 발명의 구체적인 예에 따르면, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 토대로 자율 주행 차량의 제동을 제어함에 따라 기존의 자율 주행 차량 제어 방식에 비해 안정성을 근본적으로 확보할 수 있는 자율 주행 차량을 제어할 수 있고, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나와 지식 기반으로 자율 주행 차량의 제어를 제어함에 따라, 이에 따라 선행 차량의 주행 상태에 대한 자율 주행 차량의 응답 시간을 근본적으로 단축할 수 있게 된다.The present technology discloses an apparatus and method for controlling an autonomous vehicle. According to a specific example of the present invention, based on at least one of the traveling state information and the traffic light state information of the preceding vehicle derived from at least one of the image obtained through the camera, the braking data received through the antenna, It is possible to control the autonomous vehicle which can secure the stability basically compared with the existing autonomous vehicle control system by controlling the braking of the autonomous vehicle, and the braking data received through the camera and the signal state data The control unit controls the control of the autonomous vehicle based on at least one of the running state information and the signal lamp state information of the preceding vehicle derived from at least one of the preceding vehicle and the preceding vehicle so that the response time of the autonomous vehicle with respect to the running state of the preceding vehicle is fundamentally . ≪ / RTI >

Description

자율 주행 차량의 제어 장치 및 방법{APPARATUS AND METHOD FOR CONTROLLING AUTONOMOUS VEHICLE}[0001] APPARATUS AND METHOD FOR CONTROLLING AUTOMOTIVE VEHICLE [0002]

본 발명은 자율 주행 차량의 제어 장치 및 방법에 관한 것으로, 더욱 상세하게는 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 감지하여 자율 주행 차량의 제동 제어 시 안정성을 더욱 확보할 수 있도록 한 기술에 관한 것이다.The present invention relates to an apparatus and method for controlling an autonomous vehicle, and more particularly, to a system and method for controlling an autonomous vehicle by detecting at least one of the running state information and the signal lamp state information of the preceding vehicle Technology.

일반적으로 차량에는 교통사고 저감을 위한 안전성과 도로에서의 교통 효율성, 연료절감을 통한 환경 친화성 및 편의성 등을 제공하기 위해 자율주행시스템이 적용되고 있다.In general, autonomous navigation systems are applied to vehicles to provide safety for traffic accident reduction, traffic efficiency on the road, environment friendliness and convenience through fuel saving.

최근 자율주행시스템은 카메라를 이용하여 차선을 인식하고 자동 조향을 행하는 기술로서, 카메라의 이미지 프로세싱을 기반으로 차선 폭, 차선상의 차량의 횡방향 위치, 양측 차선까지의 거리 및 차선의 형태, 도로의 곡률 반경을 측정한다. 그리고, 측정된 차량의 위치와 도로의 정보를 사용하여 차량의 주행 궤적을 추정하고 추정된 주행 궤적을 따라 차선을 변경하는 스마트 크루즈 컨트롤(Advanced Smart Cruise Control) 기능을 제공하고 있다.Recently, the autonomous navigation system is a technology that recognizes lanes and performs automatic steering by using cameras. It is based on the image processing of the camera, and is based on the lane width, the lateral position of the vehicle on the lane, the distance to both lanes and the shape of the lane, Measure the radius of curvature. The system also provides a Smart Cruise Control function that estimates the driving trajectory of the vehicle using the measured vehicle position and road information and changes the lane along the estimated driving trajectory.

이때, 상기 능동적 스마트 크루즈 컨트롤 기능을 제공하기 위해서는 감지된 전방의 물체들 중에서 앞쪽에서 같은 방향으로 주행하는 선행 차량을 구분하고, 현재 주행 중인 차선을 정확하게 인식하는 것이 매우 중요하다.In order to provide the active smart cruise control function, it is very important to distinguish the preceding vehicles traveling in the same direction from the front of the detected front objects, and to accurately recognize the present traveling lane.

그러나, 카메라로부터 얻어지는 이미지 정보는 정확한 차선 정보를 인식하는데 한계가 있다. 예컨대, 카메라를 통해 획득된 영상 정보의 신뢰성이 떨어지는 경우 정확한 차선 정보의 추출이 어렵고 이는 자율주행시스템 전체의 안정성을 떨어뜨리는 문제점이 있다.However, image information obtained from a camera has a limitation in recognizing correct lane information. For example, when the reliability of the image information obtained through the camera is poor, it is difficult to extract the accurate lane information, which degrades the stability of the entire autonomous driving system.

이에 본 출원인은 자율 주행 차량에 부착된 별도로 마련된 복수의 카메라 또는 안테나를 통해 수신된 주행 도로의 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 토대로 자율 주행 차량을 제어함에 따라 기존의 자율 주행 차량 제어 방식에 비해 안정성을 근본적으로 확보할 수 있는 자율 주행 차량을 제어하는 방안을 제안하고자 한다.The applicant of the present invention controls the autonomous vehicle on the basis of at least one of the traveling state information and the traffic light state information of the preceding vehicle on the traveling road received through the plurality of cameras or antennas provided on the autonomous vehicle, We propose a method to control autonomous vehicle that can secure stability compared to vehicle control system.

본 발명은 종래 기술의 제반 문제점을 해결하기 위해 안출된 것으로, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 토대로 자율 주행 차량의 제동을 제어함에 따라 기존의 자율 주행 차량 제어 방식에 비해 안정성을 근본적으로 확보할 수 있는 자율 주행 차량을 제어하는 자율 주행 차량의 제어 장치 및 방법을 제공하고자 함에 있다.SUMMARY OF THE INVENTION The present invention has been conceived to solve all the problems of the prior art, and it is an object of the present invention to provide a vehicle control apparatus and a control method thereof which are capable of detecting driving state information of a preceding vehicle derived from at least one of an image obtained through a camera, The present invention provides a control apparatus and method for an autonomous vehicle that controls the autonomous vehicle so that the stability of the autonomous vehicle can be basically secured as compared with an existing autonomous vehicle control system by controlling the braking of the autonomous vehicle .

본 발명의 다른 목적은, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보와 지식 기반으로 자율 주행 차량의 제어를 제어함에 따라, 선행 차량의 주행 상태에 대한 자율 주행 차량의 응답 시간을 근본적으로 단축할 수 있는 자율 주행 차량의 제어 장치 및 방법을 제공하고자 함에 있다. It is another object of the present invention to provide a control system for controlling an autonomous driving vehicle based on driving state information and signal light state information of a preceding vehicle derived from at least one of an image obtained through a camera and braking data received via an antenna, The present invention provides a control apparatus and method for an autonomous vehicle that can fundamentally shorten the response time of the autonomous vehicle with respect to the running state of the preceding vehicle.

전술한 목적을 달성하기 위한 본 발명의 기술적 과제는,Technical Solution In order to achieve the above object,

자율 주행 차량의 소정 위치에 소정 간격으로 마련된 복수의 카메라를 통해 주행 중인 도로의 물체의 영상 정보를 수신하는 영상 수집부;An image collecting unit for receiving image information of an object of a road on the road through a plurality of cameras provided at predetermined positions of the autonomous vehicle at predetermined intervals;

상기 영상 수집부의 물체의 영상 정보를 토대로 자율 주행 차량을 제어하기 위한 제어 신호를 생성하여 자율 주행 제어부로 전달하는 프로세서를 포함하는 것을 특징으로 할 수 있다.And a processor for generating a control signal for controlling the autonomous vehicle on the basis of the image information of the object of the image collecting unit and transmitting the control signal to the autonomous drive control unit.

바람직하게 상기 영상 수집부는, 상기 복수의 카메라의 소정 위치 및 간격은 수집하고자 하는 물체의 위치를 기반으로 설정할 수 있고, 선행 차량의 영상으로부터 자율 주행 차량 제어에 필요한 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 추출할 수 있고 상기 프로세서는 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나에 따라 자율 주행 차량의 제동을 위한 제어 신호를 생성하도록 구비될 수 있다.Preferably, the image capturing unit may set the predetermined positions and intervals of the plurality of cameras based on the position of an object to be collected, and may determine at least one of traveling state information and traffic light state information necessary for controlling the autonomous vehicle from the image of the preceding vehicle And the processor can be provided to generate a control signal for braking the autonomous vehicle according to at least one of the running state information of the preceding vehicle and the signal lamp state information.

바람직하게 상기 영상 수집부는, 주행 중인 도로에 위치한 선행 차량의 제동 여부를 확인할 수 있는 테일 램프의 색상, 선행 차량의 차선 변경을 위한 방향 지시등의 점등, 및 비상 정차를 위한 비상등 점등 중 하나를 포함할 수 있다.Preferably, the image collecting unit includes one of a color of a tail lamp for confirming whether a preceding vehicle is braked, a turn indicator for changing a lane of a preceding vehicle, and a emergency lamp for emergency stop .

바람직하게 상기 영상 수집부는, 상호 수직 배열되고 선행 차량의 주행 상태 정보를 수집하기 위한 제1 카메라와, 신호등 상태 정보를 수집하는 제2 카메라를 포함할 수 있고, 상기 제1 카메라는 근거리에 위치한 선행 차량의 테일 램프의 색상을 수집하기 위해 기 정해진 소정 화각 보다 넓은 화각을 가지도록 조정되는 렌즈를 포함할 수 있고, 상기 제2 카메라는 원 거리에 위치한 신호등의 상태 정보를 수집하기 위해 소정 화각 보다 좁은 화각을 가지도록 조정 가능한 렌즈를 포함할 수 있다.Preferably, the image collecting unit may include a first camera arranged vertically to each other and collecting driving state information of a preceding vehicle, and a second camera collecting signal light state information, The second camera may include a lens that is adjusted to have a wider angle of view than the predetermined angle of view that is predetermined for collecting the color of the tail lamp of the vehicle, And may include an adjustable lens having an angle of view.

바람직하게 상기 자율 주행 차량은, 안테나를 통해 선행 차량의 테일 램프로부터 제공되는 선행 차량의 제동 데이터 및 신호등 상태 데이터로부터 선행 차량의 주행 상태 정보와 주행 차선의 신호등으로부터 공급되는 신호등 상태 정보를 추출하는 상태 정보 수집부를 더 포함할 수 있다.Preferably, the autonomous vehicle further includes a state extracting means for extracting, from the braking data and the signal light state data of the preceding vehicle provided from the tail lamp of the preceding vehicle through the antenna, the signal state information of the preceding vehicle and the signal of the driving lane, And may further include an information collecting unit.

바람직하게 상기 상태 정보 수집부는 안테나를 통해 수신된 동일 차선을 주행 중인 선행 차량의 테일 램프로부터 제공되는 선행 차량의 제동 데이터를 수신하여 선행 차량의 주행 상태 정보를 추출하는 주행 상태 수집 모듈과, 안테나를 통해 주행하는 차선의 신호등으로부터 공급되는 신호등 상태 데이터를 수신하여 차량 상태 정보를 추출하는 신호등 상태 수집 모듈을 포함할 수 있다.Preferably, the state information collecting module includes a traveling state collecting module that receives braking data of a preceding vehicle provided from a tail lamp of a preceding vehicle traveling in the same lane, which is received via an antenna, and extracts traveling state information of the preceding vehicle, And a traffic light status collecting module for receiving the traffic light status data supplied from the traffic light of the lane traveling through the network and extracting the vehicle status information.

바람직하게 상기 주행 상태 수집 모듈은 주행 도로의 복수의 선행 차량의 테일 램프의 점등 시 각각의 선행 차량으로부터 공급되는 제동 데이터를 안테나를 통해 수신하여 디코딩한후 각 제동 데이터에 포함된 차량 식별 코드를 추출하고 추출된 차량 식별 코드를 이용하여 동일 주행 차선에 위치한 선행 차량의 제동 데이터를 추출하도록 구비할 수 있고, 상기 제동 데이터는 각 차량 마다 다른 테일 램프의 점등 코드 및 각 선행 차량의 식별 코드를 포함하여 전파될 수 있다.Preferably, the traveling state collecting module receives and decodes the braking data supplied from each preceding vehicle when the tail lamps of the plurality of preceding vehicles on the traveling road are lit, decodes the vehicle identification code included in each braking data, And extracting braking data of a preceding vehicle located in the same driving lane using the extracted vehicle identification code, wherein the braking data includes a lighting code of a tail lamp different for each vehicle and an identification code of each preceding vehicle Can be propagated.

바람직하게 상기 신호등 상태 수집 모듈은, 교차로 및 횡단 보도에 설치된 복수개의 신호등의 점등 시 각각의 신호등으로부터 신호등 상태 데이터를 안테나를 통해 수신하고 수신된 신호등 상태 데이터에 포함된 색상 코드 및 신호등 식별 코드를 추출하고 추출된 신호등 식별 코드 및 색상 코드를 토대로 주행 중인 도로에 해당하는 신호등 색상 코드를 추출하여 신호등 상태 정보를 획득할 수 있고, 신호등 상태 데이터는 각 신호등 식별 코드와 해당 신호등의 점등 색상을 나타내는 신호등 색상 코드를 포함하여 개별 기 정해진 주파수 대역으로 전파될 수 있다Preferably, the traffic light status collecting module receives the traffic light status data from the respective traffic lights at the intersections and the plurality of traffic lights installed on the crosswalk through the antenna, extracts the color code and the traffic light identification code included in the received traffic light status data The traffic light color code corresponding to the road on the road can be extracted based on the extracted traffic light identification code and the color code, and the traffic light status data can be obtained. The traffic light status data includes the traffic light identification code and the traffic light color Can be propagated to individual predetermined frequency bands including codes

바람직하게 상기 프로세서는 상기 주행 상태 수집 모듈로부터 공급되는 주행 상태 정보를 기반으로 선행 차량의 제동 여부를 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성하도록 구비될 수 있고, 신호등 상태 수집 모듈로부터 공급되는 신호등 상태 정보를 기반으로 신호등의 점등 색상을 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성하도록 구비될 수 있다.Preferably, the processor may be configured to generate a control signal for braking the autonomous vehicle based on driving state information supplied from the driving state collection module to determine whether the preceding vehicle is braked, Based on the traffic light state information of the traffic lights of the autonomous vehicle, and generates a control signal for braking the autonomous vehicle.

바람직하게 상기 프로세서는, 선행 차량의 제동으로 인해 기 정해진 알고리즘을 토대로 도출된 차간 거리에 따라 제동을 위한 안내 멘트 또는 신호등의 점등 색상에 따라 제동을 위한 안내 멘트를 생성하여 해당 운전자에게 전달하도록 구비될 수 있다. Preferably, the processor is configured to generate an announcement message for braking according to the lighting color of the announcement message or the traffic light for braking according to the headway distance derived based on the predetermined algorithm due to the braking of the preceding vehicle, and to transmit the generated announcement message to the driver .

바람직하게 상기 상기 자율 주행 차량은, 상기 영상 수집부의 영상과 수신된 영상으로부터 획득된 선행 차량의 주행 상태 정보 및 신호등 상태 정보와, 상기 선행 차량의 주행 상태 정보 및 신호등 상태 정보를 기반으로 생성된 제어 신호를 수신 일자에 매칭되어 메모리의 소정 영역에 기록하는 데이터베이스 모듈과, 영상으로부터 추출된 주행 상태 정보 및 신호등 상태 정보와, 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 자율 주행 차량의 제동에 대한 학습을 수행하는 학습 모듈을 포함할 수 있다.Preferably, the autonomous vehicle further comprises: a control unit for generating a control signal based on driving state information and signal light state information of the preceding vehicle obtained from the image of the image collecting unit and the received image, and driving state information and signal light state information of the preceding vehicle A database module for matching the signal with a reception date and recording the signal in a predetermined area of the memory; a navigation module for searching the database module for navigation state information and signal light state information extracted from the image, driving state information, road state information, And a learning module for performing learning about braking of the autonomous vehicle on the basis of the learning module.

바람직하게 상기 데이터베이스 모듈은, 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보 각각에 대한 데이터베이스를 포함할 수 있고, 상기 학습 모듈은, 영상 수집부의 제1 카메라로부터 수집된 주행 상태 정보가 선행 차량의 테일 램프 점등 상태인 경우 상기 주행 상태 정보 및 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량을 제동하기 위한 제어 신호를 생성하도록 구비될 수 있고, 제2 카메라로부터 수집된 신호등 상태 정보가 노란색 또는 레드색인 경우 상기 신호등 상태 정보와 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량을 제동하기 위한 제어 신호를 생성하도록 구비될 수 있다. Preferably, the database module may include a database for driving state information, road state information, traffic state information, and vehicle state information, respectively, and the learning module may be configured such that the driving state information collected from the first camera And a control unit for performing learning based on the running state information and the running state information, the road state information, the traffic state information, and the vehicle state information of the database module when the tail lamp of the preceding vehicle is in an on state and for braking the autonomous running vehicle The traffic condition information, the road condition information, the traffic condition information, and the vehicle condition information of the database module when the traffic light condition information collected from the second camera is yellow or red, Based on the learning outcome, Rate driving vehicle to generate a control signal for braking the rate-driving vehicle.

본 발명에 따르면 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 토대로 자율 주행 차량의 제동을 제어함에 따라 기존의 자율 주행 차량 제어 방식에 비해 안정성을 근본적으로 확보할 수 있는 자율 주행 차량을 제어할 수 있는 효과를 얻는다.According to the present invention, it is possible to control the braking of the autonomous vehicle based on at least one of the traveling state information and the traffic light state information of the preceding vehicle derived from at least one of the image obtained through the camera, the braking data received through the antenna, It is possible to control the autonomous driving vehicle which can secure the stability basically compared with the existing autonomous driving vehicle control system.

본 발명에 의하면, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나와 지식 기반으로 자율 주행 차량의 제어를 제어함에 따라, 선행 차량의 주행 상태에 대한 자율 주행 차량의 응답 시간을 근본적으로 단축할 수 있게 된다.According to the present invention, at least one of the driving state information and the traffic light state information of the preceding vehicle derived from at least one of the image obtained through the camera, the braking data received through the antenna, and the signal light state data, It is possible to fundamentally shorten the response time of the autonomous vehicle with respect to the running state of the preceding vehicle.

본 명세서에서 첨부되는 다음의 도면들은 본 발명의 바람직한 실시 예를 예시하는 것이며, 후술하는 발명의 상세한 설명과 함께 본 발명의 기술사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니된다.
도 1은 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치의 구성을 보인 도이다.
도 2는 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치의 영상 수집부의 구성을 세부적으로 보인 도이다.
도 3은 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치의 영상 수집부의 영상을 보인 예시도이다.
도 4는 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치의 상태 정보 수집부의 구성을 세부적으로 보인 도이다.
도 5는 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치의 학습부의 구성을 세부적으로 보인 도이다.
BRIEF DESCRIPTION OF THE DRAWINGS The accompanying drawings, which are incorporated in and constitute a part of the specification, illustrate preferred embodiments of the invention and, together with the description of the invention given below, serve to further understand the technical idea of the invention. And should not be construed as limiting.
1 is a diagram showing a configuration of a control apparatus for an autonomous vehicle according to an embodiment of the present invention.
FIG. 2 is a detailed view illustrating the configuration of an image collecting unit of a control apparatus for an autonomous vehicle according to an embodiment of the present invention. FIG.
3 is an exemplary diagram showing an image of an image collecting unit of a control apparatus for an autonomous vehicle according to an embodiment of the present invention.
4 is a detailed diagram illustrating the configuration of a status information collecting unit of a control apparatus for an autonomous vehicle according to an embodiment of the present invention.
5 is a diagram showing in detail the configuration of a learning unit of a control apparatus for an autonomous vehicle according to an embodiment of the present invention.

이하, 본 발명의 실시를 위한 구체적인 내용을 도면에 따라서 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, the present invention will be described in detail with reference to the drawings.

각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. 첨부된 도면에 있어서, 구조물들의 치수는 본 발명의 명확성을 기하기 위하여 실제보다 확대하여 도시한 것이다.Like reference numerals are used for like elements in describing each drawing. In the accompanying drawings, the dimensions of the structures are enlarged to illustrate the present invention in order to clarify the present invention.

제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.The terms first, second, etc. may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another. For example, without departing from the scope of the present invention, the first component may be referred to as a second component, and similarly, the second component may also be referred to as a first component.

본 출원에서 사용한 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서 상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.The terminology used in this application is used only to describe a specific embodiment and is not intended to limit the invention. The singular expressions include plural expressions unless the context clearly dictates otherwise. In this application, the terms "comprises", "having", and the like are used to specify that a feature, a number, a step, an operation, an element, a part or a combination thereof is described in the specification, But do not preclude the presence or addition of one or more other features, integers, steps, operations, components, parts, or combinations thereof. Also, the terms " part, "" module," and " module ", etc. in the specification mean a unit for processing at least one function or operation and may be implemented by hardware or software or a combination of hardware and software have.

하드웨어적인 구현에 의하면, 여기에 설명되는 실시 예는 ASICs (application specific integrated circuits), DSPs (digital signal processors), DSPDs (digital signal processing devices), PLDs (programmable logic devices), FPGAs (field programmable gate arrays, 프로세서(processors), 제어기(controllers), 마이크로 컨트롤러(microcontrollers), 마이크로 프로세서(microprocessors), 기타 기능 수행을 위한 전기적인 유닛 중 적어도 하나를 이용하여 구현될 수 있다. 일부의 경우에 본 명세서에서 설명되는 실시 예들이 프로세서(50) 및 자율 차량 제어부(70) 자체로 구현될 수 있다.According to a hardware implementation, the embodiments described herein may be implemented as application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays May be implemented using at least one of a processor, controllers, microcontrollers, microprocessors, and other electronic units for performing other functions. In some cases, Embodiments may be implemented by the processor 50 and the autonomous vehicle control 70 itself.

소프트웨어적인 구현에 의하면, 본 명세서에서 설명되는 절차 및 기능과 같은 실시 예들은 별도의 소프트웨어 모듈들로 구현될 수 있다. 상기 소프트웨어 모듈들 각각은 본 명세서에서 설명되는 하나 이상의 기능 및 작동을 수행할 수 있다. 적절한 프로그램 언어로 쓰여진 소프트웨어 어플리케이션으로 소프트웨어 코드가 구현될 수 있다 한다.According to a software implementation, embodiments such as the procedures and functions described herein may be implemented with separate software modules. Each of the software modules may perform one or more of the functions and operations described herein. Software code can be implemented in a software application written in an appropriate programming language.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art to which this invention belongs. Terms such as those defined in commonly used dictionaries are to be interpreted as having a meaning consistent with the contextual meaning of the related art and are to be interpreted as either ideal or overly formal in the sense of the present application Do not.

이하에서는 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치 및 방법에 대해 첨부된 도면을 참조하여 구체적으로 설명하기로 한다.Hereinafter, an apparatus and method for controlling an autonomous vehicle according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시 예에 따른 자율 주행 차량의 제어 장치를 나타낸 도면이고, 도 2는 도 1에 도시된 영상 수집부(10)의 세부적인 구성을 보인 도이며, 도 3은 도 2에 도시된 영상 수집부의 영상을 보인 예시도이며, 도 4는 도 1에 도시된 상태 정보 수집부(30)의 세부적인 구성을 보인 도이며, 도 5는 도 1에 도시된 자율 주행 제어부(70)의 세부적인 구성을 보인 도이다. FIG. 1 is a view showing a control apparatus for an autonomous vehicle according to an embodiment of the present invention. FIG. 2 is a diagram showing a detailed configuration of the image collecting unit 10 shown in FIG. 1, FIG. 4 is a diagram illustrating a detailed configuration of the state information collecting unit 30 shown in FIG. 1. FIG. 5 is a block diagram of the autonomic drive controlling unit 70 shown in FIG. 1, FIG.

도 1 내지 도 5를 참조하면 본 발명의 실시 예에 따른 자율 주행 차량(S)은 복수의 카메라를 통해 제공된 영상 및 안테나를 통해 제동 데이터 및 신호등 상태 데이터 중 적어도 하나를 기반으로 선행 차량의 주행 상태 정보 및 주행 도로의 신호등 상태 정보를 획득하고 획득된 선행 차량의 주행 상태 정보 및 신호등 상태 정보를 기초로 자율 주행 차량을 제어하도록 구비될 수 있고, 이러한 자율 주행 차량(S)은, 차량의 소정 위치에 마련되는 복수의 영상 수집부(10), 상태 정보 수집부(30), 프로세서(50), 및 자율 주행 제어부(70)를 포함할 수 있다.1 to 5, an autonomous vehicle S according to an exemplary embodiment of the present invention includes an image and an antenna provided through a plurality of cameras, a driving state of the preceding vehicle based on at least one of braking data and signal light state data The autonomous driving vehicle S may be provided to acquire the traffic light condition information of the information and running road and to control the autonomous driving vehicle on the basis of the obtained driving condition information and the signal light condition information of the preceding vehicle, A status information collecting unit 30, a processor 50, and an autonomous drive controller 70. The image collecting unit 10, the status information collecting unit 30, the processor 50,

여기서, 복수의 영상 수집부(10)는, 차량(S)의 소정 위치에 소정 간격으로 별도 설치된 복수의 카메라를 통해 주행 중인 도로의 물체 정보를 획득하도록 구비될 수 있고, 복수의 카메라의 소정 위치 및 간격은 수집하고자 하는 수집하고자 하는 물체의 위치를 기반으로 설정될 수 있다. 이때 복수의 카메라는 주행 중인 도로의 전방 영상, 후방 영상, 및 측방 영상 중 다양한 방향의 영상을 획득할 수 있으나 본 발명의 실시 예에서는 전방 영상을 수집하는 것을 일례로 설명하고 있으나 이에 한정되지 아니하며, 단일 카메라, 입체 카메라, 전방위 카메라, 단안 카메라 등으로 구현될 수 있다. Here, the plurality of image collecting units 10 may be provided to acquire object information of the road on the road through a plurality of cameras separately provided at predetermined positions of the vehicle S at predetermined intervals, And the interval may be set based on the position of the object to be collected. At this time, a plurality of cameras can acquire images in various directions of a forward image, a backward image, and a lateral image of a road on which the vehicle is traveling. However, the present invention is not limited thereto. For example, A single camera, a stereoscopic camera, a panoramic camera, a monocular camera, or the like.

여기서, 물체라 함은 주행 중인 도로에 위치한 선행 차량의 주행 상태, 예를 들어, 선행 차량의 제동 여부를 확인할 수 있는 테일 램프의 색상, 선행 차량의 차선 변경을 위한 방향 지시등의 점등, 및 비상 정차를 위한 비상등 점등 중 하나 일 수 있다.Here, the term " object " refers to a running state of a preceding vehicle located on a running road, for example, a color of a tail lamp capable of confirming whether a preceding vehicle is braked, a turn indicator for turning a lane of a preceding vehicle, Or an emergency lighting for the vehicle.

그리고, 신호등 상태 정보는 주행 도로의 전방에 위치한 신호등의 색상 정보일 수 있다.The traffic light status information may be color information of a traffic light located ahead of the road.

이에 영상 수집부(10)는 상호 수직 배열되고 선행 차량의 주행 상태 정보를 수집하기 위한 제1 카메라(11)와 신호등 상태 정보를 수집하는 제2 카메라(13)를 포함할 수 있고, 제1 카메라(11)는 근거리에 위치한 선행 차량의 테일 램프의 색상을 수집하기 위해 기 정해진 소정 화각 보다 넓은 화각을 가지도록 조정되는 렌즈를 포함할 수 있고, 제2 카메라(13)는 원 거리에 위치한 신호등의 상태 정보를 수집하기 위해 소정 화각 보다 좁은 화각을 가지도록 조정 가능한 렌즈를 포함할 수 있다.The image collecting unit 10 may include a first camera 11 arranged vertically and collecting driving state information of the preceding vehicle and a second camera 13 collecting the signal lamp state information, And the second camera 13 may include a lens that is adjusted to have a wider angle of view than the predetermined angle of view for collecting the color of the tail lamp of the preceding vehicle located in the close range, And may include a lens adjustable to have a narrower angle of view than the predetermined angle of view to collect status information.

이에 제1 카메라 및 제2 카메라를 통해 수집된 선행 차량의 주행 상태 정보 및 신호등 상태 정보를 포함하는 영상은 프로세서(50)로 전달될 수 있다.An image including the driving state information and the traffic light state information of the preceding vehicle collected through the first camera and the second camera may be transmitted to the processor 50.

제1 카메라(11) 및 제2 카메라(13)를 통해 제공된 선행 차량에 대한 영상 및 신호등에 대한 영상을 토대로 선행 차량의 제동 및 신호등 점등 색상을 판단하는 일련의 과정은 본 출원인에 의거 기 출원되었는 바 이에 대한 구체적인 설명은 생략한다. A series of processes for judging the braking of the preceding vehicle and the signal lamp lighting color based on the image of the preceding vehicle and the signal lamp provided through the first camera 11 and the second camera 13 are performed by the applicant A detailed description thereof will be omitted.

프로세서(50)는 제1 카메라(11) 및 제2 카메라(13)를 통해 수집된 선행 차량의 영상으로부터 자율 주행 차량(S) 제어에 필요한 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 추출한 후 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나에 따른 자율 주행 차량(S)의 제동을 위한 제어 신호를 생성하여 자율 주행 제어부(70)로 전달할 수 있다.The processor 50 extracts at least one of the traveling state information and the traffic light state information necessary for the control of the autonomous vehicle S from the image of the preceding vehicle collected through the first camera 11 and the second camera 13, The control signal for braking the autonomous vehicle S according to at least one of the running state information of the vehicle and the signal lamp state information may be generated and transmitted to the autonomous drive control unit 70. [

예를 들어, 프로세서(50)는 제1 카메라(11)를 통해 수집된 영상으로부터 선행 차량의 테일 램프의 색상을 추출한 후 추출된 선행 차량의 테일 렘프의 색상이 레드인 경우 자율 주행 차량(S)를 제동 또는 급제동을 위한 제어 신호를 생성할 수 있다.For example, the processor 50 extracts the color of the tail lamp of the preceding vehicle from the image collected through the first camera 11, and calculates the color of the tail lamp of the preceding vehicle when the color of the tail lamp of the extracted preceding vehicle is red. It is possible to generate a control signal for braking or rapid braking.

또한 프로세서(50)는 제2 카메라(13)를 통해 수집된 영상으로부터 신호등 상태 정보를 추출한 후 신호등의 점등 색상을 토대로 자율 주행 차량(S)의 제동 또는 주행을 위한 제어 신호를 생성하여 자율 주행 제어부(70)로 전달할 수 있다. 예를 들어, 프로세서(50)는 추출된 신호등 점등 색상이 레드인 경우 자율 주행 차량(S)를 제동하기 위한 제어 신호를 생성하여 자율 주행 제어부(70)로 전달할 수 있다.The processor 50 extracts the traffic light status information from the image collected through the second camera 13 and generates a control signal for braking or running the autonomous vehicle S based on the lighting color of the traffic light, (70). For example, the processor 50 may generate a control signal for braking the autonomous driving vehicle S and transmit the control signal to the autonomous driving control unit 70 when the extracted signal lighting color is red.

한편, 본 발명의 실시 예에 따른 자율 주행 차량(S)은 안테나를 통해 선행 차량 및 신호등으로부터 공급되는 제동 데이터 및 신호등 상태 데이터 중 적어도 하나로부터 선행 차량의 주행 상태 정보 및 신호등 상태 정보를 추출하여 자율 주행 차량을 제어하기 위한 제어 신호를 생성하도록 구비될 수 있다. 이에 본 발명의 실시 예에 따른 자율 주행 차량(S)은 상태 정보 수집부(30)를 더 포함할 수 있다.On the other hand, the autonomous vehicle S according to the embodiment of the present invention extracts the running state information and the signal lamp state information of the preceding vehicle from at least one of the braking data and the signal lamp state data supplied from the preceding vehicle and the signal lamp through the antenna, And generate a control signal for controlling the traveling vehicle. Accordingly, the autonomous vehicle S according to the embodiment of the present invention may further include a status information collection unit 30. [

이에 상태 정보 수집부(30)는 안테나(ANT)를 통해 선행 차량의 테일 램프로부터 제공되는 선행 차량의 제동 데이터 및 신호등 상태 데이터로부터 선행 차량의 주행 상태 정보와 주행 차선의 신호등으로부터 공급되는 신호등 상태 정보를 추출할 수 있다. The state information collecting unit 30 collects traffic state information of the preceding vehicle and traffic light state information supplied from the traffic light of the driving lane from the braking data and the traffic light state data of the preceding vehicle provided from the tail lamp of the preceding vehicle through the antenna ANT Can be extracted.

여기서, 선행 차량 및 신호등의 주행 도로의 물체와 자율 주행 차량(S) 간의 제동 데이터 및 신호등 상태 데이터의 통신은 근거리 통신 모듈로서, 근거리 통신 모듈이라 함은 적외선, RF(Radio Frequency), 블루투스 및 이더넷의 통신망과 홈PNA, PLC(Power Line Communication), IEEE1394, 홈 RF를 포함하는 홈 네트워크 망의 다양한 형태로 구현 가능하며, 향후 신호 전송 방식을 발달에 따라 향상된 전송 방식을 수용할 수 있다.Herein, the communication of the braking data and the traffic light status data between the object of the traveling road of the preceding vehicle and the traffic light and the autonomous vehicle S is a short-range communication module, and the short-range communication module is infrared communication, radio frequency (RF) And a home network including a home PNA, a PLC (Power Line Communication), an IEEE 1394, and a home RF network. The signal transmission method can accommodate an improved transmission method according to the development of a signal transmission method in the future.

이에 상태 정보 수집부(30)는 안테나를 통해 수신된 동일 차선을 주행 중인 선행 차량의 테일 램프로부터 제공되는 선행 차량의 제동 데이터를 수신하여 선행 차량의 주행 상태 정보를 추출하는 주행 상태 수집 모듈(31)과, 안테나를 통해 주행하는 차선의 신호등으로부터 공급되는 신호등 상태 데이터를 수신하여 차량 상태 정보를 추출하는 신호등 상태 수집 모듈(33)을 포함할 수 있다.The state information collecting unit 30 receives the braking data of the preceding vehicle provided from the tail lamp of the preceding vehicle traveling in the same lane on the same lane received through the antenna and extracts the traveling state information of the preceding vehicle And a traffic light condition collecting module 33 for receiving traffic light condition data supplied from a traffic light of a lane traveling through the antenna and extracting vehicle condition information.

주행 상태 수집 모듈(31)은 주행 도로의 복수의 선행 차량의 테일 램프의 점등 시 각각의 선행 차량으로부터 공급되는 제동 데이터를 안테나를 통해 수신하여 디코딩한 후 각 제동 데이터에 포함된 차량 식별 코드를 추출하고 추출된 차량 식별 코드를 이용하여 동일 주행 차선에 위치한 선행 차량의 제동 데이터를 추출하도록 구비될 수 있다. 여기서, 제동 데이터는 각 차량 마다 다른 테일 램프의 점등 코드 및 각 선행 차량의 식별 코드를 포함하여 전파될 수 있다. The traveling state collecting module 31 receives and decodes the braking data supplied from each preceding vehicle through the antenna when the tail lamps of the plurality of preceding vehicles on the traveling road are lit and extracts the vehicle identification code included in each braking data And extracting the braking data of the preceding vehicle located in the same driving lane using the extracted vehicle identification code. Here, the braking data may be propagated including a lighting code of a tail lamp different for each vehicle and an identification code of each preceding vehicle.

한편, 신호등 상태 수집 모듈(33)은 교차로 및 횡단 보도에 설치된 복수개의 신호등의 점등 시 각각의 신호등으로부터 신호등 상태 데이터를 안테나를 통해 수신하고 수신된 신호등 상태 데이터에 포함된 색상 코드 및 신호등 식별 코드를 추출하고 추출된 신호등 식별 코드 및 색상 코드를 토대로 주행 중인 도로에 해당하는 신호등 색상 코드를 추출하여 신호등 상태 정보를 획득할 수 있다. 여기서 신호등 상태 데이터는 각 신호등 식별 코드와 해당 신호등의 점등 색상을 나타내는 신호등 색상 코드를 포함하여 개별 기 정해진 주파수 대역으로 전파될 수 있다.On the other hand, the traffic light condition collecting module 33 receives the traffic light status data from each traffic light at the intersections and a plurality of traffic lights installed on the crosswalk, through the antenna, and transmits the color code and the traffic light identification code included in the received traffic light status data The traffic light color code corresponding to the driving road can be extracted based on the extracted traffic light identification code and the color code to obtain the traffic light status information. Here, the traffic light status data can be propagated to individual predetermined frequency bands including a signal light color code indicating each traffic light identification code and a lighting color of the corresponding traffic lights.

한편, 프로세서(50)는 주행 상태 수집 모듈(31)로부터 공급되는 주행 상태 정보를 기반으로 선행 차량의 제동 여부를 판단할 수 있고, 신호등 상태 수집 모듈(33)로부터 공급되는 신호등 상태 정보를 기반으로 신호등의 점등 색상을 판단할 수 있다. 예를 들어, 선행 차량의 테일 램프가 제동 색상으로 점등되거나 신호등의 점등 색상이 노란색 및 적색인 경우 프로세서(50)는 자율 주행 차량(S)를 제동하기 위한 제어 신호를 생성할 수 있다.On the other hand, the processor 50 can determine whether the preceding vehicle is braked based on the running state information supplied from the running state collecting module 31, and based on the signal lamp state information supplied from the signal lamp state collecting module 33 The lighting color of the traffic light can be judged. For example, the processor 50 may generate a control signal for braking the autonomous vehicle S when the tail lamp of the preceding vehicle is illuminated with a braking color or when the lighting colors of the traffic lights are yellow and red.

즉, 프로세서(50)는 수신된 신호등 상태 데이터 및 선행 차량의 제동 데이터 중 적어도 하나를 토대로 주행 중인 차선의 선행 차량의 제동 여부를 판단할 수 있다. In other words, the processor 50 can determine whether or not the preceding vehicle in the driving lane is braked based on at least one of the received signal state data and the braking data of the preceding vehicle.

이에 프로세서(50)는 선행 차량의 제동으로 인해 기 정해진 알고리즘을 토대로 도출된 차간 거리에 따라 급제동 및 제동을 위한 안내 멘트 또는 신호등의 점등 색상에 따라 제동을 위한 안내 멘트를 생성하여 해당 운전자에게 전달할 수 있다.The processor 50 can generate a notification message for braking according to the lighting color of the warning light or the traffic light for rapid braking and braking in accordance with the vehicle distance derived based on the predetermined algorithm due to the predetermined braking of the preceding vehicle, have.

이어 프로세서(50)는 차간 거리에 따른 자율 주행 차량(S)의 급제동 및 제동을 위한 제어 신호를 자율 주행 제어부(70)로 전달하고, 이에 자율 주행 제어부(70)는 자율 주행 차량(S)의 급제동 및 제동 중 하나를 수행할 수 있다.The processor 50 transmits a control signal for rapid braking and braking of the autonomous vehicle S to the autonomous-travel controller 70 according to the inter-vehicle distance, and the autonomous- It is possible to perform one of rapid braking and braking.

전술한 바와 같이 프로세서(50)는 영상 수집부(10)의 선행 차량의 영상 및 신호등의 영상과 상태 정보 수집부(30)의 제동 데이터와 신호등 상태 데이터 중 적어도 하나를 기반으로 선행 차량의 제동 여부 및 신호등 색상 상태 중 적어도 하나를 분석하고 분석 결과 선행 차량의 제동 또는 신호등이 노란색 및 적색 중 하나 점등 시 자율 주행 차량(S)를 제동하기 위한 제어 신호를 생성할 수 있다.As described above, the processor 50 determines whether braking of the preceding vehicle based on at least one of the image of the preceding vehicle and the signal lamp of the image collecting unit 10, the braking data of the state information collecting unit 30, And a traffic light color state, and as a result of the analysis, it is possible to generate a control signal for braking the autonomous driving vehicle S when the braking of the preceding vehicle or the signal light is turned on in either yellow or red.

이러한 제어 신호에 따라 자율 주행 제어부(70)에 의거 자율 주행 차량(S)는 제동하게 된다.Based on the control signal, the autonomous driving control unit 70 causes the autonomous driving vehicle S to brak.

한편, 자율 주행 차량(S)은 제1 카메라(11) 및 제2 카메라(13)의 영상, 영상의 분석 결과에 따른 선행 차량의 주행 상태 정보 및 신호등 상태 정보, 및 제어 신호를 토대로 자율 주행 차량(S)에 대한 이력 관리를 실행할 수 있고, 이에 제어 장치는 데이터베이스 모듈(71) 및 학습 모듈(73)을 더 포함할 수 있다.On the other hand, the autonomous driving vehicle S is configured to determine the autonomous driving vehicle S based on the driving state information and the signal light state information of the preceding vehicle according to the analysis results of the images of the first camera 11 and the second camera 13, (S), and the control device can further include a database module 71 and a learning module (73).

데이터베이스 모듈(71)은 프로세서(50)로부터 제공된 제1 카메라(11) 및 제2 카메라(13)의 영상과 수신된 영상으로부터 획득된 선행 차량의 주행 상태 정보 및 신호등 상태 정보와, 상기 선행 차량의 주행 상태 정보 및 신호등 상태 정보를 기반으로 한 자율 주행 제어부(70)의 제어 신호를 수신 일자에 매칭되어 메모리의 소정 영역에 기록할 수 있다.The database module 71 receives the driving state information and the traffic light state information of the preceding vehicle obtained from the images of the first camera 11 and the second camera 13 provided from the processor 50 and the received image, The control signal of the autonomous-travel control unit 70 based on the traveling state information and the traffic-light state information can be recorded in a predetermined area of the memory by matching the reception date.

이에 데이터베이스 모듈(71)은 제1카메라(11) 및 제2카메라(13)로부터 수집된 주행 도로의 영상으로부터 주행 상태 정보, 도로 상태 정보, 교통 상태 정보를 추출하여 주행 상태 정보 DB, 도로 상태 정보 DB, 교통 상태 정보DB를 각각 구축할 수 있다.The database module 71 extracts the running state information, the road state information, and the traffic state information from the image of the traveling road collected from the first camera 11 and the second camera 13, DB, and a traffic condition information DB, respectively.

데이터베이스 모듈(71)은 차량 내부에 전자 제어 유닛(ECU)과 캔 통신 또는 랜 통신을 통해 제공받은 차량 상태 정보를 토대로 차량 상태 정보 DB를 더 구축할 수 있다.The database module 71 can further construct a vehicle state information DB based on the vehicle state information provided through CAN communication or LAN communication with the electronic control unit (ECU) in the vehicle.

또한, 학습 모듈(73)은 영상 수집부(10)의 제1 카메라(11) 및 제2 카메라(13)로부터 제공된 영상 및 그에 대응되어 추출된 주행 상태 정보 및 신호등 상태 정보와 기 저장된 데이터베이스 모듈(71)의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 자율 주행 차량(S)에 대한 학습을 수행하도록 구비될 수 있다. The learning module 73 also receives the images provided from the first camera 11 and the second camera 13 of the image capturing unit 10 and the driving status information and the traffic light status information extracted corresponding thereto, 71, the road state information, the traffic state information, and the vehicle state information on the autonomous vehicle S, as shown in FIG.

예를 들어 제1 카메라(11)로부터 수집된 주행 상태 정보가 선행 차량의 테일 램프 점등 상태인 경우 학습 모듈(73)은 영상 수집부(10) 주행 상태 정보와 기 저장된 데이터베이스 모듈(71)의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량(S)을 제동하기 위한 제어 신호를 생성할 수 있다.For example, when the traveling state information collected from the first camera 11 is in the tail lamp on state of the preceding vehicle, the learning module 73 compares the traveling state information of the image collecting unit 10 with the traveling state information of the previously stored database module 71 It is possible to generate a control signal for performing learning based on state information, road state information, traffic state information and vehicle state information, and for braking the autonomous driving vehicle S according to the learning results.

학습 모듈(73)의 학습 결과에 따라 도출된 자율 제어 차량(S)의 제어 신호를 토대로 자율 주행 차량(S)은 제동하게 된다.The autonomous vehicle S is braked based on the control signal of the autonomous control vehicle S derived in accordance with the learning result of the learning module 73. [

또한, 제2 카메라(13)로부터 수집된 신호등 상태 정보가 노란색 또는 레드색인 경우 학습 모듈(73)은 영상 수집부(10) 신호등 상태 정보와 기 저장된 데이터베이스 모듈(71)의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량(S)을 제동하기 위한 제어 신호를 생성할 수 있다. 이에 학습 모듈(73)의 학습 결과에 따라 도출된 자율 제어 차량(S)의 제어 신호를 토대로 자율 주행 차량(S)은 제동할 수 있다. When the traffic light condition information collected from the second camera 13 is yellow or red, the learning module 73 compares the traffic light status information of the image collecting unit 10 with the traffic condition information of the previously stored database module 71, It is possible to generate a control signal for performing learning based on information, traffic state information and vehicle state information and for braking the autonomous driving vehicle S according to the learning result. The autonomous vehicle S can be braked based on the control signal of the autonomous control vehicle S derived in accordance with the learning result of the learning module 73. [

본 발명의 실시 예에 따르면, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 토대로 자율 주행 차량의 제동을 제어함에 따라 기존의 자율 주행 차량 제어 방식에 비해 안정성을 근본적으로 확보할 수 있는 자율 주행 차량을 제어할 수 있게 된다.According to an embodiment of the present invention, there is provided an autonomous vehicle control system for a self-driving vehicle, comprising at least one of a driving state information of a preceding vehicle derived from at least one of an image obtained through a camera and braking data received via an antenna, It is possible to control the autonomous driving vehicle which can secure the stability of the autonomous driving vehicle as compared with the existing autonomous driving vehicle control method.

본 발명에 의하면, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나와 지식 기반으로 자율 주행 차량의 제어를 제어함에 따라, 이에 따라 선행 차량의 주행 상태에 대한 자율 주행 차량의 응답 시간을 근본적으로 단축할 수 있게 된다.According to the present invention, at least one of the driving state information and the traffic light state information of the preceding vehicle derived from at least one of the image obtained through the camera, the braking data received through the antenna, and the signal light state data, The response time of the autonomous vehicle with respect to the running state of the preceding vehicle can be fundamentally shortened.

전술한 장치를 기반으로 본 발명의 다른 실시 예에 따른 자율 주행 차량의 제어 방법은, 영상 수집부에서 자율 주행 차량의 소정 위치에 소정 간격으로 마련된 복수의 카메라를 통해 주행 중인 도로의 물체의 영상 정보를 수신하는 영상 수집 단계; 프로세서에서 상기 영상 수집부의 물체의 영상 정보를 토대로 자율 주행 차량을 제어하기 위한 제어 신호를 생성하여 자율 주행 제어부로 전달하는 자율 주행 차량 제어 단계를 포함하는 것을 특징으로 한다.According to another aspect of the present invention, there is provided a method for controlling an autonomous vehicle, comprising the steps of: acquiring image information of an object of a road on a road through a plurality of cameras provided at predetermined intervals in a self- An image collecting step of receiving the image; And an autonomous driving vehicle control step of generating a control signal for controlling the autonomous driving vehicle based on the image information of the object of the image collecting part and transmitting the control signal to the autonomous driving control part.

여기서, 상기 영상 수집 단계는, 수집하고자 하는 수집하고자 하는 물체의 위치를 기반으로 소정 위치 및 간격이 설정된 상기 복수의 카메라의 영상으로부터 선행 차량의 영상으로부터 자율 주행 차량 제어에 필요한 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 추출할 수 있고 상기 자율 주행 차량 제어 단계는 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나에 따라 자율 주행 차량의 제동을 위한 제어 신호를 생성할 수 있다.Here, the image collecting step may include calculating driving state information necessary for controlling the autonomous vehicle from the images of the preceding vehicle from the images of the plurality of cameras, the predetermined positions and intervals being set based on the position of the object to be collected, The autonomous vehicle control step may generate a control signal for braking the autonomous vehicle according to at least one of the running state information and the signal lamp state information of the preceding vehicle.

한편 상기 자율 주행 차량의 제어 방법은, 안테나를 통해 선행 차량의 테일 램프로부터 제공되는 선행 차량의 제동 데이터 및 신호등 상태 데이터로부터 선행 차량의 주행 상태 정보와 주행 차선의 신호등으로부터 공급되는 신호등 상태 정보를 추출하는 상태 정보 수집 단계를 더 포함할 수 있고, 상기 자율 주행 차량 제어 단계는 주행 상태 수집 모듈로부터 공급되는 주행 상태 정보를 기반으로 선행 차량의 제동 여부를 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성할 수 있고, 신호등 상태 수집 모듈로부터 공급되는 신호등 상태 정보를 기반으로 신호등의 점등 색상을 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성할 수도 있다.On the other hand, the control method of the autonomous vehicle includes extracting, from the braking data and the signal light state data of the preceding vehicle provided from the tail lamp of the preceding vehicle through the antenna, the state information of the preceding vehicle and the signal state information supplied from the signal of the driving lane Wherein the autonomous-traveling-vehicle control step includes a step of determining whether or not the preceding vehicle is braked based on the running state information supplied from the running state collecting module, and outputting a control signal for braking the autonomous- And may generate a control signal for braking the autonomous vehicle based on signal light condition information supplied from the signal light condition collecting module by judging the lighting color of the traffic light.

여기서 상기 자율 주행 차량 제어 단계는 상기 선행 차량의 제동으로 인해 기 정해진 알고리즘을 토대로 도출된 차간 거리에 따라 제동을 위한 안내 멘트 또는 신호등의 점등 색상에 따라 제동을 위한 안내 멘트를 생성하여 해당 운전자에게 전달하도록 구비될 수 있다.Here, in the step of controlling the autonomous vehicle, an announcement item for braking is generated according to the lighting color of the warning light or the traffic light for braking according to the inter-vehicle distance derived based on the predetermined algorithm due to the braking of the preceding vehicle, .

또한, 상기 자율 주행 차량의 제어 방법은, 지식 기반으로 자율 주행 차량을 제어하기 위해, 상기 영상 수집부의 영상으로부터 추출된 주행 상태 정보 및 신호등 상태 정보와, 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 자율 주행 차량의 제동에 대한 학습을 수행하는 학습 단계를 더 포함할 수 있고, 상기 학습 단계는 영상 수집부 및 상태 정보 수집부 중 적어도 하나로부터 수집된 주행 상태 정보가 선행 차량의 테일 램프 점등 상태인 경우 상기 주행 상태 정보 및 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량을 제동하기 위한 제어 신호를 생성할 수 있다.The control method of the autonomous vehicle may further include driving state information and signal light state information extracted from the image of the image collecting unit, driving state information of the database module, road state information, The learning step may include learning the braking of the autonomous vehicle based on the traffic state information and the vehicle state information, and the learning step may include a step of calculating a running state information collected from at least one of the image collecting unit and the state information collecting unit, Performs a learning based on the running state information and the running state information, the road state information, the traffic state information, and the vehicle state information of the database module when the tail lamp of the preceding vehicle is turned on and brakes the autonomous driving vehicle according to the learning result Can be generated.

상기의 자율 주행 차량 제어 방법의 각 단계는 전술한 영상 수집부(10), 상태 정보 수집부(30), 프로세서(50), 및 자율 차량 제어부(70)에서 수행되는 기능으로 자세한 원용은 생략한다. Each step of the autonomous vehicle control method is performed by the image collecting unit 10, the state information collecting unit 30, the processor 50, and the autonomous vehicle control unit 70, .

본 발명의 실시 예에서 자율 주행 차량의 제어 장치가 별도의 단말로 차량 실내의 소정 위치에 마련하는 것을 일 례로 설명하고 있으나, 차량용 블랙박스에 내장 설치할 수 있다.Although the control device of the autonomous vehicle in the embodiment of the present invention is provided as a separate terminal at a predetermined position in the vehicle interior, it can be installed in a vehicle black box.

이상에서 대표적인 실시예를 통하여 본 발명을 상세하게 설명하였으나, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 상술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리 범위는 설명한 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 특허청구범위와 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태에 의하여 정해져야 한다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments. will be. Therefore, the scope of the present invention should not be limited to the above-described embodiments, but should be determined by all changes or modifications derived from the scope of the appended claims and equivalents of the following claims.

카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 토대로 자율 주행 차량의 제동을 제어함에 따라 기존의 자율 주행 차량 제어 방식에 비해 안정성을 근본적으로 확보할 수 있는 자율 주행 차량을 제어할 수 있고, 카메라를 통해 획득된 영상과 안테나를 통해 수신된 제동데이터 및 신호등 상태 데이터 중 적어도 하나로부터 도출된 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나와 지식 기반으로 자율 주행 차량의 제어를 제어함에 따라, 이에 따라 선행 차량의 주행 상태에 대한 자율 주행 차량의 응답 시간을 근본적으로 단축할 수 있는 자율 주행 차량의 제어 장치에 대한 운용의 정확성 및 신뢰도 측면, 더 나아가 성능 효율 면에 매우 큰 진보를 가져올 수 있으며, 차량용 블랙박스의 시판 또는 영업의 가능성이 충분할 뿐만 아니라 현실적으로 명백하게 실시할 수 있는 정도이므로 산업상 이용가능성이 있는 발명이다.The braking of the autonomous vehicle is controlled based on at least one of the traveling state information and the traffic light state information of the preceding vehicle derived from at least one of the image obtained through the camera, the braking data received through the antenna, and the signal light state data, The control unit can control an autonomous vehicle that can basically secure stability compared to an autonomous vehicle control system, and can control the autonomous vehicle, which is derived from at least one of the image obtained through the camera, the braking data received via the antenna, Which is capable of fundamentally shortening the response time of the autonomous driving vehicle with respect to the driving state of the preceding vehicle, by controlling the control of the autonomous driving vehicle based on at least one of the driving state information and the traffic light state information of the preceding vehicle Accuracy and reliability of operation of the control unit Surface, can lead to further very big improvement in efficiency and performance, since the degree to which, as well as there is sufficient potential for commercial or marketing of the vehicle black box can be explicitly carried in reality the invention there is industrial applicability.

Claims (29)

자율 주행 차량의 소정 위치에 소정 간격으로 마련된 복수의 카메라를 통해 주행 중인 도로의 물체의 영상 정보를 수신하는 영상 수집부; 및
상기 영상 수집부의 물체의 영상 정보를 토대로 자율 주행 차량을 제어하기 위한 제어 신호를 생성하여 자율 주행 제어부로 전달하는 프로세서를 포함하고,
안테나를 통해 수집된 선행 차량의 제동 데이터와 교차로 및 횡단 보도에 설치된 복수의 신호등의 신호등 상태 데이터로부터 선행 차량의 주행 상태 정보 및 차선의 신호등 상태 정보를 추출하여 상기 프로세서로 전달하는 상태 정보 수집부를 더 포함하되,
상기 상태 정보 수집부는,
복수의 선행 차량 중 적어도 하나 차량의 테일 램프의 점등 시 안테나를 통해 수신된 제동 데이터를 디코딩하여 상기 제동 데이터에 포함된 각 차량 마다 다른 테일 램프의 점등 코드와 차량 식별 코드를 추출하고, 추출된 차량 식별 코드 별로 정해진 주파수 대역으로 추출된 차량 식별 코드 및 점등 코드를 포함하는 상기 제동 데이터를 근거리 통신모듈을 이용하여 전파하도록 구비되고,
교차로 및 횡단보도에 설치된 복수의 신호등으로부터 제공된 신호등 상태 데이터를 안테나를 수신하여 신호등 상태 데이터에 포함된 신호등 식별 코드 및 색상 코드를 추출하며, 추출된 신호등 식별 코드 별로 정해진 주파수 대역으로 추출된 신호등 식별 코드 및 색상 코드를 포함하는 상기 신호등 상태 데이터를 근거리 통신모듈을 이용하여 전파하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
An image collecting unit for receiving image information of an object of a road on the road through a plurality of cameras provided at predetermined positions of the autonomous vehicle at predetermined intervals; And
And a processor for generating a control signal for controlling the autonomous vehicle based on the image information of the object of the image collecting unit and delivering the control signal to the autonomous drive controller,
A state information collecting unit for extracting the driving state information of the preceding vehicle and the traffic light state information of the lane from the traffic light data of the plurality of traffic lights provided at the intersections and the crosswalk collected from the preceding vehicle collected through the antenna, Including,
The state information collecting unit,
When the tail lamp of at least one of the plurality of preceding vehicles is lit, decoding the braking data received through the antenna, extracting a lighting code and a vehicle identification code of a tail lamp different for each vehicle included in the braking data, The braking data including the vehicle identification code and the lighting code extracted in the frequency band determined by the identification code are propagated using the short distance communication module,
The traffic light status data provided from the plurality of traffic lights provided at the intersections and the pedestrian crossings are received by the antenna and the traffic light identification code and color code included in the traffic light status data are extracted, And the color code, using the short distance communication module. ≪ Desc / Clms Page number 19 >
제1항에 있어서, 상기 영상 수집부는,
수집하고자 하는 물체의 위치를 기반으로 상기 복수의 카메라의 소정 위치 및 간격을 설정하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The image processing apparatus according to claim 1,
Wherein the controller is configured to set predetermined positions and intervals of the plurality of cameras based on positions of objects to be collected.
제2항에 있어서, 상기 영상 수집부는,
선행 차량의 영상으로부터 자율 주행 차량 제어에 필요한 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 추출할 수 있고
상기 프로세서는
선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나에 따라 자율 주행 차량의 제동을 위한 제어 신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The image processing apparatus according to claim 2,
At least one of the traveling state information and the traffic light state information necessary for controlling the autonomous vehicle from the image of the preceding vehicle can be extracted
The processor
And generates a control signal for braking the autonomous vehicle according to at least one of the running state information of the preceding vehicle and the signal lamp state information.
제3항에 있어서, 상기 영상 수집부는,
주행 중인 도로에 위치한 선행 차량의 제동 여부를 확인할 수 있는 테일 램프의 색상, 선행 차량의 차선 변경을 위한 방향 지시등의 점등, 및 비상 정차를 위한 비상등 점등 중 하나인 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The image processing apparatus according to claim 3,
A color of a tail lamp capable of checking whether a preceding vehicle is braked on a road being driven, lighting of a turn indicator for changing a lane of a preceding vehicle, and emergency lighting for emergency stop. Device.
제3항에 있어서, 상기 영상 수집부는,
상호 수직 배열되고 선행 차량의 주행 상태 정보를 수집하기 위한 제1 카메라와, 신호등 상태 정보를 수집하는 제2 카메라 중 적어도 하나를 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The image processing apparatus according to claim 3,
A first camera for vertically arranging and collecting driving state information of the preceding vehicle, and a second camera for collecting the signal state information of the preceding vehicle.
제5항에 있어서, 상기 제1 카메라는
근거리에 위치한 선행 차량의 테일 램프의 색상을 수집하기 위해 기 정해진 소정 화각 보다 넓은 화각을 가지도록 조정되는 렌즈를 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
6. The apparatus of claim 5, wherein the first camera
And a lens that is adjusted so as to have a wider angle of view than the predetermined angle of view predetermined for collecting the color of the tail lamp of the preceding vehicle located in the close range.
제5항에 있어서, 상기 제2 카메라는
원 거리에 위치한 신호등의 상태 정보를 수집하기 위해 소정 화각 보다 좁은 화각을 가지도록 조정 가능한 렌즈를 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The apparatus of claim 5, wherein the second camera
And a lens adjustable so as to have a narrower angle of view than a predetermined angle of view for collecting status information of a traffic light located at an original distance.
삭제delete 제1항에 있어서, 상기 상태 정보 수집부는
안테나를 통해 수신된 동일 차선을 주행 중인 선행 차량의 테일 램프로부터 제공되는 선행 차량의 제동 데이터를 수신하여 선행 차량의 주행 상태 정보를 추출하는 주행 상태 수집 모듈과,
안테나를 통해 주행하는 차선의 신호등으로부터 공급되는 신호등 상태 데이터를 수신하여 차량 상태 정보를 추출하는 신호등 상태 수집 모듈 중 적어도 하나를 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The apparatus of claim 1, wherein the status information collecting unit
A traveling state collecting module for receiving braking data of a preceding vehicle provided from a tail lamp of a preceding vehicle traveling in the same lane through an antenna and extracting traveling state information of the preceding vehicle;
And a signal light condition collecting module for receiving the signal light condition data supplied from the traffic light of the lane traveling through the antenna and extracting the vehicle condition information.
제9항에 있어서, 상기 주행 상태 수집 모듈은
주행 도로의 복수의 선행 차량의 테일 램프의 점등 시 각각의 선행 차량으로부터 공급되는 제동 데이터를 안테나를 통해 수신하여 디코딩한 후 각 제동 데이터에 포함된 차량 식별 코드를 추출하고 추출된 차량 식별 코드를 이용하여 동일 주행 차선에 위치한 선행 차량의 제동 데이터를 추출하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
10. The apparatus of claim 9, wherein the driving condition acquisition module
When the tail lamps of a plurality of preceding vehicles on the running road are lit, the braking data supplied from each preceding vehicle is received and decoded through the antenna, and then the vehicle identification code included in each braking data is extracted and the extracted vehicle identification code is used And to extract braking data of the preceding vehicle located in the same driving lane.
제10항에 있어서, 상기 제동 데이터는
각 차량 마다 다른 테일 램프의 점등 코드 및 각 선행 차량의 식별 코드를 포함하여 전파하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
11. The method as claimed in claim 10, wherein the braking data
Wherein the control unit is configured to propagate the vehicle including the lighting code of another tail lamp and the identification code of each preceding vehicle for each vehicle.
제9항에 있어서, 상기 신호등 상태 수집 모듈은,
교차로 및 횡단 보도에 설치된 복수개의 신호등의 점등 시 각각의 신호등으로부터 신호등 상태 데이터를 안테나를 통해 수신하고 수신된 신호등 상태 데이터에 포함된 색상 코드 및 신호등 식별 코드를 추출하고 추출된 신호등 식별 코드 및 색상 코드를 토대로 주행 중인 도로에 해당하는 신호등 색상 코드를 추출하여 신호등 상태 정보를 획득하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
10. The traffic light status collecting module according to claim 9,
A plurality of traffic lights installed at intersections and pedestrian crossings are lighted, the traffic light status data is received from each traffic light through an antenna, a color code and a traffic light identification code included in the received traffic light status data are extracted and the extracted traffic light identification code and color code Wherein the control unit is configured to extract a traffic light color code corresponding to the road on which the vehicle is traveling, and to obtain the traffic light status information.
삭제delete 제9항에 있어서, 상기 프로세서는
상기 주행 상태 수집 모듈로부터 공급되는 주행 상태 정보를 기반으로 선행 차량의 제동 여부를 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
10. The apparatus of claim 9, wherein the processor
Wherein the control unit is configured to generate a control signal for braking the autonomous traveling vehicle by determining whether the preceding vehicle is braked based on the traveling state information supplied from the traveling state collecting module.
제9항에 있어서, 상기 프로세서는,
상기 신호등 상태 수집 모듈로부터 공급되는 신호등 상태 정보를 기반으로 신호등의 점등 색상을 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
10. The apparatus of claim 9,
Wherein the control unit is configured to generate a control signal for braking the autonomous vehicle based on signal light condition information supplied from the signal light condition collecting module.
제14항 또는 제15항에 있어서, 상기 프로세서는,
선행 차량의 제동으로 인해 기 정해진 알고리즘을 토대로 도출된 차간 거리에 따라 제동을 위한 안내 멘트 또는 신호등의 점등 색상에 따라 제동을 위한 안내 멘트를 생성하여 해당 운전자에게 전달하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
16. The system according to claim 14 or 15,
Characterized in that it is provided to generate a notification item for braking according to a lighting color of a warning light or a signal lamp for braking in accordance with an inter-vehicle distance derived on the basis of a predetermined algorithm due to the braking of the preceding vehicle, A control device of a vehicle.
제1항에 있어서, 상기 자율 주행 차량의 제어 장치는,
지식 기반으로 자율 주행 차량을 제어하기 위해, 상기 영상 수집부의 영상으로부터 추출된 주행 상태 정보 및 신호등 상태 정보와, 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 자율 주행 차량의 제동에 대한 학습을 수행하는 학습부를 더 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The control apparatus for an autonomous vehicle according to claim 1,
And a control unit for controlling the autonomous vehicle based on the driving state information and the traffic light state information extracted from the image of the image collecting unit and the driving state information, road state information, traffic state information and vehicle state information of the database module, Further comprising: a learning unit that performs learning about braking of the vehicle.
제17항에 있어서, 상기 학습부는,
상기 영상 수집부의 영상과 수신된 영상으로부터 획득된 선행 차량의 주행 상태 정보 및 신호등 상태 정보와, 상기 선행 차량의 주행 상태 정보 및 신호등 상태 정보를 기반으로 생성된 제어 신호를 수신 일자에 매칭되어 메모리의 소정 영역에 기록하는 데이터베이스 모듈과,
영상으로부터 추출된 주행 상태 정보 및 신호등 상태 정보와, 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 자율 주행 차량의 제동에 대한 학습을 수행하는 학습 모듈을 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
18. The apparatus according to claim 17,
A control signal generated based on the driving state information and the signal light state information of the preceding vehicle and the driving state information and the signal light state information of the preceding vehicle obtained from the image of the image collecting unit and the received image, A database module for recording in a predetermined area,
And a learning module for learning the braking of the autonomous vehicle based on the running state information and the traffic light state information extracted from the image and the running condition information, the road condition information, the traffic condition information, and the vehicle condition information of the database module And a control unit for controlling the autonomous traveling vehicle.
제18항에 있어서, 상기 데이터베이스 모듈은,
상기 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보 각각에 대한 데이터베이스를 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
19. The system of claim 18, wherein the database module comprises:
And a database for each of the running state information, the road state information, the traffic state information, and the vehicle state information.
제19항에 있어서, 상기 학습 모듈은,
영상 수집부의 제1 카메라로부터 수집된 주행 상태 정보가 선행 차량의 테일 램프 점등 상태인 경우 상기 주행 상태 정보 및 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량을 제동하기 위한 제어 신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The learning module according to claim 19,
When the traveling state information collected from the first camera of the image collecting unit is in the tail lamp on state of the preceding vehicle, learning based on the traveling state information and the traveling state information, road state information, traffic state information, and vehicle state information of the database module And generates a control signal for braking the autonomous vehicle according to the learning result.
제19항에 있어서, 상기 학습 모듈은,
상기 영상 수집부의 제2 카메라로부터 수집된 신호등 상태 정보가 노란색 또는 레드색인 경우 상기 신호등 상태 정보와 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량을 제동하기 위한 제어 신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 장치.
The learning module according to claim 19,
When the traffic light condition information collected from the second camera of the image collecting unit is yellow or red, learning is performed based on the traffic light condition information and the driving condition information, road condition information, traffic condition information and vehicle condition information of the database module, And generates a control signal for braking the autonomous vehicle according to a result of the determination.
영상 수집부에서 자율 주행 차량의 소정 위치에 소정 간격으로 마련된 복수의 카메라를 통해 주행 중인 도로의 물체의 영상 정보를 수신하는 영상 수집 단계; 및
프로세서에서 상기 영상 수집부의 물체의 영상 정보를 토대로 자율 주행 차량을 제어하기 위한 제어 신호를 생성하여 자율 주행 제어부로 전달하는 자율 주행 차량 제어 단계를 포함하고,
안테나를 통해 수집된 선행 차량의 제동 데이터와 교차로 및 횡단 보도에 설치된 복수의 신호등의 신호등 상태 데이터로부터 선행 차량의 주행 상태 정보 및 차선의 신호등 상태 정보를 추출하여 상기 자율 주행 차량 제어 단계로 전달하는 상태 정보 수집단계를 더 포함하며,
상기 상태 정보 수집 단계는,
복수의 선행 차량 중 적어도 하나 차량의 테일 램프의 점등 시 안테나를 통해 수신된 제동 데이터를 디코딩하여 상기 제동 데이터에 포함된 각 차량 마다 다른 테일 램프의 점등 코드와 차량 식별 코드를 추출하고, 추출된 차량 식별 코드 별로 정해진 주파수 대역으로 추출된 차량 식별 코드 및 점등 코드를 포함하는 상기 제동 데이터를 근거리 통신모듈을 이용하여 전파하도록 구비되고,
교차로 및 횡단보도에 설치된 복수의 신호등으로부터 제공된 신호등 상태 데이터를 안테나를 수신하여 신호등 상태 데이터에 포함된 신호등 식별 코드 및 색상 코드를 추출하며, 추출된 신호등 식별 코드 별로 정해진 주파수 대역으로 추출된 신호등 식별 코드 및 색상 코드를 포함하는 상기 신호등 상태 데이터를 근거리 통신모듈을 이용하여 전파하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 방법.
An image collecting step of receiving image information of an object of a road on the road through a plurality of cameras provided at predetermined intervals in a predetermined position of the autonomous vehicle in the image collecting unit; And
And a controller for generating a control signal for controlling the autonomous vehicle on the basis of the image information of the object of the image collecting unit and transmitting the generated control signal to the autonomous drive controller,
A state in which the driving state information of the preceding vehicle and the signal light state information of the lane are extracted from the signal light state data of the plurality of signals provided at the intersections and the crosswalk collected from the preceding vehicle collected through the antenna and transmitted to the autonomous vehicle control step Further comprising an information collecting step,
The state information collecting step includes:
When the tail lamp of at least one of the plurality of preceding vehicles is lit, decoding the braking data received through the antenna, extracting a lighting code and a vehicle identification code of a tail lamp different for each vehicle included in the braking data, The braking data including the vehicle identification code and the lighting code extracted in the frequency band determined by the identification code are propagated using the short distance communication module,
The traffic light status data provided from the plurality of traffic lights provided at the intersections and the pedestrian crossings are received by the antenna and the traffic light identification code and color code included in the traffic light status data are extracted, And the traffic light status data including the color code is transmitted using the short distance communication module.
제22항에 있어서, 상기 영상 수집 단계는,
수집하고자 하는 물체의 위치를 기반으로 소정 위치 및 간격이 설정된 상기 복수의 카메라의 영상으로부터 선행 차량의 영상으로부터 자율 주행 차량 제어에 필요한 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나를 추출하고,
상기 자율 주행 차량 제어 단계는 선행 차량의 주행 상태 정보 및 신호등 상태 정보 중 적어도 하나에 따라 자율 주행 차량의 제동을 위한 제어 신호를 생성하는 것을 특징으로 하는 자율 주행 차량의 제어 방법.
23. The method according to claim 22,
Extracting at least one of traveling state information and traffic light state information necessary for controlling an autonomous vehicle from an image of the preceding vehicle from the images of the plurality of cameras set at predetermined positions and intervals based on the position of the object to be collected,
Wherein the autonomous vehicle control step generates a control signal for braking the autonomous vehicle according to at least one of the running state information and the signal light state information of the preceding vehicle.
삭제delete 제22항에 있어서, 상기 자율 주행 차량 제어 단계는
상기 주행 상태 정보를 기반으로 선행 차량의 제동 여부를 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 방법.
23. The method according to claim 22, wherein the step of controlling the autonomous-
And generating a control signal for braking the autonomous traveling vehicle by determining whether the preceding vehicle is braked based on the traveling state information.
제25항에 있어서, 상기 자율 주행 차량 제어 단계는
상기 신호등 상태 정보를 기반으로 신호등의 점등 색상을 판단하여 자율 주행 차량의 제동을 위한 제어신호를 생성하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 방법.
26. The method of claim 25, wherein the step of controlling the autonomous-
Wherein the controller is configured to generate a control signal for braking the autonomous vehicle by determining the lighting color of the signal lamp based on the signal light status information.
제26항에 있어서, 상기 자율 주행 차량 제어 단계는
선행 차량의 제동으로 인해 기 정해진 알고리즘을 토대로 도출된 차간 거리에 따라 제동을 위한 안내 멘트 또는 신호등의 점등 색상에 따라 제동을 위한 안내 멘트를 생성하여 해당 운전자에게 전달하도록 구비되는 것을 특징으로 하는 자율 주행 차량의 제어 방법.
The method of claim 26, wherein the step of controlling the autonomous vehicle
Characterized in that it is provided to generate a notification item for braking according to a lighting color of a warning light or a signal lamp for braking in accordance with an inter-vehicle distance derived on the basis of a predetermined algorithm due to the braking of the preceding vehicle, A method of controlling a vehicle.
제22항 또는 제23항에 있어서, 상기 자율 주행 차량의 제어 방법은,
지식 기반으로 자율 주행 차량을 제어하기 위해, 상기 영상 수집부의 영상으로부터 추출된 주행 상태 정보 및 신호등 상태 정보와, 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 자율 주행 차량의 제동에 대한 학습을 수행하는 학습 단계를 더 포함하는 것을 특징으로 하는 자율 주행 차량의 제어 방법.
24. The control method of an autonomous vehicle according to claim 22 or 23,
And a control unit for controlling the autonomous vehicle based on the driving state information and the traffic light state information extracted from the image of the image collecting unit and the driving state information, road state information, traffic state information and vehicle state information of the database module, Further comprising a learning step of performing learning on braking of the vehicle.
제28항에 있어서, 상기 학습 단계는
영상 수집부로부터 수집된 주행 상태 정보가 선행 차량의 테일 램프 점등 상태인 경우 상기 주행 상태 정보 및 상기 데이터베이스 모듈의 주행 상태 정보, 도로 상태 정보, 교통 상태 정보 및 차량 상태 정보를 토대로 학습을 수행하고 학습 결과에 따라 자율 주행 차량을 제동하기 위한 제어 신호를 생성하는 것을 특징으로 하는 자율 주행 차량의 제어 방법.

30. The method of claim 28, wherein the learning step comprises:
The vehicle state information, the road state information, the traffic state information, and the vehicle state information of the database module when the traveling state information collected from the image collecting unit is in the tail lamp on state of the preceding vehicle, And generates a control signal for braking the autonomous vehicle according to a result of the determination.

KR1020160120181A 2016-09-20 2016-09-20 Apparatus and method for controlling autonomous vehicle KR101991067B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160120181A KR101991067B1 (en) 2016-09-20 2016-09-20 Apparatus and method for controlling autonomous vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160120181A KR101991067B1 (en) 2016-09-20 2016-09-20 Apparatus and method for controlling autonomous vehicle

Publications (2)

Publication Number Publication Date
KR20180031892A KR20180031892A (en) 2018-03-29
KR101991067B1 true KR101991067B1 (en) 2019-06-21

Family

ID=61907316

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160120181A KR101991067B1 (en) 2016-09-20 2016-09-20 Apparatus and method for controlling autonomous vehicle

Country Status (1)

Country Link
KR (1) KR101991067B1 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102135437B1 (en) * 2018-08-02 2020-08-26 인하공업전문대학산학협력단 Device and method for coding training
KR102074902B1 (en) * 2018-11-19 2020-02-07 (주)큐알온텍 Apparatus for controlling video recording system using vehicle and method thereof
CN113085846B (en) * 2021-04-13 2023-10-27 龙岩学院 Vehicle-mounted vision auxiliary driving system and control method thereof
KR102414632B1 (en) * 2021-06-02 2022-06-30 (주)에이아이매틱스 Method for determining the location of a fixed object using multiple observation information
KR102368262B1 (en) * 2021-06-02 2022-03-03 (주)에이아이매틱스 Method for estimating traffic light arrangement information using multiple observation information
KR102555076B1 (en) * 2021-06-18 2023-07-17 (주)타임소프트 Intelligent Traffic Control System Capable of Coping with Pedestrian Emergencies and Traffic Control Method thereof

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101352971B1 (en) * 2010-09-16 2014-01-22 전종훈 System for providing signal-lamp information using wireless communication

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070031664A (en) * 2005-09-15 2007-03-20 주식회사 나모텍 A travelling record apparatus and method in vehicle
KR20130085235A (en) * 2012-01-19 2013-07-29 김동용 System for driving manless of car
KR101493360B1 (en) * 2012-07-30 2015-02-23 주식회사 케이티 Method of vehicle driving managing through detection state change of around cars and system for it

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101352971B1 (en) * 2010-09-16 2014-01-22 전종훈 System for providing signal-lamp information using wireless communication

Also Published As

Publication number Publication date
KR20180031892A (en) 2018-03-29

Similar Documents

Publication Publication Date Title
KR101991067B1 (en) Apparatus and method for controlling autonomous vehicle
US10625743B2 (en) Method for ascertaining data of a traffic situation
CN109658719B (en) Method for identifying traffic signs, vehicle device, plausibility verification method and storage medium
US8180561B2 (en) Vehicle-installation obstacle detection apparatus
EP3158549B1 (en) Adaptive traffic signal preemption
CN110662683B (en) Driving support device and driving support method
US10930153B2 (en) Vehicle external notification device
EP3618031A1 (en) Roadside device, control method of roadside device, vehicle, and recording medium
CN109080640A (en) For providing the method for lethargic sleep alarm in vehicle
JP2007219588A (en) Mobile terminal device, traffic information system, traffic information extracting method for mobile terminal device, and arrival time computing method and traffic information processing method for mobile terminal device
CN105809095B (en) Determination of traffic intersection passage state
JP2015022499A (en) Driving characteristic determination system
US20200211379A1 (en) Roundabout assist
KR20140062582A (en) Apparatus for car terminal and method for controlling the apparatus
KR102159144B1 (en) Unmanned vehicle crackdown system around a walking signal
JP2017111498A (en) Driving support device
CN114613129A (en) Method, program product and system for determining the state of a traffic light
CN109472732B (en) Intelligent high-speed comprehensive management and control method and management and control platform
CN106803353B (en) Method for determining a transformation rule of a traffic light and on-board system
US7177747B2 (en) Vehicle braking device and vehicle braking method
JP4735530B2 (en) Road marking line recognition device
JP2009009208A (en) Driving support system
CN113895438B (en) Vehicle meeting method, device, vehicle and computer readable storage medium
KR20170014177A (en) System and method for providing information of traffic signal lights generating signal lights identification automatically
CN114619949B (en) Highway lane change prompting method and device, vehicle, electronic equipment and medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right