KR101992652B1 - Method and apparatus for detecting vehicle through detection of license plate - Google Patents
Method and apparatus for detecting vehicle through detection of license plate Download PDFInfo
- Publication number
- KR101992652B1 KR101992652B1 KR1020120033088A KR20120033088A KR101992652B1 KR 101992652 B1 KR101992652 B1 KR 101992652B1 KR 1020120033088 A KR1020120033088 A KR 1020120033088A KR 20120033088 A KR20120033088 A KR 20120033088A KR 101992652 B1 KR101992652 B1 KR 101992652B1
- Authority
- KR
- South Korea
- Prior art keywords
- information
- vehicle
- license plate
- distance
- photographed image
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/017—Detecting movement of traffic to be counted or controlled identifying vehicles
- G08G1/0175—Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/182—Level alarms, e.g. alarms responsive to variables exceeding a threshold
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/123—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams
- G08G1/133—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams within the vehicle ; Indicators inside the vehicles or at stops
- G08G1/137—Traffic control systems for road vehicles indicating the position of vehicles, e.g. scheduled vehicles; Managing passenger vehicles circulating according to a fixed timetable, e.g. buses, trains, trams within the vehicle ; Indicators inside the vehicles or at stops the indicator being in the form of a map
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Traffic Control Systems (AREA)
Abstract
촬영된 영상으로부터 번호판을 인식하여 차량을 인식하는 방법이 개시되며, 상기 방법은 주변 차량의 번호판을 촬영한 영상의 적색, 녹색 및 청색 채널 중 녹색 채널을 추출하는 단계; 상기 추출된 녹색 채널로부터 노이즈를 제거하는 단계; 상기 노이즈가 제거된 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용하는 단계; 및 상기 스펙트럼 이퀄라이제이션을 적용한 녹색 채널에서 주변 차량의 번호판을 인식하는 단계를 포함할 수 있다. A method for recognizing a license plate from a photographed image is disclosed, the method comprising: extracting a green channel among red, green and blue channels of an image of a license plate of a peripheral vehicle; Removing noise from the extracted green channel; Applying spectral equalization to the noisy green channel; And recognizing the number plate of the surrounding vehicle in the green channel to which the spectrum equalization is applied.
Description
본 발명은 일 차량의 주변 차량의 위치를 인식하기 위한 방법에 관한 것으로서, 좀더 상세하게는 차량용 카메라 또는 블랙박스를 통해 획득한 전방, 후방 또는 양측방 영상으로부터 주변 차량의 번호판을 인식하여 해당 주변 차량을 인식하기 위한 방법에 관한 것이다.
The present invention relates to a method for recognizing the position of a nearby vehicle in a vehicle, and more particularly, to a method for recognizing a number of a nearby vehicle from front, rear or both side images acquired through a vehicle camera or a black box, The method comprising the steps of:
최근 들어 자동차의 동력 성능에 대한 소비자 만족뿐만 아니라 소비자의 편의를 위한 장치가 많이 보급되고 있다. 그러한 예로써 주차 보조를 위한 전, 후, 좌, 우측 카메라와 자동차의 상태를 한눈에 파악할 수 있는 통합 디스플레이 장치의 보급이 보편화되고 있는 추세다. 운전자는 전방 또는 후방 주차시에 차량의 전방 또는 후방에 구비된 카메라 및 거리 측정 센서와 디스플레이 장치를 통해 차량 주변의 장애물을 볼 수 있고, 장애물까지의 거리를 알 수 있다. In recent years, devices for consumer convenience as well as consumer satisfaction for power performance of automobiles have become popular. As an example of such an approach, the spread of integrated display devices capable of grasping the states of front, rear, left and right cameras and cars for parking assistance at a glance is becoming popular. The driver can observe the obstacle around the vehicle through the camera and the distance measuring sensor and the display device provided at the front or rear of the vehicle in front or rear parking, and can know the distance to the obstacle.
또한, 주변의 다른 차량을 인식하여 자동차의 추가적인 편의 기능에 이용하고자 하는 연구가 수행되고 있다. 예를 들면, 이러한 주변 차량 위치 파악 기술은 교통 정보 시스템이나 방범 시스템 등에 이용될 수 있다. Further, studies are being conducted to recognize other nearby vehicles and utilize them for additional convenience functions of the automobile. For example, such a peripheral vehicle locating technique can be used for a traffic information system or a crime prevention system.
따라서, 종래의 주차 보조를 위한 차량 주변 정보를 넘어서서, 자동차의 추가적인 편의 기능을 도입할 수 있는 주변 차량을 인식하는 방법에 관한 개발이 필요하다.
Therefore, there is a need to develop a method for recognizing a nearby vehicle that can introduce additional convenience functions of the vehicle beyond conventional vehicle surroundings information for parking assistance.
본 발명은 카메라 등을 통해 획득되는 영상의 처리를 통해 주변 차량의 번호판을 인식하여 상기 주변 차량을 인식하기 위한 방법을 제안하고자 하며, 추가로 이러한 주변 차량까지의 거리를 측정하고 이를 통해 교통 정보 또는 방범 정보를 생성하여 활용하는 방법을 제공하고자 한다.
The present invention proposes a method for recognizing the peripheral vehicle by recognizing the license plate of the surrounding vehicle through the processing of the image obtained through the camera or the like, further measuring the distance to the peripheral vehicle, And to provide a method for generating and utilizing crime prevention information.
본 발명의 일 실시예에 따라 촬영된 영상으로부터 번호판을 인식하여 차량을 인식하는 방법이 개시되며, 상기 방법은 주변 차량의 번호판을 촬영한 영상의 적색, 녹색 및 청색 채널 중 녹색 채널을 추출하는 단계; 상기 추출된 녹색 채널로부터 노이즈를 제거하는 단계; 상기 노이즈가 제거된 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용하는 단계; 및 상기 스펙트럼 이퀄라이제이션을 적용한 녹색 채널에서 주변 차량의 번호판을 인식하는 단계를 포함할 수 있다. A method for recognizing a license plate from a photographed image according to an embodiment of the present invention is disclosed. The method includes extracting a green channel among red, green, and blue channels of an image of a license plate of a peripheral vehicle ; Removing noise from the extracted green channel; Applying spectral equalization to the noisy green channel; And recognizing the number plate of the surrounding vehicle in the green channel to which the spectrum equalization is applied.
상기 방법은 상기 인식된 주변 차량의 번호판의 숫자와 미리 저장해놓은 기준숫자의 크기를 비교하여 상기 인식된 주변 차량까지의 거리를 계산하는 단계를 더 포함할 수 있다. The method may further include calculating a distance to the recognized nearby vehicle by comparing the number of the license plate of the recognized nearby vehicle with the size of the reference number stored in advance.
상기 방법은 상기 계산된 거리가 임계치 이내이면 경고음을 출력하는 단계를 더 포함할 수 있다. The method may further include outputting a warning sound if the calculated distance is within a threshold value.
상기 방법은 상기 계산된 거리를 상기 촬영된 영상과 함께 저장하는 단계를 더 포함할 수 있다. The method may further include storing the calculated distance together with the photographed image.
상기 방법은 현재 위치의 GPS 정보, 상기 인식된 주변 차량의 번호, 그리고 상기 인식된 주변 차량까지의 계산된 거리 정보를 서버로 전송하는 단계를 더 포함할 수 있다. 또한, 상기 방법은 상기 서버에서 상기 인식된 주변 차량의 번호를 상기 GPS 정보와 상기 인식된 주변차량까지의 계산된 거리에 따라 지도에 표시하는 단계를 더 포함할 수 있다. The method may further include transmitting the GPS information of the current location, the number of the recognized nearby vehicle, and the calculated distance information to the recognized nearby vehicle to the server. The method may further include displaying the number of the recognized nearby vehicle on the map according to the GPS information and the calculated distance to the recognized nearby vehicle in the server.
본 발명의 일 실시예에 따라 촬영된 영상으로부터 번호판을 인식하여 차량을 인식하는 장치가 개시되며, 상기 장치는 주변 차량의 번호판을 촬영한 영상의 적색, 녹색 및 청색 채널 중 녹색 채널을 추출하고, 상기 추출된 녹색 채널로부터 노이즈를 제거하고, 상기 노이즈가 제거된 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용하여 주변 차량의 번호판을 인식하도록 구성된 번호판 인식부를 포함할 수 있다. An apparatus for recognizing a license plate from a photographed image according to an embodiment of the present invention is disclosed. The device extracts a green channel among red, green, and blue channels of an image of a license plate of a neighboring vehicle, And a license plate recognition unit configured to remove noise from the extracted green channel and to apply spectrum equalization to the noise canceled green channel to recognize a license plate of the surrounding vehicle.
상기 장치는 상기 인식된 주변 차량의 번호판의 숫자와 미리 저장해놓은 기준숫자의 크기를 비교하여 상기 인식된 주변 차량까지의 거리를 계산하도록 구성된 거리 계산부를 더 포함할 수 있다. The apparatus may further include a distance calculation unit configured to calculate a distance to the recognized nearby vehicle by comparing the number of the recognized number plate of the recognized nearby vehicle with the size of the reference number stored in advance.
상기 장치는 상기 계산된 거리가 임계치 이내이면 경고음을 출력하도록 구성된 출력부를 더 포함할 수 있다. The apparatus may further include an output unit configured to output a warning sound when the calculated distance is within a threshold value.
상기 장치는 상기 계산된 거리를 상기 촬영된 영상과 함께 저장하도록 구성된 저장부를 더 포함할 수 있다. The apparatus may further include a storage unit configured to store the calculated distance together with the photographed image.
상기 장치는 현재 위치의 GPS 정보, 상기 인식된 주변 차량의 번호, 그리고 상기 인식된 주변 차량까지의 계산된 거리 정보를 서버로 전송하도록 구성된 통신부를 더 포함할 수 있다. 또한 상기 통신부는 상기 서버로부터 상기 인식된 주변 차량의 번호를 상기 GPS 정보와 상기 인식된 주변 차량까지의 계산된 거리에 따라 표시한 지도를 수신하도록 구성될 수 있다.
The apparatus may further include a communication unit configured to transmit GPS information of a current location, a number of the recognized nearby vehicle, and calculated distance information to the recognized nearby vehicle to a server. The communication unit may be configured to receive a map indicating the number of the recognized nearby vehicle from the server according to the GPS information and the calculated distance to the recognized nearby vehicle.
본 발명의 일 실시예에 따르면 주변 차량 및 상기 주변 차량과의 거리를 파악할 수 있으며, 아울러 상기 주변 차량의 위치를 주변 차량들과 공유함으로써 주변 도로의 교통 상황에 관한 정보를 획득할 수 있다. According to an embodiment of the present invention, the distance between the neighboring vehicle and the neighboring vehicle can be grasped, and the information about the traffic situation of the neighboring road can be obtained by sharing the location of the neighboring vehicle with neighboring vehicles.
또한, 공유된 주변 차량의 위치 정보는 도난 차량 또는 수배 차량 단속 등에 활용할 수 있다.
In addition, the positional information of the shared nearby vehicle can be used for the stolen vehicle or the interception of the wanderer.
도 1은 본 발명의 일 실시예에 따른 번호판 인식을 통한 주변 차량 인식 장치와 이에 대한 정보를 수집하기 위한 서버의 블록도를 도시한다.
도 2는 본 발명의 일 실시예에 따른 주변 차량을 촬영한 영상으로부터 상기 주변 차량의 번호판을 인식하기 위한 방법에 관한 순서도를 도시한다.
도 3은 본 발명의 일 실시예에 따른 상기 주변 차량의 번호판을 인식하기 위한 방법의 추가적인 활용 방법에 관한 순서도를 도시한다.
도 4는 본 발명의 일 실시예에 따른 상기 주변 차량의 번호판을 인식하기 위한 방법의 추가적인 활용 방법에 관한 순서도를 도시한다.
도 5는 본 발명의 일 실시예에 따른 인식된 번호판 정보와 거리 정보를 표시한 지도를 도시한다. 1 is a block diagram of a peripheral vehicle recognition apparatus for recognizing a license plate and a server for collecting information thereon according to an embodiment of the present invention.
FIG. 2 is a flowchart illustrating a method for recognizing a number plate of a nearby vehicle from an image of a nearby vehicle according to an embodiment of the present invention.
FIG. 3 shows a flowchart of a method for further utilizing a method for recognizing a license plate of a peripheral vehicle according to an embodiment of the present invention.
4 illustrates a flowchart of a further method of utilizing a method for recognizing license plates of a peripheral vehicle according to an embodiment of the present invention.
FIG. 5 shows a map showing recognized license plate information and distance information according to an embodiment of the present invention.
본 명세서 및 청구범위에 사용된 용어나 단어는 통상적이거나 사전적인 의미로 한정해서 해석되어서는 아니되며, 본 발명의 기술적 사상에 부합하는 의미와 개념으로 해석되어야만 한다. 따라서, 본 명세서에 기재된 실시예와 도면에 도시된 구성은 본 발명의 가장 바람직한 일 실시예에 불과할 뿐이고 본 발명의 기술적 사상을 모두 포괄하는 것은 아니므로, 본 출원시점에 있어서 이들을 대체할 수 있는 다양한 균등물과 변형예들이 있을 수 있음을 이해하여야 한다.The terms and words used in the present specification and claims should not be construed as limited to ordinary or dictionary terms and should be construed in a sense and concept consistent with the technical idea of the present invention. Therefore, the embodiments described in the present specification and the configurations shown in the drawings are only the most preferred embodiments of the present invention, and not all of the technical ideas of the present invention are included. Therefore, It is to be understood that equivalents and modifications are possible.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.
Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 일 실시예에 따른 번호판 인식을 통한 주변 차량 인식 장치와 상기 장치로부터 정보를 수신하여 수집하기 위한 서버의 블록도를 도시한다. 1 shows a block diagram of a peripheral vehicle recognition apparatus through license plate recognition and a server for receiving and collecting information from the apparatus according to an embodiment of the present invention.
상기 주변 차량 인식 장치(100)는 측정 차량의 주변 영상을 수집하도록 구성된 영상수집부(110); 상기 수집된 영상을 처리하여 주변 차량의 번호판을 인식하도록 구성된 번호판 인식부(121); 상기 인식된 주변 차량의 번호판의 크기를 측정하여 상기 주변 차량까지의 거리를 계산하도록 구성된 거리 계산부(122); 상기 주변 차량의 번호판 정보와 상기 계산된 거리 정보를 서버로 전송하도록 구성된 통신부(131); 상기 계산된 거리가 일정 거리 이하인 경우에 음성 경고 또는 시각 경고를 출력하도록 구성된 출력부(132); 및 현재 위치를 획득하도록 구성된 GPS 수신부(133)를 포함할 수 있다. The peripheral vehicle recognition apparatus (100) includes an image collection unit (110) configured to collect peripheral images of the measurement vehicle; A license plate recognition unit (121) configured to process the collected images to recognize license plates of nearby vehicles; A distance calculation unit (122) configured to measure a size of a license plate of the recognized nearby vehicle and calculate a distance to the nearby vehicle; A communication unit (131) configured to transmit license plate information of the peripheral vehicle and the calculated distance information to a server; An
상기 영상수집부(110)는 측정 차량에 구비된 전방 또는 후방 카메라 또는 블랙박스에 내장된 카메라 등을 포함하는 각종 카메라 등에 해당한다. 상기 영상수집부(110)는 측정 차량의 전방, 후방 또는 측방에 위치한 주변 차량을 촬영하며, 특히 주변 차량의 번호판을 촬영하도록 구성될 수 있다. The
상기 번호판 인식부(121)는 상기 촬영 또는 수집된 주변 영상에서 주변 차량의 번호판을 인식하도록 구성될 수 있다. 상기 번호판 인식부(121)는 주변 차량의 번호판을 인식하기 위해 일련의 절차를 거칠 수 있다. The license
수집된 영상으로부터 번호판을 인식하는 방법의 결과는 그 영상의 촬영 시점의 날씨나 주변 환경에 영향을 받을 수 있다. 예컨대, 날씨가 매우 흐리거나 밤이었다면, 수집된 영상은 대체로 어두울 것이며 이는 번호판 인식을 위한 알고리즘 수행에 방해요인이 될 수 있다. 따라서, 촬영 또는 수집된 영상의 밝기가 일정 수준보다 어두운 경우엔 별도의 영상 처리가 필요하며, 이는 본 발명의 일 실시예에서 제안하고자 하는 바이다. The result of the method of recognizing plates from the collected images may be influenced by the weather at the shooting time of the images or the surrounding environment. For example, if the weather is very cloudy or at night, the collected images will be mostly dark, which can interfere with the algorithm implementation for license plate recognition. Therefore, when the brightness of the photographed or collected image is darker than a certain level, separate image processing is required, which is to be proposed in an embodiment of the present invention.
종래에는 촬영 또는 수집된 영상의 밝기를 일정 수준 이상으로 획득하기 위해, 카메라 모듈에 WDR(Wide Dynamic Rage) 이미지 센서를 탑재하였으나 상기 WDR 이미지 센서는 일반 이미지 센서보다 비싸므로 비용적인 측면에서 쉽게 사용할 수 없다. 또한, 영상을 촬영하는 동안 플래쉬 등의 보조 조명을 통해 밝기를 보정할 수 있으나, 차량 내에 탑재되는 카메라 모듈은 일반적으로 상기 차량의 주행중에 동작해야하므로 상기 보조 조명을 사용하는 것은 사실상 불가능하다. Conventionally, a WDR (Wide Dynamic Rage) image sensor is mounted on a camera module in order to obtain a brightness of a captured or collected image to a certain level or more. However, since the WDR image sensor is more expensive than a general image sensor, none. In addition, the brightness can be corrected through an auxiliary illumination such as a flashlight during image capturing, but it is practically impossible to use the auxiliary illumination because the camera module mounted in the vehicle generally has to operate during running of the vehicle.
따라서, 본 발명의 일 실시예를 통해 영상 처리에 따른 번호판 인식 방법을 제안하고자 한다.
Accordingly, a method of recognizing a license plate according to an image processing through an embodiment of the present invention is proposed.
상기 번호판 인식부(121)는 촬영 또는 수집된 영상의 밝기에 관한 정보를 획득할 수 있다. 획득된 밝기에 관한 정보가 임계치 이상이면 본 발명의 일 실시예에 따른 영상 처리를 수행하지 않고 일반적인 영상 처리를 통해 번호판 인식을 수행할 수 있다. 그러나, 상기 획득된 밝기에 관한 정보와 관계없이 본 발명의 일 실시예에 따른 번호판 인식을 수행할 수도 있다. The license
상기 번호판 인식부(121)는 상기 쵤영 또는 수집된 영상의 적색, 녹색 및 청색(RGB) 채널 중 녹색 채널을 추출할 수 있다. 또한, 상기 추출된 녹색 채널에 로컬 에버리지(local average) 필터를 적용하여 노이즈를 제거할 수 있다. 그리고나서, 상기 노이즈가 제거된 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용하여 상기 촬영 또는 수집된 영상의 밝기를 어느 수준 이상으로 보정할 수 있다. The license
이러한 절차를 거쳐, 상기 번호판 인식부(121)는 촬영 또는 수집된 영상으로부터 상기 주변 차량의 번호판을 인식할 수 있다. Through this procedure, the license
상기 거리 계산부(122)는 상기 인식된 주변 차량의 번호판의 숫자와 미리 저장해놓은 기준숫자의 크기를 비교하여 상기 주변 차량까지의 거리를 계산할 수 있다. The
상기 기준 숫자는 복수 개일 수 있으며, 예를 들어 측정 차량과의 일정한 이격 거리(1m) 마다 하나의 기준 숫자가 준비될 수 있다. 즉, 각각의 기준 숫자의 크기는 거리 정보를 포함하는 기준 값일 수 있다. The reference number may be a plurality of numbers, for example, one reference number may be prepared for a certain distance (1m) from the measurement vehicle. That is, the size of each reference number may be a reference value including distance information.
다시 말하면, 상기 기준 숫자의 크기는 상기 카메라 등을 통해 거리를 변화시켜가면서 번호판의 숫자를 측정하여 획득한 값이며, 예를 들어 다음의 표 1과 같이 정의될 수 있다.In other words, the size of the reference numeral is a value obtained by measuring the number of the license plate while changing the distance through the camera or the like, for example, as shown in Table 1 below.
표 1에서는 기준 숫자의 높이를 비교 기준으로 이용했으나, 기준 숫자의 폭이나 인식된 번호판의 높이, 폭 등을 비교 기준으로 이용할 수 있다. 한편, 표 1에서 제공된 정보는 일 예시일 뿐 본 발명을 한정하지 않는다. In Table 1, the height of the reference numeral is used as a comparison standard, but the width of the reference numeral, the height and width of the recognized plate can be used as a comparison standard. On the other hand, the information provided in Table 1 is only an example and does not limit the present invention.
따라서, 상기 인식된 번호판의 숫자의 크기(예컨대, 높이)를 기준 숫자의 크기(예컨대, 높이)와 비교하여, 동일한 크기를 갖는 기준 숫자에 해당하는 이격 거리 정보를 확인하면 상기 인식된 번호판까지의 이격 거리를 계산할 수 있다.
Accordingly, if the size (e.g., height) of the number of the recognized license plate is compared with the size (e.g., height) of the reference number and the separation distance information corresponding to the reference number having the same size is checked, The separation distance can be calculated.
상기 통신부(131)는 상기 주변 차량의 번호판 정보와 상기 계산된 거리 정보를 서버로 전송하도록 구성되며, 이렇게 전송함으로써 상기 주변 차량의 번호판 정보와 상기 주변 차량의 위치를 서버(200) 또는 다른 차량들과 공유할 수 있다. The
또한, 출력부(132)는 상기 계산된 거리가 일정 거리 이하인 경우에 음성 경고 또는 시각 경고를 출력하도록 구성될 수 있다. 본 발명의 일 실시예에 따른 주변 차량 인식 장치(100)는 일반적으로 차량 내에 구비되므로, 장치(100)가 구비된 차량의 운전자에게 주변 차량과의 거리가 가까워질 경우에는 차간 간격을 확대하도록 경고할 수 있다. 예컨대, 상기 출력부(132)는 디스플레이 유닛 또는 스피커 등을 포함할 수 있다. In addition, the
또한, GPS 수신부(133)는 현재 위치를 획득하도록 구성되며, 이를 통해 장치(100)의 위치, 즉 측정 차량의 위치를 알 수 있고 또한 상기 주변 차량까지의 거리 정보를 활용하여 상기 주변 차량의 위치도 파악할 수 있다. In addition, the
또한, 저장부(134)는 상기 주변 차량의 번호판 정보와 상기 계산된 거리 정보를 저장할 수 있으며, 상기 기준 숫자에 대한 정보를 저장할 수 있다. 아울러, 저장부(134)는 상기 출력부(132)를 이용한 내비게이션 기능을 위한 지도와 주소 정보를 저장할 수 있다.
Also, the
상기 서버(200)는 각 차량으로부터 상기 주변 차량의 번호판 정보, 상기 주변 차량까지의 거리 정보 그리고 현재 GPS 정보를 수신할 수 있다. 상기 서버(200)는 상기 수신된 정보를 수집 그리고 분석하여 이를 지도에 합성 또는 표시할 수 있다. 이러한 정보를 반영된 지도는 다시 각 차량으로 제공될 수도 있다. The
이러한 정보가 반영된 지도는 교통 상황 정보에 이용될 수도 있고, 도난 차량 또는 수배 차량 등을 추적할 수 있는 방범 효과를 얻을 수 있다.
A map reflecting such information can be used for traffic situation information, and a security effect that can track a stolen vehicle, a pick-up vehicle, and the like can be obtained.
도 2는 본 발명의 일 실시예에 따른 주변 차량을 촬영한 영상으로부터 상기 주변 차량의 번호판을 인식하기 위한 방법에 관한 순서도를 도시한다. FIG. 2 is a flowchart illustrating a method for recognizing a number plate of a nearby vehicle from an image of a nearby vehicle according to an embodiment of the present invention.
상기 방법은 카메라를 통해 촬영된 영상으로부터 번호판을 인식하여 차량을 인식하는 방법으로서, 주변 차량의 번호판을 촬영한 영상의 적색, 녹색 및 청색 채널 중 녹색 채널을 추출하는 단계(S210); 상기 추출된 녹색 채널로부터 노이즈를 제거하는 단계(S220); 상기 노이즈가 제거된 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용하는 단계(S230); 및 상기 스펙트럼 이퀄라이제이션을 적용한 녹색 채널에서 주변 차량의 번호판을 인식하는 단계(S240)를 포함할 수 있다. The method comprises the steps of extracting a green channel among red, green and blue channels of an image of a license plate of a peripheral vehicle by recognizing the license plate from the image photographed by the camera (S210); Removing noise from the extracted green channel (S220); Applying spectral equalization to the noise canceled green channel (S230); And recognizing a number plate of a nearby vehicle in the green channel to which the spectrum equalization is applied (S240).
촬영 영상에서 녹색 채널을 추출하는 단계(S210)에 앞서 상기 촬영 영상의 밝기 정보를 획득하는 절차가 선행할 수 있다. 촬영 영상으로부터 차량의 번호판을 인식하는 방법은 상기 영상이 촬영된 시점의 날씨나 시간 등에 영향을 받을 수 있다. A procedure of obtaining brightness information of the photographed image may be preceded by a step S210 of extracting a green channel from the photographed image. The method of recognizing the license plate of the vehicle from the photographed image may be influenced by the weather or the time at the time the photographed image is photographed.
예컨대, 야간에 촬영된 영상의 경우 밝기가 어둡기 때문에 촬영 영상에서 차량의 번호판을 인식하는 것은 용이하지 않을 것이다. 그러나, 주간에 촬영된 영상의 경우는 영상의 밝기가 어느 정도 수준 이상이기 때문에, 상기 촬영 영상에서 차량의 번호판을 인식하는 것은 별도의 영상 처리 없이 가능할 수 있다. For example, in the case of an image photographed at night, since brightness is dark, it is not easy to recognize the license plate of the vehicle in the photographed image. However, in the case of an image photographed during daytime, since the brightness of the image is higher than a certain level, recognizing the license plate of the vehicle on the photographed image may be possible without additional image processing.
따라서, 상기 촬영 영상에 대하여 영상 처리를 수행하기 전에, 상기 촬영 영상의 밝기 정보를 획득하여, 그 밝기값이 임계치보다 크면 영상 처리를 생략한 채 번호판 인식을 수행하며 그 밝기값이 임계치보다 작으면 영상 처리를 수행하도록 구성될 수 있다. Therefore, before performing the image processing on the photographed image, the brightness information of the photographed image is acquired. If the brightness value is greater than the threshold value, the license plate recognition is performed while omitting the image processing. If the brightness value is smaller than the threshold value And may be configured to perform image processing.
촬영 영상에서 그 영상을 구성하는 적색, 녹색 그리고 청색 채널 중 녹색 채널을 추출할 수 있다(S210). 그 후, 추출된 녹색 채널로부터 노이즈를 제거할 수 있다(S220). 노이즈를 제거하기 위해 로컬 에버리지(local average) 필터를 이용할 수 있다. A green channel among the red, green and blue channels constituting the image can be extracted from the photographed image (S210). Thereafter, the noise can be removed from the extracted green channel (S220). A local average filter can be used to remove noise.
노이즈가 제거된 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용할 수 있다(S230). 일 영상에 스펙트럼 이퀄라이제이션을 적용하면 상기 일 영상의 각각의 픽셀의 밝기를 고르게 분포하게 할 수 있다. 따라서, 어두운 촬영 영상을 상대적으로 밝게 변환하여 상기 영상 내에서 정보를 추출하는 것을 용이하게 할 수 있다. Spectrum equalization may be applied to the green channel from which the noise has been removed (S230). Applying spectral equalization to one image can evenly distribute the brightness of each pixel of the one image. Therefore, it is easy to convert the dark photographed image into a relatively bright image and to extract information in the image.
그리고나서, 상기 스펙트럼 이퀄라이제이션을 적용한 녹색 채널에서 주변 차량의 번호판을 인식할 수 있다(S240). S210 내지 S230을 거친 상기 촬영 영상 또는 그것의 녹색 채널은 밝기가 보정되었으므로, 최초의 촬영 영상이 어두운 영상이었다 하더라도 그로부터 차량의 번호판을 인식할 수 있다.
Then, the license plate of the surrounding vehicle can be recognized in the green channel to which the spectrum equalization is applied (S240). Since the brightness of the captured image or its green channel passed through steps S210 to S230 is corrected, the license plate of the vehicle can be recognized from the first captured image even if it is dark.
도 3은 본 발명의 일 실시예에 따른 상기 주변 차량의 번호판을 인식하기 위한 방법의 추가적인 활용 방법에 관한 순서도를 도시한다. FIG. 3 shows a flowchart of a method for further utilizing a method for recognizing a license plate of a peripheral vehicle according to an embodiment of the present invention.
촬영 또는 수집된 영상으로부터 주변 차량의 번호판을 인식할 수 있다(S310). 상기 번호판 인식은 도 2와 관련하여 설명된 S210 내지 S240을 통해 수행될 수 있다. The license plate of the surrounding vehicle can be recognized from the photographed or collected image (S310). The license plate recognition can be performed through S210 through S240 described with reference to FIG.
그리고나서, 상기 인식된 주변 차량의 번호판을 통해 상기 주변 차량까지의 거리를 계산할 수 있다(S320). 상기 인식된 주변 차량의 번호판에서 상기 번호판 내의 숫자의 크기를 측정할 수 있다. 도 1에 도시된 저장부(134)에는 복수 개의 기준 숫자와 그 기준 숫자에 해당하는 이격 거리가 저장되어 있을 수 있다. 상기 측정된 번호판 내의 숫자 크기와 상기 기준 숫자의 크기와 비교를 통해, 상기 주변 차량까지의 거리를 계산할 수 있다. 이에 대해선, 도 1과 관련하여 상술했으므로 자세한 설명은 생략하도록 한다. Then, the distance to the nearby vehicle can be calculated through the license plate of the recognized nearby vehicle (S320). The size of the number in the license plate can be measured on the license plate of the recognized peripheral vehicle. The
이렇게 인식된 주변 차량의 번호판과 상기 주변 차량까지의 거리에 관한 정보를 서버(200)로 전송할 수 있다(S330). 또한, 상기 GPS 수신부(133)를 통해 획득한 현재 위치의 GPS 정보도 상기 서버로 전송할 수 있다. The information about the license plate number of the nearby vehicle and the distance to the nearby vehicle can be transmitted to the server 200 (S330). Also, the GPS information of the current position acquired through the
예컨대, 상기 서버(200)로 전송되는 정보는 다음의 표 2에 예시된다. For example, the information transmitted to the
도 4는 본 발명의 일 실시예에 따른 상기 주변 차량의 번호판을 인식하기 위한 방법의 추가적인 활용 방법에 관한 순서도를 도시한다. 4 illustrates a flowchart of a further method of utilizing a method for recognizing license plates of a peripheral vehicle according to an embodiment of the present invention.
서버(200)는 각 차량으로부터 상기 주변 차량의 번호판 정보, 상기 주변 차량까지의 거리 정보 그리고 현재 GPS 정보를 수신할 수 있다(S410). 상기 서버(200)는 표 2에 예시된 정보를 각 차량으로부터 수신할 수 있다. The
상기 서버(200)는 상기 수신된 정보를 수집 그리고 분석하여 이를 지도에 합성 또는 표시할 수 있다(S420). 표 2를 참조하면, 상기 정보를 전송한 차량의 정보와 그 위치 정보를 파악할 수 있다. The
따라서, 상기 서버(200)는 표 2의 "차량 정보"와 "GPS 수신 정보"를 근거로 일정 지리적 영역 내의 정보를 모두 수집할 수 있고, 이러한 정보를 분석하여 지도에 표시할 수 있다. Therefore, the
예컨대, 표 2에 제시된 정보를 서버로 전송하여 지도에 표시한 예가 도 5에 도시된다. 측정 차량은 검정색 원으로 나타냈으며, 상기 측정 차량에서 인식한 주변 차량을 흰색 원으로 나타냈다. For example, an example in which the information shown in Table 2 is transmitted to the server and displayed on the map is shown in Fig. The measurement vehicle was represented by a black circle, and the peripheral vehicle recognized by the measurement vehicle was represented by a white circle.
이러한 정보가 반영된 지도는 다시 각 차량으로 제공될 수도 있다. 또는, 상기 서버(200)는 지도 대신에 여러 차량으로부터 수집된 표 2와 같은 정보를 다시 각 차량으로 제공할 수 있다. 이러한 정보를 수신한 차량 각각은 차량 내의 출력부(132)를 통해 저장부(134)에 저장된 지도와 상기 정보를 결합하여 표시할 수 있다. A map reflecting such information may be provided to each vehicle again. Alternatively, the
이러한 정보 또는 상기 정보가 반영된 지도는 교통 상황 정보에 이용될 수도 있고, 도난 차량 또는 수배 차량 등을 추적할 수 있는 방범 효과를 얻을 수 있다.
Such information or a map reflecting the information can be used for traffic situation information, and a security effect for tracking a stolen vehicle, a pick-up vehicle, and the like can be obtained.
위에서 본 발명의 실시예들이 설명되었으며, 당해 기술 분야에 속한 통상의 지식을 가진 자는 이러한 실시예들은 발명을 한정하기 위한 것이 아니라 단지 예시적인 것임을 인식할 수 있고, 본 발명의 범위 또는 사상을 벗어나지 않고 변형, 수정 등이 가능함을 인식할 것이다.
Having described the embodiments of the present invention above, those of ordinary skill in the art will recognize that these embodiments are illustrative rather than limiting, and that various changes and modifications may be made without departing from the scope or spirit of the invention Variations, and modifications may be made without departing from the scope of the present invention.
110: 영상 수집부 121: 번호판 인식부
122: 거리 계산부 131: 통신부
132: 출력부 133: GPS 수신부
200: 서버110: image collecting unit 121: license plate recognizing unit
122: distance calculation unit 131: communication unit
132: output unit 133: GPS receiver
200: Server
Claims (12)
상기 촬영영상에서 주변 차량의 번호판을 인식하는 단계;
상기 인식된 주변 차량의 번호판의 숫자 크기인 제 1 정보를 저장된 복수의 제 2 정보와 비교하여 상기 주변 차량까지의 거리인 차량 거리정보를 산출하는 단계; 및
상기 인식된 주변 차량의 번호판 정보, 상기 산출된 차량 거리정보 및 측정 차량의 GPS 정보를 포함하는 제 3 정보를 서버로 전송하여 다른 차량들에 전송하는 단계를 포함하고,
상기 복수의 제 2 정보는 각각의 거리에서 번호판 숫자의 크기를 촬영하여, 상기 각각의 거리에 대응되는 상기 촬영된 번호판 숫자의 크기값이 저장된 값이고,
상기 서버는 상기 제 3 정보를 수신하여 상기 제 3 정보가 포함된 지도 정보를 생성하고, 상기 생성된 지도 정보를 상기 측정 차량 및 상기 다른 차량으로 제공하는 번호판 인식을 통한 차량 인식 방법.
Generating a photographed image of a license plate of a nearby vehicle;
Recognizing a number plate of a nearby vehicle on the photographed image;
Comparing the first information, which is the numerical size of the license plate of the recognized nearby vehicle, with the stored second information, and calculating the vehicle distance information as the distance to the nearby vehicle; And
And transmitting third information including license plate information of the recognized nearby vehicle, the calculated vehicle distance information, and GPS information of the measuring vehicle to a server and transmitting the information to other vehicles,
Wherein the plurality of second information is a value storing a magnitude value of the photographed license plate number corresponding to each distance,
Wherein the server receives the third information, generates map information including the third information, and provides the generated map information to the measurement vehicle and the other vehicle.
상기 복수의 제 2 정보는 상기 각각의 거리에서 상기 번호판 숫자의 폭 또는 높이를 촬영하여 측정한 값인 번호판 인식을 통한 차량 인식 방법.
The method according to claim 1,
And the second information is a value measured by photographing the width or height of the license plate number at each of the distances.
상기 산출된 차량 거리정보를 상기 촬영영상과 함께 저장하는 단계를 포함하는 번호판 인식을 통한 차량 인식 방법.
The method according to claim 1,
And storing the calculated vehicle distance information together with the photographed image.
상기 서버는 상기 촬영영상으로부터 인식된 상기 주변 차량의 번호판 정보 및 상기 차량 거리정보를 상기 다른 차량으로 제공하는 번호판 인식을 통한 차량 인식 방법.
The method according to claim 1,
And the server recognizes license plate information of the peripheral vehicle recognized from the photographed image and the vehicle distance information to the other vehicle.
상기 촬영영상에서 녹색 채널을 추출하여 로컬 에버리지(local average) 필터를 적용하여 노이즈를 제거하고,
상기 노이즈가 제거된 상기 녹색 채널에 스펙트럼 이퀄라이제이션(spectrum equalization)을 적용하여 상기 촬영영상의 밝기를 보정하는 번호판 인식을 통한 차량 인식 방법.
The method according to claim 1,
Extracts a green channel from the captured image, applies a local average filter to remove noise,
And applying spectral equalization to the green channel from which the noise is removed to correct brightness of the photographed image.
상기 주변 차량은 복수이고,
상기 다른 차량은 상기 주변 차량을 포함하는 번호판 인식을 통한 차량 인식 방법.
The method according to claim 1,
The peripheral vehicles are plural,
And the other vehicle recognizes the license plate including the peripheral vehicle.
상기 촬영영상에서 상기 주변 차량의 번호판을 인식하는 번호판 인식부;
기준숫자의 이격 거리정보에 대응되는 크기정보인 복수의 제 2 정보를 저장하는 저장부;
상기 인식된 주변 차량의 번호판의 숫자 크기인 제 1 정보를 상기 제 2 정보와 비교하여 상기 주변 차량까지의 거리인 차량 거리정보를 산출하는 거리 계산부; 및
상기 인식된 주변 차량의 번호판 정보, 상기 산출된 차량 거리정보, 및 측정 차량의 GPS 정보를 포함하는 제 3 정보를 서버로 전송하는 통신부를 포함하고,
상기 복수의 제 2 정보의 상기 기준숫자는 번호판의 숫자이고,
상기 복수의 제 2 정보는 각각의 거리에서 기준숫자의 크기를 촬영하여, 상기 각각의 거리에 대응되는 상기 촬영된 기준숫자의 크기값이고,
상기 서버는 상기 제 3 정보를 수신하여 상기 제 3 정보가 포함된 지도 정보를 생성하고, 상기 생성된 지도 정보를 상기 측정 차량 및 다른 차량으로 전송하는 번호판 인식을 통한 차량 인식 장치.
An image collecting unit for collecting photographed images of license plates of nearby vehicles;
A license plate recognizing unit for recognizing license plates of the peripheral vehicle in the photographed image;
A storage unit for storing a plurality of pieces of second information which are size information corresponding to the separation distance information of the reference number;
A distance calculation unit for comparing the first information, which is the numerical size of the license plate of the recognized nearby vehicle, with the second information and calculating the vehicle distance information as the distance to the nearby vehicle; And
And a communication unit for transmitting third information including license plate information of the recognized nearby vehicle, the calculated vehicle distance information, and GPS information of the measured vehicle to a server,
Wherein the reference number of the plurality of second information is a number of a license plate,
Wherein the plurality of second information is a magnitude value of the photographed reference numeral corresponding to each of the distances,
Wherein the server receives the third information, generates map information including the third information, and transmits the generated map information to the measurement vehicle and another vehicle.
상기 복수의 제 2 정보는 상기 각각의 거리에서 상기 기준숫자의 폭 또는 높이를 촬영하여 측정한 값인 번호판 인식을 통한 차량 인식 장치.
The method of claim 7,
Wherein the plurality of second information is a value measured by photographing the width or height of the reference numeral at each of the distances.
상기 저장부는 상기 산출된 차량 거리정보를 상기 촬영 영상과 함께 저장하는 번호판 인식을 통한 차량 인식 장치.
The method of claim 7,
And the storage unit stores the calculated vehicle distance information together with the photographed image.
상기 번호판 인식부는 상기 촬영 영상에서 노이즈를 제거하고, 녹색 채널을 추출하는 로컬 에버리지(local average) 필터; 및
상기 노이즈가 제거된 상기 녹색 채널에 촬영 영상의 밝기를 보정하는 스펙트럼 이퀄라이제이션(spectrum equalization)을 포함하는 번호판 인식을 통한 차량 인식 장치.
The method of claim 7,
The license plate recognizing unit includes a local average filter for removing noise from the photographed image and extracting a green channel; And
And a spectrum equalization for correcting the brightness of the photographed image on the green channel from which the noise has been removed.
상기 주변 차량은 복수이고,
상기 다른 차량은 상기 주변 차량을 포함하는 번호판 인식을 통한 차량 인식 장치.The method of claim 7,
The peripheral vehicles are plural,
And the other vehicle includes the peripheral vehicle.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120033088A KR101992652B1 (en) | 2012-03-30 | 2012-03-30 | Method and apparatus for detecting vehicle through detection of license plate |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120033088A KR101992652B1 (en) | 2012-03-30 | 2012-03-30 | Method and apparatus for detecting vehicle through detection of license plate |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20130110821A KR20130110821A (en) | 2013-10-10 |
| KR101992652B1 true KR101992652B1 (en) | 2019-06-25 |
Family
ID=49632582
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020120033088A KR101992652B1 (en) | 2012-03-30 | 2012-03-30 | Method and apparatus for detecting vehicle through detection of license plate |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101992652B1 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103870827B (en) * | 2014-02-21 | 2017-08-25 | 杭州奥视图像技术有限公司 | A kind of detection method of license plate of color combining and texture |
| US10397089B2 (en) | 2016-08-04 | 2019-08-27 | Here Global B.V. | Method and apparatus for using virtual probe points for routing or navigation purposes |
| CN108171987A (en) * | 2017-12-31 | 2018-06-15 | 齐鲁交通发展集团有限公司烟台分公司 | Green management system and the management method of being open to traffic of highway |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004271250A (en) * | 2003-03-06 | 2004-09-30 | Mitsubishi Motors Corp | Vehicle following distance detector |
| JP2007049219A (en) * | 2005-08-05 | 2007-02-22 | Denso Corp | Vehicle surrounding monitoring device |
| JP2011150417A (en) * | 2010-01-19 | 2011-08-04 | Yupiteru Corp | In-vehicle electronic apparatus and program |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110115927A (en) * | 2010-04-16 | 2011-10-24 | 경북대학교 산학협력단 | Method for extracting of license number plate and apparatus using the same |
-
2012
- 2012-03-30 KR KR1020120033088A patent/KR101992652B1/en active IP Right Grant
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004271250A (en) * | 2003-03-06 | 2004-09-30 | Mitsubishi Motors Corp | Vehicle following distance detector |
| JP2007049219A (en) * | 2005-08-05 | 2007-02-22 | Denso Corp | Vehicle surrounding monitoring device |
| JP2011150417A (en) * | 2010-01-19 | 2011-08-04 | Yupiteru Corp | In-vehicle electronic apparatus and program |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20130110821A (en) | 2013-10-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7105754B2 (en) | IMAGING DEVICE AND METHOD OF CONTROLLING IMAGING DEVICE | |
| TWI534764B (en) | Apparatus and method for vehicle positioning | |
| JP5867807B2 (en) | Vehicle identification device | |
| KR101439052B1 (en) | Apparatus and method for detecting obstacle | |
| JP4731392B2 (en) | In-vehicle peripheral status presentation device | |
| KR102507905B1 (en) | Real-time Port Hall Detection Device Using Police Cars | |
| CN108860045B (en) | Driving support method, driving support device, and storage medium | |
| WO2018179671A1 (en) | Image processing device and image processing method, and image capturing device | |
| KR101561626B1 (en) | The Vehicle Black Box Capable of Real-Time Recognizing a License Number Plate for Moving Vehicle | |
| KR101751112B1 (en) | Apparatus for generating traffic information base on image and Method thereof | |
| CN102768359A (en) | Tracking system and method | |
| CN111351474B (en) | Vehicle moving target detection method, device and system | |
| JP5365792B2 (en) | Vehicle position measuring device | |
| JP2011006005A (en) | Device and method for supporting driving in parking | |
| KR101992652B1 (en) | Method and apparatus for detecting vehicle through detection of license plate | |
| CN108335507B (en) | Method and device for providing driving guidance by using camera to shoot image | |
| US20150092991A1 (en) | Method for utilizing a camera system of a motor vehicle as an anti-theft alarm system, camera system and motor vehicle | |
| JP2008026998A (en) | Obstacle location calculation system and method | |
| JP2008174028A (en) | Target detection system and method | |
| JP2008165595A (en) | Obstacle detection method, obstacle detection device, and obstacle detection system | |
| US10755423B2 (en) | In-vehicle camera device, monitoring system and method for estimating moving speed of vehicle | |
| JP2006318061A (en) | Apparatus, method, and program for image processing | |
| CN113554872B (en) | Detection early warning method and system for traffic intersection and curve | |
| KR20070066660A (en) | Apparatus for recording car accident information and apparatus for monitoring rear view | |
| JP2008028478A (en) | Obstacle detection system, and obstacle detecting method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |