KR101924643B1

KR101924643B1 - Recognition system for vehicle

Info

Publication number: KR101924643B1
Application number: KR1020160179074A
Authority: KR
Inventors: 김태훈
Original assignee: 김태훈
Priority date: 2016-12-26
Filing date: 2016-12-26
Publication date: 2018-12-03
Also published as: KR20180075112A

Abstract

실시예에 따른 차량 인식장치는, 천장에 부착되어 전방위를 촬영하는 복수의 카메라를 포함하는 카메라부; 및 상기 카메라부에서 촬영한 영상을 적어도 2 영역 이상으로 구분하고, 영상의 서로 다른 영역을 각각 분석하여 촬영된 영상에 포함된 서로 다른 차량 정보를 획득하는 프로세서를 포함한다. A vehicle recognition apparatus according to an embodiment includes: a camera unit including a plurality of cameras attached to a ceiling to capture an omnidirectional image; And a processor for dividing the image photographed by the camera unit into at least two regions and analyzing different regions of the image to obtain different vehicle information included in the photographed image.

Description

Recognition system for vehicle < RTI ID = 0.0 >

본 발명은 주차장 관리 시스템 및 주차장 관리 시스템에 구비되는 차량 인식장치에 관한 것이다.BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to a parking lot management system and a vehicle recognition apparatus provided in a parking lot management system.

경제 성장과 소득증가로 인해 차량이 급증하고 있는데 비해 주차 상황이나 주차 상황을 관리하는 인력은 이에 미치지 못하고 있다. 따라서 제한된 인력으로 현재의 열악한 주차 체계를 관리하고 극복하고자 많은 노력들이 이루어지고 있다. 자동차의 자동 인식 장치의 개발도 이 노력의 한 분야이다.Although the number of vehicles is surging due to economic growth and income increase, the manpower to manage the parking situation and the parking situation is insufficient. Therefore, a lot of efforts are being made to manage and overcome the current poor parking system with limited manpower. The development of automatic recognition systems for automobiles is also one area of this effort.

주차된 차량을 구별하고 이로부터 번호판을 인식하는 연구는 주차 관리는 물론 도난 차량 검거, 출입 차량 통제 등의 다양한 분야에 효과적으로 이용할 수 있어 많은 연구가 이루어져 왔다.The research that distinguishes the parked vehicles and recognizes the license plates from them has been widely used because it can be effectively used in various fields such as parking management, arresting of stolen vehicles, and control of access vehicles.

자동차의 번호판을 인식하기 위한 과정은 다른 문자 인식과는 달리 외부의 환경의 영향을 많이 받으므로 잡음이나 변형에 강하도록 고려해야 한다. 하지만 번호판의 특성상 그 내용이 제한되어 있으므로 일반적인 문자 인식에 비해 덜 복잡한 편이다. 다만 우리나라 번호판은 다른 나라와 달리, 번호판의 크기 규격과 바탕색, 글자색이 다양한 형태를 갖고 있으며, 자음과 모음이 나뉘는 한글이 쓰이므로 이에 적합한 번호판 인식 시스템이 개발되고 있다.Unlike other character recognition, the process of recognizing a license plate of a car is influenced by external environment, so it should be considered to be strong against noise or deformation. However, due to the nature of the license plate, its contents are limited, so it is less complicated than general character recognition. However, unlike other countries, Korean license plates have various sizes of license plate size, background color, and letter colors. Korean license plates are divided into consonants and vowels, so license plate recognition systems suitable for them are being developed.

기존의 자동차 인식 방식은 두 가지로 나눌 수 있다. 첫 번째는 번호판의 영역을 먼저 추출한 다음 그 영역에서 문자를 추출하는 방식이 있고, 두 번째는 명암값을 이용하여 번호판의 영역과 문자를 동시에 추출하는 방식이 있다. 처음 방식은 많은 메모리와 처리 시간을 요구하는 문제가 있으며, 두 번째 방식은 정확도가 떨어지는 문제가 있다.There are two kinds of conventional recognition methods. First, there is a method of extracting a region of a license plate first and then extracting a character in that region. Secondly, there is a method of simultaneously extracting an area and a character of a license plate by using a brightness value. The first method has a problem that requires a lot of memory and processing time, and the second method has a problem that accuracy is low.

선행기술문헌을 살펴보면, 공개번호 10-2004-0071479의 차량번호판 인식 시스템 및 그것을 이용한 차량 관리 방법은 촬영된 영상의 명암도 변화를 조사한 후 번호판이 위치한 영역을 찾아내는 방식이나, 주차장의 조명이나, 주변 차량과 사람의 그림자에 따라 촬영된 영상의 명암도에 영향을 주므로, 이러한 방식 만으로는 번호판의 위치 영역을 적절히 찾아내는데 있어서 한계가 있다.The vehicle license plate recognition system disclosed in Japanese Laid-Open Patent Publication No. 10-2004-0071479 and the vehicle management method using the same can be classified into a method of searching the area where the license plate is located after the change of the intensity of the photographed image is examined, And the brightness of the image photographed according to the shadow of a person, there is a limit in finding the position area of the license plate by such a method alone.

따라서 번호판을 추출하기 위한 전단계로써, 촬영된 영상에서 주차장 배경 영역과 번호판을 제외한 차체로부터 번호판만을 정확하게 추출하는 기술 개발이 요구되고 있다. 특히, 최근 주차장 이용자의 미관을 고려하여 주차장의 벽면 등에 다양한 형태의 디자인의 그림이나 문자가 그려지고 있고, 차제의 형상의 다변화에 따라 배경 영역으로부터 번호판을 인식하는데 있어서 오류가 증가하고 있어 이를 해결할 필요성이 커지고 있다.Therefore, it is required to develop a technology for extracting only the license plate from the car body, excluding the parking lot background area and the license plate, from the photographed image as a preliminary step for extracting the license plate. Especially, in consideration of the aesthetics of the parking lot users, drawings and characters of various forms of design are drawn on the wall of the parking lot, and errors are increasing in recognition of the license plate from the background area due to diversification of the shape of the car. .

한편, 최근 주차장이 무인화 됨에 따라서, 자동으로 차량의 번호를 인식하고 주차 시간에 따라 요금을 산출하여 부과하는 주차장 관리 시스템이 개발되고 있다. 자세히, 현재 무인 주차장 관리 시스템은, 주차장 초입에 설치된 카메라를 통해 차량 번호를 인식하고, 출차시 요금을 자동으로 산정하며, 나아가 주차장 층별 여유 주차공간을 알려줄 수 있다. On the other hand, a parking lot management system has been developed in which the number of the vehicle is automatically recognized as the parking lot has recently been unmanned, and the fare is calculated and charged according to the parking time. In detail, the unmanned parking lot management system recognizes the car number through the camera installed at the parking lot at the beginning of the parking lot, automatically calculates the fare at the time of departure, and can inform the free parking space according to the parking lot floor.

한편, 최근 360도 전방위 촬영 카메라에 대한 관심이 증폭되고 있다. 360도 카메라는, 한대의 카메라로 전방위 촬영이 가능하여, 특정 지역에 설치되어 전방위를 감시하는 장치로서 주목 받고 있다.On the other hand, interest in 360-degree omnidirectional camera has been amplified recently. The 360 degree camera can be photographed in all directions with a single camera, and has been attracting attention as a device installed in a specific area to monitor the omnidirection.

현재 주차장 관리 시스템은, 주차장 입구 초입에서 일단 차량을 정지시킨 후 입구에 설치된 카메라로 차량의 번호판을 촬영하여 차량을 인식하는 방식을 취하고 있다. Currently, the parking lot management system adopts a method of stopping the vehicle once at the entrance of the parking lot and then recognizing the vehicle by photographing the license plate of the vehicle with the camera installed at the entrance.

그러나 이러한 현재 주차장 관리 시스템은, 차량을 정지시켜야 하기 때문에, 차량의 원활한 주차장 이용을 방해하는 문제가 있다. However, such a current parking lot management system has a problem of hindering the smooth use of the parking lot because the vehicle must be stopped.

또한, 현재 주차장 관리 시스템에서 사용하는 카메라는, 주차장 입구 초입에만 설치되 있거나 층별 입구 초입에만 설치되어 있고 일방향만 촬영이 가능하므로, 이러한 카메라 만으로는 층별 진입하는 차량들을 단순히 카운트할 수 밖에 없다. In addition, since the cameras used in the parking lot management system are installed only at the entrance of the parking lot or only at the beginning of the entrance of the floors, only one direction can be taken, and therefore such vehicles alone can not count the vehicles entering the floors.

따라서, 현재 주차장 관리 시스템은, 층별로 진출입한 차량들의 정확한 동선을 판단하지 못하므로, 층별로 여유 주차공간 개수를 대략적으로 알려주는데 그치고, 여유 주차공간의 개수, 위치 등을 정확하게 파악하지 못하는 문제가 있다. Therefore, since the current parking lot management system can not judge the exact movement line of the vehicles entering and leaving by the floor, the number of the free parking spaces is notified to the floor, and the number and position of the free parking spaces can not be accurately grasped have.

또한, 현재 주차장 관리 시스템은, 층별로 진입한 차량 대수만 카운트 하므로, 차량에게 어떠한 위치에 주차 가능한 공간이 위치하였는지 안내하지 못하는 문제가 있다. In addition, since the present parking lot management system counts only the number of vehicles entering each floor, there is a problem in that it is not possible to tell where the parking space is located at the vehicle.

실시예는 이러한 문제점들을 해결하기 위한 것으로, 360도 전방위 카메라를 이용하여 정확하게 주차장 이용 차량 및 차량의 동선을 인식하는 차량 인식장치를 제공하고자 한다.SUMMARY OF THE INVENTION The present invention has been made to solve the above-mentioned problems, and it is an object of the present invention to provide a vehicle recognition apparatus which accurately recognizes a car using vehicle and a car using a 360 degree omnidirectional camera.

실시예에 따른 차량 인식장치는, 전방위 카메라를 이용하여 차량 동선 정보를 정확하게 추적하고, 이러한 차량 동선 정보에 따라 주차장 상황을 파악하여 주차장 내 진입한 차량에게 빈 주차공간의 위치를 자세하게 안내할 수 있다. The vehicle recognition apparatus according to the embodiment can precisely track the vehicle copper line information using the omnidirectional camera and grasp the parking situation according to the information of the vehicle motion line to guide the position of the empty parking space to the vehicle entering the parking lot in detail .

또한, 실시예에 따른 차량 인식장치는, 전방위 카메라 하나만으로도 전후좌우 방향 촬영이 가능하므로, 적은 수의 카메라로 주차장 상황 전반을 파악할 수 있다. Further, since the vehicle recognition apparatus according to the embodiment can photograph in the front, rear, and left directions with only one omnidirectional camera, it is possible to grasp the overall parking situation with a small number of cameras.

또한, 실시예에 따른 차량 인식장치는, 전방위 카메라의 수를 최소화 하면서 주차장 각 구역의 상황을 정확하게 파악할 수 있도록 전방위 카메라 배치할 수 있다. In addition, the vehicle recognition apparatus according to the embodiment can arrange the omnidirectional camera so as to accurately grasp the situation of each parking area while minimizing the number of omnidirectional cameras.

그리고 실시예에 따른 차량 인식장치는, 이와 같이 획득한 차량 정보와 주차장 정보를 기초로 주차장 상황을 파악하여, 층별 여유 주차공간뿐만 아니라, 빈 주차공간의 위치까지 자세하게 표시하여 차량에게 안내할 수 있다. The vehicle recognition apparatus according to the embodiment can grasp the parking situation on the basis of the vehicle information and the parking lot information acquired in this way and display the detailed parking spaces as well as the vacant parking spaces in detail to the vehicle .

도 1은 본 발명의 실시예에 따른 주차장 관리 시스템의 블록도이다.
도 2는 본 발명의 실시예에 따른 차량 인식부의 블록도이다.
도 3a 내지 도 4b는 본 발명의 실시예에 따른 프로세서가 영상에서 차량 정보를 인식하는 방법을 설명하기 위한 도면이다.
도 5는 본 발명의 실시예에 따른 주차장 관리 시스템이 설치된 주차장의 입구 주변을 나타낸다.
도 6은 본 발명의 실시예에 따른 주차장 입출차 카메라 영상을 분석하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 실시예에 따른 주차장 관리 시스템이 설치된 주차장 소정의 층의 일례이다.
도 8은 본 발명의 실시예에 따른 주차장 층별 주차 카메라와 교차로 카메라 영상을 분석하는 방법을 설명하기 위한 도면이다.1 is a block diagram of a parking lot management system according to an embodiment of the present invention.
2 is a block diagram of a vehicle recognition unit according to an embodiment of the present invention.
3A to 4B are views for explaining a method of recognizing vehicle information in a video image according to an embodiment of the present invention.
5 shows the vicinity of the entrance of the parking lot where the parking lot management system according to the embodiment of the present invention is installed.
6 is a view for explaining a method of analyzing a parking lot entrance / exit camera image according to an embodiment of the present invention.
7 is an example of a predetermined parking lot in which a parking lot management system according to an embodiment of the present invention is installed.
FIG. 8 is a view for explaining a method of analyzing a parking camera and an intersection camera image according to an embodiment of the present invention.

이하, 본 발명의 실시예에 의한 주차장 관리 시스템의 도면을 참고하여 상세하게 설명한다. 다음에 소개되는 실시 예들은 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 예로서 제공되는 것이다. 따라서, 본 발명은 이하 설명되는 실시 예들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 그리고, 도면들에 있어서, 장치의 크기 및 두께 등은 편의를 위하여 과장되어 표현될 수도 있다. 명세서 전체에 걸쳐서 동일한 참조 번호들은 동일한 구성요소들을 나타낸다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a parking lot management system according to an embodiment of the present invention will be described in detail with reference to the drawings. The following embodiments are provided by way of example so that those skilled in the art can fully understand the spirit of the present invention. Therefore, the present invention is not limited to the embodiments described below, but may be embodied in other forms. In the drawings, the size and thickness of an apparatus may be exaggerated for convenience. Like reference numerals designate like elements throughout the specification.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성요소를 지칭한다. 도면에서 층 및 영역들의 크기 및 상대적인 크기는 설명의 명료성을 위해 과장될 수 있다.BRIEF DESCRIPTION OF THE DRAWINGS The advantages and features of the present invention and the manner of achieving them will become apparent with reference to the embodiments described in detail below with reference to the accompanying drawings. However, it should be understood that the present invention is not limited to the embodiments disclosed herein but may be embodied in many different forms and should not be construed as being limited to the embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, and will fully convey the concept of the invention to those skilled in the art. Is provided to fully convey the scope of the invention to those skilled in the art, and the invention is only defined by the scope of the claims. Like reference numerals refer to like elements throughout the specification. The dimensions and relative sizes of the layers and regions in the figures may be exaggerated for clarity of illustration.

본 명세서에서 사용된 용어는 실시 예들을 설명하기 위한 것이며, 따라서 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다 (comprise)" 및/또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/ 또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.The terminology used herein is for the purpose of describing embodiments only and is not intended to be limiting of the invention. In the present specification, the singular form includes plural forms unless otherwise specified in the specification. &Quot; comprise "and / or" comprising ", as used in the specification, means that the presence of stated elements, Or additions.

실시예에 따른 주차장 관리 시스템은, 주차장 천장에 설치된 반구형 전방위 카메라를 통해 주차장 내의 차량 정보를 획득하고, 차량 정보에 기초하여 차량 별 요금 산정을 할 수 있으며, 차량 정보에 따라 주차장 상황을 파악하여 주차장 내 진입한 차량에게 빈 주차공간의 위치를 자세하게 안내할 수 있다. The parking lot management system according to the embodiment can acquire vehicle information in the parking lot through a hemispheric omnidirectional camera installed in the parking lot ceiling, calculate the charge for each vehicle based on the vehicle information, The position of the empty parking space can be guided in detail to the vehicle entering the vehicle.

여기서, 차량 정보는, 차량의 전면 번호판 번호, 차량의 후면 번호판 번호, 차량의 주행방향, 차량의 주차장 진입여부, 차량의 주차장 출차여부 및 차량 동선 중 적어도 하나 이상의 정보를 포함할 수 있다. Here, the vehicle information may include at least one of a front license plate number of the vehicle, a rear license plate number of the vehicle, a driving direction of the vehicle, a parking lot entry state of the vehicle, a parking lot exit state of the vehicle, and a vehicle motion line.

자세히, 실시예에 따른 주차장 관리 시스템은, 전방위 카메라 하나만으로도 전후좌우 방향 촬영이 가능하므로, 하나의 카메라로 촬영한 영상을 복수의 영역으로 구획하고, 구획된 영역의 영상을 각각 분석하여, 정확하고 높은 정보량의 차량 정보를 일거에 획득할 수 있다. In detail, the parking lot management system according to the embodiment is capable of photographing in the front, rear, and left directions with only one omnidirectional camera, so that the image photographed by one camera is divided into a plurality of regions, the images of the divided regions are respectively analyzed, It is possible to acquire vehicle information of high information amount at all.

또한, 실시예에 따른 주차장 관리 시스템은, 이러한 전방위 카메라의 수를 최소화 하면서 주차장 각 구역의 상황을 정확하게 파악할 수 있도록 전방위 카메라 배치할 수 있다. In addition, the parking lot management system according to the embodiment can arrange the omnidirectional camera so as to accurately grasp the situation of each parking lot area while minimizing the number of omnidirectional cameras.

그리고 실시예에 따른 주차장 관리 시스템은, 이와 같이 획득한 차량 정보와 주차장 정보를 기초로 주차장 상황을 파악하여, 층별 여유 주차공간뿐만 아니라, 빈 주차공간의 위치까지 자세하게 표시하여 차량에게 안내할 수 있다. The parking lot management system according to the embodiment can grasp the parking situation on the basis of the vehicle information and the parking lot information thus obtained and display the details of the free parking space as well as the vacant parking space in detail to the vehicle .

이하, 이러한 주차장 관리 시스템을 이루는 각 구성에 대해 상세히 설명한다. Hereinafter, each configuration of the parking lot management system will be described in detail.

도 1을 참조하면, 실시예에 따른 주차장 관리 시스템(10)은, 차량 인식부(100), 주차장 종합 관리 서버(200), 요금 정산부(300), 게이트(400), 주차 안내 상황판(500), 사용자 단말기(600), 거리 센서(700) 등을 포함할 수 있다. 다만, 도 1에 도시된 주차장 관리 시스템(10)의 유닛들은 주차장 관리 시스템(10)을 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 주차장 관리 시스템(10)은 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.1, a parking lot management system 10 according to an embodiment of the present invention includes a vehicle recognition unit 100, a parking lot comprehensive management server 200, a charge settlement unit 300, a gate 400, A user terminal 600, a distance sensor 700, and the like. However, the units of the parking lot management system 10 shown in Fig. 1 are not essential in implementing the parking lot management system 10, so that the parking lot management system 10 described in this specification is not limited to the components listed above You can have many, or fewer components.

먼저, 차량 인식부(100)는, 천장에 부착되며 전방위를 촬영하는 복수의 카메라를 포함할 수 있다. First, the vehicle recognizing unit 100 may include a plurality of cameras attached to a ceiling and photographing all directions.

자세히, 차량 인식부(100)에서 사용되는 카메라는, 반구형상으로, 반구의 모든 면의 법선 방향을 촬영 가능한 전방위 360도 카메라일 수 있다. More specifically, the camera used in the vehicle recognizing unit 100 may be a 360-degree omnidirectional camera capable of photographing the normal direction of all the surfaces of the hemisphere in a hemispherical shape.

그리고 차량 인식부(100)는, 카메라부에서 촬영한 영상을 적어도 2 영역 이상으로 구분하고, 영상의 서로 다른 영역을 각각 분석하여, 차량 정보를 획득할 수 있다. 여기서, 차량 정보는, 차량의 전면 번호판 번호, 차량의 후면 번호판 번호, 차량의 주행방향, 차량의 주차장 진입여부, 차량의 주차장 출차여부 및 차량 동선 중 적어도 하나 이상의 정보를 포함할 수 있다. The vehicle recognizing unit 100 can divide the image photographed by the camera unit into at least two areas and analyze different areas of the image to obtain vehicle information. Here, the vehicle information may include at least one of a front license plate number of the vehicle, a rear license plate number of the vehicle, a driving direction of the vehicle, a parking lot entry state of the vehicle, a parking lot exit state of the vehicle, and a vehicle motion line.

자세히, 차량 인식부(100) 내에는 프로세서인 영상 처리부가 포함되어, 차량 인식부(100) 자체에서 직접 카메라에서 촬영되 영상을 분석하여 차량 정보를 획득할 수 있다. 한편, 다른 실시예에서는, 차량 인식부(100)는, 영상을 촬영만 하고, 촬영 영상을 주차장 종합 관리 서버(200)로 전송한 후 주차장 종합 관리 서버(200)에서 영상을 분석하여 차량 정보를 획득할 수도 있다. In detail, the vehicle recognition unit 100 includes an image processing unit, which is a processor, and can acquire vehicle information by analyzing the image taken by the camera directly from the vehicle recognition unit 100 itself. On the other hand, in another embodiment, the vehicle recognizing section 100 only captures an image, transmits the photographed image to the parking lot comprehensive management server 200, analyzes the image in the parking lot comprehensive management server 200, It can also be obtained.

이하 설명의 편의를 위해, 차량 인식부(100)가 영상을 분석하여 차량 정보까지 획득하는 것으로 한정하여 설명한다. For convenience of explanation, the description will be limited to the case where the vehicle recognizing unit 100 analyzes the image and acquires the vehicle information.

도 2를 참조하면, 이러한 차량 인식부(100)는, 입력부(110), 통신부(120), 메모리(140), 프로세서(170) 및 카메라부(160)를 포함할 수 있다. 다만, 도 2에 도시된 차량 인식부(100)의 유닛들은 차량 인식부(100)를 구현하는데 있어서 필수적인 것은 아니어서, 본 명세서 상에서 설명되는 차량 인식부(100)는 위에서 열거된 구성요소들 보다 많거나, 또는 적은 구성요소들을 가질 수 있다.2, the vehicle recognition unit 100 may include an input unit 110, a communication unit 120, a memory 140, a processor 170, and a camera unit 160. However, the units of the vehicle recognition unit 100 shown in FIG. 2 are not essential to the implementation of the vehicle recognition unit 100, so that the vehicle recognition unit 100 described in the present specification You can have many, or fewer components.

먼저, 차량 인식부(100)는 사용자의 입력을 감지하는 입력부(110)를 포함할 수 있다. First, the vehicle recognition unit 100 may include an input unit 110 for sensing a user's input.

예를 들어, 입력부(110)는, 차량 인식부(100)의 전원을 온(on)/오프(off)시키는 실행 입력 등을 감지할 수 있다. For example, the input unit 110 may sense execution inputs or the like that turn on / off the power of the vehicle recognition unit 100. [

실시예에서, 사용자는 입력부(110)를 통해 전방위 카메라에서 촬영된 영상을 분할할 수 있으며, 분할된 각 영역에서 획득할 차량 정보를 매칭시키는 설정 입력을 할 수 있다. In the embodiment, the user can divide the image photographed by the omnidirectional camera through the input unit 110, and can input a setting for matching the vehicle information to be acquired in each divided area.

예를 들어, 사용자는, 입력부(110)를 통해 촬영 영상을 전후좌우 촬영방향을 기준으로 4분할하도록 설정 할 수 있으며, 분할한 전후좌우 영상 중 적어도 하나의 영상을 분석에서 제외할 수 있다. 즉, 사용자는 입력부(110)를 통해 촬영 영상 중 일부 영역만을 분석하도록 설정하여 프로세서(170)의 이미지 처리 부하를 최소화할 수 있다. For example, the user can set the captured image to be divided into four parts based on the front, back, left and right photographing directions through the input unit 110, and exclude at least one of the divided front, rear, left and right images from analysis. That is, the user can minimize the image processing load of the processor 170 by setting only the partial region of the captured image to be analyzed through the input unit 110.

또한, 사용자는 입력부(110)를 통해 분할 영역 별로 획득할 차량 정보를 매칭하는 설정입력을 할 수 있다. 즉, 사용자는, 주차장에서 카메라를 설치한 위치에 따라서 촬영한 영상이 포함하는 차량 정보가 다를 것이므로, 촬영 영상의 영역별 획득할 차량 정보를 설정 할 수 있다. In addition, the user can input a setting for matching the vehicle information to be acquired for each divided region through the input unit 110. [ That is, since the vehicle information included in the photographed image is different depending on the position where the camera is installed in the parking lot, the user can set the vehicle information to be acquired for each region of the photographed image.

이러한 입력부(110)는 사용자 제스쳐를 감지하는 제스쳐 입력부(110)(예를 들어 (optical sensor) 등), 터치를 감지하는 터치 입력부(110)(예를 들어, 터치 센서(touch sensor), 터치키(touch key), 푸시키(mechanical key) 등), 사용자 단말기(600), 음성 입력을 감지하는 마이크로폰(microphone) 및 원격 리모콘, 이동 단말기 중 적어도 하나 이상을 포함하여, 사용자 입력을 감지할 수 있다. The input unit 110 includes a gesture input unit 110 (e.g., an optical sensor) for sensing a user gesture, a touch input unit 110 for sensing a touch (e.g., a touch sensor, (e.g., a touch key, a mechanical key, etc.), a user terminal 600, a microphone for sensing voice input, a remote remote controller, and a mobile terminal, .

다음으로, 차량 인식부(100)는, 주차장 종합 관리 서버(200)와 유무선 통신하는 통신부(120)를 포함할 수 있다. Next, the vehicle recognition unit 100 may include a communication unit 120 that performs wired / wireless communication with the parking lot comprehensive management server 200. [

실시예에서, 통신부(120)는, 전방위 영상 또는 전방위 영상을 분석하여 획득한 차량 정보를 주차장 종합 관리 서버(200)로 송신할 수 있다. In the embodiment, the communication unit 120 can transmit the vehicle information obtained by analyzing the omnidirectional image or the omnidirectional image to the parking lot comprehensive management server 200. [

또한, 통신부(120)는, 주차장 종합 관리 서버(200)로부터 동작 신호, 제어 신호 등을 수신하고, 이를 프로세서(170)로 전달할 수 있다. The communication unit 120 may receive an operation signal, a control signal, and the like from the parking lot comprehensive management server 200 and may transmit the operation signal, the control signal, and the like to the processor 170.

또한, 차량 인식부(100)는, 메모리(140)를 포함할 수 있으며, 메모리(140)는 프로세서(170)의 처리 또는 제어를 위한 프로그램 등 차량 인식부(100) 전반의 동작을 위한 다양한 데이터를 저장할 수 있다.The vehicle recognition unit 100 may include a memory 140. The memory 140 may store various data for operation of the vehicle recognition unit 100 such as a program for processing or controlling the processor 170 Can be stored.

또한, 메모리(140)는 차량 인식부(100)에서 구동되는 다수의 응용 프로그램(application program 또는 애플리케이션(application)), 차량 인식부(100)의 동작을 위한 데이터들, 명령어들을 저장할 수 있다. 그리고 이러한 응용 프로그램은, 메모리(140)에 저장되고, 프로세서(170)에 의하여 차량 인식부(100)의 동작(또는 기능)을 수행하도록 구동될 수 있다. The memory 140 may store a plurality of application programs or applications that are driven by the vehicle recognition unit 100, data for operation of the vehicle recognition unit 100, and commands. This application program is stored in the memory 140 and can be driven by the processor 170 to perform the operation (or function) of the vehicle recognition section 100. [

실시예에서, 메모리(140)는 전방위 카메라 영상에 포함되는 오브젝트 확인을 위한 데이터를 저장할 수 있다. 예를 들면, 메모리(140)는, 카메라를 통해 획득된 영상에서, 소정 오브젝트가 검출되는 경우, 소정 알고리즘에 의해, 상기 오브젝트가 무엇에 해당하는지 확인하기 위한 데이터를 저장할 수 있다.In an embodiment, the memory 140 may store data for object identification included in the omnidirectional camera image. For example, the memory 140 may store data for confirming what the object corresponds to by a predetermined algorithm when a predetermined object is detected in an image acquired through a camera.

예를 들면, 메모리(140)는, 카메라를 통해 획득된 영상에 차량 형상, 차량 번호판과 같은 소정의 오브젝트가 포함되면, 소정 알고리즘에 의해, 상기 오브젝트가 무엇에 해당하는지 확인하기 위한 데이터를 저장할 수 있다. For example, when the image obtained through the camera includes a predetermined object such as a vehicle shape or a license plate, the memory 140 can store data for confirming what the object corresponds to by a predetermined algorithm have.

그리고 차량 인식부(100)는 차량 인식부(100) 내의 각 유닛의 전반적인 동작을 제어하는 프로세서(170)를 포함할 수 있다. The vehicle recognition unit 100 may include a processor 170 that controls the overall operation of each unit in the vehicle recognition unit 100. [

또한, 프로세서(170)는 응용 프로그램을 구동하기 위하여, 도 3과 함께 살펴본 구성요소들 중 적어도 일부를 제어할 수 있다. 나아가, 프로세서(170)는 상기 응용 프로그램의 구동을 위하여, 차량 인식부(100)에 포함된 구성요소들 중 적어도 둘 이상을 서로 조합하여 동작시킬 수 있다.In addition, processor 170 may control at least some of the components discussed with FIG. 3 to drive the application program. Further, the processor 170 may operate at least two of the components included in the vehicle recognition unit 100 in combination with each other for driving the application program.

그리고 프로세서(170)는 상기 메모리(140)에 저장된 응용 프로그램과 관련된 동작 외에도, 통상적으로 차량 인식부(100)의 전반적인 동작을 제어한다. 프로세서(170)는 위에서 살펴본 구성요소들을 통해 입력 또는 출력되는 신호, 데이터, 정보 등을 처리하거나 메모리(140)에 저장된 응용 프로그램을 구동함으로써, 사용자에게 적절한 정보 또는 기능을 제공 또는 처리할 수 있다In addition to the operations associated with the application program stored in the memory 140, the processor 170 typically controls the overall operation of the vehicle recognition unit 100. [ Processor 170 may provide or process appropriate information or functionality to a user by processing signals, data, information, etc., input or output through the components discussed above, or by driving an application program stored in memory 140

또한, 차량 인식부(100)는, 복수의 전방위 카메라를 포함하는 카메라부(160)를 포함할 수 있다. The vehicle recognizing unit 100 may include a camera unit 160 including a plurality of omnidirectional cameras.

먼저, 카메라부(160)에 포함되는 전방위 카메라는, 설치된 위치 기준 하방 360도 방향을 모두 촬영하여, 전방위 영상을 획득할 수 있다. 좀더 자세히, 실시예에 따른 전방위 카메라는, 주차장의 천장에 설치되는 반구형 카메라로, 천장 아래측 전방향을 촬영하는 카메라일 수 있다. First, the omnidirectional camera included in the camera unit 160 can capture all the directions of 360 degrees below the installed position reference and acquire omnidirectional images. More specifically, the omnidirectional camera according to the embodiment may be a hemispherical camera installed on the ceiling of the parking lot, and may be a camera for photographing the entire lower direction of the ceiling.

도 3c를 참조하면, 이러한 360도를 촬영하는 전방위 카메라는, 단일의 360도 촬영 렌즈(201)를 통해, 설치된 위치 기준 하방 360도 방향을 모두 촬영하여, 전방위 영상을 획득할 수 있다.Referring to FIG. 3C, the omnidirectional camera for photographing the 360-degree image can acquire the omnidirectional image by capturing all 360 degrees downward from the installed position reference through the single 360-degree photographing lens 201.

자세히, 실시예에 따른 360도 촬영 렌즈(201)는, 입사광이 굴절되도록 형성되는 굴절부(240)와, 굴절부(240)의 끝단에 수평하게 형성되어 있는 수평부(260)와, 수평부(260)에 형성되어 내측반사코팅으로부터 반사되는 입사광을 반사시켜 내측오목부로 입사광을 제공하는 반사코팅(250)과, 반사코팅(250)을 통해 반사된 입사광을 카메라부(160)로 제공하도록 다시 굴절시키는 내측오목부(210)와, 내측오목부(210)의 끝단에 오목하게 형성되는 내측굴절부(220)와, 내측굴절부(240)에 형성되어 굴절부(240)로부터 입사되는 입사광을 반사코팅(250)으로 반사시키는 내측반사코팅(230)을 포함할 수있다. 이러한 360도 촬영 렌즈(201)는, 360도 시야각 확보가 가능하여, 카메라부(160)가 향하는 방향에 의존하지 않고, 주차장 천장에서 하방 전방위를 촬영할 수 있는 장점이 있다. The 360 degree photographing lens 201 according to the embodiment includes a refracting portion 240 formed to refract incident light, a horizontal portion 260 formed horizontally at an end of the refracting portion 240, A reflective coating 250 formed on the reflective coating 260 to reflect the incident light reflected from the inner reflective coating and provide incident light to the inner concave portion and a reflective coating 250 disposed on the reflective coating 250 to provide the incident light reflected by the reflective coating 250 to the camera unit 160 An inner refracting portion 220 formed to be concave at the end of the inner concave portion 210 and an inner refracting portion 220 formed at the inner refracting portion 240 to reflect the incident light incident from the refracting portion 240 And an inner reflective coating 230 that reflects off the reflective coating 250. The 360 degree photographing lens 201 is capable of securing a 360 degree viewing angle and is capable of photographing downward all directions in the parking lot ceiling regardless of the direction in which the camera unit 160 is directed.

이하, 프로세서(170)가 상기의 전방위 카메라를 통해 촬영한 전방위 영상을 분석하여, 차량 정보를 획득하는 방법에 대해 설명한다. Hereinafter, a method for acquiring vehicle information by analyzing the omnidirectional image photographed by the processor 170 through the omnidirectional camera will be described.

도 3a 내지 도 4b를 참조하면, 프로세서(170)는 전방위 카메라로부터 도 3a 및 도 4a와 같은 곡면형 영상(101)을 입력 받아 도 3b 및 도 4b와 같은 평면형 영상(102)으로 변환하는 영상처리를 수행 할 수 있다. 그리고 도 3a 및 도 4a에서 점선으로 표시된 영역을 기준으로 곡면형 영상이 좌측 곡면 영상과 우측 곡면 영상으로 구분되어 도 3b 및 도 4b와 같이 좌우로 평면화되면서 평면 영상이 얻어질 수 있다.3A and 4B, the processor 170 receives the curved image 101 shown in FIGS. 3A and 4A from the omnidirectional camera and performs image processing for converting the curved image 101 into a planar image 102 as shown in FIGS. 3B and 4B Can be performed. 3A and 4A, a curved image is divided into a left curved image and a right curved image, and the plane image can be obtained while being flattened to the left and right as shown in FIGS. 3B and 4B.

그리고 프로세서(170)는 획득한 평면 영상에서 번호판위치추정영역만을 추출할 수 있고, 추출한 번호판위치추정영역에 대한 영상을 기초하여 주차된 자동차의 번호판을 추출하고 추출된 번호판으로부터 자동차의 문자와 번호를 인식할 수 있다.Then, the processor 170 extracts only the license plate position estimation region from the acquired plane image, extracts license plates of the parked vehicle based on the image of the extracted license plate position estimation region, Can be recognized.

프로세서(170)는 1) 자동차 번호판에 사용되는 색상은 녹색, 흰색, 노란색의 3가지 색상이 사용되는 특징, 2) 영상에서 수직축은 자동차 번호판에서 두드러지는 특징3) 번호판 영역의 문자 영역과 배경 영역의 명확하게 구분되는 특징, 4) 번호판에서 사용되는 문자는 제한적인 특징 중 적어도 하나의 특징을 이용하여 번호판을 추출할 수 있다.Processor 170 is characterized by 1) the colors used in the license plates are three colors of green, white and yellow, 2) the vertical axis in the image is characteristic of the license plates, and 3) And 4) characters used in the license plate can extract the license plate using at least one of the limited features.

구체적으로 (1) RGB 색공간으로 표현되는 영상을 HIS, 즉 H (hue: 색조), S (Saturation: 채도), I (intensity: 명도)로 변환하고, H 성분만을 선택함으로써 환경적 요인에 의한 밝기의 영향을 축소하고 고유한 색상에 대한 값의 범위를 구할 수 있다. 즉 자동차 번호판은 3가지 뚜렷하게 구분되는 색상만을 사용하기 때문에 각각의 색상이 가지는 H 공간의 이론적인 계산을 통해 임계범위를 설정하고, 인식률 향상을 위하여 메모리(140)의 데이터베이스 영상의 통계적인 값을 이에 결합하여 임계 범위를 설정하고, 임계치 의 값을 가진 픽셀들을 추출하며, 객체 단위로 라벨링을 하며, 자동차 번호판의 특성에 알맞은 개체를 선택함으로써 자동차 번호판을 추출할 수 있다. 또한 (2) 자동차 번호판의 색상과 자동차의 본체 색상이 동일한 경우에는, Sobel Mask와 모폴로지 연산에 기초하여 자동차 번호판의 특성에 부합하는 수직성분 쌍을 찾아 자동차 번호판을 추출할 수 있다. (3) 그외에도 정점 샘플링법, Sonde법, Slit법, 분할 히스토그램 분석법, 주변 분포 이용법, 요철 구조법, 반사법, 유사도(similarity )법, 획분석법, 방향 추출법, Field Effect법, RS 정합법 등에 기초하여 번호판의 번호 및 문자를 인식할 수 있다.Specifically, (1) By converting an image represented by an RGB color space into an HIS, that is, H (hue), S (saturation), I (intensity) You can reduce the effect of brightness and get a range of values for a unique color. That is, since the car license plate uses only three distinct colors, the threshold range is set through the theoretical calculation of the H space of each color, and the statistical value of the database image of the memory 140 is stored in A license plate can be extracted by setting a critical range, extracting pixels having a threshold value, labeling on an object basis, and selecting an object suitable for the characteristics of the license plate. (2) If the color of the license plate is the same as the color of the body of the vehicle, the license plate can be extracted by finding a vertical component pair that matches the characteristics of the license plate based on the Sobel Mask and the morphology operation. (3) Based on other methods such as vertex sampling method, Sonde method, Slit method, split histogram method, edge distribution method, concavo-convex structure method, reflection method, similarity method, stroke method, direction extraction method, field effect method and RS method The number and letter of the license plate can be recognized.

또한, 프로세서(170)는, 파악한 차량의 번호를 기준으로, 전방위 카메라의 나머지 영상 영역을 분석하여 차량을 트래킹할 수 있으며, 이를 통해 차량의 동선을 추적할 수 있다.In addition, the processor 170 can track the vehicle by analyzing the remaining image area of the omnidirectional camera based on the number of the detected vehicle, thereby tracking the moving line of the vehicle.

자세히, 프로세서(170)는, 전방위 영상을 4분할 하고, 제 1 영역의 영상을 분석하여 차량 번호판의 번호 및 문자를 인식할 수 있고, 제 2 영역의 영상을 분석하여 해당 번호판을 갖는 차량의 이동방향 등을 포함하는 동선 정보를 획득할 수 있다. In detail, the processor 170 can divide the omni-directional image into four parts, analyze the image of the first area to recognize the number and letter of the license plate, analyze the image of the second area, Direction information, and the like.

이와 같은 방법으로, 프로세서(170)는, 전방위 카메라가 촬영한 영상으로부터 차량의 전면 번호판 번호, 차량의 후면 번호판 번호, 차량의 주행방향, 차량의 주차장 진입여부 및 차량의 주차장 출차여부 중 적어도 하나 이상의 정보를 포함하는 차량 정보를 획득할 수 있다. In this way, the processor 170 obtains, from the image photographed by the omnidirectional camera, at least one of the front license plate number of the vehicle, the rear license plate number of the vehicle, the direction of travel of the vehicle, Vehicle information including information can be obtained.

한편, 프로세서(170)는, 카메라에서 촬영된 영상을 전후좌우 방향을 기준으로 적어도 2 영역 이상으로 구분 하고, 분할된 영상의 영역 각각을 차량의 정보 중 적어도 하나의 정보와 매칭하여, 하나의 전방위 카메라 영상으로부터 복수의 차량 정보를 획득할 수 있다. Meanwhile, the processor 170 divides an image photographed by the camera into at least two areas based on the front, rear, left, and right directions, matches each of the divided image areas with at least one piece of information of the vehicle, A plurality of vehicle information can be obtained from the camera image.

또한, 프로세서(170)는, 분할된 영상의 영역들 중 적어도 하나 이상의 영역은 차량 정보 분석에서 제외시켜, 이미지 처리에 소요되는 부하를 최소화할 수도 있다. Also, the processor 170 may exclude at least one of the regions of the divided image from the vehicle information analysis, thereby minimizing the load on the image processing.

예를 들어, 카메라부(160)는 주차장 입구에 배치된 입출차 카메라(161)를 포함하고, 프로세서(170)는, 입출차 카메라(161) 영상을 전후좌우 방향을 기준으로 4분할 할 수 있다. 그리고 프로세서(170)는, 분할된 전방 영상을 분석하여 차량의 전면 번호판 번호를 인식하고, 분할된 후방 영상을 분석하여 차량의 후면 번호판 번호를 인식할 수 있다. For example, the camera unit 160 includes an input / output camera 161 disposed at the entrance of the parking lot, and the processor 170 can divide the image of the input / output camera 161 in four directions . Then, the processor 170 recognizes the front license plate number of the vehicle by analyzing the divided forward image, and recognizes the rear license plate number of the vehicle by analyzing the divided rear image.

그리고 프로세서(170)는, 좌우측 중 한방향의 영상을 분석화여, 입출차 카메라(161)가 배치된 주차장 층에 차량이 진입하는지 여부 등을 포함하는 차량의 동선 정보를 획득할 수 있다. The processor 170 analyzes the image of one of the left and right sides and acquires the copper line information of the vehicle including whether or not the vehicle enters the parking lot in which the input / output camera 161 is disposed.

즉, 프로세서(170)는, 하나의 입출차 카메라(161)의 전방 영상에서 촬영된 차량의 전면 번호판을 분석하여 차량 번호를 인식하고, 소정의 시간이 지난 후 후방 영상에서 촬영된 차량의 후면 번호판을 분석하여 차량 번호를 다시 한번 인식함으로써, 좀더 정확하게 차량의 번호를 산출할 수 있다. 또한, 프로세서(170)는, 이와 동시에 좌측 또는 우측 영상을 분석하여 차량의 동선을 추적할 수 있다. That is, the processor 170 recognizes the vehicle number by analyzing the front license plate of the vehicle photographed from the forward image of one I / O camera 161, recognizes the vehicle number, So that the vehicle number can be calculated more accurately by recognizing the vehicle number again. In addition, the processor 170 can simultaneously track left and right images to trace the moving line of the vehicle.

또한, 프로세서(170)는, 전방 영상을 분석하여 차량의 번호판 번호 중 일부를 인식하고, 후방 영상을 분석하여 차량의 번호판 번호의 나머지 번호를 인식하여, 전면 번호판이 제대로 인식되지 않은 경우에도 후면 번호판을 인식하여 부족한 정보를 채워, 번호 인식 에러 가능성을 최소화 시킬 수 있다. In addition, the processor 170 analyzes the forward image to recognize a part of license plate numbers of the vehicle, analyzes the rear image and recognizes the remaining number of the license plate number of the vehicle, so that even when the license plate is not correctly recognized, To fill in the missing information, and to minimize the possibility of number recognition errors.

또한, 프로세서(170)는, 전후방 영상에서 차량의 번호판 번호 중 일부만을 인식하면, 차량의 이동방향을 파악하고, 차량의 이동방향 측에 배치된 다른 카메라의 영상을 통해 차량의 번호판 번호 중 나머지 번호를 인식할 수 있다. 즉, 입출차 카메라(161)는, 소정의 간격을 두고 배치된 복수의 카메라를 포함할 수 있으며, 프로세서(170)는, 두 카메라를 이용하여 적어도 4회 이상 전면 또는 후면 번호판을 촬영한 영상을 획득함으로써, 고속으로 이동하는 차량의 번호도 정확하게 인식할 수 있다. The processor 170 recognizes the moving direction of the vehicle when recognizing only a part of the license plate number of the vehicle in the forward and backward images and identifies the remaining number of the license plate number of the vehicle through the images of other cameras disposed on the moving direction side of the vehicle Can be recognized. In other words, the input / output camera 161 may include a plurality of cameras disposed at predetermined intervals, and the processor 170 may use the cameras to photograph the front or rear license plates at least four times The number of the vehicle moving at a high speed can be accurately recognized.

따라서, 실시예에 따른 차량 인식부(100)는, 차량을 정지시키지 않고도, 차량이 이동하는 중간에 차량의 전면 및 후면 번호판을 촬영하여, 차량의 번호를 정확하게 인식할 수 있다. Therefore, the vehicle recognition unit 100 according to the embodiment can accurately recognize the vehicle number by photographing the front and rear license plates of the vehicle in the middle of moving the vehicle, without stopping the vehicle.

또한, 프로세서(170)는, 입출차 카메라(161)의 전방 영상으로 차량의 주차장 진입 정보를 획득하여, 차량 요금을 산정하는데 활용할 수 있다. 또한, 프로세서(170)는, 입출차 카메라(161)의 좌우 중 하나의 영상으로, 입출차 카메라(161)가 설치된 주차장 층으로 차량이 진입하는지 여부를 판단하여, 차량의 동선을 추적할 수 있다. 또한, 프로세서(170)는, 입출차 카메라(161)의 후방 영상으로, 차량이 주차장을 출차하는지 여부를 판단하여, 차량 요금을 산정하는데 활용할 수 있다. In addition, the processor 170 can acquire the parking lot entry information of the vehicle as the forward image of the entrance / exit camera 161 and utilize it to calculate the vehicle fare. The processor 170 can also determine whether or not the vehicle enters the parking lot floor in which the incoming and outgoing camera 161 is installed with the image of one of the left and right images of the incoming and outgoing camera 161, . In addition, the processor 170 can utilize the rear image of the entrance / exit camera 161 to determine whether or not the vehicle leaves the parking lot and calculate the vehicle fare.

즉, 프로세서(170)는, 전방위를 촬영하는 하나의 입출차 카메라(161)를 통해, 차량의 번호, 차량의 주차장 진출입 여부, 차량의 주차장 층 출입 여부 등에 대한 차량 정보를 함께 획득할 수 있다. That is, the processor 170 can acquire the vehicle information about the number of the vehicle, whether or not the vehicle has entered or exited the parking lot, whether or not the vehicle has entered the parking lot, etc. through one input / output camera 161 photographing all directions.

한편, 카메라부(160)는 주차장의 각 층 출입구에 배치된 층별 입구 카메라(163)를 포함할 수 있다. 그리고 프로세서(170)는, 층별 입구 카메라(163) 영상을 전후 및 측방향을 기준으로 적어도 3분할 하고, 분할된 전방 영상을 분석하여 주차장 층의 차량 동선 정보를 획득할 수 있다. 그리고 프로세서(170)는, 분할된 후방 영상을 분석하여 주차장 층을 출차한 차량 정보를 획득하고, 분할된 좌측 영상을 분석하여 층의 주차장 내로 진입한 차량 정보를 획득할 수 있다. Meanwhile, the camera unit 160 may include a layer-by-layer entrance camera 163 disposed at an entrance of each floor of the parking lot. The processor 170 may divide at least three images of the layer-by-layer entrance camera 163 in the forward, backward, and lateral directions, and analyze the divided forward images to obtain the vehicle line information of the parking lot. The processor 170 analyzes the divided rear images to obtain vehicle information from the parking lot, and analyzes the divided left images to obtain vehicle information that has entered the parking lot of the floor.

또한, 카메라부(160)는 주차장의 교차로에 배치된 교차로 카메라(165)를 포함하고, 프로세서(170)는, 교차로 카메라(165) 영상을 적어도 2분할 하고, 분할된 영상을 분석하여 차량의 동선을 추적할 수 있다. The camera unit 160 includes an intersection camera 165 disposed at an intersection of the parking lot and the processor 170 divides the image of the intersection camera 165 into at least two images and analyzes the divided images, . &Lt; / RTI >

이와 같이 차량의 동선을 포함하는 차량 정보는 통신부(120)를 통해 주차장 종합 관리 서버(201)로 전송될 수 있다. 주차장 종합 관리 서버(200)는, 차량 인식부(100)가 획득한 차량 정보에 기초하여 차량 별 주차요금을 정확하게 계산할 수 있으며, 각 층에 주차장 상황을 정확하게 파악하여, 빈 주차공간의 개수뿐만 아니라 위치까지 산출할 수 있다. In this way, the vehicle information including the line of the vehicle can be transmitted to the parking lot comprehensive management server 201 through the communication unit 120. The parking lot comprehensive management server 200 can accurately calculate the parking fee for each vehicle based on the vehicle information acquired by the vehicle recognition unit 100 and precisely grasp the parking lot situation on each floor and not only the number of empty parking spaces Position can be calculated.

주차장 관리 서버(200)는, 차량 정보에 기초하여, 주차장 입구에 배치된 게이트(400)와, 주차장 상황을 안내하는 주차 안내 상황판(500)을 제어할 수 있다. The parking lot management server 200 can control the gate 400 disposed at the entrance of the parking lot and the parking guide status board 500 guiding the parking lot status based on the vehicle information.

다른 실시예에서는, 주차장 관리 서버(200)는, 차량 인식부(100)에서 촬영된 영상을 분석하여 차량의 번호 정보 및 차량의 동선 정보를 획득하고, 차량의 동선 정보에 기초하여 주차장 상황을 판단하고, 판단한 주차장 상황에 대한 정보를 표시하도록 주차 안내 상황판(500)을 제어할 수 있다. In another embodiment, the parking lot management server 200 analyzes the images photographed by the vehicle recognizing section 100 to obtain the number information of the vehicle and the traffic information of the vehicle, and judges the parking lot situation based on the traffic information of the vehicle And control the parking information board 500 so as to display information on the determined parking lot situation.

주차장 관리 시스템(10)은, 전방위 카메라의 수를 최소화 하면서 주차장 각 구역의 상황을 정확하게 파악할 수 있도록 전방위 카메라 배치할 수 있다. The parking lot management system 10 can arrange the omnidirectional camera so as to accurately grasp the situation of each parking lot while minimizing the number of omnidirectional cameras.

예를 들어, 도 5를 참조하면, 주차장의 입구에는 게이트(400)와, 게이트(400) 주변의 주차장 천장에 배치된 입출차 카메라(161)와, 층별 차량 빈 주차공간을 안내하는 입구 종합 상황판(520)과, 교차로 카메라(165a, 165b)가 배치될 수 있다. For example, referring to FIG. 5, at the entrance of a parking lot, there are provided a gate 400, an entrance / exit camera 161 disposed in a parking lot ceiling around the gate 400, (520), and an intersection camera (165a, 165b).

그리고 도 6을 참조하면, 주차장 관리 서버(200)는, 입출차 카메라(161)에서 촬영된 영상을 적어도 2 영역 이상으로 구분하고, 촬영된 영상의 제 1 영역 영상(A1)을 분석하여 주차장에 진입하는 차량의 전면 번호판 번호를 인식하고, 촬영된 영상의 제 2 영역 영상(A4)을 분석하여 주차장에 진입하는 차량의 후면 번호판 번호를 인식할 수 있다.6, the parking lot management server 200 divides an image photographed by the input / output camera 161 into at least two areas, analyzes the first area image A1 of the photographed image, The front license plate number of the entering vehicle is recognized and the rear license plate number of the vehicle entering the parking lot can be recognized by analyzing the second area image A4 of the photographed image.

그리고, 주차장 관리 서버(200)는, 전면 번호판 번호 및 후면 번호판 번호 불일치시 게이트(400)를 동작시켜 주차장 입구를 폐쇄하도록 제어할 수 있다. The parking lot management server 200 can control to close the parking lot entrance by operating the gate 400 when the front license plate number and the rear license plate number do not match.

다른 실시예에서, 주차장 관리 서버(200)는, 입출차 카메라(161)에서 촬영된 영상을 적어도 2 영역 이상으로 구분하고, 촬영된 영상의 제 1 영역 영상(A1)을 통해 주차장에 진입하는 차량의 전면 번호판 번호를 인식하여, 인식된 번호 차량의 주차장 입고 시간을 저장할 수 있다. In another embodiment, the parking lot management server 200 divides the image photographed by the entrance / exit camera 161 into at least two areas and enters the parking lot through the first area image A1 of the photographed image And recognizes the number of the front number of the vehicle, and stores the parking lot arrival time of the recognized number vehicle.

그리고 주차장 관리 서버(200)는, 촬영된 영상의 제 2 영역 영상(A4)을 분석하여 주차장을 출고하는 차량의 후면 번호판 번호를 인식하여, 인식된 번호 차량의 주차장 출고 시간을 파악할 수 있다. Then, the parking lot management server 200 can recognize the rear license plate number of the vehicle that leaves the parking lot by analyzing the second area image A4 of the photographed image, and can grasp the parking lot leaving time of the recognized numbered vehicle.

주차장 관리 서버(200)는, 차량의 입출고 시간에 기초하여 요금을 정산하고, 요금 정산부(300)를 통해 차량에 주차요금을 부과할 수 있다. The parking lot management server 200 can charge a fee based on the time of entry and exit of the vehicle, and charge a parking fee to the vehicle through the charge settlement unit 300.

또한, 주차장 관리 서버(200)는, 주차장을 복수의 주차영역으로 구획하고, 각각의 교차로에 배치된 교차로 카메라(165)에서 촬영된 영상을 적어도 2 영역 이상으로 구분할 수 있다.Further, the parking lot management server 200 can divide the parking lot into a plurality of parking areas, and divide the image photographed by the intersection camera 165 disposed at each intersection into at least two areas.

그리고 촬영된 영상의 일측 영역 영상을 분석하여, 특정 주차영역에 진입하는 차량을 카운트 하고, 촬영된 영상의 타측 영역의 영상을 분석하여, 특정 주차영역을 벗어난 차량을 카운트 하여 복수의 주차영역의 주차상황을 판단할 수 있다. 그리고 주차장 관리 서버(200)는, 복수의 주차영역의 주차상황에 기초하여 차량이 빈 주자공간으로 이동할 방향을 산출하고, 주차 안내 상황판(500)의 차량 이동방향 안내판(530)을 제어하여, 차량의 이동방향 안내를 표시하도록 제어할 수 있다. 자세히, 주차 안내 상황판(500)은, 주차장 교차로 주변에 배치되어, 차량이 교차로에서 이동할 방향을 표시할 수 있다. Then, the image of one side region of the photographed image is analyzed to count the vehicles entering the specific parking region, and the image of the other side region of the photographed image is analyzed to count the vehicles out of the specific parking region, The situation can be judged. Then, the parking lot management server 200 calculates the direction in which the vehicle moves to the empty runner space based on the parking situation of the plurality of parking areas, and controls the vehicle moving direction guide plate 530 of the parking information situation board 500, So as to display the guidance of the moving direction of the vehicle. More specifically, the parking guide board 500 is disposed around the parking lot intersection, and can display the direction in which the vehicle will move in the intersection.

이러한 교차로 카메라(165)는, 주차영역의 주차제한표지를 인식하고 주차제한표지가 표시된 주차영역의 수를 카운트하여, 주차 안내 상황판(500)에 표시할 수도 있다. The intersection camera 165 may recognize the parking restriction mark in the parking area and count the number of parking areas in which the parking restriction mark is displayed and display it on the parking information situation board 500. [

자세히, 주차장 관리 서버(200)는, 교차로 카메라(165)에서 촬영된 영상에서 도 5에 표시된 여성 주차가능표지(O1), 장애인 주차가능표지(O2)와 같은 주차제한표지를 이미지 프로세싱을 통해 추출할 수 있다. 이후, 주차장 관리 서버(200)는, 추출된 이미지를 인터넷을 통한 이미지 검색 또는 분석하여, 해당 주차영역의 주차제한 요인을 판단할 수 있다. More specifically, the parking lot management server 200 extracts a parking restriction mark such as the female parking permission mark O1 and the disabled parking mark O2 shown in FIG. 5 from the image photographed by the intersection camera 165 through image processing can do. Thereafter, the parking lot management server 200 can search or analyze an image through the Internet to determine the parking restriction factor of the corresponding parking area.

이후, 주차장 관리 서버(200)는, 주차제한 조건을 같은 주차영역 중 주차 가능한 주차영역의 수를 카운팅할 수 있고, 카운팅한 수를 주차안내 상황판(500)에 표시하여, 장애인이나 여성 운전자의 편의를 향상시킬 수 있다. Thereafter, the parking lot management server 200 can count the number of parking areas that can be parked in the same parking area, and display the counted number in the parking information board 500 to make it easier for the disabled or female driver Can be improved.

예를 들어, 주차장 관리 서버(200)는, 주차장 카메라에서 촬영된 영상들을 종합하여, 전체 주차장에서 장애인만 주차 가능한 빈 주차공간을 카운팅 하고, 일반 주차가능공간의 수와 함께 장애인 주차가능공간의 수를 표시하도록 주차안내 상황판(500)를 제어할 수 있다. For example, the parking lot management server 200 counts empty parking spaces that can be parked only by persons with disabilities in the entire parking lot, integrates the images photographed by the parking lot camera, and displays the number of available parking spaces It is possible to control the parking guide information board 500 to display the parking guide information board 500. [

도 7을 참조하면, 소정의 층의 주차장에는, 층 입구 주변 주차장 천장에 배치되는 층별 카메라(163)와, 차도가 교차되는 교차로 측 주차장 천장에 배치되는 교차로 카메라(165)와, 층별 주차 상황판(510)와, 차량 이동방향 안내판(530)이 배치될 수 있다. 7, the parking lot of the predetermined layer includes a floor camera 163 disposed on the ceiling of the parking lot adjacent to the floor entrance, an intersection camera 165 disposed on the intersection parking side ceiling where the roadway intersects, 510, and a vehicle moving direction guide plate 530 can be disposed.

자세히, 주차장의 층간 이동경로인 램프 구간의 주차장 천창에는, 층별 입구 카메라(163)가 배치될 수 있다. More specifically, the floor entrance camera 163 may be disposed in the parking space of the lamp section, which is the inter-layer movement path of the parking lot.

도 8을 참조하면, 주차장 관리 서버(200)는, 층별 입구 카메라(163)에서 촬영된 영상을 적어도 3 영역 이상으로 구분하고, 촬영된 영상의 제 1 영역 영상(B1)으로부터 층별 입구 카메라(163)가 배치된 주차장 층에 진입한 차량을 카운트 할 수 있다. 그리고 주차장 관리 서버(200)는, 촬영된 영상의 제 2 영역의 영상(B2)으로부터 층을 벗어난 차량을 카운트 할 수 있다. 제 3 영역의 영상(B3)으로부터 층에서 주차장 안쪽으로 진입한 차량을 카운트하여 층의 주차장 상황을 정확하게 판단할 수 있다. 8, the parking lot management server 200 divides an image photographed by the layer-by-layer entrance camera 163 into at least three areas and extracts the first area image B1 of the photographed image from the first entrance image camera 163 ) Can be counted. Then, the parking lot management server 200 can count the vehicles out of the layer from the image B2 of the second area of the photographed image. It is possible to accurately judge the parking situation of the floor by counting the vehicles entering the parking lot from the floor from the image B3 of the third area.

즉, 주차장 관리 서버(200)는, 하나의 층별 입구 카메라(163)를 통해 차량의 동선을 정확하게 파악하여, 차량 진입/출차 차량 카운트를 정확하게 하고, 차량의 주차장 내측으로 이동하였는지 여부를 파악할 수 있다. That is, the parking lot management server 200 can grasp accurately the moving line of the vehicle through one floor entrance camera 163, correct the vehicle entry / departure vehicle count, and determine whether the vehicle has moved to the inside of the parking lot of the vehicle .

그리고 주차장 관리 서버(200)는, 층의 주차장 상황을 표시하도록 층별 주차 상황판(510)을 제어하여, 차량 운전자가 주차장 층에 진입할지 여부를 알려줄 수 있다. Then, the parking lot management server 200 can control the floor parking situation board 510 to indicate the parking lot situation of the floor, and inform the driver of the vehicle whether or not to enter the parking lot floor.

즉, 주차장 관리 서버(200)는, 하나의 층별 입구 카메라(163)가 촬영한 영상의 영역을 분할하고 분석하여, 차량의 동선을 정확하게 추적할 수 있다. That is, the parking lot management server 200 can accurately track the moving line of the vehicle by dividing and analyzing the region of the image photographed by the single entry camera 163.

그리고 촬영된 영상의 제 1 영역 영상(B1)을 분석하여, 특정 주차영역에 진입하는 차량을 카운트 하고, 촬영된 영상의 제 2 영역의 영상(B2)을 분석하여, 특정 주차영역을 벗어난 차량을 카운트 하여 복수의 주차영역의 주차상황을 판단할 수 있다. 또한, 주차장 관리 서버(200)는, 촬영된 영상의 제 3 영역 영상(B3)을 분석하여, 특정 주차영역 주변의 다른 주차영역에 진입하는 차량을 카운트 할 수 있다. Then, the first area image B1 of the photographed image is analyzed to count the vehicles entering the specific parking area, the image B2 of the second area of the photographed image is analyzed, and the vehicle outside the specific parking area is analyzed The parking status of a plurality of parking areas can be determined. The parking lot management server 200 can also analyze the third area image B3 of the photographed image and count the vehicles entering other parking areas around the specific parking area.

그리고 주차장 관리 서버(200)는, 복수의 주차영역의 주차상황에 기초하여 차량이 빈 주자공간으로 이동할 방향을 산출하고, 주차 안내 상황판(500)의 차량 이동방향 안내판(530)을 제어하여, 차량의 이동방향 안내를 표시하도록 제어할 수 있다. 자세히, 주차 안내 상황판(500)은, 주차장 교차로 주변에 배치되어, 차량이 교차로에서 이동할 방향을 표시할 수 있다. Then, the parking lot management server 200 calculates the direction in which the vehicle moves to the empty runner space based on the parking situation of the plurality of parking areas, and controls the vehicle moving direction guide plate 530 of the parking information situation board 500, So as to display the guidance of the moving direction of the vehicle. More specifically, the parking guide board 500 is disposed around the parking lot intersection, and can display the direction in which the vehicle will move in the intersection.

즉, 실시예에 따른 주차장 관리 시스템은, 주차장 층 입구에 배치된 하나의 층별 입구 카메라(163)와, 교차로에 배치된 교차로 카메라(165)를 통해 주차장 층 내에 있는 차량들의 동선을 정확하게 추적하고, 차량들이 원활하게 주차장을 이용할 수 있도록 이동 방향을 안내함으로써, 주차장 이용 편의를 향상시킬 수 있다. That is, the parking lot management system according to the embodiment accurately tracks the moving lines of the vehicles in the parking lot layer through the single-layer entrance camera 163 disposed at the entrance of the parking lot layer and the intersection camera 165 disposed at the intersection, By guiding the moving direction so that the vehicles can use the parking lot smoothly, the parking lot usability can be improved.

한편, 주차장 관리 서버(200)는, 게이트(400) 부근에 배치되어, 주차장에 진입하는 차량의 속도를 측정하는 거리 센서(700)를 더 포함할 수 있다. On the other hand, the parking lot management server 200 may further include a distance sensor 700 disposed near the gate 400 and measuring the speed of the vehicle entering the parking lot.

그리고 주차장 관리 서버(200)는, 거리 센서(700)에서 획득한 주차장 진입 차량의 속도에 기초하여 입출차 카메라(161)을 동작시킬 수 있다. 즉, 저전력의 거리 센서(700)를 이용하여, 입출차 카메라(161)의 동작시간 및 영상 처리 부하를 최소화할 수 있다. The parking lot management server 200 can operate the input / output camera 161 based on the speed of the parking lot entry vehicle obtained by the distance sensor 700. [ That is, by using the low-power distance sensor 700, the operation time and the image processing load of the input / output camera 161 can be minimized.

자세히, 주차장 관리 서버(200)는, 거리 센서(700)에서 획득한 주차장 진입 차량의 속도에 기초하여 차량의 전면 번호판 인식을 위한 제 1 영상을 촬영하도록 입출차 카메라(161)를 제어하고, 소정의 시간 이후 차량의 후면 번호판 인식을 위한 제 2 영상을 촬영하도록 입출차 카메라(161)를 제어할 수 있다. More specifically, the parking lot management server 200 controls the entrance / exit camera 161 to photograph a first image for recognizing the front license plate of the vehicle based on the speed of the parking entrance vehicle acquired by the distance sensor 700, It is possible to control the input / output camera 161 to photograph the second image for recognizing the rear license plate of the vehicle after the time of the second time.

또한, 주차장 관리 서버(200)는, 차량의 속도가 기 설정된 제 1 속도 이상이면 게이트(400)의 셔터를 온 하여 주차장 입구를 폐쇄할 수 있다. 즉, 고속으로 주행하는 차량의 번호판 인식이 어려우므로, 주차장 입구를 폐쇄하여 차량의 주행을 저지할 수 있다. In addition, the parking lot management server 200 can turn on the shutter of the gate 400 to close the parking lot entrance if the speed of the vehicle is equal to or higher than the predetermined first speed. That is, since it is difficult to recognize the license plate of the vehicle traveling at a high speed, the parking lot entrance can be closed to prevent the vehicle from running.

또한, 주차장 관리 서버(200)는, 차량의 속도가 제 1 속도 보다 큰 제 2 속도 이상이면 게이트(400) 셔터를 오프하여 주차장 입구를 개방할 수 있다. 즉, 너무 고속으로 주행하는 차량의 경우, 셔터가 파손될 수 있으므로, 이를 방지하기 위하여, 셔터를 오프할 수 있다.In addition, the parking lot management server 200 can turn off the gate 400 shutter to open the parking lot entrance if the speed of the vehicle is equal to or higher than the first speed. That is, in the case of a vehicle traveling at a high speed, the shutter may be broken. Therefore, in order to prevent this, the shutter can be turned off.

한편, 본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의해 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행할 수 있다. 그리고, 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있다.The present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and may be implemented in the form of a carrier wave (for example, transmission via the Internet) . The computer readable recording medium may also be distributed over a networked computer system so that computer readable code can be stored and executed in a distributed manner. In addition, functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers of the technical field to which the present invention belongs.

이상에서 설명한 본 발명의 상세한 설명에서는 본 발명의 바람직한 실시 예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자 또는 해당 기술분야에 통상의 지식을 갖는 자라면 후술할 특허청구범위에 기재된 본 발명의 사상 및 기술 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다. 따라서, 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허청구범위에 의해 정하여져야만 할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is clearly understood that the same is by way of illustration and example only and is not to be taken by way of limitation, It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention. Therefore, the technical scope of the present invention should not be limited to the contents described in the detailed description of the specification, but should be defined by the claims.

Claims

A camera unit including a plurality of omnidirectional cameras attached to a ceiling to take an omnidirectional image; And
And a processor for dividing the image captured by the camera unit into at least two areas and analyzing different areas of the image to obtain different vehicle information included in the photographed image,
Wherein the camera unit includes an entrance / exit camera disposed at a parking entrance,
The processor comprising:
Controlling the incoming and outgoing camera to acquire a first image, controlling the incoming and outgoing camera again after a predetermined time, acquiring a second image,
A first image and a second image of the input / output camera are divided into four parts based on front, rear, left and right directions, a front image of the vehicle is analyzed by analyzing a divided front image of the first image, The rear license plate number of the vehicle is analyzed,
And recognizing the remaining number of the license plate number of the vehicle by analyzing the rear image of the second image when the part of the license plate number of the vehicle is recognized by analyzing the forward image of the first image,
If the vehicle recognizes only a part of the license plate number of the vehicle in the first image and the second image, the moving direction of the vehicle is tracked based on the left image or the right image of the second image of the input / output camera, And detects the front license plate number of the vehicle and the rear license plate of the vehicle through the image of the detected omnidirectional camera
Vehicle recognition device.

The method according to claim 1,
The vehicle information includes:
At least one of at least one of a front license plate number of the vehicle, a rear license plate number of the vehicle, a driving direction of the vehicle, a parking lot entry state of the vehicle,
Vehicle recognition device.

The method according to claim 1,
The processor comprising:
An image taken by the omnidirectional camera is divided into four parts based on the front, rear, left and right directions,
Each of the regions of the divided image is matched with at least one piece of information of the vehicle
Vehicle recognition device.

delete

3. The method of claim 2,
Wherein the camera section includes a floor entrance camera disposed at a floor entrance of a car park,
The processor comprising:
The floor entrance camera image is divided into at least three sections with respect to the front, rear, and side directions,
The divided forward image is analyzed to obtain vehicle information that has entered the parking lot,
The divided rear images are analyzed to obtain vehicle information from the parking lot,
The divided left image is analyzed to obtain the vehicle information that has entered the parking lot of the floor
Vehicle recognition device.

3. The method of claim 2,
Wherein the camera unit includes an intersection camera disposed at an intersection of a parking lot,
The processor comprising:
An image of the intersection camera is divided into at least two images,
The divided images are analyzed to track the moving lines of the vehicle
Vehicle recognition device.