KR102162130B1 - 단일카메라를 이용한 불법주정차 단속시스템 - Google Patents

Abstract

본 발명은 단일카메라를 이용하여 불법주정차 차량에 대한 주변이미지 및 번호판이미지를 획득 가능하도록 구성됨과 동시에 주변이미지를 분석하여 주변이미지 내에서 사생활침해의 위험도가 높은 픽셀영역을 선별한 후, 선별된 픽셀영역을 블러(blur) 처리하여 보호이미지를 생성하도록 구성됨으로써 불법주정차 차량의 증거자료를 정확하게 검출할 수 있으며, 사생활침해로 인한 민원을 효과적으로 방지할 수 있으며, 또한 본 발명에 의하면 진입차량 또는 불법주정차 차량 감지 시, 해당 차량의 번호인식이 이루어지지 않는 경우, 차량번호 추적부(41)가 해당 차량의 영상을 역재생하여 차량번호를 인식하도록 구성됨으로써 단일카메라를 이용하여 동일 조건 대비 불법주정차 차량의 단속 정확성 및 신뢰도를 극대화시킬 수 있으며, 설치 및 운영비용을 절감시킬 수 있는 불법부정차 단속시스템에 관한 것이다.

Description

단일카메라를 이용한 불법주정차 단속시스템{Enforcement system of illegal parking using single camera}

본 발명은 단일카메라를 이용한 불법주정차 단속시스템에 관한 것으로서, 상세하게로는 단일카메라를 이용하여 동일 조건 대비 불법주정차 차량의 단속 정확성 및 신뢰도를 극대화시킴과 동시에 불법주정차 차량의 증거자료를 정확하게 검출할 수 있으며, 사생활침해로 인한 민원을 효과적으로 방지할 수 있는 단일카메라를 이용한 불법주정차 단속시스템에 관한 것이다.

최근 들어, 한정된 도로에 반하여 차량 보급률이 기하급수적으로 증가함에 따라 교통정체가 사회적인 문제로 대두되고 있고, 특히 교통량이 많은 도로에서의 불법주정차는 실질적으로 도로의 차선수를 줄여 차량의 흐름을 방해할 뿐만 아니라 교통사고를 유발할 수 있기 때문에 불법주정차 차량에 대한 철저한 단속이 요구되고 있다.

이에 따라 지차제 및 관련 단체에서는 단속원을 수시로 배치하여 불법주정차의 계도 및 단속을 병행하고 있으나, 이러한 방식은 인력소모 및 비용이 클 뿐만 아니라 단속원의 배치 여부에 따라 단속율의 차이가 현격한 구조적 한계를 갖는다.

이러한 문제점을 해결하기 위하여, 불법주정차 단속구역(S)에 카메라를 설치하여 불법주정차 차량이 감지되면 촬영을 수행하여 영상을 획득하며, 획득된 영상을 기반으로 차량번호를 인식하여 해당 차량 운전자에게 과태료를 부과하는 불법주정차 단속시스템에 대한 다양한 연구가 진행되고 있다.

국내등록특허 제10-1698026호(발명의 명칭 : 이동차량 추적에 의한 CCTV 불법주정차 단속시스템)에는 차량이 주정차 금지구역에 진입하기 전부터 차량번호와 연계하여 차량의 이동, 주정차, 진출까지 영상처리를 하여 인접 차량이나 장애물에 가려 사각지대에 주정차되어 있는 차량에 대하여도 단속할 수 있는 CCTV 불법주정차 단속시스템이 개시되어 있다.

그러나 상기 CCTV 불법주정차 단속시스템은 원거리 다차선의 차량번호를 인식할 수 있도록 차량번호판을 촬영하여 차량번호판 영상을 전송하는 고화질 차량번호인식용 카메라와, 주차감시구역내로 진입, 이동, 진출하는 차량을 추적할 수 있도록 차량을 촬영하여 차량 영상을 전송하는 전방위 추적카메라와, 팬,틸트 및 줌 기능이 구비되어 불법주정차 차량을 단속하기 위한 단속 영상을 전송하는 단속카메라를 포함하기 때문에 고가의 카메라들이 복수대가 설치되어야 함에 따라 설치 및 운영비용이 증가할 뿐만 아니라 서로 다른 카메라들에서 촬영된 영상들의 송수신, 매칭 및 분석으로 인해 연산처리 시간이 지체되며 연산처리량이 증가하는 단점을 갖는다.

이에 따라 단일 카메라를 이용하여 불법주정차 차량을 단속하기 위한 다양한 연구가 진행되고 있다.

도 1은 국내등록특허 제10-1939202호(발명의 명칭 CCTV를 이용한 불법주정차 차량의 감시 방법)에 개시된 불법주정차 차량의 감시 방법을 나타내는 순서도이다.

도 1의 불법주정차 차량의 감시 방법(이하 종래기술이라고 함)(S100)은 현장 제어기가 CCTV의 제1줌 상태에서 촬영된 도로의 영상에서 감시 구역을 설정하는 단계(S101)와, 감시 구역에 차량이 진입여부를 판단하는 단계(S102)와, 감시 구역에 차량이 진입할 경우, 제1줌 상태에서 촬영된 CCTV의 영상을 제1정지 영상으로 저장하는 단계(S103)와, 제1정지 영상에서 차량의 번호판 영역을 추출하는 단계(S104)와, 추출된 번호판 영역이 영상의 중앙 영역에 놓이도록 CCTV를 제1줌 상태에서 제2줌 상태로 줌인하는 단계(S105)와, 제2줌 상태에서 촬영된 CCTV의 영상을 제2정지 영상으로 저장하는 단계(S106)와, 제2줌 상태에서 촬영된 CCTV의 영상으로부터 차량의 번호판 영역의 영상 정보를 추출하는 단계(S107)와, 추출된 차량의 번호판 영역의 영상 정보에 대응하는 영상이 중앙 영역에 놓이도록 CCTV를 제2줌 상태에서 제3줌 상태로 줌아웃하는 단계(S108)와, 제3줌 상태에서 촬영된 CCTV의 영상을 제3정지 영상으로 저장하는 단계(S109)로 이루어진다.

또한 도면에는 도시되지 않았으나, 종래기술(S100)은 차량의 주정차시간이 기준시간을 경과하면, 전술하였던 바와 같이, 제1 줌 상태의 제4정지영상, 제2 줌 상태의 제5정지영상, 제3 줌 상태의 제6 정지영상을 획득하게 된다.

이와 같이 구성되는 종래기술(S100)은 단일 카메라를 이용하여 1)감시구역에 차량이 진입하면, 제2 줌 상태로 줌인(Zoom-in)하여 진입차량의 확대영상인 제2정지영상을 획득한 후, 제3 줌 상태로 줌아웃(Zoom-out)하여 진입차량을 중심으로 한 주변영상인 제3정지영상을 획득할 수 있으며, 2)진입차량이 불법주정차 차량으로 판단되면, 제2 줌 상태로 줌인(Zoom-in)하여 불법주정차 차량의 제5정지영상을 획득한 후, 제3 줌 상태로 줌아웃(Zoom-out)하여 불법주정차 차량을 중심으로 한 주변영상인 제6정지영상을 획득하도록 구성됨으로써 진입차량의 확대영상 및 주변영상과, 불법주정차 차량의 확대영상 및 주변영상의 획득이 가능하여 단일카메라를 이용하여 불법주정차 차량을 단속할 수 있을 뿐만 아니라 증거자료를 정확하게 수집할 수 있는 장점을 갖는다.

그러나 이러한 종래기술(S100)과 같이 단일 카메라를 이용하여 불법주정차 차량을 단속하는 시스템에서는, 진입차량 또는 불법주정차 차량이 다른 차량 또는 구조물에 의해 가려지는 위치인 사각지대에 위치하는 경우, 해당 차량의 차량번호를 인식하지 못하는 현상이 발생하더라도, 이에 대한 대처가 전혀 이루어지지 못하기 때문에 단속 정확성 및 신뢰도가 떨어지는 단점을 갖는다.

이러한 문제점을 해결하기 위해서는 전술하였던 국내등록특허 제10-1698026호(발명의 명칭 : 이동차량 추적에 의한 CCTV 불법주정차 단속시스템)에 개시된 CCTV 불법주정에서와 같이 복수대의 카메라를 이용하여야만 하나, 복수대의 카메라를 이용하는 경우, 설치 및 운용비용이 증가하는 문제점이 발생한다.

또한 종래기술(S100)은 카메라가 제1, 3, 4, 6 줌 상태로 촬영할 때, 획득된 정지영상에는 해당 차량만이 촬영되는 것이 아니라, 주변객체들에 함께 촬영되게 되고, 이에 따라 보행자, 단속차량 운전자 및 동승자, 타차량 운전자, 타차량 번호판 등과 같이 사생활 침해 위험이 높은 피사체도 함께 노출되기 때문에 이로 인한 민원이 빈번하게 발생하는 단점을 갖는다.

본 발명은 이러한 문제를 해결하기 위한 것으로, 본 발명의 해결과제는 단일카메라를 이용하여 불법주정차 차량에 대한 주변이미지 및 번호판이미지를 획득 가능하도록 구성됨과 동시에 주변이미지를 분석하여 주변이미지 내에서 사생활침해의 위험도가 높은 픽셀영역을 선별한 후, 선별된 픽셀영역을 블러(blur) 처리하여 보호이미지를 생성하도록 구성됨으로써 불법주정차 차량의 증거자료를 정확하게 검출할 수 있으며, 사생활침해로 인한 민원을 효과적으로 방지할 수 있는 불법주정차 단속시스템을 제공하기 위한 것이다.

또한 본 발명의 다른 해결과제는 진입차량 또는 불법주정차 차량 감지 시, 해당 차량의 번호인식이 이루어지지 않는 경우, 차량번호 추적부(41)가 해당 차량의 영상을 역재생하여 차량번호를 인식하도록 구성됨으로써 단일카메라를 이용하여 동일 조건 대비 불법주정차 차량의 단속 정확성 및 신뢰도를 극대화시킬 수 있으며, 설치 및 운영비용을 절감시킬 수 있는 불법주정차 단속시스템을 제공하기 위한 것이다.

상기 과제를 해결하기 위한 본 발명의 해결수단은 PTZ(Pan-Tilt-Zoom) 제어 가능하도록 설치되어 프레임 내에 기 설정된 불법주정차 영역(S)이 포함되도록 줌-아웃(Zoom-Out) 상태로 촬영하여 주변영상을 획득하는 카메라와, 상기 카메라에 의해 획득된 주변영상을 분석하여 불법주정차 차량을 검출하는 컨트롤러로 구성되는 적어도 하나 이상의 촬영부를 포함하는 불법주정차 단속시스템에 있어서: 상기 컨트롤러는 상기 불법주정차 영역(S)으로 진입한 진입차량 또는 불법주정차 차량이 검출될 때, 상기 카메라에 의해 획득된 주변영상의 스틸이미지인 주변이미지를 생성한 후, 생성된 주변이미지로부터 사생활 침해영역이 높은 영역을 블러(Blur) 처리하여 보호이미지를 생성하고, 상기 카메라로부터 입력된 주변영상을 분석하여 상기 불법주정차 영역(S)으로 차량이 진입하였을 때, 진입차량의 차량번호판을 확대 촬영하도록 상기 카메라를 제어한 후, 상기 카메라로부터 입력된 번호판영상을 분석하여 차량번호를 인식하며, 진입차량의 차량번호 및 진입시간을 포함하는 제1 단속정보를 생성하고, 상기 컨트롤러는 메모리; 상기 카메라로부터 입력된 주변영상을 분석하는 영상분석부; 상기 영상분석부에 의해 검출된 분석데이터를 활용하여 상기 불법주정차 영역(S)으로 차량이 진입하였는지를 판별하는 제1 판단부; 상기 제1 판단부에 의해 상기 불법주정차 영역으로 차량이 진입하였다고 판단될 때 실행되는 제1 단속정보 처리부; 제어부를 더 포함하고, 상기 제1 단속정보 처리부는 상기 제1 판단부에 의해 상기 불법주정차 영역(S)으로 진입한 진입차량이 신규 진입차량인지 아닌지를 판단하는 신규 진입차량 판별모듈; 상기 신규 진입차량 판별모듈에 의해 진입차량이 신규 진입차량이라고 판단될 때 실행되며, 해당 신규 진입차량의 경과시간(T)을 측정하는 타이머 구동모듈; 상기 카메라가 진입차량의 차량번호판을 확대 촬영할 수 있는 PTZ 제어신호를 포함하는 줌인 트리거신호를 생성하는 줌인 트리거신호 생성모듈; 상기 카메라로부터 입력 받은 진입차량의 차량번호판을 확대 촬영한 제1 번호판영상을 분석하여 차량번호를 인식하는 번호인식모듈; 상기 제1 번호판영상의 스틸이미지인 제1 번호판이미지를 생성하는 제1 번호판이미지 생성모듈; 상기 카메라가 프레임 내에 상기 불법주정차 영역(S)이 포함되도록 줌-아웃(Zoom-Out) 상태로 광역 촬영하도록 하기 위한 PTZ 제어신호를 포함하는 줌아웃 트리거신호를 생성하는 줌아웃 트리거신호 생성모듈; 상기 카메라로부터 입력된 주변영상의 스틸이미지인 제1 주변이미지를 생성하는 제1 주변이미지 생성모듈; 상기 제1 주변이미지 생성모듈에 의해 생성된 제1 주변이미지로부터 사생활 침해영역이 높은 영역을 블러(Blur) 처리하여 제1 보호이미지를 생성하는 제1 영상보정모듈; 진입차량의 진입시간 및 차량번호를 포함하는 제1 단속정보를 생성하는 제1 단속정보 생성모듈을 포함하고, 상기 제어부는 상기 줌인 트리거신호 생성모듈 또는 상기 줌아웃 트리거신호 생성모듈에 의해 생성된 줌인 트리거신호 또는 줌아웃 트리거신호를 상기 카메라로 출력하고, 상기 카메라의 줌인 촬영에 의해 획득된 제1 번호판영상을 상기 번호인식모듈로 입력하고, 상기 컨트롤러는 상기 신규 진입차량 판별모듈에 의해 진입차량이 신규 진입차량이 아니라고 판단될 때 실행되며, 해당 진입차량의 움직임을 추적함과 동시에 해당 진입차량의 경과시간(t)을 측정하는 객체추적 및 경과시간 카운팅모듈; 상기 객체추적 및 경과시간 카운팅모듈에 의해 측정된 경과시간(t)을 기 설정된 임계시간(t’)과 비교하며, 만약 경과시간(t)이 임계시간(t’)을 초과하면, 해당 진입차량을 불법주정차 차량으로 판단하는 제2 판단부; 상기 제2 판단부에 의해 불법주정차 차량이 검출되었다고 판단될 때 실행되는 제2 단속정보 처리부를 더 포함하고, 상기 제2 단속정보 처리부는 상기 카메라가 불법주정차 차량의 차량번호판을 확대 촬영할 수 있는 PTZ 제어신호를 포함하는 줌인 트리거신호를 생성하는 줌인 트리거신호 생성모듈; 상기 카메라로부터 입력 받은 불법주정차 차량의 차량번호판을 확대 촬영한 제2 번호판영상을 분석하여 차량번호를 인식하는 제2 번호인식모듈; 상기 제2 번호판영상의 스틸이미지인 제2 번호판이미지를 생성하는 제2 번호판이미지 생성모듈; 상기 카메라가 프레임 내에 상기 불법주정차 영역(S)이 포함되도록 줌-아웃(Zoom-Out) 상태로 광역 촬영하도록 하기 위한 PTZ 제어신호를 포함하는 줌아웃 트리거신호를 생성하는 줌아웃 트리거신호 생성모듈; 상기 카메라로부터 입력된 주변영상의 스틸이미지인 제2 주변이미지를 생성하는 제2 주변이미지 생성모듈; 상기 제2 주변이미지 생성모듈에 의해 생성된 제2 주변이미지로부터 사생활 침해영역이 높은 영역을 블러(Blur) 처리하여 제2 보호이미지를 생성하는 제2 영상보정모듈; 불법주정차 차량의 확정시간 및 차량번호를 포함하는 제2 단속정보를 생성하는 제2 단속정보 생성모듈을 포함하고, 상기 제1 단속정보 처리부는 상기 번호인식모듈에 의해 진입차량의 차량번호가 정상적으로 인식되었는지 여부를 판단하는 번호인식여부 판단모듈을 포함하고, 상기 제2 단속정보 처리부는 상기 제2 번호인식모듈에 의해 불법주정차 차량의 차량번호가 정상적으로 인식되었는지 여부를 판단하는 제2 번호인식여부 판단모듈을 포함하고, 상기 컨트롤러는 상기 번호인식여부 판단모듈 또는 상기 제2 번호인식여부 판단모듈에서 번호인식이 정상적으로 이루어지지 않았다고 판단될 때 실행되는 차량번호 추적부를 더 포함하고, 상기 차량번호 추적부는 상기 메모리에 저장된 영상들 중 현재 시점으로부터 기 설정된 임계범위 이전까지의 영상을 상기 메모리로부터 추출하는 임계범위 영상추출모듈; 상기 임계범위 영상추출모듈에 의해 추출된 영상을 현재 시점을 기준으로 역방향으로 재생시키는 현재시점 기준 역재생 모듈; 상기 현재시점 기준 역재생 모듈에 의해 역방향 재생되는 영상을 분석하여 차량번호가 인식되지 않은 차량인 인식대상의 움직임을 추적하는 인식대상 추적모듈; 상기 인식대상 추적모듈에 의해 추적된 인식대상의 차량번호를 인식하는 인식대상 번호인식모듈을 더 포함하고, 상기 제어부는 1)상기 인식대상 번호인식모듈이 인식대상의 차량번호를 인식하는데 실패하면, 상기 현재시점 기준 역재생 모듈을 반복 실행하되, 2)상기 인식대상 번호인식모듈에 의해 차량번호가 인식되면 인식된 차량번호를, 차량번호를 인식하지 못한 번호인식모듈 또는 제2 번호인식모듈로 입력하는 것이다.

삭제

삭제

삭제

또한 본 발명에서 상기 불법주정차 단속시스템은 중앙관제서버를 더 포함하고, 상기 컨트롤러는 상기 카메라로부터 입력된 영상을 상기 메모리에 임시 저장함과 동시에 상기 중앙관제서버로 전송하고, 상기 중앙관제서버는 상기 컨트롤러로부터 전송받은 영상을 저장 및 모니터링 하고, 상기 컨트롤러는 상기 제2 단속정보 처리부에 의해 제2 단속정보가 생성될 때 실행되며, 불법주정차 차량의 제1 단속정보 및 제2 단속정보를 활용하여 해당 불법주정차 차량의 진입시간, 확정시간 및 차량번호를 포함하는 최종 단속정보를 생성하는 최종 단속정보 생성부; 상기 최종 단속정보 생성부에 의해 생성된 최종 단속정보와, 해당 불법주정차 차량의 제1 번호판이미지, 제1 보호이미지, 제2 번호판이미지 및 제2 보호이미지를 매칭시켜 상기 중앙관제서버로 전송하고, 상기 중앙관제서버는 상기 컨트롤러로부터 최종 단속정보를 포함하는 매칭된 데이터를 전송받으면, 불법주정차에 따른 후속절차를 수행하는 것이 바람직하다.

삭제

상기 과제와 해결수단을 갖는 본 발명에 따르면 단일카메라를 이용하여 불법주정차 차량에 대한 주변이미지 및 번호판이미지를 획득 가능하도록 구성됨과 동시에 주변이미지를 분석하여 주변이미지 내에서 사생활침해의 위험도가 높은 픽셀영역을 선별한 후, 선별된 픽셀영역을 블러(blur) 처리하여 보호이미지를 생성하도록 구성됨으로써 불법주정차 차량의 증거자료를 정확하게 검출할 수 있으며, 사생활침해로 인한 민원을 효과적으로 방지할 수 있게 된다.

또한 본 발명에 의하면 진입차량 또는 불법주정차 차량 감지 시, 해당 차량의 번호인식이 이루어지지 않는 경우, 차량번호 추적부(41)가 해당 차량의 영상을 역재생하여 차량번호를 인식하도록 구성됨으로써 단일카메라를 이용하여 동일 조건 대비 불법주정차 차량의 단속 정확성 및 신뢰도를 극대화시킬 수 있으며, 설치 및 운영비용을 절감시킬 수 있다.

도 1은 국내등록특허 제10-1939202호(발명의 명칭 CCTV를 이용한 불법주정차 차량의 감시 방법)에 개시된 불법주정차 차량의 감시 방법을 나타내는 순서도이다.
도 2는 본 발명의 일실시예인 불법주정차 단속시스템을 나타내는 구성도이다.
도 3은 도 2의 촬영부를 설명하기 위한 관계도이다.
도 4는 도 2의 컨트롤러를 나타내는 블록도이다.
도 5는 도 4의 영상 분석부 및 제1 판단부를 설명하기 위한 예시도이다.
도 6은 도 4의 제1 단속정보 처리부를 나타내는 블록도이다.
도 7은 도 5의 제1 주변이미지 생성모듈에 의해 생성되는 제1 주변이미지를 나타내는 예시도이다.
도 8은 도 6의 제1 영상보정모듈에 의해 생성되는 제1 보호이미지를 나타내는 예시도이다.
도 9는 도 6의 제1 번호판이미지 생성모듈에 의해 생성되는 제1 번호판이미지를 나타내는 예시도이다.
도 10은 도 4의 제2 단속정보 처리부를 나타내는 블록도이다.
도 11은 도 4의 차량번호 추적부를 나타내는 블록도이다.

이하, 첨부된 도면을 참조하여 본 발명의 일실시예를 설명한다.

도 2는 본 발명의 일실시예인 불법주정차 단속시스템을 나타내는 구성도이다.

본 발명의 일실시예인 불법주정차 단속시스템(1)은 도 2에 도시된 바와 같이, 촬영부(3-1), ..., (3-N)들과, 중앙관제서버(5), 클라이언트(9), 통신망(10)으로 이루어진다.

이때 본 발명에서는 설명의 편의를 위해, 촬영부(3-1), ..., (3-N)들이 획득된 주변영상 및 번호판영상을 분석하여 불법주정차 차량을 검출 및 단속하는 것으로 예를 들어 설명하였으나, 이러한 영상분석, 불법주정차 차량 검출 및 단속정보 생성의 연산처리는 중앙관제서버(5)에서 수행되는 것으로 구성될 수 있음은 당연하다.

통신망(10)은 중앙관제서버(5) 및 촬영부(3-1), ..., (3-N)들 사이의 데이터 이동경로를 제공하며, 상세하게로는 광역통신망(WAN), 이동통신망, 유선통신망 등과 같이 공지된 다양한 통신방식이 적용될 수 있다.

클라이언트(9)는 중앙관제서버(5)에서 제공하는 관리플랫폼(8)에 연동하여 불법주정차 모니터링, 열람, 정보요청 등의 서비스를 제공하는 단말기이며, 상세하게로는 데스크탑 PC(Desk-top PC), 노트북(Note-book), 스마트폰(Smart-phone), 태블릿PC(Tablet PC) 등으로 구성될 수 있다.

도 3은 도 2의 촬영부를 설명하기 위한 관계도이다.

촬영부(3-1), ..., (3-N)들은 기 설정된 불법주정차 영역(S)들 각각에 설치된다.

또한 촬영부(3)는 도 2와 3에 도시된 바와 같이, 기 설정된 불법주정차 영역(S)을 촬영하는 카메라(301)와, 카메라(301)의 PTZ(Pan-Tilt-Zoom)를 제어하는 컨트롤러(300)로 이루어진다.

카메라(301)는 컨트롤러(300)의 제어에 따라 PTZ 제어 가능하도록 구성되며, 기 설정된 불법주정차 영역(S)을 줌인(Zoom-In) 또는 줌아웃(Zoom-Out) 촬영하여 번호판영상 또는 주변영상을 획득한다.

이때 번호판영상은 대상차량의 번호판이 확대 촬영된 영상을 의미하고, 주변영상은 프레임 내에 불법주정차 영역(S)들이 포함되도록 광역으로 촬영된 영상을 의미한다.

다시 말하면, 카메라(301)는 컨트롤러(300)의 제어에 따라, 1)평시에는 기 설정된 초점거리(FL, Focal length)로 촬영을 수행하여 불법주정차 영역(S)의 전체가 포함되도록 줌아웃(Zoom-Out) 상태로 촬영하여 주변영상을 획득하며, 2)진입차량 또는 불법주정차 차량이 검출될 때, 해당 차량의 번호판이 집중 촬영되도록 줌인(Zoom-In) 상태로 촬영을 수행하여 번호판영상을 획득하게 된다.

컨트롤러(300)는 카메라(301)의 동작을 관리 및 제어하며, 중앙관제서버(5)와 통신망(10)을 통해 데이터를 송수신한다.

또한 컨트롤러(300)는 카메라(301)의 촬영에 의해 획득된 영상(주변영상 또는 번호판영상)을 임시 저장함과 동시에 중앙관제서버(5)로 전송한다. 이때 컨트롤러(300)에서 영상을 임시 저장하는 주기는 기 설정되거나 또는 관리자에 의해 입력될 수 있다.

또한 컨트롤러(300)는 카메라(301)의 줌아웃 촬영에 의해 획득된 주변영상을 분석하여 기 설정된 불법주정차 영역(S)으로 차량이 진입한 상태인지를 판별하며, 만약 불법주정차 영역(S)으로 차량이 진입하였다고 판단될 때, 1)주변영상의 스틸이미지인 제1 주변이미지를 생성함과 동시에 2)진입차량의 경과시간(t)의 측정(카운팅)을 시작하며, 3)카메라(300)가 해당 진입차량의 차량번호판을 촬영하기 위한 줌인 트리거신호(Trigger signal)를 생성한 후, 생성된 줌인 트리거신호를 카메라(301)로 출력한다. 이때 카메라(301)는 컨트롤러(300)로부터 전송받은 줌인 트리거신호에 따라 불법주정차 영역(S)의 진입차량의 차량번호판을 줌인 촬영하여 번호판영상을 획득한 후, 획득된 번호판 영상을 컨트롤러(300)로 출력한다.

이때 차량객체의 차량번호판의 위치를 추적하여 차량번호판의 위치에 대응하여 카메라의 PTZ를 제어하는 기술 및 방법은 통상적으로 사용되는 기술 및 방법이기 때문에 상세한 설명은 생략하기로 한다.

또한 컨트롤러(300)는 제1 주변이미지가 생성되면, 기 설정된 블러-처리 알고리즘을 이용하여 제1 주변이미지에서 사생활 침해위험이 높은 영역을 검출한 후 이를 블러(Blur) 처리(가공)하여 보호이미지를 생성한다.

이때 사생활 침해위험이 높은 영역이라고 함은 진입차량 외의 다른 차량의 번호판, 진입차량의 탑승자, 주변 보행자 등과 같이 사생활 침해가 우려되는 영역을 의미한다.

즉 종래에는 불법주정차 영역(S)으로 차량이 진입할 때, 진입차량의 주변이미지를 원본 그대로 증거용으로 사용함에 따라 사생활 침해로 인한 민원이 빈번하게 발생하였으나, 본 발명에서는 제1 주변이미지를 블러 처리하여 제1 보호이미지를 생성한 후, 생성된 제1 보호이미지를 진입차량의 증거영상으로 사용함에 따라 종래의 사생활 침해로 인한 민원을 효과적으로 방지할 수 있는 장점을 갖는다.

또한 컨트롤러(300)는 카메라(301)로부터 번호판영상이 입력되면, 기 설정된 번호인식 알고리즘을 이용하여 진입차량의 번호판을 인식한 후, 1)진입차량의 진입시간 및 차량번호를 포함하는 제1 단속정보를 생성함과 동시에 2)진입차량의 번호판영상의 스틸이미지인 제1 번호판이미지를 저장하며, 3)카메라(301)가 다시 기 설정된 초점거리(FL)로 줌아웃 상태로 촬영하기 위한 줌아웃 트리거신호를 생성하여 카메라(301)로 출력한다.

즉 컨트롤러(300)는 불법주정차 영역(S)으로의 차량 진입이 감지되면, 진입차량의 제1 주변이미지, 제1 보호이미지, 제1 번호판이미지 및 제1 단속정보를 생성 및 저장하게 된다.

또한 컨트롤러(300)는 진입차량의 경과시간(t)이 기 설정된 임계시간(t’)을 초과하면, 진입차량을 불법주정차 차량으로 판단하며, 진입차량이 불법주정차 차량으로 판단되면, 카메라(300)가 해당 불법주정차 차량의 차량번호판을 촬영하기 위한 줌인 트리거신호(Trigger signal)를 생성한 후, 생성된 줌인 트리거신호를 카메라(301)로 출력한다. 이때 카메라(301)는 컨트롤러(300)로부터 전송받은 줌인 트리거신호에 따라 불법주정차 차량의 차량번호판을 줌인 촬영하여 제2 번호판영상을 획득한 후, 획득된 제2 번호판영상을 컨트롤러(300)로 출력한다.

또한 컨트롤러(300)는 카메라(301)로부터 제2 번호판영상이 입력되면, 기 설정된 번호인식 알고리즘을 이용하여 불법주정차 차량의 차량번호를 인식한 후, 1)해당 불법주정차 차량의 현재시간(확정시간) 및 차량번호를 포함하는 제2 단속정보를 생성함과 동시에 2)제2 주변이미지 및 제2 번호판이미지를 생성하며, 3)카메라(301)가 다시 기 설정된 초점거리(FL)로 줌아웃 상태로 촬영하기 위한 줌아웃 트리거신호를 생성하여 카메라(301)로 출력한다.

또한 컨트롤러(300)는 제2 주변이미지가 생성되면, 기 설정된 블러-처리 알고리즘을 이용하여 제2 주변이미지에서 사생활 침해위험이 높은 영역을 검출한 후 이를 블러(Blur) 처리(가공)하여 제2 보호이미지를 생성한다.

즉 컨트롤러(300)는 불법주정차 차량이 판별되면, 불법주정차 차량의 제2 주변이미지, 제2 보호이미지, 제2 번호판이미지 및 제2 단속정보를 생성 및 저장하게 된다.

또한 컨트롤러(300)는 불법주정차 차량의 제2 단속정보가 생성되면, 생성된 제2 단속정보와 해당 불법주정차 차량의 제1 단속정보를 활용하여, 불법주정차 차량의 진입시간, 확정시간 및 차량번호를 포함하는 최종 단속정보를 생성함과 동시에 생성된 최종단속정보, 제1 보호이미지, 제1 번호판이미지, 제2 보호이미지 및 제2 번호판이미지를 매칭시켜 중앙관제서버(5)로 전송한다.

중앙관제서버(5)는 컨트롤러(300)로부터 전송받은 불법주정차 차량의 최종 단속정보, 제1 보호이미지, 제1 번호판이미지, 제2 보호이미지 및 제2 번호판이미지를 데이터베이스부에 저장한다.

또한 중앙관제서버(5)는 컨트롤러(300)로부터 전송받은 영상(주변영상 또는 번호판영상)을 저장한다.

또한 중앙관제서버(5)는 기 등록된 등록데이터들을 활용하여 해당 불법주정차 차량의 운전자정보를 추출한 후, 추출된 운전자정보를 기반으로 불법주정차에 대한 과태료 청구 등의 후속처리를 수행한다.

또한 중앙관제서버(5)는 저장된 데이터들, 영상 및 이미지를 가공 및 활용하여 접속된 클라이언트(9)로부터 데이터를 요청받으며 요청된 바에 따른 응답데이터를 제공하는 관리플랫폼(8)을 제공한다.

도 4는 도 2의 컨트롤러를 나타내는 블록도이다.

컨트롤러(300)는 도 4에 도시된 바와 같이, 제어부(30)와, 메모리(31), 통신 인터페이스부(32), 데이터 입출력부(33), 영상 분석부(34), 제1 판단부(35), 제1 단속정보 처리부(36), 제2 판단부(37), 제2 단속정보 처리부(38), 최종 단속정보 생성부(39), 경고정보 표출부(40), 차량번호 추적부(41)로 이루어진다.

제어부(30)는 컨트롤러(300)의 O.S(Operating System)이며, 제어대상(31), (32), (33), (34), (35), (36), (37), (38), (39), (40), (41)들을 관리 및 제어한다.

또한 제어부(30)는 1)데이터 입출력부(33)를 통해 카메라(310)로부터 주변영상을 입력받을 때, 입력된 주변영상을 영상 분석부(34)로 입력하며, 2)데이터 입출력부(33)를 통해 카메라(310)로부터 번호판영상을 입력받을 때, 입력된 번호판영상을 이를 요청한 제1 단속정보 처리부(36) 또는 제2 단속정보 처리부(38)로 입력한다.

또한 제어부(30)는 제1 판단부(35)에 의해 진입차량이 감지되었다고 판단되면, 제1 단속정보 처리부(36)를 실행시키고, 제2 판단부(37)에 의해 불법주정차 차량이 검출되었다고 판단되면, 제2 단속정보 처리부(38)를 구동시킨다.

또한 제어부(30)는 최종 단속정보 생성부(39)에 의해 최종 단속정보가 생성되면, 해당 불법주정차 차량에 대한 최종 단속정보, 제1 보호이미지, 제1 번호판정지영상, 제2 보호이미지 및 제2 번호판영상을 매칭시킨 후, 매칭된 데이터가 중앙관제서버(5)로 전송되도록 통신 인터페이스부(32)를 제어한다.

또한 제어부(30)는 제1 단속정보 처리부(36) 또는 제2 단속정보 처리부(38)에서 차량번호를 인식하지 못할 때, 차량번호 추적부(41)를 실행시킨다.

메모리(31)에는 해당 컨트롤러(300)의 위치정보 및 식별정보가 기 설정되어 저장된다.

또한 메모리(31)에는 기 설정된 불법주정차 영역(S)의 위치정보, 픽셀위치정보 등이 저장된다.

또한 메모리(31)에는 카메라(301)의 촬영에 의해 획득된 영상(주변영상 또는 번호판영상)이 임시 저장된다.

또한 메모리(31)에는 기 설정된 영상분석 알고리즘과, 번호인식 알고리즘, 블러-처리 알고리즘이 저장된다. 이때 영상분석 알고리즘은 입력영상으로부터 차량객체를 검출하는 알고리즘을 의미하고, 번호인식 알고리즘은 입력영상으로부터 차량번호판을 추출한 후, 추출된 차량번호판을 분석하여 차량번호를 인식하는 알고리즘을 의미하고, 블러-처리 알고리즘은 입력된 주변이미지에서 사생활 침해위험이 높은 영역을 검출한 후 이를 블러(Blur) 처리(가공)하여 보정이미지를 생성하는 알고리즘을 의미하고, 이러한 알고리즘들은 공지된 기술 및 방법이기 때문에 상세한 설명은 생략하기로 한다.

또한 메모리(31)에는 타이머(미도시)에 의해 측정된 경과시간(t)이 저장된다.

또한 메모리(31)에는 임계시간(t’)이 기 설정되어 저장된다. 이때 임계시간(t’)은 진입차량을 불법주정차 차량이라고 판단할 수 있는 경과시간(t)의 최소값을 의미한다.

또한 메모리(31)에는 제1 단속정보 처리부(36)에 의해 생성된 제1 단속정보와 제1 주변이미지, 제1 보호이미지, 제1 번호판이미지가 매칭되어 저장된다.

또한 메모리(31)에는 제2 단속정보 처리부(36)에 의해 생성된 제2 단속정보와 제2 주변이미지, 제2 보호이미지, 제2 번호판이미지가 매칭되어 저장된다.

또한 메모리(31)에는 최종 단속정보 생성부(39)에 의해 생성된 최종 단속정보가 저장된다.

통신 인터페이스부(32)는 통신망(10)에 접속하여 중앙관제서버(5)와 데이터를 송수신한다.

데이터 입출력부(33)는 카메라(301)와 데이터를 입출력한다.

영상 분석부(34)는 기 설정된 영상분석 알고리즘을 이용하여 입력된 주변영상을 분석하여 주변영상으로부터 차량, 보행자 등의 객체(object)를 검출한다.

또한 영상 분석부(34)에 의해 검출된 분석데이터는 제1 판단부(35)로 입력된다.

제1 판단부(35)는 영상 분석부(34)로부터 입력된 분석데이터와, 기 설정된 불법주정차 영역(S)의 픽셀위치정보를 활용하여 감지차량이 불법주정차 영역(S)으로 진입한 진입차량인지 아닌지를 판단한다.

이때 제어부(30)는 제1 판단부(35)에 의해 1)감지차량이 진입차량이 아니라고 판단되면, 별도의 동작을 수행하지 않되, 2)감지차량이 진입차량라고 판단되면, 제1 단속정보 처리부(36)를 실행시킨다.

도 5는 도 4의 영상 분석부 및 제1 판단부를 설명하기 위한 예시도이다.

도 5에 도시된 바와 같이, 불법주정차 영역(S1), (S2)들이 설정된다고 가정할 때, 영상 분석부(34)는 기 설정된 영상분석 알고리즘을 이용하여 입력된 영상(900)을 분석하여 영상(900) 내 차량, 인체 등의 객체를 검출한다.

이때 제1 판단부(35)는 영상 분석부(34)에 의해 검출된 분석데이터 및 기 설정된 불법주정차 영역(S1), (S2)들의 픽셀위치정보를 활용하여 감지된 차량객체들 중 불법주정차 영역(S1), (S2)들에 진입한 차량(C1), (C2)들을 진입차량이라고 판단한다.

또한 제어부(30)는 제1 판단부(35)에 의해 진입차량이 검출되면, 제1 단속정보 처리부(36)를 실행시킨다.

도 6은 도 4의 제1 단속정보 처리부를 나타내는 블록도이고, 도 7은 도 5의 제1 주변이미지 생성모듈에 의해 생성되는 제1 주변이미지를 나타내는 예시도이고, 도 8은 도 6의 제1 영상보정모듈에 의해 생성되는 제1 보호이미지를 나타내는 예시도이고, 도 9는 도 6의 제1 번호판이미지 생성모듈에 의해 생성되는 제1 번호판이미지를 나타내는 예시도이다.

제1 단속정보 처리부(36)는 제1 판단부(35)에 의해 진입차량이 감지될 때, 제어부(30)의 제어에 따라 실행된다.

또한 제1 단속정보 처리부(36)는 도 6에 도시된 바와 같이, 신규 진입차량 판별모듈(361)과, 타이머 구동모듈(362), 줌인 트리거신호 생성모듈(363), 제1 번호판영상 입력모듈(364), 번호인식모듈(365), 번호인식여부 판단모듈(366), 제1 번호판이미지 생성모듈(367), 줌아웃 트리거신호 생성모듈(368), 제1 주변이미지 생성모듈(369), 제1 영상보정모듈(370), 제1 단속정보 생성모듈(371), 객체추적모듈(372), 경과시간 카운팅모듈(373)로 이루어진다.

신규진입차량 판별모듈(361)은 영상 분석부(34)에 의해 검출된 분석데이터 및 객체추적모듈(373)에 의해 검출된 추적데이터를 활용하여 감지된 진입차량이 신규 진입차량인지 아닌지를 판단한다.

또한 신규진입차량 판별모듈(361)은 1)만약 감지된 진입차량이 신규 진입차량라고 판단되면, 타이머 구동모듈(362), 줌인 트리거신호 생성모듈(363), 제1 주변이미지 생성모듈(369)을 구동시키고, 2)만약 감지된 진입차량이 신규 진입차량이 아니라고 판단되면, 객체추적모듈(372)을 구동시킨다.

타이머 구동모듈(362)은 신규진입차량 판별모듈(361)에 의해 진입차량이 신규 진입차량이라고 판별될 때 구동되며, 타이머(미도시)를 구동시켜 해당 신규 진입차량의 경과시간(t) 측정이 개시되도록 한다.

줌인 트리거신호 생성모듈(363)은 카메라(301)가 진입차량의 차량번호판을 확대 촬영할 수 있는 PTZ 제어신호를 포함하는 줌인 트리거신호를 생성한다.

이때 줌인 트리거신호 생성모듈(363)에 의해 생성된 줌인 트리거신호는 제어부(30)의 제어에 따라 카메라(301)로 출력되고, 카메라(301)의 줌인 촬영에 의해 획득된 제1번호판영상은 제1 번호판영상 입력모듈(364)로 입력된다.

제1 번호판영상 입력모듈(364)은 카메라(301)로부터 제1 번호판영상을 입력받는다.

번호인식모듈(365)은 기 설정된 번호인식 알고리즘을 이용하여 제1 번호판영상을 분석하여 진입차량의 차량번호를 인식한다. 이때 인식된 차량번호 정보는 제1 단속정보 생성모듈(371)로 입력된다.

번호인식여부 판단모듈(366)은 번호인식모듈(365)에 의해 진입차량의 차량번호 인식이 정상적으로 이루어졌는지 여부를 판단한다.

이때 제어부(30)는 1)만약 번호인식여부 판단모듈(366)에 의해 진입차량의 차량번호가 정상적으로 인식되었다고 판단되면, 제1 번호판 이미지 생성모듈(367)을 실행시키되, 2)만약 번호인식여부 판단모듈(366)에 의해 진입차량의 차량번호가 인식되지 않았다고 판단되면, 전술하였던 도 4의 차량번호 추적부(41)를 실행시킨다.

제1 번호판이미지 생성모듈(367)은 번호인식여부 판단모듈(366)에 의해 진입차량의 차량번호가 정상적으로 인식되었다고 판단될 때, 제어부(30)의 제어에 따라 실행된다.

또한 제1 번호판이미지 생성모듈(367)은 도 9에 도시된 바와 같이, 입력된 제1 번호판영상의 스틸이미지인 제1 번호판이미지(930)를 생성(캡처)한다. 이때 제1 번호판이미지(930)는 진입차량의 확대된 차량번호판(931)을 포함하낟.

줌아웃 트리거신호 생성모듈(368)은 카메라(301)가 다시 줌아웃 상태로 주변영상을 촬영할 수 있는 PTZ 제어신호를 포함하는 줌아웃 트리거신호를 생성한다.

이때 줌아웃 트리거신호 생성모듈(368)에 의해 생성된 줌아웃 트리거신호는 제어부(30)의 제어에 따라 카메라(301)로 출력되고, 카메라(301)의 줌아웃 촬영에 의해 획득된 주변영상은 영상 분석부(34)로 입력된다.

제1 주변이미지 생성모듈(369)은 진입차량이 불법주정차 영역(S)에 진입한 상태의 제1 주변영상으로부터 도 7의 스틸이미지(제1 주변이미지)(910)를 생성(캡처)한다.

제1 영상보정모듈(370)은 기 설정된 블러-처리 알고리즘을 이용하여 제1 주변이미지 생성모듈(369)에 의해 생성된 제1 주변이미지(910)를 분석하여, 제1 주변이미지로부터 사생활 침해위험이 높은 영역을 검출한 후 이를 블러(Blur) 처리하여 도 8에 도시된 바와 같은 제1 보호이미지(920)를 생성한다.

즉 본 발명은 제1 주변이미지 생성모듈(369)에 의해 생성된 제1 주변이미지(910)를 원본 그대로 증거영상을 사용할 경우, 사생활 침해로 인한 민원이 빈번하게 발생하는 문제점을 해결하도록, 제1 영상보정모듈(370)이 제1 주변이미지(910)에서 사생활 침해위험이 높은 영역을 블러 처리하여 제1 보호이미지(920)를 생성하도록 구성되고, 생성된 제1 보호이미지(920)를 진입차랴으이 증거영상으로 사용하도록 구성됨으로써 사생활 침해로 인한 민원을 효과적으로 절감 및 방지할 수 있는 장점을 갖는다.

제1 단속정보 생성모듈(371)은 진입차량이 감지된 시간 및 차량번호를 포함하는 제1 단속정보를 생성한다.

객체추적모듈(372)은 신규 진입차량 판별모듈(361)에서 진입차량이 신규 진입차량이 아니라고 판단될 때 실행되며, 영상 분석부(34)에 의해 분석된 분석데이터를 활용하여 진입차량의 궤적을 추적한다.

경과시간 카운팅 모듈(373)은 해당 진입차량이 진입한 시점부터 구동된 타이머의 경과시간(t)을 카운팅 한다. 이때 측정된 경과시간(t)은 후술되는 제2 판단부(37)로 입력된다.

제2 판단부(37)는 경과시간 카운팅 모듈(373)에 의해 측정된 경과시간(t)을 기 설정된 임계시간(t’)과 비교하며, 만약 경과시간(t)이 임계시간(t’) 미만이면, 별도의 동작을 수행하지 않되, 만약 경과시간(t)이 임계시간(t’)을 초과하면, 해당 진입차량을 불법주정차 차량으로 판단한다.

이때 제2 판단부(37)에 의해 진입차량이 불법주정차 차량으로 판단되면, 제어부(30)의 제어에 따라 제2 단속정보 처리부(38)가 실행된다.

도 10은 도 4의 제2 단속정보 처리부를 나타내는 블록도이다.

제2 단속정보 처리부(38)는 제2 판단부(37)에 의해 불법주정차 차량이 검출될 때, 제어부(30)의 제어에 따라 실행된다.

또한 제2 단속정보 처리부(38)는 도 10에 도시된 바와 같이, 줌인 트리거신호 생성모듈(381)과, 제2 번호판영상 입력모듈(382), 제2 번호인식모듈(383), 제2 번호인식여부 판단모듈(384), 제2 번호판이미지 생성모듈(385), 줌아웃 트리거신호 생성모듈(386), 제2 주변이미지 생성모듈(387), 제2 영상보정모듈(388), 제2 단속정보 생성모듈(389)로 이루어진다.

줌인 트리거신호 생성모듈(381)은 카메라(301)가 해당 불법주정차 차량의 번호판을 확대 촬영하기 위한 PTZ 제어신호를 포함하는 줌인 트리거신호를 생성한다. 이때 생성된 줌인 트리거신호는 제어부(30)의 제어에 따라 카메라(301)로 출력되고, 카메라(301)의 줌인 촬영에 의해 획득된 제2 번호판영상은 제어부(30)의 제어에 따라 제2 번호판영상 입력모듈(382)로 입력된다.

제2 번호판영상 입력모듈(382)은 카메라(301)의 줌인 촬영에 의해 획득된 제2 번호판영상을 입력받는다.

제2 번호인식모듈(383)은 기 설정된 번호인식 알고리즘을 이용하여 제2 번호판영상 입력모듈(382)을 통해 입력된 제2 번호판영상을 분석하여 제2 번호판영상으로부터 차량번호를 인식한다.

제2 번호인식여부 판단모듈(384)은 제2 번호인식모듈(383)에 의해 불법주정차 차량의 차량번호 인식이 정상적으로 이루어졌는지 여부를 판단한다.

이때 제어부(30)는 1)만약 제2 번호인식여부 판단모듈(384)에 의해 불법주정차 차량의 차량번호가 정상적으로 인식되었다고 판단되면, 제2 번호판 이미지 생성모듈(385)을 실행시키되, 2)만약 제2 번호인식여부 판단모듈(384)에 의해 진입차량의 차량번호가 인식되지 않았다고 판단되면, 전술하였던 도 4의 차량번호 추적부(41)를 실행시킨다.

제2 번호판이미지 생성모듈(385)은 제2 번호인식여부 판단모듈(384)에 의해 불법주정차 차량의 차량번호가 정상적으로 인식되었다고 판단될 때, 제어부(30)의 제어에 따라 실행된다.

또한 제2 번호판이미지 생성모듈(385)은 입력된 제2 번호판영상의 스틸이미지인 제2 번호판이미지를 생성(캡처)한다.

줌아웃 트리거신호 생성모듈(386)은 카메라(301)가 다시 줌아웃 상태로 주변영상을 촬영할 수 있는 PTZ 제어신호를 포함하는 줌아웃 트리거신호를 생성한다.

이때 줌아웃 트리거신호 생성모듈(368)에 의해 생성된 줌아웃 트리거신호는 제어부(30)의 제어에 따라 카메라(301)로 출력되고, 카메라(301)의 줌아웃 촬영에 의해 획득된 주변영상은 영상 분석부(34)로 입력된다.

제2 주변이미지 생성모듈(387)은 불법주정차 차량이 불법주정차 영역(S)에 위치한 상태의 제2 주변영상으로부터 스틸이미지(제2 주변이미지)를 생성(캡처) 한다.

제2 영상보정모듈(388)은 기 설정된 블러-처리 알고리즘을 이용하여 제2 주변이미지 생성모듈(387)에 의해 생성된 제2 주변이미지를 분석하여, 제2 주변이미지로부터 사생활 침해위험이 높은 영역을 검출한 후 이를 블러(Blur) 처리하여 제2 보호이미지를 생성한다.

제2 단속정보 생성모듈(389)은 불법주정차 차량이 검출된 확정시간 및 차량번호를 포함하는 제2 단속정보를 생성한다.

이때 제어부(30)는 제2 단속정보 처리부(38)에 의해 생성된 제2 단속정보, 제2 주변이미지, 제2 보호이미지 및 제2 번호판이미지를 매칭시켜 메모리(31)에 저장한다.

다시 도 4로 돌아가서 최종단속정보 생성부(39)를 살펴보면, 최종단속정보 생성부(39)는 불법주정차 차량의 진입시간, 확정시간, 제1, 2 번호이미지들 및 제1, 2 보호이미지들을 포함하는 최종 단속정보를 생성한다. 이때 최종단속정보 생성부(39)에 의해 생성된 최종 단속정보는 제어부(30)의 제어에 따라 통신 인터페이스부(32)를 통해 중앙관제서버(5)로 전송된다.

도 11은 도 4의 차량번호 추적부를 나타내는 블록도이다.

도 11의 차량번호 추적부(41)는 전술하였던 도 6의 번호인식여부 판단모듈(366)에 의해 진입차량의 차량번호가 인식되지 않거나 또는 전술하였던 도 10의 제2 번호인식여부 판단모듈(384)에 의해 불법주정차 차량의 차량번호가 인식되지 않을 때, 제어부(30)의 제어에 따라 실행된다.

또한 차량번호 추적부(41)는 도 11에 도시된 바와 같이, 임계범위 영상추출모듈(411)과, 현재시점 기준 역재생 모듈(412), 인식대상 추적모듈(413), 인식대상 번호인식모듈(414)로 이루어진다.

임계범위 영상추출모듈(411)은 메모리(31)에 저장된 영상들 중 현재 시점으로부터 기 설정된 임계범위 이전까지의 영상을 메모리(31)로부터 추출한다. 이때 영상은 주변영상, 번호판영상 또는 이 들의 조합으로 이루어진 영상일 수 있다.

예를 들어, 임계범위가 ‘30분’으로 설정될 경우, 임계범위 영상추출모듈(411)은 메모리(31)에 저장된 영상을 탐색하여 현재 시점으로부터 30분 이전부터의 영상을 메모리(31)로부터 추출한다.

현재시점 기준 역재생 모듈(412)은 임계범위 영상추출모듈(412)에 의해 추출된 영상을 현재시점을 기준으로 역방향으로 재생시킨다.

인식대상 추적모듈(413)은 현재시점 기준 역재생 모듈(412)에 의해 역방향 재생되는 영상을 분석하여 차량번호가 인식되지 않은 차량인 인식대상의 움직임을 추적한다.

인식대상 번호인식모듈(414)은 인식대상 추적모듈(413)에 의해 추적된 인식대상의 차량번호를 인식한다.

이때 제어부(30)는 만약 1)인식대상 번호인식모듈(414)이 인식대상의 차량번호를 인식하는데 실패하면, 현재시점 기준 역재생 모듈(412)을 반복 실행하되, 2)인식대상 번호인식모듈(414)이 인식대상의 차량번호를 인식하면, 인식된 차량번호를 제1 단속정보 처리부(36) 또는 제2 단속정보 처리부(38)로 입력한다.

즉 본 발명의 차량번호 추적부(41)는 현재 시점으로부터 임계범위 이내의 영상을 추출한 후, 추출된 영상을 역방향으로 재생시켜 인식대상 차량의 차량번호를 인식하도록 구성됨으로써 단일 카메라를 이용하여 번호인식이 이루어지지 않은 차량의 차량번호까지 검출이 가능하여 단속의 정확성 및 신뢰도를 높일 수 있는 것이다.

예를 들어, 임계시간이 ‘30분’이고, 인식대상 차량이 15분 전에 불법주정차 영역(S)으로 진입하였다고 가정할 때, 차량번호 추적부(41)가 추출된 30분 동안의 영상을 정방향으로 재생시켜 차량번호를 인식하도록 구성되는 경우, 인식대상 차량이 나오지 않는 15분 동안의 무의미한 영상을 활용하기 때문에 불필요한 연산처리량 및 속도가 증가하는 문제점이 발생하게 되나, 본 발명의 차량번호 추적부(41)는 추출된 30분 동안의 영상을 역방향으로 재생시킨 후, 차량번호를 인식하도록 구성됨으로써 인식대상 차량의 차량번호 인식에 필요한 연산처리량 및 속도를 절감시킬 수 있게 된다.

이와 같이 본 발명의 일실시예인 불법주정차 단속시스템(1)은 단일카메라를 이용하여 불법주정차 차량에 대한 주변이미지 및 번호판이미지를 획득 가능하도록 구성됨과 동시에 주변이미지를 분석하여 주변이미지 내에서 사생활침해의 위험도가 높은 픽셀영역을 선별한 후, 선별된 픽셀영역을 블러(blur) 처리하여 보호이미지를 생성하도록 구성됨으로써 불법주정차 차량의 증거자료를 정확하게 검출할 수 있으며, 사생활침해로 인한 민원을 효과적으로 방지할 수 있게 된다.

또한 본 발명의 불법주정차 단속시스템(1)은 진입차량 또는 불법주정차 차량 감지 시, 해당 차량의 번호인식이 이루어지지 않는 경우, 차량번호 추적부(41)가 해당 차량의 영상을 역재생하여 차량번호를 인식하도록 구성됨으로써 단일카메라를 이용하여 동일 조건 대비 불법주정차 차량의 단속 정확성 및 신뢰도를 극대화시킬 수 있으며, 설치 및 운영비용을 절감시킬 수 있다.

1:불법주정차 단속시스템 3-1, ..., 3-N:촬영부들 5:중앙관제서버
8:관리플랫폼 9:클라이언트 10:통신망
30:제어부 31:메모리 32:통신 인터페이스부
33:데이터 입출력부 34:영상분석부 35:제1 판단부
36:제1 단속정보 처리부 37:제2 판단부 38:제2 단속정보 처리부
39:최종 단속정보 생성부 40:경고정보 표출부 300:컨트롤러
301:카메라 361:신규 진입차량 판별모듈
362:타이머 구동모듈 363:줌인 트리거신호 생성모듈
364:제1 번호판영상 입력모듈 365:제2 번호인식모듈
366:번호인식여부 판단모듈 367:제1 번호판이미지 생성모듈
368:줌아웃 트리거신호 생성모듈 369:제1 주변이미지 생성모듈
370:제1 영상보정모듈 371:제1 단속정보 생성모듈
372:객체추적모듈 373:경과시간 카운팅모듈
381:줌인 트리거신호 생성모듈 382:제2 번호판영상 입력모듈
383:제2 번호인식모듈 384:제2 번호인식여부 판단모듈
385:제2 번호판이미지 생성모듈 386:줌아웃 트리거신호 생성모듈
387:제2 주변이미지 생성모듈 388:제2 영상보정모듈
389:제2 단속정보 생성모듈

Claims (6)

1. PTZ(Pan-Tilt-Zoom) 제어 가능하도록 설치되어 프레임 내에 기 설정된 불법주정차 영역(S)이 포함되도록 줌-아웃(Zoom-Out) 상태로 촬영하여 주변영상을 획득하는 카메라와, 상기 카메라에 의해 획득된 주변영상을 분석하여 불법주정차 차량을 검출하는 컨트롤러로 구성되는 적어도 하나 이상의 촬영부를 포함하는 불법주정차 단속시스템에 있어서:
   상기 컨트롤러는
   상기 불법주정차 영역(S)으로 진입한 진입차량 또는 불법주정차 차량이 검출될 때, 상기 카메라에 의해 획득된 주변영상의 스틸이미지인 주변이미지를 생성한 후, 생성된 주변이미지로부터 사생활 침해영역이 높은 영역을 블러(Blur) 처리하여 보호이미지를 생성하고, 상기 카메라로부터 입력된 주변영상을 분석하여 상기 불법주정차 영역(S)으로 차량이 진입하였을 때, 진입차량의 차량번호판을 확대 촬영하도록 상기 카메라를 제어한 후, 상기 카메라로부터 입력된 번호판영상을 분석하여 차량번호를 인식하며, 진입차량의 차량번호 및 진입시간을 포함하는 제1 단속정보를 생성하고,
   상기 컨트롤러는
   메모리;
   상기 카메라로부터 입력된 주변영상을 분석하는 영상분석부;
   상기 영상분석부에 의해 검출된 분석데이터를 활용하여 상기 불법주정차 영역(S)으로 차량이 진입하였는지를 판별하는 제1 판단부;
   상기 제1 판단부에 의해 상기 불법주정차 영역으로 차량이 진입하였다고 판단될 때 실행되는 제1 단속정보 처리부;
   제어부를 더 포함하고,
   상기 제1 단속정보 처리부는
   상기 제1 판단부에 의해 상기 불법주정차 영역(S)으로 진입한 진입차량이 신규 진입차량인지 아닌지를 판단하는 신규 진입차량 판별모듈;
   상기 신규 진입차량 판별모듈에 의해 진입차량이 신규 진입차량이라고 판단될 때 실행되며, 해당 신규 진입차량의 경과시간(T)을 측정하는 타이머 구동모듈;
   상기 카메라가 진입차량의 차량번호판을 확대 촬영할 수 있는 PTZ 제어신호를 포함하는 줌인 트리거신호를 생성하는 줌인 트리거신호 생성모듈;
   상기 카메라로부터 입력 받은 진입차량의 차량번호판을 확대 촬영한 제1 번호판영상을 분석하여 차량번호를 인식하는 번호인식모듈;
   상기 제1 번호판영상의 스틸이미지인 제1 번호판이미지를 생성하는 제1 번호판이미지 생성모듈;
   상기 카메라가 프레임 내에 상기 불법주정차 영역(S)이 포함되도록 줌-아웃(Zoom-Out) 상태로 광역 촬영하도록 하기 위한 PTZ 제어신호를 포함하는 줌아웃 트리거신호를 생성하는 줌아웃 트리거신호 생성모듈;
   상기 카메라로부터 입력된 주변영상의 스틸이미지인 제1 주변이미지를 생성하는 제1 주변이미지 생성모듈;
   상기 제1 주변이미지 생성모듈에 의해 생성된 제1 주변이미지로부터 사생활 침해영역이 높은 영역을 블러(Blur) 처리하여 제1 보호이미지를 생성하는 제1 영상보정모듈;
   진입차량의 진입시간 및 차량번호를 포함하는 제1 단속정보를 생성하는 제1 단속정보 생성모듈을 포함하고,
   상기 제어부는 상기 줌인 트리거신호 생성모듈 또는 상기 줌아웃 트리거신호 생성모듈에 의해 생성된 줌인 트리거신호 또는 줌아웃 트리거신호를 상기 카메라로 출력하고, 상기 카메라의 줌인 촬영에 의해 획득된 제1 번호판영상을 상기 번호인식모듈로 입력하고,
   상기 컨트롤러는
   상기 신규 진입차량 판별모듈에 의해 진입차량이 신규 진입차량이 아니라고 판단될 때 실행되며, 해당 진입차량의 움직임을 추적함과 동시에 해당 진입차량의 경과시간(t)을 측정하는 객체추적 및 경과시간 카운팅모듈;
   상기 객체추적 및 경과시간 카운팅모듈에 의해 측정된 경과시간(t)을 기 설정된 임계시간(t’)과 비교하며, 만약 경과시간(t)이 임계시간(t’)을 초과하면, 해당 진입차량을 불법주정차 차량으로 판단하는 제2 판단부;
   상기 제2 판단부에 의해 불법주정차 차량이 검출되었다고 판단될 때 실행되는 제2 단속정보 처리부를 더 포함하고,
   상기 제2 단속정보 처리부는
   상기 카메라가 불법주정차 차량의 차량번호판을 확대 촬영할 수 있는 PTZ 제어신호를 포함하는 줌인 트리거신호를 생성하는 줌인 트리거신호 생성모듈;
   상기 카메라로부터 입력 받은 불법주정차 차량의 차량번호판을 확대 촬영한 제2 번호판영상을 분석하여 차량번호를 인식하는 제2 번호인식모듈;
   상기 제2 번호판영상의 스틸이미지인 제2 번호판이미지를 생성하는 제2 번호판이미지 생성모듈;
   상기 카메라가 프레임 내에 상기 불법주정차 영역(S)이 포함되도록 줌-아웃(Zoom-Out) 상태로 광역 촬영하도록 하기 위한 PTZ 제어신호를 포함하는 줌아웃 트리거신호를 생성하는 줌아웃 트리거신호 생성모듈;
   상기 카메라로부터 입력된 주변영상의 스틸이미지인 제2 주변이미지를 생성하는 제2 주변이미지 생성모듈;
   상기 제2 주변이미지 생성모듈에 의해 생성된 제2 주변이미지로부터 사생활 침해영역이 높은 영역을 블러(Blur) 처리하여 제2 보호이미지를 생성하는 제2 영상보정모듈;
   불법주정차 차량의 확정시간 및 차량번호를 포함하는 제2 단속정보를 생성하는 제2 단속정보 생성모듈을 포함하고,
   상기 제1 단속정보 처리부는 상기 번호인식모듈에 의해 진입차량의 차량번호가 정상적으로 인식되었는지 여부를 판단하는 번호인식여부 판단모듈을 포함하고,
   상기 제2 단속정보 처리부는 상기 제2 번호인식모듈에 의해 불법주정차 차량의 차량번호가 정상적으로 인식되었는지 여부를 판단하는 제2 번호인식여부 판단모듈을 포함하고,
   상기 컨트롤러는 상기 번호인식여부 판단모듈 또는 상기 제2 번호인식여부 판단모듈에서 번호인식이 정상적으로 이루어지지 않았다고 판단될 때 실행되는 차량번호 추적부를 더 포함하고,
   상기 차량번호 추적부는
   상기 메모리에 저장된 영상들 중 현재 시점으로부터 기 설정된 임계범위 이전까지의 영상을 상기 메모리로부터 추출하는 임계범위 영상추출모듈;
   상기 임계범위 영상추출모듈에 의해 추출된 영상을 현재 시점을 기준으로 역방향으로 재생시키는 현재시점 기준 역재생 모듈;
   상기 현재시점 기준 역재생 모듈에 의해 역방향 재생되는 영상을 분석하여 차량번호가 인식되지 않은 차량인 인식대상의 움직임을 추적하는 인식대상 추적모듈;
   상기 인식대상 추적모듈에 의해 추적된 인식대상의 차량번호를 인식하는 인식대상 번호인식모듈을 더 포함하고,
   상기 제어부는 1)상기 인식대상 번호인식모듈이 인식대상의 차량번호를 인식하는데 실패하면, 상기 현재시점 기준 역재생 모듈을 반복 실행하되, 2)상기 인식대상 번호인식모듈에 의해 차량번호가 인식되면 인식된 차량번호를, 차량번호를 인식하지 못한 번호인식모듈 또는 제2 번호인식모듈로 입력하는 것을 특징으로 하는 불법주정차 단속시스템.
2. 삭제
3. 삭제
4. 삭제
5. 청구항 제1항에 있어서, 상기 불법주정차 단속시스템은 중앙관제서버를 더 포함하고,
   상기 컨트롤러는 상기 카메라로부터 입력된 영상을 상기 메모리에 임시 저장함과 동시에 상기 중앙관제서버로 전송하고,
   상기 중앙관제서버는 상기 컨트롤러로부터 전송받은 영상을 저장 및 모니터링 하고,
   상기 컨트롤러는
   상기 제2 단속정보 처리부에 의해 제2 단속정보가 생성될 때 실행되며, 불법주정차 차량의 제1 단속정보 및 제2 단속정보를 활용하여 해당 불법주정차 차량의 진입시간, 확정시간 및 차량번호를 포함하는 최종 단속정보를 생성하는 최종 단속정보 생성부;
   상기 최종 단속정보 생성부에 의해 생성된 최종 단속정보와, 해당 불법주정차 차량의 제1 번호판이미지, 제1 보호이미지, 제2 번호판이미지 및 제2 보호이미지를 매칭시켜 상기 중앙관제서버로 전송하고,
   상기 중앙관제서버는 상기 컨트롤러로부터 최종 단속정보를 포함하는 매칭된 데이터를 전송받으면, 불법주정차에 따른 후속절차를 수행하는 것을 특징으로 하는 불법주정차 단속시스템.
6. 삭제

Images