KR101453386B1 - 차량 지능형 검색 시스템 및 그 동작방법 - Google Patents

차량 지능형 검색 시스템 및 그 동작방법 Download PDF

Info

Publication number
KR101453386B1
KR101453386B1 KR1020130146424A KR20130146424A KR101453386B1 KR 101453386 B1 KR101453386 B1 KR 101453386B1 KR 1020130146424 A KR1020130146424 A KR 1020130146424A KR 20130146424 A KR20130146424 A KR 20130146424A KR 101453386 B1 KR101453386 B1 KR 101453386B1
Authority
KR
South Korea
Prior art keywords
vehicle
information
server
result
image
Prior art date
Application number
KR1020130146424A
Other languages
English (en)
Inventor
백청열
Original Assignee
백청열
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 백청열 filed Critical 백청열
Priority to KR1020130146424A priority Critical patent/KR101453386B1/ko
Application granted granted Critical
Publication of KR101453386B1 publication Critical patent/KR101453386B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry

Landscapes

  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

차량 지능형 검색 시스템 및 그 동작방법이 개시된다. 본 발명의 일실시예에 따른 차량 지능형 검색 시스템의 동작방법은, 카메라로부터 촬영된 차량의 주행 영상으로부터 검출된 차량 번호 인식 결과를 수신하는 단계와, 상기 수신된 차량 번호 인식 결과와 정보 제공 서버로부터 제공되는 문제 차량의 차량 정보를 포함하는 데이터베이스 정보를 비교함에 의하여 이벤트 상황을 감지하고, 그 감지 결과에 따른 이벤트 정보를 전송하는 단계와, 상기 번호가 인식된 차량이 촬영된 영상 정보를 수신하고, 상기 영상 정보를 분석한 결과 및 상기 데이터베이스 정보를 분석한 결과에 따라, 상기 차량 자체의 정보나 상기 차량의 예상 이동 경로 정보에 대한 분석 결과를 전송하는 단계 및 상기 이벤트 정보와 함께 상기 문제 차량에 관련된 분석 결과를 수신하고, 기 설정된 상황 전파 시나리오에 따라 적어도 하나의 다른 서버로 상황 전파를 전송하는 단계를 구비하는 것을 특징으로 한다.

Description

차량 지능형 검색 시스템 및 그 동작방법{Vehicle Intelligent Search System and Operating Method thereof}
본 발명은 차량 지능형 검색 시스템 및 그 동작방법에 관한 것으로서, 자세하게는 문제 차량의 차량번호를 인식하여 지능형 검색 동작을 수행함으로써 이벤트의 즉각적인 전파를 할 수 있는 차량 번호 인식 시스템 및 그 동작방법에 관한 것이다.
일반적으로, 도시를 관리하기 위한 목적이나 각종 범죄에 대한 증거자료 확보 및 대응을 하기 위하여 폐쇄 회로 티브이(CCTV)가 설치되고 있다. 관제 센터는 도시 곳곳에 설치된 CCTV로부터 촬영된 영상을 수신하고 이를 재생함으로써 모니터링에 의한 감시 동작을 수행할 수 있다.
그러나, 종래의 경우 관제 센터에서 CCTV로부터 촬영된 영상의 단순 모니터링만이 수행되며, 이에 따라 감시 사각지역이 발생하게 되어 도시 관리에 있어서 충분한 자료를 제공하지 못하는 문제가 발생할 뿐 아니라 각종 사고 등의 사전 방지가 어렵게 된다. 또한, 근래들어 차량을 이용한 범죄 발생률이 급증함에 따라 차량의 정확한 촬영, 그리고 차량을 구분할 수 있도록 차량의 번호판이 정확히 촬영될 필요가 있음에도 불구하고, 실질적으로 이와 같은 자료의 확보가 어려운 문제가 발생한다. 주로 과속 위반이나 갓길 주행 위반 등을 단속하기 위하여 차량의 번호판을 촬영하는 단속 카메라가 이용되는 경우가 있으나, 이는 고가의 촬영 장비임에 따라 도로의 일정 지점 등 일부에만 사용되며, 도시 전체를 관리하기 위한 카메라로써 이용되기는 어렵다.
한편, CCTV를 통해 범죄에 이용된 차량 등이 정확히 촬영이 되었다 하더라도, 이는 차후 증거 자료 등을 위해 주로 이용되는 것으로서, 상기 범죄 등과 같은 특수한 상황에서 실시간으로 촬영 자료가 이용되기는 어려운 문제가 발생하게 된다. 즉, 이벤트 상황을 정확히 감지하고 이에 대한 즉각적인 대처를 수행하는 것이 어려운 문제가 발생한다.
본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 일반 CCTV를 이용하여 차량 번호판 및 번호의 인식이 가능함과 함께, 기 구축된 데이터베이스의 정보와 인식된 번호를 이용한 지능형 검색을 수행하여 이벤트 상황을 감지하고, 이벤트의 효과적인 상황 전파를 통하여 차량 등을 이용한 범죄에 즉각적으로 대처할 수 있는 차량 번호 인식 서버를 포함하는 차량 지능형 검색 시스템 및 그 동작방법을 제공하는 것을 목적으로 한다.
상기와 같은 목적을 달성하기 위하여, 본 발명의 일실시예에 따른 차량 지능형 검색 시스템의 동작방법은, 카메라로부터 촬영된 차량의 주행 영상으로부터 검출된 차량 번호 인식 결과를 수신하는 단계와, 상기 수신된 차량 번호 인식 결과와 정보 제공 서버로부터 제공되는 문제 차량의 차량 정보를 포함하는 데이터베이스 정보를 비교함에 의하여 이벤트 상황을 감지하고, 그 감지 결과에 따른 이벤트 정보를 전송하는 단계와, 상기 번호가 인식된 차량이 촬영된 영상 정보를 수신하고, 상기 영상 정보를 분석한 결과 및 상기 데이터베이스 정보를 분석한 결과에 따라, 상기 차량 자체의 정보나 상기 차량의 예상 이동 경로 정보에 대한 분석 결과를 전송하는 단계 및 상기 이벤트 정보와 함께 상기 문제 차량에 관련된 분석 결과를 수신하고, 기 설정된 상황 전파 시나리오에 따라 적어도 하나의 다른 서버로 상황 전파를 전송하는 단계를 구비하는 것을 특징으로 한다.
바람직하게는, 상기 차량 지능형 검색 시스템의 동작방법은 상기 주행 영상으로부터 상기 차량 번호를 인식하기 위한 번호 인식 단계를 더 구비하고, 상기 번호 인식 단계는, 하나 이상의 카메라들로부터의 동영상을 제1 초당 프레임으로 수신하는 단계와, 상기 수신된 동영상으로부터 제2 초당 프레임에 해당하는 정지 영상을 추출하는 단계와, 상기 정지 영상을 분석하여 모션 감지 및 주행방향 검출 결과 중 적어도 하나에 기반하여 차량 인식 결과를 출력하는 단계와, 차량이 존재하는 것으로 인식된 정지 영상으로부터 수평 및 수직 추출 동작을 통해 번호판을 추출하고, 추출된 번호판에 대해 기하학적 정형화 기법에 따른 번호판 정형화 동작을 수행하며, 정형화된 번호판 내에 존재하는 개별 문자를 추출함에 의하여 번호판을 감지하는 단계 및 추출된 개별 문자에 대한 번호 인식 처리동작을 수행함에 의하여 차량 번호의 인식 결과를 출력하는 단계를 구비하는 것을 특징으로 한다.
또한 바람직하게는, 상기 상황 전파 및 상기 차량에 대한 분석 결과는 상기 카메라를 제어하기 위한 영상 관제 서버로 제공되며, 상기 분석 결과에 기반하여, 상기 차량을 촬영한 제1 카메라에 연계된 제2 카메라의 촬영 방향이 변동되도록 제어하는 단계를 더 구비하는 것을 특징으로 한다.
또한 바람직하게는, 상기 차량 지능형 검색 시스템의 동작방법은, 상기 상황 전파를 GIS 서버로 제공함과 함께, 상기 차량에 대한 분석 결과를 상기 GIS 서버로 제공하는 단계 및 상기 상황 전파의 수신에 응답하여 상기 차량의 현재 위치 및 예상 이동 경로를 지도 상에 출력하는 단계를 더 구비하는 것을 특징으로 한다.
한편, 본 발명의 일실시예에 따른 차량 지능형 검색 시스템은, 지능형 검색 서버 및 상황 전파 서버를 구비하고, 상기 지능형 검색 서버는, 카메라로부터 촬영된 차량의 주행 영상으로부터 검출된 차량 번호 인식 결과를 수신하고, 상기 수신된 차량 번호 인식 결과와 정보 제공 서버로부터 제공되는 문제 차량의 차량 정보를 포함하는 데이터베이스 정보를 비교함에 의하여 이벤트 상황을 감지하고, 그 감지 결과에 따른 이벤트 정보를 전송하며, 상기 번호가 인식된 차량이 촬영된 영상 정보를 수신하고, 상기 영상 정보를 분석한 결과 및 상기 데이터베이스 정보를 분석한 결과에 따라, 상기 차량 자체의 정보나 상기 차량의 예상 이동 경로 정보에 대한 분석 결과를 전송하고, 상기 상황 전파 서버는, 상기 이벤트 정보와 함께 상기 문제 차량에 관련된 분석 결과를 수신하고, 기 설정된 상황 전파 시나리오에 따라 적어도 하나의 다른 서버로 상황 전파를 전송하는 상황 전파 서버를 구비하는 것을 특징으로 한다.
상기한 바와 같은 본 발명의 차량 번호 인식 서버를 포함하는 차량 지능형 검색 시스템 및 그 동작방법에 따르면, 일반 CCTV로 촬영한 영상을 이용하여 차량 번호판 및 번호를 인식하고, 문제차량 데이터베이스의 지능형 검색을 통하여 문제차량의 과거 위치나 예상 이동경로 등을 효과적으로 분석하며, 그 분석 결과를 포함하는 상황 전파를 즉각적으로 수행할 수 있으므로 차량 등을 이용한 범죄에 대처할 수 있는 효과가 있다.
또한, 본 발명의 차량 번호 인식 서버를 포함하는 차량 지능형 검색 시스템 및 그 동작방법에 따르면, 상대적으로 저렴한 CCTV를 통해 지능형 검색 및 상황 전파 동작을 수행하므로 CCTV의 증설을 통해 감시 사각지역을 최소화할 수 있는 효과가 있다.
도 1은 본 발명의 일실시예에 따른 차량 지능형 검색 시스템의 일 구현예를 나타내는 블록도이다.
도 2는 도 1의 번호 인식 서버의 구체적인 구현예를 나타내는 블록도이다.
도 3은 도 2의 번호 인식부의 구체적인 구현예를 나타내는 블록도이다.
도 4는 도 1의 지능형 검색 서버의 구체적인 구현예를 나타내는 블록도이다.
도 5는 도 1의 상황 전파 서버의 구체적인 구현예를 나타내는 블록도이다.
도 6은 도 1의 차량 지능형 검색 시스템을 포함하는 통합 관제 센터의 일 구현예를 나타내는 블록도이다.
도 7 및 도 8은 지능형 검색 결과에 따라 통합 관제 센터에서 디스플레이되는 화면의 일 예를 나타내는 도면이다.
도 9는 본 발명의 일 실시예에 따른 차량 지능형 검색 시스템의 동작방법을 나타내는 플로우차트이다.
도 10은 본 발명의 다른 실시예에 따른 차량 지능형 검색 시스템의 동작방법을 나타내는 플로우차트이다.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시 예를 예시하는 첨부 도면 및 도면에 기재된 내용을 참조하여야 한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 1은 본 발명의 일실시예에 따른 차량 지능형 검색 시스템의 일 구현예를 나타내는 블록도이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 차량 지능형 검색 시스템(100)은 번호 인식 서버(1000), 지능형 검색 서버(2000) 및 상황 전파 서버(3000)를 포함할 수 있다. 도 1에서는, 상기 서버들 이외에 다수의 외부 카메라들(예컨대 CCTV, 110_1 - 110_N), 영상 관제 서버(120) 및 정보 제공 서버(130)가 더 도시되며, 상기 CCTV들(110_1 - 110_N), 영상 관제 서버(120) 및 정보 제공 서버(130) 중 적어도 하나가 차량 지능형 검색 시스템(100)에 더 구비되는 것으로 설명되어도 무방하다.
영상 관제 서버(120)는 유무선 통신망 등을 통하여 다수의 CCTV들(110_1 - 110_N)에 연결되며, 다수의 CCTV들(110_1 - 110_N)에서 촬영된 영상을 수신하고 디코딩 모듈(121)을 통해 영상을 디코딩할 수 있으며, 또한 내부 제어수단(미도시)을 통해 제어신호를 출력하여 다수의 CCTV들(110_1 - 110_N)의 촬영 동작을 제어할 수 있다.
다수의 CCTV들(110_1 - 110_N)은 차량 지능형 검색 시스템(100)에 의한 관리 서비스가 제공되는 구역에 설치될 수 있다. 각각의 CCTV로부터 촬영된 영상(예컨대, 차량의 주행영상)은 영상 관제 서버(120)로 제공되며, 또한 영상 관제 서버(120)를 운영하는 사용자의 조작을 통해 다수의 CCTV들(110_1 - 110_N)의 패닝(Panning), 틸트(Tilt) 및 줌(Zoom) 등(PTZ)을 제어할 수 있다. 또는, 특정 상황(이벤트) 발생이 검출되는 경우 이에 대응하기 위한 정보들이 영상 관제 서버(120)로 제공될 수 있으며, 영상 관제 서버(120) 내부의 제어수단을 통해 다수의 CCTV들(110_1 - 110_N)의 PTZ가 자동 제어될 수 있다. 영상 관제 서버(120)로부터 디코딩된 동영상(차량의 주행 영상)은 번호 인식 서버(1000)로 제공될 수 있다.
번호 인식 서버(1000)는 본 발명의 실시예에 따라 차량 인식 및 차량 번호 인식 동작을 수행할 수 있다. 본 발명의 실시예에서, 번호 인식 서버(1000)는 CCTV로 촬영된 실제 차량의 주행 영상을 소정의 초당 프레임으로서 수신하고, 수신된 주행 영상의 일부의 프레임들에 대한 이미지 처리 동작을 통해 차량 번호 인식 결과를 출력한다.
번호 인식 서버(1000)로부터의 차량 번호 인식 결과는 이후 차량 지능형 검색 시스템(100)에서 제공하는 서비스로서, 도시 관리를 위한 정보로 이용되거나 차량 등을 이용한 범죄에 즉각적으로 대응하기 위한 정보로 이용될 수 있다. 이를 위하여, 지능형 검색 서버(2000)는 번호 인식 서버(1000)로부터의 차량 번호 인식 결과를 수신함과 함께, 정보 제공 서버(130)에서 제공되는 각종 데이터베이스 정보를 함께 수신하고, 촬영된 영상에 존재하는 차량의 번호 인식 결과로부터 상기 차량이 수배 차량이거나 체납 차량에 해당하는지를 판단하기 위한 검색 동작을 수행할 수 있다. 정보 제공 서버(130)는 수배 차량의 실시간 조회를 위한 정보를 제공하는 경찰청 서버, 체납 차량의 실시간 조회를 위한 정보를 제공하는 체납 정보 서버 등 각종 종류의 서버들을 포함할 수 있다. 지능형 검색 서버(2000)는 인식된 차량 번호와 문제 차량 데이터베이스에 저장된 정보의 비교를 통한 검색 동작을 수신하고, 동일한 차량 번호가 문제 차량 데이터베이스에 존재하는 등의 이벤트 발생시에 이를 나타내는 이벤트를 출력하여 상황 전파 서버(3000)로 제공한다.
상황 전파 서버(3000)는 수신된 이벤트에 대한 승인 절차를 통해 상황을 전파한다. 또한, 문제 차량의 이동 경로를 예측하기 위한 정보가 기 설정되어 구축될 수 있으며, 문제 차량의 지도상에서의 이동 경로 표출을 위하여 GIS(미도시)와 연동하여 동작할 수 있다. 상황 전파 서버(3000)를 관리하는 사용자는 이벤트 수신시 이에 대한 상황 전파를 승인하는 동작을 수행할 수 있으며, 상황 전파 승인에 응답하여 상황 전파 서버(3000)는 기 설정된 이벤트 시나리오에 따라 추적 대상의 차량 정보가 타 서버와 공유된다. 예컨대, 상황 전파 서버(3000)는 이벤트를 전달함에 있어서 타 서버로서 통합 영상 관리 서버(미도시)로 전달할 수 있으며, 이와 함께 공유 데이터베이스에 차량 이미지, 차량 번호, 위반 여부 및 인식 장소 등을 나타내는 각종 정보들을 저장함으로써, 타 서버에서 이벤트 발생에 따른 즉각적인 대응을 위한 정보의 참조가 가능하도록 한다. 통합 영상 관리 서버는 영상 관제 서버(120)로 다시 이벤트를 전달할 수 있으며(또는, 상황 전파 서버(3000)가 직접 이벤트를 전달하여도 무방함), 또한 이벤트가 GIS로 전달됨에 따라 GIS는 공유 데이터베이스에 저장된 정보를 참조하여 문제 차량의 현재 위치, 이동 경로, 및 예측되는 예상 경로를 지도상에 표시할 수 있다.
도 1에 도시된 각종 서버들의 구체적인 동작을 설명하면 다음과 같다. 도 2는 도 1의 번호 인식 서버의 구체적인 구현예를 나타내는 블록도이다.
본 발명의 실시예에 따라, 번호 인식 서버(1000)는 다수의 CCTV들(110_1 - 110_N)로부터 촬영된 차량의 주행 영상을 영상 관제 서버(도 1의 120)를 통해 수신할 수 있다. 번호 인식 서버(1000)는 서버의 전반적인 동작을 제어하며, 본 발명의 실시예에 따라 CCTV에 의해 촬영된 주행 영상을 분석하여 차량을 인식하고 차량의 번호를 인식하는 기능의 전반을 제어하는 시스템 제어부(1100)를 포함할 수 있다. 또한, 번호 인식 서버(1000)는 이미지 처리부(1200), 차량 인식부(1300), 번호 인식부(1400) 및 데이터베이스부(1500)를 더 포함할 수 있다.
이미지 처리부(1200)는 영상 관제 서버(120)로부터의 주행 영상을 수신하고, 수신된 영상에 대한 이미지 처리를 수행함으로써 차량 및 차량 번호 인식을 위한 변환 처리된 영상을 생성한다. 일예로서, 이미지 처리부(1200)는 주행 영상으로서 초당 다수의 프레임(예컨대, 초당 30 프레임)을 수신하고 이들 중 일부의 정지 영상 이미지를 인식용으로 추출한다. 예컨대, 초당 6-10 장의 정지영상 이미지를 추출할 수 있으며, 이는 번호 인식 서버(1000)의 하드웨어 성능에 따라 조절이 가능하다. 추출 방법으로서, 일련하게 수신되는 프레임들에 대해 순차적으로 추출이 가능하며, 예컨대 초당 10 장의 정지영상 이미지를 추출하는 경우 주행 영상의 3 개의 프레임마다 하나의 프레임을 선택하여 정지영상 이미지를 추출할 수 있다.
또한, 이미지 처리부(1200)는 추출된 이미지에 대해 이미지 변환 처리를 수행한다. 예컨대, 추출된 이미지에 대해 명암 대비를 통한 이미지 보정 동작을 수행할 수 있으며, 이는 히스토그램 평준화 기법을 적용하는 등의 처리 동작을 통해 수행될 수 있다. 또한, 침식, 팽창 등의 모폴로지 기법을 적용하여 정지영상 이미지 잡영 제거를 수행할 수 있다.
상기와 같은 동작을 수행하기 위하여, 이미지 처리부(1200)는 주행 영상 수신부(1210), 정지 영상 추출부(1220) 및 이미지 변환부(1230)를 포함할 수 있다. 주행 영상 수신부(1210)는 CCTV들(110_1 - 110_N)에 의해 촬영되어 영상 관제 서버(120)에 의해 디코딩된 주행 영상을 수신할 수 있다. 또한, 정지 영상 추출부(1220)는 소정의 프레임을 가지며 수신되는 주행 영상으로부터 정지 영상을 추출하며, 예컨대 초당 30 프레임으로 수신되는 주행 영상으로부터 소정의 추출 방법(예컨대, 순차적 추출)에 따라 일부의 정지 영상(예컨대, 3 개의 프레임마다 하나의 프레임을 선택하여 초당 10 개의 정지 영상)을 추출한다.
이미지 변환부(1230)는 추출된 영상에 대한 이미지 변환 처리를 수행한다. 예컨대, 추출된 영상에 대해 그레이 스케일 변환 동작을 수행할 수 있으며, 또한 추출된 이미지에 대해 히스토그램 평준화 기법을 적용하는 등의 처리 동작에 의해 명암 대비를 통한 이미지 보정 동작을 수행할 수 있다. 변환 처리된 이미지는 차량의 인식 및 차량 번호 인식을 위해 이용될 수 있으며, 또한 이미지 변환 처리된 영상이 번호 인식 서버(1000) 내부의 데이터베이스부(1500)에 저장될 수 있다.
차량 인식부(1300)는 이미지 처리된 영상을 분석하여 차량 인식 동작을 수행할 수 있다. 예컨대, 옵티컬 플로우(Optical Flow) 기법을 적용하여 차량 모션을 감지하여 차량을 인식할 수 있으며, 또한 차량의 주행 방향을 검출할 수 있다. 상기 동작을 수행하기 위하여, 차량 인식부(1300)는 이미지 추출부(1310), 모션 감지부(1320) 및 주행방향 검출부(1330)를 포함할 수 있다.
이미지 추출부(1310)는 변환 처리된 영상 내에 차량이 존재하는지를 검출하기 위하여 상이 이미지(Different Image)를 추출하는 기법을 이용할 수 있다. 예컨대, 직전 프레임과 현재 프레임의 차이를 추출할 수 있으며, 차량 영상과 배경 영상의 구분으로 인식률이 향상될 수 있도록 한다.
모션 감지부(1320) 및 주행방향 검출부(1330)는 이미지 추출 결과에 기반하여 모션 감지 동작 및 차량의 주행 방향을 검출할 수 있다. 모션 감지부(1320)와 주행방향 검출부(1330)는 서로 다른 기능 블록으로 도시되었으나, 동일한 기능 블록에 의해 상기 감지 및 검출 동작이 수행되어도 무방하다. 차량 영상과 배경 영상의 구분, 그리고 직전 프레임과 현재 프레임의 추출된 차이에 근거하여 모션이 감지되는가의 여부에 따라 차량 인식 결과가 발생될 수 있다. 또한, 옵티컬 플로우(Optical Flow) 기법을 적용하여 영상의 특징점을 추출하고, 이동 벡터의 움직임을 찾아 방향을 추적하며, 직전 프레임과 현재 프레임의 방향값을 추출함에 의하여 차량의 주행 방향을 검출할 수 있다. 상기와 같은 차량 인식부(1300)의 이미지 처리 동작에 기반하여 차량 인식 결과가 도출될 수 있으며, 이를 이용하여 차량의 번호 인식 프로세스가 수행될 수 있다.
한편, 번호 인식부(1400)는 차량 인식부(1300)로부터의 인식 결과에 따라 번호판 인식 및 번호 인식 등의 동작을 위한 프로세스를 수행할 수 있으며, 예컨대 번호판 인식 등의 동작을 위한 프로세스는 다수의 영상들 중 차량 모션이 감지된 영상만을 대상으로 하여 수행될 수 있다. 번호 인식부(1400)는 오츠(OTSU) 알고리즘을 이용한 이진화 및 윤곽선 추출 기법 등을 적용하여 번호판의 위치를 추정할 수 있으며, 추정된 번호판의 위치로부터 개별 문자를 추출하고, 추출된 개별 문자를 인식함으로써 차량의 번호를 인식할 수 있다. 이를 위하여, 번호 인식부(1400)는 번호판 감지부(1410) 및 번호 인식 처리부(1420)를 포함할 수 있다. 번호 인식부(1400)는 차량 인식부(1300)로부터 차량 인식 결과가 발생될 때 차량 번호 인식을 위한 프로세스를 수행할 수 있다. 즉, 이미지 변환 처리된 영상으로부터 차량이 존재하거나 또는 차량이 이동하는 등 모션이 검출될 때 차량 번호 인식을 위한 프로세스가 선택적으로 수행될 수 있다. 번호판 감지부(1410)는 차량 인식 결과에 응답하여 영상으로부터 차량의 번호판을 감지하는 동작을 수행할 수 있으며, 이를 위하여 이미지 처리부(1200)로부터의 변환 이미지가 번호판 감지부(1410)로 제공될 수 있다. 또한, 번호 인식 처리부(1420)는 감지된 번호판 내에 기재된 개별 문자를 인식하고 최종 차량번호를 필터링함으로써 번호 인식 결과를 출력할 수 있다.
본 발명의 실시예에 따른 번호 인식 동작을 설명하면 다음과 같다. 도 3은 도 2의 번호 인식부의 구체적인 구현예를 나타내는 블록도이다.
도 3에 도시된 바와 같이, 번호판 감지부(1410)는 이미지 보정부(1411), 번호판 위치 추정부(1412), 번호판 추출부(1413), 정형화부(1414), 문자 추출부(1415) 및 번호판 분류부(1416)를 포함할 수 있다. 또한, 번호 인식 처리부(1420)는 문자 인식부(1421), 필터링부(1422) 및 결과 출력부(1423)를 포함할 수 있다.
이미지 보정부(1411)는 수신된 이미지에 대하여 히스토그램 평준화 기법 등을 적용하여 명암 대비를 통한 이미지 보정을 수행할 수 있으며, 또한 침식, 팽창 모폴로지 기법 등을 적용하여 정지 영상 이미지에서 잡영을 제거할 수 있다.
번호판 위치 추정부(1412)는, 이미지 처리된 영상으로부터 해당 영상에 포함된 번호판의 위치를 추정한다. 위치 추정 동작을 수행함에 있어서 오츠(OTSU) 알고리즘을 이용한 이진화 및 윤곽선 추출 기법을 적용하여 차량이 존재하는 것으로 인식된 영상으로부터 번호판의 위치를 추정한다. 또한, 번호판 추출부(1413)는 추정된 번호판의 위치를 참조하여 실제 번호판을 추출하며, 예컨대 번호판 추출을 위하여 번호판의 기울기를 보정하기 위한 동작으로서, 윤곽선을 기준으로 하여 삼각함수를 적용하여 기울기 보정을 수행하고, 번호판의 이미지를 개선하기 위하여 샤프닝 기법 및 미디언 필터를 적용함에 의하여 이미지 개선 동작을 수행할 수 있다. 또한, 실제 번호판을 추출하기 위하여 오츠(OTSU) 알고리즘을 이용한 이진화 및 윤곽선 추출 기법이 적용될 수 있다.
정형화부(1414)는 번호판의 추출 정보(또는, 번호판 위치 정보)를 이용한 기하학적 정형화 기법을 적용하여 번호판을 정형화할 수 있다. 또한, 문자 추출부(1415)는 번호판 정형화 결과에 의한 개별 문자를 추출하며, 번호판 분류부(1416)는 추출된 개별 문자에 근거하여 문자 위치를 정형화하고 패턴에 의한 분류 동작을 수행함으로써 번호판의 종류(예컨대, 구 번호판, 신형 번호판 등) 등을 분류한다. 상기와 같은 동작에 근거하여 번호판 감지 결과가 생성되어 번호 인식 처리부(1420)로 제공된다.
한편, 번호 인식 처리부(1420)는 번호판 감지 결과에 기반하여 실제 차량 번호를 판별하기 위한 번호 인식 처리 동작을 수행하며, 이에 따른 번호 인식 결과를 출력한다. 문자 인식부(1421)는 추출된 번호판의 개별 문자를 인식하며, 예컨대 이진화와 그물망 방식의 신경망 기법을 적용하여 문자 인식 동작이 수행될 수 있다. 또한, 필터링부(1422)는 인식된 문자와 정형화된 문자 위치를 적용하여 최종 차량 번호를 필터링하여 출력하며, 결과 출력부(1423)는 필터링된 정보를 근거로 하여 차량 번호를 인식한 결과를 출력한다.
전술한 도 2 및 도 3에 도시된 각각의 기능 블록은 하드웨어적 또는 소프트웨어적으로 구현될 수 있으며, 또한 도 2 및 도 3에 도시된 기능 블록은 본 발명의 실시예에 따른 동작을 구분하여 설명하기 위해 서로 구분되게 도시되었을 뿐, 적어도 두 개의 기능 블록에서 수행되는 동작은 하나의 기능 블록 또는 하나의 소프트웨어 내에서 일련하게 수행되어도 무방할 것이다.
한편, 도 2를 다시 참조하면, 데이터베이스부(1500)는 번호 인식 서버(1000) 내의 각종 정보들을 저장할 수 있다. 예컨대, 번호 인식을 위해 이용될 차량 모션이 검출된 영상들이 데이터베이스부(1500) 내에 저장되거나, 또는 인식된 차량으로부터 검출된 번호판의 영상, 그리고 번호판으로부터 추출된 문자를 인식한 결과로서 차량 번호 인식 결과 등이 데이터베이스부(1500)에 저장될 수 있다. 이외에도, 번호 인식 서버(1000)를 구동하기 위한 각종 데이터들이 함께 저장될 수 있다.
전술한 본 발명의 실시예에 따르면, CCTV로부터 촬영된 초당 다수의 프레임을 갖는 영상에 대해 이미지 처리를 수행한 후 차량 인식 동작을 수행하며, 인식 결과에 따른 일부의 영상을 이용한 차량 번호판 및 번호 인식 동작을 수행함으로써 일반 CCTV를 이용하여 차량 및 번호의 인식률을 향상시킬 수 있을 뿐 아니라, 감시 사각지대를 최소화함으로써 감시능력을 향상할 수 있게 된다.
도 4는 도 1의 지능형 검색 서버의 구체적인 구현예를 나타내는 블록도이다. 도 4에서는 지능형 검색 서버(2000) 이외에 번호 인식 서버(1000)와 상황 전파 서버(3000)가 함께 도시되며, 또한 정보 제공 서버로서 경찰정 서버(131) 및 체납 정보 서버(132)가 그 일예로서 도시된다.
도 4에 도시된 바와 같이, 지능형 검색 서버(2000)는 시스템 제어부(2100), 인식 정보 수신부(2200), 조회부(2300), 정보 분석부(2400), 결과 정보 저장부(2500), 이벤트 전송부(2600) 및 데이터베이스부(2700)를 포함할 수 있다. 또한, 조회부(2300)는 각종 문제 차량을 조회하는 기능 블록으로서, 일예로서 조회부(2300)는 수배차량 조회부 및 체납 차량 조회부 등을 포함할 수 있다. CCTV를 통해 촬영된 주행 영상으로부터 검출된 차량의 번호 인식 결과가 번호 인식 서버(1000)로부터 지능형 검색 서버(2000)로 제공된다.
시스템 제어부(2100)는 지능형 검색 서버(2000)의 전반적인 동작을 제어하며, 본 발명의 실시예에 따라 번호 인식 서버(1000)로부터의 번호 인식 결과를 참조하여 정보 제공 시스템에 구축된 정보를 검색함으로써 이벤트 상황을 감지하는 기능의 전반을 제어할 수 있다. 인식 정보 수신부(2200)는 번호 인식 서버(1000)로부터의 차량 번호 인식 결과를 수신한다.
조회부(2300)는 수신된 차량의 번호 인식 결과를 이용하여 해당 차량이 문제 차량에 해당하는지를 조회한다. 예컨대, 조회부(2300)는 TCP/IP 소켓을 이용한 실시간 인터페이스를 통하여 정보 제공 서버에 저장된 차량 정보들을 검색하거나, 또는 소정의 주기(예컨대, 매일 1회)마다 FPT를 이용하여 정보를 자동 수신함으로써 차량 정보를 검색할 수 있다. 수배차량 조회를 통하여 번호 인식 결과가 수신된 해당 차량이 수배중인 차량인가를 검색할 수 있으며, 또한 체납 차량 조회를 통하여 해당 차량이 현재 체납중인 사람이 소유하고 있는 차량인가를 검색할 수 있다. 전술한 조회 동작이 조회부(2300)에서 직접 수행되는 것으로 설명되었으나, 본 발명의 실시예는 이에 국한될 필요는 없다. 예컨대, 전술한 바와 같이 FPT를 이용하여 정보를 자동 수신하고 이를 데이터베이스부(2600)에 저장하는 경우, 조회부(2300)는 차량 정보에 대한 검색 동작을 직접 수신할 수 있으며, 또는 TCP/IP 소켓을 이용한 실시간 인터페이스를 통하여 정보 제공 서버에 억세스하는 경우, 수신된 번호 인식 결과를 정보 제공 서버로 제공하고, 그 검색 결과를 정보 제공 서버로부터 수신하여 이벤트 상황 발생 여부를 판단할 수 있다.
정보 분석부(2400)는, 차량 번호 인식 결과를 이용한 검색 동작 이외에, 문제 차량과 관련된 각종 정보를 분석하고 그 분석 결과를 출력한다. 예컨대, 지능형 검색 서버(2000)는 번호 인식 서버(1000)로부터 번호 인식 결과와 함께 문제 차량에 관련된 각종 정보(촬영 영상, 번호판 검출 영상, 및 모션 또는 주행 방향 감지 결과 등)를 수신할 수 있으며, 또는 영상 관제 서버(도 1의 120)로부터 직접 영상 정보를 수신할 수도 있다. 정보 분석부(2400)는 차량 영상에 대해 HIS(Hue-Saturation-Intensity) 등의 색상 모델을 적용하여 색조-채도 조합과 색조-명도 조합으로 색상 히스토그램을 구성하고, 채도 값에 가중치를 부여하여 차량의 대표 색상을 추출하고 그 추출 정보를 제공할 수 있다. 또한, 주행 방향 감지 결과 등을 수신하여 차량의 주행 방향을 인식하고 그 인식 결과를 제공할 수도 있다. 또한, 타 서버(예컨대, 경찰청 서버)에 저장된 상기 문제 차량의 출몰 지역 등을 분석하고 차량의 예상 이동 경로 등의 정보를 분석하여 제공할 수 있다.
결과 정보 저장부(2500)는 상기 검색 결과에 따른 결과 정보나 정보 분석부(2400)에 의한 분석 결과 등을 저장할 수 있다. 예컨대, 실시간으로 수신되는 번호 인식 결과를 이용하여 전술한 검색 동작을 수행하고, 문제 차량이 확인되는 경우(또는, 이벤트 상황이 발생되는 경우) 해당 차량의 번호 인식 결과와 함께, 차량이 발견된 시각, 장소 등 이벤트 상황에 관련된 각종 정보들이 저장될 수 있다. 결과 정보 저장부(2500)는 그 자체로 저장 수단을 포함하거나, 또는 저장 수단이 포함되지 않는 경우 정보의 저장 동작을 관리하기 위한 동작을 수행하며 실제 결과 정보는 데이터베이스부(2700)에 저장되도록 관리할 수 있다.
한편, 이벤트 전송부(2600)는 조회부(2300)의 검색 결과 이벤트 상황인 것으로 판단될 때 이벤트 정보를 외부의 다른 서버로 제공한다. 즉, 문제 차량 확인 등 이벤트가 발생할 때마다 실시간으로 이벤트 정보를 타 서버로 제공함으로써 문제 차량에 대한 즉각적인 대처가 이루어지도록 한다. 예컨대, 도 4에 도시된 바와 같이 이벤트 정보는 상황 전파 서버(3000)로 제공될 수 있으며, 상황 전파 서버(3000)는 상황을 전파하기 위한 각종 정보로서 이벤트 정보, 번호 인식 결과 등을 수신하여 상황 전파 동작을 수행한다.
상황 전파 서버(3000)의 구성 및 동작의 일 예를 설명하면 다음과 같다. 도 5는 도 1의 상황 전파 서버의 구체적인 구현예를 나타내는 블록도이다.
상황 전파 서버(3000)는 시스템 제어부(3100), 이벤트 수신부(3200), 인식 결과 수신부(3300), 상황 전파 전송부(3400), SMS 전송부(3500), 전파 결과 저장부(3600) 및 데이터베이스부(3700)를 포함할 수 있다. 시스템 제어부(3100)는 상황 전파 서버(3000)의 전반적인 동작을 제어하며, 본 발명의 실시예에 따라 지능형 검색 서버(2000)로부터의 이벤트 정보를 수신하고 문제 차량이 발생하였음을 나타내는 상황을 전파하는 기능의 전반을 제어할 수 있다. 이벤트 수신부(3200)는 지능형 검색 서버(2000)로부터의 이벤트 정보를 수신한다. 또한, 이벤트 정보의 수신과 함께, 인식 결과 수신부(3300)는 문제 차량에 관련된 각종 정보로서 차량의 번호 인식 결과를 수신할 수 있다. 이벤트 수신부(3200)와 인식 결과 수신부(3300)는 서로 동일한 기능 블록으로 도시되어 각종 정보를 수신하는 것으로 구현되어도 무방하며, 또한 상황 전파 서버(3000)는 상기 정보 이외에도 기타 다른 정보를 더 수신하여도 무방하다. 예컨대, 문제 차량이 촬영된 영상이나 번호판을 검출한 영상을 포함하여 각종 정보를 함께 수신할 수도 있다.
상황 전파 전송부(3400)는 수신된 이벤트 정보에 응답하여 문제 차량의 발견을 나타내는 상황 전파를 전송한다. 이벤트 정보가 수신됨에 따라 상황 전파 전송이 자동화되어 수행될 수 있으며, 또는 이벤트 정보 수신시 상황 전파 서버(3000)는 이벤트 알림을 표시하여 관리자의 승인 입력을 대기하며, 상황 전파 서버(3000)를 관리하는 이용자는 이벤트 알림을 확인하고 상황 전파 승인을 입력함에 따라 상황 전파 전송이 이루어질 수 있다.
상황 전파 전송과 관련하여, 문제 차량이 발견된 위치를 나타내는 정보를 GIS(141)로 전송함으로써 GIS(141)에서 해당 문제 차량의 위치를 지도 상에 표시한 정보를 제공하도록 할 수 있으며, 또한 모바일로 SMS를 전송하는 SMS 서버(142)로 해당 차량에 관련된 정보를 전송함으로써 SMS 서버(142)가 해당 차량의 번호, 발견 시각 및 위치 등을 나타내는 정보가 모바일로 전송되도록 할 수 있다. 외부의 통합 관제 서버를 관리하는 이용자는 GIS(141)에서 제공하는 지도 상의 문제 차량의 위치 정보를 확인하여 이벤트 상황에 즉각적으로 대응할 수 있도록 하며, 또한 SMS 서버(142)를 통해 해당 차량에 관련된 사람들에게 모바일로 SMS를 전송함에 의하여 이벤트 상황에서 즉각적인 대처가 가능하도록 한다.
또한, 상황 전파 전송부(3400)는 영상 관제 서버(120)로 상황 전파를 전송할 수 있으며, 예컨대 문제 차량에 관련된 각종 정보로서 소정의 구역에 설치된 CCTV의 촬영 방향을 제어하도록 하기 위한 정보를 전송할 수 있다. 문제 차량을 촬영한 CCTV의 정보, 그리고 상기 CCTV가 촬영한 방향 및 차량의 주행 방향 등에 관련된 정보가 영상 관제 서버(120)로 제공될 수 있으며, 영상 관제 서버(120)는 해당 서버가 관리하는 다수의 CCTV들, 특히 문제 차량을 촬영한 CCTV와 인접하게 배치되는 등 상호 관련된 CCTV의 촬영 방향 및 각도를 제어함으로써 문제 차량이 지속적으로 촬영될 수 있도록 할 수 있다. 이는, 다수의 CCTV들 사이의 촬영 방향을 연동한 정보를 기 저장하여 수행될 수 있을 것이며, 예컨대 문제 차량을 촬영한 CCTV의 촬영 방향이 제1 방향일 때, 이에 연관된 다수의 CCTV들의 촬영 방향이 기 설정됨에 따라 이들의 촬영 방향을 연동하여 조절함으로써 문제 차량이 지속적으로 촬영될 수 있도록 한다.
한편, 이외에도 상황 전파 전송부(3400)는 기타 다른 서버, 예컨대 경찰정 서버(131)로 상황 전파를 전송함으로써, 해당 기관이 이벤트 상황 발생에 대응하여 즉각적인 대처가 이루어지도록 할 수 있다.
도 6은 도 1의 차량 지능형 검색 시스템을 포함하는 통합 관제 센터의 일 구현예를 나타내는 블록도이다. 도 6에서는, 통합 관제 센터(4000)를 포함하는 통합 관제 시스템(200)이 도시되며, 통합 관제 센터(4000)는 통합 관제 서버(4100), 저장/분배 서버(4200), GIS 서버(4300), 번호 인식 서버(4400), 지능형 검색 서버(4500), 상황 전파 서버(4600), 통합 데이터베이스(4700) 및 모니터링 PC(4800)를 포함할 수 있다. 이와 함께, 통합 관제 센터(4000)는 네트워크 망을 통해 다수의 외부 카메라들(예컨대 CCTV, 210_1 - 210_N), 영상 관제 서버(220) 및 정보 제공 서버(2300)에 연결될 수 있다. 전술한 실시예에서, CCTV들(210_1 - 210_N)로부터의 촬영 영상이 영상 관제 서버(220)에 의해 디코딩되거나, 영상 관제 서버(220)에 의해 CCTV들(210_1 - 210_N)의 PTZ가 제어되는 것으로 설명되었으나, 이와 함께 통합 관제 센터(4000)가 직접 CCTV들(210_1 - 210_N)로부터의 영상을 수신하고 이를 처리할 수 있으며, 또한 통합 관제 센터(4000)가 CCTV들(210_1 - 210_N)의 PTZ를 제어할 수도 있다.
통합 관제 센터(4000)는 전술한 실시예에서 설명된 각종 서버들을 포함할 수 있다. 또한, 통합 관제 센터(4000)를 관리하는 사용자는 모니터링 PC(4800)를 통하여 이벤트 상황 발생을 확인하고 이에 대처하는 동작(예컨대, 상황 전파 동작) 등을 수행할 수 있다. 이와 같은 기능은 통합 관제 서버(4100)의 구현에 의해 수행될 수 있다.
저장/분배 서버(4200)는 통합 관제 센터(4000)에 의해 수신되는 각종 정보, 그리고 통합 관제 센터(4000)에서 생성하는 각종 정보들을 저장하고 이를 분배하는 기능을 수행한다. 예컨대, 이벤트 상황에 따라 서로 다른 정보가 각각의 경로를 통해 서로 다른 내부 또는 외부의 서버로 제공될 필요가 있으며, 저장/분배 서버(4200)는 이와 같은 수집된 정보의 저장 및 분배 동작을 수행한다. GIS 서버(4300)는 지도 상에 이벤트 상황을 표출하기 위한 각종 지리 정보를 포함하는 서버로서, 이벤트 발생시 문제 차량의 위치 정보, 그리고 문제 차량의 향후 예상되는 경로에 관련된 정보를 수신하고 이를 지도상에 표시하여 통합 관제 센터(4000)를 관리하는 사용자에게 지도 상의 정보를 제공할 수 있도록 하며, 또한 외부 시스템으로 지도 상의 정보를 제공하여 이벤트 발생에 즉각적인 대처가 가능하도록 한다.
번호 인식 서버(4400), 지능형 검색 서버(4500) 및 상황 전파 서버(4600)는 전술한 실시예와 동일 또는 유사한 기능을 수행할 수 있다. 즉, 소정의 초당 프레임으로 수신되는 주행 영상을 분석하여 차량의 번호판 검출 및 번호 인식을 수행하고, 인식된 정보에 대한 지능형 검색 동작을 수행함으로써 이벤트 상황의 발생 여부를 판단하며, 이벤트 상황 발생시 자동으로 또는 관리자의 승인 하에 이벤트 상황이 전파되도록 한다. 통합 데이터베이스(4700)는 각각의 서버에서 이용되거나 발생되는 정보를 통합 저장하기 위한 수단일 수 있다.
도 7 및 도 8은 지능형 검색 결과에 따라 통합 관제 센터에서 디스플레이되는 화면의 일 예를 나타내는 도면이다. 본 발명의 실시예에 따라, 도 7 및 도 8에서는 GIS 서버와 연계하여 문제 차량의 위치와 함께, 문제 차량의 지속적인 촬영을 위한 연계 카메라가 지도 상에 표시되는 예가 도시된다.
도 7에 도시된 바와 같이, 통합 관제 센터를 운영하는 관리자는 지도 상에서 문제 차량의 위치를 확인할 수 있으며, 또한 문제 차량이 위치한 시각 정보가 지도 상에 함께 표시됨에 따라 시간 경과에 따른 차량의 이동 상태를 확인할 수 있다. 또한, 전술한 실시예에 따라 각종 서버에서 발생된 각종 정보들이 화면의 일 측에 함께 표시될 수 있으며, 예컨대 번호 인식 결과에 매칭되는 데이터베이스 정보에 근거하여 해당 문제 차량을 체납 차량이나 수배 차량 등으로 분류할 수 있으며, 상기 차량의 정확한 차량 번호 정보, 그리고 상기 문제 차량의 감시 필요 정도 등을 나타내는 정보가 함께 출력될 수 있다. 또한, 문제 차량으로 검색된 차량의 영상 정보 등이 화면의 다른 일 측에 함께 표시될 수 있다.
한편, 도 8에 도시된 바와 같이, 통합 관제 센터를 운영하는 관리자는 지도 상에서 문제 차량의 위치를 확인할 수 있으며, 또한 현재 차량의 위치 및 이동 방향이 흰색 선으로 표시됨과 함께, 상기 문제 차량을 촬영할 수 있을 것으로 예상되는 카메라의 위치 및 촬영 방향이 노란색 선으로 표시될 수 있다. 통합 관제 센터를 운영하는 관리자는 제어 입력에 따라 상기 연계 카메라들의 촬영 방향이 조절되도록 할 수 있으며, 전술한 실시예에서와 같이 카메라들의 촬영 방향에 관련된 정보를 기 설정하여 저장하고, 이벤트 발생시 현재 흰색 선을 따라 소정의 카메라가 촬영을 수행하는 경우, 이에 연동된 다른 카메라들이 노란색 선을 따라 촬영 방향을 향하도록 제어될 수 있다.
한편, 화면의 다른 일측에는 문제 차량이 발견되는 지점의 영상이 표시될 수 있으며, 이와 함께 연계 카메라에 의해 촬영되는 영상이 함께 표시될 수 있다. 이에 따라 통합 관제 센터를 운영하는 관리자는 지도 상에서 차량의 이동 경로를 실시간으로 확인함과 함께 일 측에 표시되는 다수의 카메라들로부터 촬영되는 영상을 확인함으로써 이벤트 발생시 효과적인 대처가 가능하도록 한다.
도 9는 본 발명의 일 실시예에 따른 차량 지능형 검색 시스템의 동작방법을 나타내는 플로우차트이다. 도 9에서는 본 발명의 실시예에 따른 차량 지능형 검색 시스템에서 지능형 검색 동작의 일예가 도시된다.
도 9에 도시된 바와 같이, 번호 인식 서버로부터 차량의 번호를 인식한 결과가 제공되고, 이에 따라 번호 인식 정보가 입력된다(S11). 차량의 번호 인식 정보가 입력됨에 따라 정보 제공 시스템에 구축된 정보에 근거하여 해당 차량이 문제 차량인지를 판단하기 위한 차량 번호 비교 및 분석 동작이 수행된다(S12). 정보 제공 시스템에 구축된 정보는 경찰청 서버나 체납 정보 서버 등 관계기관의 데이터베이스에 저장된 정보일 수 있으며, 관계기관 에이전트 서버를 통해 해당 정보가 차량 지능형 검색 시스템으로 제공될 수 있다.
또한, 차량 번호를 비교 분석한 결과는 해당 서버(예컨대, 지능형 검색 서버) 내의 데이터베이스나 외부의 통합 데이터베이스에 저장될 수 있다(S13). 또한, 관리자 등의 선택에 따라 데이터베이스에 저장된 비교 분석 결과를 이용하여 이벤트 검색 결과를 레포팅할 수 있다(S14). 또한, 상기 비교 및 분석 동작에 따라 결과가 일치함에 따라 이벤트 상황인 것으로 판단된 경우에는 상황 전파 서버로 비교 결과로서 이벤트 정보를 전송한다(S15).
한편, 상황 전파 서버의 기 설정된 동작에 따라 차량 지능형 검색 시스템의 검색 조건이 설정될 수 있으며, 이에 따라 상황 전파 서버에서 검색 조건에 관련된 정보를 제공하면 차량 지능형 검색 시스템은 해당 검색 조건을 입력받고(S16), 상기 검색 조건을 분석하고 그 분석 결과를 통합 데이터베이스에 저장할 수 있다(S17). 예컨대, 전술한 실시예에서와 같이, 차량 지능형 검색 시스템은 차량 번호 인식 결과를 분석하는 것과 함께, 이벤트 상황시 더 이용될 수 있는 각종 정보를 분석 및 제공할 수 있으며, 예컨대 이벤트 상황에서 통합 데이터베이스에 저장된 각종 영상 이미지(예컨대, 차량 이미지)를 로딩하고(S18), 전술한 실시예에서와 같이 차량의 색상 등을 검출하기 위한 영상 분석 및 메타 데이터 추출 동작을 수행할 수 있다(S19). 관리자 등에 의해 차량 지능형 검색 시스템의 레포팅 기능이 수행되면, 차량 번호 비교 분석 결과 이외에도 상기 영상 분석 결과를 함께 레포팅할 수 있다.
도 10은 본 발명의 다른 실시예에 따른 차량 지능형 검색 시스템의 동작방법을 나타내는 플로우차트이다. 도 9에서는 본 발명의 실시예에 따른 상황 전파 시스템에서의 상황 전파 동작의 일예가 도시된다.
이벤트 신호가 입력됨에 따라(S21), 상황 전파 시스템을 관리하는 관리자는 이벤트 신호의 수신을 확인하게 되며, 관리자의 승인이 입력되기까지 상황 전파 승인을 대기할 수 있다(S22). 이와 함께, 상황 전파의 이벤트 시나리오가 기 입력되어 저장될 수 있으며(S23), 상황 전파 승인이 이루어지면 이벤트 시나리오에 따라 상황 전파 동작이 수행된다(S24), 반면에, 상황 전파 승인이 취소되는 경우에는 이벤트 상황에 관련된 정보의 입력 및 저장을 수행함으로써(S25), 해당 이벤트에 대한 상황 전파 동작이 종료된다(S34).
한편, 상황 전파 승인이 이루어짐에 따라 설정된 이벤트 시나리오대로 상황 전파 동작이 수행되며, 예컨대 SMS 서버로 이벤트 발생 및 해당 이벤트에 관련된 각종 정보를 전송하며(S26), 이에 따라 SMS 서버에서는 상기 각종 정보를 포함하는 SMS를 기 설정된 모바일로 전송한다(S27). 또한, 이벤트 발생 및 해당 이벤트에 관련된 각종 정보는 통합 관제 시스템을 통하여 영상 관제 서버로 전달할 수 있으며(S28, S29), 영상 관제 서버는 상기 정보 및 기 설정된 카메라의 촬영 방향 각도 등(프리셋 정보)에 근거하여 문제 차량을 촬영한 카메라와 인접한 다른 카메라들의 프리셋 호출을 수행하여 상기 카메라들의 촬영 각도가 제어되도록 한다(S30). 이후, 이벤트 종료 등 상기 이벤트에 관련된 추가 정보가 입력됨에 따라(S33), 해당 이벤트의 상황 전파 동작이 종료된다(S34).
또한, 전술한 실시예에서와 같이, 이벤트 발생 시 문제 차량의 위치 및 예상 경로 등이 지도 상에 표시될 수 있으며, 이에 따라 이벤트 발생 및 해당 이벤트에 관련된 각종 정보가 GIS로 전달될 수 있다(S31). 이와 함께, 문제 차량의 이미지 및 차량 정보 등이 공통 데이터베이스에 등록될 수 있으며(S32), 이후 상기 등록된 정보는 통합 영상 관리 서버 등에서 FTP 다운로드 등을 통해 제공될 수 있다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.

Claims (8)

  1. 차량 지능형 검색 시스템의 동작방법에 있어서,
    카메라로부터 촬영된 차량의 주행 영상으로부터 검출된 차량 번호 인식 결과를 지능형 검색 서버에서 수신하는 단계;
    상기 지능형 검색 서버에서, 상기 수신된 차량 번호 인식 결과와 정보 제공 서버로부터 제공되는 문제 차량의 차량 정보를 포함하는 데이터베이스 정보를 비교함에 의하여 이벤트 상황을 감지하고, 그 감지 결과에 따른 이벤트 정보를 전송하는 단계;
    상기 지능형 검색 서버에서, 상기 번호가 인식된 차량이 촬영된 영상 정보를 수신하고, 상기 영상 정보를 분석한 결과 및 상기 데이터베이스 정보를 분석한 결과에 따라, 상기 차량 자체의 정보나 상기 차량의 예상 이동 경로 정보에 대한 분석 결과를 전송하는 단계; 및
    상황 전파 서버에서, 상기 이벤트 정보와 함께 상기 문제 차량에 관련된 분석 결과를 수신하고, 기 설정된 상황 전파 시나리오에 따라 적어도 하나의 외부 서버로 상황 전파를 전송하는 단계를 구비하고,
    상기 차량 지능형 검색 시스템의 동작방법은, 번호 인식 서버에서 상기 주행 영상으로부터 상기 차량 번호를 인식하기 위한 번호 인식 단계를 더 구비하고,
    상기 번호 인식 단계는,
    하나 이상의 카메라들로부터의 동영상을 초당 제1 개수의 프레임으로 수신하는 단계;
    상기 수신된 동영상으로부터, 변동 가능한 개수로서 초당 제2 개수의 프레임에 해당하는 정지 영상들을 차량 인식을 위해 추출하는 단계;
    상기 추출된 정지 영상들 중 일부의 프레임들 사이의 차분 결과를 분석하여 모션 감지 및 주행방향 검출 결과을 수행하고, 상기 감지 및 검출 결과에 기반하여 차량 인식 결과를 출력하는 단계;
    상기 추출된 정지 영상들 중 차량이 인식된 정지 영상만을 대상으로 하여 수평 및 수직 추출 동작을 통해 번호판을 추출하고, 추출된 번호판에 대해 기하학적 정형화 기법에 따른 번호판 정형화 동작을 수행하며, 정형화된 번호판 내에 존재하는 개별 문자를 추출함에 의하여 번호판을 감지하는 단계; 및
    추출된 개별 문자에 대한 번호 인식 처리동작을 수행함에 의하여 차량 번호의 인식 결과를 출력하는 단계를 구비하는 것을 특징으로 하는 차량 지능형 검색 시스템의 동작방법.
  2. 삭제
  3. 제1항에 있어서, 상기 번호판을 감지하는 단계는,
    상기 정지 영상에 대해 잡영 제거를 포함하는 이미지 보정을 수행하는 단계;
    윤곽선 추출 기법을 적용함에 의하여 번호판의 위치를 추정하는 단계;
    윤곽선을 기준으로 하여 기울기 보정을 수행함으로써 번호판을 추출하는 단계;
    상기 번호판의 추출 결과를 이용하여 기하학적 정형화 기법을 적용하여 번호판을 정형화하는 단계;
    상기 번호판 정형화 결과에 기반하여 상기 번호판 내의 개별 문자를 추출하는 단계를 포함하는 것을 특징으로 하는 차량 지능형 검색 시스템의 동작방법.
  4. 제1항에 있어서,
    상기 상황 전파 및 상기 차량에 대한 분석 결과는 상기 카메라를 제어하기 위한 영상 관제 서버로 제공되며,
    상기 분석 결과에 기반하여, 상기 영상 관제 서버에 의하여 상기 차량을 촬영한 제1 카메라에 연계된 제2 카메라의 촬영 방향이 변동되도록 제어하는 단계를 더 구비하는 것을 특징으로 하는 차량 지능형 검색 시스템의 동작방법.
  5. 제1항에 있어서,
    상기 상황 전파를 GIS 서버로 제공함과 함께, 상기 차량에 대한 분석 결과를 상기 GIS 서버로 제공하는 단계; 및
    상기 상황 전파의 수신에 응답하여, 상기 GIS 서버가 상기 차량의 현재 위치 및 예상 이동 경로를 지도 상에 출력하는 단계를 더 구비하는 것을 특징으로 하는 차량 지능형 검색 시스템의 동작방법.
  6. 차량 지능형 검색 시스템에 있어서,
    지능형 검색 서버; 및
    상황 전파 서버를 구비하고,
    상기 지능형 검색 서버는, 카메라로부터 촬영된 차량의 주행 영상으로부터 검출된 차량 번호 인식 결과를 수신하고, 상기 수신된 차량 번호 인식 결과와 정보 제공 서버로부터 제공되는 문제 차량의 차량 정보를 포함하는 데이터베이스 정보를 비교함에 의하여 이벤트 상황을 감지하고, 그 감지 결과에 따른 이벤트 정보를 전송하며, 상기 번호가 인식된 차량이 촬영된 영상 정보를 수신하고, 상기 영상 정보를 분석한 결과 및 상기 데이터베이스 정보를 분석한 결과에 따라, 상기 차량 자체의 정보나 상기 차량의 예상 이동 경로 정보에 대한 분석 결과를 전송하고,
    상기 상황 전파 서버는, 상기 이벤트 정보와 함께 상기 문제 차량에 관련된 분석 결과를 수신하고, 기 설정된 상황 전파 시나리오에 따라 적어도 하나의 다른 서버로 상황 전파를 전송하고,
    상기 차량 지능형 검색 시스템은, 상기 주행 영상으로부터 상기 차량 번호를 인식하기 위한 번호 인식 서버를 더 구비하고,
    상기 번호 인식 서버는,
    하나 이상의 카메라들로부터의 동영상을 초당 제1 개수의 프레임으로 수신하고, 상기 수신된 동영상으로부터 변동 가능한 개수로서 초당 제2 개수의 프레임에 해당하는 정지 영상들을 차량 인식을 위해 추출하며, 상기 추출된 정지 영상들 중 일부의 프레임들 사이의 차분 결과를 분석하여 모션 감지 및 주행방향 검출을 수행하고, 상기 감지 및 검출 결과에 기반하여 차량 인식 결과를 출력하고, 상기 추출된 정지 영상들 중 차량이 인식된 정지 영상만을 대상으로 하여 수평 및 수직 추출 동작을 통해 번호판을 추출하고, 추출된 번호판에 대해 기하학적 정형화 기법에 따른 번호판 정형화 동작을 수행하며, 정형화된 번호판 내에 존재하는 개별 문자를 추출함에 의하여 번호판을 감지하며, 추출된 개별 문자에 대한 번호 인식 처리동작을 수행함에 의하여 차량 번호의 인식 결과를 출력하는 것을 특징으로 하는 차량 지능형 검색 시스템.
  7. 삭제
  8. 제6항에 있어서,
    상기 상황 전파 및 상기 차량에 대한 분석 결과는 상기 카메라를 제어하기 위한 영상 관제 서버로 제공되며,
    상기 분석 결과에 기반하여, 상기 차량을 촬영한 제1 카메라에 연계된 제2 카메라의 촬영 방향이 변동되도록 제어되는 것을 특징으로 하는 차량 지능형 검색 시스템.
KR1020130146424A 2013-11-28 2013-11-28 차량 지능형 검색 시스템 및 그 동작방법 KR101453386B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130146424A KR101453386B1 (ko) 2013-11-28 2013-11-28 차량 지능형 검색 시스템 및 그 동작방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130146424A KR101453386B1 (ko) 2013-11-28 2013-11-28 차량 지능형 검색 시스템 및 그 동작방법

Publications (1)

Publication Number Publication Date
KR101453386B1 true KR101453386B1 (ko) 2014-10-22

Family

ID=51998406

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130146424A KR101453386B1 (ko) 2013-11-28 2013-11-28 차량 지능형 검색 시스템 및 그 동작방법

Country Status (1)

Country Link
KR (1) KR101453386B1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190018298A (ko) * 2017-08-14 2019-02-22 주식회사 가산 법규위반차량 통합관제 시스템 및 방법과, 이를 위한 모바일 장치 및 컴퓨터 프로그램
CN110182213A (zh) * 2019-05-28 2019-08-30 径卫视觉科技（上海）有限公司 一种道路状态检测方法以及相应的系统
KR102030352B1 (ko) * 2019-05-22 2019-11-08 비원이미지 주식회사 차량번호 인식에 기반한 실시간 차량 추적 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030009149A (ko) * 2001-07-18 2003-01-29 김성호 감시 차량을 이용한 피감시 차량의 차량번호 자동인식시스템 및 방법
KR200367191Y1 (ko) 2004-08-17 2004-11-09 한국이미지시스템(주) 차량 단속시스템
KR20090048369A (ko) * 2007-11-08 2009-05-13 (주) 충청에스엔지 지리정보시스템를 이용한 차량 추적 시스템
KR20110094393A (ko) * 2010-02-16 2011-08-24 (주)모노시스 불법차량 자동단속시스템 및 그 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030009149A (ko) * 2001-07-18 2003-01-29 김성호 감시 차량을 이용한 피감시 차량의 차량번호 자동인식시스템 및 방법
KR200367191Y1 (ko) 2004-08-17 2004-11-09 한국이미지시스템(주) 차량 단속시스템
KR20090048369A (ko) * 2007-11-08 2009-05-13 (주) 충청에스엔지 지리정보시스템를 이용한 차량 추적 시스템
KR20110094393A (ko) * 2010-02-16 2011-08-24 (주)모노시스 불법차량 자동단속시스템 및 그 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190018298A (ko) * 2017-08-14 2019-02-22 주식회사 가산 법규위반차량 통합관제 시스템 및 방법과, 이를 위한 모바일 장치 및 컴퓨터 프로그램
KR102024317B1 (ko) * 2017-08-14 2019-09-23 주식회사 가산 법규위반차량 통합관제 시스템 및 방법과, 이를 위한 모바일 장치 및 컴퓨터 프로그램
KR102030352B1 (ko) * 2019-05-22 2019-11-08 비원이미지 주식회사 차량번호 인식에 기반한 실시간 차량 추적 시스템
CN110182213A (zh) * 2019-05-28 2019-08-30 径卫视觉科技（上海）有限公司 一种道路状态检测方法以及相应的系统

Similar Documents

Publication Publication Date Title
KR101298684B1 (ko) 무 감지센서 기반의 차량 번호 인식 시스템 및 그 동작방법
KR101793636B1 (ko) 통합 지능형 cctv 영상 처리 시스템
JP5400138B2 (ja) 電子的監視のためのシステム、方法、コンピュータプログラム及びコンピュータ読み取り可能な媒体
WO2018223955A1 (zh) 目标监控方法、目标监控装置、摄像机及计算机可读介质
KR101696801B1 (ko) 사물 인터넷(IoT) 카메라 기반의 통합 영상 감시 시스템
KR102122859B1 (ko) 교통 영상감시시스템의 멀티 표적 추적 방법
EP2903261B1 (en) Apparatus and method for detecting event from plurality of photographed images
US20120179742A1 (en) Integrated intelligent server based system and method/systems adapted to facilitate fail-safe integration and/or optimized utilization of various sensory inputs
KR101877294B1 (ko) 객체, 영역 및 객체가 유발하는 이벤트의 유기적 관계를 기반으로 한 복수 개 기본행동패턴 정의를 통한 복합 상황 설정 및 자동 상황 인지가 가능한 지능형 방범 ｃｃｔｖ 시스템
JP2015508591A (ja) クラウドベースの映像監視管理システム
CN113256924A (zh) 一种轨道列车的监控系统，监控方法及监控装置
KR101964683B1 (ko) 스마트 영상처리장치 및 그 장치의 구동방법
CN104200671A (zh) 一种基于大数据平台的虚拟卡口管理方法及系统
KR102282800B1 (ko) 라이다와 영상카메라를 이용한 멀티 표적 추적 방법
KR101678004B1 (ko) 노드-링크 기반 카메라 네트워크 통합 감시 시스템 및 감시 방법
WO2018031096A1 (en) Methods and systems of performing blob filtering in video analytics
US20160210759A1 (en) System and method of detecting moving objects
KR102397837B1 (ko) 엣지 컴퓨팅 기반 보안 감시 서비스 제공 장치, 시스템 및 그 동작 방법
KR100948382B1 (ko) 방범 서비스 방법 및 시스템
GB2562018A (en) A method and system for analyzing the movement of bodies in a traffic system
KR101290782B1 (ko) 지능적 다중 객체 추적 알고리즘 기반의 다중 ｐｔｚ 카메라 제어 시스템 및 방법
KR101453386B1 (ko) 차량 지능형 검색 시스템 및 그 동작방법
KR20100053318A (ko) 코너정보를 이용한 끼어들기 위반차량 검지시스템 및 그 방법
KR101840042B1 (ko) 복합 가상 팬스 라인 설정 방법 및 이를 이용한 침입 감지 시스템
US11727580B2 (en) Method and system for gathering information of an object moving in an area of interest

Legal Events

Date Code Title Description
AMND Amendment
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20170928

Year of fee payment: 6