KR101756391B1 - 객체 이미지들을 링크하고, 빅데이터 분석 시스템과 연동이 가능한 객체 이미지 링크 시스템, 이를 포함하는 통합 관제 시스템 및 그 동작방법 - Google Patents

Abstract

본 발명에 따른 이미지 링크 제어 서버 및 적어도 하나의 이미지 링커를 포함하는 통합 관제 시스템의 동작방법은, 제 1 카메라에 의해 촬영된 영상으로부터 제 1 객체에 대한 제 1 객체 이미지들을 추출하고, 제 2 카메라에 의해 촬영된 영상으로부터 제 2 객체에 대한 제 2 객체 이미지들을 추출하는 단계, 상기 제 1 객체 이미지들의 각각을 서로 비교하여, 상기 비교 결과를 이용하여, 상기 제 1 객체 이미지들을 필터링함으로써 제 1 객체 선택 이미지들을 생성하고, 상기 제 2 객체 이미지들의 각각을 서로 비교하여, 상기 비교 결과를 이용하여, 상기 제 2 객체 이미지들을 필터링함으로써 제 2 객체 선택 이미지들을 생성하는 단계, 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 비교하여, 상기 제 1 객체와 상기 제 2 객체가 동일한 객체인지 여부를 판단하는 단계 및 상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 링크시키는 단계를 포함한다.

Description

객체 이미지들을 링크하고, 빅데이터 분석 시스템과 연동이 가능한 객체 이미지 링크 시스템, 이를 포함하는 통합 관제 시스템 및 그 동작방법{OBJECT LINK SYSTEM, INTERGRATED CONTROL SYSTEM HAVING THE SAME LINKING THE OBJECT IMAGES AND BIG DATA ANALYSIS SYSYTEM, AND OPERATING METHOD THEREOF}

본 발명은 객체 이미지 링크 시스템, 이를 포함하는 통합 관제 시스템에 관한 것이다. 본 발명은 산업통상자원부와 한국산업기술진흥원의 국제공동기술개발사업의 지원을 받아 수행된 연구로부터 도출된 것이다 (과제고유번호:N016600004, 연구과제명 : BDaas(Big Data as a Service)를 위한 협업분석 플랫폼 개발).

일반적으로, 도시를 관리하기 위한 목적이나 각종 범죄에 대한 증거자료 확보 및 대응을 하기 위하여 다수의 카메라들이 차도나 인도에 설치되고 있다. 설치되는 카메라의 일종으로서 폐쇄 회로 티브이(CCTV)가 대표적이다. 관제 센터(또는, 통합 관제 시스템)은 도시 곳곳에 설치된 CCTV들로부터 촬영된 영상을 수신하고 이를 재생함으로써 모니터링에 의한 감시 동작을 수행할 수 있다.

그러나, 다수의 CCTV 들로부터 촬영된 객체가 동일한 경우에도, 각각의 CCTV 에는 각기 다른 객체로써 식별되고 상기 객체에 대한 객체 이미지들이 개별적으로 저장되어 관리된다. 따라서, 동일한 객체에 대한 객체 이미지를 수집하기 위해서는, 각각의 CCTV 에 의해 촬영된 영상을 모두 검색해야되는 비효율적인 문제가 발생한다.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 다수의 카메라들(예컨대, CCTV 들)로부터 촬영된 영상으로부터 객체 이미지들을 추출하여, 동일한 객체의 객체 이미지들을 서로 링크하여 효율적으로 특정 이동 객체에 대한 객체 이미지를 수집할 수 있는 객체 이미지 링크 시스템, 이를 포함하는 통합 관제 시스템 및 그 동작방법을 제공하는 것을 목적으로 한다.

본 발명에 따른 이미지 링크 제어 서버 및 적어도 하나의 이미지 링커를 포함하는 통합 관제 시스템의 동작방법은, 제 1 카메라에 의해 촬영된 영상으로부터 제 1 객체에 대한 제 1 객체 이미지들을 추출하고, 제 2 카메라에 의해 촬영된 영상으로부터 제 2 객체에 대한 제 2 객체 이미지들을 추출하는 단계, 상기 제 1 객체 이미지들의 각각을 서로 비교하고, 상기 비교 결과를 이용하여, 상기 제 1 객체 이미지들을 필터링함으로써 제 1 객체 선택 이미지들을 생성하고, 상기 제 2 객체 이미지들의 각각을 서로 비교하고, 상기 비교 결과를 이용하여, 상기 제 2 객체 이미지들을 필터링함으로써 제 2 객체 선택 이미지들을 생성하는 단계, 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 비교하여, 상기 제 1 객체와 상기 제 2 객체가 동일한 객체인지 여부를 판단하는 단계 및 상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 링크시키는 단계를 포함한다.

또한, 상기 제 1 객체 선택 이미지들을 생성하는 단계는, 상기 제 1 객체 이미지들 중 기준 이미지를 선택하여, 상기 기준 이미지와 상기 제 1 객체 이미지들을 비교하여 유사도를 계산하는 단계 및 상기 제 1 객체 이미지들 중 상기 기준 객체 이미지와의 유사도가 기준값 이상인 것을 필터링하는 단계를 포함하는 것을 특징으로 한다.

또한, 상기 제 1 객체 선택 이미지들을 생성하는 단계는, 상기 기준 이미지를 제외한 상기 필터링된 제 1 객체 이미지들 중에서 기준 이미지를 선택하지 못할 때까지 반복하여 상기 필터링 동작을 수행하는 것을 특징으로 한다.

또한, 상기 통합 관제 시스템은 저장/분배 서버를 더 포함하고, 상기 저장/분배 서버는, 상기 제 1 카메라 및 상기 제 2 카메라에 의해 촬영된 영상으로부터 소정의 시간 동안 객체가 감지되지 않는 때에, 상기 이미지 링크 제어 서버에 유휴 신호(IDLE)를 제공하고, 상기 이미지 링크 제어 서버는 상기 유휴 신호에 응답하여, 상기 제 1 객체 선택 이미지들 및 상기 제 2 객체 선택 이미지들을 생성하도록 상기 이미지 링커를 제어하는 것을 특징으로 한다.

또한, 상기 제 1 객체와 상기 제 2 객체가 동일한 객체인지 여부를 판단하는 단계는, 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들간의 다수의 유사도들을 계산하는 단계 및 상기 다수의 유사도들의 평균값이 기준값 이상인 때에, 상기 제 1 객체와 상기 제 2 객체가 동일한 객체인 것으로 판단하는 단계를 더 포함하는 것을 특징으로 한다.

또한, 클라이언트로부터 상기 제 1 객체에 대한 링크 요청을 수신하는 단계 및 상기 링크 요청에 응답하여, 상기 제 1 객체 선택 이미지들과 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 포함하는 객체 링크 이미지들을 상기 클라이언트에게 제공하는 단계를 더 포함하는 것을 특징으로 한다.

또한, 클라이언트로부터 상기 제 1 객체에 대한 트래킹 요청을 수신하는 단계, 상기 트래킹 요청에 응답하여, 링크된 상기 제 1 객체 선택 이미지들 및 상기 제 2 객체 선택 이미지들을 각각 추출된 시간 순으로 정렬하는 단계 및 상기 시간 기반 객체 이미지들과 대응되는 상기 제 1 카메라 및 상기 제 2 카메라의 위치 정보를 기반으로 상기 제 1 객체의 시간별 위치 정보를 생성하는 단계 및 상기 제 1 객체의 시간별 위치 정보를 포함하는 트래킹 정보를 상기 클라이언트에 제공하는 단계를 더 포함하는 것을 특징으로 한다.

본 발명의 또 다른 실시예에 따른 통합 관제 시스템에 구비되는 적어도 하나의 객체 이미지 링크 시스템의 동작방법은, 제 1 카메라에 의해 촬영된 제 1 객체에 대한 제 1 객체 선택 이미지들과 제 2 카메라에 의해 촬영된 제 2 객체에 대한 제 2 객체 선택 이미지들을 포함하는 객체 이미지들을 수신하는 단계, 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 비교하여 유사도를 계산하고, 상기 유사도를 이용하여 상기 제 1 객체와 상기 제 2 객체의 동일 여부를 판단하는 단계, 상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 링크시키는 단계를 포함한다.

또한, 상기 제 1 카메라의 위치 정보를 참조하여, 복수의 카메라들 중 상기 제 1 카메라와 제 1기준 거리내에 위치한 상기 제 2 카메라를 선택하는 단계를 더 포함하는 것을 특징으로 하는 이미지 링크 시스템의 동작방법.

또한, 상기 제 2 객체 선택 이미지들을 포함하는 객체 이미지들은, 상기 제 2 카메라에 의해 촬영된 제 3 객체에 대한 제 3 객체 선택 이미지들을 포함하며, 상기 제 1 객체 선택 이미지들과 상기 제 3 객체 선택 이미지들을 비교하여 유사도를 계산하고, 상기 유사도를 이용하여 상기 제 1 객체와 상기 제 3 객체의 동일 여부를 판단하는 단계, 상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 3 객체 선택 이미지들을 링크시키는 단계를 포함한다.

상기한 바와 같은 본 발명의 객체 이미지 링크 시스템, 이를 포함하는 통합 관제 시스템 및 그 동작방법에 따르면, 서로 다른 CCTV들로부터 촬영된 객체들의 객체 이미지들 중에서 링크 요청된 객체와 동일한 객체들의 객체 이미지들을 서로 링크시켜 별도의 검색 동작 없이 한꺼번에 클라이언트에 객체 링크 이미지들을 제공할 수 있는 효과가 있다.

도 1은 본 발명의 일 실시예에 따른 통합 관제 시스템의 일 구현예를 나타내는 도면이다.
도 2는 도 1 의 저장/분배 서버의 일 구현예를 나타내는 블록도이다.
도 3a 및 도 3b 는 이미지 링크 제어서버의 일 구현예와 객체 선택 이미지들을 생성하는 방법을 설명하기 위한 도면이다.
도 4a 내지 도 4c 는 이미지 링크 제어서버의 일 구현예와 링크 동작의 대상이 되는 소스를 이미지 링커에 할당해주는 동작을 설명하기 위한 도면이다.
도 5a 및 도 5b는 이미지 링커의 일 구현예와 이미지 링커가 객체 링크 이미지들을 생성하는 방법을 설명하기 위한 도면이다.
도 6a 및 도 6b는 이미지 링커의 또 다른 일 구현예와 이미지 링커가 트래킹 정보를 생성하는 방법을 설명하기 위한 도면이다.
도 7은 본 발명의 일 실시예에 따른 통합 관제 시스템의 링크 동작을 순서대로 나타내는 순서도이다.
도 8은 본 발명의 일 실시예에 따른 통합 관제 시스템의 트래킹 정보를 생성하는 방법을 순서대로 나타내는 순서도이다.

본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시 예를 예시하는 첨부 도면 및 도면에 기재된 내용을 참조하여야 한다.

이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시 예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.

도 1은 본 발명의 일 실시예에 따른 통합 관제 시스템의 일 구현예를 나타내는 도면이다. 도 1에 도시된 바와 같이, 본 발명의 일실시예에 따른 통합 관제 시스템(100)은 마스터 서버(111), 하나 이상의 레코딩 서버(Recording Server#1 ∼ Recording Server#n, 112), 영상 스토리지부(120), 영상 관리 시스템(Video Management System, 130) 및 객체 이미지 링크 시스템(140)을 포함할 수 있다. 도 1에는 도시되지 않았으나, 영상에 대한 구체적인 분석 동작을 수행하는 별도의 영상 분석 시스템(Video Analysis System, 미도시)이 통합 관제 시스템(100)에 더 구비될 수 있다.

레코딩 서버(112)는 네트워크를 통해 수신되는 다수 개의 카메라들로부터의 영상들을 통합 관제 시스템(100) 내의 각종 서버, 클라이언트로 분배하거나 영상 스토리지부(120)에 저장되도록 관리하며, 이에 따라 레코딩 서버(112)는 저장/분배 서버로 지칭될 수 있다. 이하, 본 발명의 실시예에서는 상기 레코딩 서버(112)가 저장/분배 서버로 지칭될 것이다.

한편, 영상 관리 시스템(VMS, 130)은 하나 이상의 VMS 클라이언트들(VMS Client#1 ∼ VMS Client#k)을 포함할 수 있다. 또한, 영상 스토리지부(120)는 다수 개의 영상 스토리지들을 포함할 수 있다. 또한, 도 1에는 통합 관제 시스템(100)과 네트워크를 통해 연결되는 다수의 CCTV들(101) 및 영상 서버(102)가 더 도시된다. 다수의 CCTV들(101)은 다양한 종류의 CCTV들을 포함할 수 있으며, 예컨대 디지털 CCTV와 아날로그 CCTV가 포함될 수 있다. 또한, 영상 서버(102)는 다수의 CCTV들(101)로부터 제공되는 영상에 대한 소정의 신호 처리를 수행하고, 신호 처리된 영상이 네트워크를 통해 통합 관제 시스템(100)으로 제공될 수 있다.

다수의 CCTV들(101)은 통합 관제 시스템(100)에 의한 관리 서비스가 제공되는 구역에 설치될 수 있다. 또한, 통합 관제 시스템(100)를 운영하는 사용자의 조작을 통해 다수의 CCTV들(101)의 패닝(Panning), 틸트(Tilt) 및 줌(Zoom) 등(PTZ)을 제어할 수 있다. 또는, 통합 관제 시스템(100) 내부의 제어수단을 통해 다수의 CCTV들(101)의 PTZ가 자동 제어될 수 있다.

도 1에서는 통합 관제 시스템(100)에 구비될 수 있는 각종 시스템 및 서버/클라이언트의 일 구현 예가 도시된 것으로서, 본 발명의 실시예에 따른 통합 관제 시스템(100)은 다양하게 구현될 수 있다. 예컨대, 마스터 서버(111)는 하나 이상의 개수로서 통합 관제 시스템(100)에 구비되어도 무방하다. 또한, n 개의 저장/분배 서버(112), k 개의 VMS 클라이언트들이 도 1에 도시되었으며, 각각의 서버 또는 클라이언트의 개수는 다양하게 변경이 가능하다.

마스터 서버(111)는 통합 관제 시스템(100) 전체의 관리에 관련된 동작을 수행할 수 있으며, 예컨대 마스터 서버(111)는 다수의 CCTV들(101)에 관련된 정보를 저장하고, 다수의 CCTV들(101)로부터 영상이 수신될 때 상기 저장된 정보를 참조하여 저장/분배 서버들(112)을 제어할 수 있다. 일 예로서, 마스터 서버(111)는 수신되는 영상에 포함될 수 있는 CCTV ID 정보를 확인하고, 다수의 저장/분배 서버들(112)들 각각이 자신에게 할당된 영상을 처리하도록 제어할 수 있다. 다수의 CCTV들(101)에 관련된 정보로서, 각각의 CCTV의 ID 정보, 각각의 CCTV가 설치된 위치 정보로서 경도 및 위도 등의 정보, CCTV들과 저장/분배 서버들(112) 사이의 할당 정보를 저장하고, 수신된 영상을 관리함에 있어서 상기 정보들에 따라 저장/분배 서버들(112)을 제어할 수 있다.

본 발명의 일 실시예에 따라 저장/분배 서버들(112) 각각은 객체 이미지 추출부(112_a)를 포함할 수 있다. 객체 이미지 추출부(112_a)는 CCTV 로부터 촬영된 영상으로부터 객체별로 객체 이미지들을 추출할 수 있다. 객체 이미지 추출부(112_a)는 상기 객체 이미지들을 추출하기 위한 코덱 모듈을 포함할 수 있다. 또한, 저장/분배 서버들(112) 각각은 추출된 객체 이미지들이 객체별, 촬영된 CCTV 별로 구분되어 관리될 수 있도록, 스위치(SW)를 제어하여 영상 스토리지부(120)에 촬영된 CCTV별, 객체별로 구분하여 객체 이미지들을 저장할 수 있다. 예를 들면, 제 1 CCTV(CCTV 1) 에서 촬영된 제 1 객체에 대한 객체 이미지들과 제 2 CCTV(CCTV 2) 에서 촬영된 제 2 객체에 대한 객체 이미지들은 서로 다른 영역에 저장될 수 있으며, 제 1 CCTV(CCTV 1) 에서 촬영된 제 1 객체에 대한 객체 이미지들과 제 1 CCTV(CCTV 1) 에서 촬영된 제 3 객체에 대한 객체 이미지들도 서로 다른 영역에 저장될 수 있다. 다만, 제 1 CCTV 내지 제 J CCTV(CCTV 1 ~ CCTV J)가 동일한 객체를 촬영하여 각각 객체 이미지들이 추출되어도, 촬영된 CCTV 가 각각 다르기 때문에 다른 객체로 구분되어 영상 스토리지부(120)에 저장되게 된다.

객체 이미지 링크 시스템(140)은 위와 같이 서로 다른 CCTV로부터 촬영된 객체가 서로 동일한 객체인 때에 동일한 객체와 관련된 객체 이미지들을 서로 링크시키는 동작을 수행하기 위하여, 이미지 링크 제어서버(141) 및 다수의 이미지 링커들(142_1~142_l)을 포함할 수 있다. 이미지 링크 제어서버(141)는 소정의 CCTV 에서 촬영되어 링크 요청된 객체의 객체 이미지들과 상기 링크 요청된 객체와 동일한 객체로서, 상기 소정의 CCTV와 다른 CCTV들(101)에 의해 촬영되어 저장/분배 서버(112)로부터 추출된 객체 이미지들을 링크하는 동작을 수행하도록 이미지 링커들(142_1~142_l)을 제어할 수 있다. 또한, 이미지 링크 제어서버(141)는 다수의 CCTV들(101)로부터 촬영된 영상으로부터 추출된 객체 이미지들을 하나 이상의 이미지 링커(141_1)에 할당하여, 링크 동작 수행을 제어할 수 있다.

상기 링크 동작이란, 이미지 링커들(142_1~142_l)이 링크 요청된 객체에 대하여, 서로 다른 CCTV에서 촬영된 각각의 객체가 링크 요청된 객체와 동일한 객체인지 여부를 판단하고, 상기 링크 요청된 객체와 관련된 객체 이미지들과 상기 링크 요청된 객체와 동일하다고 판단된 객체의 객체 이미지들을 서로 링크시키는 일련의 동작들을 포함하는 포괄적인 동작일 수 있다.

이미지 링커들(142_1~142_l)은 객체별로 링크 대상이 되는 객체 이미지를 선택하여 객체 선택 이미지들을 생성할 수 있다. 일 실시예로, 제 1이미지 링커(142_1)는 스위치(SW)를 제어하여, 영상 스토리지부(120)로부터 제 1 CCTV(CCTV 1) 에 의하여 촬영된 복수의 객체들에 대한 객체 이미지들을 수신할 수 있으며, 각각의 객체별로 링크 동작의 대상이 될 수 있는 객체 이미지들을 선택할 수 있다. 제 2 이미지 링커(142_2)는 스위치(SW)를 제어하여, 영상 스토리지부(120)로부터 제 2 CCTV(CCTV 2) 에 의하여 촬영된 복수의 객체들에 대한 객체 이미지들을 수신할 수 있으며, 각각의 객체별로 링크 동작의 대상이 될 수 있는 객체 이미지들을 선택할 수 있다. 이와 같이, 링크 동작의 대상이 되는 객체 이미지들의 개수를 미리 줄임으로써, 링크 동작에 수행되는 연산량을 줄일 수 있다. 객체별로 객체 선택 이미지들을 생성하는 구체적인 방법은 후술한다.

또한, 이미지 링커들(142_1~142_l)은 다수의 CCTV들(101)에 의해 촬영된 각각의 복수의 객체들이 링크 요청된 객체와 동일한 객체인지 여부를 판단할 수 있다. 예를 들어, 링크 요청된 제 1 CCTV(CCTV 1) 에 의해 촬영된 제 1 객체와 제 2 CCTV(CCTV 2)에 의해 촬영된 제 2 객체가 동일한 객체인지 판단할 수 있다. 이를 위하여, 이미지 링커들(142_1~142_l)은 영상 스토리지부(120)로부터 제 1 객체에 대한 제 1 객체 선택 이미지들 및 제 2 객체에 대한 제 2 객체 선택 이미지들을 수신할 수 있다. 이미지 링커들(142_1~142_l)은 제 1 객체 선택 이미지들 및 제 2 객체 선택 이미지들을 서로 비교하여, 유사도를 계산하고 이를 기반으로 제 1 객체와 제 2 객체가 동일한 객체인지를 판단할 수 있다.

이미지 링커들(142_1~142_l)은 링크 요청된 객체의 객체 선택 이미지들과 동일한 객체로 판단된 객체의 객체 선택 이미지들을 서로 링크시킬 수 있다. 예를 들어, 링크 요청된 객체에 해당하는 제 1 CCTV(CCTV 1) 에 의해 촬영된 제 1 객체의 제1 객체 선택 이미지들과 제 2 CCTV(CCTV 2)에 의해 촬영된 제 2 객체의 제 2 객체 선택 이미지들을, 상기 제 1 객체와 상기 제 2 객체가 동일하다고 판단되는 때에, 링크 시킬 수 있다. 이와 같은 방법으로, 이미지 링커들(142_1~142_l)은 제 1 CCTV(CCTV 1) 이외에 다른 CCTV에서 촬영된 복수의 객체들 중 상기 제 1 객체와 동일한 객체에 해당되는 적어도 하나의 객체의 객체 선택 이미지들을 상기 제 1 객체 선택 이미지들과 링크시킬 수 있다. 특정 객체의 객체 선택 이미지들과 상기 특정 객체의 객체 선택 이미지들과 링크된 객체 선택 이미지들을 포함하는 이미지를 객체 링크 이미지들로 지칭할 수 있다. 이미지 링커들(142_1~142_l)은 제 1 객체의 제 1 객체 링크 이미지들을 생성하여, 영상 스토리지부(120)에 저장할 수 있으며, 소정의 VMS 클라이언트에 상기 제 1 객체의 제 1 객체 링크 이미지들을 제공할 수 있다.

즉, 객체 이미지 링크 시스템(140)은 동일한 객체가 서로 다른 CCTV에서 촬영되어 생성된 객체 선택 이미지들을 서로 링크시킬 수 있으며, 링크된 객체 선택 이미지들은 객체별로 관리될 수 있다.

도 2는 도 1 의 저장/분배 서버의 일 구현예를 나타내는 블록도이다. 도 2에는 저장/분배 서버(220)와 함께 마스터 서버(210) 및 영상 스토리지부(260)를 포함하는 통합 관제 시스템(200)이 도시된다.

저장/분배 서버(220)는 시스템 제어부(221), 입출력부(222), 객체 이미지 추출부(223) 및 이미지 경로 제어부(224)를 포함할 수 있다. 객체 이미지 추출부(223)는 객체 감지부(223_a) 및 객체 이미지 캡쳐부(223_b)를 포함할 수 있다.

시스템 제어부(221)는 저장/분배 서버(220)의 전반적인 동작을 제어하며, 본 발명의 실시예에 따라 시스템 제어부(210)는 객체 이미지 추출부(223)를 제어하여, 해당 저장/분배 서버(220)에 할당된 CCTV들에 의하여 촬영되어 수신되는 영상으로부터 객체별로 객체 이미지를 추출하도록 제어할 수 있다. 입출력부(222)는 저장/분배 서버(220)와 주변 서버 또는 클라이언트와 통신을 수행하여 각종 정보들을 입출력한다.

객체 이미지 추출부(223)는 영상을 수신하여 객체 이미지들을 추출할 수 있다. 객체 감지부(223_a)는 상기 영상을 분석하여, 영상에 소정의 카테고리로 분류될 수 있는 객체가 존재하는 지를 판단하고 그 감지 결과를 발생할 수 있다. 객체 이미지 캡쳐부(223_b)는 상기 감지 결과에 기반하여, 감지된 객체별로 그에 대응하는 객체 이미지들을 영상으로부터 캡쳐함으로써, 객체별로 객체 이미지들(Images A)을 생성할 수 있다. 또 다른 실시예로, 객체 이미지 캡쳐부(223_b)는 객체별로 객체 이미지들(Images A)은 어떠한 CCTV에서 촬영되어 추출된 것인지를 나타내는 소스태그정보(STAG)를 생성하여, 상기 태그정보를 기반으로 상기 객체별 객체 이미지들(Images A)이 관리될 수 있도록 상기 객체별 객체 이미지들(Images A)과 함께 상기 소스태그정보(STAG)를 영상 스토리지부(260)에 저장할 수 있다. 예를 들면, 영상 스토리지부(260)에는 제 1 CCTV에서 촬영된 영상으로부터 추출된 제 1 객체에 대한 제 1 객체 이미지들과 제 1 CCTV가 소스(Source)임을 나타내는 소스태그정보(STAG)가 함께 저장될 수 있으며, 제 2 CCTV 에서 촬영된 영상으로부터 추출된 제 2 객체에 대한 제 2 객체 이미지들과 제 2 CCTV가 소스(Source)임을 나타내는 소스태그정보(STAG)가 함께 저장될 수 있다. 이하, 본 발명의 실시예에서 특정 CCTV 로부터 촬영된 영상으로부터 촬영된 특정 객체는 특정 소스의 특정 객체라 지칭하겠다. 예를 들면, 제 1 CCTV로부터 촬영된 제 1 객체에 대하여, 제 1 소스의 제 1 객체라고 지칭할 수 있다. 또한, 특정 객체의 객체 이미지들은 특정 객체 이미지들이라고 지칭하겠다.

더 나아가, 객체 이미지 캡쳐부(223_b)는 감지된 객체별로 그에 대응하는 객체 이미지들을 영상으로부터 캡쳐할 때에, 각각의 객체 이미지가 캡쳐될 때의 시간 정보를 생성할 수 있으며, 상기 시간 정보를 각각에 대응되는 객체 이미지와 함께 영상 스토리지부(360a)에 저장할 수 있다. 한편, 이미지 경로 제어부(224)는 추출된 객체별 객체 이미지들, 각 객체 이미지들에 대응하는 소스태그정보 및 시간 정보를 대응되는 영상 스토리지부(260)에 저장할 수 있도록 이미지 경로를 제어할 수 있다.

도 3a 및 도 3b 는 이미지 링크 제어서버의 일 구현예와 객체 선택 이미지들을 생성하는 방법을 설명하기 위한 도면이다. 도 3a에 도시된 바와 같이, 통합 관제 시스템(300)은 저장/분배 서버(320), VMS 클라이언트(330), 이미지 링크 제어서버(340), 이미지 링커(350) 및 영상 스토리지부(360)를 포함할 수 있다.

이하, 저장/분배 서버(320)는 도 1 의 CCTV 들(101) 중 제 1 CCTV(CCTV 1) 및 제 2 CCTV(CCTV 2)가 할당되어, 제 1 CCTV(CCTV 1) 및 제 2 CCTV(CCTV 2)로부터 촬영된 영상을 분석하고, 객체 이미지들을 추출하는 것을 가정한다. 이 때, 저장/분배 서버(320)에 할당된 제 1 CCTV(CCTV 1) 및 제 2 CCTV(CCTV 2)에 의해 촬영된 영상으로부터 소정의 시간동안 객체가 감지되지 않는 때에, 이미지 링크 제어서버(340)에 유휴 신호(IDLE)를 제공할 수 있다. 다만, 이는 일 예로서, 저장/분배 서버(320)에는 더 많은 CCTV 들이 할당될 수 있으며, 할당된 CCTV 들 중 기준 비율 이상의 CCTV들에서 촬영된 영상으로부터 소정의 시간동안 객체가 감지되지 않는 때에, 이미지 링크 제어서버(340)에 유휴 신호(IDLE)를 제공할 수 있는 등의 다양한 실시예가 가능하다. 이와 같이, CCTV들에 객체가 촬영되지 않는 유휴 상태(IDLE)에서 객체 선택 이미지들을 생성함으로써, 통합 관제 시스템(300)의 로드를 줄일 수 있는 효과가 있다.

또한, VMS 클라이언트(330)는 소정의 소스의 제 1객체의 제 1 객체 선택 이미지들과, 다른 소스의 상기 제 1 객체와 동일한 객체의 객체 선택 이미지들에 대한 링크를 요청하는 링크 요청신호(Req_LINK)를 이미지 링크 제어서버(340)에 제공할 수 있다.

이미지 링크 제어서버(340)는 유휴 신호(IDLE) 또는 링크 요청신호(Req_LINK)에 응답하여, 영상 스토리지부(360)에 객체별로 저장된 객체 이미지들(Images A)를 수신하여, 링크 대상이 되는 객체 선택 이미지들(Images B)을 생성하도록 이미지 링커(350)에 제 1 링크제어신호(LCS1)를 제공하여 제어할 수 있다.

이미지 링커(350)는 시스템 제어부(351), 입출력부(352), 객체 이미지 선별부(353)를 포함할 수 있다. 시스템 제어부(351)는 이미지 링커(350)의 전반적인 동작을 제어하며, 입출력부(352)는 이미지 링크 제어서버(340)와 주변 서버 또는 클라이언트와 통신을 수행하여 각종 정보들을 입출력한다. 객체 이미지 선별부(353)는 객체 이미지 비교부(353_1) 및 객체 이미지 필터링부(353_2)를 포함할 수 있다. 이미지 링커(350)는 제 1 링크제어신호(LCS1)에 응답하여, 제 1 소스의 객체별 객체 이미지들 및 제 2 소스의 객체별 객체 이미지들로부터 각각 제 1 소스의 객체별 객체 선택 이미지들 및 제 2 소스의 객체별 객체 선택 이미지들을 생성할 수 있다. 이하, 객체 이미지 비교부(353_1) 및 객체 이미지 필터링부(353_2)의 동작을 도 3b와 함께 서술하도록 한다.

도 3a 및 도 3b를 참고하면, 객체 이미지 비교부(353_1)는 하나의 객체의 객체 이미지들을 서로 비교하여, 유사도를 계산할 수 있다. 일 실시예로, 제 1 소스의 제 1 객체 이미지들끼리 서로 비교하여, 유사도를 계산할 수 있다. 이 때, 제 1 소스의 제 1 객체 이미지들은 제 1 내지 제 7 이미지들(Image 1 ~ Image 7)을 포함할 수 있다. 제 1 스텝(Step 1)을 참고하면, 객체 이미지 비교부(353_1)는 제 1 이미지(Image 1)를 기준 이미지로 선택할 수 있다. 객체 이미지 비교부(353_1)는 기준 이미지(Image 1)를 제 2 내지 제 7 이미지들(Image 2~ Image 7)과 비교하여, 유사도를 계산할 수 있다. 객체 이미지 필터링부(353_2)는 상기 계산된 유사도가 기준값 이상인 객체 이미지를 필터링할 수 있다. 일 예로, 유사도의 기준값은 45 로 설정되어, 객체 이미지 필터링부(353_2)에 포함되는 레지스터에 저장될 수 있으며, 객체 이미지 필터링부(353_2)는 계산된 유사도가 45 이상인 제 3 이미지(Image 3) 및 제 6 이미지(Image 6)를 필터링 할 수 있다.

이후, 객체 이미지 비교부(353_1)는 제 1 스텝(Step 1)에서 선택된 기준 이미지(Image 1)를 제외한 필터링되고 남은 이미지들 중에서 기준 이미지를 선택할 수 있다. 제 2 스텝(Step 2)을 참고하면 제 2 이미지(Image 2)를 기준 이미지로 선택할 수 있다. 객체 이미지 비교부(353_1)는 기준 이미지(Image 2)를 제 4, 5, 7 이미지들(Image 4, Image 5, Image 7)과 비교하여, 유사도를 계산할 수 있다. 객체 이미지 필터링부(353_2)는 상기 계산된 유사도가 기준값 이상인 객체 이미지를 다시 필터링할 수 있다. 일 예로, 객체 이미지 필터링부(353_2)는 계산된 유사도가 45 이상인 제 5 이미지(Image 5) 를 필터링 할 수 있다.

이후, 객체 이미지 비교부(353_1)는 제 1, 제 2 스텝(Step 1, 2)에서 선택된 기준 이미지(Image 1, Image 2)를 제외한 필터링되고 남은 이미지들 중에서 기준 이미지를 선택할 수 있다. 제 3 스텝(Step 3)을 참고하면 제 4 이미지(Image 4)를 기준 이미지로 선택할 수 있다. 객체 이미지 비교부(353_1)는 기준 이미지(Image 4)를 제 7 이미지들(Image 7)과 비교하여, 유사도를 계산할 수 있다. 객체 이미지 필터링부(353_2)는 상기 계산된 유사도가 기준값 이상인 객체 이미지를 또 다시 필터링할 수 있다. 일 예로, 객체 이미지 필터링부(353_2)는 계산된 유사도가 45 이상인 제 7 이미지(Image 7) 를 필터링 할 수 있다.

이와 같이, 제 1 소스의 제 1 객체 이미지들 중 기준 이미지를 선택하여 기준 이미지와 다른 이미지들을 비교하여, 유사도를 계산하고 유사도를 기반으로 이미지들을 필터링하는 동작을 다음 스텝에서 선택할 수 있는 기준 이미지가 없을 때까지 반복함으로써, 제 4 스텝(Step 4)과 같이 제 1 소스의 제 1 객체 선택 이미지들을 생성할 수 있다. 상기 방법을 통하여, CCTV 들에서 촬영된 모든 객체들에 대하여, 객체별로 객체 선택 이미지들을 생성할 수 있다. 이를 통하여, 향후 링크 대상이 되는 객체 이미지들의 개수를 줄임으로써, 링크시 필요한 연산량을 줄이는 효과가 있다.

이미지 링커(350)는 위와 같은 방법으로 생성된 객체별 객체 선택 이미지들(Images C)을 영상 스토리지부(360)에 객체별로 저장할 수 있다.

도 4a 내지 도 4c 는 이미지 링크 제어서버의 일 구현예와 링크 동작의 대상이 되는 소스를 이미지 링커에 할당해주는 동작을 설명하기 위한 도면이다. 통합 관제 시스템(400)은 VMS 클라이언트(430), 이미지 링크 제어서버(440) 및 이미지 링커(450)를 포함할 수 있다. 이미지 링크 제어서버(440)는 시스템 제어부(441), 입출력부(442), 소스 정보 저장부(443), 링크 대상 소스 할당 관리부(444)를 포함할 수 있다. 시스템 제어부(441)는 이미지 링크 제어서버(440)의 전반적인 동작을 제어하며, 입출력부(442)는 이미지 링커(450) 및 VMS 클라이언트(430)간의 통신으로 통하여 신호를 입출력할 수 있다. 도 4a 및 도 4b 를 참조하면, 소스 정보 저장부(443)는 소스 ID, 각 소스의 위도 좌표, 경도 좌표, 도로 정보를 포함하는 소스 정보를 저장할 수 있다.

VMS 클라이언트(430)는 특정 소스의 특정 객체의 객체 선택 이미지들에 대한 링크를 요청하는 링크 요청신호(Req_LINK)를 이미지 링크 제어서버(440)에 제공할 수 있다. 이하, 제 1 소스의 제 1 객체 선택 이미지들에 대한 링크를 요청하는 것을 가정한다.

이미지 링크 제어서버(440)는 링크 요청신호(Req_LINK)에 응답하여, 제 1 소스의 제 1 객체 선택 이미지들과 다른 소스의 객체 선택 이미지들을 링크시킬 수 있도록 제 2 링크제어신호(LCS2)를 제공하여 이미지 링커(450)를 제어할 수 있다. 일 실시예로, 링크 대상 소스 할당 관리부(444)는 링크 요청되는 소스에 대응하는 소스 정보를 이용하여, 링크 대상이 되는 소스를 다르게 할당할 수 있다. 제 1 소스의 제 1 객체 선택 이미지들에 대한 링크 요청(Req_LINK)이 수신된 때에, 정보 연산 비교부(444_a)는 상기 소스 정보를 이용하여, 제 1 소스와 다른 소스간의 거리를 계산할 수 있다. 이후, 링크 대상 소스 선택부(444_b)는 제 1 소스와 소정의 기준 거리내에 위치한 소스들 중에서 적어도 하나의 소스를 선택할 수 있다.

도 4c를 참고하면, 정보 연산 비교부(444_a)는 도 4b의 소스 정보를 이용하여, 제 1 소스와 다른 소스간의 거리를 계산한 결과, 제 1 소스(＃1)와 제 1 기준 거리 내에 위치한 소스들(S＃1)은 제 2 소스(＃2) 및 제 3 소스(＃3)를 포함하고, 제 1 소스(＃1)와 제 2 기준 거리 내에 위치한 소스들(S＃2)은 제 4 소스(＃4), 제 5 소스(＃5) 및 제 6 소스(＃6)를 포함하며, 제 3 기준 거리 내에 위치한 소스들(S＃3)은 제 7 소스(＃7), 제 8 소스(＃8) 및 제 9 소스(＃9)를 포함하는 것으로 나타낼 수 있다.(제 1 기준 거리< 제2 기준 거리 < 제 3 기준 거리)

링크 대상 소스 선택부(444_b)는 제 1 소스(＃1)와 제 1 기준 거리 내에 있는 소스들(＃2, ＃3) 중 적어도 하나를 선택할 수 있으며, 예시적으로 제 2 소스(＃2)를 선택하여, 이미지 링커(450)가 제 2소스(＃2)의 객체별 객체 선택 이미지들과의 링크 동작을 수행할 수 있도록 제 2 소스(＃2)를 할당할 수 있다.

이후, 이미지 링커(450)는 링크 결과 신호(Res_LINK)를 이미지 링크 제어서버(440)에 제공할 수 있다. 일 실시예로, 할당된 제 2 소스(＃2)의 객체들 중 제 1 소스(＃1)의 제 1 객체와 동일한 객체가 없는 것으로 판단된 때에는, 링크 실패를 나타내는 정보를 포함하는 링크 결과 신호(Res_LINK)를 이미지 링크 제어서버(440)에 제공할 수 있다. 링크 대상 소스 선택부(444_b)는 링크 결과 신호(Res_LINK)에 응답하여, 제 1 소스(＃1)와 제 2 기준 거리 내에 있는 소스들(＃4, ＃5, ＃6) 중 적어도 하나를 선택할 수 있으며, 예시적으로 제 4소스(＃4)를 링크 대상 소스로 재할당하여, 이미지 링커(450)가 제 4 소스(＃4)의 객체들의 객체 선택 이미지들에 대하여 링크 동작을 재수행하도록 제 3 링크제어신호(LCS3)를 제공하여 제어할 수 있다.

도 5a 및 도 5b는 이미지 링커의 일 구현예와 이미지 링커가 객체 링크 이미지들을 생성하는 방법을 설명하기 위한 도면이다. 도 5a에 도시된 바와 같이, 통합 관제 시스템(500)은 VMS 클라이언트(530), 이미지 링크 제어서버(540), 이미지 링커(550) 및 영상 스토리지부(560)를 포함할 수 있다.

VMS 클라이언트(530)는 특정 소스의 특정 객체의 객체 선택 이미지들에 대한 링크를 요청하는 링크 요청신호(Req_LINK)를 이미지 링크 제어서버(540)에 제공할 수 있다. 이하, 제 1 소스의 제 1 객체 선택 이미지들에 대한 링크를 요청하는 것을 가정한다.

이미지 링크 제어서버(540)는 링크 요청신호(Req_LINK)에 응답하여, 제 1 소스의 제 1 객체 선택 이미지들과 다른 소스의 객체 선택 이미지들을 링크시킬 수 있도록 제 2 링크제어신호(LCS2)를 제공하여 이미지 링커(550)를 제어할 수 있다. 일 실시예로, 이미지 링크 제어서버(540)는 도 4a 등에서 서술한 방법을 이용하여 이미지 링커(550)가 제 2 소스의 객체별 객체 선택 이미지들 및 제 3 소스의 객체별 객체 선택 이미지들과의 링크 동작을 수행할 수 있도록 제 2 소스 및 제 3 소스를 할당할 수 있다.

이미지 링커(550)는 도 3a의 이미지 링커(350)보다 객체 이미지 링크부(554)를 더 포함할 수 있다. 객체 이미지 링크부(554)는 선택 소스간 객체 이미지 비교부(554_1) 및 동일 객체 이미지 링크부(554_2)를 포함할 수 있다. 객체 이미지 링크부(554)는 링크 요청된 제 1 소스의 제 1 객체 선택 이미지들 및 할당된 제 2, 제 3 소스의 객체별 객체 선택 이미지들(Images B)을 영상 스토리지부(560)로부터 수신받을 수 있다. 일 실시예로, 선택 소스간 객체 이미지 비교부(554_1)는 제 1 소스의 제 1 객체 선택 이미지들과 제 2, 3 소스의 객체별 객체 선택 이미지들을 비교하고, 각각의 유사도를 계산할 수 있다. 동일 객체 이미지 링크부(554_2)는 계산된 유사도를 기반으로 제 1 소스의 제 1 객체와 동일한 객체라 판단되는 제 2 소스 및 제 3 소스의 객체들의 객체 선택 이미지들과 제 1 소스의 제 1 객체 선택 이미지들을 링크시켜 제 1 객체 링크 이미지들을 생성할 수 있다.

예를 들면, 선택 소스간 객체 이미지 비교부(554_1)는 제 1 소스의 제 1 객체 선택 이미지들과 제 2 소스의 제 2 객체 선택 이미지들을 서로 비교하여 각각이 이미지에 대한 다수의 유사도들을 계산할 수 있다. 동일 객체 이미지 링크부(554_2)는 다수개의 유사도들의 평균값을 계산하여, 평균 값이 기준값 이상인 때에는 제 1 소스의 제 1 객체와 제 2 소스의 제 2 객체는 동일한 객체인 것으로 판단하여, 제 1 소스의 제 1 객체 선택 이미지들과 제 2 소스의 제 2 객체 선택 이미지들을 링크시킬 수 있다.

도 5b를 참고하면, 이미지 링커(550)가 생성한 객체 링크 이미지들을 나타낸 것으로써, 이미지 링커(550)에서 제 1 소스(S1)의 제 1 객체(객체 #1)와 제 2 소스(S2)의 제 2 객체(객체 #2), 제 3 소스(S3)의 제 3 객체(객체 #3)가 서로 동일한 객체로 판단되는 때에, 제 1 객체 선택 이미지들(Image Group1_1), 제 2 객체 선택 이미지들(Image Group2_2) 및 제 3 객체 선택 이미지들(Image Group3_3)을 링크시킬 수 있다. 제 1 소스(S1)의 제 1 객체(객체 #1)의 객체 링크 이미지들은 제 1 객체 선택 이미지들(Image Group1_1), 제 2 객체 선택 이미지들(Image Group2_2) 및 제 3 객체 선택 이미지들(Image Group3_3)을 포함할 수 있다. 또한, 제 1 소스(S1)의 제 1 객체(객체 #1)의 객체 링크 이미지들은 , 제 2 소스(S2)의 제 2 객체(객체 #2)의 객체 링크 이미지들및 제 3 소스(S3)의 제 3 객체(객체 #3)의 객체 링크 이미지들과 동일한 객체 링크 이미지들일 수 있다. 따라서, 향후 VMS 클라이언트(530)로부터 제 2 소스(S2)의 제 2 객체(객체 #2)에 대하여 링크 요청을 이미지 링크 제어서버(540)가 수신한 때에, 이미지 링크 제어서버(540)는 이미지 링커(550)가 생성된 제 1 소스(S1)의 제 1 객체(객체 #1)의 객체 링크 이미지들을 제 2 소스(S2)의 제 2 객체(객체 #2)의 객체 링크 이미지들로써 VMS 클라이언트(530)에 제공하도록 제어할 수 있다.이러한 방식으로 제 2, 3 소스의 객체들 중에서 제 1 객체와 동일한 객체들의 객체 이미지들과 제 1 객체 선택 이미지들을 링크 시킬 수 있다.

이와 같이, 이미지 링커(550)가 생성한 객체 링크 이미지들(Images C)을 영상 스토리지부(560)에 객체별로 저장될 수 있다. 또한, 이미지 링커(550)는 VMS 클라이언트(530)가 링크 요청한 객체에 대응하는 객체 링크 이미지들(Images C)을 제공할 수 있다. 이를 통하여, 서로 다른 소스의 객체들의 객체 이미지들 중에서 링크 요청된 객체와 동일한 객체들의 객체 이미지들을 서로 링크시켜 별도의 검색 동작 없이 한꺼번에 VMS 클라이언트(530)에 객체 링크 이미지들을 제공할 수 있는 장점이 있다.

도 6a 및 도 6b는 이미지 링커의 또 다른 일 구현예와 이미지 링커가 트래킹 정보를 생성하는 방법을 설명하기 위한 도면이다. 도 6a에 도시된 바와 같이, 통합 관제 시스템(600)은 VMS 클라이언트(630), 이미지 링크 제어서버(640), 이미지 링커(650) 및 영상 스토리지부(660)를 포함할 수 있다.

VMS 클라이언트(630)는 특정 소스의 특정 객체에 대한 트래킹 요청(Req_Trac)을 이미지 링크 제어서버(640)에 제공할 수 있다. 이하, 제 1 소스의 제 1 객체에 대한 트래킹 요청(Req_Trac)하는 것을 가정한다.

이미지 링크 제어서버(640)는 트래킹 요청(Req_Trac)에 응답하여, 제 1 소스의 제 1 객체에 대한 위치 정보를 포함하는 트래킹 정보(Res_Trac)를 생성할 수 있도록 제 2 링크제어신호(LCS2')를 제공하여 이미지 링커(650)를 제어할 수 있다.

이미지 링커(650)는 도 3b의 이미지 링커(350)보다 객체 추적부(655)를 더 포함할 수 있다. 객체 추적부(655)는 소스 정보 저장부(655_1), 링크 객체 이미지 정렬부(655_2) 및 객체 위치 정보 생성부(655_3)를 포함할 수 있다. 소스 정보 저장부(655_1)는 도 4b에 도시된 바와 같이, 각 소스의 ID 정보, 소스 의 위치에 관련하여 위도 좌표, 경도 좌표, 도로 정보를 포함하는 정보를 소스 정보로서 저장할 수 있다. 객체 링크 이미지 정렬부(655_2)는 제 1 소스의 제 1 객체에 대한 객체 링크 이미지들을 영상 스토리지부(660)에 저장된 시간 정보들을 참조하여, 도 1 의 저장/분배 서버들(112)에서 추출된 시간순으로 정렬할 수 있다. 객체 링크 이미지 정렬부(655_2)는 상기의 정렬 동작을 위하여, 영상 스토리지부(660)로부터 제 1 소스의 제 1 객체에 대한 객체 링크 이미지들(Images C)를 수신할 수 있다. 객체 위치 정보 생성부(655_3)는 추출된 시간순으로 나열된 상기 객체 링크 이미지들과 각각의 객체 링크 이미지와 대응하는 소스에 대한 상기 소스 정보를 기반으로, 제 1 소스의 제 1 객체에 대한 시간별 위치 정보를 포함하는 트래킹 정보(Res_Trac)를 생성할 수 있다.

도 5b 및 도 6b를 참고하면, 제 1 스텝(Step 1)과 같이, 제 1 소스의 제 1 객체에 대한 객체 링크 이미지들은 제 1 소스의 제 1 객체 선택 이미지들(Image Group 1_1), 제 2 소스의 제 2 객체 선택 이미지들(Image Group 2_2) 및 제 3 소스의 제 3 객체 선택 이미지들(Image Group 3_3)을 포함할 수 있다. 제 2 스텝(Step 2)과 같이, 객체 링크 이미지 정렬부(655_2)는 상기 객체 링크 이미지들을 추출된 시간순으로 나열할 수 있다. 즉, 추출된 시간순으로 나열하면(T1<T2<T3<T4<T5<T6<T7<T8<T9, 빠른 시간순으로 나열) 제 1_1 이미지(Image 1_1), 제 1_2 이미지(Image 1_2), 제 2_1 이미지(Image 2_1), 제 2_2 이미지(Image 2_2), 제 3_1 이미지(Image 3_1), 제 3_2 이미지(Image 3_2), 제 3_3 이미지(Image 3_3), 제 2_3 이미지(Image 2_3), 제 1_3 이미지(Image 1_3) 순으로 나열할 수 있다.

제 3 스텝(Step 3)과 같이, 객체 위치 정보 생성부(655_3)는 제 1_1 이미지(Image 1_1), 제 1_2 이미지(Image 1_2)는 제 1 소스(S1)와 대응되므로, 도 4b의 소스 정보를 참고하여 T1 ~ T3 시간에서의 제 1 소스의 제 1 객체위치 정보를 생성할 수 있다. 제 2_1 이미지(Image 2_1), 제 2_2 이미지(Image 2_2)는 제 2 소스(S2)와 대응되므로, 도 4b의 소스 정보를 참고하여 T3 ~ T4 시간에서의 제 1 소스의 제 1 객체 위치 정보를 생성할 수 있다. 제 3_1 이미지(Image 3_1), 제 3_2 이미지(Image 3_2), 제 3_3 이미지(Image 3_3)는 제 3 소스(S3)와 대응되므로, 도 4b의 소스 정보를 참고하여 T4 ~ T7 시간에서의 제 1 소스의 제 1 객체 위치 정보를 생성할 수 있다. 제 2_3 이미지(Image 2_3)는 제 2 소스(S2)와 대응되므로, 도 4b의 소스 정보를 참고하여 T8 시간의 위치 정보를 생성할 수 있다. 마지막으로, 제 1_3 이미지(Image 1_3)는 제 1 소스(S1)와 대응되므로, 도 4b의 소스 정보를 참고하여 T9 시간에서의 제 1 소스의 제 1 객체 위치 정보를 생성할 수 있다. 객체 위치 정보 생성부(655_3)는 위와 같은 방법으로 트래킹이 요청(Req_Trac)된 제 1 소스의 제 1 객체에 대하여 시간별 위치 정보를 포함하는 트래킹 정보(Req_Trac)를 VMS 클라이언트(630)에 제공할 수 있다.

도 6a 및 도 4c 를 참고하면, 객체 추적부(655)는 더 나아가, 트래킹 정보(Req_Trac)를 이용하여 도 4c와 같은 지도를 나타내는 디스플레이 화면에 제1 소스(#1)에서 제 2 소스(#2) 및 제3소스(#3)를 거쳐 다시 제 2 소스(#2)에서 제 1 소스(#1)로 돌아오는 제 1 소스의 제 1 객체의 시간별 이동 경로를 표시하여 VMS 클라이언트(630)에 제공할 수 있다.

이와 같은 방식으로, VMS 클라이언트(630)에게 트래킹 요청된 객체에 대하여 이동 경로를 한눈에 파악할 수 있는 디스플레이 정보를 제공해줄 수 있는 장점이 있다. 또한, 통합 관제 시스템은 빅데이터 분석 시스템과 연동이 가능하여, 특정 객체에 대한 객체 링크 이미지들 및 트래킹 정보를 빅데이터 분석 시스템에 제공할 수 있다. 빅데이터 분석 시스템은 이를 기반으로 특정 객체의 이동 경로의 경향성, 특정 객체의 이동 시간 때의 경향성 등을 분석하여 다양한 서비스를 제공할 수 있다.

도 7은 본 발명의 일 실시예에 따른 통합 관제 시스템의 링크 동작을 순서대로 나타내는 순서도이다.

도 7에 도시된 바와 같이, 먼저 다수의 소스(CCTV)로부터 촬영된 영상을 다수의 저장/분배 서버들에 할당한다(S11). 각각의 저장/분배 서버는 수신한 영상으로부터 객체별로 객체 이미지들을 감지하고(S12), 감지된 객체별로 객체 이미지를 추출하여 객체별로 영상 스토리지부에 저장한다(S13). 이후, 제 N 소스의 제 N 객체 이미지들 중 선택된 기준 이미지와 기준 이미지를 제외한 제 N 객체 이미지들을 비교한다(S14). 상기 비교 결과를 기반으로 제 N 객체 이미지들을 필터링하여 제 N 객체 선택 이미지들을 생성한다(S15). 후에, 제 N 객체 선택 이미지들을 할당된 다른 소스들의 객체들 중 상기 제 N 객체와 동일한 객체의 객체 선택 이미지들과 링크시켜 제N 객체 링크 이미지를 생성한다(S16). 제 N 객체 링크 이미지를 VMS 클라이언트에 제공한다(S17).

도 8은 본 발명의 일 실시예에 따른 통합 관제 시스템의 트래킹 정보를 생성하는 방법을 순서대로 나타내는 순서도이다.

제 N 객체 링크 이미지들을 추출된 시간 순으로 나열한다(S21). 시간순으로 나열된 제 N 객체 링크 이미지들과 각각의 제 N 객체 링크 이미지에 대응되는 소스 정보를 참조한다(S22). 소스 정보를 기반으로 제 N 객체의 시간별 위치정보를 포함하는 트래킹 정보를 생성한다(S23). 이후 트래킹 정보는 VMS 클라이언트에 제공한다.

본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의하여 정해져야 할 것이다.

Claims (10)

1. 이미지 링크 제어 서버 및 적어도 하나의 이미지 링커를 포함하는 통합 관제 시스템의 동작방법에 있어서,
   제 1 카메라에 의해 촬영된 영상으로부터 제 1 객체에 대한 제 1 객체 이미지들을 추출하고, 제 2 카메라에 의해 촬영된 영상으로부터 제 2 객체에 대한 제 2 객체 이미지들을 추출하는 단계;
   상기 제 1 객체 이미지들의 각각을 서로 비교하고, 상기 비교 결과를 이용하여, 상기 제 1 객체 이미지들을 필터링함으로써 제 1 객체 선택 이미지들을 생성하고, 상기 제 2 객체 이미지들의 각각을 서로 비교하고, 상기 비교 결과를 이용하여, 상기 제 2 객체 이미지들을 필터링함으로써 제 2 객체 선택 이미지들을 생성하는 단계;
   상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 비교하여, 상기 제 1 객체와 상기 제 2 객체가 동일한 객체인지 여부를 판단하는 단계;
   상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 링크시키는 단계;
   클라이언트로부터 상기 제 1 객체에 대한 트래킹 요청을 수신하는 단계;
   상기 트래킹 요청에 응답하여, 링크된 상기 제 1 객체 선택 이미지들 및 상기 제 2 객체 선택 이미지들을 각각 추출된 시간순으로 정렬하는 단계;
   상기 시간 기반 객체 이미지들과 대응되는 상기 제 1 카메라 및 상기 제 2 카메라의 위치 정보를 기반으로 상기 제 1 객체의 시간별 위치 정보를 생성하는 단계; 및
   상기 제 1 객체의 시간별 위치 정보를 포함하는 트래킹 정보를 상기 클라이언트에 제공하는 단계를 포함하는 것을 특징으로 하는 통합 관제 시스템의 동작방법.
2. 제 1 항에 있어서,
   상기 제 1 객체 선택 이미지들을 생성하는 단계는,
   상기 제 1 객체 이미지들 중 기준 이미지를 선택하여, 상기 기준 이미지와 상기 제 1 객체 이미지들을 비교하여 유사도를 계산하는 단계; 및
   상기 제 1 객체 이미지들 중 상기 기준 이미지와의 유사도가 기준값 이상인 것을 필터링하는 단계를 포함하는 것을 특징으로 하는 통합 관제 시스템의 동작방법.
3. 제 2항에 있어서,
   상기 제 1 객체 선택 이미지들을 생성하는 단계는,
   상기 기준 이미지를 제외한 상기 필터링된 제 1 객체 이미지들 중에서 기준 이미지를 선택하지 못할 때까지 반복하여 상기 필터링 단계를 수행하는 것을 특징으로 하는 통합 관제 시스템의 동작방법.
4. 제 1 항에 있어서,
   상기 통합 관제 시스템은 저장/분배 서버를 더 포함하고,
   상기 저장/분배 서버는, 상기 제 1 카메라 및 상기 제 2 카메라에 의해 촬영된 영상으로부터 소정의 시간동안 객체가 감지되지 않는 때에, 상기 이미지 링크 제어 서버에 유휴 신호(IDLE)를 제공하고,
   상기 이미지 링크 제어 서버는 상기 유휴 신호에 응답하여, 상기 제 1 객체 선택 이미지들 및 상기 제 2 객체 선택 이미지들을 생성하도록 상기 이미지 링커를 제어하는 것을 특징으로 하는 통합 관제 시스템의 동작방법.
5. 제 1 항에 있어서,
   상기 제 1 객체와 상기 제 2 객체가 동일한 객체인지 여부를 판단하는 단계는,
   상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들간의 다수의 유사도들을 계산하는 단계; 및
   상기 다수의 유사도들의 평균값이 기준값 이상인 때에, 상기 제 1 객체와 상기 제 2 객체가 동일한 객체인 것으로 판단하는 단계를 더 포함하는 것을 특징으로 하는 통합 관제 시스템의 동작방법.
6. 제 1 항에 있어서,
   클라이언트로부터 상기 제 1 객체에 대한 링크 요청을 수신하는 단계; 및
   상기 링크 요청에 응답하여, 상기 제 1 객체 선택 이미지들과 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 포함하는 객체 링크 이미지들을 상기 클라이언트에게 제공하는 단계를 더 포함하는 것을 특징으로 하는 통합 관제 시스템의 동작방법.
7. 삭제
8. 통합 관제 시스템에 구비되는 적어도 하나의 객체 이미지 링크 시스템의 동작방법에 있어서,
   제 1 카메라에 의해 촬영된 제 1 객체에 대한 제 1 객체 이미지들과 제 2 카메라에 의해 촬영된 제 2 객체에 대한 제 2 객체 이미지들을 포함하는 객체 이미지들을 수신하는 단계;
   상기 제1 객체 이미지들의 각각을 서로 비교하고, 상기 비교 결과를 이용하여, 상기 제1 객체 이미지들을 필터링함으로써 각각의 유사도가 기준값 이하인 제1 객체 선택 이미지들을 생성하고, 상기 제2 객체 이미지들 각각을 서로 비교하고, 상기 비교 결과를 이용하여, 상기 제2 객체 이미지들을 필터링함으로써 각각의 유사도가 기준값 이하인 제2 객체 선택 이미지들을 생성하는 단계;
   상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 비교하여 유사도를 계산하고, 상기 유사도를 이용하여 상기 제 1 객체와 상기 제 2 객체의 동일 여부를 판단하는 단계; 및
   상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 2 객체 선택 이미지들을 링크시키는 단계를 포함하는 이미지 링크 시스템의 동작방법.
9. 제 8항에 있어서,
   상기 객체 이미지들을 수신하는 단계는,
   상기 제 1 카메라의 위치 정보를 참조하여, 복수의 카메라들 중 상기 제 1 카메라와 제 1기준 거리내에 위치한 상기 제 2 카메라를 선택하는 단계를 더 포함하는 것을 특징으로 하는 이미지 링크 시스템의 동작방법.
10. 제 8항에 있어서,
    상기 제 2 객체 선택 이미지들을 포함하는 객체 이미지들은, 상기 제 2 카메라에 의해 촬영된 제 3 객체에 대한 제 3 객체 선택 이미지들을 포함하며,
    상기 제1 객체와 상기 제2 객체의 동일 여부를 판단하는 단계는,
    상기 제 1 객체 선택 이미지들과 상기 제 3 객체 선택 이미지들을 비교하여 유사도를 계산하고, 상기 유사도를 이용하여 상기 제 1 객체와 상기 제 3 객체의 동일 여부를 판단하는 단계를 더 포함하고,
    상기 제1 객체 선택 이미지들과 제2 객체 선택 이미지들을 링크시키는 단계는,
    상기 판단 결과를 기반으로 상기 제 1 객체 선택 이미지들과 상기 제 3 객체 선택 이미지들을 링크시키는 단계를 더 포함하는 이미지 링크 시스템의 동작방법.

Images