KR101119084B1 - 메타데이터를 이용한 영상관리 시스템 및 그 방법 - Google Patents

Abstract

본 발명은 메타 데이터를 이용한 영상관리 시스템 및 그 방법에 대한 것으로서, 더욱 상세히는 복수의 카메라가 제공하는 영상을 관제 서버에서 수집 및 관리하는데 있어서, 카메라간 상이한 성능 및 스펙으로 인한 차이를 보상하여 영상 분석 또는 검색과 같은 관리를 수행하는 메타 데이터를 이용한 영상관리 시스템 및 그 방법에 대한 것이다. 본 발명은 개별적으로 연결된 영상처리부가 제공하는 메타데이터와 상기 중앙관제서버의 정밀한 영상분석을 통해 생성된 메타 데이터를 상호 비교하여 편차를 보상함으로써 영상처리부의 하드웨어적인 제한을 극복하여 영상검색의 정밀도를 향상시키는 효과가 있다. 또한, 본 발명은 동일 대상에 대하여 각 카메라가 촬영하는 영상으로부터 생성한 복수의 메타 데이터간에 발생하는 편차를 근거로 공통된 유효범위를 설정하여 노후화로 인한 카메라의 특성 변화 및 상기 카메라의 종류(렌즈특성, 시야각, 해상도 등)에 따라 발생하는 전체 카메라간 편차를 보상하여 개별 카메라의 특성 차이로 인하여 누락되는 영상을 방지함으로써, 메타 데이터를 이용한 검색의 신뢰성을 높이는 효과가 있다.

Description

메타데이터를 이용한 영상관리 시스템 및 그 방법{System for managementing video data using metadata and method thereof}

본 발명은 메타 데이터를 이용한 영상관리 시스템 및 그 방법에 대한 것으로서, 더욱 상세히는 복수의 카메라가 제공하는 영상을 관제 서버에서 수집 및 관리하는데 있어서, 카메라간 상이한 성능 및 스펙으로 인한 차이를 보상하여 영상 분석 또는 검색과 같은 관리를 수행하는 메타 데이터를 이용한 영상관리 시스템 및 그 방법에 대한 것이다.

현재 고해상도의 영상을 지원하는 카메라와 상기 카메라에서 제공되는 영상을 디지털로 고속 처리하는 기술의 발달과 더불어, 원격지에서 상기 카메라에서 수신되는 대용량의 영상을 스트리밍으로 수신하여 처리할 수 있는 고속 통신망을 지원하고 있다.

이러한 영상 및 통신 기술의 발달은 원격지에서 카메라를 제어하여 원하는 영상을 획득하는 관제 시스템의 구성을 가능하게 한다.

한편, 상기 카메라로부터 영상을 획득하여 디지털 처리한 후 통신망을 통해 복수의 카메라를 관리하는 중앙 관제서버에 전송하는 영상처리장치는 상기 디지털 처리 과정에서 상기 카메라의 영상에 대한 메타데이터를 생성하고, 이를 상기 중앙관제서버에 영상과 함께 제공한다.

이에 따라, 상기 중앙관제서버가 상기 메타데이터를 이용하여, 수신된 영상중 사용자가 원하는 특정 데이터에 대한 질의에 응답하기 위한 인덱스정보로 사용하거나, 복수의 카메라가 중앙관제서버에 연결된 경우 특정 카메라에서 검출된 트랙킹 정보를 상기 메타데이터로 수신하여 이를 근거로 다른 카메라에서 전송된 영상과 비교하여 트랙킹이 이루어진 대상에 대한 다각도의 영상을 획득하는 등 다양한 방식으로 이용할 수 있다.

이와 같이, 상기 중앙관제서버의 관리 편의성을 증대시키기 위하여 메타데이터의 활용이 중요하게 작용한다.

상기 메타 데이터는 데이터에 관한 구조화된 데이터로, 다른 데이터를 설명해 주는 데이터를 말한다. 즉, 대량의 정보 가운데에서 찾고 있는 정보를 효율적으로 찾아내서 이용하기 위해 일정한 규칙에 따라 콘텐츠에 대하여 부여되는 데이터이다.

다시말해, 상기 메타 데이터는 컨텐츠의 위치와 내용, 작성자에 관한 정보, 권리 조건, 이용 조건, 이용 내력 등과 같은 파라메터를 포함할 수 있으며, 인덱스(index)로서의 기능을 가지므로 사용자는 메타데이터를 이용하여 원하는 특정 데이터(정보)를 용이하게 찾아낼 수 있다.

종래 상기 메타데이터를 통해 복수개의 카메라로부터 수신한 영상을 관리하는 시스템으로서, 한국공개특허 제2011-0044110호를 일례로 들어 설명하면, 본 공개특허는 서로 다른 플랫폼과 통신 프로토콜을 이용하는 상기 지능형 영상 감시 시스템간 메타 데이터의 호환을 보장하기 위한 것으로서, 이를 위해 상기 메타데이터 생성 장치가 상기 서비스 영상 데이터에 포함된 데이터 정보를 메타 데이터로 이용하는 구성을 가진다.

상술한 구성에서 상기 메타 데이터 생성을 위한 데이터 정보가 포함된 서비스 영상 데이터를 제공하는 상기 지능형 영상 감시 시스템의 구성은 본 공개특허에 명시된 바와 같이 복수개의 카메라(210), 복수개의 영상 인식 처리부(220), 복수개의 녹화부(230), 서비스 처리부(240), 룰 등록부(250) 및 분석 정보 처리부(260)를 포함한다.

상술한 구성 중 주요구성의 동작을 설명하면, 복수개의 카메라(210)는 각각의 촬영 지역의 영상을 획득하며, 복수개의 영상 인식 처리부(220)는 상기 획득된 영상에서 객체를 인식한다.

한편, 상기 서비스 처리부(240)는 사용자가 요구한 서비스를 등록하며, 룰 등록부(250)는 서비스 영상 데이터 생성을 위한 룰(rule)을 저장한다.

이에 따라, 상기 분석 정보 처리부(260)는 상기 등록된 서비스 및 저장된 룰(rule)에 기초하여 상기 인식된 객체 영상으로부터 상기 서비스 영상 데이터를 생성하게 되는데, 이때 분석 정보 수집부(270)는 영상인식 처리부(220)으로부터 분석 정보만을 받아 분석 정보 처리부(260)로 전달하도록 한다.

즉, 상기 메타 데이터 생성 장치는 이종 시스템간 호환성을 보장하기 위한 구성으로, 실질적으로 상기 지능형 영상 감시 시스템에 포함된 상기 영상인식 처리부의 분석 정보가 상기 메타데이터로 이용되는 것을 알수 있다.

그러나, 이와 같은 구성에서 상기 영상 인식 처리부는 상기 복수개의 카메라의 종류와 성능, 유사 카메라간 편차 등을 고려하지 않고 상기 메타 데이터를 생성하게 된다.

일례로, 상기 각 영상 인식 처리부는 동일 객체에 대하여 서로 다른 카메라에서 촬영한 영상이 상기 카메라간 성능 또는 스펙의 차이로 인하여 객체를 인식하기 위한 파라메터인 색상,크기, 위치, 해상도 등에서 차이가 발생할 수 있으며, 이와 같은 영상 차이로 인해 상기 복수의 영상 인식 처리부가 동일 객체에 대하여 서로 다른 메타데이터를 생성하며, 카메라간 하드웨어적인 차이가 심할 경우 메타데이터간의 편차는 더욱 증가하게 된다.

또한, 상술한 바와 같은 객체인식 차이로 인하여, 상기 영상 인식 처리부의 객체 트랙킹 과정에서 서로 다른 파라메터를 가진 객체의 이동에 따라 검출된 트랙킹 결과는 객체인식 메타데이터의 편차를 더욱 가중시킨다.

즉, 이종 카메라에서 촬영한 영상을 기반으로 각 영상 인식 처리부가 처리한 메타데이터에 매칭되는 영상 또는 객체가 서로 상이하여 신뢰성이 저하되는 문제점이 있다.

한편, 상기 분석정보 처리부는 상기 영상 인식 처리부가 제공하는 메타 데이터를 단지 수집하는 것에 그치므로, 수집된 메타 데이터와 영상을 관리하는 분석정보 처리부가 상기 메타 데이터를 이용한 검색 요청을 수신하는데 있어서, 상술한 바와 같이 메타 데이터 자체의 신뢰성이 의심되는 상태에서 검색 범위를 설정하는 것이 용이하지 않으며, 이는 전체적인 시스템 신뢰성 및 효율성을 떨어뜨리는 문제점을 야기한다.

이외에도, 카메라의 노후로 인하여 색상의 변화와 같은 영상의 품질이 저하되는 경우 객체 인식에 대한 파라미터가 기설정되며 해당 파라미터에 의존하여 영상 처리를 수행하는 상기 영상 인식 처리부는 동일 카메라의 영상에 대하여 기존과 다른 파라메터를 생성하는 자체적인 오류를 발생시킬 수 있음에도, 이를 검증하기 위한 구성이 없는 문제점이 있다.

상술한 바와 같이, 이종 카메라로 인한 메타 데이터간의 편차를 보상하며, 각 영상 인식 처리부에서 제공하는 메타 데이터를 검증하여 메타 데이터의 신뢰성을 높일 수 있는 시스템 구성이 요구되고 있다.

한국공개특허 제2011-0044110호

본 발명은 서로 상이한 성능 또는 스펙을 가진 카메라로부터 영상을 수신하는 중앙 관제서버에서 동일 영상에 대하여 각 카메라에서 출력하는 메타 데이터의 차이를 보상함으로써, 메타 데이터의 신뢰성을 높여 영상 분석 또는 검색과 같은 영상관리의 신뢰성 및 효율성을 향상시키는데 그 목적이 있다.

또한, 본 발명은 복수의 영상 처리부가 동일 객체에 대하여 서로 다른 메타 데이터를 제공하는 카메라간 편차가 발생하더라도, 카메라간 편차를 메타 데이터를 이용해 보정하여 상기 중앙 관제서버에서 영상의 검색 요청에 대하여 대응되는 영상을 용이하게 제공하도록 하는데 그 목적이 있다.

더하여, 본 발명은 카메라의 성능 변화나 자체적인 오류로 인하여 영상처리부가 기존과 상이한 메타 데이터를 생성하는 경우 이를 용이하게 판단하여 이상이 발생한 카메라를 알림과 동시에 메타 데이터의 신뢰성을 향상시키는데 그 목적이 있다.

상기한 목적을 달성하기 위한 본 발명에 따른 메타데이터를 이용한 영상관리 시스템은 하나 이상의 카메라의 영상을 분석하여 제 1 메타데이터를 생성하는 복수의 영상처리부로부터 영상과 상기 제 1 메타데이터를 수신하여 DB에 저장하는 수집부와, 상기 수집부로부터 수신된 영상을 분석하여 제 2 메타 데이터를 생성하는 영상재분석부와, 상기 제 1 메타 데이터와 제 2 메타 데이터를 비교하여 카메라별 편차정보를 생성하는 파라메터 검증부와, 상기 카메라별 편차정보를 DB에 누적 저장하고, 메타데이터에 포함된 파라메터를 근거로 하는 검색요청에 대하여 누적된 상기 카메라별 편차정보를 근거로 카메라별 편차의 유효범위를 설정하는 유효영역 설정부와, 외부 검색요청을 수신하여, 상기 DB의 메타데이터 중 상기 카메라별 편차의 유효범위에 포함된 메타데이터를 검색하고, 이에 매칭되는 영상을 선택하여 제공하는 검색부를 포함할 수 있다.

이때, 상기 메타데이터는 객체의 파라메터 및 카메라 식별자를 포함하며, 상기 객체 파라메터는 객체의 아이디(ID), 색상(color), 크기, 위치(Location), 형태(type), 오브젝트 종류, 이벤트 발생여부 및 종류, 트랙킹 정보, 행동 및 주석 중 적어도 하나를 포함할 수 있다.

또한, 상기 제 1 메타 데이터는 상기 카메라 영상을 저해상도로 분석하여 생성되고, 상기 제 2 메타 데이터는 상기 카메라 영상을 본래 해상도로 분석하여 생성되는 것을 특징으로 할 수 있다.

더하여, 상기 영상재분석부는 각 카메라로부터 알려져 있는 기준 객체에 대하여 획득한 영상을 분석하여 카메라별 메타데이터를 생성하며, 상기 파라메터 검증부는 상기 기준 객체를 나타내는 기설정된 기준 정보와 비교하여 카메라별로 카메라간 편차정보를 생성하고, 상기 유효영역 설정부는 상기 카메라간 편차정보를 DB에 누적 저장하며, 상기 검색요청에 대하여 누적된 상기 카메라간 편차정보를 근거로 카메라간 편차의 유효범위가 기설정된 범위 내에 포함되도록 설정하며, 상기 검색부는 상기 검색요청에 대하여 각 카메라에 대응되는 메타데이터를 상기 카메라간 편차의 유효범위를 근거로 검색하여 상기 카메라간 편차의 유효범위에 포함되는 메타데이터를 가진 영상을 제공하는 것을 특징으로 할 수 있다.

이외에도, 상기 유효영역 설정부는 누적된 상기 카메라간 편차정보의 최대값과 최소값을 상기 카메라간 유효범위로 설정하거나, 누적된 상기 카메라간 편차정보의 평균값에서 기설정된 범위를 상기 카메라간 유효범위로 설정하는 것을 특징으로 할 수 있다.

그밖에, 상기 파라메터 검증부는 상기 카메라별 편차정보 또는 카메라간 편차정보가 기설정된 범위를 벗어나는 경우 오류 메시지를 출력하며, 오류 메시지에 대응되는 카메라 정보를 출력하는 것을 특징으로 할 수 있다.

또한, 상기 영상재분석부는 주기적, 비주기적으로 상기 제 2 메타 데이터를 생성하며, 상기 제 1 메타 데이터 중 기설정된 정보에 포함되는 데이터가 존재하는 경우 상기 제 2 메타 데이터를 생성할 수 있다.

상기한 목적을 달성하기 위한 하나 이상의 카메라와 개별 연결된 영상처리부와 통신하는 중앙관제서버의 메타 데이터를 이용한 영상관리 방법은, 상기 카메라의 영상을 분석하여 제 1 메타데이터를 생성하는 영상처리부로부터 영상과 상기 제 1 메타데이터를 수신하여 DB에 저장하는 제 1단계와, 수신된 영상을 직접 분석하여 제 2 메타 데이터를 생성하는 제 2단계와, 상기 제 1 메타 데이터와 제 2 메타 데이터를 비교하여 카메라별 편차정보를 생성하는 제 3단계와, 상기 카메라별 편차정보를 DB에 누적 저장하고, 누적된 상기 카메라별 편차정보를 근거로 카메라별 편차의 유효범위를 설정하는 제 4단계와, 메타 데이터를 근거로 하는 외부 검색요청을 수신하여, 상기 DB의 메타데이터 중 상기 카메라별 편차의 유효범위에 포함된 메타데이터를 검색하고, 이에 매칭되는 영상을 선택하여 제공하는 제 5단계를 포함할 수 있다.

이때, 상기 메타데이터는 객체의 파라메터 및 카메라 식별자를 포함하며, 상기 객체 파라메터는 객체의 아이디(ID), 색상(color), 크기, 위치(Location), 형태(type), 오브젝트 종류, 이벤트 발생여부 및 종류, 트랙킹 정보, 행동 및 주석 중 적어도 하나를 포함할 수 있다.

또한, 상기 제 1 메타 데이터는 상기 카메라 영상을 저해상도로 분석하여 생성되고, 상기 제 2 메타 데이터는 상기 카메라 영상을 본래 해상도로 분석하여 생성되는 것을 특징으로 할 수 있다.

더하여, 상기 제 2 단계는 각 카메라로부터 알려져 있는 기준 객체에 대하여 획득한 영상을 분석하여 카메라별 메타데이터를 생성하는 단계를 더 포함하며, 상기 제 3 단계는 상기 기준 객체를 나타내는 기설정된 기준 정보와 비교하여 카메라별로 카메라간 편차정보를 생성하는 단계를 더 포함하고, 상기 제 4 단계는 상기 카메라간 편차정보를 DB에 누적 저장하며, 상기 검색요청에 대하여 누적된 상기 카메라간 편차정보를 근거로 카메라간 편차의 유효범위가 기설정된 범위 내에 포함되도록 설정하는 단계를 더 포함하며, 상기 제 5 단계는 상기 검색요청에 대하여 각 카메라에 대응되는 메타데이터를 상기 카메라간 편차의 유효범위를 근거로 검색하여 상기 카메라간 편차의 유효범위에 포함되는 메타데이터를 가진 영상을 제공하는 단계를 더 포함할 수 있다.

이외에도, 상기 제 4 단계는 누적된 상기 카메라간 편차정보의 최대값과 최소값을 상기 카메라간 유효범위로 설정하거나, 누적된 상기 카메라간 편차정보의 평균값에서 기설정된 범위를 상기 카메라간 유효범위로 설정하는 것을 특징으로 할 수 있다.

그밖에, 상기 제 3 단계는 상기 카메라별 편차정보 또는 카메라간 편차정보가 기설정된 범위를 벗어나는 경우 오류 메시지를 출력하며, 오류 메시지에 대응되는 카메라 정보를 출력하는 것을 특징으로 할 수 있다.

또한, 상기 제 2 단계는 주기적, 비주기적으로 상기 제 2 메타 데이터를 생성하며, 상기 제 1 메타 데이터 중 기설정된 정보에 포함되는 데이터가 존재하는 경우 상기 제 2 메타 데이터를 생성하는 것을 특징으로 할 수 있다.

본 발명은 개별적으로 연결된 영상처리부가 제공하는 메타데이터와 상기 중앙관제서버의 정밀한 영상분석을 통해 생성된 메타 데이터를 상호 비교하여 편차를 보상함으로써 영상처리부의 하드웨어적인 제한을 극복하여 영상검색의 정밀도를 향상시키는 효과가 있다.

또한, 본 발명은 동일 대상에 대하여 각 카메라가 촬영하는 영상으로부터 생성한 복수의 메타 데이터간에 발생하는 편차를 근거로 공통된 유효범위를 설정하여 노후화로 인한 카메라의 특성 변화 및 상기 카메라의 종류(렌즈특성, 시야각, 해상도 등)에 따라 발생하는 전체 카메라간 편차를 보상하여 개별 카메라의 특성 차이로 인하여 누락되는 영상을 방지함으로써, 메타 데이터를 이용한 검색의 신뢰성을 높이는 효과가 있다.

더하여, 본 발명은 원본 영상의 재분석을 통해 생성된 메타 데이터와 영상처리부에서 전송된 메타데이터간의 편차를 검증하는 과정과, 원본 영상의 재분석을 통해 생성된 메타데이터와 기설정된 메타데이터와의 편차를 검증하는 과정을 통해 오류로 판단된 카메라를 정확히 검출하여 카메라 관리의 편의성을 증대시키는 효과가 있다.

도 1은 본 발명에 따른 메타데이터를 이용한 영상관리 시스템의 구성도.
도 2는 본 발명에 따른 파라메터 검증부의 상세 구성도.
도 3은 본 발명에 따른 유효영역 설정부의 상세 구성도.
도 4는 본 발명에 따른 메타데이터를 이용한 영상관리 시스템의 카메라별 유효범위 설정에 대한 과정을 도시한 도면.
도 5는 본 발명에 따른 메타데이터를 이용한 영상관리 시스템의 카메라간 유효범위 설정에 대한 과정을 도시한 도면.
도 6 내지 도 7은 본 발명에 따른 메타데이터를 이용한 영상관리 시스템의 메타데이터를 이용한 영상 검색에 대한 과정을 도시한 도면.

일반적으로 하나 이상의 카메라와 통신망을 통해 연결되어 원격지에서 상기 카메라가 제공하는 영상을 관리하는 중앙관제서버로 구성된 시스템에서, 사용자가 원하는 영상을 검색하기 위하여 상기 중앙관제서버는 상기 카메라로부터 영상과 함께 제공되는 메타데이터를 수신하여 DB에 저장하고, 상기 메타데이터에 포함된 파라메터를 근거로 검색요청을 수신하는 경우 상기 파라메터를 포함하는 메타데이터를 검색하고 검색된 메타데이터에 매칭되는 영상을 추출한다.

이때, 상기 카메라에 연결되어 카메라의 영상을 분석하여 메타 데이터를 생성하는 영상처리부는 카메라가 외부환경에 노출되어 노후화나 일시적인 렌즈 이상과 같은 카메라의 특성이 변화될 경우 해당 메타 데이터를 신뢰할 수 없게 되고, 상기 영상처리부의 하드웨어적 제한으로 인하여 분석된 메타 데이터는 정밀도에 한계를 갖게 된다. 특히, 이는 카메라의 노후화에 따라 불특정한 왜곡을 초래할 수도 있다.

따라서, 본 발명은 개별적으로 연결된 영상처리부가 제공하는 메타데이터와 상기 중앙관제서버의 정밀한 영상분석을 통해 생성된 메타 데이터를 상호 비교하여 편차를 보상함으로써 영상처리부의 하드웨어적인 제한을 보상하고, 또한 동일 대상에 대하여 각 카메라가 촬영하는 영상으로부터 생성한 복수의 메타 데이터간에 발생하는 편차를 근거로 공통된 유효범위를 설정하여 노후화로 인한 카메라의 특성 변화 및 상기 카메라의 종류(렌즈특성, 시야각, 해상도 등)가 서로 상이하여 DB에 저장된 복수의 카메라에 대한 영상 중에서 검색 대상을 포함하고 있음에도 불구하고 누락되는 영상이 발생하는 것을 방지하여 최대한 관련된 영상을 카메라마다 검색하도록 할 수 있다.

상술한 바를 토대로 본 발명에 따른 메타 데이터를 이용한 영상관리 시스템의 실시예를 도면을 통해 상세히 설명하기로 한다.

도 1은 상기 메타 데이터를 이용한 영상관리 시스템의 구성을 도시한 도면으로서, 도시된 바와 같이 하나 이상의 카메라(110), 개별 카메라(110)마다 연결되어 상기 카메라(110)의 영상을 분석하여 제 1 메타데이터를 생성하는 복수의 영상처리부(120) 및 상기 영상처리부(120)와 통신망을 통해 연결되어 각 영상처리부(120)로부터 상기 카메라(110)의 영상과 상기 제 1 메타 데이터를 수신하며, 사용자의 검색요청 또는 이벤트 발생 등에 따라 관련 영상을 검색하여 제공하는 중앙관제서버(200)를 포함할 수 있다.

이때, 중앙관제서버(200)는 도시된 바와 같이 수집부(210), 영상재분석부(220), 파라메터 검증부(230), 유효영역 설정부(250), 검색부(240) 및 DB(260)를 포함할 수 있다.

이때, 상기 수집부(210)는 각 영상처리부(120)로부터 영상과 상기 제 1 메타데이터를 수신하여 DB(260)에 저장할 수 있다.

또한, 상기 영상재분석부(220)는 상기 수집부(210)로부터 수신된 영상을 분석하여 제 2 메타 데이터를 생성할 수 있다.

여기서, 상기 영상재분석부(220)는 상술한 영상처리부(120)의 하드웨어적인 제한을 극복하기 위하여 상기 카메라(110)의 원본 영상을 직접 분석하여 별도의 제 2 메타 데이터를 생성할 수 있다.

즉, 상기 영상처리부(120)는 원격지에 설치되어 카메라(110)와 직접 연결될 수 있으며, 카메라(110)의 실시간성을 보장하기 위하여 영상 분석시 기설정된 코딩방식으로 압축하여 비교적 저해상도의 영상을 분석하여 상기 제 1 메타 데이터를 생성하므로 원본 영상의 영상 분석보다 정밀도가 떨어진다.

따라서, 이를 보완하기 위하여 상기 영상재분석부(220)가 별도의 제 2 메타 데이터를 생성하여 상기 제 1 메타 데이터와의 차이 정도를 분석할 수 있도록 할 수 있다.

이때, 상기 제 1 메타 데이터와 상기 제 2 메타 데이터는 객체의 파라메터 및 카메라 식별자를 포함하며, 상기 객체 파라메터는 객체의 아이디(ID), 색상(color), 크기, 위치(Location), 형태(type), 객체 종류, 이벤트 발생여부 및 종류, 트랙킹 정보, 행동 및 주석 중 적어도 하나를 포함할 수 있다.

상기와 같은 메타 데이터에 포함된 파라메터를 참고하면, 상기 영상재분석부(220)는 주기적 또는 비주기적으로 제 2 메타 데이터를 생성할 수 있으며, 상기 제 1 메타 데이터에서 기설정된 이벤트에 대한 파라메터가 검출되는 경우 상기 제 2 메타 데이터를 생성할 수도 있다.

이때, 상기 수집부(210)는 상기 영상재분석부(220)의 활성화에 따라 원본 영상을 제공할 수 있으며, 상기 제 1 메타 데이터를 통해 기설정된 이벤트를 검출하여 상기 영상재분석부(220)에 원본 영상을 제공할 수도 있으나, 상기 이벤트를 검출하는 별도 구성부의 제어를 통해 상기 원본 영상을 제공할 수도 있다.

한편, 상기 파라메터 검증부(230)는 도 2에 도시된 바와 같이 연동검증부(231), 편차관리부(232) 및 오류 판정부(233)로 구성될 수 있다.

상기 편차관리부(232)는 상기 수집부(210)로부터 상기 제 1 메타 데이터를 수신하고, 상기 영상재분석부(220)로부터 상기 제 2 메타 데이터를 수신하여 상기 제 1 및 제 2 메타 데이터간 편차를 산출하여 카메라별 편차정보를 생성할 수 있다. 이때, 상기 편차관리부(232)는 복수의 카메라(110)와 중앙관제서버(200)가 연결된 경우 카메라별로 카메라별 편차정보를 생성할 수 있다.

또한, 상기 오류 판정부(233)는 상기 카메라별 편차정보를 수신하여, 상기 카메라별 편차정보가 기설정된 범위를 벗어나는 경우 이를 제외할 수 있으며, 기설정된 범위 내인 경우 상기 편차 관리부(232)는 카메라 식별자와 카메라별 편차정보를 유효 영역 설정부(250)에 제공할 수 있다.

상기 연동 검증부(231)의 기능은 이하에서 설명하기로 한다.

한편, 상기 유효영역 설정부(250)는 도 3에 도시된 바와 같이 카메라별 유효범위 설정부(251), 카메라간 유효범위 설정부(252) 및 통계부(253)를 포함할 수 있다.

여기서, 상기 카메라별 유효범위 설정부(251)는 상기 카메라 식별자를 근거로 상기 카메라별 편차정보를 대응되는 카메라의 편차정보로 상기 DB(260)에 누적 저장할 수 있다.

또한, 상기 카메라별 유효범위 설정부(251)는 누적된 상기 카메라별 편차정보를 근거로 카메라별로 유효범위를 설정할 수 있다. 더욱 상세히 설명하면, 상기 통계부(253)는 상기 DB에 누적된 카메라별 편차정보를 근거로 카메라별로 통계정보를 산출할 수 있으며, 상기 카메라별 유효범위 설정부(251)는 카메라별 통계정보를 근거로 편차의 최대값 및 최소값을 카메라별 유효범위로 설정하거나, 상기 누적된 카메라별 편차정보의 평균값을 최대값 및 최소값과 비교하여 생성된 상하 편차를 상기 카메라별 유효범위로 설정할 수 있다.

한편, 상기 검색부(240)는 상기 제 1 메타데이터를 통한 이벤트 검출이나 외부로부터 특정 객체에 대한 검색 요청을 수신하는 경우 상기 특정 객체에 대한 상기 객체 파라메터에 상기 유효영역 설정부(250)에 설정된 카메라별 유효범위를 카메라별로 적용하여 상기 DB의 제 1 메타데이터를 검색함으로써 객체 파라메터와 카메라별로 연관을 가지는 영상을 추출할 수 있다.

이때, 상기 검색부(240)는 추출된 영상을 도시된 바와 같이 상기 디스플레이부(300)를 통해 출력할 수도 있다.

도 4(a)는 상술한 카메라별 유효범위 설정에 대한 상세 프로세스를 도시한 도면으로서, 도시된 바와 같이 상기 영상처리부(120)는 카메라(110)의 영상을 기설정된 코딩방식에 의해 압축하는 등의 방식으로 생성된 저해상도의 영상을 근거로 분석하며 이에 따른 상기 제 1 메타 데이터를 생성할 수 있다.

또한, 상기 영상재분석부(220)는 상기 수집부(210)를 통해 카메라(110)의 원본 영상을 수신하여 고해상도로 영상을 분석하여 제 2 메타 데이터를 생성하게 된다.

이후, 상기 파라메터 검증부(230)에 포함된 편차 관리부(232)가 상기 제 1 및 제 2 메타 데이터의 차이를 연산하여 상기 카메라별 편차정보를 생성할 수 있다.

상기 카메라별 편차정보의 실시예로서, 도 4(b)에 도시된 바와 같이 이벤트 발생에 따라 검출된 객체에 대하여 저해상도와 고해상도의 영상분석을 통해 획득하는 제 1 및 제 2 메타 데이터는 객체(10)의 크기, 길이, 속도, 위치, 기준점, 검출 프레임, 색상 등에서 차이가 발생하며, 이를 보상하기 위하여 제 1 및 제 2 메타데이터간 차이를 연산하여 이를 상기 카메라별 편차정보로 생성할 수 있다.

이후, 상기 편차관리부(232)는 상기 오류 판정부의 판정을 통해 상기 카메라별 편차정보가 기설정된 범위 내인 경우 정상적인 범위 내에 위치한 것으로 판단하여, 상기 카메라별 유효범위 설정부에 상기 카메라별 편차정보를 제공할 수 있다. 이때, 카메라 식별자를 포함하여 제공할 수 있다.

이후, 상기 카메라별 유효범위 설정부(251)는 DB에 카메라별로 카메라별 편차정보를 누적 저장하며, 상기 통계부(253)는 상기 카메라별로 누적된 카메라별 편차정보를 근거로 통계정보를 생성할 수 있다.

이에 따라, 상기 카메라별 유효범위 설정부(251)는 상기 통계정보를 근거로 카메라별로 유효범위를 설정할 수 있다.

이때, 상기 카메라별 유효범위는 퍼센트(%)나, 사칙연산 등의 연산방식으로 설정될 수 있으며, 파라메터 종류에 따라 상기 유효범위 설정이 달리 표시될 수 있다.

다시말해, 길이나 색상값의 경우 덧셈 및 뺄셈의 연산방식으로 표시될 수 있으며, 검출 프레임과 같은 너비를 표시하는 경우 퍼센트나 곱셈 또는 나눗셈의 연산 방식으로 표시될 수 있다.

따라서, 상기 검색부(240)는 상기 카메라별 유효범위에 설정된 연산방식에 따라 객체 파라메터를 기준으로 연산하여 생성된 검색범위에 포함되는 파라메터를 가진 제 1 메타 데이터를 검색할 수 있다.

한편, 상술한 바와 같이 카메라간 특성변화의 차이나 종류(스펙)의 차이로 인하여 동일 객체에 대한 카메라간 영상에 차이가 발생하고, 이로 인해 동일 객체를 포함하고 있음에도 불구하고 누락되는 영상을 방지하기 위하여 전체 카메라의 동일 객체를 기준으로 상호 편차를 계산함으로써, 상기 카메라별 편차정보를 통해 검색된 영상에서 검색의 유효범위를 확장하여 누락되는 영상을 방지할 수 있다.

본 발명의 실시예에 따른 구성을 상기 도 1 내지 도 3을 참고로 도 5를 통해 설명하기로 한다.

도 5에 도시된 바와 같이 소정의 색상 및 크기를 가진 기준 객체(20)를 이동시켜 복수의 카메라(110-1, 110-2)를 통해 촬영하고, 상기 영상재분석부(220)는 상기 기준객체(20)의 위치정보 및 속도정보를 근거로 각 카메라(110-1, 110-2)로부터 원본 영상을 수집부(210)를 통해 제공받아 상기 기준 객체(20)의 각 영상에 대한 카메라별 메타 데이터를 생성할 수 있다.

이후, 상기 도 2의 연동 검증부(231)는 상기 카메라별 메타데이터를 상기 기준 객체(20)에 대하여 기설정된 기준 메타 데이터와 비교하여 각 카메라에 대하여 카메라별 메타데이터와 기준 메타데이터와의 차이인 카메라간 편차정보를 생성할 수 있다.

이때, 상기 오류 판정부(233)는 상기 카메라간 편차정보 중 기설정된 범위를 벗어나는 카메라간 편차정보를 제외하는 동시에 해당 카메라에 대한 오류 메시지를 출력할 수 있다.

즉, 동일 객체에 대하여 특정 카메라의 인식이 기설정된 범위를 벗어나 오류로 판정할 수 있다.

다음에, 상기 도 3의 카메라간 유효범위 설정부(252)는 상기 카메라간 편차정보를 상기 DB(260)에 누적 저장하며, 상기 통계부(253)는 누적된 상기 카메라간 편차정보의 통계정보를 제공할 수 있다.

이에 따라, 상기 카메라간 유효범위 설정부(252)는 상기 통계정보를 근거로 전체 카메라간 유효범위를 설정할 수 있다. 이때, 상기 카메라간 유효범위 설정부(252)는 상기 통계정보에 포함된 카메라간 편차정보 중 최대값 및 최소값을 카메라간 유효범위로 설정하거나, 상기 카메라간 편차정보의 평균값을 기준으로 기설정된 상하 범위내를 카메라간 유효범위로 설정할 수 있다.

이때, 상기 카메라간 유효범위 역시 카메라별 유효범위와 마찬가지로 파라메터 종류에 따라 연산방식이 다르게 설정될 수 있다.

상술한 바와 같이, 상기 중앙관제서버(200)는 상기 개별 카메라에 대한 편차를 보상하여 메타 데이터를 이용한 검색 정밀도를 향상시킬 수 있으며, 전체 카메라간 편차를 보상하여 개별 카메라의 특성 차이로 인하여 누락되는 영상을 방지하여 메타 데이터를 이용한 검색의 신뢰성을 높일 수 있다.

도 6 내지 도 7은 검색 요청에 따라 메타 데이터를 통해 관련 영상을 제공하는 프로세스에 대한 실시예를 도시한 도면으로서, 도시된 바와 같이 상기 검색부(240)는 질의 요청으로 수신한 "빨간색"의 색상값과, "승용차"의 크기값에 대하여 기설정된 서로 다른 종류의 기준 파라메터를 생성하고, 상기 기준 파라메터를 상기 유효 영역 설정부(250)에 제공할 수 있다(①).

상기 유효영역 설정부(250)는 상기 기준 파라메터의 파라메터 종류에 따라 상기 DB(260)에 누적된 카메라별 편차정보를 취합한(②) 상기 통계정보를 근거로 카메라별로 설정한 카메라별 유효범위를 검색부(240)에 제공하며(③), 상기 검색부(240)는 상기 기준 파라메터에 상기 카메라별 유효범위를 적용하여 카메라별 검색범위를 설정할 수 있다.

일례로, 도 7에 도시된 바와 같이 카메라 1에 대하여 색상값이 100인 경우 카메라 1의 카메라별 편차정보인 ±2를 상기 색상값에 적용하여 98~102를 카메라 1에 대한 카메라 1의 제 1 메타 데이터에 대한 검색범위로 생성할 수 있으며, 크기값은 도시된 바와 마찬가지로 유효범위가 곱셈값으로 설정되어 있으므로, 크기값에 유효범위를 곱하여 카메라 1의 제 1 메타 데이터에 대한 검색범위로 설정할 수 있다. 카메라 2에 대해서도 카메라 1과 마찬가지로 기준 파라메터에 카메라 2에 대하여 설정된 유효범위를 적용하여 카메라 2에 대한 검색범위를 설정하여 검색할 수 있다. 즉, 파라메터 종류에 따라 다르게 설정된 연산방식을 대응되는 파라메터 종류에 적용하여 설정할 수 있다.

이후, 상기 검색부(240)는 상기 카메라별 검색범위를 기준으로 상기 DB(260)에서 카메라별로 저장된 제 1 메타 데이터를 검색하여(④) 상기 카메라별 검색범위에 포함된 상기 제 1 메타데이터와 매칭되는 영상을 제공할 수 있다(⑤).

또한, 상기 검색부(240)는 상기 유효영역 설정부(250)로부터 상기 기준 파라메터의 파라메터 종류에 따라 상기 통계정보를 근거로 전체 카메라를 대상으로 설정한 카메라간 유효범위를 수신할 수 있으며, 상기 DB에서 상기 기준 파라메터에 상기 카메라간 유효범위를 적용하여 카메라간 검색범위를 설정할 수 있다.

이때, 상기 카메라간 검색범위 설정방식 역시 상기 카메라별 검색범위 설정방식과 동일하다.

이후, 상기 검색부(240)는 카메라별로 상기 카메라간 검색범위에 따라 상기 DB에 저장된 제 1 메타데이터를 검색하여, 이를 통해 상기 카메라별 검색범위에 따라 검색된 영상에서 누락된 영상을 추가로 제공함으로써 검색 요청에 대응하는 영상을 제공할 수 있다.

110: 카메라 120: 영상처리부
200: 중앙관제서버 210: 수집부
220: 영상재분석부 230: 파라메터 검증부
231: 연동검증부 232: 편차관리부
233: 오류판정부 240: 검색부
250: 유효영역 설정부 251: 카메라별 유효범위 설정부
252: 카메라간 유효범위 설정부
253: 통계부 260: DB

Claims (14)

1. 하나 이상의 카메라의 영상을 분석하여 제 1 메타데이터를 생성하는 복수의 영상처리부로부터 영상과 상기 제 1 메타데이터를 수신하여 DB에 저장하는 수집부;
   상기 수집부로부터 수신된 영상을 분석하여 제 2 메타 데이터를 생성하는 영상재분석부;
   상기 제 1 메타 데이터와 제 2 메타 데이터를 비교하여 카메라별 편차정보를 생성하는 파라메터 검증부;
   상기 카메라별 편차정보를 DB에 누적 저장하고, 메타데이터에 포함된 파라메터를 근거로 하는 검색요청에 대하여 누적된 상기 카메라별 편차정보를 근거로 카메라별 편차의 유효범위를 설정하는 유효영역 설정부; 및
   외부 검색요청을 수신하여, 상기 DB의 메타데이터 중 상기 카메라별 편차의 유효범위에 포함된 메타데이터를 검색하고, 이에 매칭되는 영상을 선택하여 제공하는 검색부를 포함하되,
   상기 영상재분석부는 각 카메라로부터 알려져 있는 기준 객체에 대하여 획득한 영상을 분석하여 카메라별 메타데이터를 생성하며,
   상기 파라메터 검증부는 상기 기준 객체를 나타내는 기설정된 기준 정보와 비교하여 카메라별로 카메라간 편차정보를 생성하고,
   상기 유효영역 설정부는 상기 카메라간 편차정보를 DB에 누적 저장하며, 상기 검색요청에 대하여 누적된 상기 카메라간 편차정보를 근거로 카메라간 편차의 유효범위가 기설정된 범위 내에 포함되도록 설정하며,
   상기 검색부는 상기 검색요청에 대하여 각 카메라에 대응되는 메타데이터를 상기 카메라간 편차의 유효범위를 근거로 검색하여 상기 카메라간 편차의 유효범위에 포함되는 메타데이터를 가진 영상을 제공하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 시스템.
   
2. 청구항 1에 있어서,
   상기 메타데이터는 객체의 파라메터 및 카메라 식별자를 포함하며,
   상기 객체 파라메터는 객체의 아이디(ID), 색상(color), 크기, 위치(Location), 형태(type), 오브젝트 종류, 이벤트 발생여부 및 종류, 트랙킹 정보, 행동 및 주석 중 적어도 하나를 포함하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 시스템.
   
3. 청구항 1에 있어서,
   상기 제 1 메타 데이터는 상기 카메라 영상을 저해상도로 분석하여 생성되고, 상기 제 2 메타 데이터는 상기 카메라 영상을 본래 해상도로 분석하여 생성되는 것을 특징으로 하는 메타 데이터를 이용한 영상관리 시스템.
   
4. 삭제
5. 청구항 1에 있어서,
   상기 유효영역 설정부는 누적된 상기 카메라간 편차정보의 최대값과 최소값을 상기 카메라간 유효범위로 설정하거나, 누적된 상기 카메라간 편차정보의 평균값에서 기설정된 범위를 상기 카메라간 유효범위로 설정하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 시스템.
   
6. 청구항 1에 있어서,
   상기 파라메터 검증부는 상기 카메라별 편차정보 또는 카메라간 편차정보가 기설정된 범위를 벗어나는 경우 오류 메시지를 출력하며, 오류 메시지에 대응되는 카메라 정보를 출력하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 시스템.
   
7. 청구항 1에 있어서,
   상기 영상재분석부는 상기 제 2 메타 데이터를 생성하며, 상기 제 1 메타 데이터 중 기설정된 정보에 포함되는 데이터가 존재하는 경우 상기 제 2 메타 데이터를 생성하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 시스템.
   
8. 하나 이상의 카메라와 개별 연결된 영상처리부와 통신하는 중앙관제서버의 메타 데이터를 이용한 영상관리 방법에 있어서,
   상기 카메라의 영상을 분석하여 제 1 메타데이터를 생성하는 영상처리부로부터 영상과 상기 제 1 메타데이터를 수신하여 DB에 저장하는 제 1단계;
   수신된 영상을 직접 분석하여 제 2 메타 데이터를 생성하는 제 2단계;
   상기 제 1 메타 데이터와 제 2 메타 데이터를 비교하여 카메라별 편차정보를 생성하는 제 3단계;
   상기 카메라별 편차정보를 DB에 누적 저장하고, 누적된 상기 카메라별 편차정보를 근거로 카메라별 편차의 유효범위를 설정하는 제 4단계; 및
   메타 데이터를 근거로 하는 외부 검색요청을 수신하여, 상기 DB의 메타데이터 중 상기 카메라별 편차의 유효범위에 포함된 메타데이터를 검색하고, 이에 매칭되는 영상을 선택하여 제공하는 제 5단계를 포함하되,
   상기 제 2 단계는 각 카메라로부터 알려져 있는 기준 객체에 대하여 획득한 영상을 분석하여 카메라별 메타데이터를 생성하는 단계를 더 포함하며,
   상기 제 3 단계는 상기 기준 객체를 나타내는 기설정된 기준 정보와 비교하여 카메라별로 카메라간 편차정보를 생성하는 단계를 더 포함하고,
   상기 제 4 단계는 상기 카메라간 편차정보를 DB에 누적 저장하며, 상기 검색요청에 대하여 누적된 상기 카메라간 편차정보를 근거로 카메라간 편차의 유효범위가 기설정된 범위 내에 포함되도록 설정하는 단계를 더 포함하며,
   상기 제 5 단계는 상기 검색요청에 대하여 각 카메라에 대응되는 메타데이터를 상기 카메라간 편차의 유효범위를 근거로 검색하여 상기 카메라간 편차의 유효범위에 포함되는 메타데이터를 가진 영상을 제공하는 단계를 더 포함하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 방법.
   
9. 청구항 8에 있어서,
   상기 메타데이터는 객체의 파라메터 및 카메라 식별자를 포함하며,
   상기 객체 파라메터는 객체의 아이디(ID), 색상(color), 크기, 위치(Location), 형태(type), 오브젝트 종류, 이벤트 발생여부 및 종류, 트랙킹 정보, 행동 및 주석 중 적어도 하나를 포함하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 방법.
   
10. 청구항 8에 있어서,
    상기 제 1 메타 데이터는 상기 카메라 영상을 저해상도로 분석하여 생성되고, 상기 제 2 메타 데이터는 상기 카메라 영상을 본래 해상도로 분석하여 생성되는 것을 특징으로 하는 메타 데이터를 이용한 영상관리 방법.
    
11. 삭제
12. 청구항 8에 있어서,
    상기 제 4 단계는 누적된 상기 카메라간 편차정보의 최대값과 최소값을 상기 카메라간 유효범위로 설정하거나, 누적된 상기 카메라간 편차정보의 평균값에서 기설정된 범위를 상기 카메라간 유효범위로 설정하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 방법.
    
13. 청구항 8에 있어서,
    상기 제 3 단계는 상기 카메라별 편차정보 또는 카메라간 편차정보가 기설정된 범위를 벗어나는 경우 오류 메시지를 출력하며, 오류 메시지에 대응되는 카메라 정보를 출력하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 방법.
    
14. 청구항 8에 있어서,
    상기 제 2 단계는 상기 제 2 메타 데이터를 생성하며, 상기 제 1 메타 데이터 중 기설정된 정보에 포함되는 데이터가 존재하는 경우 상기 제 2 메타 데이터를 생성하는 것을 특징으로 하는 메타 데이터를 이용한 영상 관리 방법.
    

Images