KR102097768B1 - 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체 - Google Patents

인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체 Download PDF

Info

Publication number
KR102097768B1
KR102097768B1 KR1020130099829A KR20130099829A KR102097768B1 KR 102097768 B1 KR102097768 B1 KR 102097768B1 KR 1020130099829 A KR1020130099829 A KR 1020130099829A KR 20130099829 A KR20130099829 A KR 20130099829A KR 102097768 B1 KR102097768 B1 KR 102097768B1
Authority
KR
South Korea
Prior art keywords
image
search
information
search result
distance
Prior art date
Application number
KR1020130099829A
Other languages
English (en)
Other versions
KR20150022246A (ko
Inventor
강대희
Original Assignee
에스케이 텔레콤주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이 텔레콤주식회사 filed Critical 에스케이 텔레콤주식회사
Priority to KR1020130099829A priority Critical patent/KR102097768B1/ko
Publication of KR20150022246A publication Critical patent/KR20150022246A/ko
Application granted granted Critical
Publication of KR102097768B1 publication Critical patent/KR102097768B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Abstract

인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체를 개시한다.
촬영영상에 대한 복수 개의 영상클립 중 입력된 검색어에 대한 검색결과를 생성하고, 검색결과 중 선택된 영상클립에 대응하는 카메라를 기준으로 인접한 카메라를 검출하여 검출카메라에 대한 영상클립을 추출하여 최종 검색결과를 생성하는 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체에 관한 것이다.

Description

인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체{Method and Apparatus for Searching Image by Using Adjacent Distance Reference and Computer-Readable Recording Medium with Program}
본 실시예는 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체에 관한 것이다.
이 부분에 기술된 내용은 단순히 본 실시예에 대한 배경 정보를 제공할 뿐 종래기술을 구성하는 것은 아니다.
범죄 발생률 증가 등의 사회적인 추세에 따라 CCTV와 같이 감시용 카메라의 설치가 늘어나고 있다. 이에 따라, 설치된 카메라들로부터 영상을 수집 및 저장하고, 필요한 영상을 효과적으로 검색하여 재생하는 기술들이 발전하고 있다.
설치된 카메라를 이용하여 촬영된 영상을 검색하는 목적 중 하나는 폭행, 강도, 살인 등의 범죄가 발생했을 때 범행이 발생한 시점 또는 범행 전후의 객체(Object) 이동경로, 행위를 추적하는데 이용될 수 있다. 여기서, 객체는 사람을 의미하며, 차량 등의 이동물체도 포함될 수 있다.
일반적으로 영상 검색을 위해서 검색 대상 카메라를 지정하거나, 날짜, 시간 등의 검색어를 입력하여 영상을 검색하거나, 객체의 특징값을 입력하여 객체를 인식하여 영상을 검색하는 기술이 연구되고 있다. 다만, 이러한 일반적인 영상 검색 방법은 카메라의 증가로 인해 영상이 기하급수적으로 늘어나는 상황에서 한계성이 존재하고, 불필요한 검색 결과로 인해 유용한 결과값을 찾는데 다소 어려움이 있다.
본 실시예는, 촬영영상에 대한 복수 개의 영상클립 중 입력된 검색어에 대한 검색결과를 생성하고, 검색결과 중 선택된 영상클립에 대응하는 카메라를 기준으로 인접한 카메라를 검출하여 검출카메라에 대한 영상클립을 추출하여 최종 검색결과를 생성하는 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체를 제공하는 데 주된 목적이 있다.
본 실시예의 일 측면에 의하면, 복수 개의 영상 촬영장치로부터 촬영영상을 획득하는 영상 획득부; 상기 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립(Clip)으로 저장하는 영상 저장 처리부; 입력된 검색 요청정보에 포함된 색인정보에 근거하여 상기 복수 개의 영상클립 중 상기 색인정보에 대응하는 영상클립을 추출하여 색인검색 결과정보를 생성하는 색인 검색 제어부; 상기 색인검색 결과정보 중 대표 영상프레임을 결정하는 프레임 결정부; 및 상기 대표 영상프레임에 대응하는 기준 영상 촬영장치의 기준 위치정보를 추출하고, 상기 복수 개의 영상 촬영장치 중 상기 기준 위치정보를 기준으로 기 설정된 범위 내에 포함된 위치정보에 대응하는 주변 영상 촬영장치의 영상클립만을 추출하여 인접거리 검색 결과정보를 생성하는 거리인자 검색 제어부를 포함하는 것을 특징으로 하는 영상 검색장치를 제공한다.
또한, 본 실시예의 다른 측면에 의하면, 영상 검색장치가 인접거리를 기준으로 영상을 검색하는 방법에 있어서, 복수 개의 영상 촬영장치로부터 촬영영상을 획득하는 영상 획득과정; 상기 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립으로 저장하는 영상 저장 처리과정; 입력된 검색 요청정보에 포함된 색인정보에 근거하여 상기 복수 개의 영상클립 중 상기 색인정보에 대응하는 영상클립을 추출하여 색인검색 결과정보를 생성하는 색인 검색 제어과정; 상기 색인검색 결과정보 중 대표 영상프레임을 결정하는 프레임 결정과정; 상기 대표 영상프레임에 대응하는 기준 영상 촬영장치의 기준 위치정보를 추출하는 위치정보 추출과정; 상기 복수 개의 영상 촬영장치 중 상기 기준 위치정보를 기준으로 기 설정된 범위 내에 포함된 위치정보에 대응하는 주변 영상 촬영장치의 영상클립만을 추출하는 과정; 및 상기 주변 영상 촬영장치의 영상클립을 이용하여 인접거리 검색 결과정보를 생성하는 거리인자 검색 제어과정을 포함하는 것을 특징으로 하는 영상 검색방법을 제공한다.
또한, 본 실시예의 다른 측면에 의하면, 데이터 처리 기기에, 복수 개의 영상 촬영장치로부터 촬영영상을 획득하는 영상 획득과정; 상기 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립으로 저장하는 영상 저장 처리과정; 입력된 검색 요청정보에 포함된 색인정보에 근거하여 상기 복수 개의 영상클립 중 상기 색인정보에 대응하는 영상클립을 추출하여 색인검색 결과정보를 생성하는 색인 검색 제어과정; 상기 색인검색 결과정보 중 대표 영상프레임을 결정하는 프레임 결정과정; 상기 대표 영상프레임에 대응하는 기준 영상 촬영장치의 기준 위치정보를 추출하는 위치정보 추출과정; 상기 복수 개의 영상 촬영장치 중 상기 기준 위치정보를 기준으로 기 설정된 범위 내에 포함된 위치정보에 대응하는 주변 영상 촬영장치의 영상클립만을 추출하는 과정; 및 상기 주변 영상 촬영장치의 영상클립을 이용하여 인접거리 검색 결과정보를 생성하는 거리인자 검색 제어과정을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공한다.
이상에서 설명한 바와 같이 본 실시예에 의하면, 촬영영상에 대한 복수 개의 영상클립 중 입력된 검색어에 대한 검색결과를 생성하고, 검색결과 중 선택된 영상클립에 대응하는 카메라를 기준으로 인접한 카메라를 검출하여 검출카메라에 대한 영상클립을 추출하여 최종 검색결과를 생성함으로써, 촬영된 영상의 양이 증가하여도 영상을 빠르게 검색할 수 있는 효과가 있고, 불필요한 검색결과를 감소시켜 사용자가 필요로 하는 유용한 결과값을 정확하게 찾을 수 있는 효과가 있다. 또한, 인접한 카메라로 촬영된 영상만을 검색함으로써, 객체의 이동 경로를 파악할 수 있어 객체 탐지 또는 추적의 효율성을 높일 수 있는 효과가 있다.
도 1은 본 실시예에 따른 인접거리를 이용한 영상 검색 시스템을 개략적으로 나타낸 블록 구성도이다.
도 2는 본 실시예에 따른 인접거리를 이용한 영상 검색을 수행하기 위한 검색 제어부를 개략적으로 나타낸 블록 구성도이다.
도 3은 본 실시예에 따른 인접거리를 이용한 영상검색 서비스장치를 설명하기 위한 예시도이다.
도 4는 본 실시예에 따른 인접거리를 이용한 영상 검색 방법을 설명하기 위한 순서도이다.
도 5는 본 실시예에 따른 인접거리를 이용한 영상 검색 동작을 설명하기 위한 예시도이다.
도 6은 본 실시예에 따른 인접거리를 이용한 영상 검색의 검색결과를 설명하기 위한 예시도이다.
도 7은 본 실시예에 따른 영상 검색장치가 객체간 유사도 및 인접거리를 이용하여 검색 결과정보를 생성하는 동작을 설명하기 위한 순서도이다.
도 8은 본 실시예에 따른 영상 검색장치가 인접거리를 이용하여 검색 결과정보를 생성하는 추가 동작을 설명하기 위한 순서도이다.
도 9는 본 실시예에 따른 영상 검색장치가 인접거리를 이용하여 검색 결과정보를 생성하는 동작을 n 번 반복하여 수행하는 동작을 설명하기 위한 순서도이다.
이하, 본 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 실시예에 따른 인접거리를 이용한 영상 검색 시스템을 개략적으로 나타낸 블록 구성도이다.
본 실시예에 따른 영상 검색 시스템은 영상 촬영장치(110) 및 영상 검색장치(120)를 포함하고, 영상 검색장치(120)는 영상 획득부(130), 영상 저장 처리부(140), 검색 제어부(150), 인접거리 계산부(160), 데이터베이스(162), 객체 유사도 계산부(170) 및 결과정보 제공부(180)를 포함한다. 이때, 본 실시예에 따른 영상 검색 시스템에 포함된 구성요소는 반드시 이에 한정되는 것은 아니다.
영상 촬영장치(110)는 영상을 촬영할 수 있는 장치를 말하며, 본 실시예에 따른 영상 촬영장치(110)는 이벤트가 발생한 시점 또는 지점으로부터 이동하는 객체를 추적하기 위한 영상을 촬영할 수 있는 CCTV용 카메라, 감시 카메라 등으로 구현될 수 있으며, 이러한 영상 촬영장치(110)는 제1 카메라(112), 제2 카메라(114) 및 제n 카메라(116) 등과 같이 복수 개(예컨대, n 개)로 구성될 수 있다. 여기서, 객체는 이동하는 사람일 수 있으나 반드시 이에 한정되는 것은 아니며 이동할 수 있는 차량 등의 이동 가능한 물체일 수도 있다.
영상 촬영장치(110)에 포함된 복수 개의 카메라(112, 114 및 116 중 어느 하나)는 각각의 촬영된 촬영영상을 영상 검색장치(120)로 전송할 수 있으며, 각각의 촬영영상은 상시 촬영된 영상일 수 있으나 기 설치된 센서, 인식장치 등을 이용하여 객체가 발견되었을 경우에만 촬영된 영상일 수도 있다.
영상 검색장치(120)는 영상 촬영장치(110)로부터 촬영된 촬영영상을 획득하여 복수 개의 영상클립으로 저장하고, 복수 개의 영상클립 중 입력된 색인정보에 대응하는 색인 검색결과 정보를 생성하고, 색인검색 결과정보 중 결정된 대표 영상프레임에 대응하는 영상 촬영장치(110)의 위치정보를 기준으로 기 설정된 범위 내에 위치한 주변의 영상 촬영장치(110)를 검출하여 인접거리 검색 결과정보를 생성하는 동작을 수행한다. 이하, 영상 검색장치(120)에 포함된 구성요소에 대해 설명하도록 한다.
영상 획득부(130)는 영상 촬영장치(110)로부터 촬영된 촬영영상을 획득하는 동작을 수행한다. 영상 획득부(130)는 복수 개의 카메라(112, 114 및 116 중 어느 하나)로부터 촬영된 촬영영상을 각각 획득할 수 있다. 여기서, 촬영영상은 복수 개의 영상프레임으로 구성될 수 있다. 또한, 촬영영상은 상시 촬영된 영상일 수 있으나 반드시 이에 한정되는 것은 아니며, 객체가 발견된 경우에만 촬영된 영상일 수 있다.
영상 저장 처리부(140)는 획득한 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립(Clip)으로 저장하는 동작을 수행한다. 여기서, 영상 저장 처리부(140)는 관리자의 조작 또는 입력을 통해 설정된 조건정보에 근거하여 촬영영상을 복수 개의 영상클립으로 저장할 수 있다. 예컨대, 영상 저장 처리부(140)는 검색 대상 카메라, 촬영날짜, 촬영시간, 객체의 색상 및 객체의 특징 등과 같은 조건정보를 매칭하여 복수 개의 영상클립을 카메라별로 저장할 수 있다.
검색 제어부(150)는 사용자의 조작 또는 입력을 통해 입력된 검색 요청정보에 포함된 색인정보에 근거하여 색인검색 결과정보를 생성하고, 색인검색 결과정보 중 결정된 대표 영상프레임에 대응하는 영상 촬영장치(110)를 기준으로 기 설정된 범위 내에 포함된 주변의 영상 촬영장치(110)의 영상클립만을 추출하여 인접거리 검색 결과정보를 생성하는 동작을 수행한다.
본 실시예에 따른 검색 제어부(150)는 검색 요청정보에 포함된 검색 대상 카메라, 촬영날짜, 촬영시간, 객체의 색상 및 객체의 특징 등의 색인정보에 근거하여 영상 저장 처리부(140)로부터 복수 개의 영상클립 중 색인정보에 해당하는 영상클립을 추출하여 색인검색 결과정보를 생성한다. 예컨대, 검색 제어부(150)는 촬영날짜(2013/01/01) 및 검색 대상 카메라(카메라 5) 대한 색인정보를 입력 받은 경우, 2013/01/01의 날짜에 카메라 5로 촬영된 영상클립을 추출하여 색인검색 결과정보로 생성할 수 있다.
검색 제어부(150)는 사용자로부터 범죄 등의 이벤트와 관련된 객체가 포함된 것으로 확인된 영상클립에 대한 입력신호를 입력 받고, 입력신호에 근거하여 선택된 영상프레임을 대표 영상프레임으로 결정한다. 여기서, 대표 영상프레임은 사용자의 입력신호만을 이용하여 결정하는 것으로 기재하고 있으나 반드시 이에 한정되는 것은 아니며 영상클립 내의 객체를 검출하여 자동으로 대표 영상프레임을 결정할 수도 있다.
검색 제어부(150)는 대표 영상프레임 내의 객체를 기준으로 수신된 객체 유사도값에 근거하여 영상클립을 추출하고, 추출된 영상클립 중 기 설정된 범위 내에 위치한 영상 촬영장치(110)로 촬영된 영상클립만을 추출하여 인접거리 검색 결과정보를 생성한다. 더 자세히 설명하자면, 검색 제어부(150)는 대표 영상프레임이 결정되면 대표 영상프레임에 대응하는 기준 영상 촬영장치를 중심으로 복수 개의 영상 촬영장치(110)와의 각각의 인접 거리값을 인접거리 계산부(160)로부터 획득한다.
검색 제어부(150)는 인접거리 계산부(160)로부터 획득한 인접 거리값이 기 설정된 임계값 이하이면, 복수 개의 영상 촬영장치(110) 중 기 설정된 범위 내에 위치한 주변 영상 촬영장치로 인지하고, 주변 영상 촬영장치의 영상클립만을 추출하여 인접거리 검색 결과정보를 생성한다.
한편, 검색 제어부(150)는 기준 영상 촬영장치를 기준으로 기 설정된 범위 내에 위치한 주변 영상 촬영장치의 영상클립을 추출하여 생성된 인접거리 검색 결과정보 중 신규 대표 영상프레임을 재설정할 수 있다. 즉, 검색 제어부(150)는 생성된 인접거리 검색 결과정보에 포함된 복수 개의 영상클립 중 신규로 대표 영상프레임을 설정하는 동작을 수행하고, 인접거리 검색 결과정보를 생성하는 동작을 반복할 수 있다. 여기서, 검색 제어부(150)는 대표 영상프레임을 재설정하고 인접거리 검색 결과정보를 생성하는 동작을 반복하는 반복횟수를 설정할 수 있다. 예컨대, 검색 제어부(150)는 2 번의 반복횟수가 설정된 경우, 인접거리 검색 결과정보가 2 번 생성될 때까지 대표 영상프레임을 재설정할 수 있고, 2 개의 인접거리 검색 결과정보를 결합하여 하나의 검색 결과정보로 생성할 수도 있다.
인접거리 계산부(160)는 복수 개의 영상 촬영장치(110) 간에 인접 거리값을 산출하는 동작을 수행한다.
본 실시예에 따른 인접거리 계산부(160)는 검색 제어부(150)에서 색인검색 결과정보 중 대표 영상프레임이 결정되면, 복수 개의 영상 촬영장치(110)에 대한 위치정보를 데이터베이스(162)로부터 수신한다. 여기서, 인접거리 계산부(160)는 검색 제어부(150)에서 결정된 대표 영상프레임에 대응하는 영상 촬영장치(110)의 위치정보를 기준 위치정보로 추출하고, 기준 위치정보와 나머지 영상 촬영장치(110)의 각각의 위치정보를 이용하여 인접 거리값을 산출하여 검색 제어부로 전송한다. 여기서, 인접 거리값은 기준 위치정보와 나머지 영상 촬영장치(110)의 각각의 위치정보 간의 벡터의 크기인 것이 바람직하나 반드시 이에 한정되는 것은 아니다.
데이터베이스(162)는 데이터베이스 관리 프로그램(DBMS)을 이용하여 컴퓨터 시스템의 저장공간(하드디스크 또는 메모리)에 구현된 일반적인 데이터구조를 의미하는 것으로, 데이터의 검색(추출), 삭제, 편집, 추가 등을 자유롭게 행할 수 있는 데이터 저장형태를 뜻하는 것으로, 오라클(Oracle), 인포믹스(Infomix), 사이베이스(Sybase), DB2와 같은 관계형 데이타베이스 관리 시스템(RDBMS)이나, 겜스톤(Gemston), 오리온(Orion), O2 등과 같은 객체 지향 데이타베이스 관리 시스템(OODBMS) 및 엑셀론(Excelon), 타미노(Tamino), 세카이주(Sekaiju) 등의 XML 전용 데이터베이스(XML Native Database)를 이용하여 본 발명의 일 실시예의 목적에 맞게 구현될 수 있고, 자신의 기능을 달성하기 위하여 적당한 필드(Field) 또는 엘리먼트들을 가지고 있다.
본 실시예에 따른 데이터베이스(162)는 영상 촬영장치(110)에 대한 위치정보 및 인접정보 등을 저장하는 동작을 수행한다. 더 자세히 설명하자면, 데이터베이스(162)는 복수 개의 영상 촬영장치(110)가 설치된 위치좌표값, 설치 주소정보, 위도 및 경도정보 등에 대한 위치정보를 저장하고, 위치정보를 인접거리 계산부(160)로 전송한다.
또한, 데이터베이스(162)는 사용자의 입력에 근거하여 각각의 영상 촬영장치(110)를 기준으로 인접한 것으로 설정된 주변의 영상 촬영장치(110)에 대한 인접정보를 저장할 수도 있다. 예컨대, 데이터베이스(162)는 사용자의 입력에 따라 제1 카메라(112)를 기준으로 인접한 제2 카메라(114) 및 제3 카메라에 대한 위치정보들을 제1 카메라(112)의 인접정보로 저장할 수 있다.
객체 유사도 계산부(170)는 영상클립 간의 객체 유사도값을 계산하고 검색 제어부(150)로 전송하는 동작을 수행한다. 더 자세히 설명하자면, 객체 유사도 계산부(170)는 색인검색 결과정보 중 대표 영상프레임이 결정되면, 대표 영상프레임 객체에 대한 색상, 질감, 위치 등의 특징정보에 따른 영상 분석방식을 이용하여 색인검색 결과정보에 포함된 복수 개의 영상클립의 객체 유사도값을 산출하여 검색 제어부(150)로 전송한다. 여기서, 객체 유사도값은 객체에 대한 특징정보를 수치화하여 객체의 유사정도를 수치로 산출한 값인 것이 바람직하다.
한편, 검색 제어부(150)에서 인접거리만을 이용하여 인접거리 검색 결과정보를 생성하는 경우, 객체 유사도 계산부(170)에서 객체 유사도값을 산출하는 동작은 생략될 수도 있다.
결과정보 제공부(180)는 검색 제어부(150)로부터 생성된 인접거리 검색 결과정보를 제공하는 동작을 수행한다. 여기서, 결과정보 제공부(180)는 인접거리 검색 결과정보에 포함된 영상클립을 재생하기 위한 디스플레이부를 포함하는 것이 바람직하나 반드시 이에 한정되는 것은 아니며 인접거리 검색 결과정보를 외부 사용자 단말로 전송할 수도 있다.
도 2는 본 실시예에 따른 인접거리를 이용한 영상 검색을 수행하기 위한 검색 제어부를 개략적으로 나타낸 블록 구성도이다.
본 실시예에 따른 검색 제어부(150)는 색인 검색 제어부(210), 프레임 결정부(220), 거리인자 검색 제어부(230), 위치정보 저장 처리부(232) 및 유사객체 검색 제어부(240)를 포함한다. 본 실시예에서는 검색 제어부(150)가 색인 검색 제어부(210), 프레임 결정부(220), 거리인자 검색 제어부(230), 위치정보 저장 처리부(232) 및 유사객체 검색 제어부(240)를 포함하는 것으로 기재하고 있으나 반드시 이에 한정되는 것은 아니다.
색인 검색 제어부(210)는 사용자의 조작 또는 입력을 통해 검색 요청정보를 입력 받고, 검색 요청정보에 포함된 색인정보에 근거하여 색인검색 결과정보를 생성하는 동작을 수행한다.
본 실시예에 따른 색인 검색 제어부(210)는 검색 요청정보에 포함된 검색 대상 카메라, 촬영날짜, 촬영시간, 객체의 색상 및 객체의 특징 등의 색인정보에 근거하여 영상 저장 처리부(140)로부터 복수 개의 영상클립 중 색인정보에 해당하는 영상클립을 추출하여 색인검색 결과정보를 생성한다.
색인 검색 제어부(210)는 색인정보에 근거하여 텍스트 기반 검색, 내용 기반 검색 등의 방식을 이용하여 색인검색 결과정보를 생성할 수 있다. 여기서, 텍스트 기반 검색은 영상을 여러 개의 키워드 또는 주석을 조건정보로 저장된 영상클립을 색인정보에 근거하여 검색하고, 내용 기반 검색은 영상 내의 객체에 대한 색상, 질감, 위치 등을 분석한 조건정보로 저장된 영상클립을 색인정보에 근거하여 검색하는 방식을 의미한다. 예컨대, 색인 검색 제어부(210)는 촬영날짜(2013/01/01)에 대한 색인정보를 입력 받은 경우, 촬영날짜(2013/01/01)에 해당하는 영상클립을 영상 촬영장치(110)별로 추출하여 색인검색 결과정보로 생성할 수 있다.
프레임 결정부(220)는 색인 검색 제어부(210)로부터 생성된 색인 결과정보 중 대표 영상프레임을 결정하는 동작을 수행한다. 본 실시예에 따른 프레임 결정부(220)는 사용자의 입력신호에 근거하여 선택된 영상프레임을 대표 영상프레임으로 결정된다. 여기서, 프레임 결정부(220)는 사용자가 범죄 등의 이벤트와 관련된 객체가 포함된 것으로 판단된 영상클립에 대한 입력신호를 입력 받아 대표 영상프레임을 결정할 수 있다.
한편, 프레임 결정부(220)는 사용자의 입력신호만을 이용하여 대표 영상프레임을 결정하는 것으로 기재하고 있으나 반드시 이에 한정되는 것은 아니며 영상 분석방식을 이용하여 이벤트에 관련된 객체가 포함된 것으로 인지하고, 자동으로 대표 영상프레임을 결정할 수도 있다.
또한, 프레임 결정부(220)는 하나의 영상프레임을 대표 영상프레임으로 결정할 수 있으나 복수 개의 영상프레임으로 구성된 영상클립을 대표 영상프레임으로 결정할 수도 있다.
거리인자 검색 제어부(230)는 색인검색 결과정보 중 결정된 대표 영상프레임에 대응하는 영상 촬영장치(이하, 기준 영상 촬영장치)를 기준으로 인접한 주변의 영상 촬영장치(이하, 주변 영상 촬영장치)의 영상클립을 추출하여 인접거리 검색 결과정보를 생성하는 동작을 수행한다.
본 실시예에 따른 거리인자 검색 제어부(230)는 색인검색 결과정보에 포함된 복수 개의 영상클립 중 기준 영상 촬영장치의 기준 위치정보를 위치정보 저장 처리부(232)로부터 추출하고, 기준 위치정보를 중심으로 기 설정된 범위 내에 포함된 위치정보를 추출한다. 여기서, 거리인자 검색 제어부(230)는 기 설정된 범위 내에 포함된 위치정보에 대응하는 주변 영상 촬영장치의 영상클립만을 추출하여 인접거리 검색 결과정보를 생성한다.
거리인자 검색 제어부(230)는 기준 영상 촬영장치와 복수 개의 영상 촬영장치(110)에 대한 각각의 위치정보를 이용하여 기준 영상 촬영장치와 영상 촬영장치(110) 간의 인접 거리값을 산출하고, 산출된 인접 거리값이 기 설정된 임계값 이하인 주변 영상 촬영장치를 기 설정된 범위 내에 포함된 것으로 인지하여 주변 영상 촬영장치의 영상클립을 추출하여 인접거리 검색 결과정보를 생성할 수도 있다.
한편, 거리인자 검색 제어부(230)는 위치정보 저장 처리부(232)로부터 기 저장된 영상 촬영장치(110) 간의 인접정보를 수신하는 경우, 인접 거리값을 산출하는 동작을 생략하고, 인접정보에 근거하여 주변 영상 촬영장치의 영상클립을 추출할 수도 있다.
거리인자 검색 제어부(230)는 기준 영상 촬영장치를 기준으로 기 설정된 범위 내에 위치한 주변 영상 촬영장치의 영상클립을 추출하여 생성된 인접거리 검색 결과정보 중 신규 대표 영상프레임을 재설정하여 신규 인접거리 검색 결과정보를 생성할 수 있다. 즉, 거리인자 검색 제어부(230)는 생성된 인접거리 검색 결과정보에 포함된 복수 개의 영상클립 중 프레임 결정부(220)를 통해 신규로 대표 영상프레임을 설정하는 동작을 수행하고, 인접거리 검색 결과정보를 생성하는 동작을 반복할 수 있다. 여기서, 거리인자 검색 제어부(230)는 대표 영상프레임을 재설정하고 인접거리 검색 결과정보를 생성하는 동작을 반복하는 반복횟수를 설정할 수 있다. 예컨대, 거리인자 검색 제어부(230)는 3 번의 반복횟수가 설정된 경우, 인접거리 검색 결과정보가 3 번 생성될 때까지 대표 영상프레임을 재설정할 수 있고, 3 개의 인접거리 검색 결과정보를 결합하여 하나의 검색 결과정보로 생성할 수도 있다.
또한, 거리인자 검색 제어부(230)는 인접거리 검색 결과정보를 반복하여 생성하는데 사용된 복수 개의 대표 영상프레임에 대응하는 영상 촬영장치(110)들의 위치정보를 이용하여 대표 영상프레임에 포함된 객체의 이동 경로정보를 산출할 수 있으며, 산출된 이동 경로정보를 인접거리 검색 결과정보에 추가하여 생성할 수 있다. 여기서, 이동 경로정보는 시계열적 순서로 산출하는 것이 바람직하나 반드시 이에 한정되는 것은 아니며 영상 촬영장치(110)의 위치정보 순서, 영상 정확도 순서 등으로 분류하여 산출할 수도 있다.
위치정보 저장 처리부(232)는 영상 촬영장치(110)에 대한 위치정보 및 인접정보 등을 저장하는 동작을 수행한다. 더 자세히 설명하자면, 위치정보 저장 처리부(232)는 복수 개의 영상 촬영장치(110)가 설치된 위치좌표값, 설치 주소정보, 위도 및 경도정보 등에 대한 위치정보를 저장하고, 저장된 위치정보를 필요에 따라 거리인자 검색 제어부(230)로 전송한다. 또한, 위치정보 저장 처리부(232)는 각각의 영상 촬영장치(110)를 기준으로 인접한 것으로 설정된 주변의 영상 촬영장치(110)에 대한 위치정보를 기 저장할 수 있으나 반드시 이에 한정되는 것은 아니다. 예컨대, 위치정보 저장 처리부(232)는 사용자의 입력에 따라 제1 카메라(112)를 기준으로 인접한 제2 카메라(114) 및 제3 카메라에 대한 위치정보들을 제1 카메라(112)의 인접정보로 저장할 수 있다.
도 2에 기재된 위치정보 저장 처리부(232)는 거리인자 검색 제어부(230)와 별도의 모듈인 것으로 기재하고 있으나 반드시 이에 한정되는 것은 아니며, 위치정보 저장 처리부(232)가 거리인자 검색 제어부(230)에 포함되어 하나의 모듈로 구현될 수도 있다.
유사객체 검색 제어부(240)는 거리인자 검색 제어부(230)에서 인접거리 검색 결과정보를 생성하는데 있어서, 유사객체를 검출하는 추가적인 동작을 수행할 수 있다. 더 자세히 설명하자면, 유사객체 검색 제어부(240)는 대표 영상프레임에 포함된 객체에 대한 객체 유사도값을 이용하여 색인검색 결과정보에 포함된 복수 개의 영상클립 중 일부를 추출하고, 추출된 영상클립 중 거리인자 검색 제어부(230)에서 인접거리를 기준으로 인접한 영상 촬영장치(110)의 영상클립이 추출되도록 한다. 여기서, 유사객체 검색 제어부(240)는 대표 영상프레임 객체에 대한 색상, 질감, 위치 등의 특징정보에 따른 영상 분석방식을 이용하여 객체 유사도값을 산출할 수 있다. 한편, 객체 유사도값은 객체 유사도 계산부(170)로부터 수신하는 것이 바람직하나 반드시 이에 한정되는 것은 아니다.
도 3은 본 실시예에 따른 인접거리를 이용한 영상검색 서비스장치를 설명하기 위한 예시도이다.
도 3에 도시된 바와 같이, 영상검색 서비스장치(300)는 카메라, 영상 수신모듈, 영상 저장모듈, 영상 검색모듈, 인접거리 계산모듈, 객체 유사도 계산모듈 및 영상 재생모듈로 구성된 하나의 장치로 구현될 수 있다. 여기서, 카메라는 영상 촬영장치(110), 영상 수신모듈은 영상 획득부(130), 영상 저장모듈은 영상 저장 처리부(140), 영상 검색모듈은 검색 제어부(150), 인접거리 계산모듈은 인접거리 계산부(160) 및 데이터베이스(162), 객체 유사도 계산모듈은 객체 유사도 계산부(170) 및 영상 재생모듈은 결과정보 제공부(180)와 대응되어 구현될 수 있다. 각각의 대응되는 구성요소에 대한 동작의 자세한 설명은 도 1에 기재된 내용과 동일함으로 생략하도록 한다.
도 4는 본 실시예에 따른 인접거리를 이용한 영상 검색 방법을 설명하기 위한 순서도이다.
영상 검색장치(120)는 영상 촬영장치(110)로부터 촬영된 촬영영상을 획득한다(S410). 여기서, 촬영영상은 복수 개의 영상프레임으로 구성될 수 있고, 상시 촬영된 영상일 수 있으나 반드시 이에 한정되는 것은 아니며 객체가 발견된 경우에만 촬영된 영상일 수 있다.
영상 검색장치(120)는 획득한 촬영영상을 복수 개의 영상클립으로 저장한다(S420). 영상 검색장치(120)는 관리자의 조작 또는 입력을 통해 설정된 조건정보에 근거하여 촬영영상을 복수 개의 영상클립으로 저장할 수 있다. 예컨대, 영상 검색장치(120)는 검색 대상 카메라, 촬영날짜, 촬영시간, 객체의 색상 및 객체의 특징 등과 같은 조건정보를 매칭하여 복수 개의 영상클립을 카메라별로 저장할 수 있다.
영상 검색장치(120)는 검색 요청정보를 입력 받고, 검색 요청정보에 포함된 색인정보에 근거하여 색인검색 결과정보를 생성한다(S430). 즉, 영상 검색장치(120)는 검색 요청정보에 포함된 검색 대상 카메라, 촬영날짜, 촬영시간, 객체의 색상 및 객체의 특징 등의 색인정보에 근거하여 복수 개의 영상클립 중 색인정보에 해당하는 영상클립을 추출하여 색인검색 결과정보를 생성한다.
영상 검색장치(120)는 색인검색 결과정보 중 대표 영상프레임이 선택되면(S440), 대표 영상프레임에 대응하는 기준 영상촬영장치의 기준 위치정보를 추출한다(S442).
영상 검색장치(120)는 기준 위치정보를 기준으로 기 설정된 범위 내에 위치한 주변 영상 촬영장치를 검출한다(S450). 영상 검색장치(120)는 기준 위치정보와 복수 개의 영상 촬영장치(110)에 대한 각각의 위치정보를 이용하여 기준 영상 촬영장치와 영상 촬영장치(110) 간의 인접 거리값을 산출하고, 산출된 인접 거리값이 기 설정된 임계값 이하인 주변 영상 촬영장치를 기 설정된 범위 내에 포함하는 것을 인지한다.
영상 검색장치(120)는 주변 영상 촬영장치의 영상클립만을 추출하여 인접거리 검색 결과정보를 생성하여 사용자에게 제공한다(S460). 여기서, 영상 검색장치(120)는 인접거리 검색 결과정보에 포함된 영상클립을 재생하기 위한 디스플레이부를 포함하는 것이 바람직하나 반드시 이에 한정되는 것은 아니며 인접거리 검색 결과정보를 외부 사용자 단말로 전송할 수도 있다.
한편, 영상 검색장치(120)는 추가 검색을 위해 인접거리 검색 결과정보 중 신규로 대표 영상프레임을 선택하여 인접거리 검색 결과정보를 반복하여 생성하기 위해 단계 S440 내지 단계 S460의 동작을 수행할 수도 있다(S470).
도 4에서는 단계 S410 내지 단계 S470를 순차적으로 실행하는 것으로 기재하고 있으나, 이는 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 도 4에 기재된 순서를 변경하여 실행하거나 단계 S410 내지 단계 S470 중 하나 이상의 단계를 병렬적으로 실행하는 것으로 다양하게 수정 및 변형하여 적용 가능할 것이므로, 도 4는 시계열적인 순서로 한정되는 것은 아니다.
전술한 바와 같이 도 4에 기재된 본 실시예에 따른 영상 검색장치(120)의 동작은 프로그램으로 구현되고 컴퓨터로 읽을 수 있는 기록매체에 기록될 수 있다. 본 실시예에 따른 영상 검색장치(120)의 동작을 구현하기 위한 프로그램이 기록되고 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 이러한 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수도 있다. 또한, 본 실시예를 구현하기 위한 기능적인(Functional) 프로그램, 코드 및 코드 세그먼트들은 본 실시예가 속하는 기술분야의 프로그래머들에 의해 용이하게 추론될 수 있을 것이다.
도 5는 본 실시예에 따른 인접거리를 이용한 영상 검색 동작을 설명하기 위한 예시도이다.
영상 검색장치(120)는 복수 개의 영상 촬영장치(110)를 이용하여 촬영된 영상 중 입력된 검색 요청정보에 포함된 색인정보를 이용하여 영상클립을 추출하여 색인검색 결과정보를 생성한다. 도 5의 (a)에 도시된 바와 같이, 색인검색 결과정보는 카메라 1(510) 내지 카메라 7, 카메라 11 및 카메라 12 등으로 촬영된 복수 개의 영상클립을 포함할 수 있다.
영상 검색장치(110)는 색인검색 결과정보 중 사용자의 입력신호에 근거하여 카메라 1(510)에 대한 영상클립을 대표 영상프레임으로 결정하고, 카메라 1(510)에 대한 기준 위치정보를 추출한다.
영상 검색장치(110)는 카메라 1(510)을 중심으로 복수 개의 영상 촬영장치(110)에 대한 위치정보와 기준 위치정보를 이용하여 인접 거리값을 산출하고, 기 설정된 임계값 이하에 해당하는 카메라 2 내지 카메라 7만을 카메라 1(510)과 인접한 것으로 인지하여 카메라 2 내지 카메라 7의 영상클립만을 추출하여 제1 인접거리 검색 결과정보를 생성한다. 여기서, 영상 검색장치(110)는 인접 거리값이 기 설정된 임계값 이상에 해당하는 카메라 11 및 카메라 12는 카메라 1(510)과 인접하지 않은 것으로 인지하여 검색결과에서 제외한다.
한편, 영상 검색장치(110)는 사용자의 입력에 근거하여 추가 검색에 대한 요청이 존재하는 경우, 신규 대표 영상프레임을 결정하여 추가 검색을 수행할 수 있다. 도 5의 (b)에 도시된 바와 같이, 제1 인접거리 검색 결과정보 중 카메라 3(520)에 대한 영상클립을 신규 대표 영상프레임으로 결정하면, 카메라 3(520)에 대한 기준 위치정보를 추출하고, 추출된 기존 위치정보 및 복수 개의 영상 촬영장치(110)에 대한 위치정보를 이용하여 인접 거리값을 산출할 수 있다. 영상 검색장치(110)는 각각의 인접 거리값에 근거하여 기 설정된 임계값 이하 즉, 기 설정된 범위 내에 위치하는 카메라 1(510) 내지 카메라 2, 카메라 4, 카메라 8 내지 카메라 10의 영상클립을 추출하여 제2 인접거리 검색 결과정보를 생성할 수 있다.
도 6은 본 실시예에 따른 인접거리를 이용한 영상 검색의 검색결과를 설명하기 위한 예시도이다.
도 6에 도시된 제3 인접거리 검색 결과정보는 영상 검색장치(120)가 도 5 (a) 및 (b)에 기재된 제1 인접거리 검색 결과정보 및 제2 인접거리 검색 결과정보와 동일하게 신규 대표 영상프레임을 카메라 10(530)으로 결정하여 생성된 결과정보를 의미한다.
영상 검색장치(120)는 인접거리 검색 결과정보 중 대표 영상프레임을 재설정하는 동작을 설정된 반복횟수에 근거하여 반복할 수 있다.
한편, 영상 검색장치(120)는 사용자에게 검색결과를 제공하는 데 있어서, 인접거리 검색 결과정보를 반복하여 생성하는데 사용된 복수 개의 대표 영상프레임에 대응하는 영상 촬영장치(110)들의 위치정보를 이용하여 대표 영상프레임에 포함된 객체의 이동 경로정보를 산출할 수 있다. 예컨대, 영상 검색장치(120)는 제1 인접거리 검색 결과정보, 제2 인접거리 검색 결과정보 및 제3 인접거리 검색 결과정보를 생성하는데 사용된 카메라 1(510), 카메라 3(520) 및 카메라 10(530)의 위치정보를 이용하여 객체의 이동 경로정보를 산출할 수 있다. 여기서, 영상 검색장치(120)는 산출된 이동 경로정보를 인접거리 검색 결과정보에 추가하여 생성할 수 있다. 여기서, 이동 경로정보는 시계열적 순서로 산출하는 것이 바람직하나 반드시 이에 한정되는 것은 아니며 영상 촬영장치(110)의 위치정보 순서, 영상 정확도 순서 등으로 분류하여 산출할 수도 있다.
도 7은 본 실시예에 따른 영상 검색장치가 객체간 유사도 및 인접거리를 이용하여 검색 결과정보를 생성하는 동작을 설명하기 위한 순서도이다.
영상 검색장치(120)는 검색조건을 입력 받아(S702) 검색을 실행한다(S710). 여기서, 검색조건은 검색 요청정보에 포함된 색인정보를 의미하고, 검색조건은 검색 대상 카메라, 촬영날짜, 촬영시간, 객체의 색상 및 객체의 특징 등과 같은 정보를 포함할 수 있다. 즉, 영상 검색장치(120)는 검색 요청정보에 포함된 색인정보에 대응하는 영상클립의 검색을 수행한다.
영상 검색장치(120)는 단계 S710에 대한 영상클립의 개수가 a개인 1차 검색결과를 제공한다(S720). 여기서, 1차 검색 결과는 색인정보에 대응하는 검색결과인 색인검색 결과정보를 의미하고, 1차 검색 결과는 구비된 디스플레이를 이용하여 제공될 수 있다.
영상 검색장치(120)는 사용자의 검색의도에 해당하는 영상클립을 선택한다(S730). 즉, 영상 검색장치(120)는 사용자의 입력신호에 근거하여 선택된 영상클립을 대표 영상프레임으로 결정할 수 있다. 여기서, 영상 검색장치(120)는 사용자가 범죄 등의 이벤트와 관련된 객체가 포함된 것으로 확인된 영상클립을 검색의도에 해당하는 영상클립으로 선택할 수 있다.
영상 검색장치(120)는 추가 검색을 실행하여(S740), 객체간 유사도를 계산하고(S750), 영상클립의 개수가 b개인 제2 검색 결과를 제공한다(S760). 여기서, 영상 검색장치(120)는 단계 S730에서 선택된 영상클립 내에 포함된 객체에 대한 색상, 질감, 위치 등의 특징정보에 따른 영상 분석방식을 이용하여 객체 유사도가 임계값 이상인 것으로 확인된 영상클립을 추출하여 제2 검색 결과로 제공할 수 있다.
영상 검색장치(120)는 제2 검색결과 중 선택된 영상클립에 대한 영상 촬영장치를 중심으로 카메라 인접성에 근거하여 인접한 영상클립만을 검색결과에 포함하고(S770), 영상클립의 개수가 c개인 최종 검색 결과를 제공한다(S780). 영상 검색장치(120)는 제2 검색결과 중 단계 S730에서 선택된 영상클립에 대응하는 기준 영상 촬영장치를 중심으로 인접한 주변 영상 촬영장치를 검출하고, 주변 영상 촬영장치의 영상클립만을 추출하여 최종 검색결과 즉, 인접거리 검색 결과정보를 생성한다.
도 7에서는 단계 S702 내지 단계 S780를 순차적으로 실행하는 것으로 기재하고 있으나, 이는 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 도 7에 기재된 순서를 변경하여 실행하거나 단계 S702 내지 단계 S780 중 하나 이상의 단계를 병렬적으로 실행하는 것으로 다양하게 수정 및 변형하여 적용 가능할 것이므로, 도 7은 시계열적인 순서로 한정되는 것은 아니다.
도 8은 본 실시예에 따른 영상 검색장치가 인접거리를 이용하여 검색 결과정보를 생성하는 추가 동작을 설명하기 위한 순서도이다.
도 8에 도시된 영상 검색장치(120)의 동작을 설명하는데 있어서, 도 7의 단계 S702 내지 단계 S780과 동일한 동작에 대한 기재는 생략하도록 한다.
영상 검색장치(120)는 단계 S780에서 검색된 영상클립의 개수가 c개인 검색 결과에서 추가로 영상클립을 선택하고, 추가로 선택된 영상클립에 대한 영상 촬영장치를 중심으로 카메라 인접성에 근거하여 인접한 주변 영상 촬영장치의 영상클립만을 추출하여(S810), 영상클립의 개수가 d개인 검색 결과를 제공할 수 있다(S820). 여기서, 영상 검색장치(120)은 영상클립의 검색을 추가로 수행하여 c개보다 적은 개수인 d개의 영상클립을 포함하는 검색결과를 제공하는 것이 바람직하나 반드시 이에 한정되는 것은 아니다.
도 9는 본 실시예에 따른 영상 검색장치가 인접거리를 이용하여 검색 결과정보를 생성하는 동작을 n 번 반복하여 수행하는 동작을 설명하기 위한 순서도이다.
도 9에 도시된 영상 검색장치(120)의 동작을 설명하는데 있어서, 도 7의 단계 S702 내지 단계 S780과 동일한 동작에 대한 기재는 생략하도록 한다.
영상 검색장치(120)는 단계 S780에서 검색된 영상클립의 개수가 c개인 검색 결과에서 반복 검색을 수행하기 위한 횟수를 입력 받아 적용하고(S910), 추가로 선택된 영상클립에 대한 영상 촬영장치를 중심으로 카메라 인접성에 근거하여 인접한 주변 영상 촬영장치의 영상클립을 추출하여(S920), 영상클립의 개수가 d개인 검색 결과를 제공하기 위한 동작을 반복하여 수행할 수 있다(S930). 여기서, 영상 검색장치(120)은 영상클립의 검색을 기 설정된 횟수만큼 추가로 수행하여 c개보다 적은 개수인 d개의 영상클립을 포함하는 검색결과를 제공하는 것이 바람직하나 반드시 이에 한정되는 것은 아니다.
이상의 설명은 본 실시예의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 실시예의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다. 따라서, 본 실시예들은 본 실시예의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 실시예의 기술 사상의 범위가 한정되는 것은 아니다. 본 실시예의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 실시예의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
이상에서 설명한 바와 같이 본 실시예는 영상을 검색하는 기술분야에 적용되어, 많은 양의 영상 내에서 검색결과를 빠르게 검색할 수 있는 효과가 있고, 불필요한 검색결과를 감소시켜 사용자가 필요로 하는 유용한 결과값을 정확하게 검색할 수 있는 효과를 발생하는 유용한 발명이다.
110: 영상 촬영장치 120: 영상 검색장치
130: 영상 획득부 140: 영상 저장 처리부
150: 검색 제어부 160: 인접거리 계산부
162: 데이터베이스 170: 객체 유사도 계산부
180: 결과정보 제공부
210: 색인 검색 제어부 220: 프레임 결정부
230: 거리인자 검색 제어부 232: 위치정보 저장 처리부
240: 유사객체 검색 제어부

Claims (14)

  1. 복수 개의 영상 촬영장치로부터 촬영영상을 획득하는 영상 획득부;
    상기 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립(Clip)으로 저장하는 영상 저장 처리부;
    입력된 검색 요청정보에 포함된 색인정보에 근거하여 상기 복수 개의 영상클립 중 상기 색인정보에 대응하는 영상클립을 추출하여 1차 검색결과인 색인검색 결과정보를 생성하는 색인 검색 제어부;
    상기 색인검색 결과정보 중 대표 영상프레임을 결정하는 프레임 결정부; 및
    상기 대표 영상프레임에 대응하는 기준 영상 촬영장치의 기준 위치정보를 추출하고, 상기 복수 개의 영상 촬영장치 중 상기 기준 위치정보를 기준으로 상기 기준 영상 촬영장치와의 사이에 인접 거리값이 기 설정된 임계값 이하인 주변 영상 촬영장치의 영상클립만을 추출하여 최종 검색결과인 인접거리 검색 결과정보를 생성하는 거리인자 검색 제어부
    를 포함하는 것을 특징으로 하는 영상 검색장치.
  2. ◈청구항 2은(는) 설정등록료 납부시 포기되었습니다.◈
    제 1 항에 있어서
    상기 복수 개의 영상 촬영장치에 대응하는 각각의 위치정보를 저장하는 위치정보 데이터베이스를 추가로 포함하되, 상기 거리인자 검색 제어부는 상기 각각의 위치정보 중 하나를 상기 기준 위치정보로 추출하는 것을 특징으로 하는 영상 검색장치.
  3. ◈청구항 3은(는) 설정등록료 납부시 포기되었습니다.◈
    제 2 항에 있어서,
    상기 거리인자 검색 제어부는,
    상기 기준 위치정보와 상기 위치정보를 이용하여 상기 기준 영상 촬영장치와 상기 복수 개의 영상 촬영장치 간의 각각의 인접 거리값을 산출하는 것을 특징으로 하는 영상 검색장치.
  4. ◈청구항 4은(는) 설정등록료 납부시 포기되었습니다.◈
    제 3 항에 있어서,
    상기 거리인자 검색 제어부는,
    상기 위치정보 데이터베이스로부터 상기 복수 개의 영상 촬영장치에 대한 각각의 위치좌표값, 설치 주소정보 및 위경도 정보 중 적어도 하나 이상을 포함하는 상기 위치정보를 획득하여 상기 인접 거리값을 산출하는 것을 특징으로 하는 영상 검색장치.
  5. ◈청구항 5은(는) 설정등록료 납부시 포기되었습니다.◈
    제 1 항에 있어서,
    상기 거리인자 검색 제어부는,
    위치정보 데이터베이스로부터 상기 기준 영상 촬영장치를 중심으로 인접한 영상 촬영장치에 대한 인접정보를 획득하고, 획득한 상기 인접정보에 포함된 상기 주변 영상 촬영장치의 상기 영상클립만을 추출하는 것을 특징으로 하는 영상 검색장치.
  6. ◈청구항 6은(는) 설정등록료 납부시 포기되었습니다.◈
    제 1 항에 있어서,
    상기 거리인자 검색 제어부는,
    상기 인접거리 검색 결과정보 중 적어도 하나의 신규 대표 영상프레임을 재설정하여 신규 인접거리 검색 결과정보를 생성하는 것을 특징으로 하는 영상 검색장치.
  7. ◈청구항 7은(는) 설정등록료 납부시 포기되었습니다.◈
    제 6 항에 있어서,
    상기 거리인자 검색 제어부는,
    상기 인접거리 검색 결과정보 중 상기 신규 대표 영상프레임을 재설정하는 동작의 반복횟수를 설정하여 상기 신규 인접거리 검색 결과정보를 상기 반복횟수만큼 생성하는 것을 특징으로 하는 영상 검색장치.
  8. ◈청구항 8은(는) 설정등록료 납부시 포기되었습니다.◈
    제 7 항에 있어서,
    상기 거리인자 검색 제어부는,
    상기 인접거리 검색 결과정보 및 상기 신규 인접거리 검색 결과정보에 근거하여 상기 대표 영상프레임에 포함된 객체의 이동 경로정보를 상기 인접거리 검색결과정보에 추가하여 생성하는 것을 특징으로 하는 영상 검색장치.
  9. ◈청구항 9은(는) 설정등록료 납부시 포기되었습니다.◈
    제 1 항에 있어서,
    상기 거리인자 검색 제어부는,
    상기 대표 영상프레임 내의 객체의 특징정보를 이용하여 산출된 객체 유사도값에 근거하여 객체유사 영상클립을 추출하고, 상기 객체유사 영상클립 중 상기 기준 영상 촬영장치를 기준으로 기 설정된 범위 내에 포함된 상기 주변 영상 촬영장치에 해당하는 영상클립만을 추출하는 것을 특징으로 하는 영상 검색장치.
  10. 영상 검색장치가 인접거리를 기준으로 영상을 검색하는 방법에 있어서,
    복수 개의 영상 촬영장치로부터 촬영영상을 획득하는 영상 획득과정;
    상기 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립으로 저장하는 영상 저장 처리과정;
    입력된 검색 요청정보에 포함된 색인정보에 근거하여 상기 복수 개의 영상클립 중 상기 색인정보에 대응하는 영상클립을 추출하여 1차 검색결과인 색인검색 결과정보를 생성하는 색인 검색 제어과정;
    상기 색인검색 결과정보 중 대표 영상프레임을 결정하는 프레임 결정과정;
    상기 대표 영상프레임에 대응하는 기준 영상 촬영장치의 기준 위치정보를 추출하는 위치정보 추출과정;
    상기 복수 개의 영상 촬영장치 중 상기 기준 위치정보를 기준으로 상기 기준 영상 촬영장치와의 사이에 인접 거리값이 기 설정된 임계값 이하인 주변 영상 촬영장치의 영상클립만을 추출하는 과정; 및
    상기 주변 영상 촬영장치의 영상클립을 이용하여 최종 검색결과인 인접거리 검색 결과정보를 생성하는 거리인자 검색 제어과정
    을 포함하는 것을 특징으로 하는 영상 검색방법.
  11. ◈청구항 11은(는) 설정등록료 납부시 포기되었습니다.◈
    제 10 항에 있어서,
    상기 거리인자 검색 제어과정은,
    상기 기준 위치정보와 상기 복수 개의 영상 촬영장치 각각의 위치정보를 이용하여 상기 기준 영상 촬영장치와 상기 복수 개의 영상 촬영장치 간의 각각의 인접 거리값을 산출하는 것을 특징으로 하는 영상 검색방법
  12. ◈청구항 12은(는) 설정등록료 납부시 포기되었습니다.◈
    제 10 항에 있어서,
    상기 거리인자 검색 제어과정은,
    상기 인접거리 검색 결과정보 중 하나의 신규 대표 영상프레임을 재설정하여 신규 인접거리 검색 결과정보를 생성하되, 기 설정된 반복횟수에 근거하여 상기 신규 대표 영상프레임을 재설정하는 동작을 제어하는 과정을 포함하는 것을 특징으로 하는 영상 검색방법.
  13. ◈청구항 13은(는) 설정등록료 납부시 포기되었습니다.◈
    제 10 항에 있어서,
    상기 거리인자 검색 제어과정은,
    상기 대표 영상프레임 내의 객체의 특징정보를 이용하여 산출된 객체 유사도값에 근거하여 객체유사 영상클립을 추출하고, 상기 객체유사 영상클립 중 상기 기준 영상 촬영장치를 기준으로 기 설정된 범위 내에 포함된 상기 주변 영상 촬영장치에 해당하는 영상클립만을 추출하는 과정을 포함하는 것을 특징으로 하는 영상 검색방법.
  14. 데이터 처리 기기에,
    복수 개의 영상 촬영장치로부터 촬영영상을 획득하는 영상 획득과정;
    상기 촬영영상을 기 설정된 조건정보에 매칭하여 복수 개의 영상클립으로 저장하는 영상 저장 처리과정;
    입력된 검색 요청정보에 포함된 색인정보에 근거하여 상기 복수 개의 영상클립 중 상기 색인정보에 대응하는 영상클립을 추출하여 1차 검색결과인 색인검색 결과정보를 생성하는 색인 검색 제어과정;
    상기 색인검색 결과정보 중 대표 영상프레임을 결정하는 프레임 결정과정;
    상기 대표 영상프레임에 대응하는 기준 영상 촬영장치의 기준 위치정보를 추출하는 위치정보 추출과정;
    상기 복수 개의 영상 촬영장치 중 상기 기준 위치정보를 기준으로 상기 기준 영상 촬영장치와의 사이에 인접 거리값이 기 설정된 임계값 이하인 주변 영상 촬영장치의 영상클립만을 추출하는 과정; 및
    상기 주변 영상 촬영장치의 영상클립을 이용하여 최종 검색결과인 인접거리 검색 결과정보를 생성하는 거리인자 검색 제어과정
    을 실현시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020130099829A 2013-08-22 2013-08-22 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체 KR102097768B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130099829A KR102097768B1 (ko) 2013-08-22 2013-08-22 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130099829A KR102097768B1 (ko) 2013-08-22 2013-08-22 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체

Publications (2)

Publication Number Publication Date
KR20150022246A KR20150022246A (ko) 2015-03-04
KR102097768B1 true KR102097768B1 (ko) 2020-04-06

Family

ID=53020285

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130099829A KR102097768B1 (ko) 2013-08-22 2013-08-22 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체

Country Status (1)

Country Link
KR (1) KR102097768B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101960667B1 (ko) * 2018-08-31 2019-07-15 주식회사 텍트원 저장 영상에서 용의자 추적 장치 및 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101142933B1 (ko) 2009-11-30 2012-05-11 에스케이 텔레콤주식회사 위치기반 서비스를 이용한 ｃｃｔｖ 카메라 장치와 안전관제 센터 서버, 그를 포함한 지능형 보안 시스템 및 그 방법
KR101272229B1 (ko) * 2013-01-04 2013-06-11 주식회사 미래엔에스 Gis 기반의 경로 이동에 따른 cctv 관제 시스템 및 그 방법

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060100341A (ko) * 2006-08-30 2006-09-20 (주)로직아이텍 객체식별이 가능한 영상처리 감시시스템
KR101062225B1 (ko) * 2009-09-30 2011-09-06 아주대학교산학협력단 감시 카메라를 이용한 지능형 영상 검색 방법 및 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101142933B1 (ko) 2009-11-30 2012-05-11 에스케이 텔레콤주식회사 위치기반 서비스를 이용한 ｃｃｔｖ 카메라 장치와 안전관제 센터 서버, 그를 포함한 지능형 보안 시스템 및 그 방법
KR101272229B1 (ko) * 2013-01-04 2013-06-11 주식회사 미래엔에스 Gis 기반의 경로 이동에 따른 cctv 관제 시스템 및 그 방법

Also Published As

Publication number Publication date
KR20150022246A (ko) 2015-03-04

Similar Documents

Publication Publication Date Title
US9208226B2 (en) Apparatus and method for generating evidence video
US8150098B2 (en) Grouping images by location
JP5371083B2 (ja) 顔識別特徴量登録装置、顔識別特徴量登録方法、顔識別特徴量登録プログラム及び記録媒体
US20160019426A1 (en) Method of video analysis
JP2023145558A (ja) 外観検索のシステムおよび方法
JP4945477B2 (ja) 監視システム、人物検索方法
KR102206184B1 (ko) 동영상 내 객체 관련 정보 검색 방법 및 동영상 재생 장치
US10037467B2 (en) Information processing system
KR101734029B1 (ko) 이동형 촬영영상의 유사도 분석을 이용한 지능형 이동 감시시스템 및 그 감시방법
US20080002864A1 (en) Using background for searching image collections
Meng et al. Object instance search in videos via spatio-temporal trajectory discovery
Ye et al. Video based mobile location search with large set of SIFT points in cloud
KR101212082B1 (ko) 영상인식장치 및 그 영상 감시방법
KR20160014413A (ko) 복수의 오버헤드 카메라와 사이트 맵에 기반한 객체 추적 장치 및 그 방법
JP2014006680A5 (ja) 情報処理装置、情報処理システム、情報処理方法および記録媒体
Khan et al. Dimension invariant model for human head detection
KR102097768B1 (ko) 인접거리 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체
KR20210055567A (ko) 영상의 유사도 분석을 이용한 위치 측정 시스템 및 그 방법
CN110876090B (zh) 视频摘要回放方法、装置、电子设备及可读存储介质
WO2020145882A1 (en) Object tracking systems and methods for tracking a target object
KR101170676B1 (ko) 얼굴 인식 기반의 얼굴 검색 시스템 및 그 방법
KR102085036B1 (ko) 시간 기준을 이용한 영상 검색장치, 방법 및 컴퓨터로 읽을 수 있는 기록매체
JP2018194956A (ja) 画像認識装置、方法、及びプログラム
Peng et al. The knowing camera 2: recognizing and annotating places-of-interest in smartphone photos
Wang et al. Sensor-assisted camera motion analysis and motion estimation improvement for H. 264/AVC video encoding

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant