KR20160010218A - 영상재생장치 및 영상재생장치에서 영상정보 제공 방법 - Google Patents

영상재생장치 및 영상재생장치에서 영상정보 제공 방법 Download PDF

Info

Publication number
KR20160010218A
KR20160010218A KR1020140091316A KR20140091316A KR20160010218A KR 20160010218 A KR20160010218 A KR 20160010218A KR 1020140091316 A KR1020140091316 A KR 1020140091316A KR 20140091316 A KR20140091316 A KR 20140091316A KR 20160010218 A KR20160010218 A KR 20160010218A
Authority
KR
South Korea
Prior art keywords
heat map
video
area
unit
region
Prior art date
Application number
KR1020140091316A
Other languages
English (en)
Other versions
KR102170693B1 (ko
Inventor
임정은
노승인
최은지
Original Assignee
한화테크윈 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화테크윈 주식회사 filed Critical 한화테크윈 주식회사
Priority to KR1020140091316A priority Critical patent/KR102170693B1/ko
Priority to US14/599,083 priority patent/US9406342B2/en
Priority to CN201510311915.9A priority patent/CN105323656B/zh
Publication of KR20160010218A publication Critical patent/KR20160010218A/ko
Priority to US15/217,465 priority patent/US10116910B2/en
Application granted granted Critical
Publication of KR102170693B1 publication Critical patent/KR102170693B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • H04N9/8715—Regeneration of colour television signals involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

본 발명의 바람직한 일 실시예로서, 영상재생장치는 디스플레이부에서 디스플레이되는 히트맵에서 적어도 하나 이상의 서브히트맵영역을 설정하고, 설정된 적어도 하나 이상의 서브히트맵영역 중 원본 비디오를 재생하고자 하는 관심영역과, 비디오 써머리를 제공하고자 하는 써머리 영역을 선택하는 인터페이스를 지원한다.

Description

영상재생장치 및 영상재생장치에서 영상정보 제공 방법{Imaging apparatus and method for providing imaging information therein}
본 발명은 비디오 써머리를 제공하는 영상재생장치에 관한 것으로, 보다 상세히 히트맵과 연계된 비디오 써머리를 재공하는 영상재생장치에 관한 것이다.
네트워크 영상 감시 시스템이란 사용자가 특정 목적 또는 방범을 위해 감시를 원하는 거리, 빌딩, 공장 등의 환경에 네트워크 카메라 등과 같은 영상촬영장치를 설치하여 해당 환경을 감시하는 시스템을 의미한다.
네트워크 영상 감시 시스템의 일 예로는 NVR(Network Video Recorder)시스템이 있다. NVR 시스템은 영상감시를 위해 인터넷 프로토콜을 사용하여 감시지역의 영상을 전송, 저장 및 모니터링 할 수 있는 영상보안시스템을 말한다.
NVR 시스템은 인터넷 망을 이용해 유연한 영상보안감시를 수행할 수 있도록 한 시스템으로서, 시스템의 확장성, 구축비용 절감 및 유연한 원격 모니터링 등에서 그 장점이 있다.
KR 10-2006-0028307
장시간 녹화된 영상 데이터를 기반으로 사용자가 검색 또는 재생을 할 경우 녹화된 시간에 비례하는 장시간이 필요하다. 이를 가급적 줄이기 위하여 Fastforward/Fastbackward 기능이 저장장치내 탑재되어 사용자에게 제공하고 있지만 방대한 양의 비디오를 탐색하기에는 역부족이다.
본 발명의 바람직한 일 실시예에서는 장시간 녹화된 비디오 내에 사용자가 의미있는 데이터를 검색하고자 할 때 비디오 써머리 기능을 이용하여 사용자가 검색하고자 하는 영상만을 추출하고자 한다.
본 발명의 바람직한 일 실시예로서, 영상재생장치는 입력영상 및 상기 입력영상위에 레이어를 겹쳐서 히트맵을 디스플레이하는 디스플레이부; 상기 디스플레이부에서 디스플레이되는 히트맵에서 적어도 하나 이상의 서브히트맵영역을 설정하는 서브히트맵영역설정부; 상기 설정된 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 관심영역을 선택하는 인터페이스를 지원하고, 상기 선택된 관심영역에 원본 비디오를 재생하는 원본비디오재생부; 및 상기 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 써머리영역을 선택하는 인터페이스를 지원하고, 상기 선택된 써머리영역에 비디오써머리를 제공하는 비디오써머리제공부;를 포함하고, 상기 원본 비디오재생부 및 상기 비디오써머리제공부는 동일 또는 상이한 서브히트맵영역을 선택할 수 있는 것을 특징으로 한다.
바람직하게, 상기 원본 비디오재생부는 상기 선택된 관심영역에 대해서는 상기 히트맵상에서 상기 선택된 관심영역에 대응되는 서브히트맵영역에 원본 비디오를 재생하고, 상기 선택된 관심영역 이외의 상기 적어도 하나 이상의 서브히트맵영역에 대해서는 히트맵 데이터를 표시하는 것을 특징으로 한다.
바람직하게, 상기 비디오써머리제공부는 상기 선택된 써머리영역에 대해서는 상기 히트맵상에서 상기 선택된 써머리영역에 대응되는 서브히트맵영역에 비디오 써머리를 재생하고, 상기 선택된 써머리영역 이외의 상기 적어도 하나 이상의 서브히트맵영역에 대해서는 상기 히트맵상에서 대응되는 서브히트맵영역에 히트맵 데이터를 표시하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, 영상재생장치에서 영상정보를 제공하는 방법은 디스플레이부에서 입력영상 및 상기 입력영상위에 레이어를 겹쳐서 히트맵을 디스플레이하는 단계, 서브히트맵영역설정부에서 상기 디스플레이되는 히트맵에서 적어도 하나 이상의 서브히트맵영역을 설정하도록 인터페이스를 지원하는 단계; 원본비디오재생부에서 상기 설정된 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 관심영역을 선택하는 인터페이스를 지원하고, 상기 선택된 관심영역에 원본 비디오를 재생하는 단계; 및 상기 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 써머리영역을 선택하는 인터페이스를 지원하고, 상기 선택된 써머리영역에 비디오써머리를 제공하는 단계;를 포함한다.
본 발명의 비디오써머리를 제공하는 영상재생장치는 공항 군사, 항만, 도로, 교량 등 주요 국가시설, 지하철, 버스, 빌딩, 경기장, 주차장, 카지노 자동차 및 모바일 기기에 이르기까지 이동 물체 탐지가 필요한 다양한 지능형 영상 감시 시스템에서 특정 이벤트를 검출하거나, 특정 객체를 검출하고자 하는 경우 빠르게 원하는 결과를 제공할 수 있는 효과가 있다.
본 발명은 또한 통계적 데이터를 제공하는 히트맵을 이용하여 통계 데이터를 파악하고, 통계데이터를 기초로 특정 영역에 대해 비디오 써머리 또는 원본 영상을 빠르게 분석할 수 있는 효과가 있다.
도 1 은 본 발명의 바람직한 일 실시예로서, 비디오써머리를 제공하는 영상재생장치를 도시한다.
도 2 는 본 발명의 바람직한 일 실시예로서, 비디오써머리부의 구성을 도시한다.
도 3 은 본 발명의 바람직한 일 실시예로서, 비디오써머리부에서 사용될 비디오 구간들의 일 예를 도시한다.
도 4 는 본 발명의 바람직한 일 실시예로서, 비디오써머리부에서 비디오써머리를 생성하기 위해 디코딩을 수행하는 일 예를 도시한다.
도 5 는 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 비디오써머리를 재생하는 일 예를 도시한다.
도 6 은 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 복수의 비디오써머리를 재생하는 일 예를 도시한다.
도 7은 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 복수 개의 채널을 디스플레이하는 경우, 각 채널에 대해 비디오써머리를 선택적으로 온/오프하는 일 실시예를 도시한다.
도 8 은 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 단일 채널에 대해 복수 개의 비디오써머리를 동시에 재생하는 일 예를 도시한다.
도 9 는 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 복수의 채널에 대해 각각 원하는 개수의 비디오써머리를 재생하는 일 예를 도시한다.
도 10 은 본 발명의 바람직한 일 실시예로서, 통계적 정보가 포함된 히트맵과 비디오써머리를 함께 제공하는 영상재생장치의 내부 구성도를 도시한다.
도 11은 CH1의 입력 영상에 대해 사람의 출현빈도 통계값을 기준으로 통계를 산출한 히트맵을 도시하고 있다.
도 12는 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 영상정보를 제공하는 일 예를 도시한다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 본 발명의 효과 및 특징, 그리고 그것들을 달성하는 방법은 도면과 함께 상세하게 후술되어 있는 실시 예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 다양한 형태로 구현될 수 있다.
이하, 첨부된 도면을 참조하여 본 발명의 실시 예들을 상세히 설명하기로 하며, 도면을 참조하여 설명할 때 동일하거나 대응하는 구성 요소는 동일한 도면부호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
이하의 실시 예에서, 제1, 제2 등의 용어는 한정적인 의미가 아니라 하나의 구성 요소를 다른 구성 요소와 구별하는 목적으로 사용되었다.
이하의 실시 예에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
이하의 실시 예에서, 포함하다 또는 가지다 등의 용어는 명세서상에 기재된 특징, 또는 구성요소가 존재함을 의미하는 것이고, 하나 이상의 다른 특징들 또는 구성요소가 부가될 가능성을 미리 배제하는 것은 아니다.
도면에서는 설명의 편의를 위하여 구성 요소들이 그 크기가 과장 또는 축소될 수 있다. 예컨대, 도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 임의로 나타내었으므로, 본 발명이 반드시 도시된 바에 한정되지 않는다.
도 1 은 본 발명의 바람직한 일 실시예로서, 비디오써머리를 제공하는 영상재생장치를 도시한다.
영상재생장치(100)는 NVR(Network Video Recorder), DVR(Digital Video Recorder) 등을 포함한다. 본 발명의 바람직한 일 실시예로서 영상재생장치(100)는 영상재생부(110), 저장부(120), 비디오써머리부(130) 및 메타데이터생성부(140)를 포함한다.
본 발명의 바람직한 일 실시예로서, 영상재생장치(100)는 네트워크카메라나 외부 영상장치로부터 유무선으로 수신한 입력영상을 저장하고, 저장된 입력영상을 재생하며, 사용자의 요청에 따라 입력영상을 재생할 때 재생하는 입력영상의 비디오써머리를 동시에 제공할 수 있다.
본 발명의 바람직한 일 실시예로서, 영상재생장치(100)는 복수의 네트워크카메라로부터 영상을 수신할 수 있으며, 수신한 복수 개 채널의 영상을 단일 화면에 표시가 가능하다.
본 발명의 또 다른 바람직한 일 실시예로서, 영상재생장치(100)는 도 6을 참고하면 복수 개의 입력 영상을 단일 디스플레이 화면에 표시할 때, 상기 복수 개의 입력 영상 각각에 대한 비디오써머리도 디스플레이 화면에 함께 표시하도록 구현될 수 있다.
본 발명의 또 다른 바람직한 일 실시예로서, 영상재생장치(100)는 도 7을 참고하면 복수 개의 입력 영상을 단일 디스플레이 화면에 표시할 때, 상기 복수 개의 입력 영상 중 사용자가 비디오써머리를 보고자 하는 입력 영상에 대해서만 비디오써머리를 디스플레에 함께 표시하도록 구현될 수 있다.
본 발명의 또 다른 바람직한 일 실시예로서, 영상재생장치(100)는 도 8 을 참고하면 단일 입력영상에 대해 복수 개의 비디오 써머리를 단일 디스플레이 화면에 표시하도록 구현될 수 있다.
본 발명의 또 다른 바람직한 일 실시예로서, 영상재생장치(100)는 도 9 를 참고하면, 복수의 입력영상에 대해 제 1 입력영상에는 하나의 비디오 써머리를 표시하고, 제 2 입력영상에는 복수의 비디오 써머리를 표시하도록 구현될 수 있다.
이하에서 도 1 을 참고하여 비디오써머리를 제공하는 영상재생장치의 각 구성요소를 간략히 기술하면 다음과 같다. 본 발명의 바람직한 일 실시예로서, 영상재생부(110)는 CPU로, 저장부(120)는 HDD로 구현이 가능하다.
영상재생부(110)는 입력되는 비디오 원본영상을 수신하여 저장부(120)에 저장한다. 또한, 영상재생부(110)는 저장부(120)에 비디오 원본영상을 저장하면서 동시에 영상재생장치의 디스플레이 화면에 수신한 비디오 원본영상을 재생하도록 구현이 가능하다. 영상재생부(110)는 저장부(120), 비디오써머리부(130) 및 메타데이터생성부(140)를 제어하고, 비디오 원본영상 또는 비디오써머리를 재생한다.
영상재생부(110)는 또한 입력되는 비디오 원본영상을 메타데이터생성부(140)에 제공할 수 있다. 메타데이터생성부(140)는 지능형 영상 분석을 수행하기 위하여 비디오 원본영상에서 메타데이터를 추출하고, 추출한 메타데이터를 영상재생부(110)를 통해 저장부(120)에 저장한다.
메타데이터생성부(140)는 비디오 원본영상의 시간 구간 단위로 상기 비디오 원본영상 내의 객체 각각에 식별번호를 부여하고, 식별번호가 부여된 객체의 좌표정보, 객체의 종류별로 구별한 객체 분류 정보, 객체의 색상별로 구별한 색상 분류 정보, 객체의 움직임 검출정보 중 적어도 하나 이상을 추출한다.
객체는 사람이나 사물의 특징 정보를 모두 포함한다. 특징정보의 일 예로서 사물이 자동차인 경우, 자동차의 유형이 승용차인지, 버스인지, 트럭인지 등의 정보, 자동차의 색상 정보, 자동차의 차량번호가 있는 경우 차량번호 정보가 모두 특징정보, 객체정보에 포함된다.
비디오써머리부(130)는 메타데이터생성부(140)에서 생성된 메타데이터를 이용하여 비디오 원본영상에 대한 비디오써머리 스크립트를 생성하고, 생성된 비디오써머리 스크립트를 기초로 비디오써머리를 생성한다. 이에 대한 구체적인 설명은 도 2 내지 4를 참고한다.
비디오 써머리(Video Summary)는 장시간의 비디오를 단시간의 비디오로 축약하는 기술로서 움직이는 물체를 추적하거나 분석해서 객체와 객체의 행동에 대하여 데이터 베이스를 구성하고 동일한 화면에 객체가 표시된 서로 다른 시간을 화면에 표시한다.
본 발명의 바람직한 일 실시예로서, 비디오써머리 기능이 OFF 상태인 경우 영상재생부(110)는 입력 비디오 영상을 수신하여 저장부(120)에 저장을 하고, 메타생성부(140)에 비디오 원본영상을 전송한다. 메타데이터생성부(140)에서는 비디오 원본영상에 대해 메타데이터를 생성한 후, 영상재생부(110)의 제어를 통해 저장부(120)에 생성한 메타데이터를 저장한다. 영상재생부(110)에서는 생성된 메타데이터를 실시간으로 저장부(120)에 저장하도록 구현할 수 있다.
본 발명의 바람직한 일 실시예로서, 비디오써머리 기능이 ON 상태인 경우, 영상재생장치(100)는 사용자로부터 비디오써머리를 보고자 하는 시간 구간(예, 07:00~07:30)을 입력받는다. 영상재생장치(100)는 이 후, 사용자가 입력한 시간 구간에 해당하는 비디오 원본영상을 디스플레이에 출력하고, 비디오써머리부(130)에서 메타데이터생성부(140)로부터 사용자가 입력한 시간구간에 대응하는 메타데이터를 수신하여 비디오써머리를 생성하고, 비디오 원본영상과 함께 디스플레이에 출력한다.
도 2 는 본 발명의 바람직한 일 실시예로서, 비디오써머리부의 구성을 도시한다.
비디오써머리부(230)는 메타데이터생성부(도 1, 140)에서 생성된 메타데이터(S210)를 이용하여 수신한 비디오 입력영상(S211)을 디코딩하여 비디오 원본영상을 생성한 후, 영상의 프레임을 리샘플링 하고, 비디오 써머리부에서 처리할 수 있는 범위의 영상 크기로 스케일링하는 과정을 거쳐 비디오 써머리를 생성한다.
비디오써머리부(230)는 비디오 원본영상에 대해 생성된 비디오 스크립트를 영상재생부(210)로 전송한다. 영상재생부(210)는 수신한 비디오 스크립트를 분석하여 비디오써머리부(230)에서 필요한 비디오 구간들(도 3, S310, S320, S330)만 비디오써머리부(230)로 전송한다. 비디오써머리부(230)에서는 이상의 필요한 비디오 구간들(도 3, S310, S320, S330)에 대한 비디오써머리를 생성한다.
도 3 은 본 발명의 바람직한 일 실시예로서, 비디오써머리부에서 사용될 비디오 구간들의 일 예를 도시한다.
비디오써머리부(도 1, 130)는 메타데이터생성부(도 1, 140)에서 생성된 메타데이터를 이용하여 수신한 비디오 원본영상으로부터 이미지 프레임과 시간정보를 추출하여 압축 영상 프레임을 생성한다.
비디오써머리 스크립트는 메타데이터생성부(도 1, 140)에서 생성한 메타데이터를 이용하여 이미지 프레임에서 배경 정보를 추출하고, AMD(Advanced Motion Detection) 기법을 이용하여 의미있는 움직임을 검출한다. 이 후, 의미있는 움직임 정보로부터 객체정보를 추출한다. 비디오써머리 스크립트는 시간 순서대로 비디오써머리에 표시될 객체들의 순서 및 위치에 대한 정보를 포함한다.
의미있는 움직임이란 움직임 중에서도 사람이나, 차량 또는 특정 객체의 움직임을 감지하는 것을 의미한다. 또는 특정 영역에서 특정 객체의 움직임을 감지하는 것을 의미한다. 따라서, 나뭇잎이 바람에 흔들리거나 구름이 이동하는 움직임은 의미있는 움직임으로 해석되지 않는다.
본 발명의 바람직한 일 실시예로서, 영상재생부(도 1, 110)는 비디오스크립트를 이용하여 비디오써머리부(도 1, 130)에 의미있는 비디오 구간만을 전송한다. 이 경우 의미있는 비디오 구간(도 3, S310, S320, S330)은 의미있는 움직임이 포함되어 있거나 또는 물체 영역 정보, 색상 영역 정보 중 적어도 하나 이상의 정보가 포함된 구간일 수 있다.
도 4 는 본 발명의 바람직한 일 실시예로서, 비디오써머리부에서 비디오써머리를 생성하기 위해 디코딩을 수행하는 일 예를 도시한다.
본 발명의 바람직한 일 실시예로서, 영상재생부(도 1, 110)는 비디오스크립트를 이용하여 비디오써머리부(130)에 의미있는 비디오 구간만(도 3, S310, S320, S330)을 전송한다. 이 경우 의미있는 비디오 구간들 각각은(도 3, S310, S320, S330) 서로 다른 디코더에서 각각 디코딩될 수 있다.
비디오써머리부(도 1, 130)는 멀티디코더에서 디코딩된 각각의 의미있는 비디오 구간들(도 3, S310, S320, S330)에서 객체들의 움직임 영역 검출, 물체 영역 정보, 색상 영역 정보, 이벤트 검출 등을 추출하여 비디오써머리를 프레임단위로 생성한 후 영상재생부로 전달한다. 영상재생부(도 1, 110)은 프레임 단위로 생성된 비디오써머리 결과를 저장부(도 1, 120)에 저장하거나 또는 비디오 원본영상과 함께 동시에 재생할 수 있도록 제어한다.
도 5 는 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 비디오써머리를 재생하는 일 예를 도시한다.
본 발명의 바람직한 일 실시예에서, 영상재생장치는 비디오 원본영상출력부(510)와 비디오써머리출력부(520)를 포함한다. 영상재생장치의 디스플레이는 분할되어 비디오 원본영상과 비디오써머리를 함께 출력할 수 있다.
본 발명의 바람직한 일 실시예로서, 영상재생장치는 제 1 인터페이스(530) 및 제 2 인터페이스(540)를 지원한다.
제 1 인터페이스(530)는 사용자가 비디오써머리를 온(ON) 또는 오프(OFF)할지 여부를 선택할 수 있는 인터페이스를 지원한다. 제 2 인터페이스(540)는 제 1 인터페이스(530)가 온(ON) 상태인 경우, 사용자가 특정 시간 구간의 비디오써머리를 지정할 수 있는 인터페이스를 지원한다. 사용자는 제 2 인터페이스(540)를 이용하여 복수 개의 시간 구간을 선택할 수 있다.
본 발명의 바람직한 일 실시예로서, 제 1 인터페이스(530)에서 비디오써머리를 온(ON)한 경우, 제 2 인터페이스(540)는 자동으로 특정 시간 구간을 설정할 수 있는 인터페이스를 지원한다.
도 6 은 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 복수의 비디오써머리를 재생하는 일 예를 도시한다.
본 발명의 영상재생장치는 복수개의 채널을 재생할 수 있다. 이 경우, 영상재생장치는 디스플레이 화면을 분할하여 사용자가 선택한 채널을 화면에 표시하고, 사용자가 비디오써머리를 온(ON)한 경우, 각 채널에 대한 비디오써머리를 함께 표시한다. 주의할 것은 복수 개의 채널이 디스플레이 되는 경우, 각각의 채널에 대해 비디오써머리를 표시할 것인지 여부를 선택할 수 있다.
도 7은 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 복수 개의 채널을 디스플레이 하는 경우, 각 채널에 대해 비디오써머리를 선택적으로 온/오프하는 일 실시예를 도시한다.
도 6에 도시된 바와 같이 사용자가 채널1과 채널7의 비디오 원본영상과 비디오 써머리 영상을 보고 있다가, 사용자는 채널7의 비디오써머리를 오프할 수 있다. 그리고, 새로운 채널8의 비디오 원본영상만을 추가하여 디스플레이 할 수 있다.
또한, 채널1(710), 채널7(720) 및 채널8(730)의 비디오 원본영상을 보고자 하여 디스플레이하고, 3개의 채널 중 채널1(710)에 대해서만 비디오써머리를 온하여 디스플레이할 수 있다(711).
도 8 은 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 단일 채널에 대해 복수 개의 비디오써머리를 동시에 재생하는 일 예를 도시한다.
특정 채널을 선택하고, 사용자는 해당 채널의 비디오 원본영상과 특정 시간구간들의 비디오써머리를 볼 수 있다. 예를 들어, 출입구를 촬영하는 네트워크 감시 카메라의 입력영상을 수신하는 채널 1(810)에서 출근시간(820), 점심시간(830) 및 퇴근시간(840)의 비디오써머리를 볼 수 있다.
도 9 는 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 복수의 채널에 대해 각각 원하는 개수의 비디오써머리를 재생하는 일 예를 도시한다.
본 발명의 바람직한 일 실시예로서, 영상재생장치는 채널1(910)과 채널7(930)의 비디오원본영상을 재생할 수 있다. 그리고, 사용자가 제 1 인터페이스를 이용하여 채널1(910)과 채널7(930)의 비디오써머리를 모두 온(ON)하여 각 채널에 대한 비디오써머리를 함께 재생할 수 있다.
이 경우, 사용자는 채널1(910)에 대해서는 8시에서 9시 구간(921)의 비디오써머리(920)를 재생하고, 채널7(930)에 대해서는 두 개의 비디오써머리(940, 942)를 재생할 수 있다. 또한, 사용자는 제 2 인터페이스(921)를 이용하여 자신이 원하는 시간 구간을 직관적으로 선택할 수 있다.
도 10 은 본 발명의 바람직한 일 실시예로서, 통계적 정보가 포함된 히트맵과 비디오써머리를 함께 제공하는 영상재생장치의 내부 구성도를 도시한다.
영상재생장치(100)는 영상재생부(110), 저장부(120), 디스플레이부(130), 서브히트맵영역설정부(131), 원본비디오재생부(140), 비디오써머리부(150) 및 메타데이터생성부(160)를 포함한다.
영상재생부(110), 저장부(120), 비디오써머리부(150) 및 메타데이터생성부(160)와 관련된 설명은 도 1의 관련 설명을 참고한다.
디스플레이부(130)는 입력영상 및 상기 입력영상위에 레이어를 겹쳐서 히트맵을 디스플레이한다. 도 11을 참고하면, 디스플레이부는 입력영상과 상기 입력영상에 대한 통계적 정보가 포함된 히트맵(또는 Hot zone)을 함께 디스플레이 한다.
본 발명의 바람직한 일 실시예에서는 영상재생부(110)에 기저장된 입력영상에 대해 히트맵을 미리 생성하여 저장한 후, 사용자의 요청에 따라 디스플레이부(130)에서 디스플레이 되도록 구현될 수 있다.
도 11을 참고하면, 히트맵은 특정 이벤트에 대한 통계 데이터를 포함한다. 통계 데이터는 물체 분류 데이터, 색상 분류 데이터, 움직임 검출 데이터, 객체 데이터, 이벤트 데이터 등을 포함한다. 히트맵에서 제공하는 통계 데이터는 영상재생장치에서 제공하는 지능형 비디오 분석옵션(1120)에 기초할 수 있다.
도 11은 CH1(1110)의 입력 영상에 대해 "사람"의 출현빈도를 기준으로 통계를 산출한 히트맵을 도시하고 있다.
본 발명의 바람직한 일 실시예로서, 사용자는 원하는 시간 및 지능형 비디오 분석옵션들을 선택할 수 있다. 이 경우, 지능형 비디오 분석옵션(1120)의 예로는 움직임 검출, 객체 검출, 색상 분류, 객체 분류, 이벤트 검출 등이 있다. 이벤트의 예로는 화재 발생 등이 있다.
사용자는 특정 일자 또는 특정 시간 구간을 선택하도록 지원하는 인터페이스(1131, 1133, 1135, 1137)를 이용하여 시간구간을 지정한다.
본 발명의 바람직한 일 실시예로서, 디스플레이부(130)는 CH1의 입력영상(1110)과 "사람"의 출현빈도 통계정보를 포함한 히트맵이 함께 도시되고 있다.
본 발명의 바람직한 일 실시예로서, 히트맵은 입력영상 위에 레이어되어 디스플레이되도록 구현될 수 있다. 도 11을 참고하면, Level 1~Level 8 (1170)은 각각 사람 출현 빈도를 나타낸다. Level 8에 가까울수록 사람 출현빈도가 높다.
도 11을 참고하면, 2013년 7월 11일 8시 59분 28초에서 9시 3분 28초 사이에는 Area 2(1150)에서는 사람 출현빈도가 낮고, Area 1(1160)에서는 사람 출현빈도가 높은것으로 분석되었다.
서브히트맵영역설정부(1131)는 디스플레이부(130)에 디스플레이되는 히트맵에서 적어도 하나 이상의 서브히트맵영역을 설정하는 인터페이스를 지원한다. 사용자는 디스플레이에 직접 터치하거나, 첨펜을 이용하여 또는 마우스 등의 외부 입력장치를 이용하여 히트맵에서 특정 영역을 서브히트맵영역으로 설정할 수 있다.
도 12는 본 발명의 바람직한 일 실시예로서, 영상재생장치에서 영상정보를 제공하는 일 예를 도시한다.
이 경우, 사용자는 복수의 서브히트맵영역(도 12, 1240, 1250, 1260) Sub Heatmap zone 1, Sub Heatmap zone2, ..., ,Sub Heatmap zone N을 설정할 수 있다.
사용자는 선택한 서브히트맵영역에 대해 원본비디오 영상(도 12, 1210) 또는 비디오 써머리(도 12, 1220)을 선택하여 재생할 수 있다.
본 발명의 바람직한 일 실시예로서, 사용자는 선택한 서브히트맵영역에 대해 원본비디오재생을 원하는 경우, 원본비디오재생 인터페이스(1210)를 선택할 수 있다. 이 경우, 디스플레이에서 선택된 서브히트맵영역(도 12, 1240, 1250, 1260)부분에 원본 비디오가 재생된다.
사용자는 선택한 복수의 서브히트맵영역 중 일부 서브히트맵영역에 대해서만 원본비디오를 재생할 수 있다. 도 12를 참고하면, 사용자는 선택한 3개의 서브히트맵영역(도 12, 1240, 1250, 1260) 중 2개의 서브 영역 (1240, 1250)에 대해서만 원본비디오를 재생할 수 있다. 이 경우 2개의 서브 영역(1240, 1250)은 관심영역으로 지칭한다. 관심영역은 서브히트맵영역과 동일 또는 상이하게 설정될 수 있다. 관심영역 이외의 나머지 서브히트맵영역(1260)에는 히트맵 데이터가 표시되도록 구현된다.
본 발명의 또 다른 바람직한 일 실시예로서, 사용자는 선택한 서브히트맵영역(도 12, 1240, 1250, 1260)에 대해 비디오 써머리를 재생하고자 하는 경우, 선택한 서브히트맵영역(도 12, 1240, 1250, 1260)에 대해 비디오써머리 인터페이스(1220)를 선택할 수 있다. 이 경우, 디스플레이에서 선택된 서브히트맵영역 부분에 비디오 써머리가 제공된다.
이 경우, 서브히트맵영역마다 각각 상이한 분석옵션을 설정할 수 있다. 일 예로, 제 1 서브히트맵영역(1240)에 대해서는 움직임 검출 이벤트와 색상 분류 이벤트만을 분석한 비디오 써머리 제공을 요청할 수 있다.
예를 들어, 제 1 서브히트맵영역(1240)에 흰색 자가용이 이동한 이벤트를 검출하도록 설정할 수 있다.
또한, 제 2 서브히트맵영역(1250)에 대해서는 객체 검출 이벤트만을 검출하여 비디오 써머리 제공을 요청할 수 있다. 예를 들어, 제 2 서브히트맵영역(1250)에 대해서는 사람만을 분석하여 검출한 비디오써머리 제공을 요청할 수 있다.
이와 마찬가지로, 제 3 서브히트맵영역(1260)에 대해서도 사용자가 검출하고자 하는 이벤트에 대해 설정할 수 있다.
본 발명의 또 다른 바람직한 일 실시예로서, 사용자는 선택한 서브히트맵영역(도 12, 1240, 1250, 1260)에 대해 제 1 서브히트맵영역(1240)에 대해서는 원본비디오 재생을 요청하고, 제 2 서브히트맵영역(1250)에 대해서는 비디오 써머리 제공을 요청하며, 제 3 서브히트맵영역(1260)에 대해서는 히트맵 데이터를 표시하도록 구현할 수 있다. 비디오 써머리 제공을 요청한 제 2 서브히트맵영역(1250)은 써머리 영역으로 지칭한다. 써머리 영역은 서브히트맵영역과 동일 또는 상이하게 설정될 수 있다. 즉, 제 2 서브히트맵영역(1250) 이내의 특정 영역을 추가로 설정할 수 있다.
본 발명의 또 다른 바람직한 일 실시예로서, 사용자는 선택한 서브히트맵영역(도 12, 1240, 1250, 1260)에 대해 원본비디오 재생과 비디오써머리 제공 요청을 함께 구현할 수 있다.
상세히, 제 1 서브히트맵영역(1240)에 대해서 원본비디오 재생과 비디오 써머리 제공을 함께 요청할 수 있다. 이 경우 디스플레이에는 제 1 서브히트맵영역(1240) 부분에 원본 비디오가 재생되고, 인접한 영역 또는 또 다른 레이어를 이용하여 비디오 써머리를 제공할 수 있다.
제 2 서브히트맵영역(1250)에 대해서는 비디오 써머리 제공과 히트맵 데이터를 중첩적으로 표시하거나 또는 제 2 서브히트맵영역(1250)에 히트맵 데이터를 표시하고 인접한 영역에 비디오 써머리를 제공하도록 구현할 수 있다.
바람직하게, 비디오 써머리와 히트맵 데이터를 중첩적으로 표시할 때에는 제 2 서브히트맵영역(1250)을 다면체의 3차원으로 구현하여, 제 2 서브히트맵영역(1250)을 형성한 다면체의 각 면에 각각 비디오 써머리, 히트맵 데이터를 표시할 수 있다.
또한, 비디오 써머리와 히트맵 데이터를 중첩적으로 표시할 때에는 제 2 서브히트맵영역(1250)상에 중첩적으로 레이어를 계단식으로 겹쳐 표시할 수 있으며, 사용자가 특정 레이어를 선택하면 해당 레이어가 최상위 레이어로 하이라이트 되며 표시되도록 구현할 수 있다.
예를 들어 2 개의 레이어가 중첩되어 있는 경우, 제 1 레이어에는 비디오 써머리를 표시하고, 제 2 레이어에는 히트맵 데이터를 표시할 수 있다.
제 1 레이어가 제 2 레이어 위에 중첩적으로 놓여 있는 경우에도, 사용자가 제 2 레이어를 선택하면, 디스플레이 상에 제 2 레이어가 최상위 레이어로 하이라이트 되며 표시된다.
제 3 서브히트맵영역(1260)에 대해서는 원본비디오 제생, 비디오 써머리 제공 및 히트맵 데이터를 중첩적으로 표시할 수 있다. 이 경우, 중첩적으로 표시할 때에는 제 3 서브히트맵영역(1260)을 다면체의 3차원으로 구현하여, 제 3 서브히트맵영역(1260)을 형성한 다면체의 각 면에 각각 원본 비디오 영상, 비디오 써머리, 히트맵 데이터를 표시할 수 있다.
이 경우에도, 비디오 써머리와 히트맵 데이터를 중첩적으로 표시할 때에는 제 3 서브히트맵영역(1256)상에 중첩적으로 레이어를 계단식으로 겹쳐 표시할 수 있으며, 사용자가 특정 레이어를 선택하면 해당 레이어가 최상위 레이어로 하이라이트 되며 표시되도록 구현할 수 있다.
본 방법발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다.
컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플로피디스크, 광데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이제까지 본 발명에 대하여 그 바람직한 실시예를 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다.
그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 균등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.

Claims (15)

  1. 입력영상 및 상기 입력영상위에 히트맵을 디스플레이하는 디스플레이부;
    상기 디스플레이부에서 디스플레이되는 히트맵에서 적어도 하나 이상의 서브히트맵영역을 설정하는 서브히트맵영역설정부;
    상기 설정된 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 관심영역을 선택하는 인터페이스를 지원하고, 상기 선택된 관심영역에 원본 비디오를 재생하는 원본비디오재생부; 및
    상기 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 써머리영역을 선택하는 인터페이스를 지원하고, 상기 선택된 써머리영역에 비디오써머리를 제공하는 비디오써머리제공부;를 포함하고,
    상기 원본 비디오재생부 및 상기 비디오써머리제공부는 동일 또는 상이한 서브히트맵영역을 선택할 수 있는 것을 특징으로 하는 영상재생장치.
  2. 제 1 항에 있어서, 상기 원본 비디오재생부는
    상기 선택된 관심영역에 대해서는 상기 히트맵상에서 상기 선택된 관심영역에 대응되는 서브히트맵영역에 원본 비디오를 재생하고,
    상기 선택된 관심영역 이외의 상기 적어도 하나 이상의 서브히트맵영역에 대해서는 히트맵 데이터를 표시하는 것을 특징으로 하는 영상재생장치.
  3. 제 1 항에 있어서, 상기 히트맵은 통계 데이터를 포함하고,
    상기 통계 데이터는 물체 분류 데이터, 색상 분류 데이터, 움직임 검출 데이터, 객체 데이터, 이벤트 데이터를 포함하는 것을 특징으로 하는 영상재생장치.
  4. 제 1 항에 있어서, 상기 비디오써머리제공부는
    상기 선택된 써머리영역에 대해서는 히트맵 데이터 및 비디오써머리를 제공하는 것을 특징으로 하는 영상재생장치.
  5. 제 1 항에 있어서, 상기 비디오써머리제공부는
    상기 선택된 써머리영역에 대해서는 상기 히트맵상에서 상기 선택된 써머리영역에 대응되는 서브히트맵영역에 비디오 써머리를 재생하고,
    상기 선택된 써머리영역 이외의 상기 적어도 하나 이상의 서브히트맵영역에 대해서는 상기 히트맵상에서 대응되는 서브히트맵영역에 히트맵 데이터를 표시하는 것을 특징으로 하는 영상재생장치.
  6. 제 1 항에 있어서, 상기 비디오써머리제공부는
    상기 선택된 써머리영역이 복수 개인 경우, 각각의 써머리영역마다 동일 또는 상이한 분석옵션을 선택할 수 있는 인터페이스를 지원하는 것을 특징으로 하는
  7. 제 4 항에 있어서, 상기 비디오써머리제공부는
    상기 히트맵 데이터를 표시하는 레이어 위에 중복적으로 새로운 레이어를 겹쳐서 비디오써머리를 표시하는 것을 특징으로 하는 영상재생장치.
  8. 제 4 항에 있어서, 상기 비디오써머리제공부는
    상기 히트맵 데이터를 표시하는 레이어와 겹치지 않도록 별도의 영역에 비디오써머리를 표시하는 것을 특징으로 하는 영상재생장치.
  9. 제 1 항에 있어서, 상기 디스플레이부는
    사용자가 지정한 시간 또는 날짜에 녹화된 입력영상 및 히트맵을 디스플레이하는 것을 특징으로 하는 영상재생장치.
  10. 제 1 항에 있어서, 상기 원본비디오재생부는
    상기 히트맵 데이터를 표시하는 레이어와 겹치지 않도록 별도의 영역에 원본 비디오를 재생하는 것을 특징으로 하는 영상재생장치.
  11. 제 10 항에 있어서,
    상기 히트맵 데이터를 표시하는 레이어와 상기 별도의 영역은 3차원 영역의 일부인 것을 특징으로 하는 영상재생장치.
  12. 제 1 항에 있어서, 상기 디스플레이부는
    상기 입력영상위에 레이어를 겹쳐서 히트맵을 디스플레이하는 것을 특징으로 하는 영상재생장치.
  13. 영상재생장치에서 영상정보를 제공하는 방법으로서,
    디스플레이부에서 입력영상 및 상기 입력영상위에 레이어를 겹쳐서 히트맵을 디스플레이하는 단계
    서브히트맵영역설정부에서 상기 디스플레이되는 히트맵에서 적어도 하나 이상의 서브히트맵영역을 설정하도록 인터페이스를 지원하는 단계;
    원본비디오재생부에서 상기 설정된 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 관심영역을 선택하는 인터페이스를 지원하고, 상기 선택된 관심영역에 원본 비디오를 재생하는 단계; 및
    상기 적어도 하나 이상의 서브히트맵영역 중 적어도 하나 이상의 써머리영역을 선택하는 인터페이스를 지원하고, 상기 선택된 써머리영역에 비디오써머리를 제공하는 단계;를 포함하는 것을 특징으로 하는 방법.
  14. 제 13 항에 있어서, 상기 원본 비디오재생부는
    상기 선택된 관심영역에 대해서는 상기 히트맵상에서 상기 선택된 관심영역에 대응되는 서브히트맵영역에 원본 비디오를 재생하고,
    상기 선택된 관심영역 이외의 상기 적어도 하나 이상의 서브히트맵영역에 대해서는 상기 히트맵상에서 대응되는 서브히트맵영역에 히트맵 데이터를 표시하는 것을 특징으로 하는 방법.
  15. 제 13 항에 있어서, 상기 비디오써머리제공부는
    상기 선택된 써머리영역에 대해서는 상기 히트맵상에서 상기 선택된 써머리영역에 대응되는 서브히트맵영역에 비디오 써머리를 재생하고,
    상기 선택된 써머리영역 이외의 상기 적어도 하나 이상의 서브히트맵영역에 대해서는 상기 히트맵상에서 대응되는 서브히트맵영역에 히트맵 데이터를 표시하는 것을 특징으로 하는 방법.
KR1020140091316A 2014-07-18 2014-07-18 영상재생장치 및 영상재생장치에서 영상정보 제공 방법 KR102170693B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020140091316A KR102170693B1 (ko) 2014-07-18 2014-07-18 영상재생장치 및 영상재생장치에서 영상정보 제공 방법
US14/599,083 US9406342B2 (en) 2014-07-18 2015-01-16 Imaging apparatus and method of providing imaging information
CN201510311915.9A CN105323656B (zh) 2014-07-18 2015-06-08 成像设备和提供成像信息的方法
US15/217,465 US10116910B2 (en) 2014-07-18 2016-07-22 Imaging apparatus and method of providing imaging information

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140091316A KR102170693B1 (ko) 2014-07-18 2014-07-18 영상재생장치 및 영상재생장치에서 영상정보 제공 방법

Publications (2)

Publication Number Publication Date
KR20160010218A true KR20160010218A (ko) 2016-01-27
KR102170693B1 KR102170693B1 (ko) 2020-10-27

Family

ID=55075674

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140091316A KR102170693B1 (ko) 2014-07-18 2014-07-18 영상재생장치 및 영상재생장치에서 영상정보 제공 방법

Country Status (3)

Country Link
US (2) US9406342B2 (ko)
KR (1) KR102170693B1 (ko)
CN (1) CN105323656B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11074291B2 (en) 2016-10-06 2021-07-27 Hanwha Techwin Co., Ltd. Apparatus and method for providing image

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102070924B1 (ko) * 2014-01-20 2020-01-29 한화테크윈 주식회사 영상 기록 시스템
KR102015954B1 (ko) * 2014-03-21 2019-08-29 한화테크윈 주식회사 영상 처리 시스템 및 영상 처리 방법
US9619908B1 (en) * 2014-03-24 2017-04-11 Google Inc. Identification of lines in a heat map
US10929464B1 (en) 2015-02-04 2021-02-23 Google Inc. Employing entropy information to facilitate determining similarity between content items
CN106385562B (zh) * 2016-09-23 2019-06-11 浙江宇视科技有限公司 一种视频摘要生成方法、装置及视频监控系统
US10102723B2 (en) * 2016-10-31 2018-10-16 Immersion Corporation Dynamic haptic generation based on detected video events
JP7174252B2 (ja) * 2019-04-25 2022-11-17 日本電信電話株式会社 物体情報処理装置、物体情報処理方法及び物体情報処理プログラム
GB2594463B (en) * 2020-04-27 2022-09-28 Canon Kk A method, apparatus and computer program for generating and displaying a heatmap based on video surveillance data
GB2594459A (en) * 2020-04-27 2021-11-03 Canon Kk A method, apparatus and computer program for generating and displaying a heatmap based on video surveillance data
US11575837B2 (en) 2020-04-27 2023-02-07 Canon Kabushiki Kaisha Method, apparatus and computer program for generating and displaying a heatmap based on video surveillance data
WO2022131833A1 (en) 2020-12-17 2022-06-23 Samsung Electronics Co., Ltd. Method and electronic device for producing video summary

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060028307A (ko) 2004-09-24 2006-03-29 주식회사 케이티 실시간 개인형 동영상 요약 시스템 및 그의 동영상 요약정보 생성 장치 및 그 방법과 맞춤형 동영상 요약 정보제공 장치 및 그 방법
US20120159329A1 (en) * 2010-12-16 2012-06-21 Yahoo! Inc. System for creating anchors for media content
US20130181993A1 (en) * 2012-01-13 2013-07-18 Fiona Elizabeth HERRING Place heat geometries
US20130223688A1 (en) * 2008-07-16 2013-08-29 Verint Systems Inc. System and Method for Capturing, Storing, Analyzing and Displaying Data Related to the Movements of Objects
KR20140044663A (ko) * 2012-10-05 2014-04-15 삼성전자주식회사 방송 수신 장치 및 디스플레이 장치와 이를 이용한 검색 방법

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5969755A (en) 1996-02-05 1999-10-19 Texas Instruments Incorporated Motion based event detection system and method
US7982738B2 (en) 2004-12-01 2011-07-19 Microsoft Corporation Interactive montages of sprites for indexing and summarizing video
US7594177B2 (en) * 2004-12-08 2009-09-22 Microsoft Corporation System and method for video browsing using a cluster index
US20070003224A1 (en) * 2005-06-30 2007-01-04 Jason Krikorian Screen Management System for Media Player
KR100754529B1 (ko) 2005-11-28 2007-09-03 삼성전자주식회사 동영상 요약 서비스 장치 및 그 방법
US8522289B2 (en) * 2007-09-28 2013-08-27 Yahoo! Inc. Distributed automatic recording of live event
KR101222887B1 (ko) 2010-04-30 2013-01-17 주식회사 유에스티 대규모 시설물 이용자 안내 시스템
KR20110121234A (ko) 2010-04-30 2011-11-07 동국대학교기술지주 주식회사 Ｕｖ 플로터용 코팅제 및 이것이 코팅된 인쇄판
US9269245B2 (en) * 2010-08-10 2016-02-23 Lg Electronics Inc. Region of interest based video synopsis
KR20120105795A (ko) 2011-03-16 2012-09-26 에스케이텔레콤 주식회사 열차 밀집도 안내 방법과 그를 위한 시스템 및 장치
US9269243B2 (en) * 2011-10-07 2016-02-23 Siemens Aktiengesellschaft Method and user interface for forensic video search
CN103200463A (zh) * 2013-03-27 2013-07-10 天脉聚源(北京)传媒科技有限公司 一种视频摘要生成方法和装置
KR20150080863A (ko) * 2014-01-02 2015-07-10 삼성테크윈 주식회사 히트맵 제공 장치 및 방법
KR102015954B1 (ko) * 2014-03-21 2019-08-29 한화테크윈 주식회사 영상 처리 시스템 및 영상 처리 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060028307A (ko) 2004-09-24 2006-03-29 주식회사 케이티 실시간 개인형 동영상 요약 시스템 및 그의 동영상 요약정보 생성 장치 및 그 방법과 맞춤형 동영상 요약 정보제공 장치 및 그 방법
US20130223688A1 (en) * 2008-07-16 2013-08-29 Verint Systems Inc. System and Method for Capturing, Storing, Analyzing and Displaying Data Related to the Movements of Objects
US20120159329A1 (en) * 2010-12-16 2012-06-21 Yahoo! Inc. System for creating anchors for media content
US20130181993A1 (en) * 2012-01-13 2013-07-18 Fiona Elizabeth HERRING Place heat geometries
KR20140044663A (ko) * 2012-10-05 2014-04-15 삼성전자주식회사 방송 수신 장치 및 디스플레이 장치와 이를 이용한 검색 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11074291B2 (en) 2016-10-06 2021-07-27 Hanwha Techwin Co., Ltd. Apparatus and method for providing image

Also Published As

Publication number Publication date
US9406342B2 (en) 2016-08-02
KR102170693B1 (ko) 2020-10-27
CN105323656A (zh) 2016-02-10
US20160021333A1 (en) 2016-01-21
CN105323656B (zh) 2019-09-03
US10116910B2 (en) 2018-10-30
US20160330425A1 (en) 2016-11-10

Similar Documents

Publication Publication Date Title
KR102170693B1 (ko) 영상재생장치 및 영상재생장치에서 영상정보 제공 방법
KR102170694B1 (ko) 비디오써머리를 제공하는 영상재생장치 및 영상재생장치에서 비디오써머리를 제공하는 방법
KR100883066B1 (ko) 텍스트를 이용한 피사체 이동 경로 표시장치 및 방법
KR102161210B1 (ko) 다중 비디오써머리제공방법 및 장치
EP2260646B1 (en) Method and systems for video collection and analysis thereof
US20100157049A1 (en) Apparatus And Methods For The Semi-Automatic Tracking And Examining Of An Object Or An Event In A Monitored Site
US20060279630A1 (en) Method and apparatus for total situational awareness and monitoring
TW201724866A (zh) 用於視訊處理之系統及方法
JP2018528720A (ja) ビデオ処理のためのシステムおよび方法
JP2019513275A (ja) 監視方法及び装置
KR20150053162A (ko) 검색 시스템 및 영상 검색 방법
KR102072022B1 (ko) 관심영역 기반의 영상요약 장치와 그를 위한 컴퓨터로 읽을 수 있는 기록 매체
EP2770733A1 (en) A system and method to create evidence of an incident in video surveillance system
KR20110093040A (ko) 피사체 감시 장치 및 방법
KR101033238B1 (ko) 영상 감시 장치와 영상 감시 프로그램이 기록된 기록매체
TWI547158B (zh) Integrate multiple images in a single summary window
KR20180058599A (ko) 밀집도 알림 장치 및 방법
KR20120113014A (ko) 영상인식장치 및 그 영상 감시방법
JP2012242878A (ja) 類似画像検索システム
KR101362630B1 (ko) 디지털 비디오 레코더에서의 피사체 이동 경로 추적 방법
JP2004064438A (ja) 監視システム及び監視方法
Tancharoen et al. Wearable video retrieval and navigation system using GPS data
KR101029730B1 (ko) 사람과 차량을 식별하는 영상 감시 장치
JP5089648B2 (ja) 映像比較装置，映像比較方法，映像比較プログラムおよび映像比較プログラムの記録媒体
Bolshakov et al. COMPARING OF VIDEO ANALYTICS SOFTWARE

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant