KR101788074B1 - 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법 - Google Patents

관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법 Download PDF

Info

Publication number
KR101788074B1
KR101788074B1 KR1020160069077A KR20160069077A KR101788074B1 KR 101788074 B1 KR101788074 B1 KR 101788074B1 KR 1020160069077 A KR1020160069077 A KR 1020160069077A KR 20160069077 A KR20160069077 A KR 20160069077A KR 101788074 B1 KR101788074 B1 KR 101788074B1
Authority
KR
South Korea
Prior art keywords
image
scene change
group
highlight
pictures
Prior art date
Application number
KR1020160069077A
Other languages
English (en)
Inventor
한기훈
Original Assignee
주식회사 에스원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스원 filed Critical 주식회사 에스원
Priority to KR1020160069077A priority Critical patent/KR101788074B1/ko
Application granted granted Critical
Publication of KR101788074B1 publication Critical patent/KR101788074B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

본 발명 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템은 사용자 UI를 통한 사용자 입력 또는 시스템 설정으로부터 하이라이트 영상 생성 대상 기간, 대상 카메라, 생성할 하이라이트 영상의 재생 시간 정보를 입력받아 설정하는 설정 수신부와, 설정 수신부로부터 수신되는 하이라이트 영상 생성 대상 기간과 대상 카메라 정보를 기초로 해당 영상 정보를 저장 장치로부터 읽어 들여 해당 영상의 장면 전환을 감지하여 하이라이트 영상에 포함될 장면 전환 영상을 선별하여 선별된 장면 전환 영상 정보를 움직임 활성도 계산부로 전송하는 장면 전환 감지부와, 장면 전환 감지부로부터 장면 전환 영상 정보를 수신하고 상기 장면 전환 영상의 픽춰 그룹(Group of Picture)의 움직임 활성도를 계산하고 계산된 각 픽춰 그룹(Group of Pictures의 움직임 활성도와 해당 장면 전환 영상 정보를 영상 저장부로 전송하는 움직임 활성도 계산부와, 상기 움직임 활성도 계산부로부터 각 픽춰 그룹(Group of Pictures의 움직임 활성도와 해당 장면 전환 영상 정보를 수신하고 각 픽춰 그룹(Group of Pictures의 움직임 활성도에 따라 장면 전환 영상을 재배치하여 하이라이트 영상을 생성하고 생성된 하이라이트 영상 정보를 저장 장치로 전송하며 하이라이트 영상 정보를 표시부를 통하여 표출하도록 제어하는 영상 제어부와, 각 카메라가 촬영한 영상 정보를 데이터 베이스화하여 저장하고 영상 제어부로부터 수신한 하이라이트 영상 정보를 저장하는 저장 장치와, 상기 저장 장치의 영상을 수신하여 표출하는 표시부로 구성된 것을 특징으로 하는 것이다.

Description

관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법{Highlight Image Creating System of Sueveilance System to understand situation rapidly and Method thereof}
본 발명은 보안 시스템의 관제 요원이 보안 시스템으로부터 전송되는 영상을 통하여 상황파악을 신속히 할 수 있도록 하이라이트 영상을 생성하는 것에 관한 것이다. 일반적으로 대규모 보안 시스템에서는 관제 요원이 전체 영상을 모니터링하여 상황을 감지하는 것은 불가능에 가까운 것이다. 예를 들어, 보안 시스템 규모별 30일간의 녹화 영상 분량은 16 채널의 보안 시스템의 경우 30일간 녹화 영상 분량은 11,520 시간이고, 64 채널의 경우 녹화 영상 분량은 46,080 시간이 되는 것이므로 녹화 영상 전체를 모니터링하여 상황을 판단한다는 것은 시간이 너무 걸리고 비 효율적인 것임을 알 수 있는 것이다.
본 발명과 관련된 종래의 기술은 대한민국 등록특허 제10-0956739호(2010. 05. 06. 공고)에 개시되어 있는 것이다. 도 1은 상기 종래의 동영상 요약 서비스 시스템 구성도이다. 상기도 1에서 종래의 동영상 요약 서비스 시스템은 유무선 통신망을 통해 특정 동영상을 요청하여 재생하고, 동영상 재생에 열람 이력을 전송하는 사용자 단말기(100); 유무선 통신망으로 접속되어 상기 사용자 단말기(100)로부터 요청된 서비스를 운용 관리하기 위한 웹 서버(200); 상기 사용자 단말기(100)로부터 동영상 재생에 따라 전송되는 열람 이력을 수신하여, 이를 토대로 요약 동영상을 생성하는 동영상 변환 서버(300); 컨텐츠 제공자(CP,Contents Provider)로부터 제공된 다수의 동영상을 저장 및 관리하고 동시에 상기 동영상 변환 서버(300)로부터 제공되는 특정 동영상에 대한 요약 동영상을 저장 및 관리하는 데이터 베이스 서버(400); 상기 사용자 단말기(100)로부터 선택된 서비스 종류에 따라, 상기 데이터 베이스 서버(400)로부터 저장된 특정 컨텐츠를 추출하고, 추출된 컨텐츠를 상기 유무선 통신망을 통해 상기 사용자 단말기(100)에 전송하는 전송 서버(500);를 포함하여 구성된 것이다. 또한 사용자 단말기(100)는 스트리밍(streaming) 방식, 점진적 다운로드(Progressive Download), 및 일반적인 다운 로드 방식을 포함하는 다양한 방식을 통해 상기 전송 서버(500)로부터 웹 서버(200)를 통해 서비스 요청한 특정 동영상을 제공받는다. 아울러, 사용자 단말기(100)는 상기 전송 서버(500)로부터 제공된 동영상을 재생하고, 재생에 따른 열람 이력, 다시 말해, 빨리 감기(Fast Forward), 되감기(Rewind), 및 정지(Pause)를 포함하는 재생 패턴 정보를 유무선 통신망을 통해 동영상 변환 서버(300)로 전송한다. 보다 구체적으로 사용자 단말기(100)는 전송 서버(500)로부터 스트리밍(streaming) 방식으로 제공되는 동영상의 재생시, 상기 재생에 따른 재생 패턴 정보 즉, 빨리 감기(Fast Forward), 되감기(Rewind), 및 정지(Pause) 등의 버튼을 누를 때마다 해당 신호를 영상 변환 서버(300)로 전송한다. 더욱 상세하게는, 스트리밍 방식의 경우, 사용자 단말기(100)가 RTSP(Real-Time Streaming Protocol)를 사용하여 전송 서버(500)에 랜덤 억세스 신호를 송출하고, 이때, 영상 변환 서버(300)가 상기 RTSP에서 요청하는 재생 위치 정보를 토대로, 재생 패턴 정보를 추출하거나, 사용자 단말기(100)가 재생 패턴 정보를 취합하여 실시간으로 전송하는 구성을 갖는다. 한편, 사용자 단말기(100)는 전송 서버로부터 다운로드(Download)된 동영상을 재생할 경우, 동영상 재생시 발생한 재생 패턴 정보를 취합하고 이를 영상 변환 서버(300)로 전송한다. 동영상 변환 서버(300)는 상기 사용자 단말기(100)별로 전송되는 재생 패턴 정보를 토대로 상기 원본 동영상의 구간별 재생 시간 정보를 수집 및 합산하여, 요약 대상 구간을 결정하고 요약 대상 구간의 동영상을 편집하여 제공하는 것이다.
상기와 같은 종래의 동영상 요약 서비스 시스템은 원본 동영상에서 재생된 구간의 횟수를 기초로 하여 요약 동영상을 생성하는 것으로 큰 규모의 보안 시스템에서는 적용하기 어려운 문제점이 있는 것이다. 또한 상기와 같은 동영상 요약 서비스 시스템은 재생 횟수를 기초로 요약 영상을 생성하는 것이나 보안 시스템에서 수신되는 영상에서 보안 상황파악을 하기 위하여는 재생횟수와 보안과는 관련성이크지 아니한 문제점이 있는 것이다. 또한 종래의 보안 시스템은 이벤트 정보만을 확인하는 방법이 주류이나 이 방법은 빈번한 오보를 발생하여 관제 효율을 떨어뜨리는 문제점이 있는 것이다. 따라서 본 발명의 목적은 규모가 큰 보안 시스템에서 보안 상황을 신속히 정확하게 파악할 수 있도록 하이라이트 영상을 생성하는 시스템 및 방법을 제공하기 위한 것이다.
상기와 같은 목적을 가진 본 발명 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템은 사용자 UI를 통한 사용자 입력 또는 시스템 설정으로부터 하이라이트 영상 생성 대상 기간, 대상 카메라, 생성할 하이라이트 영상의 재생 시간 정보를 입력받아 설정하는 설정 수신부와, 설정 수신부로부터 수신되는 하이라이트 영상 생성 대상 기간과 대상 카메라 정보를 기초로 해당 영상 정보를 저장 장치로부터 읽어 들여 해당 영상의 장면 전환을 감지하여 하이라이트 영상에 포함될 장면 전환 영상을 선별하며 선별된 장면 전환 영상 정보를 움직임 활성도 계산부로 전송하는 장면 전환 감지부와, 장면 전환 감지부로부터 장면 전환 영상 정보를 수신하고 상기 장면 전환 영상의 픽춰 그룹(Group of Pictures)의 움직임 활성도를 계산하고 계산된 픽춰 그룹(Group of Pictures)의 움직임 활성도와 해당 장면 전환 영상 정보를 영상 저장부로 전송하는 움직임 활성도 계산부와, 상기 움직임 활성도 계산부로부터 픽춰 그룹(Group of Pictures)의 움직임 활성도와 해당 장면 전환 영상 정보를 수신하고 픽춰 그룹(Group of Pictures)의 움직임 활성도에 따라 장면 전환 영상을 재배치하여 하이라이트 영상을 생성하고 생성된 하이라이트 영상 정보를 저장 장치로 전송하며 하이라이트 영상 정보를 설정된 재생시간 동안 표시부를 통하여 표출하도록 제어하는 영상 제어부와, 각 카메라가 촬영한 영상 정보를 데이터 베이스화하여 저장하고 영상 제어부로부터 수신한 하이라이트 영상 정보를 저장하는 저장 장치와, 상기 저장 장치의 영상을 수신하여 표출하는 표시부로 구성된 것을 특징으로 하는 것이다. 또한 보안 시스템의 하이라이트 영상 생성 방법은 보안 시스템의 각 카메라로부터 수신되는 영상 정보를 DB화하여 저장 장치에 저장하는 단계와, 저장 장치에 저장된 영상 정보에 대하여 하이라이트 영상 생성 대상 기간, 대상 카메라 및 하이라이트 영상 재생 시간 정보를 설정하는 단계와, 설정된 하이라이트 영상 생성 대상 기간 및 대상 카메라 정보를 기초로 저장 장치로부터 해당 영상을 독출하고 독출된 영상에서 하이라이트 영상 정보에 포함될 장면 전환 영상을 선별하는 단계와, 선별된 장면 전환 영상 정보의 픽춰 그룹의 움직임 활성도를 계산하는 단계와, 움직임 활성도가 높은 순으로 장면 전환 영상을 재배치하여 우선적으로 재생되도록 하는 단계를 포함하여 이루어진 것을 특징으로 하는 것이다.
상기와 같이 구성된 본 발명 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법은 보안 시스템의 다수의 카메라로부터 화면 변화도와 움직임 활성도가 높은 하이라이트 영상을 생성하고 재생하도록 함으로써 짧은 시간 내에 빠른 상황 분석을 가능하게 하는 효과가 있는 것이고 오보를 줄일 수 있는 효과가 있는 것이다. 또한 본 발명은 하이라이트 영상 재생시간을 영상 복잡도에 관계없이 일정하게 유지할 수 있으므로 관제 효율을 높일 수 있는 효과가 있는 것이다. 또한 보안 시스템의 저장 공간에 부족한 경우 하이라이트 영상만을 저장하도록 함으로써 저장 공간 부족문제도 해결할 수 있는 효과가 있는 것이다.
도 1은 종래의 동영상 요약 서비스 시스템 구성도,
도 2는 본 발명에 적용되는 각 카메라 영상 정보에서 화면 전환 영상을 선별한 예시도,
도 3은 본 발명 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 전체 구성도,
도 4는 본 발명에 적용되는 하이라이트 영상 생성 설정 예시도,
도 5는 본 발명에 적용되는 것으로 장면 전환 영상에 포함할지 여부를 결정하기 위한 키 프레임 화면 변화도 정리 예시도,
도 6은 본 발명에 적용되는 연속되는 Group of Picture의 Key Frame 예시도,
도 7은 본 발명에 적용되는 장면전환 영상과 하이라이트 영상의 예시도,
도 8은 본 발명 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법 제어 흐름도이다.
상기와 같은 목적을 가진 본 발명 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법을 도 2 내지 도 8을 기초로 하여 설명하면 다음과 같다.
도 2는 본 발명에 적용되는 각 카메라 영상 정보에서 화면 전환 영상을 선별한 예시도 이다. 상기도 2에서 (a)는 각 카메라에서 선별되는 장면 전환 영상을 나타내고, (b)는 보안 시스템 전체에서 선별한 장면 전환 영상을 나타내고 있는 것으로 장면 전환 영상은 각 카메라에서 장면 변화가 급격히 발생하는 영상을 장면 전환 영상으로 선별하는 것임을 나타내고 있는 것이다.
도 3은 본 발명 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 전체 구성도이다. 상기도 3에서 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템은 사용자 UI(User Interface)를 통한 사용자 입력 또는 시스템 설정으로부터 하이라이트 영상 생성 대상 기간, 대상 카메라, 생성할 하이라이트 영상의 재생 시간 정보를 입력받아 설정하는 설정 수신부(10)와, 설정 수신부로부터 수신되는 하이라이트 영상 생성 대상 기간과 대상 카메라 정보를 기초로 해당 영상 정보를 저장 장치로부터 읽어 들여 해당 영상의 장면 전환을 감지하여 하이라이트 영상에 포함될 장면 전환 영상을 선별하여 선별된 장면 전환 영상 정보를 움직임 활성도 계산부로 전송하는 장면 전환 감지부(20)와, 장면 전환 감지부로부터 장면 전환 영상 정보를 수신하고 상기 장면 전환 영상의 픽춰 그룹(Group of Pictures)의 움직임 활성도를 계산하고 계산된 픽춰 그룹(Group of Pictures)의 움직임 활성도와 해당 장면 전환 영상 정보를 영상 제어부로 전송하는 움직임 활성도 계산부(30)와, 상기 움직임 활성도 계산부로부터 픽춰 그룹(Group of Pictures)의 움직임 활성도와 해당 장면 전환 영상 정보를 수신하고 픽춰 그룹(Group of Pictures)의 움직임 활성도에 따라 장면 전환 영상을 재배치하여 하이라이트 영상을 생성하고 생성된 하이라이트 영상 정보를 저장 장치로 전송하며 하이라이트 영상 정보를 표시부를 통하여 표출하도록 제어하는 영상 제어부(40)와, 각 카메라가 촬영한 영상 정보를 데이터 베이스화하여 저장하고 영상 제어부로부터 수신한 하이라이트 영상 정보를 저장하는 저장 장치(50)와, 상기 저장 장치의 영상을 수신하여 표출하는 표시부(60)로 구성된 것을 특징으로 하는 것이다.
도 4는 본 발명에 적용되는 하이라이트 영상 생성 설정 예시도 이다. 상기도 4에서 본 발명에 적용되는 하이라이트 영상 생성 설정은 표시부를 통하여 표출되는 하이라이트 생성 대상 기간, 대상 카메라 및 하이라이트 재생 시간 정보를 입력하여 설정할 수 있는 것임을 나타내고 있는 것이다.
도 5는 본 발명에 적용되는 것으로 장면 전환 영상에 포함할지 여부를 결정하기 위한 키 프레임 화면 변화도 정리 예시도 이다. 상기도 5에서 본 발명에 적용되는 장면 전환 영상에 포함할지 여부를 결정하기 위한 키 프레임 화면 변화도의 정리 예시를 나타내고 있는 것이다. 또한 본 발명에 적용되는 하이라이트 영상은 효율적인 영상 분석을 위해 녹화시간 순서와 관계없이 움직임이 많이 발생하는 영상을 우선적으로 확인해야 하므로 앞부분에 배치하며 하이라이트 영상에 포함될 장면 전환 영상을 선별하기 위하여 장면 전환 감지를 판단하는 방법으로 Group of Picture의 화면 변화도를 사용하였으며 Group of Pictures화면 변화도는 해당 Group of Pictures와 이전 Group of Pictures의 Key Frame 간의 화소 값 차이에 의하여 계산되어지는 것이다. 또한 상기 Key Frame은 해당 Group of Pictures의 임의 접근 또는 독립적으로 복호화하기 위한 프레임으로 해당 Group of Pictures의 첫 프레임이다.
도 6은 본 발명에 적용되는 연속되는 Group of Picture의 Key Frame 예시도 이다. 상기도 6에서 본 발명에 적용되는 Key Frame은 해당 Group of Pictures를 임의 접근 또는 독립적으로 복호화하기 위한 프레임으로 Group of Pictures의 첫 프레임임을 나타내고 있는 것이다.
도 7은 본 발명에 적용되는 장면전환 영상과 하이라이트 영상의 예시도 이다. 상기도 7에서 (a)는 각 카메라가 전송한 영상 정보에서 장면 전환 영상을 선별하여 배치한 예이고, (b)는 선별된 장면 전환 영상의 Group of Pictures의 움직임 활성도가 높은 순으로 배치한 하이라이트 영상 정보를 나타내고 있는 것이다. 즉 하이라이트 영상은 장면 전환 영상을 움직임 활성도에 따라 재배치하여 영상 순서가 변경된 것임을 나타내고 있는 것이다.
도 8은 본 발명 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법 제어 흐름도이다. 상기도 8에서 본 발명 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법은 보안 시스템의 각 카메라로부터 수신되는 영상 정보를 DB화하여 저장 장치에 저장하는 단계(S11)와, 저장 장치에 저장된 영상 정보에 대하여 하이라이트 영상 생성 대상 기간, 대상 카메라 및 하이라이트 영상 재생 시간 정보를 설정하는 단계(S12)와, 설정된 하이라이트 영상 생성 대상 기간 및 대상 카메라 정보를 기초로 저장 장치로부터 해당 영상을 독출하고 독출된 영상에서 하이라이트 영상 정보에 포함될 장면 전환 영상을 선별하는 단계(S13)와, 선별된 장면 전환 영상 정보의 픽춰 그룹의 움직임 활성도를 계산하는 단계(S14)와, 움직임 활성도가 높은 순으로 장면 전환 영상을 재배치하여 우선적으로 재생되도록 하는 단계(S15)를 포함하여 이루어진 것을 특징으로 하는 것이다. 상기에서 독출된 영상에서 하이라이트 영상 정보에 포함될 장면 전환 영상을 선별하는 단계(S13)는 장면 전환 감지부에서 이루어지고 아래 식 (1)에 의하여 계산되어지는 화면 변화도가 높은 순으로 장면 전환 영상에 포함될지 여부가 결정될 수 있는 것이다. 예를 들어, 재생 시간이 1시간이고, Group of Pictures의 주기가 1초이면 화면 변화도 순위로 상위 3600개(화면 변화도 순위 1위부터 3600까지) Group of pictures가 장면 전환 영상에 포함되는 것이다. 또한 Group of pictures의 주기가 1초이므로 3600개 Group of pictures의 재생시간이 정확히 60분(3600초)이 되는 것이다.
Figure 112016053584084-pat00001
… 식 (1)
상기 식 (1)에서 width는 각 프레임의 가로 길이, height는 각 프레임의 세로 길이이고, CurrKey(y,x)는 장면 전환을 감지하는 현재 Key Frame에서의 세로 y번째, 가로 x번째의 화소이고, PrevKey(y,x)는 장면 전환을 감지하는 이전 Key Frame에서의 세로 y번째, 가로 x번째의 화소이다. 또한 움직임 활성도 계산부에서 계산되어지는 움직임 활성도는 장면 전환 감지부로부터 전송되는 장면 전환 영상의 각 Group of pictures의 움직임 활성도를 계산하는 것으로 상기 Group of pictures의 움직임 활성도는 아래 식 (2)에 의하여 계산되어지며 움직임 활성도가 높은 순으로 장면 전환 영상을 재배치하여 하이라이트 영상을 생성하는 것이다. 상기와 같이 생성된 하이라이트 영상은 움직임 활성도가 높은 장면 전환 영상이 앞 부분에 배치되므로 하이라이트 영상 재생 시 우선적으로 확인해야 하는 영상부터 우선적으로 확인할 수 있는 것이다.
Figure 112016053584084-pat00002
… 식 (2)
상기 식 (2)에서 Group of pictures의 움직임 활성도는 해당 Group of pictures에 포함되는 모든 block들의 움직임 벡터의 합에 의해 결정되는 것이다. 또한 상기 식(2)에서 MV(x)(frame, block)는 해당 프레임(frame)의 해당 블록(block)의 움직임 벡터의 수평 성분 값이고, MV(y)(frame, block)는 해당 프레임의 해당 블록의 수직 성분 값이고, Num of frame은 Group of pictures에 포함된 프레임 수를 의미하고, Num of block은 프레임에 포함되는 블록 수를 의미하는 것이다.
10 : 설정 수신부, 20 : 장면 전환 감지부,
30 : 움직임활성도 계산부, 40 : 영상 제어부,
50 : 저장 장치, 60 : 표시부

Claims (11)

  1. 삭제
  2. 삭제
  3. 대규모 보안 시스템에서 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법에 있어서,
    상기 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법은,
    보안 시스템의 각 카메라로부터 수신되는 영상 정보를 DB화하여 저장 장치에 저장하는 단계(S11)와;
    저장 장치에 저장된 영상 정보에 대하여 하이라이트 영상 생성 대상 기간, 대상 카메라 및 하이라이트 영상 재생 시간 정보를 설정하는 단계(S12)와;
    설정된 하이라이트 영상 생성 대상 기간 및 대상 카메라 정보를 기초로 저장 장치로부터 해당 영상을 독출하고 독출된 영상에서 하이라이트 영상 정보에 포함될 장면 전환 영상을 선별하는 단계(S13)와;
    식
    Figure 112017085480423-pat00015
    에 의하여
    선별된 장면 전환 영상 정보의 픽춰 그룹의 움직임 활성도를 계산하는 단계(S14);
    및 움직임 활성도가 높은 순으로 장면 전환 영상을 재배치하여 우선적으로 재생되도록 하는 단계(S15)를 포함하여 이루어진 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
    여기서, MV(x)(frame, block)는 해당 프레임(frame)의 해당 블록(block)의 움직임 벡터의 수평 성분 값이고, MV(y)(frame, block)는 해당 프레임의 해당 블록의 수직 성분 값이고, Num of frame은 Group of pictures에 포함된 프레임 수를 의미하고, Num of block은 프레임에 포함되는 블록 수를 의미함.
  4. 제3항에 있어서,
    상기 저장 장치에 저장된 영상 정보에 대하여 하이라이트 영상 생성 대상 기간, 대상 카메라 및 하이라이트 영상 재생 시간 정보를 설정하는 단계(S12)는,
    사용자 UI(User Interface)를 통한 사용자 입력 또는 시스템 설정으로 이루어지는 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
  5. 제3항에 있어서,
    상기 독출된 영상에서 하이라이트 영상 정보에 포함될 장면 전환 영상을 선별하는 단계는,
    Group of Pictures화면 변화도가 높은 순으로 장면 전환 영상에 포함될지 여부가 결정될 수 있는 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
  6. 삭제
  7. 제3항에 있어서,
    상기 픽춰 그룹의 움직임 활성도는,
    해당 Group of pictures에 포함되는 모든 block들의 움직임 벡터의 합에 의해 결정되는 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
  8. 제5항에 있어서,
    상기 Group of Pictures화면 변화도는,
    식
    Figure 112016053584084-pat00004
    에 의하여 계산되어지는 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
    여기서, width는 각 프레임의 가로 길이, height는 각 프레임의 세로 길이이고, CurrKey(y,x)는 장면 전환을 감지하는 현재 Key Frame에서의 세로 y번째, 가로 x번째의 화소이고, PrevKey(y,x)는 장면 전환을 감지하는 이전 Key Frame에서의 세로 y번째, 가로 x번째의 화소임.
  9. 제5항에 있어서,
    상기 Group of Pictures화면 변화도는,
    해당 Group of Pictures와 이전 Group of Pictures의 Key Frame 간의 화소 값 차이에 의하여 계산되어지는 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
  10. 대규모 보안 시스템에서 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법에 있어서,
    상기 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법은,
    보안 시스템의 각 카메라로부터 수신되는 영상 정보를 DB화하여 저장 장치에 저장하는 단계와;
    저장 장치에 저장된 영상 정보에 대하여 하이라이트 영상 생성 대상 기간, 대상 카메라 및 하이라이트 영상 재생 시간 정보를 설정하는 단계와;
    설정된 하이라이트 영상 생성 대상 기간 및 대상 카메라 정보를 기초로 저장 장치로부터 해당 영상을 독출하고 독출된 영상에서
    Figure 112016053584084-pat00005
    에 의하여 계산되어지는 Group of Pictures 화면 변화도가 높은 순으로 하이라이트 영상 정보에 포함될 장면 전환 영상을 선별하는 단계와;
    선별된 장면 전환 영상 정보의 픽춰 그룹의 움직임 활성도를
    Figure 112016053584084-pat00006
    에 의하여 계산하는 단계;
    및 움직임 활성도가 높은 순으로 장면 전환 영상을 재배치하여 우선적으로 재생되도록 하는 단계를 포함하여 이루어진 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.
    여기서, width는 각 프레임의 가로 길이, height는 각 프레임의 세로 길이이고, CurrKey(y,x)는 장면 전환을 감지하는 현재 Key Frame에서의 세로 y번째, 가로 x번째의 화소이고, PrevKey(y,x)는 장면 전환을 감지하는 이전 Key Frame에서의 세로 y번째, 가로 x번째의 화소이고, MV(x)(frame, block)는 해당 프레임(frame)의 해당 블록(block)의 움직임 벡터의 수평 성분 값이고, MV(y)(frame, block)는 해당 프레임의 해당 블록의 수직 성분 값이고, Num of frame은 Group of pictures에 포함된 프레임 수를 의미하고, Num of block은 프레임에 포함되는 블록 수를 의미함.
  11. 제9항에 있어서,
    상기 Key Frame은,
    Group of Pictures의 첫 프레임인 것을 특징으로 하는 관제요원의 빠른 상황파악을 위한 하이라이트 영상 생성 방법.

KR1020160069077A 2016-06-02 2016-06-02 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법 KR101788074B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160069077A KR101788074B1 (ko) 2016-06-02 2016-06-02 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160069077A KR101788074B1 (ko) 2016-06-02 2016-06-02 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법

Publications (1)

Publication Number Publication Date
KR101788074B1 true KR101788074B1 (ko) 2017-10-19

Family

ID=60298347

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160069077A KR101788074B1 (ko) 2016-06-02 2016-06-02 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법

Country Status (1)

Country Link
KR (1) KR101788074B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021107209A1 (ko) * 2019-11-25 2021-06-03 주식회사 인텔리빅스 스마트관제서비스장치 및 그 장치의 구동방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008004170A (ja) * 2006-06-22 2008-01-10 Funai Electric Co Ltd 情報記録再生装置
JP5420199B2 (ja) * 2007-06-18 2014-02-19 ソニー （チャイナ） リミテッド 映像解析装置、映像解析方法、ダイジェスト自動作成システム及びハイライト自動抽出システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008004170A (ja) * 2006-06-22 2008-01-10 Funai Electric Co Ltd 情報記録再生装置
JP5420199B2 (ja) * 2007-06-18 2014-02-19 ソニー （チャイナ） リミテッド 映像解析装置、映像解析方法、ダイジェスト自動作成システム及びハイライト自動抽出システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021107209A1 (ko) * 2019-11-25 2021-06-03 주식회사 인텔리빅스 스마트관제서비스장치 및 그 장치의 구동방법

Similar Documents

Publication Publication Date Title
CN108259934B (zh) 用于回放所记录的视频的方法和装置
US7421727B2 (en) Motion detecting system, motion detecting method, motion detecting apparatus, and program for implementing the method
CN105120217B (zh) 基于大数据分析和用户反馈的智能摄像机移动侦测报警系统及方法
CN1972414B (zh) 信息处理装置、成像设备、信息处理方法
CN108062507B (zh) 一种视频处理方法及装置
JP5984707B2 (ja) 映像データ配信装置、映像データ配信システム及びプログラム
JP2007243699A (ja) 映像記録再生方法及び映像記録再生装置
CN101835017A (zh) 视频重放设备和视频重放方法
CN108632666B (zh) 一种视频检测方法及视频检测设备
CN107197172A (zh) 视频直播方法、装置和系统
CN110740290A (zh) 监控录像预览方法及装置
TW201511539A (zh) 用以處理動作視訊之方法及裝置
JP2009171472A (ja) ネットワーク映像モニタリングシステム及びモニタ装置
KR20170137634A (ko) 통신장치, 통신 제어방법 및 통신 시스템
KR101788074B1 (ko) 관제요원의 빠른 상황파악을 위한 보안시스템에서의 하이라이트 영상 생성 시스템 및 이를 이용한 하이라이트 영상 생성방법
US11622099B2 (en) Information-processing apparatus, method of processing information, and program
JP2007300456A (ja) 映像モニタリングシステム及びそのインデクス生成方法
KR20210108691A (ko) 영상 검색 장치 및 이를 포함하는 네트워크 감시 카메라 시스템
CN107734278B (zh) 一种视频回放方法及相关装置
JP2017184045A (ja) 監視カメラシステム及び監視方法
US20130006571A1 (en) Processing monitoring data in a monitoring system
KR101415735B1 (ko) 영상 저장 장치 및 방법
CN105959798A (zh) 视频流的帧定位方法、装置和设备
US20220286642A1 (en) Event-oriented multi-channel video backup apparatus and method, and network surveillance camera system including the same
KR102187016B1 (ko) 타임 슬라이스 영상을 제공하는 사용자 단말 및 영상 제공 서버

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant