KR101582674B1 - 영상 감시 시스템에서의 활성영상 저장방법 및 장치 - Google Patents

영상 감시 시스템에서의 활성영상 저장방법 및 장치 Download PDF

Info

Publication number
KR101582674B1
KR101582674B1 KR1020140068231A KR20140068231A KR101582674B1 KR 101582674 B1 KR101582674 B1 KR 101582674B1 KR 1020140068231 A KR1020140068231 A KR 1020140068231A KR 20140068231 A KR20140068231 A KR 20140068231A KR 101582674 B1 KR101582674 B1 KR 101582674B1
Authority
KR
South Korea
Prior art keywords
frame
video stream
period
active
value
Prior art date
Application number
KR1020140068231A
Other languages
English (en)
Other versions
KR20150140448A (ko
Inventor
한기훈
Original Assignee
주식회사 에스원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 에스원 filed Critical 주식회사 에스원
Priority to KR1020140068231A priority Critical patent/KR101582674B1/ko
Publication of KR20150140448A publication Critical patent/KR20150140448A/ko
Application granted granted Critical
Publication of KR101582674B1 publication Critical patent/KR101582674B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source

Abstract

본 발명은 영상 감시 시스템에서의 활성영상 저장방법 및 장치에 관한 것으로, 카메라로부터 전송된 비디오 스트림을 수신하는 단계; 상기 비디오 스트림을 활성구간과 비활성구간으로 분류하는 단계; 및 상기 활성구간의 비디오 스트림을 저장하는 단계를 포함하며, 상기 활성구간과 비활성구간으로 분류하는 단계는, 상기 비디오 스트림을 구성하는 각 프레임 활성도를 계산하는 단계; 및 상기 비디오 스트림을 일정한 재생시간 구간으로 나누는 단계를 포함하며, 각각의 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 활성구간과 비활성구간을 분류함으로써, 영상 감시 시스템에서의 저장공간 문제를 해결할 수 있게 된다.

Description

영상 감시 시스템에서의 활성영상 저장방법 및 장치{APPARATUS AND METHOD FOR STORING ACTIVE VIDEO IN VIDEO SURVEILLANCE SYSTEM}
본 발명은 영상 감시 시스템에 관한 것으로 보다 상세하게는 감시 카메라로부터 촬영된 영상 중 활성 영상만을 분류하여 저장하는 활성영상 저장방법 및 장치에 관한 것이다.
정보 및 물리보안에 대한 수요가 증가함에 따라 감시 카메라로 획득한 영상을 모니터링 및 저장하는 영상 감시 시스템이 지속적으로 발전하고 있다. 초기의 영상 감시 시스템은 비교적 적은 수량의 카메라를 설치/연결하여 사용하였다. 그러나 보안 의식수준의 향상, 수요 증가, 저장공간과 네트워크 대역폭 등 기술의 발전에 힘입어 영상 감시 시스템의 규모가 점차 확대되어 하나의 시스템에 설치/연결되는 카메라의 수량이 늘어나고 있는 추세이다.
영상감시 시스템의 특성상 여러 대의 카메라로부터 24시간 실시간으로 비디오 스트림이 전송되어 이를 저장하기 위해서는 매우 큰 저장공간이 요구된다. 실제 64채널(카메라가 64대 연결) 이상의 시스템에서 4Mbps로 전송되는 비디오 스트림을 저장할 때 하루에만 2TB 이상의 저장공간이 요구된다.
이를 해결하기 위한 종래 기술로는 연속된 영상의 차이 값에 기반하여 차이 값이 있는 영상만을 저장하는 방법이 있다. 그러나 카메라로부터 전송되는 비디오 스트림에서 영상의 차이값을 얻기 위해서는 비디오 스트림을 복호화(Decoding)하는 과정을 거처야 한다. 이때 복호화는 해당 스트림을 부호화(Incording)한 코덱을 사용하게 되는데, 현재 시장에서 널리 쓰이고 있는 H.264와 같은 코덱의 경우 동영상 압축율을 개선하기 위해 여러 가지 기술을 도입한 결과 복호화 과정에서 과거의 코덱에 비해 매우 많은 연산량을 요구한다. 결국 이러한 연산량으로 인해 대규모 영상 감시 시스템에서 실시간으로 복호화 할 수 있는 채널의 수는 한정될 수 밖에 없는 문제가 있다.
본 발명은 상기와 같은 실정을 감안하여 창안된 것으로, 본 발명이 해결하고자 하는 과제는 비디오 스트림의 각 재생시간구간(Play Time Period) 별로 활성도를 측정하여 활성도가 높은 구간의 영상만을 저장하는 영상 감시 시스템에서의 활성영상 저장방법 및 장치를 제공하는데 있다.
상기와 같은 과제를 해결하기 위한 본 발명에 따른 활성영상 저장방법은, 카메라로부터 전송된 비디오 스트림을 수신하는 단계; 상기 비디오 스트림을 활성구간과 비활성구간으로 분류하는 단계; 및 상기 활성구간의 비디오 스트림을 저장하는 단계를 포함한다.
상기 활성구간과 비활성구간으로 분류하는 단계는, 상기 비디오 스트림을 구성하는 각 프레임 활성도를 계산하는 단계; 및 상기 비디오 스트림을 일정한 재생시간 구간으로 나누는 단계를 포함하며, 각각의 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 활성구간과 비활성구간을 분류할 수 있다.
상기 프레임 활성도를 계산하는 단계는, 상기 프레임에서 움직이는 객체 영역 및 새로이 출현한 객체 영역을 검출하는 단계를 포함하며, 상기 프레임의 활성도는 상기 검출된 움직이는 객체 영역 및 새로이 출현한 객체 영역이 프레임 전체에서 차지하는 비율로 계산될 수 있다.
상기 객체 영역을 검출하는 단계는, 상기 비디오 스트림을 파싱하여 움직임 백터(MV), 블록코딩패턴(CBP), 매크로블록 복호화 모드(MB_type) 정보를 추출하는 단계;를 포함하며, 상기 프레임에서 각각의 영역은 매크로 블록(MB) 단위로 구분하며, 매크로 블록(MB)이 아래 조건 1을 만족하는 경우 움직이는 객체 영역으로 검출하고, 매크로 블록(MB)이 아래 조건 2를 만족하는 경우 새로이 출현한 객체 영역으로 검출할 수 있다.
[조건 1] MV의 크기가 기 설정된 값(th3) 이상이고 CBP가 0과 같다.
[조건 2] MV의 크기가 기 설정된 값(th3) 미만이고 CBP가 15와 같거나, 또는 MB_type이 Intra 이고, CBP가 0보다 크다.
또한, 상기와 같은 과제를 해결하기 위한 본 발명에 따른 활성영상 저장장치는, 카메라로부터 전송된 비디오 스트림을 수신하는 입력영상 버퍼; 상기 비디오 스트림을 활성구간과 비활성구간으로 분류하는 구간별 스트림 분류부; 및 상기 활성구간의 비디오 스트림을 저장하는 영상 저장부를 포함한다.
상기 구간별 스트림 분류부는, 상기 비디오 스트림을 구성하는 각 프레임의 활성도를 계산하는 프레임 활성도 산출부; 및 상기 비디오 스트림을 일정한 재생시간 구간으로 나누고, 상기 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 각각의 구간을 활성구간과 비활성구간으로 분류하는 구간 분류부;를 포함할 수 있다.
상기 프레임 활성도 산출부는, 상기 프레임에서 움직이는 객체 영역 및 새로이 출현한 객체 영역을 검출하는 객체 영역 검출부; 및 상기 검출된 움직이는 객체 영역 및 새로이 출현한 객체 영역이 프레임 전체에서 차지하는 비율을 계산하는 활성도 계산부를 포함할 수 있다.
상기 프레임 활성도 산출부는, 상기 비디오 스트림을 파싱하여 움직임 백터(MV), 블록코딩패턴(CBP), 매크로블록 복호화 모드(MB_type) 정보를 추출하는 스트림 파싱부를 더 포함하되, 상기 객체 영역 검출부는 상기 프레임에서 각각의 영역을 매크로 블록(MB) 단위로 구분하여, 매크로 블록(MB)이 아래 조건 1을 만족하는 경우 움직이는 객체 영역으로 검출하고, 매크로 블록(MB)이 아래 조건 2를 만족하는 경우 새로이 출현한 객체 영역으로 검출할 수 있다.
[조건 1] MV의 크기가 기 설정된 크기(th3) 이상이고 CBP가 0과 같다.
[조건 2] MV의 크기가 기 설정된 크기(th3) 미만이고 CBP가 15와 같거나, 또는 MB_type이 intra 이고, CBP가 0보다 크다.
또한, 상기와 같은 과제를 해결하기 위한 본 발명에 따른 활성영상 저장방법은 이를 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록 매체로 구현될 수 있다.
본 발명에 따른 영상 감시 시스템에서의 활성영상 저장방법 및 장치에 의하면, 비디오 스트림의 각 재생시간 구간별로 활성도를 측정하여 활성도가 높은 구간의 영상만을 저장함으로써, 영상 감시 시스템에서의 저장공간 문제를 해결할 수 있게 된다.
도 1은 본 발명의 실시예에 따른 영상 감시 시스템에서의 활성영상 저장장치의 개략적인 구성을 나타내는 블록도이다.
도 2는 도 1에 도시된 구간별 스트림 분류부의 세부 구성을 나타내는 블록도이다.
도 3은 본 발명의 실시에에 따른 YUV 데이터 포맷의 영상에서 매크로 블록의 구성을 설명하기 위한 개념도이다.
도 4는 본 발명의 실시예에 따른 프레임 활성도 계산을 위한 Pseudo Code를 나타낸 도면이다.
도 5는 본 발명의 실시예에 따른 비디오 스트림의 재생시간 구간을 나누는 예를 설명하기 위한 도면이다.
도 6은 본 발명의 실시예에 따른 영상 감시 시스템에서의 활성영상 저장방법의 흐름도이다.
본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하였으며, 명세서 전체를 통하여 동일한 부분에 대해서는 동일한 도면 부호를 사용한다.
그리고, 본 명세서에서 사용되는 용어들은 본 발명의 바람직한 실시예를 적절히 표현하기 위해 사용된 용어들로서, 이는 사용자, 운용자의 의도 또는 본 발명이 속하는 분야의 관례 등에 따라 달라질 수 있다. 따라서, 본 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
또한, 본 발명의 실시예에 따른 구성요소들은 실제 응용에서 구현될 때 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐져 구성되거나, 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있음을 유념해야 한다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참고하여 상세하게 설명한다.
도 1은 본 발명의 실시예에 따른 영상 감시 시스템에서의 활성영상 저장장치의 개략적인 구성을 나타내는 블록도이다.
도 1을 참조하면, 본 발명의 실시예에 따른 영상 감시 시스템에서의 활성영상 저장장치는 크게 입력영상 버퍼(10), 구간별 스트림 분류부(20), 활성영상 저장부(30) 및 출력영상 버퍼(40)를 포함하여 구성된다.
입력영상 버퍼(10)는 감시 카메라로부터 전송되어 오는 비디오 스트림을 수신하여 임시 저장하며, 상기 비디오 스트림을 구간별 스트림 분류부(20)로 전달한다.
구간별 스트림 분류부(20)는 상기 입력영상 버퍼(10)로부터 전달받은 비디오 스트림을 활성구간과 비활성구간으로 분류한다.
일반적으로 감시 카메라의 경우 특정 장소에 고정 설치되어, 일정한 객체의 이동을 감시하게 된다. 이때 활성구간이란 촬영된 전체 영상 중 움직임을 갖는 객체가 존재하는 시간동안의 영상에 대한 비디오 스트림을 의미한다.
활성영상 저장부(30)는 상기 구간별 스트림 분류부로부터 활성구간의 비디오 스트림을 전송받아 이를 저장하며, 이후 출력 요청이 있는 경우 상기 비디오 스트림을 출력영상 버퍼(40)로 전달한다.
이와 같이 본 발명은 감시 카메라로부터 촬영된 영상 중 실제 모니터링이 필요한 활성구간만을 분리하여 저장함으로서, 감시 시스템에서의 저장공간 부족 문제를 해결할 수 있게 된다.
도 2는 본 발명의 실시예에 따른 활성영상 저장장치의 구간별 스트림 분류부의 세부 구성을 나타내는 블록도이다.
도 2를 참조하면, 구간별 스트림 분류부(20)는 프레임 활성도 산출부(100) 및 구간 분류부(150)를 포함하며, 상기 프레임 활성도 산출부(100)는 스트림 파싱부(110), 객체영역 검출부(120) 및 활성도 계산부(130)를 포함할 수 있다.
프레임 활성도 산출부(100)는 비디오 스트림을 구성하는 각 프레임의 활성도를 계산하며, 그 결과 값을 상기 구간 분류부(150)로 전달한다.
스트림 파싱부(110)는 상기 비디오 스트림을 파싱(parsing)하여, 움직임 백터(Motion Vecter, MV), 블록코딩패턴(Coded-Block Pattern, CBP), 매크로블록 복호화 모드(MB_type) 등의 정보를 추출한다.
일반적으로 H.264 코덱 등은 프레임을 매크로 블록(Macro Block, MB) 단위로 부호화 및 복호화를 수행하게 되는데, 비디오 스트림 파싱은 상기 복호화 과정 중 엔트로피 디코딩(Entropy Decoding)과 같은 일부 작업만을 요구하여, 전체 복호화 과정에 비해 매우 적은 연산량을 요구하게 된다.
참고로 복호화 과정은 엔트로피 디코딩(Entropy Decoding) 작업 이외도 역변환(Inverse Transform), 역양자화(Inverse Quantization), 움직임 보상(Motion Compensation), 공간 예측(Spatial Prediction), 디블록킹 필터(Deblocking Filter), 부화소 보간(Sub-pixel Interpolation) 등의 작업을 요구한다.
움직임 벡터(MV)는 움직임 영상에 대한 백터 값으로, 현재 프레임의 현재 블록이 이전 프레임의 어느 위치로부터 예측되었는지를 나타낸 것이다. 예를 들어 움직임 백터(MV)가 (1,-1)이면 현재 블록이 이전 프레임의 동일 위치에서 x축으로 1픽셀, y축으로 -1 픽셀 이동한 위치로부터 예측되었음을 의미한다.
이와 같은 움직임 백터(MV)는, 특히 고정 설치되어 촬영된 감시 카메라 영상에 있어서 움직이는 객체의 이동 방향 및 이동 거리 등을 검출하는데 효과적으로 활용될 수 있다.
블록코딩패턴(CBP)은 H.264 코덱 등에서 매크로 블록(MB)의 코딩 패턴을 나타내는 신호로써, 그 값은 각 블록의 유효계수 유무와 관련된다.
유효계수란 정수 변환과 그에 따른 양자화 이후 블록에 존재하는 0이 아닌 계수로서, 유효계수가 존재하는 경우는 예측값과 현재값의 차이가 크다는 의미가 된다. 즉, 움직임이 복잡해지거나 갑작스런 장면전환 등으로 예측의 정확성이 떨어지는 경우에 대체로 유효계수가 블록에 존재하게 된다.
예를 들면, YUV 4:2:0 데이터 포맷의 영상은 매크로 블록(MB)이 도 3에 도시된 바와 같이 4개의 Y블록과 2개의 U,V 블록으로 구성될 수 있다. 이때 블록코딩패턴(CBP) 값은 X5X4X3X2X1X0 의 6 비트 값으로 표현할 수 있다.
여기서 X0 내지 X3는 0부터 3까지의 Y 블록의 값을 나타내며, 각각의 값이 1이면 유효계수가 존재하고 0이면 유효계수는 존재하지 않게 된다. 또한 X4 및 X5 는 U블록 및 V블록의 값을 나타내며, X4 값이 1이면 U, V 블록의 DC 계수 중 유효계수가 존재하고, X5 값이 1이면 U, V 블록의 AC 계수 중 유효계수가 존재한다. DC 계수는 도 3에 도시된 바와 같이 블록 내 좌상 위치에 존재하는 계수이며, 상기 DC 계수를 제외한 나머지는 AC 계수가 된다. 일반적으로 DC 계수는 비디오 신호의 화질에 미치는 영향이 가장 크며, 유효계수가 존재할 확률이 높다.
매크로블록 복호화 모드(MB_type)는 H.264 코덱 등에서 해당 매크로 블록(MB)이 어떻게 부호화 되었는지를 나타내는 정보이다.
매크로 블록(MB)은 Inter 모드와 Intra 모드로 나뉘게 되는데, Inter 모드는 움직임 벡터(MV)를 이용하여 다른 프레임으로부터 예측을 수행하여 비디오 신호의 시간적 중복성을 제거하는 반면, Intra 모드는 동일 프레임 내의 현재 블록에 인접한 화소로부터 예측을 수행하여 비디오 신호의 공간적 중복성을 제거하는 특성을 갖는다.
한편, Inter 모드는 다시 SKIP, Inter 16*16, Inter 16*8, Inter 8*16, P 8*8 모드의 5가지로 나뉘며, Intra 모드는 Intra 16*16, Intra 4*4 모드의 2가지로 나뉘게 된다.
일반적으로 Inter 예측이 Intra 예측보다 정확성 측면에서 높은 성능을 나타내지만, 장면전환, 객체출현 또는 사라짐, 조명변화, 빠르고 복잡한 움직임 발생 등과 같이 영상 변화가 심한 영역 또는 단조로운 배경과 같이 공간적인 변화가 거의 없는 영역에서의 예측은 Intra 예측이 더 높은 정확도를 보일 수 있다.
결과적으로, 매크로블록 복호화 모드(MB_type)가 Inter인 경우 공간적 중복성 보다 시간적 중복성이 강하며 이전 프레임과 연속성이 있는 반면, Intra인 경우는 시간적 중복성 보다 공간적 중복성이 강하며 이전 프레임과 연속성이 없는 특성을 나타낸다.
객체영역 검출부(120)는 상기 프레임에서 움직이는 객체 영역 및 새로이 출현한 객체 영역을 검출한다.
상기의 객체 영역을 검출하기 위한 방법은 다양하게 존재할 수 있으며, 여기서는 상기 스트림 파싱부에서 추출된 움직임 정보(MV), 블록코딩패턴(CBP) 및 매크로블록 복호화 모드(MB_type) 정보를 이용한 방법을 소개한다.
먼저, 아래의 조건 1에 따라 프레임에서 움직이는 객체(Moving Object) 영역과 배경(non-Moving Object) 영역을 매크로 블록(MB) 단위로 구분한다. 즉, 조건 1을 만족하면 해당 매크로 블록(MB)은 움직이는 객체 영역으로 판단한다.
조건 1
매크로 블록(MV)의 움직임 벡터(MV)가 기 설정된 크기(th3) 이상이고, 블록코딩패턴(CBP) 값이 0 과 같다.
여기서 설정된 크기(th3)은 객체의 움직임 여부를 판단하는 기준으로 부호화 과정, 감시구역의 환경 등에 따라 변경될 수 있으며, 바람직하게는 2 화소로 설정할 수 있다.
한편, 블록코딩패턴(CBP) 값이 0이라 함은 앞서 설명과 같이 매크로 블록에 유효계수가 없다는 것으로, 예측이 정확히 수행되었다는 의미가 된다. 따라서 움직임 벡터가 기 설정된 크기(th3) 이상이라는 정보는 더욱 신뢰할 수 있는 정보가 되므로, 해당 매크로 블록(MB)는 움직이는 객체 영역으로 분류된다.
다음으로, 아래의 조건 2에 따라 배경(non-Moving Object) 영역에서 새로이 출현된 객체(New Object) 영역을 메크로 블록 단위로 구분한다. 즉, 조건 2에서 둘 중 어느 하나를 만족하면 해당 매크로 블록(MB)은 새로이 출현된 객체 영역으로 판단한다.
조건 2
1) 매크로 블록(MB)의 움직임 벡터(MV)가 기 설정된 크기(th3) 미만이고, 블록코딩패턴(CBP) 값이 15와 같다.
2) 매크로 블록(MB)의 매크로블록 복호화 모드(MB_type)가 Intra 이고, 블록코딩패턴(CBP) 값이 0 보다 크다
여기서 1)의 경우 블록코딩패턴(CBP) 값이 15와 같다 함은 6 비트 이진화로 표현된 값 001111에서 앞선 설명을 참조하면 Y블록 4개가 모두 유효계수를 갖는 것으로 예측이 부정확하다는 의미가 된다. 따라서 매크로 블록(MB)의 움직임 백터(MV)가 일정 크기 미만이더라도 블록코딩패턴(CBP) 값이 15와 같다면, 해당 매크로 블록은 이전 프레임과 연속되지 않는 새로운 객체가 출현한 영역으로 볼 수 있다.
또한, 2)의 경우 매크로블록 복호화 모드(MB_type)가 Intra 인 경우는 공간 중복성이 시간 중복성 보다 강한 경우로서, 이전 프레임과 연속성이 없는 경우가 된다. 또한 블록코딩패턴(CBP) 값이 0보다 크다는 것은 유효계수가 존재하여 공간 예측 역시 정확하지 않다는 의미다 된다. 따라서 이 경우 역시 새로운 객체가 출현한 것으로 볼 수 있다.
한편, 참고로 매크로 블록(MB)의 매크로블록 복호화 모드(MB_type)가 Intra 이고, 블록코딩패턴(CBP) 값이 0 인 경우는 공간 중복성이 강하고 공간 예측도 정확한 경우이므로, 이 경우는 새로운 객체가 출현한 것이 아니라 공간적 변화가 거의 없는 평탄한 배경영역으로 볼 수 있게 된다.
활성도 계산부(130)는 상기 객체 영역 검출부에서 검출된 움직이는 객체 영역 및 새로이 출현한 객체 영역이 프레임 전체에서 차지하는 비율을 계산하여 프레임 활성도를 산출한다.
예를 들어, 1280 * 720 의 해상도를 갖는 프레임이 3600개의 16*16의 매크로 블록(MB)으로 구성되어 있는 경우, 해당 프레임의 매크로 블록(MB) 중 400개가 움직이는 객체 영역이고 320개가 새로이 출현된 객체 영역이라면, 해당 프레임의 활성도는 20 (= 720 / 3600 *100 ) 이 된다.
한편, 도 4는 상기 설명된 본 발명의 실시예에 따른 프레임 활성도 계산을 위한 Pseudo Code를 나타낸 것이다.
구간 분류부(150)는 상기 비디오 스트림을 일정한 재생시간 구간으로 나누고, 상기 계산된 프레임 활성도를 이용하여 각각의 구간을 활성구간과 비활성구간으로 분류한다.
여기서 비디오 스트림을 나누는 재생시간 구간은 도 5에 도시된 바와 같이 I(intra) 프레임을 기준으로 현재 I 프레임에서 다음 I 프레임까지의 구간으로 정할 수 있다. 그러나 이에 한정되는 것은 아니며, 일정한 복수의 프레임 단위로 얼마든지 변경하여 구간을 나눌 수 있다.
또한, 활성구간과 비활성구간으로 분류함에 있어서, 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 각각의 구간을 활성구간과 비활성구간으로 분류할 수 있다.
예를 들면, 현재 재생시간 구간의 프레임 활성도 중 최대값이 설정된 값(th1)을 넘거나 또는 현재 재생시간 구간의 프레임 활성도 평균값이 설정된 값(th2)을 넘는 경우에 활성구간으로 분류할 수 있다. 이때, 설정된 값 th1 및 th2는 감시 시스템의 저장 공간 및 감시구역의 환경 특성 등에 따라서 결정될 수 있으며, 바람직하게는 설정 값 th1은 20, th2는 7로 설정할 수 있다.
도 6은 본 발명의 실시예에 따른 영상 감시 시스템에서의 활성영상 저장방법의 흐름도이다.
도 6을 참조하면, 본 발명의 실시예에 따른 활성영상 저장방법은 먼저 카메라로부터 전송된 비디오 스트림을 수신하고(S100), 상기 비디오 스트림을 활성구간과 비활성구간으로 분류하여(S200) 상기 활성구간의 비디오 스트림만을 저장하게 된다(S300).
이하 비디오 스트림을 활성구간과 비활성구간으로 분류하는 과정(S200)을 구체적으로 설명하기로 한다. 다만 앞서 활성영상 저장장치의 실시예에서 설명한 부분과 중복되는 부분은 생략하기로 하며, 이하의 과정은 상기 본 발명의 실시예에 따른 활성영상 저장장치의 구간별 스트림 분류부(20)에서 수행됨을 전제한다.
비디오 스트림을 수신하게 되면, 상기 비디오 스트림을 구성하는 각 프레임의 활성도를 계산하는(S210) 한편, 상기 비디오 스트림을 일정한 재생시간 구간으로 나누는(S250) 단계를 거치게 된다.
단계 S210에서 각 프레임의 활성도 계산을 위해, 먼저 상기 비디오 스트림을 파싱하여 움직임 백터(Motion Vecter, MV), 블록코딩패턴(Coded-Block Pattern, CBP), MB_type(매크로블록 복호화 모드) 등의 정보를 추출하고(S220), 상기 추출된 정보와 상술한 조건 1 및 조건 2를 이용하여 움직이는 객체 영역 및 새로이 출현한 객체의 영역을 검출하며(S230), 상기 검출된 영역이 프레임 전체에서 차지하는 비율을 계산하여 각 프레임의 활성도를 산출하게 된다(S240).
단계 S250에서 비디오 스트림의 재생시간 구간은 현재 I(intra) 프레임부터 다음 I(intra) 프레임까지로 설정될 수 있으며, 그 밖에 일정한 복수의 프레임 단위로 설정될 수도 있다.
상기 단계 S210 내지 단계 S250을 수행한 후에 각각의 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 활성구간과 비활성구간을 분류하게 된다.
이때, 현재 구간 내의 프레임 활성도 중 최대값이 기 설정된 값(th1)보다 크거나 프레임 활성도 평균값이 기 설정된 값(th2)보다 큰 경우 현재 구간을 활성구간으로 분류할 수 있다(S260).
한편, 상술한 영상 감시 시스템에서의 활성영상 저장방법은 소프트웨어적인 프로그램으로 구현하여 컴퓨터로 읽을 수 있는 소정 기록 매체에 기록해 둘 수 있다.
예컨대, 기록 매체는 각 재생 장치의 내장형으로 하드 디스크, 플래시 메모리, RAM, ROM 등이거나, 외장형으로 CD-R, CD-RW와 같은 광디스크, 콤팩트 플래시 카드, 스마트 미디어, 메모리 스틱, 멀티미디어 카드일 수 있다.
이 경우, 컴퓨터로 읽을 수 있는 기록 매체에 기록한 프로그램은, 비디오 스트림을 활성구간과 비활성구간으로 분류하는 단계를 포함하는 영상감시 시스템에서의 활성영상 저장방법을 수행할 수 있다.
본 발명의 명세서에서 설명하는 기능적 동작과 구현물은 디지털 전자회로로 구현되거나 컴퓨터 소프트웨어, 펌웨어 혹은 하드웨어로 구현되거나 이들 중 하나 이상의 조합으로 구현될 수 있다. 본 발명의 명세서에서 설명하는 구현물은 하나 이상의 컴퓨터 프로그램 제품, 다시 말해 데이터 처리 장치의 동작을 제어하기 위하여 또는 이것에 의한 실행을 위하여 유형의 프로그램 저장매체 상에 인코딩된 컴퓨터 프로그램 명령에 관한 하나 이상의 모듈로서 구현될 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위 뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
10 : 입력영상 버퍼 20 : 구간별 스트림 분류부
30 : 활성영상 저장부 40 : 출력영상 버퍼
100 : 프레임 활성도 산출부 110 : 스트림 파싱부
120 : 객체영역 검출부 130 : 활성도 계산부
150 : 구간 분류부

Claims (13)

  1. 카메라로부터 전송된 비디오 스트림을 수신하는 단계;
    상기 수신된 비디오 스트림을 일정한 재생시간 구간으로 나누어 활성구간과 비활성구간으로 분류하는 단계; 및
    상기 활성구간으로 분류된 비디오 스트림을 저장하는 단계;
    를 포함하고,
    상기 활성구간과 비활성구간으로 분류하는 단계는,
    상기 비디오 스트림을 구성하는 각 프레임 활성도를 계산하는 단계 및 상기 비디오 스트림을 일정한 재생시간 구간으로 나누는 단계를 포함하되,
    각각의 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 활성구간과 비활성구간을 분류하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장방법.
  2. 삭제
  3. 제 1항에 있어서,
    상기 활성구간과 비활성구간으로 분류하는 단계는 현재 구간 내의 프레임 활성도 중 최대값이 기 설정된 값(th1)보다 크거나 프레임 활성도 평균값이 기 설정된 값(th2)보다 큰 경우 현재 구간을 활성구간으로 분류하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장방법.
  4. 제 1항에 있어서,
    상기 재생시간 구간으로 나누는 단계는 I(intra) 프레임을 기준으로 현재 I 프레임부터 다음 I 프레임까지를 재생시간 구간으로 하여 비디오 스트림을 나누는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장방법.
  5. 제 1항에 있어서,
    상기 프레임 활성도를 계산하는 단계는 상기 프레임에서 움직이는 객체 영역 및 새로이 출현한 객체 영역을 검출하는 단계를 포함하되,
    상기 프레임의 활성도는 상기 검출된 움직이는 객체 영역 및 새로이 출현한 객체 영역이 프레임 전체에서 차지하는 비율로 계산되는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장방법.
  6. 제 5항에 있어서,
    상기 객체 영역을 검출하는 단계는, 상기 비디오 스트림을 파싱하여 움직임 백터(MV), 블록코딩패턴(CBP), 매크로블록 복호화 모드(MB_type) 정보를 추출하는 단계를 포함하되,
    상기 프레임에서 각각의 영역은 매크로 블록(MB) 단위로 구분하며, 매크로 블록(MB)이 아래 조건 1을 만족하는 경우 움직이는 객체 영역으로 판단하고, 매크로 블록(MB)이 아래 조건 2를 만족하는 경우 새로이 출현한 객체 영역으로 판단하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장방법.
    [조건 1] MV의 크기가 기 설정된 값(th3) 이상이고 CBP가 0과 같고,
    [조건 2] MV의 크기가 기 설정된 값(th3) 미만이고 CBP가 15와 같거나, 또는 MB_type이 Intra 이고, CBP가 0보다 크다.
  7. 카메라로부터 전송된 비디오 스트림을 수신하는 입력영상 버퍼;
    상기 수신된 비디오 스트림을 일정한 재생시간 구간으로 나누어 활성구간과 비활성구간으로 분류하는 구간별 스트림 분류부; 및
    상기 활성구간으로 분류된 비디오 스트림을 저장하는 영상 저장부;
    를 포함하고,
    상기 구간별 스트림 분류부는, 상기 비디오 스트림을 구성하는 각 프레임의 활성도를 계산하는 프레임 활성도 산출부; 및
    상기 비디오 스트림을 일정한 재생시간 구간으로 나누고, 상기 구간 내 프레임 활성도의 최대값, 최소값, 평균값 또는 누적값을 기반으로 각각의 구간을 활성구간과 비활성구간으로 분류하는 구간 분류부를 포함하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장장치.
  8. 삭제
  9. 제 7항에 있어서,
    상기 구간 분류부는 I(intra) 프레임을 기준으로 현재 I 프레임부터 다음 I 프레임까지를 재생시간 구간으로 하여 비디오 스트림을 나누는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장장치.
  10. 제 7항에 있어서,
    상기 구간 분류부는 현재 구간 내의 프레임 활성도 중 최대값이 기 설정된 값(th1)보다 크거나 프레임 활성도 평균값이 기 설정된 값(th2)보다 큰 경우 현재 구간을 활성구간으로 분류하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장장치.
  11. 제 7항에 있어서,
    상기 프레임 활성도 산출부는, 상기 프레임에서 움직이는 객체 영역 및 새로이 출현한 객체 영역을 검출하는 객체 영역 검출부; 및
    상기 검출된 움직이는 객체 영역 및 새로이 출현한 객체 영역이 프레임 전체에서 차지하는 비율을 계산하는 활성도 계산부를 포함하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장장치.
  12. 제 11항에 있어서,
    상기 프레임 활성도 산출부는, 상기 비디오 스트림을 파싱하여 움직임 백터(MV), 블록코딩패턴(CBP), 매크로블록 복호화 모드(MB_type) 정보를 추출하는 스트림 파싱부를 더 포함하되,
    상기 객체 영역 검출부는, 상기 프레임에서 각각의 영역을 매크로 블록(MB) 단위로 구분하여, 매크로 블록(MB)이 아래 조건 1을 만족하는 경우 움직이는 객체 영역으로 검출하고, 매크로 블록(MB)이 아래 조건 2를 만족하는 경우 새로이 출현한 객체 영역으로 검출하는 것을 특징으로 하는 영상 감시 시스템에서의 활성영상 저장장치:
    [조건 1] MV의 크기가 기 설정된 크기(th3) 이상이고 CBP가 0과 같고,
    [조건 2] MV의 크기가 기 설정된 크기(th3) 미만이고 CBP가 15와 같거나, 또는 MB_type이 intra 이고, CBP가 0보다 크다.
  13. 제1항, 제3항 내지 제6항 중 어느 하나의 항에 의한 방법을 실행하기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.

KR1020140068231A 2014-06-05 2014-06-05 영상 감시 시스템에서의 활성영상 저장방법 및 장치 KR101582674B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140068231A KR101582674B1 (ko) 2014-06-05 2014-06-05 영상 감시 시스템에서의 활성영상 저장방법 및 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140068231A KR101582674B1 (ko) 2014-06-05 2014-06-05 영상 감시 시스템에서의 활성영상 저장방법 및 장치

Publications (2)

Publication Number Publication Date
KR20150140448A KR20150140448A (ko) 2015-12-16
KR101582674B1 true KR101582674B1 (ko) 2016-01-20

Family

ID=55080583

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140068231A KR101582674B1 (ko) 2014-06-05 2014-06-05 영상 감시 시스템에서의 활성영상 저장방법 및 장치

Country Status (1)

Country Link
KR (1) KR101582674B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102263071B1 (ko) 2019-12-06 2021-06-08 이정무 영상 관제 방법, 영상 관제 장치 및 컴퓨터 프로그램

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102090775B1 (ko) * 2017-08-24 2020-03-18 이노뎁 주식회사 압축영상에 대한 신택스 기반의 이동객체 영역 추출 방법

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100313702B1 (ko) * 1998-11-26 2001-12-28 설창훈, 유동균 감시시스템의영상저장장치
KR20040079084A (ko) * 2003-03-06 2004-09-14 삼성전자주식회사 시간적 복잡도를 고려한 적응적 동영상 부호화와 그 장치
KR100775787B1 (ko) * 2005-08-03 2007-11-13 경희대학교 산학협력단 영역별 시공간적 특성을 이용한 동영상 부호화 장치 및 그방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102263071B1 (ko) 2019-12-06 2021-06-08 이정무 영상 관제 방법, 영상 관제 장치 및 컴퓨터 프로그램

Also Published As

Publication number Publication date
KR20150140448A (ko) 2015-12-16

Similar Documents

Publication Publication Date Title
EP2654298B1 (en) Detection of video feature based on variance metric
KR100987765B1 (ko) 동영상 부호화기에서의 예측 수행 방법 및 장치
US9426475B2 (en) Scene change detection using sum of variance and estimated picture encoding cost
TW202044834A (zh) 用於處理視訊內容的方法及系統
US9591313B2 (en) Video encoder with transform size preprocessing and methods for use therewith
US9294764B2 (en) Video encoder with intra-prediction candidate screening and methods for use therewith
US9615102B2 (en) Method and apparatus for processing components of an image
JP2014082639A (ja) 画像符号化装置およびその方法
US20140233645A1 (en) Moving image encoding apparatus, method of controlling the same, and program
WO2012015654A1 (en) Method and system for encoding video frames using a plurality of processors
CN114731440A (zh) 视频数据的无损编码
US20220150515A1 (en) Adaptive temporal filter for an unavailable reference picture
US9438925B2 (en) Video encoder with block merging and methods for use therewith
CN114913250A (zh) 基于语义分割和匈牙利算法的视频编解码系统和方法
KR101582674B1 (ko) 영상 감시 시스템에서의 활성영상 저장방법 및 장치
JP5748225B2 (ja) 動画像符号化方法，動画像符号化装置および動画像符号化プログラム
US9654775B2 (en) Video encoder with weighted prediction and methods for use therewith
US20150208082A1 (en) Video encoder with reference picture prediction and methods for use therewith
JP5178616B2 (ja) シーンチェンジ検出装置および映像記録装置
US20180027256A1 (en) Video encoding device, video encoding method, and video encoding program
RU2643477C1 (ru) Устройство кодирования видео с предсказанием, способ кодирования видео с предсказанием, программа кодирования видео с предсказанием, устройство декодирования видео с предсказанием, способ декодирования видео с предсказанием и программа декодирования видео с предсказанием
EP2899975A1 (en) Video encoder with intra-prediction pre-processing and methods for use therewith
KR101585951B1 (ko) 영상 감시 시스템 및 영상 감시 시스템에서의 영상저장구간 결정방법
KR20070090494A (ko) 평균 움직임 벡터를 이용한 인터 프레임 에러 은닉 장치 및방법
KR101319916B1 (ko) 움직임 추정방법 및 장치, 및 이를 이용한 영상 부호화방법및 장치

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant