KR20130050374A - 감시 카메라로 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 시스템 및 방법 - Google Patents

감시 카메라로 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 시스템 및 방법 Download PDF

Info

Publication number
KR20130050374A
KR20130050374A KR1020137007838A KR20137007838A KR20130050374A KR 20130050374 A KR20130050374 A KR 20130050374A KR 1020137007838 A KR1020137007838 A KR 1020137007838A KR 20137007838 A KR20137007838 A KR 20137007838A KR 20130050374 A KR20130050374 A KR 20130050374A
Authority
KR
South Korea
Prior art keywords
digital video
video stream
time
output
buffer
Prior art date
Application number
KR1020137007838A
Other languages
English (en)
Other versions
KR101526081B1 (ko
Inventor
마이클 에스 웬그로비츠
센실 쿠마르
Original Assignee
알까뗄 루슨트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알까뗄 루슨트 filed Critical 알까뗄 루슨트
Publication of KR20130050374A publication Critical patent/KR20130050374A/ko
Application granted granted Critical
Publication of KR101526081B1 publication Critical patent/KR101526081B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

디지털 비디오 관리 장치는 모바일 디스플레이 장치와 같은 디스플레이 장치 상에서 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 제어가능하게 시청할 수 있도록 한다. 장치는 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 수신하기 위해 패킷 교환 네트워크에 연결된다. 장치는 디지털 비디오 스트림의 패킷을 버퍼링하고, 그리고 나서 버퍼의 패킷 출력 흐름 속도를 제로 출력 속도와 실시간 보다 빠른 출력 속도 사이에서 제어한다. 예를 들어, 패킷 출력 흐름 속도는 제 1 시간에서 제로 출력 속도로, 제 1 시간 다음의 제 2 시간에서 실시간보다 빠른 출력 속도로 설정될 수 있다.

Description

감시 카메라로 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 시스템 및 방법{SYSTEM AND METHOD FOR CONTROLLABLY VIEWING DIGITAL VIDEO STREAMS CAPTURED BY SURVEILLANCE CAMERAS}
본 발명은 감시 카메라 시스템과 관련되며, 특히 비디오 감시 카메라로부터 디지털 비디오 스트림을 시청하는 것과 관련된다.
고해상도 터치 스크린과 고속 네트워크 접속을 가지는 스마트폰 및 기타 모바일 장치는 시장에서 아주 흔해지고 있다. 비슷하게, IP-비디오 감시 카메라 및 IP-인코더와 사용 가능한 레거시(legacy) 아날로그 감시 카메라는 일반 도로, 공항, 및 기타 많은 공공 시설물에서 널리 이용되고 있다. 보안 회사들은 IP 네트워크와 결합된 모바일 장치에서 실시간으로 감시 카메라 스트림을 시청할 수 있는 것에 관심을 나타내왔다. 하지만, 현재 일반적인 모바일 장치의 작은 스크린이 복수의 비디오 스트림 시청을 비현실적으로 만든다.
하나의 해결책으로 복수의 비디오 스트림을 동시에 디스플레이하는 것이 있으나, 각각의 비디오 스트림은 감소된 창 사이즈 및 해상도를 갖게 된다. 하지만, 더 작은 비디오 창 사이즈는 시청자로 하여금 중요한 정보를 놓치게 할 수 있다. 또 다른 해결책은 복수의 비디오 스트림을 회전하거나 왔다 갔다(toggle)하여 하나의 스트림 또는 전체 세트 중 몇 개의 스트림만 한 번에 전해상도로 디스플레이하는 것이다. 예를 들어, 일반적인 비디오 감시 스크린은 처음 10초 동안 첫 번째 카메라를 보여주고, 다음 10초 동안은 두 번째 카메라를, 다음 10초 동안은 N번째 카메라를 보여주고 다시 첫 번째 카메라로 돌아가는 것을 반복할 수도 있다. 하지만, 첫 번째 카메라의 시야 내에서 발생하는 중요한 활동이 두 번째 카메라 내지 N번째 카메라를 시청하는 동안 발생할 수도 있다.
또한, 디지털 비디오 버퍼링은 개인용 비디오 녹화장치(PVR:personal video recorder) 및 디지털 비디오 녹화장치(DVR:digital video recorder)와 같은 디지털 비디오 장치에서 흔히 사용된다. 예를 들어, 통상적인 DVR 시스템에서 사용자는 TV를 실시간으로 볼 수 있고, 비디오를 정지한 다음 지연이 있지만 비디오를 계속해서 실시간으로 시청하는 것이 가능하다. 또한 사용자는 실시간 TV 쇼를 따라잡기 위해 2배 또는 4배 속도로 비디오를 시청할 수 있다. 몇몇 DVR 시스템에서는 심지어 사용자가 이러한 방식으로 두 개의 TV 채널을 시청할 수 있도록 할 수도 있다. 즉, 제 2 채널을 보는 약간의 시간 동안 제 1 채널을 보는 것이 정지되고, 그리고 나서 제 1 채널을 보는 약간의 시간 동안 제 2 채널을 보는 것이 정지된다. 하지만, 이러한 과정은 수동이고 매우 다루기 힘들다. 이와 같이, 시청자는 두 개 TV 쇼 모두를 시청하는 것에 빠르게 뒤쳐질 수도 있다. 더욱이, 이러한 과정은 2개 이상의 비디오 채널에 대해서는 거의 불가능할 것이다.
하나의 실시예로, 디지털 비디오 관리 장치는 디스플레이 장치에 원격의 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 것이 가능하도록 한다. 디지털 비디오 관리 장치는 입력 인터페이스, 버퍼, 프로세서 및 출력 인터페이스를 포함한다. 입력 인터페이스는 원격의 감시 카메라로 촬영된 디지털 비디오 스트림을 수신하기 위해 패킷 교환 네트워크(packet-switched network)에 연결된다. 버퍼는 디지털 비디오 스트림의 패킷을 수신하고 저장하며, 프로세서는 제로 출력 속도와 실시간 출력보다 빠른 출력 속도 사이에서 버퍼의 패킷 출력 흐름 속도를 조절한다. 프로세서는 제 1 시간에서 패킷 출력 흐름 속도를 제로 출력 속도로 설정하고, 제 1 시간 다음의 제 2 시간에서는 실시간 출력보다 빠른 출력 속도로 설정한다. 출력 인터페이스는 디스플레이를 위해 제 2 시간에서의 실시간 출력보다 빠른 출력 속도로 디지털 비디오 스트림을 디스플레이 장치로 제공한다.
추가의 실시예에서, 프로세서는 제 2 시간 다음의 제 3 시간에서 패킷 출력 흐름 속도를 실시간 출력 속도로 설정한다. 예를 들어, 프로세서는 제 2 시간과 제 3 시간 사이에서 패킷 출력 흐름 속도를 가변 출력 속도로 설정할 수 있다. 프로세서는 제 2 시간에서의 버퍼의 전류 깊이에 근거하거나 비디오 분석을 이용하여 가변 출력 속도를 결정할 수도 있다.
추가의 실시예로, 입력 인터페이스는 적어도 하나의 추가 원격 비디오 감시 시스템에 의해 촬영된 적어도 하나의 추가 디지털 비디오 스트림을 수신하도록, 그리고 적어도 하나의 추가적인 버퍼 내 적어도 하나의 추가 디지털 비디오 스트림을 저장하도록 더 연결된다. 프로세서는 디지털 비디오 스트림 중 선택된 디지털 비디오 스트림 및 적어도 하나의 추가 디지털 비디오 스트림이 디스플레이 장치에 표현되도록 하기 위해 적어도 하나의 추가 버퍼의 패킷 출력 흐름 속도를 더 조절한다. 예를 들어, 프로세서는 선택되지 않은 디지털 비디오 스트림의 패킷 출력 흐름 속도를 제로 출력 속도로 설정함으로써 디지털 비디오 스트림 중 선택되지 않은 디지털 비디오 스트림과 적어도 하나의 추가 디지털 비디오 스트림을 정지시킬 수 있다. 또 다른 예로, 프로세서는 선택된 디지털 비디오 스트림 및 선택된 디지털 비디오 스트림에 관한 각각의 패킷 출력 흐름 속도를 결정하기 위해 디스플레이 장치 사용에 관한 미리 정해진 방침, 비디오 분석 및 사용자 입력 중 하나 이상을 사용할 수 있다.
또한 추가 실시예에서, 프로세서는 디스플레이 장치상에서 선택된 디지털 비디오 스트림 내 하나 이상의 관심 영역(regions of interest)을 디스플레이하기 위해 선택된 디지털 비디오 스트림에 대한 공간 해상도를 더 조정한다. 예를 들어, 프로세서는 하나 이상의 관심 영역에서 줌잉 인(zooming in)하거나, 초고해상도 기술을 이용하여 하나 이상의 관심 영역의 해상도를 증가시키거나, 하나 이상의 관심 영역의 크기를 조절함으로써 공간 해상도를 조정할 수 있다.
본 발명의 또 다른 실시예로, 본 방법은 디스플레이 장치상에서 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 제어 가능하게 시청할 수 있도록 한다. 본 방법은 원격 감시 카메라로 촬영된 디지털 비디오 스트림을 수신하고, 버퍼 내 디지털 비디오 스트림의 패킷을 버퍼링하고, 제 1 시간에서의 제로 출력 속도와 제 2 시간에서의 실시간 출력보다 빠른 출력 속도 사이에서 버퍼의 패킷 출력 흐름 속도를 조절하고, 제 2 시간에서의 실시간 출력보다 빠른 출력 속도에서 디스플레이 장치로 디지털 비디오 스트림을 제공하는 것을 포함한다.
본 발명에 대한 보다 완전한 이해는 첨부된 도면과 함께 다음의 상세한 설명을 참고함으로써 얻어질 것이다.
도 1은 본 발명의 실시예에 따라 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 제어 가능하게 시청하는 예시적인 디지털 비디오 시스템을 개략적으로 도시한다.
도 2(a)-2(c)는 디지털 비디오 버퍼의 패킷 출력 흐름 속도를 제어하기 위한 실시예를 개략적으로 나타낸 시간 흐름도이다.
도 3은 본 발명의 실시예에 따라 다수의 원격 감시 카메라에 의해 촬영된 복수의 디지털 비디오 스트림을 제어가능하게 시청하기 위한 또 하나의 예시적인 디지털 비디오 시스템을 개략적으로 도시한다.
도 4는 본 발명의 실시예에 따라 디지털 비디오 스트림의 패킷 출력 흐름 속도를 제어하는 예시의 디지털 비디오 관리 장치를 개략적으로 나타낸 블록도이다.
도 5는 본 발명의 실시예에 따라 모바일 통신 장치상에서의 디지털 비디오 스트림의 디스플레이를 제어하는 예시의 무선 네트워크를 개략적으로 도시한다.
도 6은 본 발명의 실시예에 따라 디지털 비디오 스트림의 디스플레이를 제어하는 예시의 모바일 통신 장치를 개략적으로 도시한다.
도 7은 본 발명의 실시예에 따라 제어된 디지털 비디오 스트림의 공간 해상도를 조정하기 위한 예시의 디지털 비디오 시스템을 개략적으로 도시한다.
도 8은 본 발명의 실시예에 따라 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 제어 가능하게 시청하는 예시적인 방법을 개략적으로 도시한다.
본 발명의 실시예에 따르면, 시스템 및 방법은 하나 이상의 감시 카메라 스트림을 제어 가능하게 시청하기 위해 제공된다. 예를 들어, 실시간 감시 비디오 스트림은 작은 스크린을 가진 모바일 장치에서 또는 큰 스크린 디스플레이 및/또는 보여지는 감시 카메라의 수가 많은 비디오 벽(video wall)에서 표현될 수 있다. 또한, 본 발명의 실시예는 실시간 플레이백(playback) 및 현재 재생되는 디지털 비디오 녹화물에 대한 분석을 포함하도록 또한 확대될 수 있다.
도 1은 본 발명의 실시예에 따라 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 제어 가능하게 시청하는 예시적인 디지털 비디오 시스템(10)을 개략적으로 나타낸다. 시스템(10)은 비디오 카메라(20), 디지털 비디오 관리 장치(40), 및 디스플레이(70)를 포함한다. 디스플레이(70)는 모바일 장치상의 디스플레이 또는 보안 시스템 디스플레이와 같은 단일의 디스플레이(70)일 수 있고, 보안 시스템 비디오 벽과 같이 복수의 디스플레이를 포함할 수도 있다. 장치(40)는 예를 들어 네트워크 내의 서버 또는 디스플레이(40)를 구비하는 휴대폰일 수도 있다. 장치(40)가 서버인 실시예에서, 장치(40)는 IP(internet protocol) 네트워크(35)(예를 들어, WiFi, 3G, 4G 또는 다른 수단을 경유하여) 또는 다른 종류의 네트워크를 통하여 디스플레이에 연결된다.
장치(40)는 예를 들어 패킷 교환(예를 들어, IP) 네트워크, 회로 교환 네트워크 또는 그것들의 결합일 수도 있는 기타 네트워크(30)를 경유하여 원격 비디오 감시 카메라에 더 연결된다. 원격 비디오 감시 카메라(20)에 의해 촬영된 디지털 비디오 스트림(25)은 장치(40)에 수신되고 버퍼(50)로 버퍼링된다. 디지털 비디오 스트림(25)은 예를 들어 실시간 스트림 또는 미리 녹화된 스트림 일 수도 있다. 출력 속도 제어 모듈(60)은 적절한 속도로 디스플레이(70)에 디지털 비디오 스트림(25)을 표현하기 위해 버퍼(50)의 출력 속도를 최적으로 제어한다. 보다 구체적으로, 버퍼(20)는 디지털 비디오 스트림(25)의 패킷(55)을 수신하고 저장하며, 출력 속도 제어 모듈(60)은 제로 출력 속도와 실시간 출력보다 빠른 출력 속도 사이에서 버퍼(50)의 패킷 출력 속도를 제어한다. 예를 들어, 출력 속도 제어 모듈(60)은 패킷 출력 흐름 속도를 제 1 시간에서 제로 출력 속도로 설정하고, 제 2 시간에서 패킷 출력 흐름 속도를 실시간 출력보다 빠른 출력 속도로 설정할 수 있다. 출력 속도 제어 모듈(60)은 버퍼(50)의 패킷 출력 속도를 제 3 시간에서 실시간 출력 속도로 더 설정할 수 있다. 출력 흐름 속도의 조정은 디스플레이(70)를 시청하는 사용자가 디스플레이(70)에 나타난 하나 이상의 스트림을 관찰하면서 사용자의 부주의 또는 무능으로 인해 비디오 스트림(25)의 중요한 정보를 놓치지 않도록 한다.
일반적으로, 출력 속도 제어 모듈(60)은 많은 요인에 따라 출력 속도를 조정할 수 있다. 예를 들어, 만약 최종 사용자가 디스플레이(70) 상의 비디오를 수동으로 정지한다면, 출력 속도 제어 모듈(60)은 제로로 출력 속도를 설정할 수 있는데, 이로 인해 비디오 버퍼(50)는 채워지기 시작한다. 비디오를 다시 시작한 후, 출력 속도 제어 모듈(60)은 방침(policy), 비디오 분석(video analytics) 또는 사용자 입력(user input)에 근거하여 결정된 조정 가능한 속도로 출력 흐름 속도를 조정할 수 있다. 예를 들어, 방침 또는 사용자 입력은 출력 속도 제어 모듈(60)이 가장 오래된 비디오를 가장 빠르게 출력하거나, 버퍼 깊이(buffer depth), 장면 복잡성(scene complexity) 및/또는 다른 요인에 따른 출력 속도로 출력하도록 명령할 수 있다. 또 다른 예로, 복잡한 컨텐츠를 가진 비디오는 더 느린 속도로 출력되도록 하고, 간단한 컨텐츠를 가진 비디오는 더 빠른 속도로 출력되도록 비디오 분석이 디지털 비디오 스트림(25)에 적용될 수 있다.
장치(40)가 네트워크 내에 있고 버퍼가 압축된(예를 들어, MPEG4) 비디오를 저장하는 실시예에서, 압축된 비디오는 빠른 속도로 IP 네트워크(35)를 지나 송신될 수 있으며, 그 이후 디스플레이(70) 상에서 빠른 속도로 압축이 풀리고 표현된다. 장치(40)가 디스플레이(70)와 같은 하우징 내에 있는(즉, 스마트폰 내) 또 다른 실시예에서, 비디오 감시 카메라(20)는 디지털 비디오 스트림(25)을 고정된 실시간 속도로 송신할 수 있고, 출력 속도 제어는 스마트폰 자체 내에서 수행될 수 있다. 게다가, 비디오 버퍼(50)는 출력 속도 제어(60)처럼 동일한 장치(40) 내에 상주하거나 다른 장치 내에 상주할 수도 있다(즉, 둘 다 스마트 폰 내에 상주할 수 있고, 하나는 네트워크 내에 다른 하나는 스마트폰 내에 상주하거나, 둘 다 네트워크 내에 상주할 수 있음).
도 2a를 참조하여 시간이 흐르면서 패킷 출력 흐름 속도가 어떻게 변하는지를 개략적으로 설명한다. 도 2a에 나타나는 것과 같이, 원격 감시 카메라로부터의 디지털 비디오 스트림이 Ri 프레임/초의 일반적인 고정 속도로 버퍼(50)로 이동한다. 버퍼(50) 내 데이터는 압축된(즉, MPEG, H264, 또는 기타 압축 기술)비디오 또는 압축 해제된 비디오 중 하나 일 수 있다. 버퍼링 된 비디오는 Ro 프레임/초의 속도로 버퍼(50) 밖으로 이동한다. 버퍼의 깊이는 보통 제로가 아니다. 예를 들어, 비디오는 Ri=30 프레임/초의 속도로 스트림-인하고, Ro=30 프레임/초의 속도로 스트림-아웃할 수도 있으며, 이것은 2초의 지연을 발생시킨다. 만약 출력 속도 Ro가 입력 속도 Ri와 일치한다면, 도 2a에 묘사된 것과 같이 버퍼 레벨이 떨어지지도 올라가지도 않는 T0에서처럼 버퍼 깊이는 고정된다.
본 발명의 실시예에 따라, 버퍼의 출력 속도는 제어가능하지만, 입력 속도는 카메라 소스로부터 보통 고정된다. 그러므로, 출력 속도 Ro는 실제로 시간의 함수 Ro(t)이다. 예를 들어, T1에서 버퍼 출력 속도 Ro는 0으로 설정된다. 버퍼 깊이가 증가 되기 시작하더라도, 비디오는 실제로 없어지지 않는다. 더 정확히 말하면, 이용 가능한 충분한 버퍼 메모리가 있다면 비디오는 버퍼(50)에 일시적으로 저장된다.
T2에서 버퍼 출력 흐름 속도는 Ri 보다 빠른 속도(Ro>Ri)로 재조정된다. 버퍼가 언더플로(underflow)가 아니라면, 버퍼(50)의 깊이는 감소 되기 시작하고, 이러한 감소는 계속될 수 있다. 결국, T3에서 출력 속도는 입력 속도와 일치하도록(Ro=Ri) 다시 조정되고, 버퍼 깊이는 변화를 멈추고 일정해진다. 이러한 프로세스가 서로 다른 속도, 버퍼 깊이, 정지 시간 등에 맞추어 반복될 수 있다.
도 2a에 나타난 출력 흐름 속도에서의 조정은 비디오 스트림이 얼마의 시간 동안 정지되었다가 그러한 지연, 또는 버퍼 깊이가 문제를 나타내지 않는다면 나중에 데이터에서의 어떠한 공백(gap)도 없이 실시간보다 빠른 속도(a faster-than-real-time)로 플레이아웃 되도록 한다. 보안에서의 지연의 영향은 구체적인 감시 사용 경우(specific surveillance usage-case)에 따라 달라진다. 하지만, 많은 경우, 사건이 지연된 스트림에서 발견될 때 작은 지연은 여전히 보안팀이 적절한 판단과 조치를 취하도록 한다.
도 2b는 시간이 지나면서 출력 흐름이 어떻게 변하는지에 관한 간단한 예시를 나타낸다. Ri-Ro가 0보다 큰 경우, 버퍼 깊이는 증가하고, Ri-Ro가 0보다 작은 경우, 버퍼 깊이는 감소한다. 어떤 두 점 사이의 곡선 아래에 있는 구역은 버퍼 깊이에서의 순변화(net change)를 나타낸다. 도 2b에서 볼 수 있듯이. 플레이 아웃 속도는, 지연에서의 순변화 없이 제로, 입력 속도와 동일한 속도, 또는 입력 속도 보다 두 배 빠른 속도가 될 수 있다.
도 2c를 살펴보면, 출력 흐름 속도는 또한 기타 비상수(non-constant), 비구분(non-discrete) 값으로 조정될 수 있다. 예를 들어, 도 2c는 비디오 스트림이 어떻게 정지(T0에서 T1 영역)되고, 처음에 Ri를 초과하고 나서 부드럽게 Ri로 다가가는 가변속도로 플레이아웃 될 수 있는가를 설명한다. 이러한 비디오 스트림을 시청하는 사용자는 정지, 그 다음 빠른 속도에서 플레이 되는 이전 비디오, 및 실시간 근처에 접근하는 속도에서 플레이아웃된 더 최근 비디오를 볼 수 있을 것이다.
도 3은 도 1에서 설명된 간단한 시스템의 멀티 채널 버전이다. 도 3에서 세 개의 다른 비디오 감시 카메라(20a, 20b, 및 20c) 각각이 디지털 비디오 관리 장치(40)로 각각의 디지털 비디오 스트림(25a, 25b, 및 25c)을 제공한다. 디지털 비디오 관리 장치(40)는 패킷(55a, 55b, 55c), 각각의 비디오 스트림(25a, 25b, 및 25c)을 버퍼링하고 저장하기 위한 각각의 버퍼(50a, 50b, 및 50c)를 포함하고, 출력 속도 제어 모듈(60)은 디스플레이(70) 상에 표시하기 위해 각각의 버퍼(50a, 50b, 50c)의 패킷 출력 흐름 속도를 제어한다.
디지털 비디오 관리 장치(40)는 카메라 선택 모듈(80)을 더 포함한다. 카메라 선택 모듈(80)은 디스플레이(70) 상에 나타날 비디오 스트림을 선택한다. 출력 속도 제어 모듈(60)은 디스플레이를 위해 카메라 선택 모듈(80)에 의해 현재 선택되지 않은 채널(디지털 비디오 스트림)을 정지한다. 예를 들어, 도 3에 보여지는 것처럼, 카메라 선택 모듈(80)은 비디오 감시 카메라(20a)의 디지털 비디오 스트림(25a)을 정지하고 카메라(20b 및 20c)의 디지털 비디오 스트림(25b 및 25c)만을 디스플레이(70)에 표시할 수 있다. 이렇게 디스플레이된 비디오 스트림(25b 및 25c) 중 하나 또는 모두는 출력 속도 제어 모듈(60)에 의해 선택된 출력 흐름 속도에 따라 실시간으로, 실시간보다 느린 속도로, 또는 실시간보다 빠른 속도로 표시될 수 있다. 카메라 선택 모듈(80) 및 출력 속도 제어 모듈(60) 모두는 선택된 스트림(25a-25c) 및 관련 패킷 출력 흐름 속도를 결정하기 위해 입력 방침 설명서, 비디오 분석, 및 사용자 GUI(graphical user interface) 명령어를 받아들인다.
하나의 실시예에서, 각각의 버퍼(50a-50c)는 복수의 스마트폰(또는 기타 이동(mobile)이나 비이동(non-mobile) 클라이언트)을 위해 사용될 수 있는데, 각각은 버퍼(50a-50c) 내의 서로 다른 포인터를 사용한다. 또 다른 실시예에서, 상위에서 설명된 바와 같이, 각각의 카메라(20a-20c)가 Ri 프레임/초의 고정된 속도로 하나 이상의 스마트폰에 각각의 디지털 비디오 스트림(25a-25c)을 보내고, 버퍼 포인터 관리(buffer pointer management)가 스마트 폰 내에서 수행되기 위해, 버퍼(50a-50c)는 스마트폰 자체에 존재할 수도 있다. 이러한 실시예에서, 장치(40)는 스마트폰 내에서 실행된다.
유사하게, 출력 속도 제어 모듈(60) 및 카메라 선택 모듈(80)은 스마트폰(또는 기타 이동이나 비이동 클라이언트)에 상주하거나 스마트폰 또는 다른 클라이언트와 통신하는 네트워크의 서버 내에 상주할 수 있다. 버퍼(50a-50c)는 출력 속도 제어 모듈(60) 및 카메라 선택 모듈(80)과 같은 동일한 장치에 상주하거나 다른 장치에 상주할 수도 있다.
도 4는 본 발명의 실시예에 따라 예시의 디지털 비디오 관리 장치(40)에 대한 블록도이다. 장치(40)는 프로세서(100), 메모리(110), 버퍼(50), 네트워크 입력 인터페이스(I/F)(120), 출력 I/F(130) 및 사용자 출력 I/F(140)를 포함한다. 네트워크 입력 인터페이스(120)는 원격 비디오 감시 카메라로부터 디지털 비디오 스트림(25)을 수신하기 위해 패킷 교환(IP) 또는 다른 유형의 통신 네트워크에 연결된다. 출력 I/F(130)는 디지털 비디오 스트림(20)을 표시하기 위해 디스플레이 장치로 디지털 비디오 스트림(20)을 제공하도록 연결된다. 사용자 입력 I/F(140)는 디스플레이 장치의 사용자로부터 사용자 GUI(graphical user interface) 명령어(145)를 수신하도록 연결된다.
실시예에서, 출력 I/F(130) 및 사용자 출력 I/F(140)는 또 다른 통신 네트워크에 연결된다. 예를 들어, 출력 I/F(130)는 통신 네트워크를 통해 스마트폰 또는 다른 클라이언트로 디지털 비디오 스트림(25)(압축된 또는 압축되지 않은)을 송신할 수 있다. 또 다른 실시예로, 사용자 I/F(140)는 통신 네트워크를 통해 스마트폰 또는 다른 클라이언트로부터 사용자 GUI 명령어(145)를 수신할 수 있다. 또 다른 실시예에서, 출력 I/F(130) 및 사용자 입력 I/F(140)는 스마트폰 또는 다른 클라이언트 내에서 통합되며, 내부 인터페이스를 클라이언트 디스플레이 및 GUI에/로부터 제공한다.
메모리(110)는 출력 속도 제어 모듈(60) 및 카메라 선택 모듈(80)을 관리하고, 프로세서(100)는 출력 속도 제어 모듈(60) 및 카메라 선택 모듈(80)의 명령어를 실행하도록 메모리(110)에 더 연결된다. 예를 들어, 프로세서(100)는 출력 I/F(130)를 경유하여 디스플레이로 출력하기 위해 네트워크 입력 I/F(120)를 경유하여 수신된 하나 이상의 입력 디지털 비디오 스트림(25)을 선택하는 카메라 선택 모듈(80)의 명령어를 실행할 수 있다. 프로세서(100)는 버퍼(50) 내 각각의 입력 디지털 비디오 스트림(25)에 관한 패킷을 저장하기 위해 그리고 각각의 버퍼(50)의 패킷 출력 흐름 속도를 제어하기 위해 출력 속도 제어 모듈(60)의 명령어를 더 실행할 수 있다. 예를 들어, 프로세서(100)는 카메라 선택 모듈(80)에 의해 선택되지 않는 어떤 디지털 비디오 스트림을 정지(즉, 패킷 출력 흐름 속도를 0으로 설정함)시키기 위해 출력 속도 제어 모듈(50)의 명령어를 실행할 수 있다.
본 명세서에서 사용된 바와 같이, "프로세서"라는 용어는 일반적으로 PC와 같은 범용 컴퓨터를 작동시키는 장치로 이해된다. 하지만, 마이크로컨트롤러, FPGAs(Field Programmable Gate Arrays), ASICs(Application Specific Integrated Circuits), 디지털 신호 처리 칩, 또는 그러한 것의 결합과 같은 다른 프로세싱 장치는 본 명세서에서 설명되는 이점 및 장점을 달성하기 위해 또한 사용될 수 있음에 유의한다. 또한, 본 명세서에서 사용된 것처럼, "메모리"라는 용어는 하드드라이브, RAM(random access memory), ROM(read only memory), 플래시 메모리 또는 다른 종류의 저장 장치나 저장체에 제한되지 않고 어떤 종류의 데이터 장치도 포함한다.
메모리(110)는 방침 정보(150) 및/또는 비디오 분석 정보(160)를 더 관리한다. 방침 정보(150)는 시스템 사용자 또는 관리자에 의해 프로그래밍 될 수도, 아니면 버퍼 특징, 네트워크 특징 및/또는 기타 요인에 근거하여 미리 결정될 수도 있다. 이와 같이, 비디오 분석 정보(160)도 사용자 또는 관리자에 의해 프로그래밍 되거나 여러 다른 요인에 근거하여 미리 결정될 수도 있다.
방침 정보(policy imformation)(150)는 카메라 선택 및 출력 속도 제어 기능을 조절하기 위해 카메라 선택 모듈(80) 및 출력 속도 제어 모듈(60) 모두로 입력될 수 있다. 예를 들어, 방침 정보(150)는 총 세 개의 스트림(스트림 A, B, C) 중 두 개의 스트림(스트림 A, B)이 임의의 시간에 5초 간격으로 플레이아웃 보상(playout compensation)과 함께 각각 디스플레이되도록 규정할 수도 있다. 실시예에 따라, 스트림 A 및 B, 스트림 B 및 C, 스트림 C 및 A는 고정된 실시간보다 빠른 렌더링으로 왔다 갔다(toggle)할 수 있어 순 버퍼 깊이 증가가 없게 된다. 또 다른 실시예에서, 방침 정보(150)는 이전 비디오가 최근 비디오보다 더 빠르게 플레이아웃되도록 또는 스트림 A가 스트림 B와 다른 플레이아웃 속도를 가지도록 요구할 수도 있다. 방침 정보(150)는 또한 각각의 비디오 스트림에 대한 플레이아웃 간격을 적응적으로(adaptively) 조정할 수도 있다. 예를 들어, 방침 정보(150)는 첫 번째 분(minute) 내에 스트림 A가 10초 동안 플레이 되고, 스트림 B가 5초 동안 플레이 될 것이라는 것과, 두 번째 분(minute) 내에 스트림 A가 5초 동안 플레이 되고, 스트림 B가 10초 동안 플레이 될 것이라는 것임을 나타낼 수도 있다. 방침 정보(150)가 카메라 선택 모듈(80) 및 출력 속도 제어 모듈(60)을 제어할 수 있는 방법에 대하여 많은 다른 가능성과 변형이 있다는 것은 이해해야 한다.
방침 정보(150)에 더하여, 비디오 분석 정보(video analytics information)(160)는 또한 어떤 스트림(25)이 어떤 속도에서 렌더링되는지를 제어하기 위해 카메라 선택 모듈(80) 및 출력 속도 제어 모듈(60)로 입력될 수도 있다. 예를 들어, 많은 모션 컨텐츠를 가진 스트림(25)은 느린 속도로 시간 중 75% 플레이 되는 반면, 적은 모션 컨텐츠를 가진 스트림(25)은 빠른 속도로 시간 중 25% 플레이 될 수도 있다. 모션 컨텐츠가 없는 스트림(25)은 심지어 완전히 생략되거나 단지 주기적으로 디스플레이됨으로써, 제한된 공간(real estate)을 가진 디스플레이가 모션을 가진 스트림(25)에 사용되도록 한다. 선택되지 않는 스트림(즉, 카메라 선택 모듈(80)에 의해 이전에 생략된 스트림(25))에서 모션이 발생하는 실시예에서, 출력 속도 제어 모듈(60)은 모션 발생 전, 동안, 및 후에 모션을 나타내기 위해 카메라 선택 모듈(80)을 중단시킬 수 있다.
객체 검출 및 인식과 같은 다른 비디오 분석(160) 또한 이용될 수도 있다. 예를 들어, 스트림(25)이 이동하는 차량을 포함한다면, 카메라 선택 및 출력 속도 제어 모듈에 대한 하나의 방식(scheme)이 사용되는 반면, 스트림(25)이 움직이는 사람을 포함한다면, 카메라 선택 및 출력 속도 제어에 대한 다른 방식(scheme)이 사용될 수도 있다. 게다가, 스트림(25)이 움직이지 않는 사람을 포함한다면, 카메라 선택 및 출력 속도 제어에 대한 또 다른 방식(scheme)이 사용될 수도 있다. 비디오 분석(160)이 카메라 스트림 선택 모듈(80) 및 버퍼 출력 속도 제어 모듈(60)을 제어할 수 있는 방법에 있어 많은 다른 가능성과 변형이 있다는 것은 이해해야 한다.
방침(15) 및 비디오 분석(160)에 더하여, 사용자 GUI(graphical user interface) 명령어(145)는 또한 어떤 스트림(25)이 어떤 속도에서 표시되는지를 제어하기 위해 사용자 입력 I/F(140)를 경유하여 카메라 선택 모듈(80) 및 출력 속도 제어 모듈(60)로 입력될 수도 있다. 예를 들어, 사용자는 추가의 공부를 위해 정지시키고자 모바일 장치 디스플레이 상의 스트림(25) 중 하나를 터치할 수도 있다. 그리고 나서 사용자는 이후에 스트림(25)을 재시작할 수도 있고, 그러면 출력 속도 제어 모듈(60)은 실시간으로 따라잡기 위해 R0(t)함수를 이용하여 재시작된 스트림의 패킷 출력 흐름 속도를 조정할 수 있다. 스트림(25) 중 하나가 사용자에 의해 정지되는 경우, 다른 스트림 또한 방침(15) 및/또는 비디오 분석(160)에 따라 느린 속도로 정지 및/또는 플레이아웃 될 수도 있다. 다른 실시예에 따르면, 사용자는 프로파일 사이에서 선택할 수 있고, 그럼으로써 서로 다른 스트림(25)의 플레이아웃 속도를 결정할 수 있다. 예를 들어, 프로파일 1은 각각의 5초 동안 A-B, B-C, C-A를 보여 줄 수도 있는 반면, 프로파일 2는 5초간 스트림A, 5초간 스트림B, 그리고 5초간 스트림C를 보여 줄 수도 있다. 게다가, 프로파일 3은 고정 또는 가변 속도로 프로파일 1과 프로파일 2 사이를 왔다 갔다(toggle) 할 수도 있다. 사용자 GUI 명령어(145)가 카메라 스트림 선택 모듈(80) 및 버퍼 출력 속도 제어 모듈(60)을 제어할 수 있는 방법에 있어 많은 다른 가능성과 변형이 있다는 것은 이해해야 한다.
더욱이, 방침(150), 비디오 분석(160), 및 사용자 GUI 명령어(145)는 또한 카메라 선택 모듈(80) 및 출력 속도 제어 모듈(60)을 제어하기 위한 다양한 방법으로 서로와 상호 작용할 수도 있다. 예를 들어, 비디오 분석(160)에 의해 결정된 간단한 모션이 있는 경우, 방침 정보(150)는 제 1 방침의 선택 및 플레이백(playback) 방식이 사용되어야 하는 것을 나타낼 수도 있는 반면, 비디오 분석(160)에 의해 결정된 복잡한 모션이 있는 경우에는 방침 정보(150)가 제 2 방침의 선택 및 플레이백 방식이 사용되어야 하는 것을 나타낼 수도 있다. 다른 실시예에 따라, 만약 사용자가 GUI 명령어(145)를 통하여 하나의 스트림(25)을 정지한다면, 비디오 분석(160)은 모션이 검출되었을 때 스트림(25)을 중단시키고 다시 시작할 수 있다. 또 다른 실시예에 따르면, 사용자가 GUI 명령어(145)를 통해 프로파일 X를 선택한 경우 방침 정보(150)는 얼마의 시간(T) 후에 사용자에 의해 선택된 프로파일을 중단시키고 프로파일 Y로 다시 디폴트(default) 할 수도 있다. 카메라 스트림 선택 모듈(80) 및 버퍼 출력 속도 제어 모듈(60)을 최적으로 제어하기 위해 방침, 비디오 분석 및 사용자 GUI 명령어가 서로 상호 작용하는데 많은 다른 가능성과 변형이 있다는 것은 이해해야 한다.
도 5는 본 발명의 실시예에 따라 모바일 통신 장치(250)상에서의 디지털 비디오 스트림(25)의 디스플레이를 제어하는 예시의 무선 네트워크(220)를 개략적으로 나타낸다. 무선 네트워크(220)는 모바일 통신 장치(250)에 무선 접속(240)을 제공하는 네트워크 액세스 포인트(230)(예를 들어, 기지국 또는 다른 네트워크 송수신 장치)를 포함한다. 모바일 통신 장치는 예를 들어 스마트폰 또는 네트워크 액세스 포인트(230)와 통신할 수 있는 다른 모바일 장치가 될 수 있다. 무선 네트워크는 GSM(Global System for Mobile Communicaions),PCS(Personal Communications Service), WiFi, CDMA(Code Division Multiple Access) 또는 기타 3G나 4G 무선 네크워크에 제한되지 않고 포함하는 어떠한 종류의 무선 네트워크가 될 수 있다.
서버(200)는 비디오 감시 카메라로부터 디지털 비디오 스트림(25)을 수신하고 무선 네트워크(220)에 디지털 비디오 스트림(25)을 제공하기 위해 무선 네트워크(220)에 연결된다. 서버(200)는 버퍼(50) 및 프로세서(210)를 포함한다. 프로세서(210)가 방침, 비디오 분석 및/또는 사용자 GUI 명령어에 근거하여 버퍼의 출력 속도를 제어하는 동안, 버퍼(50)는 디지털 비디오 스트림(25)의 패킷을 수신하고 저장한다.
모바일 통신 장치(250)는 디스플레이(70)를 포함하고 프로세서(260)를 또한 포함한다. 모바일 통신 장치의 프로세서(260)는 서버 프로세서(210)에 의해 설정된 패킷 흐름 속도로 수신된 비디오 스트림(250)을 디스플레이(70) 상에 표현한다. 예를 들어, 디지털 비디오 스트림(25)의 패킷이 실시간보다 빠른 속도로 수신된다면, 프로세서(260)는 실시간보다 빠른 속도로 디지털 비디오 스트림(25)을 디스플레이(70) 상에 표현한다. 하나의 실시예로, 모바일 장치 프로세서(260)는 다양한 입력 장치(예를 들어, 터치 스크린, 키패드, 키보드, 스타일러스 또는 모바일 통신 장치의 기타 입력 장치)를 통해 사용자 GUI 명령어를 수신하고 디스플레이(70) 상의 디지털 비디오 스트림(25)의 플레이아웃 속도를 제어하기 위해 무선 네트워크(220)를 통해 서버(200)로 사용자 GUI 명령어를 보낸다.
도 6은 본 발명의 실시예에 따라 디지털 비디오 스트림의 디스플레이를 제어하는 예시의 모바일 통신 장치(250)를 개략적으로 나타낸다. 도 6에서, 모바일 통신 장치가 디스플레이(70) 상의 디지털 비디오 스트림의 플레이아웃 속도를 제어할 수 있도록 디지털 비디오 관리 장치(40)가 모바일 통신 장치(250) 내에 포함된다. 도 6에서 볼 수 있듯이, 모바일 통신 장치(250)는 버퍼(50) 및 프로세서(100)를 포함한다. 프로세서(210)가 방침, 비디오 분석 및/또는 사용자 GUI 명령어에 근거하여 버퍼의 출력 흐름 속도를 제어하는 동안, 버퍼(50)는 모바일 통신 장치 내의 송수신기(도시되지 않음)에 의해 수신된 디지털 비디오 스트림의 패킷을 수신하고 저장한다.
일반적인 모바일 통신 장치(250)는 낮은 해상도의 디스플레이(70)를 구비하기 때문에, 모바일 통신 장치(250)에 있는 감시 카메라(특히, 고해상도 모델)로부터 비디오를 디스플레이할 때 공간 정보의 손실이 있다. 예를 들어, 장면에 대한 중요한 정보가 프레임 중 작은 부분에만 집중된 데 반하여, 나머지 프레임이 중요하지 않은 "배경" 정보를 포함하고 있을 수 있다.
그러므로 추가의 실시예에서는, 중요한 공간 및 시간 정보를 디스플레이하기 위해 디스플레이(70) 상에 디스플레이된 선택된 스트림의 해상도 및 크기가 최적으로 제어된다. 도 7을 살펴보면, 제어된 디지털 비디오 스트림의 공간 해상도를 조정하는 예시의 디지털 비디오 시스템을 개략적으로 나타냄으로써 중요한 정보의 손실을 최소화한다.
도 7에서, 디지털 비디오 관리 장치(40)는 디지털 비디오 스트림(25)의 비디오 프레임(300) 내 관심 영역(ROI:region of interest)(310)을 검출하고 디스플레이(70) 상에 그러한 ROI(310)을 디스플레이할 수 있다. 디지털 비디오 관리 장치(40)는 버퍼(50), 프로세서(100) 및 메모리(110)를 포함한다. 버퍼(50)는 원격 비디오 감시 카메라(20)로부터 디지털 비디오 스트림(25)을 수신하고 거기에 있는 디지털 비디오 스트림의 패킷을 저장하도록 결합 된다. 프로세서(100)는 디스플레이를 위한 하나 이상의 디지털 비디오 스트림을 선택하고, 버퍼의 출력 흐름 속도를 제어하고, 디지털 비디오 스트림(25) 내의 ROI(310)를 검출하고, 디스플레이(70) 상에 ROI(310)를 디스플레이하기 위해 디지털 비디오 스트림의 공간 해상도를 조정한다. 프로세서(100)는 관련 비디오 스트림의 선택, 출력 흐름 속도의 제어 그리고 선택된 프레임 내 ROI에 대한 검출 및 공간 해상도 조정을 위해 예를 들어 방침, 비디오 분석 및 사용자 GUI 명령어를 이용할 수 있다. ROI 검출 및 공간 해상도 조정을 제공하기 위해, 메모리(110)는 공간 해상도 조정 애플리케이션(330) 및 ROI 검출 애플리케이션(340)을 포함하는 것으로 도시된다. 프로세서(100)는 공간 해상도 조정 애플리케이션(330) 및 ROI 검출 애플리케이션(340)에 관한 명령어를 실행하도록 메모리(110)에 연결된다. 예를 들어, 프로세서(100)는 디지털 비디오 스트림(25)의 특정 프레임(300) 내 하나 이상의 ROI(310)를 검출하기 위해 ROI 검출 애플리케이션(340)의 명령어를 실행할 수 있다. 디지털 비디오 스트림(25)은 디스플레이(70) 상의 디스플레이를 위해 선택된 디지털 비디오 스트림 또는 선택되지 않은 디지털 비디오 스트림 일 수 있다. 후자의 경우, 선택되지 않은 디지털 비디오 스트림 내의 ROI(310)를 검출할 때, 프로세서(100)는 디지털 비디오 스트림을 선택하지 않고 디스플레이(70)로 스트림을 표현하지 않도록 결정을 중단시킬 수도 있다(예를 들어, 프로세서(100)는 디스플레이(70)로 상기 ROI에 응답하는 패킷을 제공할 수 있음). 특정 ROI(310)를 검출할 때, 프로세서(100)는 디스플레이(70) 상에 표시된 ROI(310)만을 남겨두면서 프레임의 중요하지 않은 공간 영역을 더 잘라낼 수 있다.
비디오 분석은 지명 수배자의 얼굴, 의심스러운 행동 및 주인 없는 여행 가방과 같은 중요한 정보를 자동으로 인식하는데 사용될 수 있다. 이러한 정보는 프레임(300) 내의 ROI(310)의 선택을 위해 ROI 검출 애플리케이션(340)에 의해 사용된다. 일반적으로, ROI 검출 프로세스는 ROI(310) 식별 방침 및 사용자 입력과 같은 많은 요인을 따라 달라진다. 예를 들어, 방침은 다른 스트림이 중요한 정보를 가지지 않는 한, 3개의 스트림 중 2개의 스트림이 5초의 간격으로 임의의 시간에 디스플레이되도록 하는데 영향을 줄 수도 있다. 또 다른 방침은 중요한 컨텐츠를 가진 스트림이 디스플레이(70) 상의 이용 가능한 공간으로 ROI를 맞춤으로써 항상 디스플레이되는 반면, 정지 컨텐츠(모션 아님)를 가진 스트림은 완전히 생략되도록 하는 것에 영향을 줄 수도 있다.
프로세서(100)는 하나 이상의 ROI(310)에 대한 공간 해상도를 조정하도록 공간 해상도 조정 애플리케이션(330)의 명령어를 더 실행할 수 있다. 예를 들어, 프로세서(100)는 줌(zoom) 요인을 조정하거나 ROI(310)의 해상도를 증가시킬 수 있다. 예시와 같이, 초고해상도 기술은 다수의 센서 정보를 융합하거나 모션을 이용함으로써 이미징 센서의 해상도를 증가시키는데 이용될 수 있다. 이미지를 흐릿하게 만드는 전통적인 줌(zooming)과 달리, 고해상도 기술은 장면에 대한 추가적인 정보를 제공하면서 공간 해상도가 증가하도록 만든다.
비디오 분석 및/또는 방침은 또한 중요한 컨텐츠를 가진 비디오를 느린 속도로 플레이아웃하는데 적용될 수도 있다. 방침 및 비디오 분석에 더하여, 사용자 GUI 명령어는 ROI(310)의 공간 해상도를 제어하는데 또한 사용될 수도 있다.
예를 들어, 사용자는 ROI를 선택하고 초고해상도에서 그 ROI를 시청하기 위해 디스플레이(70) 상의 스트림 중 하나를 터치할 수도 있다. 사용자 GUI가 ROI 선택 및 공간 해상도 관리를 제어할 수 있는 방법에 있어 많은 다른 가능성 및 변형이 있음을 이해해야 한다.
또 다른 예로, 비디오 오버레이(overlay) 기술은 비디오에 추가적인 원문 정보(textual information)(320)를 추가하는데 사용될 수도 있다(예를 들어, 프레임(310) 내 사람의 머리 옆에 사람 이름을 삽입할 수 있음). 예를 들어, 객체 검출 및 인식과 같은 비디오 분석이 활용될 수도 있고, 장면에 대하여 추출된 지식이 원문 정보(320)처럼 비디오 스트림에 태그될 수 있다. 게다가, 추출된 지식은 중요한 트리거(trigger)에 관한 데이터베이스와 비교될 수도 있고, 911에 전화하거나 관리자에게 알리는 것과 같은 위급상황 절차를 자동으로 실행하는데 이용될 수 있다.
공간 해상도 조정(330) 및 ROI 검출 애플리케이션(340)은 디스플레이(70)를 포함하는 클라이언트 장치(예를 들어, 스마트폰) 또는 네트워크 서버 내에서 실행될 수 있다. 예를 들어, 애플리케이션(330 및 340)이 클라이언트 장치에서 실행되는 실시예의 경우, 각각의 카메라(20)는 Ri프레임/초의 고정된 속도로 스트림을 보낼 수 있고, 카메라 선택, 출력 흐름 속도 및 공간 해상도 관리가 클라이언트 장치 내에서 수행될 수도 있다. 또 다른 실시예에서는 공간해상도 관리가 클라이언트 장치에서 수행되는 반면, 카메라 선택 프로세스는 네트워크 내에 상주할 수도 있다.
도 8은 본 발명의 실시예에 따라 디지털 비디오 스트림을 제어 가능하게 시청하는 예시적인 프로세스(800)를 개략적으로 나타낸 흐름도이다. 프로세스는 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림이 수신되는 블록 810에서 시작한다. 블록 820에서, 디지털 비디오 스트림의 패킷이 버퍼 내에서 버퍼링 된다. 블록 830에서, 버퍼의 패킷 출력 흐름 속도가 제어된다. 예를 들어, 제 1 시간에서 패킷 출력 흐름 속도를 제로 출력 속도로 설정하고 제 1 시간 다음의 제 2 시간에서 실시간 보다 빠른 출력 속도로 설정함으로써 출력 패킷 흐름 속도는 제로 출력 속도와 실시간보다 빠른 출력 속도 사이에서 제어될 수 있다. 마지막으로, 블록 840에서 디지털 비디오 스트림은 현재 패킷 출력 흐름 속도로 디스플레이 장치에 제공된다.
당업자라면 알 수 있듯이, 본 출원에서 설명된 혁신적인 개념은 출원의 넓은 범위 내에서 수정, 변경 및 적용될 수 있다. 따라서, 본 발명의 청구 범위는 설명된 어떤 특정 예시의 교시내용에 제한되지 않으나, 다음의 청구항에 의해 대신 규정된다.
20, 20a, 20b, 20c: 비디오 카메라
25, 25a, 25b, 25c: 디지털 비디오 스트림
30: 기타 네트워크
35: IP 네트워크
40: 디지털 비디오 관리 장치
50, 50a, 50b, 50c: 버퍼
55, 55a, 55b, 55c: 패킷
60: 출력 속도 제어 모듈
70: 디스플레이
80: 카메라 선택 모듈
100, 210: 프로세서
110: 메모리
120: 네트워크 입력 I/F(interface)
130: 출력 I/F(interface)
140: 사용자 입력 I/F(interface)
145: 사용자 GUI 명령어
150: 방침 정보
160: 비디오 분석 정보
220: 무선 네트워크
230: 네트워크 액세스 포인트
240: 무선 접속
250: 모바일 통신 장치
260: 모바일 통신 장치 프로세서
300: 비디오 프레임
310: 관심 영역(ROI:region of interest)
320: 원문 정보
340: ROI 검출 애플리케이션
330: 공간해상도 조정 애플리케이션

Claims (10)

  1. 디지털 비디오 스트림을 제어 가능하게 시청하는 디지털 비디오 관리 장치(a digital video management system)에 있어서,
    원격 감시 카메라(a remote surveillance camera)에 의해 촬영된 디지털 비디오 스트림을 수신하기 위해 패킷 교환 네트워크(a packet-switched network)에 연결된 입력 인터페이스;
    상기 디지털 비디오 스트림의 패킷을 수신하고 저장하는 버퍼;
    상기 버퍼의 패킷 출력 흐름 속도(a packet output flow rate)를 제로 출력 속도와 실시간보다 빠른 출력 속도 사이에서 제어하되, 제 1 시간에서 상기 패킷 출력 흐름 속도를 상기 제로 출력 속도로 설정하고 상기 제 1 시간 다음의 제 2 시간에서 상기 실시간보다 빠른 출력 속도로 설정하는 프로세서;
    상기 제 2 시간에서 상기 실시간보다 빠른 출력 속도로 디스플레이 장치에 상기 디지털 비디오 스트림을 제공하는 출력 인터페이스를 포함하는
    디지털 비디오 관리 장치.
  2. 제 1 항에 있어서,
    상기 프로세서는 상기 제 2 시간 다음의 제 3 시간에서 상기 출력 흐름 속도를 실시간 출력 속도로 설정하도록 더 작동가능한
    디지털 비디오 관리 장치.
  3. 제 2 항에 있어서,
    상기 프로세서는 상기 제 2 시간 및 상기 제 3 시간 사이에서 상기 패킷 출력 흐름 속도를 가변 출력 속도로 설정하도록 더 작동가능하되, 상기 가변 출력 속도는 상기 제 2 시간에서 상기 실시간보다 빠른 출력 속도와 동일하고 상기 제 2 시간과 상기 제 3 시간 사이에서는 실시간 출력 속도에 부드럽게 다가가는
    디지털 비디오 관리 장치.
  4. 제 3 항에 있어서,
    상기 프로세서는 상기 제 2 시간에서의 상기 버퍼의 전류 깊이에 근거하여 상기 가변 출력 속도를 결정하거나 또는 상기 가변 출력 속도를 결정하기 위해 비디오 분석을 이용하는
    디지털 비디오 관리 장치.
  5. 제 1 항에 있어서,
    상기 입력 인터페이스는 적어도 하나의 추가 원격 비디오 감시 시스템에 의해 촬영된 적어도 하나의 추가 디지털 비디오 스트림을 수신하도록 더 연결되되, 상기 적어도 하나의 추가 디지털 비디오 스트림의 패킷을 수신하고 저장하는 적어도 하나의 추가 버퍼를 더 포함하며, 상기 프로세서는 상기 디지털 비디오 스트림 중 선택된 디지털 비디오 스트림 및 상기 적어도 하나의 추가 디지털 비디오 스트림이 상기 디스플레이 장치상에 표현될 수 있도록 하는 상기 적어도 하나의 추가 버퍼의 상기 패킷 출력 흐름 속도를 제어하는
    디지털 비디오 관리 장치.
  6. 제 5 항에 있어서,
    상기 프로세서는, 선택되지 않은 디지털 비디오 스트림의 패킷 출력 흐름 속도를 상기 제로 출력 속도로 설정함으로써 디지털 비디오 스트림 중 상기 선택되지 않은 디지털 비디오 스트림 및 상기 적어도 하나의 추가 디지털 비디오 스트림을 정지시키는
    디지털 비디오 관리 장치.
  7. 제 5 항에 있어서,
    상기 프로세서는 상기 선택된 디지털 비디오 스트림 및 상기 선택된 비디오 스트림 각각의 패킷 출력 흐름 속도를 결정하기 위해 미리 결정된 방침(a predetermined policy), 비디오 분석(video analytics) 및 디스플레이 장치 사용자의 입력(user input) 중 하나 이상을 이용하는
    디지털 비디오 관리 장치.
  8. 제 7 항에 있어서,
    상기 프로세서는 상기 디스플레이 장치에 상기 선택된 디지털 비디오 스트림 내 하나 이상의 관심 영역(ROI:regions of interest)을 디스플레이하기 위해 상기 선택된 디지털 비디오 스트림의 공간 해상도를 더 조정하는
    디지털 비디오 관리 장치.
  9. 제 1 항에 있어서,
    상기 디지털 비디오 관리 장치는 상기 디스플레이 장치를 구비한 모바일 장치 및 패킷 교환 네트워크 내에 하나 이상의 서버를 포함하는
    디지털 비디오 관리 장치.
  10. 원격 감시 카메라에 의해 촬영된 디지털 비디오 스트림을 수신하는 단계;
    버퍼 내 디지털 비디오 스트림의 패킷을 버퍼링하는 단계;
    제 1 시간에서 제로 출력 속도로 설정하고 상기 제 1 시간 다음의 제 2 시간에서 실시간보다 빠른 속도로 설정함으로써 상기 제로 출력 속도 및 상기 실시간보다 빠른 속도 사이에서 상기 버퍼의 패킷 출력 흐름 속도를 제어하는 단계;
    상기 제 2 시간에서 상기 실시간보다 빠른 출력 속도로 디스플레이를 위해 디스플레이 장치로 상기 디지털 비디오 스트림을 제공하는 단계를 포함하는
    디지털 비디오 스트림을 제어 가능하게 시청하는 방법.
KR1020137007838A 2010-09-28 2011-09-15 감시 카메라로 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 시스템 및 방법 KR101526081B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/892,647 US9179103B2 (en) 2010-09-28 2010-09-28 System and method for controllably viewing digital video streams captured by surveillance cameras
US12/892,647 2010-09-28
PCT/US2011/051708 WO2012044463A1 (en) 2010-09-28 2011-09-15 System and method for controllably viewing digital video streams captured by surveillance cameras

Publications (2)

Publication Number Publication Date
KR20130050374A true KR20130050374A (ko) 2013-05-15
KR101526081B1 KR101526081B1 (ko) 2015-06-04

Family

ID=44800225

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020137007838A KR101526081B1 (ko) 2010-09-28 2011-09-15 감시 카메라로 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 시스템 및 방법

Country Status (6)

Country Link
US (1) US9179103B2 (ko)
EP (1) EP2622854A1 (ko)
JP (1) JP5651786B2 (ko)
KR (1) KR101526081B1 (ko)
CN (1) CN103141089A (ko)
WO (1) WO2012044463A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9438851B2 (en) 2013-10-04 2016-09-06 Samsung Electronics Co., Ltd. Display apparatus and method for preventing divulgence of image information thereof

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202059510U (zh) * 2011-05-05 2011-11-30 鸿富锦精密工业（深圳）有限公司 无线监控系统
US9481301B2 (en) 2012-12-05 2016-11-01 Magna Electronics Inc. Vehicle vision system utilizing camera synchronization
US9987184B2 (en) 2013-02-05 2018-06-05 Valentin Borovinov Systems, methods, and media for providing video of a burial memorial
CN103414881B (zh) * 2013-08-15 2016-06-08 中国科学院软件研究所 一种远程视频监控系统快速配置方法
WO2015046636A1 (ko) * 2013-09-24 2015-04-02 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9813462B2 (en) * 2014-02-06 2017-11-07 Ittiam Systems Pte. Ltd. Unified dynamic executable media playlists across connected endpoints
US9723273B2 (en) * 2014-04-16 2017-08-01 Vivint, Inc. Camera with a lens connector
US11209410B2 (en) * 2014-06-10 2021-12-28 Logan Instruments Corporation Dissolution tester assembly with integrated imaging system
JP2017192100A (ja) * 2016-04-15 2017-10-19 ソニー株式会社 撮像素子、撮像装置、および、撮像素子の制御方法
JP7056564B2 (ja) * 2016-08-23 2022-04-19 日本電気株式会社 映像処理装置、映像処理方法及びプログラム
JP6854886B2 (ja) 2016-09-26 2021-04-07 アマゾン テクノロジーズ インコーポレイテッド オーディオ／ビデオ記録通信装置用のビデオのストリーミング及び保存
US10609326B2 (en) * 2016-10-21 2020-03-31 TEKVOX, Inc. Self-contained video security system
CN107018370B (zh) * 2017-04-14 2020-06-30 威盛电子股份有限公司 用于视频墙的显示方法及其系统
WO2019136106A1 (en) * 2018-01-05 2019-07-11 Owl Cameras, Inc. Secured pairing of video capture device and mobile device
TWI714021B (zh) * 2019-03-12 2020-12-21 緯創資通股份有限公司 推論方法、推論裝置與顯示器
US10762769B1 (en) * 2019-03-28 2020-09-01 Amazon Technologies, Inc. Sending signals for help during an emergency event
US11159323B1 (en) 2019-05-20 2021-10-26 Bank Of America Corporation Pseudonymous video data capture and query system
US10990695B2 (en) 2019-09-05 2021-04-27 Bank Of America Corporation Post-recording, pre-streaming, personally-identifiable information (“PII”) video filtering system
US11968639B2 (en) 2020-11-11 2024-04-23 Magna Electronics Inc. Vehicular control system with synchronized communication between control units
US11877040B2 (en) * 2021-11-24 2024-01-16 The Adt Security Corporation Streaming video playback with reduced initial latency

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0544534B1 (en) * 1991-11-28 1998-07-15 Sony Corporation Apparatus for reproducing a video signal
JPH10304313A (ja) * 1997-04-25 1998-11-13 Sony Corp 記録再生機能を有するテレビジョン受像機および記録再生機能を有するテレビジョン受像機の記録再生方法
US20020170064A1 (en) 2001-05-11 2002-11-14 Monroe David A. Portable, wireless monitoring and control station for use in connection with a multi-media surveillance system having enhanced notification functions
EP1236350B1 (en) 1999-11-10 2004-08-11 Thomson Licensing S.A. Digital video recording with full screen sub-picture and associated transparency control data recording for effecting fading between successive video segments at reproduction
US6925180B2 (en) * 2001-09-27 2005-08-02 Sony Corporation PC card recorder
JP2004194200A (ja) 2002-12-13 2004-07-08 Matsushita Electric Ind Co Ltd データ伝送システムとデコード方法とデコード装置
JP2004247817A (ja) 2003-02-12 2004-09-02 Matsushita Electric Ind Co Ltd 撮像伝送システム、表示記録装置の制御方法および撮像装置の制御方法
JP2004336127A (ja) 2003-04-30 2004-11-25 Matsushita Electric Ind Co Ltd 監視システム
JP3881992B2 (ja) 2004-07-30 2007-02-14 シャープ株式会社 受信装置、受信プログラム、および受信プログラムを記録した記録媒体
JP4742836B2 (ja) 2005-12-07 2011-08-10 パナソニック株式会社 受信装置
US7999788B2 (en) * 2006-04-12 2011-08-16 Penthera Partners, Inc. Television interfacing
EP2391128A1 (en) 2006-12-05 2011-11-30 Fujifilm Corporation Output apparatus, output method and program
JP4987757B2 (ja) 2008-03-03 2012-07-25 株式会社日立国際電気 映像表示装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9438851B2 (en) 2013-10-04 2016-09-06 Samsung Electronics Co., Ltd. Display apparatus and method for preventing divulgence of image information thereof

Also Published As

Publication number Publication date
KR101526081B1 (ko) 2015-06-04
JP2013543699A (ja) 2013-12-05
EP2622854A1 (en) 2013-08-07
WO2012044463A1 (en) 2012-04-05
US20120075465A1 (en) 2012-03-29
US9179103B2 (en) 2015-11-03
JP5651786B2 (ja) 2015-01-14
CN103141089A (zh) 2013-06-05

Similar Documents

Publication Publication Date Title
KR101526081B1 (ko) 감시 카메라로 촬영된 디지털 비디오 스트림을 제어가능하게 시청하는 시스템 및 방법
CN108495142B (zh) 视频编码方法及装置
EP2785070B1 (en) Method and apparatus for improving quality of experience in sharing screen among devices, and recording medium therefor
EP3391639B1 (en) Generating output video from video streams
WO2021143479A1 (zh) 媒体流传输方法及系统
US20150208103A1 (en) System and Method for Enabling User Control of Live Video Stream(s)
JP4804378B2 (ja) 映像表示装置及び映像表示方法
EP2986020B1 (en) Method and apparatus for adjusting video quality based on network environment
US10110647B2 (en) Method and apparatus for altering bandwidth consumption
US20110255590A1 (en) Data transmission apparatus and method, network data transmission system and method using the same
JP2013255210A (ja) 映像表示方法、映像表示装置および映像表示プログラム
US20180213185A1 (en) Method and system for monitoring a scene based on a panoramic view
CN113099272A (zh) 视频处理方法及装置、电子设备和存储介质
KR101311463B1 (ko) 원격 영상정보 제공시스템
WO2021143388A1 (zh) 码率切换方法及设备
EP2988502B1 (en) Method for transmitting data
JP4828354B2 (ja) 複数チャンネル画像転送装置
KR102126794B1 (ko) 영상 데이터 전송 장치 및 방법
WO2016151974A1 (ja) 情報処理装置、情報処理方法、クライアント装置、サーバ装置および情報処理システム
US11877040B2 (en) Streaming video playback with reduced initial latency
JP6604256B2 (ja) 情報処理端末、情報処理方法、及びプログラム
KR20140124632A (ko) 영상 처리 방법
JP2017085333A (ja) 撮影システム
KR20150021349A (ko) 네트워크카메라 대쉬보드

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant