KR20180073228A - Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법 - Google Patents

Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법 Download PDF

Info

Publication number
KR20180073228A
KR20180073228A KR1020160176843A KR20160176843A KR20180073228A KR 20180073228 A KR20180073228 A KR 20180073228A KR 1020160176843 A KR1020160176843 A KR 1020160176843A KR 20160176843 A KR20160176843 A KR 20160176843A KR 20180073228 A KR20180073228 A KR 20180073228A
Authority
KR
South Korea
Prior art keywords
rtp
client
server
image
encoding attribute
Prior art date
Application number
KR1020160176843A
Other languages
English (en)
Other versions
KR102540459B1 (ko
Inventor
신재영
권윤석
김현호
김경덕
심민정
Original Assignee
한화에어로스페이스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한화에어로스페이스 주식회사 filed Critical 한화에어로스페이스 주식회사
Priority to KR1020160176843A priority Critical patent/KR102540459B1/ko
Priority to US15/613,557 priority patent/US11412021B2/en
Publication of KR20180073228A publication Critical patent/KR20180073228A/ko
Application granted granted Critical
Publication of KR102540459B1 publication Critical patent/KR102540459B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04L65/607—
    • H04L65/608—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605—Creation or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362—Generation or processing of Service Information [SI]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 바람직한 일 실시예에서는 RTP/RTSP 스트리밍시 비디오, 오디오 등의 프로파일 설정의 변경 시에도 스트리밍 세션의 재접속 없이 영상을 송수신하는 방법에 관한 것이다. RTP 확장헤더를 이용한다.

Description

RTP/RTSP 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법{Method and Device for media streaming between server and client using RTP/RTSP standard protocol}
본 발명은 RTP/RTSP 스트리밍 중 실시간 인코딩 변경에 관한 것이다.
RTSP(Real Time Streaming Protocol)는 IETF가 개발한 표준 통신규약(RFC2326)이며, 미디어서버를 원격으로 제어할 때 쓰인다. 실제 비디오,오디오를 포함한 미디어 스트리밍 데이터를 전송하기 위해서는, 주로 RTP(Real-time Transport Protocol)규약을 전송계층으로 함께 사용한다.
IP 기반의 영상감시시장에서는 RTP/RTSP를 응용한 미디어 스트리밍이 범용적으로 사용되고 있으며, IP 카메라, DVR, NVR 등의 영상장치, ONVIF 등의 영상감시 표준화 기구에서도 RTP/RTSP를 응용한 미디어 스트리밍을 위한 표준 프로토콜을 채택하고 있다.
RTSP규약에서는 미디어 데이터를 수신받기 위해 Describe 단계에서 수신 받는 미디어의 정보, 인코딩 포맷에 따라 RTP 페이로드(Payload) 타입이 결정되고, 그에 따라 RTP 패킷의 구성방식이 상이해진다.
따라서, 미디어서버가 연결하는 미디어의 인코딩 설정이 변경되는 경우, 서버에 의해 강제로 해당 RTP/RTSP 세션이 끊어지게 되고, 미디어 세션의 재접속이 이루어지기까지 해당카메라의 감시화면이 표시되지 않는 문제점이 있다.
kr00001647938b1p us20050157660a1p
본 발명의 바람직한 일 실시예에서는 RTP/RTSP 스트리밍 중 실시간으로 인코딩 변경을 지원하는 방법을 제시한다.
본 발명의 바람직한 일 실시예에서는 RTP/RTSP 스트리밍시 비디오, 오디오 등의 프로파일 설정의 변경 시에도 스트리밍 세션의 재접속 없이 영상을 송/수신하는 방법을 제시한다.
본 발명의 바람직한 일 실시예로서, RTP/RTSP 표준을 따르는 서버와 클라이언트 간의 영상 스트리밍 방법은 Require 가 지원되는 클라이언트에서 서버로 Require 헤더를 포함한 DESCRIBE 명령을 전송하고, 서버로부터 DESCRIBE 명령에 대한 응답으로 SDP정보를 수신하는 단계; 상기 클라이언트가 상기 서버로부터 RTP/RTSP 표준에 따라 영상을 수신하는 단계; 상기 서버에서 상기 클라이언트로 전송하는 영상의 인코딩 속성이 변경되는 경우, 변경된 인코딩 속성에 따라 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 전송할 때, 상기 RTP 패킷의 확장헤더에 변경된 인코딩 속성을 기술하는 단계; 및 상기 클라이언트에서 상기 RTP 확장 헤더 내의 상기 변경된 인코딩 속성을 기초로 디코딩 셋업을 변경하는 단계;를 포함하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, RTP/RTSP 표준에 따라 영상을 스트리밍하는 클라이언트는 단일 RTP/RTSP 세션에서 라이브 영상과 녹화 영상의 실시간 전환을 지원하는 제어부; 상기 단일 RTP/RTSP 세션에서 상기 녹화 영상의 검색을 지원하는 검색인터페이스부;를 포함하고, 상기 제어부는 라이브 영상을 선택하거나 또는 녹화 영상을 선택할 수 있는 전환인터페이스; RTP/RTSP 표준에 따라 SETUP과 PLAY 명령을 통해 서버에 라이브 영상 또는 녹화 영상을 요청하는 요청부;및 상기 서버로부터 상기 요청부가 요청한 선택된 영상을 수신하는 수신부;를 포함하고, 상기 전환인터페이스가 활성화되면 상기 제어부는 상기 수신부를 통해 상기 선택된 영상을 수신하고, 이 경우 상기 수신부는 상기 서버로부터 상기 선택된 영상의 인코딩 속성이 기술된 RTP 확장헤더를 수신하여 디코딩 셋업을 변경하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, RTP/RTSP 표준을 따르는 클라이언트에서 영상 스트리밍 방법은 서버에서 Require의 지원여부를 확인하기 위해 클라이언트에서 서버로 Require 헤더를 포함한 DESCRIBE 명령을 전송하는 단계; 서버로부터 DESCRIBE 명령에 대한 응답으로 SDP정보를 수신하는 단계; 상기 클라이언트에서 상기 서버로부터 RTP/RTSP 표준에 따라 영상을 수신하는 단계; 상기 서버에서 상기 클라이언트로 전송하는 영상의 인코딩 속성이 변경되는 경우, 상기 클라이언트에서 상기 서버로부터 변경된 인코딩 속성에 따라 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 수신할 때, 변경된 인코딩 속성이 기술된 상기 RTP 패킷의 RTP 확장헤더를 수신하는 단계;및 상기 변경된 인코딩 속성을 기초로 상기 클라이언트에서 디코딩을 수행하는 단계;를 포함하는 것을 특징으로 한다.
본 발명의 또 다른 바람직한 일 실시예로서, RTP/RTSP 표준을 따르는 네트워크카메라에서 영상 스트리밍 방법은 Require가 지원되는 클라이언트로부터 Require를 수신하는 단계; Require가 지원되는 경우 네트워크카메라에서 상기 클라이언트의 DESCRIBE 명령에 대한 응답으로 SDP 정보를 제공하는 단계; 상기 클라이언트로부터 수신한 SETUP 명령을 기초로 네트워크카메라에서 상기 클라이언트와 스트리밍 세션 연결을 초기화하는 단계; 상기 클라이언트로부터 수신한 PLAY 명령을 기초로 네트워크카메라에서 상기 클라이언트에 영상을 송신하는 단계; 및 네트워크카메라에서 상기 클라이언트에 송신하는 영상의 인코딩 속성을 변경하는 경우, 변경된 인코딩 속성에 따라 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 전송할 때만, 상기 RTP 패킷에 변경된 인코딩 속성이 기술된 RTP 확장헤더를 함께 전송하는 단계;를 포함하는 것을 특징으로 한다.
본 발명의 바람직한 일 실시예로서, RTP/RTSP 표준을 따르는 서버 및 클라이언트는 세션의 끊김없이 오디오, 비디오를 스트리밍하는 효과가 있다. 본 발명의 바람직한 일 실시예로서, RTP/RTSP 표준을 따르는 클라이언트는 저화질 영상을 고화질로 변경하는 경우에도 세션의 끊김없이 영상을 스트리밍할 수 있는 효과가 있다. 본 발명의 바람직한 일 실시예로서, 클라이언트는 라이브 화면과 녹화 재생 화면과의 실시간 전환을 제공하는 효과가 있다.
본 발명의 바람직한 일 실시예로서, 네트워크 카메라는 인코딩 속성을 변경하고자 하는 경우 클라이언트로 세션의 끊김없이 영상을 스트리밍할 수 있는바, 자유롭게 인코딩 속성을 변경할 수 있는 효과가 있다.
도 1 은 클라이언트와 서버간에 RTP 표준으로 실시간 영상 스트리밍을 수행하는 일 실시예를 도시한다.
도 2 는 DESCRIBE 명령을 통해 응답받는 SDP(Session Description Protocol
rfc 4566) 형식의 미디어 정보의 일 예를 나타낸다.
도 3 은 네트워크 카메라에서 인코딩 설정을 변경하는 경우, RTP/RTSP 세션이 강제종료되는 일 실시예를 도시한다.
도 4 내지 5 는 본 발명의 바람직한 일 실시예로서, RTP/RTSP 스트리밍시 서버단에서 인코딩이 변경되는 경우에도 클라이언트에서 세션의 재접속없이 영상을 송수신하는 일 예를 도시한다.
도 6 내지 9는 RTSP 표준 절차에 따라 DESCRIBE-SETUP-PLAY 방식을 따르면서, 본 발명의 바람직한 일 실시예에서 서버에서 인코딩 방식이 변경된 경우 세션의 끊김 없이 도 4 내지 5의 과정에 따라 미디어를 전송하기 위해 이용하는 태그의 예를 도시한다.
도 10은 본 발명의 바람직한 일 실시예에서 이용하는 SDP 형식의 RTP 헤더를 도시한다.
도 11은 본 발명의 바람직한 일 실시예로서, 다채널 감시화면에서 단일채널 감시화면으로 전환하는 경우를 도시한다.
도 12 는 VMS 클라이언트에서 녹화 영상을 재생하는 화면과 라이브 화면을 별도로 이용하던 일 예를 도시한다.
도 13은 본 발명의 바람직한 일 실시예로서, VMS 클라이언트에서 녹화 영상을 재생하는 화면과 라이브 화면을 하나의 미디어 세션에서 구현하는 일 예를 도시한다.
도 14는 본 발명의 바람직한 일 실시예로서, 클라이언트에서 수신하는 스트리밍의 인코딩 속성을 설정하는 인터페이스를 지원하는 예를 도시한다.
도 15 는 본 발명의 바람직한 일 실시예로서, 네트워크 카메라의 설정 메뉴 화면의 일 예를 도시한다.
도 16은 본 발명의 바람직한 일 실시예로서, 도 13과 같이 라이브 영상과 녹화 영상의 스트리밍을 단일 RTP/RTSP 세션에서 지원하는 클라이언트의 내부 구성도를 도시한다.
이하에서는 도면을 참고하여 설명한다.
본 발명의 바람직한 일 실시예로서, 끊김없이 영상을 송수신하는 방법은 안정적으로 실시간 영상을 감지하거나 저장된 영상을 재생하는 클라이언트에서 구현될 수 있다.
본 발명의 바람직한 일 실시예에서는 RTP/RTSP 표준을 따르는 서버와 클라이언트간 영상 스트리밍 방법을 제공한다. 본 발명의 바람직한 일 실시예에서는 RTP 프로토콜과 RTSP 프로토콜을 조합하여 이용할 수 있다. 예를 들어, RTSP & RTP/UDP, RTP Over RTSP 내지 RTP/RTSP/HTTP(S)등으로 조합할 수 있다. 단, DESCRIBE, SETUP, PLAY, PAUSE 내지 TEARDOWN 과 같은 영상 제어 명령은 RTSP 세션을 통해서 이루어지며, 실제 영상 전송은 RTP 프로토콜을 통해서 구현될 수 있다.
본 발명의 바람직한 일 실시예로서, 서버는 카메라, 저장장치 등과 같이 영상을 전송하는 장치를 모두 지칭한다. 클라이언트는 영상을 수신하는 VMS(Video Management System) 내지 소프트웨어, 앱 등의 형태를 모두 지칭한다.
클라이언트의 예로는, IP 카메라, DVR(Digital Video Recorder), NVR(Network Video Recorder), VMS(Video Management System) 와 같은 영상감시장치를 포함하고, 그 외 휴대폰, 스마트폰, 스마트와치, 테블릿, 노트북, 웨어러블 장치 내지 핸드헬드 장치에서도 구현이 가능하다.
최근에는 FHD, UHD를 지원하는 고화질의 네트워크 카메라가 인기를 얻으면서 네트워크 대역폭과 비디오 디스플레이 성능을 고려하여 멀티프로파일을 효과적으로 운영하는 방법 및 이를 효율적으로 전송하는 방법이 중요시되고 있다.
본 발명의 바람직한 일 실시예에서는 고화질의 네트워크 카메라를 이용하는 클라이언트에서 RTP/RTSP 스트리밍시 비디오, 오디오 등의 프로파일 설정을 변경할 때도, 스트리밍 세션의 재접속 없이 영상을 송수신하는 방법에 대해 개시한다.
도 1 은 클라이언트와 서버간에 RTP 표준으로 실시간 영상 스트리밍을 수행하는 일 실시예를 도시한다.
RTSP의 규약상, 미디어 데이터를 수신받기 위해서는 아래의 절차가 선행되어야 한다. 클라이언트(110)에서 영상서버(120)의 RTSP 주소를 획득한다. RTSP주소의 일 예는 rtsp://192.168.217.35:554/profile2/media.smp 일 수 있다.
클라이언트(110)에서는 DESCRIBE 명령을 통해 영상서버에서 제공하는 미디어유형을 얻어오는 단계(S111), SETUP 명령을 통해, 영상서버에서 제공하는 미디어를 요청하는 단계(S112), SETUP 응답에 대해서 각 미디어유형에 따른 RTP 세션을 초기화하는 단계(S112), PLAY 명령을 통해 미디어 재생, 재생속도, 재생시점을 결정하여 요청하는 단계(S113, S114, S115), PAUSE 명령을 통해 미디어 전송을 일시 중지하는 단계(S116) 그리고 TEARDOWN 명령을 통해 RTSP 세션을 종료하는 단계(S117)를 포함한다.
클라이언트(110)와 영상서버(120) 간에 RTP 표준으로 실시간 영상 스트리밍을 수행하기 위해서는 DESCRIBE 명령를 통해 영상 서버(120)가 제공하는 미디어 유형의 정보를 가져오는 단계와(S111)과 SETUP을 통해 영상 서버(120)가 제공하는 미디어 타입 별 RTP 세션을 초기화하는 단계(S112)가 순차적으로 이루어져야 한다.
도 2 는 DESCRIBE 명령을 통해 응답받는 SDP 형식의 미디어 정보의 일 예를 나타낸다. 실시간으로 영상을 스트리밍하는 경우의 예시이다.
RTP 페이로드(PAYLOAD) 타입은 DESCRIBE 명령을 통해 수신받는 비디오 또는 오디오 등의 미디어 유형 정보와 인코딩 포맷에 따라 결정된다. RTP 패킷의 구성방식은 결정된 RTP 페이로드(PAYLOAD) 타입에 따라 상이해진다.
따라서, 서버(120)가 제공하는 코덱이 변경될 경우, RTP 패킷의 구성방식이 상이하게 변경된다. 또한, 서버(120)가 제공하는 해상도,프레임레이트 등의 비디오 정보가 변경되더라도 영상정보가 변경되기 때문에 서버(120)에서 해당 RTP/RTSP 세션을 끊는 것이 일반적이다
도 3 은 네트워크 카메라에서 인코딩 설정을 변경하는 경우, RTP/RTSP 세션이 강제종료되는 일 실시예를 도시한다.
네트워크 카메라(320)와 VMS 클라이언트(310)간에 RTP/RTSP 미디어 스트리밍이 전송되는 동안에(S310, S320), 네트워크 카메라(320)의 설정 페이지(330)에서 네트워크 카메라(320)의 비디오 인코딩 설정을 MJPEG에서 H.264로 변경하면(S330), 네트워크 카메라(320)에서는 VMS 클라이언트(310)에 전송하는 RTP/RTSP 미디어 세션을 종료한다(S340). VMS 클라이언트(310)에서는 네트워크 카메라(320)에 미디어 스트리밍을 재요청한다(S350).
도 3 의 일 실시예와 같이, 네트워크 카메라(320)에서 실시간으로 영상 스트리밍을 수행하다 인코딩 설정을 변경하는 경우, 네트워크 카메라(320)에서 VMS 클라이언트(310)에 전송하는 RTP/RTSP 미디어 세션을 종료한 이후(S340), VMS 클라이언트(310)에서는 네트워크 카메라(320)에 미디어 스트리밍을 재요청을 통해 미디어 세션의 재접속이 이루어지는 동안 VMS 클라이언트(310)의 화면에 감시화면이 표시되지 않는다(S342).
본 발명의 바람직한 일 실시예에서는, 도 3의 일 실시예에서와 같이 네트워크 카메라에서 인코딩 설정을 변경하는 경우 미디어를 수신하는 클라이언트에서 화면이 끊기는 문제를 해결하고자 한다.
본 발명의 바람직한 일 실시예에서는, 네트워크 카메라에서 인코딩 설정이 변경되는 경우, 기존에는 도 3의 일 실시예와 같이 미디어 세션에 재접속이 요구없이도 미디어 데이터를 끊김없이 수신받는 방법을 개시한다.
도 4 내지 5 는 본 발명의 바람직한 일 실시예로서, RTP/RTSP 스트리밍시 서버단에서 인코딩이 변경되는 경우에도 클라이언트에서 세션의 재접속없이 영상을 송수신하는 일 예를 도시한다. 도 5는 도 4의 상세도로, 본 발명의 일 실시예로서 RTP 확장 헤더를 교환하는 일 예를 도시한다.
도 6 내지 9는 RTSP 표준 절차에 따라 DESCRIBE-SETUP-PLAY 방식을 따르면서, 본 발명의 바람직한 일 실시예에서 서버에서 인코딩 방식이 변경된 경우 세션의 끊김 없이 도 4 내지 5의 과정에 따라 미디어를 전송하기 위해 이용하는 Require 헤더의 예를 도시한다.
서버에서 'Require'를 지원하지 않는 경우, 도 6를 참고하면, 서버는 RTSP 표준에 따라 'Unsupported'라는 태그(610)를 통해 'Require'를 지원하지 않는다고 응답한다. 이 경우, 서버는 도 3에 도시된 과정을 거치게 된다.
본 발명의 바람직한 일 실시예에서는 서버와 클라이언트 모두 'Require'가 지원되는 것을 전제로 한다. Require는 RTSP(rfc 2326) 표준의 태그를 지칭한다. 도 7을 참고하면, 서버에서 'Require'를 지원하면 서버에서 클라이언트로 서버에서 'Require'를 지원하는 것을 알려주는 메세지(710)를 전송한다.
도 8 은 본 발명의 바람직한 일 실시예로서, 서버에서 RTSP DESCRIBE 명령에 대한 응답으로 SDP 정보를 클라이언트에 정상적으로 전달한 경우, 클라이언트에서 SETUP 메시지 확장(810)을 통해 스트리밍 세션 연결을 초기화 하는 과정을 도시한다.
도 9 는 본 발명의 바람직한 일 실시예로서, 도 8을 통해 비디오 또는 오디오 타입의 미디어 각각의 RTP 세션에 대한 SETUP이 완료되면, RTSP PLAY 명령(910)을 통해 미디어 스트리밍을 수행하는 과정을 도시한다.
다시 도 4 및 5를 참고하면, 서버와 클라이언트 모두 'Require'가 지원되는 경우 RTP/RTSP 스트리밍을 수행한다.
VMS 클라이언트(410)에서 RTP/RTSP 미디어 스트리밍을 요청하면(S410), 네트워크 카메라에서 RTP/RTSP 미디어 스트리밍을 전송한다(S420). 네트워크 카메라(420)에서 VMS 클라이언트(410)로 RTP/RTSP 미디어 스트리밍을 전송하는 과정에서, 네트워크 카메라(420)가 비디오의 인코딩 설정을 MJPEG에서 H.264로 변경하는 경우(S430), 네트워크 카메라(420)에서 VMS 클라이언트(410)로 세션의 끊김없이 RTP/RTSP 미디어 스트리밍을 전송한다(S440, S442). 도 5에서 대응되는 구성은 본 설명을 참고한다.
이상의 과정을 수행하기 위해 본 발명의 바람직한 일 실시예에서는 VMS 클라이언트(410) 및 네트워크 카메라(420)가 모두 'Require'를 지원하는 것을 전제로 한다. 도 6의 일 실시예와 같이 VMS 클라이언트(410)에서 네트워크 카메라(420)로 'Require'를 전송하고, 도 7의 일 실시예와 같이 SETUP을 완료한다.
그 후, 도 8의 일 실시예와 같이 RTSP PLAY 명령을 통해 RTP 미디어 스트리밍 데이터의 전송이 개시된 이후, 해당 미디어 파일의 인코딩 설정이 변경된 경우에는 네트워크 카메라(420)에서 RTP 확장헤더(Extension header)(도 9, 920)에 변경하고자 하는 내용을 포함시켜 VMS 클라이언트(410)에 전송한다(S440). VMS 클라이언트(510)에서는 수신한 RTP 확장헤더의 내용에 따라 디코딩 셋업을 변경함으로써 세션의 끊김없이 해당 미디어를 수신할 수 있다.
RTSP 표준에서는 미디어 데이터를 수신받기 위해 Describe 단계에서 수신 받는 미디어의 정보, 인코딩 포맷에 따라 RTP 페이로드 타입이 결정되고, 그에 따라 RTP 패킷의 구성방식이 상이해진다.
도 5를 참고하면 본 발명의 바람직한 일 실시예에서는 네트워크 카메라(520)의 인코딩 설정이 MJPEG에서 H.264로 변경된 경우(S530), 그에 따라 결정된 RTP 페이로드 타입으로 RTP를 최초로 전송할 때, RTP 확장헤더에 변경된 내용을 기술한다(S540). 해당 미디어 파일의 인코딩 설정이 변경되지 않는 동안에는 RTP 확장헤더를 포함하지 않는다. VMS 클라이언트(510)에서는 수신한 RTP 확장헤더의 내용에 따라 디코딩 셋업을 변경함으로써 세션의 끊김없이 해당 미디어를 수신할 수 있다.
도 10은 본 발명의 바람직한 일 실시예에서 이용하는 SDP 형식의 RTP 헤더를 도시한다.
본 발명의 바람직한 일 실시예에서는 RTP 헤더에 RTSP 표준을 따르는 RTP고정 헤더(1010)와 RTP 확장헤더(920)를 포함한다. 본 발명의 바람직한 일 실시예에서 RTP 확장헤더(1020)의 기술방법은 RTP표준(rfc3550)을 따른다.
본 발명의 바람직한 일 실시예로서, RTP 확장헤더(1020)는 SDP 형식으로, 해당 RTP 세션에 서버에서 변경한 인코딩 속성에 대한 정보를 기술할 수 있다. RTP 확장헤더(1020)는 일 예로, RTP 페이로드 타입에 대해 정의한 속성 정보(a=rtpmap), 추가적인 코덱 정보(a= fmtp), 비디오의 해상도(a= framesize), FPS 정보(a= framerate) 등을 포함한다.
도 11은 본 발명의 바람직한 일 실시예로서, 다채널 감시화면에서 단일채널 감시화면으로 전환하는 경우를 도시한다.
도 11에 도시된 일 실시예는, 네트워크 카메라에서 클라이언트에 전송하는 미디어의 인코딩 속성을 변경하는 일 예를 도시한다. 또한, 도 11에 도시된 일 실시예는 클라이언트에서 네트워크 카메라에 다채널 감시화면에서 단일채널 감시화면으로 전환해달라는 요청을 통해 구현이 가능하다. 또한, 단일채널 감시화면에서 다채널 감시화면으로 전환하는 방식으로도 구현이 가능하다. 설명의 편의를 위해 다채널 감시화면에서 단일채널 감시화면으로 전환하는 예를 기준으로 기술한다.
다중채널을 라이브(LIVE) 영상으로 표시하는 다채널 감시화면(1110)에 표시되던 제 1 네트워크 카메라에서 전송되는 영상을 표시하는 채널(1112)을, 단일채널 감시화면(1120)에 변경된 인코딩 속성으로 인코딩하여 표시할 수 있다(1122).
다시 말해, 다채널 감시화면(1110)에서 저해상도로 표시되던 채널(1112)을 단일채널 감시화면(1120)에서 고해상도로 표시(1122)가 가능하다.
제 1 네트워크 카메라에서 전송되는 영상을 표시하는 채널이 다채널 감시화면(1110)에 표시되는 경우(1112) 인코딩 속성은 320*240 해상도, mjpeg 압축 방식 및 10fps 로 설정될 수 있다. 그러나, 제 1 네트워크 카메라에서 전송되는 영상을 표시하는 채널이 단일채널 감시화면(1120)에 표시되는 경우(1122) 인코딩 속성은 1920*1080 해상도, jpeg 압축 방식, 및 30fps 로 설정될 수 있다.
종래의 경우, 다채널 감시화면에서 단일채널 감시화면으로 재생 방식을 변경하는 경우, 미디어 세션의 재접속이 요구되며, 그로 인해 세션의 끊김이 발생하였다.
그러나, 본 발명의 바람직한 일 실시예에서는 도 11과 같이 다채널 감시화면에서 단일채널 감시화면으로 재생 방식을 변경하면서, 현재 스트리밍 중인 미디어 세션의 비디오 설정을 실시간으로 변경하더라도 미디어 세션이 끊기지 않는다.
본 발명의 바람직한 일 실시예에서는 네트워크 카메라에서 인코딩 속성을 변경하는 경우, 도 5의 일 실시예와 같이 네트워크 카메라에서 인코딩 속성이 변경된 경우, 그에 따라 결정된 RTP 페이로드 타입으로 RTP를 최초로 전송할 때, RTP 확장헤더에 변경된 내용을 기술한다.
본 발명의 바람직한 일 실시예에서는 RTP 확장헤더에 기술한 변경된 내용의 일부를 클라이언트의 화면에 표시(1114, 1124)하여, 클라이언트에서 현재 스트리밍 중인 미디어 세션의 인코딩 설정이 변경되었음을 확인하도록 구현이 가능하다.
이 경우, 네트워크 카메라에서 클라이언트로 RTP 패킷을 최초로 전송할 때만 클라이언트의 디스플레이에 상기 변경된 인코딩 속성을 표시하도록 선택(1114, 1124)할 수 있다.
도 12 는 VMS 클라이언트에서 녹화 영상을 재생하는 화면과 라이브 화면을 별도로 이용하던 일 예를 도시한다. 기존에는 녹화영상 재생화면과 라이브 화면을 함께 모니터링 할 경우, 녹화영상의 비디오 설정이 계속해서 변경될 수 있어 미디어 세션의 끊김이 여러 차례 발생할 수 있는 문제점이 있었다. 그로 인해, 기존에는 녹화영상 재생화면과 라이브 화면을 별도의 미디어 세션(1210, 1220)에서 구현하였다.
도 13은 본 발명의 바람직한 일 실시예로서, VMS 클라이언트에서 녹화 영상을 재생하는 화면과 라이브 화면을 하나의 미디어 세션에서 구현하는 일 예를 도시한다.
본 발명의 바람직한 일 실시예로서, VMS 클라이언트는 녹화 영상과 라이브 화면을 하나의 미디어 세션(1310)에서 끊김없이 전환이 가능하다. 도 13은 녹화 영상이(1320) 재생되고 있으나, 전환인터페이스(1330)를 통해 라이브화면으로 전환이 가능하다.
본 발명의 바람직한 일 실시예로서, VMS 클라이언트는 녹화 영상 내에서 히트맵을 적용하여 특정 시간의 객체를 검출할 수 있는 검색 기능을 제공한다.
도 14는 본 발명의 바람직한 일 실시예로서, 클라이언트에서 수신하는 스트리밍의 인코딩 속성을 설정하는 인터페이스를 지원하는 예를 도시한다.
클라이언트(1400)는 고화질 라이브 화면(1410), 저화질 라이브 화면(1412), 휴대폰용 라이브 화면(1414), 녹화영상(1420) 등을 선택할 수 있는 인터페이스를 제공한다.
또한, 클라이언트(1400)는 또한 비디오 소스(1430) 외에 인코딩 속성을 변경시킬 수 있는 인터페이스(1432, 1434, 1436, 1440, 1442, 1444, 1446, 1450)를 지원한다. 인코딩 속성의 예로는 프레임 비율(1432), 압축(1434), 비트율(1436), 해상도(1440), 전송화질(1442), 비트율 제어(1444) 내지 GOP크기(1446) 등을 포함한다.
클라이언트(1400)는 인코딩 속성을 변경하고자 하는 경우, 사용자로부터 변경하고자 하는 속성을 입력받은 후, 도 8에 개시된 SETUP 명령 설정을 일 예와 같이 속성을 입력한 후 네트워크 카메라 또는 서버로 전송할 수 있다.
도 15 는 본 발명의 바람직한 일 실시예로서, 네트워크 카메라의 설정 메뉴 화면의 일 예를 도시한다.
네트워크 카메라 또는 서버에서는 네트워크 카메라 또는 서버에서 스트리밍하는 미디어의 인코딩 속성을 설정하는 인터페이스를 지원한다. 네트워크 카메라 설정 메뉴에서는 기설정된 조건들 중 임의의 인코딩 속성을 선택하는 인터페이스(1510)를 지원할 수 있다.
또한, 네트워크 카메라 설정 메뉴에서는 새로운 인코딩 속성 설정을 추가하거나(1520), 삭제하는(1522) 인터페이스를 지원할 수 있다.
또한 네트워크 카메라 설정 메뉴에서는 새로운 인코딩 속성을 구성하는 변수들, 해상도, 프레임 레이트, 최대 비트레이트 등을 설정하는 인터페이스를 지원할 수 있다(1530).
도 16은 본 발명의 바람직한 일 실시예로서, 도 13과 같이 라이브 영상과 녹화 영상의 스트리밍을 단일 RTP/RTSP 세션에서 지원하는 클라이언트의 내부 구성도를 도시한다.
클라이언트(1600)는 서버(1700)와 유무선 통신이 가능하다. 클라이언트(1600)는 제어부(1610)와 검색인터페이스부(1650)를 포함한다. 검색인터페이스부(1650)는 녹화 영상 내에서 검색을 지원한다. 검색인터페이스부(1650)는 시간 구간 설정, 히트맵 설정 등을 지원할 수 있다.
제어부(1610)는 전환인터페이스(1620), 요청부(1630) 및 수신부(1640)를 포함한다. 전환인터페이스는 인코딩속성변경인터페이스(1622)를 더 포함할 수 있다. 수신부(1640)는 디코딩부(1642)를 더 포함할 수 있다.
본 발명의 바람직한 일 실시예로서 클라이언트(1600)와 서버(1700)는 RTP/RTSP 표준을 따르고, 모두 Require를 지원하는 것을 특징으로 한다. 클라이언트(1600)는 서버(1700)에서 인코딩 속성이 변경되는 경우, 도 4 내지 5의 과정에 따라 세션의 강제 종료 없이 스트리밍을 수행할 수 있다.
본 발명의 바람직한 일 실시예로서, 클라이언트(1600)는 또한 도 13에 도시된 일 실시예와 같이 라이브 영상과 녹화 영상의 실시간 전환을 지원할 수 있다.
클라이언트(1600)의 제어부(1610)는 프로세서 등으로 구현이 가능하며, 전환인터페이스(1620)를 통해 라이브 영상과 녹화 영상 간의 실시간 전환이 가능하다. 전환인터페이스(1620)는 도 13에 도시된 인터페이스(1330)의 형태로도 구현이 가능하다. 사용자가 선택하면 LIVE(도 13, 1330), 다시 선택하면 Playback(미 도시) 등으로 표시되어 사용자가 선택한 영상을 표시할 수 있다.
인코딩 속성 변경 인터페이스(1622)는 사용자가 라이브 영상을 선택한 경우, 선택한 라이브 영상의 인코딩 속성을 추가로 변경하기 위해 지원될 수 있다. 인코딩 속성 변경 인터페이스(1622)의 일 예는 도 14를 참고한다(1430, 1432, 1434, 1436, 1440, 1442, 1444, 1446).
요청부(1630)는 전환인터페이스(1620)에서 라이브 영상이 선택된 경우 서버(1700)에 라이브 영상을 요청하고, 전환인터페이스(1620)에서 녹화 영상이 선택된 경우, 서버(1700)에 녹화 영상을 요청한다.
수신부(1640)는 요청부(1630)에서 요청한 라이브 영상 또는 녹화 영상을 수신한다. 제어부(1610)는 전환인터페이스(1620)가 활성화되면 수신부(1640)를 통해 라이브 영상 또는 녹화 영상 중 전환인터페이스(1620)를 통해 선택된 영상을 수신한다. 디코딩부(1642)는 서버(1700)로부터 선택된 영상의 인코딩 속성이 기술된 RTP 확장헤더를 수신하여, 수신한 RTP 확장헤더에 기술된 상기 변경된 인코딩 속성에 따라 디코딩을 수행한다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플라피디스크, 광데이터 저장장치 등이 있다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.
이상 도면과 명세서에서 최적 실시예들이 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미 한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.

Claims (14)

  1. RTP/RTSP 표준을 따르는 서버와 클라이언트 간의 실시간 영상 스트리밍 방법으로서,
    Require 가 지원되는 클라이언트에서 서버로 Require 헤더를 포함하여 DESCRIBE를 전송하고, 서버로부터 DESCRIBE 명령에 대한 응답으로 SDP정보를 수신하는 단계;
    상기 클라이언트가 상기 서버로부터 RTP/RTSP 표준에 따라 영상을 수신하는 단계;
    상기 서버에서 상기 클라이언트로 전송하는 영상의 인코딩 속성이 변경되는 경우, 변경된 인코딩 속성에 따라 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 전송할 때, 상기 RTP 패킷의 확장헤더에 변경된 인코딩 속성을 기술하는 단계; 및
    상기 클라이언트에서 상기 RTP 확장 헤더 내의 상기 변경된 인코딩 속성을 기초로 디코딩 셋업을 변경하는 단계;를 포함하는 것을 특징으로 하는 방법.
  2. 제 1 항에 있어서,
    상기 서버에서 상기 클라이언트로 상기 RTP 패킷을 최초로 전송할 때 상기 클라이언트의 디스플레이에 상기 변경된 인코딩 속성을 선택적으로 표시하는 단계;를 더 포함하는 것을 특징으로 하는 방법.
  3. 제 1 항에 있어서, 상기 서버와 상기 클라이언트는
    RTSP 표준 절차에 따라 DESCRIBE-SETUP-PLAY-TEARDOWN 방식을 따르고,
    상기 클라이언트는 DESCRIBE 명령을 통해 상기 서버에서 제공하는 미디어 유형을 획득하고, 상기 클라이언트는 SETUP 명령을 통해 상기 서버에서 제공하는 미디어를 요청하며, 상기 서버는 상기 클라이언트의 SETUP 명령에 응답하여 오디오 또는 비디오 미디어 유형에 따라 RTP 세션을 초기화하는 단계를 포함하며, 상기 클라이언트는 추가로 PLAY 명령에 따라 상기 요청한 미디어의 재생, 재생속도 및 재생시점을 결정하고, TEARDOWN 명령에 따라 RTP 또는 RTSP 세션을 종료하는 것을 특징으로 하는 방법,
  4. 제 3 항에 있어서, 상기 클라이언트에서 DESCRIBE 명령을 통해 획득한 미디어 유형에 따라 RTP 페이로드 타입이 결정되고, 결정된 RTP 페이로드 타입에 따라 RTP 패킷의 구성방식이 상이해지는 것을 특징으로 하는 방법.
  5. 제 1 항에 있어서, 상기 변경된 인코딩 속성은
    RTP 페이로드 타입 정보, 코덱 정보, 해상도 정보, 비트레이트 정보 및 프레임레이트 정보 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 방법.
  6. RTP/RTSP 표준에 따라 영상을 스트리밍하는 클라이언트로서,
    단일 RTP/RTSP 세션에서 라이브 영상과 녹화 영상의 실시간 전환을 지원하는 제어부;
    상기 단일 RTP/RTSP 세션에서 상기 녹화 영상의 검색을 지원하는 검색인터페이스부;를 포함하고, 상기 제어부는
    라이브 영상을 선택하거나 또는 녹화 영상을 선택할 수 있는 전환인터페이스;
    RTP/RTSP 표준에 따라 SETUP 명령을 통해 서버에 라이브 영상 또는 녹화 영상 중 전환인터페이스를 통해 선택된 영상을 요청하는 요청부;및
    상기 서버로부터 상기 요청부가 요청한 선택된 영상을 수신하는 수신부;를 포함하고, 상기 전환인터페이스가 활성화되면 상기 제어부는
    상기 수신부를 통해 상기 선택된 영상을 수신하고, 이 경우 상기 수신부는 상기 서버로부터 상기 선택된 영상의 인코딩 속성이 기술된 RTP 확장헤더를 수신하여 디코딩 셋업을 변경하는 것을 특징으로 하는 클라이언트.
  7. 제 6 항에 있어서,
    상기 전환인터페이스를 통해 라이브 영상이 선택된 경우, 상기 수신부는 상기 서버로부터 선택된 라이브 영상의 인코딩 속성이 기술된 RTP 확장헤더를 수신하여 디코딩 셋업을 변경하는 것을 특징으로 하는 클라이언트.
  8. 제 6 항에 있어서,
    상기 전환인터페이스를 통해 녹화 영상이 선택된 경우, 상기 수신부는 상기 서버로부터 선택된 녹화 영상의 인코딩 속성이 기술된 RTP 확장헤더를 수신하여 디코딩 셋업을 변경하는 것을 특징으로 하는 클라이언트.
  9. 제 6 항에 있어서,
    상기 서버는 상기 요청부에서 요청한 선택된 영상에 따라 인코딩 속성을 변경하고, 변경된 인코딩 속성에 따라 RTP 페이로드 타입을 결정하며, 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 전송할 때, 상기 RTP 확장헤더에 변경된 인코딩 속성을 기술하는 것을 특징으로 하는 클라이언트.
  10. 제 6 항에 있어서
    상기 클라이언트는 상기 라이브 영상의 인코딩 속성을 변경하는 인터페이스;를 더 포함하는 것을 특징으로 하는 클라이언트.
  11. RTP/RTSP 표준을 따르는 클라이언트에서 영상 스트리밍 방법으로서,
    Require 가 지원되는 클라이언트에서 서버로 Require를 전송하는 단계;
    서버로부터 DESCRIBE 명령에 대한 응답으로 SDP 정보를 수신하는 단계;
    상기 클라이언트에서 상기 서버로부터 RTP/RTSP 표준에 따라 영상을 수신하는 단계;
    상기 서버에서 상기 클라이언트로 전송하는 영상의 인코딩 속성이 변경되는 경우, 상기 클라이언트에서 상기 서버로부터 변경된 인코딩 속성에 따라 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 수신할 때, 변경된 인코딩 속성이 기술된 상기 RTP 패킷의 RTP 확장헤더를 수신하는 단계;및
    상기 변경된 인코딩 속성을 기초로 상기 클라이언트에서 디코딩을 수행하는 단계;를 포함하는 것을 특징으로 하는 방법.
  12. RTP/RTSP 표준을 따르는 네트워크카메라에서 영상 스트리밍 방법으로서,
    Require 가 지원되는 클라이언트로부터 Require를 수신하는 단계;
    Require가 지원되는 경우 네트워크카메라에서 상기 클라이언트의 DESCRIBE 명령에 대한 응답으로 SDP 정보를 제공하는 단계;
    상기 클라이언트로부터 수신한 SETUP 명령을 기초로 네트워크카메라에서 상기 클라이언트와 스트리밍 세션 연결을 초기화하는 단계;
    상기 클라이언트로부터 수신한 PLAY 명령을 기초로 네트워크카메라에서 상기 클라이언트에 영상을 송신하는 단계; 및
    네트워크카메라에서 상기 클라이언트에 송신하는 영상의 인코딩 속성을 변경하는 경우, 변경된 인코딩 속성에 따라 결정된 RTP 페이로드 타입으로 RTP 패킷을 최초로 전송할 때만, 상기 RTP 패킷에 변경된 인코딩 속성이 기술된 RTP 확장헤더를 함께 전송하는 단계;를 포함하는 것을 특징으로 하는 방법.
  13. 제 12 항에 있어서, 상기 클라이언트는
    상기 수신한 RTP 확장헤더에 기술된 상기 변경된 인코딩 속성에 따라 디코딩을 수행하는 것을 특징으로 하는 방법.
  14. 제 12 항에 있어서, 상기 변경된 인코딩 속성은
    RTP 페이로드 타입 정보, 코덱 정보, 해상도 정보, 비트레이트 정보 및 프레임레이트 정보 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 방법.
KR1020160176843A 2016-12-22 2016-12-22 Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법 KR102540459B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020160176843A KR102540459B1 (ko) 2016-12-22 2016-12-22 Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법
US15/613,557 US11412021B2 (en) 2016-12-22 2017-06-05 Method and device for media streaming between server and client using RTP/RTSP standard protocol

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160176843A KR102540459B1 (ko) 2016-12-22 2016-12-22 Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법

Publications (2)

Publication Number Publication Date
KR20180073228A true KR20180073228A (ko) 2018-07-02
KR102540459B1 KR102540459B1 (ko) 2023-06-05

Family

ID=62630780

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160176843A KR102540459B1 (ko) 2016-12-22 2016-12-22 Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법

Country Status (2)

Country Link
US (1) US11412021B2 (ko)
KR (1) KR102540459B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200071283A (ko) * 2018-12-11 2020-06-19 삼성전자주식회사 전자 장치 및 이의 제어방법
CN111327857A (zh) * 2020-03-23 2020-06-23 维沃软件技术有限公司 视频数据恢复方法、电子设备以及存储介质
CN112468887A (zh) * 2019-09-06 2021-03-09 杭州海康微影传感科技有限公司 热成像数据的传输方法、装置及热成像设备
WO2022154366A1 (ko) * 2021-01-13 2022-07-21 삼성전자 주식회사 전자 장치 및 영상 송수신 방법

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11876840B2 (en) * 2018-09-12 2024-01-16 Samsung Electronics Co., Ltd. Method and apparatus for controlling streaming of multimedia data in a network
CN111107445B (zh) * 2018-10-29 2023-04-18 浙江宇视科技有限公司 一种媒体协议流优化方法及系统
WO2020092818A1 (en) * 2018-11-02 2020-05-07 Intel Corporation Signaling codec mode notifications for multimedia telephony sessions
CN109561094B (zh) * 2018-12-06 2021-06-11 国网辽宁省电力有限公司锦州供电公司 使用风力级别改变电量采集数据报文头结构的方法
CN111131876B (zh) * 2019-12-13 2022-06-24 深圳市咨聊科技有限公司 视频直播的控制方法、装置、终端及计算机可读存储介质
CN111314378B (zh) * 2020-03-18 2022-07-29 浩云科技股份有限公司 一种码流数据处理方法
CN112533075A (zh) * 2020-11-24 2021-03-19 湖南傲英创视信息科技有限公司 视频处理方法、装置及系统
CN116074297A (zh) * 2021-10-29 2023-05-05 中国电信股份有限公司 视频传输方法、系统和相关设备
CN114363303B (zh) * 2021-12-31 2023-06-02 上海网达软件股份有限公司 一种实现监控视频快速起播的流媒体转码方法
CN114900508B (zh) * 2022-05-16 2023-08-29 深圳市瑞云科技有限公司 一种基于webrtc传输VR应用数据的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050157660A1 (en) 2002-01-23 2005-07-21 Davide Mandato Model for enforcing different phases of the End-to-End Negotiation Protocol (E2ENP) aiming QoS support for multi-stream and multimedia applications
KR20070056550A (ko) * 2005-11-30 2007-06-04 주식회사 메디슨 영상 확대를 제어하는 영상 처리 시스템 및 방법
US20080162714A1 (en) * 2006-12-29 2008-07-03 Mattias Pettersson Method and Apparatus for Reporting Streaming Media Quality
KR20110011356A (ko) * 2009-07-28 2011-02-08 삼성전자주식회사 영상 처리 방법 및 장치
US20140029477A1 (en) * 2012-07-27 2014-01-30 Qualcomm Incorporated Delivering time synchronized arbitrary data in an rtp session

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005151147A (ja) * 2003-11-14 2005-06-09 Toshiba Corp 再生装置及び再生方法
KR20100075656A (ko) * 2007-10-25 2010-07-02 노키아 코포레이션 Ｍｂｍｓ 세션으로 ｐｓｓ 세션을 재동기화하는 시스템 및 방법
US8095680B2 (en) * 2007-12-20 2012-01-10 Telefonaktiebolaget Lm Ericsson (Publ) Real-time network transport protocol interface method and apparatus
US9215255B2 (en) * 2008-12-18 2015-12-15 Google Technology Holdings LLC Transfer method and apparatus for seamless content transfer
JP5493471B2 (ja) * 2009-05-27 2014-05-14 ソニー株式会社 情報処理装置および方法
KR101201737B1 (ko) 2010-12-10 2012-11-15 동서대학교산학협력단 Ｒｔｓｐ 기반의 동적 스트리밍 시스템 및 방법
KR101974077B1 (ko) 2013-05-22 2019-08-23 한화테크윈 주식회사 Rtp 패킷을 이용한 재생 영상의 시간 표시 방법
US9674251B2 (en) * 2013-06-17 2017-06-06 Qualcomm Incorporated Mediating content delivery via one or more services
US9876989B2 (en) * 2014-05-23 2018-01-23 Polycom, Inc. Method and system for new layout experience in video communication
US9516220B2 (en) * 2014-10-02 2016-12-06 Intel Corporation Interactive video conferencing
KR101647938B1 (ko) 2016-03-08 2016-08-11 (주)아크로비젼 이동통신망을 통해 이기종 네트워크를 연동하여 미디어 스트리밍을 제공하는 방법 및 시스템
US10972726B2 (en) * 2017-09-29 2021-04-06 Whatsapp Inc. Techniques to dynamically select a video encoder for streaming video encoding

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050157660A1 (en) 2002-01-23 2005-07-21 Davide Mandato Model for enforcing different phases of the End-to-End Negotiation Protocol (E2ENP) aiming QoS support for multi-stream and multimedia applications
KR20070056550A (ko) * 2005-11-30 2007-06-04 주식회사 메디슨 영상 확대를 제어하는 영상 처리 시스템 및 방법
US20080162714A1 (en) * 2006-12-29 2008-07-03 Mattias Pettersson Method and Apparatus for Reporting Streaming Media Quality
KR20110011356A (ko) * 2009-07-28 2011-02-08 삼성전자주식회사 영상 처리 방법 및 장치
US20140029477A1 (en) * 2012-07-27 2014-01-30 Qualcomm Incorporated Delivering time synchronized arbitrary data in an rtp session

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200071283A (ko) * 2018-12-11 2020-06-19 삼성전자주식회사 전자 장치 및 이의 제어방법
CN112468887A (zh) * 2019-09-06 2021-03-09 杭州海康微影传感科技有限公司 热成像数据的传输方法、装置及热成像设备
CN111327857A (zh) * 2020-03-23 2020-06-23 维沃软件技术有限公司 视频数据恢复方法、电子设备以及存储介质
WO2022154366A1 (ko) * 2021-01-13 2022-07-21 삼성전자 주식회사 전자 장치 및 영상 송수신 방법

Also Published As

Publication number Publication date
KR102540459B1 (ko) 2023-06-05
US20180183849A1 (en) 2018-06-28
US11412021B2 (en) 2022-08-09

Similar Documents

Publication Publication Date Title
KR102540459B1 (ko) Rtp/rtsp 표준을 따르는 서버와 클라이언트에서 실시간 영상 스트리밍 방법
EP3113500B1 (en) Method and device for displaying application data in wireless communication system
US8806048B2 (en) Method and apparatus for transmitting and receiving streaming data based on real-time streaming protocol (RTSP) session
KR102444603B1 (ko) 휴대용단말기를 이용한 원격제어방법 및 원격제어시스템
KR20130005873A (ko) 방송 시스템에서 컨텐츠 수신 방법 및 장치
JP6914728B2 (ja) 通信装置、通信方法、およびプログラム
EP4060955A1 (en) Security method, apparatus and system easy to access by user
US10440441B2 (en) Image pickup apparatus, image pickup system, control method for image pickup apparatus, and recording medium
US9794317B2 (en) Network system and network method
JP4533020B2 (ja) マルチメディアコンテンツ提供システム、ホームコンテンツサーバ及び視聴デバイス
US20180338170A1 (en) Contiguous Streaming Of Media Stream
JP6193569B2 (ja) 受信装置、受信方法、及びプログラム、撮像装置、撮像方法、及びプログラム、送信装置、送信方法、及びプログラム
JP2014086850A (ja) 映像コンテンツ配信装置
JP6037435B2 (ja) 映像コンテンツ配信装置
KR101440131B1 (ko) 모바일 클라이언트 단말기에서 다채널 CCTV 관제를 위한 Qos 영상처리 시스템 및 Qos 영상 처리 방법
JP6400163B2 (ja) 受信装置、受信方法、送信装置、送信方法、及びプログラム
US10356829B2 (en) Method and apparatus for transmitting metadata in WFD
US10750215B2 (en) Method and device for transmitting metadata in WFD
KR102654716B1 (ko) 요청된 영상 재생시점에 따라 영상을 재생하는 방법 및 그 장치
JP6034113B2 (ja) 映像コンテンツ配信装置
JP6444036B2 (ja) 撮像装置、及び撮像システム
JP6468663B2 (ja) 映像コンテンツ配信装置
CN115604496A (zh) 一种显示设备、直播切台方法及存储介质
US20180020227A1 (en) Communication apparatus, communication system, communication method, and recording medium
JP2006013739A (ja) ビデオカメラ

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant