KR20230049204A - Adaptive media streaming transmission method and apparatus for multi network - Google Patents
Adaptive media streaming transmission method and apparatus for multi network Download PDFInfo
- Publication number
- KR20230049204A KR20230049204A KR1020210132045A KR20210132045A KR20230049204A KR 20230049204 A KR20230049204 A KR 20230049204A KR 1020210132045 A KR1020210132045 A KR 1020210132045A KR 20210132045 A KR20210132045 A KR 20210132045A KR 20230049204 A KR20230049204 A KR 20230049204A
- Authority
- KR
- South Korea
- Prior art keywords
- media
- network
- layer
- segments
- media data
- Prior art date
Links
- 230000005540 biological transmission Effects 0.000 title claims abstract description 89
- 238000000034 method Methods 0.000 title claims abstract description 29
- 230000003044 adaptive effect Effects 0.000 title abstract description 14
- 238000000926 separation method Methods 0.000 claims description 9
- 230000001360 synchronised effect Effects 0.000 claims description 7
- 238000004458 analytical method Methods 0.000 claims description 3
- 230000008685 targeting Effects 0.000 claims description 3
- 238000005192 partition Methods 0.000 claims description 2
- 241000282994 Cervidae Species 0.000 claims 1
- 238000005516 engineering process Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 9
- 230000032258 transport Effects 0.000 description 6
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
- H04N21/23103—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion using load balancing strategies, e.g. by placing or distributing content on different disks, different memories or different servers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/231—Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
- H04N21/2312—Data placement on disk arrays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26208—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints
- H04N21/26233—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists the scheduling operation being performed under constraints involving content or additional data duration or size, e.g. length of a movie, size of an executable file
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
Description
[0001] 본 발명은 방송통신 기술에 관한 것으로, 보다 상세하게는 네트워크 환경에 적응적으로 최적화된 미디어 스트리[0001] The present invention relates to broadcast communication technology, and more particularly, to a media stream adaptively optimized for a network environment.
밍 전송기술에 관한 것이다.It is about Ming transmission technology.
[0002] 최근 스마트폰, 태블릿 PC, 스마트 TV 등과 같이 유무선으로 인터넷 연결이 가능한 다양한 단말들이 사용자에게[0002] Recently, various terminals that can connect to the Internet in a wired or wireless manner, such as smartphones, tablet PCs, smart TVs, etc., are available to users.
제공되고 있다. 이러한 단말들을 통해 멀티미디어 서비스를 제공할 수 있는데, 인터넷을 이용하여 언제 어디서are being provided Multimedia services can be provided through these terminals, anytime, anywhere using the Internet.
든 사용자가 원하는 멀티미디어를 선택해서 소비하는 멀티미디어 서비스 형태로 진화하고 있다.It is evolving into a form of multimedia service in which all users select and consume the multimedia they want.
[0003] 그러나, 서비스 품질(QoS)이 보장되지 않는 인터넷을 통해서는 끊김 없는 고화질의 미디어 스트리밍 서비스를[0003] However, through the Internet where quality of service (QoS) is not guaranteed, a high-definition media streaming service without interruption is provided.
제공하기 어렵다. 이러한 문제를 해결하기 위해 하이퍼텍스트 전송 프로토콜(hypertext transfer protocol: 이hard to provide In order to solve this problem, the hypertext transfer protocol (hypertext transfer protocol)
하 HTTP라 칭함) 기반 적응형 스트리밍 서비스가 제안되었다. HTTP 기반 적응형 스트리밍 서비스는 미디어 전송Hereinafter referred to as HTTP) based adaptive streaming service has been proposed. HTTP-based adaptive streaming service transports media
장치가 하나의 콘텐트를 대상으로 다양한 채널 환경과 단말 사양에 따라 서로 다른 품질(Quality)을 갖는 미디Media with different qualities according to various channel environments and device specifications targeting one content in the device
어 시퀀스를 생성하고, 미디어 수신장치는 자신의 단말 환경과 전송 채널에 따라 미디어 데이터를 지정된 채널A sequence is created, and the media receiving device transmits media data to a designated channel according to its own terminal environment and transmission channel.
을 통해 수신함에 따라, 최적화된 미디어 스트리밍 서비스를 제공하는 기술이다.It is a technology that provides an optimized media streaming service as it is received through.
[0004] HTTP 기반 적응형 스트리밍 기술의 대표 회사로는 Microsoft, Apple, Adobe 등이 있다. Microsoft는 2008년 베Representative companies of HTTP-based adaptive streaming technology include Microsoft, Apple, and Adobe. Microsoft in 2008
이징 올림픽 인터넷 라이브 중계에 smooth 스트리밍 기술을 사용하였으며, Apple은 iPhone, iPad에 HTTP 라이브Smooth streaming technology was used for Internet live broadcasting of the Yijing Olympics, and Apple uses HTTP live streaming on iPhone and iPad.
스트리밍 기술을 적용하였다. 이러한 기술들은 독자적인 비표준 HTTP 기반 적응형 스트리밍 서비스에 해당한다.Streaming technology was applied. These technologies correspond to proprietary non-standard HTTP-based adaptive streaming services.
독자적인 규제에 대해 제약에서 벗어나기 위해서, MPEG에서는 동적 적응형 HTTP 스트리밍(Dynamic AdaptiveIn order to get out of the constraints of independent regulations, MPEG has developed Dynamic Adaptive HTTP Streaming (Dynamic Adaptive
Streaming over HTTP: 이하 DASH라 칭함) 기술을 표준화하였다.Streaming over HTTP: hereinafter referred to as DASH) technology was standardized.
[0005] 인터넷 기반의 미디어 스트리밍 서비스를 제공함에 있어서 DASH를 이용하면 채널 대역폭에 상관없이 최소의 화[0005] In providing Internet-based media streaming service, if DASH is used, regardless of channel bandwidth, minimum
질을 갖는 미디어 데이터를 끊김 없이 사용자에게 제공할 수 있다. 예를 들어, IP 네트워크의 대역폭이 작은 경Quality media data can be provided to users without interruption. For example, if the bandwidth of an IP network is small,
우 최소의 화질을 갖는 비디오 스트림을 전송하고, 반대로 대역폭이 큰 경우 최대의 화질을 갖는 비디오 스트림If the bandwidth is large, the video stream with the minimum quality is transmitted. Conversely, the video stream with the maximum quality is transmitted.
을 전송한다. 이에 따라, IP 네트워크의 전송 대역 환경에 따라 적합한 비트율로 인코딩된 비디오 데이터를 전send Accordingly, video data encoded with an appropriate bit rate according to the transmission band environment of the IP network is transmitted.
송하므로 사용자는 끊김 없는 영상을 시청할 수 있다.Therefore, the user can watch the video without interruption.
[0006] 한편, DASH는 단일 IP 네트워크에서 채널 상황에 따라 유동적인 품질의 서비스를 제공하기 때문에 사용자는 항[0006] On the other hand, since DASH provides flexible quality of service according to channel conditions in a single IP network, users always
상 동일한 품질의 미디어 데이터를 수신할 수 없다. 즉, DASH는 IP 네트워크의 대역폭 상황에 따라 고화질의 영As a result, media data of the same quality cannot be received. In other words, DASH is a high-definition image depending on the bandwidth situation of the IP network.
상뿐만 아니라 저화질의 영상을 사용자에게 전송하기 때문에 항상 고화질의 영상만을 전송할 수는 없다. 예를Since low-quality images are transmitted to the user, only high-quality images cannot be transmitted all the time. example
들어 사용자의 IP 네트워크 채널의 대역폭이 협소할 경우 고화질의 영상을 스트리밍 전송할 수 없다.For example, if the bandwidth of the user's IP network channel is narrow, high-quality video cannot be streamed.
[0007] 일 실시 예에 따라, 사용자에게 항상 고품질의 미디어 스트리밍 서비스를 제공하기 위해, 다중 네트워크 환경에[0007] According to an embodiment, in order to always provide a high-quality media streaming service to users, multiple network environments
적응적인 미디어 스트리밍 전송방법 및 그 장치를 제안한다.An adaptive media streaming transmission method and device are proposed.
[0008] 일 실시 예에 따른 미디어 전송장치의 미디어 스트리밍 전송방법은, 소정의 콘텐트를 다수의 계층으로 인코딩하[0008] A media streaming transmission method of a media transmission device according to an embodiment encodes predetermined content into multiple layers.
여 미디어 데이터를 생성하는 단계와, 생성된 미디어 데이터를 각 계층 별로 분리하는 단계와, 각 계층 별로 분The step of generating media data, the step of separating the created media data for each layer, and the step of classifying the created media data for each layer.
리된 미디어 데이터를 다수의 네트워크를 통해 미디어 수신장치에 스트리밍 전송하는 단계를 포함한다.and streaming the processed media data to a media receiving device through a plurality of networks.
[0009] 다른 실시 예에 따른 미디어 전송장치는, 소정의 콘텐트를 다수의 계층으로 인코딩하여 미디어 데이터를 생성하[0009] A media transmission device according to another embodiment generates media data by encoding predetermined content into multiple layers.
는 인코딩부와, 가용 네트워크 수에 따라 인코딩부의 인코딩을 위한 계층을 할당하는 계층 제어부와, 인코딩부An encoding unit, a layer control unit for allocating layers for encoding in the encoding unit according to the number of available networks, and an encoding unit
에서 생성된 미디어 데이터를 각 계층 별로 분리하는 계층 분리부와, 계층 분리부에서 계층 별로 분리된 미디어A layer separation unit that separates the media data generated in each layer by layer, and the media separated by layer in the layer separation unit
데이터를 다수의 네트워크를 통해 미디어 수신장치에 스트리밍 전송하는 미디어 전송부를 포함한다.and a media transmission unit for streaming data to a media reception device through multiple networks.
[0010] 또 다른 실시 예에 따른 미디어 수신장치의 미디어 스트리밍 수신방법은, 소정의 콘텐트를 다수의 계층으로 인[0010] A media streaming receiving method of a media receiving device according to another embodiment includes recognizing predetermined content in a plurality of layers.
코딩하여 생성된 미디어 데이터를 다수의 네트워크를 통해 미디어 전송장치로부터 수신하는 단계와, 수신된 미Receiving media data generated by coding from a media transmission device through multiple networks;
디어 데이터를 디코딩하는 단계를 포함한다.and decoding the dear data.
[0011] 또 다른 실시 예에 따른 미디어 수신장치는, 소정의 콘텐트를 다수의 계층으로 인코딩하여 생성된 미디어 데이[0011] A media receiving device according to another embodiment includes media data generated by encoding predetermined content into multiple layers.
터를 다수의 네트워크를 통해 미디어 전송장치로부터 수신하는 미디어 수신부와, 미디어 수신부에서 수신된 미A media receiver for receiving data from a media transmission device through multiple networks;
디어 데이터를 디코딩하는 디코딩부를 포함한다.and a decoding unit that decodes the data.
[0012] 일 실시 예에 따르면, 기존의 네트워크 환경에 적응적인 스트리밍 기술에 있어서 단일 네트워크 채널의 대역폭[0012] According to an embodiment, the bandwidth of a single network channel in a streaming technology adaptive to an existing network environment
한계로 인해 저품질의 미디어 서비스를 제공하게 되는 한계를 극복하여, 다수의 네트워크 환경에 적응적으로 최Overcome the limitations of providing low-quality media services due to limitations, and optimize adaptively for multiple network environments.
적화된 미디어 스트리밍 전송을 통해 고품질의 미디어 스트리밍 서비스를 항상 제공할 수 있다.High-quality media streaming service can always be provided through optimized media streaming transmission.
[0013] 구체적으로, 기존의 고급 비디오 코딩(Advanced Video Coding: AVC) 기반의 환경 적응형 스트리밍 기술은 미디[0013] Specifically, the existing advanced video coding (Advanced Video Coding: AVC) based environment adaptive streaming technology is
어 스트리밍 서비스 제공 시에 단일 IP 네트워크만을 이용해야 한다. 그러나, 본 발명에 따르면 스케일러블 비When providing a streaming service, only a single IP network should be used. However, according to the present invention, the scalable ratio
디오 코딩(Scalable Video Coding: SVC)을 이용하여 콘텐트를 다수의 계층으로 인코딩하고 계층을 분리함에 따By encoding the content into multiple layers using Scalable Video Coding (SVC) and separating the layers,
라 다수의 IP 네트워크를 통해 고품질의 미디어 데이터를 스트리밍 전송할 수 있다.It is possible to stream and transmit high-quality media data through multiple IP networks.
[0014] 도 1은 본 발명의 일 실시 예에 따른 다중 네트워크 환경 적응형 미디어 스트리밍 전송 시스템의 구성도,
도 2는 본 발명의 일 실시 예에 따른 미디어 스트리밍 전송 시스템의 세부 구성도,
도 3은 본 발명의 일 실시 예에 따른 미디어 전송장치의 구성도,
도 4는 본 발명의 일 실시 예에 따른 미디어 수신장치의 구성도,
도 5는 본 발명의 일 실시 예에 따른 미디어 전송장치의 미디어 스트리밍 전송방법을 도시한 흐름도,
도 6은 본 발명의 일 실시 예에 따른 미디어 수신장치의 미디어 스트리밍 수신방법을 도시한 흐름도이다.1 is a configuration diagram of a multi-network environment adaptive media streaming transmission system according to an embodiment of the present invention;
2 is a detailed configuration diagram of a media streaming transmission system according to an embodiment of the present invention;
3 is a configuration diagram of a media transmission device according to an embodiment of the present invention;
4 is a configuration diagram of a media receiving device according to an embodiment of the present invention;
5 is a flowchart illustrating a media streaming transmission method of a media transmission device according to an embodiment of the present invention;
6 is a flowchart illustrating a media streaming receiving method of a media receiving apparatus according to an embodiment of the present invention.
[0015] 이하에서는 첨부한 도면을 참조하여 본 발명의 실시 예들을 상세히 설명한다. 본 발명을 설명함에 있어 관련된Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. Related to the description of the present invention
공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는If it is determined that a detailed description of a known function or configuration may unnecessarily obscure the gist of the present invention,
그 상세한 설명을 생략할 것이다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서A detailed description thereof will be omitted. In addition, the terms to be described later are terms defined in consideration of functions in the present invention.
이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친This may vary depending on the intention or custom of the user or operator. Therefore, the definition is throughout this specification.
내용을 토대로 내려져야 할 것이다.It should be based on content.
[0017] 도 1은 본 발명의 일 실시 예에 따른 다중 네트워크 환경 적응형 미디어 스트리밍 전송 시스템(1)의1 is a diagram of a multi-network environment adaptive media
구성도이다.It is a composition diagram.
[0018] 도 1을 참조하면, 미디어 스트리밍 전송 시스템(1)은 미디어 전송장치(10)와, 다수의 IP 네트워크들로 구성된Referring to Figure 1, the media
네트워크(12)와, 미디어 수신장치(14)를 포함한다.It includes a
[0019] 미디어 전송장치(10)는 미디어 데이터, 예를 들어 비디오 데이터를 스트리밍으로 미디어 수신장치(14)에 전송하[0019] The
는데, 다수의 IP 네트워크들로 구성된 네트워크(12)를 통해 스트리밍 전송한다. 미디어 수신장치(14)는 네트워However, streaming is transmitted through the
크(12)에 접속하여 미디어 전송장치(10)로부터 미디어 데이터를 스트리밍 전송받는다.The media data is streamed and received from the
[0020] 네트워크(12)는 다수의 IP 네트워크로 구성되는데, 도 1에 도시된 바와 같이 메인 IP 네트워크와 서브 IP 네트[0020] The
워크를 포함한다. 서브 IP 네트워크는 다수 개일 수 있다. IP 네트워크는 예를 들어, 3G, 4G 등의 유선 네트워includes work There may be multiple sub IP networks. An IP network is, for example, a wired network such as 3G or 4G.
크, wifi 등의 무선 네트워크, 인터넷, IPTV 네트워크 등일 수 있다.It may be a wireless network such as a network or wifi, the Internet, an IPTV network, and the like.
[0021] 미디어 전송장치(10)는 다수의 IP 네트워크 환경에 적응적으로 최적화된 미디어 스트리밍 서비스를 미디어 수신[0021] The
장치(14)에 제공한다. 이에 따라, 미디어 수신장치(14)는 다수의 IP 네트워크의 상태, 예를 들어 각 IP 네트워provided to the
크의 전송 대역폭에 상관없이 고품질의 스트리밍 서비스를 항상 제공받을 수 있다. 이를 위해 미디어 전송장치Regardless of the transmission bandwidth of the network, high-quality streaming service can always be provided. Media transmission device for this purpose
(10)는 스케일러블 비디오 코딩(Scalable Video Coding: 이하 SVC라 칭함) 기술을 이용하여 다수의 계층으로 콘텐트를 인코딩한 후 이를 다수의 IP 네트워크의 채널을 통해 미디어 수신장치(14)에 스트리밍 전송한다.(10) encodes the content in multiple layers using Scalable Video Coding (hereinafter referred to as SVC) technology, and then streams the content to the
[0022] H.264의 확장형 인코딩 기술인 SVC는 MPEG-2, MPEG-4 등에서 시도한 계층 인코딩 기반의 스케일러빌리티가 갖는[0022] SVC, an extended encoding technology of H.264, has scalability based on hierarchical encoding attempted in MPEG-2, MPEG-4, etc.
문제점인 낮은 압축효율, 복합 스케일러빌리티 지원 불가, 높은 구현 복잡도의 문제를 한꺼번에 해결하기 위하In order to solve the problems of low compression efficiency, inability to support complex scalability, and high implementation complexity,
여 개발된 새로운 확장형 인코딩 기법이다. SVC는 다수의 비디오 계층(layer)을 하나의 비트스트림(bitstream)It is a new scalable encoding technique developed by SVC combines multiple video layers into one bitstream
으로 인코딩한다. SVC의 계층은 하나의 기본계층(base layer)과 기본계층 위에 연속적으로 쌓을 수 있는 향상계encode with The layers of SVC consist of one base layer and an enhancement system that can be successively stacked on top of the base layer.
층(enhancement layer)으로 구성된다. 각 향상계층은 하위계층 정보를 기반으로 각각에게 주어진 최대의 비트율It consists of an enhancement layer. Each enhancement layer has the maximum bit rate given to each based on the information of the lower layer.
(bit-rate), 화면율(frame rate), 해상도(resolution)까지 표현할 수 있다. SVC는 향상계층을 연속적으로 많이(bit-rate), frame rate, and resolution can be expressed. In SVC, successively many enhancement layers are
쌓을수록 다양한 비트율, 화면율, 해상도의 지원이 가능하다. 따라서, 이종(heterogeneous)의 네트워크 환경에As they are stacked, various bit rates, screen rates, and resolutions can be supported. Therefore, in a heterogeneous network environment
서 발생하는 대역폭의 다양성 문제, 수신 단말기 성능과 해상도의 다양성 문제, 콘텐츠 소비자의 다양한 선호도bandwidth diversity problem, diversity problem of receiving terminal performance and resolution, and various preferences of content consumers
문제 등을 복합적으로 해결할 수 있는 UMA(Universal Multimedia Access) 환경의 멀티미디어 콘텐츠 서비스에multimedia content service in UMA (Universal Multimedia Access) environment that can solve problems
적합한 인코딩 기술이다.It is a suitable encoding technique.
[0023] 본 발명에 따르면, 미디어 전송장치(10)는 SVC를 이용하여 계층 수만큼 소정의 콘텐트를 인코딩하여 인코딩한[0023] According to the present invention, the
개수의 계층으로 이루어진 하나의 비트스트림을 구성하는 미디어 데이터를 생성한다. 예를 들어, 비디오 계층이Media data constituting one bitstream consisting of a number of layers is generated. For example, if the video layer is
1개의 기본계층과 2개의 향상계층으로 구성된다면, 미디어 전송장치(10)는 총 3개의 계층으로 이루어진 하나의If it is composed of one basic layer and two enhancement layers, the
SVC 비트스트림을 구성하는 미디어 데이터를 생성한다.Media data constituting the SVC bitstream is generated.
[0025] 도 2는 본 발명의 일 실시 예에 따른 미디어 스트리밍 전송 시스템(1)의 세부 구성도이다.2 is a detailed configuration diagram of a media
[0026] 도 2를 참조하면, 미디어 스트리밍 전송 시스템(1)은 SVC에 기반하여 다중 네트워크 환경 적응형 스트리밍 전송[0026] Referring to FIG. 2, the media
구조를 갖는다. 구체적으로, 미디어 전송장치(10)는 인코딩부(320)를 통해 콘텐트를 다수의 계층을 기반으로 인have a structure Specifically, the
코딩하여 미디어 데이터를 생성한다. 인코딩된 미디어 데이터는 하나의 SVC 비트스트림으로 구성되는데, 도 2에Coding to generate media data. Encoded media data is composed of one SVC bitstream, in FIG.
도시된 바와 같이 가용할 수 있는 비디오 계층이 1개의 기본계층과 2개의 향상계층으로 구성된다면, 인코딩부As shown, if the available video layer consists of one base layer and two enhancement layers, the encoding unit
(320)는 총 3개의 계층으로 이루어진 하나의 SVC 비트스트림을 구성하는 미디어 데이터를 생성한다.Step 320 generates media data constituting one SVC bitstream consisting of a total of three layers.
[0027] 계층 분리부(330)는 인코딩부(320)에서 인코딩된 미디어 데이터를 각 계층별로 분리하고 이를 전송 포맷으로 변[0027] The
환한다. 예를 들어, 계층 분리부(330)는 도 2에 도시된 바와 같이 미디어 데이터를 1개의 기본계층과 2개의 향brighten up For example, as shown in FIG. 2, the
상계층으로 분리한다. 이어서, 미디어 전송장치(10)는 전송 포맷으로 변환된 미디어 데이터를 각각의 지정 폴더separated into upper layers. Subsequently, the
(370)에 저장한 후, 이를 다수의 IP 네트워크로 구성된 네트워크(12)를 통해 미디어 수신장치(14)에 스트리밍After storing in 370, it is streamed to the
전송한다.send.
[0028] 한편, 미디어 수신장치(14)는 네트워크(12)를 통해 미디어 전송장치(10)로부터 전송된 미디어 데이터를 미디어[0028] On the other hand, the
수신부(430)를 통해 수신한다. 그리고, 수신된 미디어 데이터를 디코딩부(450)를 통해 디코딩한다.It is received through the
[0029] 이하, 후술되는 도 3과 도 4를 참조로 하여 미디어 전송장치(10)와 미디어 수신장치(14)의 세부 구성에 대해 후[0029] Hereinafter, detailed configurations of the
술하고, 도 5와 도 6을 참조로 하여 각 장치(10,12)의 프로세스에 대해 후술한다.And, with reference to FIGS. 5 and 6, the process of each
[0031] 도 3은 본 발명의 일 실시 예에 따른 미디어 전송장치(10)의 구성도이다.3 is a configuration diagram of a
[0032] 도 1과 도 3을 참조하면, 미디어 전송장치(10)는 계층 제어부(310), 인코딩부(320), 계층 분리부(330), 세그먼[0032] Referring to FIGS. 1 and 3, the
트 생성부(340), 메타데이터 생성부(350) 및 미디어 전송부(360)를 포함한다.It includes a
[0033] 계층 제어부(310)는 가용 네트워크 수에 따라 인코딩부(320)의 인코딩을 위한 계층을 할당한다. 즉, 계층 제어[0033] The
부(310)는 공급자가 가용할 수 있는 IP 네트워크 수에 따라서 SVC 인코딩 계층을 인코딩부(320)에 할당한다. 즉The
공급자가 이종의 IP 네트워크 채널 3개를 가용할 수 있다면, 인코딩부(320)는 콘텐트를 기본계층과 2개의 향상If the provider can use three heterogeneous IP network channels, the
계층으로 인코딩할 수 있다.You can encode in layers.
[0034] 인코딩부(320)는 소정의 콘텐트를 다수의 계층으로 인코딩하여 미디어 데이터를 생성한다. 이때, 인코딩부(32[0034] The
0)는 계층 제어부(310)가 할당하는 계층 수에 따라 콘텐트를 인코딩한다. 인코딩된 바이너리 데이터는 하나의0) encodes the content according to the number of layers allocated by the
비트스트림으로 구성된다. 인코딩부(320)는 비디오 코딩 계층(Video coding layer: VCL)에 위치할 수 있다.It consists of a bit stream. The
[0035] 계층 분리부(330)는 인코딩부(320)에서 생성된 미디어 데이터를 각 계층 별로 분리한다. 즉, 인코딩부(320)에[0035] The
의해 인코딩된 비트스트림은 계층 분리부(330)에 의해 계층별로 분리된다. 분리된 계층별 미디어 데이터는 전송The bitstream encoded by is separated for each layer by the
포맷 형태로 변환된다. 계층 분리부(330)는 네트워크 추상 계층(Network Abstraction Layer: NAL)에 위치할 수 있다.converted to format. The
[0036] 세그먼트 생성부(340)는 계층 분리부(330)를 통해 각 계층 별로 분리된 후 전송 포맷으로 변환된 미디어 데이터[0036] The
를 다수의 세그먼트(segment) 데이터로 분할한다. 이때, 세그먼트 생성부(340)는 계층 별 미디어 데이터를 시간is divided into a plurality of segment data. At this time, the
단위(예: 초 단위)로 분할할 수 있다. 분할된 세그먼트들은 지정된 서버에 저장될 수 있다.It can be divided into units (e.g. units of seconds). Divided segments can be stored on designated servers.
[0037] 메타데이터 생성부(350)는 세그먼트 생성부(340)를 통해 세그먼트들로 분할된 미디어 데이터를 대상으로 각 계[0037] The
층 별로 메타데이터 파일을 생성하고 생성된 메타데이터 파일을 다수의 네트워크를 통해 미디어 수신장치(14)에A metadata file is created for each layer, and the generated metadata file is transmitted to the
전송한다. 메타데이터 생성부(350)에서 생성되는 메타데이터 파일은 계층 수에 따라 결정될 수 있다. 예를 들어send. The metadata file generated by the
인코딩부(320)에서 인코딩된 계층의 수가 3개인 경우, 메타데이터 생성부(350)에서 생성되는 메타데이터 파일도When the number of layers encoded by the
3개가 된다. 즉, 계층 수가 3개이면 공급자가 최대한 가용할 수 있는 이종 IP 네트워크 채널이 3개임을 의미한It becomes three. In other words, if the number of layers is 3, this means that the provider has at most 3 heterogeneous IP network channels available.
다.all.
[0038] 메타데이터 파일에는 세그먼트 정보와 코덱 정보 등이 정의되고, URL이라는 접속 IP 주소가 표시된다. 세그먼트[0038] In the metadata file, segment information and codec information are defined, and an access IP address called URL is displayed. segment
정보와 코덱 정보는 세그먼트 생성부(340)로부터 획득하고, URL 정보는 계층 제어부(310)로부터 획득할 수Information and codec information may be obtained from the
있다. URL 정보의 예를 들면, 계층 수가 3개인 경우 메타데이터 생성부(350)는 메인 IP 네트워크의 URL이 표시there is. As an example of URL information, when the number of layers is three, the
된 메타데이터 파일 하나와 다른 서브 IP 네트워크의 URL이 표시된 두 개의 메타데이터 파일을 생성한다. 메타Create one metadata file and two metadata files showing the URLs of the other sub-IP networks. meta
데이터 생성부(350)에서 생성된 모든 메타데이터는 미디어 수신장치(14)가 다수의 네트워크에 접속시에 미디어All metadata generated by the
수신장치(14)에 모두 전송된다. 미디어 수신장치(14)는 메인 IP 네트워크를 기반으로 생성된 메타데이터는 필수All are transmitted to the receiving
적으로 분석하고, 상황에 따라서 다른 서브 IP 네트워크를 기반으로 생성된 메타데이터를 분석할 수 있다.and analyze metadata created based on other sub-IP networks depending on the situation.
[0039] 미디어 전송부(360)는 계층 분리부(330)를 통해 계층 별로 분리된 후 세그먼트 생성부(340)를 통해 분할된 세그[0039] The
먼트들을 다수의 네트워크를 통해 미디어 수신장치(14)에 스트리밍 전송한다. 세그먼트들은 기본계층 세그먼트messages are streamed to the
와 향상계층 세그먼트를 포함한다.and an enhancement layer segment.
[0040] 일 실시 예에 따라 미디어 전송부(360)는 세그먼트들을 메인 아이피 네트워크를 통해 우선적으로 전송하고, 필[0040] According to an embodiment, the
요시에 나머지 세그먼트들을 적어도 하나의 서브 아이피 네트워크를 통해 전송한다. 예를 들어, 미디어 전송부On request, the remaining segments are transmitted through at least one sub-IP network. For example, the media transport unit
(360)는 기본계층 세그먼트를 메인 아이피 네트워크를 통해 우선적으로 전송한다. 이때, 메인 아이피 네트워크360 preferentially transmits the base layer segment through the main IP network. At this time, the main IP network
의 네트워크 상태가 불안정한 경우, 가령 메인 아이피 네트워크의 채널 대역폭이 모든 계층의 세그먼트들을 수If the network condition of the is unstable, for example, the channel bandwidth of the main IP network can be segmented in all layers.
용할 수 없는 경우, 우선적으로 기본계층 세그먼트를 포함하여 메인 아이피 네트워크가 수용할 수 있는 계층까If unavailable, first move to a layer that can be accommodated by the main IP network, including the basic layer segment.
지의 세그먼트들을 메인 아이피 네트워크를 통해 전송하고, 향상계층 세그먼트들을 포함하는 나머지 세그먼트들The remaining segments, including the enhancement layer segments, are transmitted through the main IP network.
을 서브 아이피 네트워크를 통해 전송할 수 있다.can be transmitted through a sub IP network.
[0042] 도 4는 본 발명의 일 실시 예에 따른 미디어 수신장치(14)의 구성도이다.4 is a configuration diagram of a
[0043] 도 1과 도 4를 참조하면, 미디어 수신장치(14)는 채널 분석부(410), 스트리밍 제어부(420), 미디어 수신부1 and 4, the
(430), 동기화부(440) 및 디코딩부(450)를 포함한다.430, a
[0044] 클라이언트인 미디어 수신장치(14)는 다수의 IP 네트워크를 포함하는 네트워크(12)에 접속하여 미디어 전송장치[0044] The
(10)로부터 미디어 데이터를 스트리밍 전송받는다. 다수의 IP 네트워크는 예를 들어, 인터넷, IPTV 네트워크,Streaming media data is received from (10). A number of IP networks include, for example, the Internet, IPTV networks,
wifi 등의 무선 네트워크, 3G, 4G 등의 유선 네트워크 등을 포함한다. 미디어 수신장치(14)는 SVC에 기반하여It includes wireless networks such as wifi, wired networks such as 3G and 4G, and the like. The
다수의 IP 네트워크 환경에 동적으로 적응하여 네트워크 환경 또는 클라이언트 환경에 최적화된 미디어 데이터Media data optimized for the network environment or client environment by dynamically adapting to multiple IP network environments
를 스트리밍 전송받는다. 이하, 전술한 특징을 갖는 미디어 수신장치(14)의 세부 구성에 대해 상세히 후술한다.receive streaming transmission. Hereinafter, the detailed configuration of the
[0045] 채널 분석부(410)는 다수의 IP 네트워크 별로 네트워크 상태를 분석하여 가용 네트워크에 대한 네트워크 상태[0045] The
정보를 스트리밍 제어부(420)에 제공한다. 이때, 채널 분석부(410)는 가용 가능한 IP 네트워크를 확인하고 실시Information is provided to the
간으로 IP 네트워크의 대역폭 등의 네트워크 상태를 모니터링하며 네트워크 상태 정보를 스트리밍 제어부(420)Intermittently monitors the network status such as the bandwidth of the IP network and transmits the network status information to the
에 제공할 수 있다.can be provided to
[0046] 미디어 전송장치(10)가 콘텐트를 다수의 계층으로 인코딩한 후 계층 별로 메타데이터 파일을 생성하면, 스트리[0046] When the
밍 제어부(420)는 미디어 전송장치(10)로부터 계층 별 메타데이터 파일을 수신한다.The
[0047] 이어서, 스트리밍 제어부(420)는 미디어 전송장치(10)로부터 수신한 계층 별 메타데이터 파일과 채널 분석부[0047] Subsequently, the
(410)로부터 수신한 네트워크 상태정보를 이용하여 미디어 수신장치(14)가 접속할 적어도 하나의 네트워크를 결At least one network to be accessed by the
정한다. 일 실시 예에 따라 스트리밍 제어부(420)는 메타데이터 파일의 개수를 확인하고 미디어 수신장치(14)가decide According to an embodiment, the
접속 가능한 IP 네트워크의 수를 결정한다. 구체적으로, 스트리밍 제어부(420)는 메타데이터 파일로부터 미디어전송장치(10)에서 인코딩된 세그먼트의 HTTP-URL 정보를 확인한다. 그리고, 채널 분석부(410)로부터 제공받은Determine the number of accessible IP networks. Specifically, the
IP 네트워크 상태정보에 따라 다수의 IP 네트워크를 이용하여 스트리밍 서비스를 제공받을 것인지 단일 IP 네트Depending on the IP network status information, whether to receive streaming service using multiple IP networks or a single IP network
워크를 이용하여 스트리밍 서비스를 제공받을 것인지 여부를 결정한다.Determines whether or not to receive a streaming service using a work.
[0048] 미디어 수신부(430)는 미디어 전송장치(10)로부터 인코딩된 다수의 세그먼트를 수신한다. 세그먼트는 기본계층[0048] The
세그먼트와 향상계층 세그먼트를 포함한다. 미디어 수신부(430)는 접속 가능한 HTTP를 모두 열어 놓고 스트리밍It includes segments and enhancement layer segments. The
제어부(420)가 명령하는 데로 할당된 HTTP 주소를 통해 미디어 전송장치(10)로부터 세그먼트들을 수신한다. 일As commanded by the
실시 예에 따라, 메인 IP 네트워크의 채널 대역폭이 모든 계층을 수용할 수 없을 경우, 미디어 수신부(430)는According to an embodiment, when the channel bandwidth of the main IP network cannot accommodate all layers, the
메인 IP 네트워크가 수용할 수 있는 계층까지의 세그먼트들을 수신하고, 수신되지 않은 나머지 계층의 세그먼트Segments up to the layer that the main IP network can accommodate are received, and segments of the remaining layers that are not received are received.
들은 다른 서브 IP 네트워크를 통해서 수신한다.are received through other sub-IP networks.
[0049] 동기화부(440)는 미디어 수신부(430)를 통해 미디어 전송장치(10)로부터 수신된 미디어 데이터의 세그먼트들을[0049]
상호 동기화시킨다. 이때, 동기화부(440)는 스트리밍 제어부(420)에서 분석된 비디오 세그먼트 그룹과 채널 분synchronize each other. At this time, the
석부(410)로부터 제공받은 네트워크 상태 정보를 이용하여 몇 개의 계층을 동기화할 것인지를 결정하고 해당되It is determined how many layers to synchronize using the network state information provided from the
는 계층의 세그먼트들을 동기화할 수 있다. 일 실시 예에 따라, 동기화부(440)는 IP 네트워크 상태와 현재 사용can synchronize the segments of the layer. According to an embodiment, the synchronizing
하고 있는 IP 네트워크 개수를 확인하여 수신된 세그먼트의 계층을 확인한다. 이때, IP 네트워크의 개수와 전송Check the number of IP networks being used to check the layer of the received segment. At this time, the number and transmission of IP networks
된 계층의 개수가 동일한 경우, 타임스탬프(Timestamp) 값을 이용하여 동기화를 수행할 수 있다.When the number of layers that have been assigned is the same, synchronization may be performed using a timestamp value.
[0050] 디코딩부(450)는 동기화부(440)로부터 동기화된 세그먼트들을 수신하여, 이를 전송 포맷에서 비디오 포맷으로[0050] The
변환한다. 그리고, 비디오 포맷으로 변환된 세그먼트들을 디코딩한다.convert Then, the segments converted to the video format are decoded.
[0051] 도 5는 본 발명의 일 실시 예에 따른 미디어 전송장치(10)의 미디어 스트리밍 전송방법을 도시한 흐름도이다.5 is a flowchart illustrating a media streaming transmission method of the
[0052] 도 2와 도 5를 참조하면, 미디어 전송장치(10)는 소정의 콘텐트를 다수의 계층으로 인코딩하여 미디어 데이터를[0052] Referring to FIGS. 2 and 5, the
생성(5000)하고, 생성된 미디어 데이터를 각 계층 별로 분리한다(5010). 일 실시 예에 따라, 미디어 데이터 생It is created (5000), and the created media data is separated for each layer (5010). According to one embodiment, media data production
성 단계(5000)에서 미디어 전송장치(10)는 계층 수만큼 소정의 콘텐트를 인코딩하여 인코딩한 개수의 계층으로In the
이루어진 하나의 비트스트림을 구성하는 미디어 데이터를 생성한다. 그리고, 계층 별 분리 단계(5010)에서, 하Media data constituting one bitstream formed is generated. And, in the layer-by-
나의 비트스트림을 구성하는 미디어 데이터를 기본계층과 향상계층으로 분리한다.Media data constituting my bitstream is separated into a basic layer and an enhancement layer.
[0053] 이어서, 미디어 전송장치(10)는 각 계층 별로 분리된 미디어 데이터를 다수의 네트워크를 통해 미디어 수신장치[0053] Subsequently, the
(14)에 스트리밍 전송한다(5020).Streaming is transmitted to (14) (5020).
[0054] 일 실시 예에 따라, 스트리밍 전송 단계(5020)에서 미디어 전송장치(10)는 각 계층 별로 분리된 미디어 데이터[0054] According to an embodiment, in the
를 각각 전송 포맷으로 변환하고, 전송 포맷으로 변환된 미디어 데이터를 세그먼트들로 분할하며, 세그먼트들로Convert each to a transport format, divide the media data converted to the transport format into segments, and divide into segments.
분할된 미디어 데이터를 다수의 네트워크를 통해 미디어 수신장치(14)에 전송한다. 이때, 미디어 전송장치(10)The divided media data is transmitted to the
는 세그먼트들을 각각 지정된 폴더에 저장하고, 지정된 각 폴더에 저장된 세그먼트들을 메인 아이피 네트워크를stores the segments in each designated folder, and connects the segments stored in each designated folder to the main IP network.
통해 우선적으로 전송하고 필요시에 적어도 하나의 서브 아이피 네트워크를 통해 전송할 수 있다.It can be transmitted preferentially through at least one sub-IP network if necessary.
[0055] 일 실시 예에 따라, 스트리밍 전송 단계(5020)에서 미디어 전송장치(10)는 각 계층 별로 분리된 미디어 데이터[0055] According to an embodiment, in the
를 대상으로 각 계층 별로 메타데이터 파일을 생성하고, 각 계층 별로 생성된 메타데이터 파일을 다수의 네트워For each layer, a metadata file is created for each layer, and the metadata file created for each layer is distributed over multiple networks.
크를 통해 전송한다. 이때, 메타데이터 파일은 분할 정보, 코덱 정보 및 접속 아이피 주소정보 중 적어도 하나transmit through the At this time, the metadata file is at least one of partition information, codec information, and access IP address information.
를 포함한다.includes
[0057] 도 6은 본 발명의 일 실시 예에 따른 미디어 수신장치(14)의 미디어 스트리밍 수신방법을 도시한 흐름도이다.6 is a flowchart illustrating a media streaming receiving method of the
[0058] 도 2와 도 6을 참조하면, 미디어 수신장치(14)는 소정의 콘텐트를 다수의 계층으로 인코딩하여 생성된 미디어[0058] Referring to FIGS. 2 and 6, the
데이터를 다수의 IP 네트워크로 구성된 네트워크(12)를 통해 미디어 전송장치(10)로부터 수신한다(6000). 그리Data is received from the
고 수신된 미디어 데이터를 디코딩한다(6010).and decodes the received media data (6010).
[0059] 일 실시 예에 따라, 미디어 수신장치(14)는 미디어 데이터 인코딩 이후 계층 별로 생성된 메타데이터 파일을 미[0059] According to an embodiment, the
디어 전송장치(10)로부터 수신한다. 그리고 수신된 계층 별 메타데이터 파일을 이용하여 미디어 수신장치(14)가It is received from the
접속할 네트워크를 결정한다. 이 경우, 미디어 수신장치(14)는 미디어 데이터 수신 단계(6000)에서, 결정된 네Decide which network to connect to. In this case, the
트워크에 접속하여 미디어 전송장치(10)로부터 미디어 데이터를 수신한다.It connects to the network and receives media data from the
[0060] 미디어 전송장치(10)로부터 수신된 미디어 데이터는 다수의 계층으로 인코딩된 후 분할된 세그먼트들로 구성된[0060] The media data received from the
다. 일 실시 예에 따라, 미디어 데이터 수신 단계(6000)에서 미디어 수신장치(14)는 우선적으로 메인 아이피 네트워크가 수용할 수 있는 계층까지의 세그먼트를 메인 아이피 네트워크를 통해 수신한다. 그리고, 메인 아이피all. According to an embodiment, in the media
네트워크를 통해 모든 세그먼트가 수신되지 않은 경우 수신되지 않은 나머지 계층의 세그먼트를 적어도 하나의If all segments have not been received through the network, at least one
서브 아이피 네트워크를 통해 수신한다.It is received through the sub-IP network.
[0061] 일 실시 예에 따라, 디코딩 단계(6010)에서 미디어 수신장치(14)는 다수의 네트워크를 통해 미디어 전송장치[0061] According to one embodiment, in the
(10)로부터 수신된 미디어 데이터의 세그먼트들을 동기화하고, 동기화된 세그먼트들을 디코딩한다. 이때, 계층Synchronize the segments of media data received from (10) and decode the synchronized segments. At this time, layer
정보와 네트워크 상태 정보를 이용하여 동기화할 세그먼트들의 개수를 결정하고 동기화 개수가 결정된 세그먼트The number of segments to be synchronized is determined using information and network state information, and the number of segments to be synchronized is determined.
들을 동기화할 수 있다.can synchronize them.
[0062] 이제까지 본 발명에 대하여 그 실시 예들을 중심으로 살펴보았다. 본 발명이 속하는 기술분야에서 통상의 지식[0062] So far, the present invention has been looked at focusing on the embodiments. Common knowledge in the art to which the present invention belongs
을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을Those who have the present invention can be implemented in a modified form to the extent that does not depart from the essential characteristics of the present invention
이해할 수 있을 것이다. 그러므로 개시된 실시 예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야You will understand. Therefore, the disclosed embodiments should be considered from a descriptive point of view rather than a limiting point of view.
한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모do. The scope of the present invention is shown in the claims rather than the foregoing description, and all within the scope equivalent thereto.
든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.Any differences should be construed as being included in the present invention.
[0063] 1 : 미디어 스트리밍 전송 시스템 10 : 미디어 전송장치
12 : 네트워크 14 : 미디어 수신장치
310 : 계층 제어부 320 : 인코딩부
330 : 계층 분리부 340 : 세그먼트 생성부
350 : 메타데이터 생성부 360 : 미디어 전송부
410 : 채널 분석부 420 : 스트리밍 제어부
430 : 미디어 수신부 440 : 동기화부
450 : 디코딩부[0063] 1: media streaming transmission system 10: media transmission device
12: network 14: media receiving device
310: layer control unit 320: encoding unit
330: layer separation unit 340: segment generation unit
350: metadata generation unit 360: media transmission unit
410: channel analysis unit 420: streaming control unit
430: media receiving unit 440: synchronization unit
450: decoding unit
Claims (15)
소정의 콘텐트를 다수의 계층으로 인코딩하여 미디어 데이터를 생성하는 단계;
생성된 미디어 데이터를 각 계층 별로 분리하는 단계; 및
각 계층 별로 분리된 미디어 데이터를 다수의 네트워크를 통해 미디어 수신장치에 스트리밍 전송하는 단계를 포
함하고,
상기 스트리밍 전송하는 단계는,
각 계층 별로 분리된 미디어 데이터를 각각 전송 포맷으로 변환하는 단계;
전송 포맷으로 변환된 미디어 데이터를 세그먼트들로 분할하는 단계; 및
세그먼트들로 분할된 미디어 데이터를 상기 다수의 네트워크를 통해 전송하는 단계를 포함하고,
상기 세그먼트들로 분할된 미디어 데이터를 상기 다수의 네트워크를 통해 전송하는 단계는,
세그먼트들을 각각 지정된 폴더에 저장하는 단계; 및
상기 지정된 각 폴더에 저장된 세그먼트들을 메인 아이피 네트워크를 통해 우선적으로 전송하고, 나머지 세그먼
트들을 적어도 하나의 서브 아이피 네트워크를 통해 전송하는 단계를 포함하는 것을 특징으로 하는 미디어 스트
리밍 전송방법.In the media streaming transmission method of the media transmission device,
generating media data by encoding predetermined content into multiple layers;
Separating the generated media data for each layer; and
It includes the step of streaming the media data separated for each layer to a media receiving device through a plurality of networks.
including,
In the step of transmitting the streaming,
converting the separated media data for each layer into a transport format;
dividing the media data converted into a transport format into segments; and
transmitting the media data divided into segments through the plurality of networks;
The step of transmitting the media data divided into the segments through the plurality of networks,
Saving each segment to a designated folder; and
Segments stored in each of the designated folders are preferentially transmitted through the main IP network, and the remaining segments
A media stream comprising the step of transmitting the content through at least one sub-IP network
Reaming transmission method.
계층 수만큼 소정의 콘텐트를 인코딩하여 인코딩한 개수의 계층으로 이루어진 하나의 비트스트림을 구성하는 미
디어 데이터를 생성하고,
상기 각 계층 별로 분리하는 단계는
하나의 비트스트림을 구성하는 미디어 데이터를 기본계층과 향상계층으로 분리하는 것을 특징으로 하는 미디어
스트리밍 전송방법.2. The method of claim 1, wherein generating the media data comprises:
A bit stream consisting of the encoded number of layers by encoding a predetermined content as many as the number of layers.
create deer data,
The step of separating each layer is
Media characterized in that media data constituting one bitstream is separated into a basic layer and an enhancement layer.
Streaming transmission method.
각 계층 별로 분리된 미디어 데이터를 대상으로 각 계층 별로 메타데이터 파일을 생성하는 단계; 및
상기 각 계층 별로 생성된 메타데이터 파일을 상기 다수의 네트워크를 통해 전송하는 단계;
를 포함하는 것을 특징으로 하는 미디어 스트리밍 전송방법.The method of claim 1, wherein the streaming transmission comprises:
generating a metadata file for each layer, targeting media data separated for each layer; and
Transmitting the metadata file generated for each layer through the plurality of networks;
Media streaming transmission method comprising a.
상기 메타데이터 파일은 분할 정보, 코덱 정보 및 접속 아이피 주소정보 중 적어도 하나를 포함하는 것을 특징
으로 하는 미디어 스트리밍 전송방법.According to claim 3,
The metadata file includes at least one of partition information, codec information, and access IP address information.
A media streaming transmission method.
가용 네트워크 수에 따라 상기 인코딩부의 인코딩을 위한 계층을 할당하는 계층 제어부;
상기 인코딩부에서 생성된 미디어 데이터를 각 계층 별로 분리하는 계층 분리부;
상기 계층 분리부에서 각 계층 별로 분리된 미디어 데이터를 세그먼트들로 분할하는 세그먼트 생성부;
상기 세그먼트 생성부에서 분할된 미디어 데이터의 세그먼트들을 각각 저장하는 저장부; 및
상기 저장부에 저장된 세그먼트들을 메인 아이피 네트워크를 통해 우선적으로 전송하고 나머지 세그먼트들을 적
어도 하나의 서브 아이피 네트워크를 통해 전송하는 미디어 전송부;
를 포함하는 것을 특징으로 하는 미디어 전송장치.an encoding unit generating media data by encoding predetermined content into a plurality of layers;
a layer controller allocating a layer for encoding by the encoding unit according to the number of available networks;
a layer separator separating the media data generated by the encoding unit for each layer;
a segment generation unit dividing the media data separated by each layer in the layer separation unit into segments;
a storage unit to store each of the segments of the media data divided by the segment generation unit; and
The segments stored in the storage unit are preferentially transmitted through the main IP network, and the remaining segments are loaded.
a media transmitter for transmitting through at least one sub-IP network;
A media transmission device comprising a.
상기 세그먼트 생성부에서 세그먼트들로 분할된 미디어 데이터를 대상으로 각 계층 별로 메타데이터 파일을 생
성하고 생성된 메타데이터 파일을 상기 다수의 네트워크를 통해 전송하는 메타데이터 생성부;
를 더 포함하는 것을 특징으로 하는 미디어 전송장치.According to claim 5,
The segment generator generates metadata files for each layer targeting the media data divided into segments.
a metadata generation unit for generating and transmitting generated metadata files through the plurality of networks;
A media transmission device characterized in that it further comprises.
소정의 콘텐트를 다수의 계층으로 인코딩하여 생성된 미디어 데이터를 다수의 네트워크를 통해 미디어 전송장치
로부터 수신하는 단계; 및
상기 수신된 미디어 데이터를 디코딩하는 단계를 포함하고,
상기 미디어 전송장치로부터 수신된 미디어 데이터는 다수의 계층으로 인코딩된 후 분할된 세그먼트들로 구성되
고,
상기 다수의 네트워크를 통해 미디어 전송장치로부터 수신하는 단계는,
우선적으로 메인 아이피 네트워크가 수용할 수 있는 계층까지의 세그먼트를 상기 메인 아이피 네트워크를 통해
수신하고, 상기 메인 아이피 네트워크를 통해 모든 세그먼트가 수신되지 않은 경우 수신되지 않은 나머지 계층
의 세그먼트를 적어도 하나의 서브 아이피 네트워크를 통해 수신하는 것을 특징으로 하는 미디어 스트리밍 수신
방법.In the media streaming receiving method of the media receiving device,
Media transmission device through multiple networks for media data generated by encoding predetermined content into multiple layers
receiving from; and
decoding the received media data;
The media data received from the media transmission device is composed of segments after being encoded in multiple layers.
go,
Receiving from the media transmission device through the plurality of networks,
First of all, segments up to the layer that the main IP network can accommodate are transmitted through the main IP network.
and, if all segments are not received through the main IP network, the remaining layers not received
Media streaming reception, characterized in that for receiving a segment of through at least one sub-IP network
method.
미디어 데이터 인코딩 이후 계층 별로 생성된 메타데이터 파일을 상기 미디어 전송장치로부터 수신하는 단계;
및
상기 수신된 계층 별 메타데이터 파일을 이용하여 상기 미디어 수신장치가 접속할 적어도 하나의 네트워크를 결
정하는 단계; 를 더 포함하며,
상기 미디어 데이터를 다수의 네트워크를 통해 미디어 전송장치로부터 수신하는 단계는,
상기 결정된 적어도 하나의 네트워크에 접속하여 상기 미디어 전송장치로부터 미디어 데이터를 수신하는 것을
특징으로 하는 미디어 스트리밍 수신방법.According to claim 7,
Receiving from the media transmission device a metadata file generated for each layer after media data encoding;
and
At least one network to be accessed by the media receiving device is determined using the received metadata file for each layer.
determining step; Including more,
Receiving the media data from a media transmission device through multiple networks includes:
Receiving media data from the media transmission device by accessing the determined at least one network.
Media streaming receiving method characterized by.
상기 미디어 전송장치로부터 수신된 메타데이터 파일의 개수를 확인하여 상기 미디어 수신장치가 접속 가능한
네트워크의 개수를 결정하는 단계; 및
메타데이터 파일에 포함된 접속 아이피 주소정보를 통해 확인된 네트워크 별로 네트워크 상태 정보를 이용하여 접속 가능한 네트워크 중에서 접속할 적어도 하나의 네트워크를 결정하는 단계;
를 포함하는 것을 특징으로 하는 미디어 스트리밍 수신방법.9. The method of claim 8, wherein the step of determining at least one network to which the media receiving device is to access comprises:
By checking the number of metadata files received from the media transmission device, the media receiving device can access
determining the number of networks; and
Determining at least one network to be accessed from among accessible networks using network status information for each network identified through access IP address information included in the metadata file;
Media streaming receiving method comprising a.
상기 다수의 네트워크를 통해 상기 미디어 전송장치로부터 수신된 미디어 데이터의 세그먼트들을 동기화하는 단
계; 및
상기 동기화된 세그먼트들을 디코딩하는 단계;
를 포함하는 것을 특징으로 하는 미디어 스트리밍 수신방법.8. The method of claim 7, wherein decoding the received media data comprises:
Synchronizing segments of media data received from the media transmission device through the plurality of networks
total; and
decoding the synchronized segments;
Media streaming receiving method comprising a.
계층 정보와 네트워크 상태 정보를 이용하여 동기화할 세그먼트들의 개수를 결정하고 동기화 개수가 결정된 세
그먼트들을 동기화하는 것을 특징으로 하는 미디어 스트리밍 수신방법.11. The method of claim 10, wherein synchronizing segments of the received media data comprises:
The number of segments to be synchronized is determined using layer information and network state information, and the number of synchronized segments is determined.
A method for receiving media streaming, characterized in that synchronizing the segments.
로부터 수신하는 미디어 수신부; 및
상기 미디어 수신부에서 수신된 미디어 데이터를 디코딩하는 디코딩부를 포함하고,
상기 미디어 전송장치로부터 수신된 미디어 데이터는 다수의 계층으로 인코딩된 후 분할된 세그먼트들로 구성되
고,
상기 미디어 수신부는,
우선적으로 메인 아이피 네트워크가 수용할 수 있는 계층까지의 세그먼트를 상기 메인 아이피 네트워크를 통해
수신하고, 상기 메인 아이피 네트워크를 통해 모든 세그먼트가 수신되지 않은 경우 수신되지 않은 나머지 계층
의 세그먼트를 적어도 하나의 서브 아이피 네트워크를 통해 수신하는 것을 특징으로 하는 미디어 수신장치.Media transmission device through multiple networks for media data generated by encoding predetermined content into multiple layers
a media receiving unit receiving from; and
a decoding unit for decoding the media data received by the media receiving unit;
The media data received from the media transmission device is composed of segments after being encoded in multiple layers.
go,
The media receiver,
First of all, segments up to the layer that the main IP network can accommodate are transmitted through the main IP network.
and, if all segments are not received through the main IP network, the remaining layers not received
A media receiving device characterized in that for receiving a segment of at least one sub-IP network.
미디어 데이터 인코딩 이후 계층 별로 생성된 메타데이터 파일을 상기 미디어 전송장치로부터 수신하고, 계층
별 메타데이터 파일과 네트워크 상태정보를 이용하여 상기 미디어 수신장치가 접속할 적어도 하나의 네트워크를
결정하는 스트리밍 제어부; 를 더 포함하며,
상기 미디어 수신부는,
상기 스트리밍 제어부에서 결정된 적어도 하나의 네트워크를 통해 상기 미디어 전송장치로부터 미디어 파일을
수신하는 것을 특징으로 하는 미디어 스트리밍 수신장치.According to claim 12,
After media data encoding, a metadata file generated for each layer is received from the media transmission device, and
At least one network to be accessed by the media receiving device is determined using each metadata file and network state information.
a streaming control unit that determines; Including more,
The media receiver,
A media file is transmitted from the media transmission device through at least one network determined by the streaming control unit.
Media streaming receiving device, characterized in that for receiving.
다수의 네트워크 별 상태를 분석하여 가용 네트워크에 대한 네트워크 상태 정보를 상기 스트리밍 제어부에 제공
하는 채널 분석부;
를 더 포함하는 것을 특징으로 하는 미디어 수신장치.According to claim 13,
Analyzing the state of each network and providing network state information on available networks to the streaming control unit
a channel analysis unit;
Media receiving device characterized in that it further comprises.
상기 다수의 네트워크를 통해 상기 미디어 전송장치로부터 수신된 미디어 데이터의 세그먼트들을 동기화하는 동기화부;
를 더 포함하는 것을 특징으로 하는 미디어 스트리밍 수신장치.According to claim 12,
a synchronizing unit that synchronizes segments of media data received from the media transmission device through the plurality of networks;
Media streaming receiving device characterized in that it further comprises.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210132045A KR20230049204A (en) | 2021-10-06 | 2021-10-06 | Adaptive media streaming transmission method and apparatus for multi network |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020210132045A KR20230049204A (en) | 2021-10-06 | 2021-10-06 | Adaptive media streaming transmission method and apparatus for multi network |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20230049204A true KR20230049204A (en) | 2023-04-13 |
Family
ID=85979051
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020210132045A KR20230049204A (en) | 2021-10-06 | 2021-10-06 | Adaptive media streaming transmission method and apparatus for multi network |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR20230049204A (en) |
-
2021
- 2021-10-06 KR KR1020210132045A patent/KR20230049204A/en unknown
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210329315A1 (en) | Adaptive content delivery network | |
KR101808639B1 (en) | Adaptive media streaming transmission method and apparatus for multi network | |
RU2328086C2 (en) | Data flow commutation based on gradual recovery during decoding | |
US9781188B2 (en) | Method for transreceiving media content and device for transreceiving using same | |
CA2839553C (en) | Media content transceiving method and transceiving apparatus using same | |
JP5338394B2 (en) | VIDEO DISTRIBUTION SYSTEM, VIDEO DISTRIBUTION METHOD, VIDEO DISTRIBUTION DEVICE, AND VIDEO DISTRIBUTION PROGRAM | |
KR20130014508A (en) | Bit rate adjustment in an adaptive streaming system | |
KR20100037659A (en) | Method and apparatus for hierarchical transmission/reception in digital broadcast | |
KR20130127211A (en) | Adaptive media streaming transmission method and apparatus for multi network environment | |
US10499094B2 (en) | Transmission apparatus, transmitting method, reception apparatus, and receiving method | |
KR20100071688A (en) | A streaming service system and method for universal video access based on scalable video coding | |
EP2627082A2 (en) | Method for transmitting a scalable http stream for natural reproduction upon the occurrence of expression-switching during http streaming | |
US20200021867A1 (en) | Broadcast signal transmitting and receiving method and device | |
KR101697385B1 (en) | Channel adaptive hierarchy broadcasting apparatus and method | |
WO2015146647A1 (en) | Transmission device, transmission method, reception device, reception method, and program | |
US20230345062A1 (en) | Multiplexed place shifting device | |
JP2011511554A (en) | Method for streaming video data | |
US10045162B2 (en) | Device and method for transmitting and receiving media service in hybrid network | |
KR20230049204A (en) | Adaptive media streaming transmission method and apparatus for multi network | |
KR20230121950A (en) | Adaptive media streaming transmission method and apparatus for multi network | |
KR101656193B1 (en) | MMT-based Broadcasting System and Method for UHD Video Streaming over Heterogeneous Networks | |
KR20080098119A (en) | Apparatus of transmitting real time moving picture using wireless multiple access, apparatus of receiving real time moving picture using wireless multiple access, apparatus of transmitting/receiving real time moving picture using wireless multiple access and method thereof | |
KR102211539B1 (en) | The method and apparatus for the additional information generation for the streaming complying with buffer model | |
US11949929B2 (en) | Systems and methods for delay manifests in ABR content delivery | |
Vaz et al. | Integrated broadband broadcast video scalability usage proposal to next-generation of brazilian DTTB system |