WO2012047004A2 - Ｈｔｔｐ 스트리밍의 표현 스위칭시 자연스런 재생을 위한 스케일러블한 ｈｔｔｐ 스트리밍 전송 방법 - Google Patents

Ｈｔｔｐ 스트리밍의 표현 스위칭시 자연스런 재생을 위한 스케일러블한 ｈｔｔｐ 스트리밍 전송 방법 Download PDF

Info

Publication number
WO2012047004A2
WO2012047004A2 PCT/KR2011/007340 KR2011007340W WO2012047004A2 WO 2012047004 A2 WO2012047004 A2 WO 2012047004A2 KR 2011007340 W KR2011007340 W KR 2011007340W WO 2012047004 A2 WO2012047004 A2 WO 2012047004A2
Authority
WO
WIPO (PCT)
Prior art keywords
segments
representation
expression
bit rate
transmitting
Prior art date
Application number
PCT/KR2011/007340
Other languages
English (en)
French (fr)
Other versions
WO2012047004A3 (ko
Inventor
이충구
이을호
Original Assignee
㈜휴맥스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ㈜휴맥스 filed Critical ㈜휴맥스
Priority to EP11830889.9A priority Critical patent/EP2627082A4/en
Priority to CN201180055312.7A priority patent/CN103210642B/zh
Priority to US13/877,995 priority patent/US9369508B2/en
Publication of WO2012047004A2 publication Critical patent/WO2012047004A2/ko
Publication of WO2012047004A3 publication Critical patent/WO2012047004A3/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/12—Systems in which the television signal is transmitted via one channel or a plurality of parallel channels, the bandwidth of each channel being less than the bandwidth of the television signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H20/00—Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/65—Arrangements characterised by transmission systems for broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation

Definitions

  • the present invention relates to an HTTP streaming technology, which is one of multimedia transmission methods, and more particularly, to a processing method that enables natural playback when an expression switching occurs during HTTP streaming transmission.
  • the recent development of mobile communication technology has rapidly promoted the popularization of mobile communication terminals, transforming our lives so that most ordinary people always carry mobile communication terminals such as mobile phones, PDAs and smart phones.
  • the mobile communication terminal has an effect of allowing the user to more easily access the communication network while efficiently allocating system resources of the conventional communication system.
  • a streaming service capable of receiving and playing multimedia content such as audio content and video content in real time through a wireless content communication network while using a mobile communication terminal.
  • the streaming service applied to the wired IPTV is provided with a streaming service in the form of a Real-time Transport Protocol (RTP) protocol or a combination of RTP and MPEG-2.
  • RTP Real-time Transport Protocol
  • RTP operates on the UDP protocol.
  • UDP divides multimedia content into a plurality of packets and transmits them to a receiver, and then does not check whether the transmitted packets arrive at the receiver in the correct order. For this reason, packet loss may occur, and when packet loss occurs, content loss may be caused because the lost content packet is not retransmitted to the receiver. Therefore, a method of providing a streaming service using a Hyper Text Protocol (HTTP) operating on a TCP protocol is commonly used in a mobile communication terminal such as a smartphone. This is generally referred to as 'HTTP streaming'.
  • HTTP Hyper Text Protocol
  • HTTP is a protocol used to transmit texts and images such as hypertext
  • a mobile communication terminal such as a smart phone provides a multimedia content streaming service using HTTP
  • the multimedia content is large. There is a problem that can not provide a streaming service.
  • FIG. 1 the internal structure of the system for the HTTP streaming service will be described in more detail with reference to FIG. 1.
  • FIG. 1 is a block diagram schematically illustrating an internal structure of a system for an HTTP streaming service in a multimedia system.
  • the system for HTTP streaming service may include a server 101 and a client, and may further include a storage 103 and a buffer 104.
  • the server 101 may divide the multimedia content to be streamed into a plurality of segments with the same size or a different size.
  • the server 101 may generate and store a plurality of segments by dividing the multimedia content to be streamed in units of 2 seconds.
  • the same multimedia content may have different versions according to the type of bit rate, resolution, encoding codec, etc., which may be expressed as a representation. For example, if the playback time of the multimedia content is 90 minutes and the bit rates corresponding to the content information are 75kbps, 150kbps, and 300kbps versions, the server 101 displays the multimedia content with the playback time of 90 minutes according to the respective versions.
  • the multimedia content can be divided into 2700 segments. Since the server 101 may have different versions depending on the type of bit rate, resolution, encoding codec, etc., the multimedia content is divided into a total of 8100 segments.
  • the server 101 divides multimedia content to be streamed into a plurality of segments with different sizes. For example, if the playback time of the multimedia content is 90 minutes and the bit rates corresponding to the content information are 75kbps, 150kbps and 300kbps versions, the server 101 divides the playback time into 2 second units from 0 minutes to 3 minutes. As a result, the multimedia content can be divided into a plurality of segments, and the multimedia content can be divided into a plurality of segments by dividing the content into three segments every three to four minutes.
  • the segments generated by the server 101 are composed of one GOP (Group of Picture, hereinafter referred to as 'GOP'), and the GOP is based on a header part and intra-frame encoding. It consists of an I (Intra-coded) frame, a P (Predictive-coded) frame and a B-Bi-directionally Predictive coded (B) frame based on predictive coding.
  • GOP Group of Picture, hereinafter referred to as 'GOP'
  • I Intra-coded
  • P Predictive-coded
  • B B-Bi-directionally Predictive coded
  • the server 101 that divides the multimedia content into a plurality of segments allocates URL information to a plurality of segments divided into a predetermined number, stores the URL information for each segment in a media information file, and stores the client 102.
  • the media information file may be called various names such as 'media presentation description (MPD)' or 'manifest file' according to a standardization mechanism for standardizing HTTP streaming.
  • the server 101 can detect that the client 102 initiates a streaming service. When the server 101 detects that the client 102 starts the streaming service, the server 101 transmits the media information file storing the URL information about the segment to the client 102 through the buffer 104. The server 101 receives a segment request message by the client 102, receives a segment corresponding to the segment URL information included in the segment transmission request message from the storage 103, and transmits the segment to the client 102.
  • the segment request message includes information used to retrieve the segment, for example, URL information and version.
  • Client 102 may initiate a streaming service.
  • the client 102 receives a media information file containing URL information for the segments from the server 101.
  • the client 102 may detect a network transmission environment and transmit a segment request message to the server 101 requesting a segment to be output according to the detected current network transmission environment.
  • the client 102 includes the URL information of the segment to be output in the segment request message and transmits it to the server 101.
  • the client 102 may receive and output a segment from the server 101. For example, the client 102 detects that the network transmission environment is bad, requests the server 101 to transmit a segment corresponding to the low bit rate, and receives the segment corresponding to the low bit rate from the server 101 to perform decoding. In this case, since the P frame of the segment corresponding to the low bit rate is decoded by referring to the I frame of the high bit rate, the representation switching may occur and the screen may be broken.
  • the storage unit 103 receives the segments divided by the server 101 and stores the received segments corresponding to the content information and time. In addition, when the server 101 receives the segment request message from the client 102, the storage 103 searches for a segment corresponding to the URL received from the server 101 and transmits the segment to the server 101. 2 and 3, the storage unit 103 when the server 101 divides the multimedia content into predetermined periods of time which are not identical or identical, and stores the multimedia content in the storage unit 103 for the HTTP streaming service. The internal structure of the will be described in more detail.
  • FIG. 2 is a block diagram when multimedia content is divided into a plurality of segments and stored in the same size for an HTTP streaming service
  • FIG. 3 illustrates that multimedia content is divided into a plurality of segments with a same size for an HTTP streaming service.
  • a block diagram in the case of being divided and stored.
  • the server 101 may divide the multimedia content to be streamed into a plurality of segments having the same size or a different size.
  • the server 101 divides multimedia content to be streamed into the same size into a plurality of segments. For example, if the playback time of the multimedia content is 90 minutes, the bit rates corresponding to the content information are 500kbps, 1Mbps and 2Mbps versions, and the resolution is SD, 720P, HD version, the server 101 is playing time
  • This 90-minute multimedia content is divided into 2700 segments in units of 2 seconds according to each piece of content information, and the divided 2700 segments are divided into bitrates of 500 kbps, 1 Mbps, 2 Mbps, and resolution SD, 720P, and HD.
  • a total of 8100 segments are generated by creating segments with different representations.
  • the segments generated by the server 101 are composed of one GOP, and the GOP is composed of a header part and an I frame based on intra-frame coding, and a P frame and B frame based on predictive coding.
  • segments containing content from 0 to 2 seconds are segments 203 corresponding to a version having a bit rate of 500 kbps and a resolution of SD, and segments 204 corresponding to a version having a bit rate of 1 Mbps and a resolution of 720P.
  • the bit rate is 2Mkbps and the segment is composed of a segment 205 corresponding to the HD level version, and the remaining segments can be divided into 2700 segments by dividing by 2 seconds.
  • the server 101 divides multimedia content to be streamed into a plurality of segments with different sizes.
  • the playback time of the multimedia content is 90 minutes
  • the bit rates corresponding to the content information are 500kbps, 1Mbps and 2Mbps versions
  • the resolution is SD, 720P, HD version
  • the server 101 is a multimedia content
  • the multimedia content may be divided into a plurality of segments by dividing the data into units of 3 seconds from 0 seconds to 3 seconds and 2 seconds from 3 seconds to 5 seconds according to the respective content information.
  • the segments generated by the server 101 are composed of one GOP, and the GOP is composed of a header part and an I frame based on intra-frame coding, and a P frame and B frame based on predictive coding.
  • the server 101 generates segments in proportion to the multiple of the number of versions according to the content information. For this reason, when the URL information corresponding to a large amount of segments is included in the media information file, the media information file becomes large and cannot be provided to the client 102 at a high speed.
  • segments including content from 0 to 3 seconds are segments 303 corresponding to a version having a bit rate of 500 kbps and SD, and segments 304 corresponding to a version having a bit rate of 1 Mbps and 720P.
  • Segment 305 corresponding to a version having a bit rate of 2Mkbps and HD resolution and segments containing contents of 3 to 5 seconds are segments corresponding to a version of SD of 500kbps and resolution of SD
  • the segment 306 may correspond to a version having a bit rate of 1 Mbps and a resolution of 720P, and the segment corresponding to a version having a bit rate of 2 Mkbps and a resolution of HD class.
  • the server 101 generates segments in proportion to the multiple of the number of versions according to the content information. Therefore, when the URL information corresponding to a large amount of segments is included in the media information file, the media information file becomes large and cannot be provided to the client 102 at a high speed.
  • Client 102 may initiate a streaming service.
  • the client 102 may receive and output a segment corresponding to a predetermined expression from the server 101.
  • the client 102 may detect a current channel state and request a segment corresponding to the current channel state to the server 101. For example, when the client 102 receives a segment corresponding to a bit rate of 300 kbps and is outputting to the screen, and detects that the current channel state is worse, the server 102 transmits a segment corresponding to a low bit rate. ) And receive a segment having a bit rate of 150 kbps from the server 101 and output it.
  • the client 102 detects that the network transmission environment is bad, requests the server 101 to transmit a segment corresponding to the low bit rate, and receives the segment corresponding to the low bit rate from the server 101 to perform decoding.
  • the representation switching may occur and the screen may be interrupted.
  • each segment has different lengths of reproduction time
  • the reproduction time of the segment currently being output and the reproduction time of the segment to be received and output from the server 101 do not follow. For example, if the playback time of the currently output segment corresponds to 9 minutes 30 seconds to 12 minutes 00 seconds, but the playback time of the segment received from the server 101 to be output is 12 minutes 03 seconds to 15 minutes 00 seconds, When switching from the currently output segment to the next segment to be output, that is, when the expression switching occurs, the screen may be interrupted.
  • a first object of the present invention for solving the above problems is to provide an HTTP streaming transmission method and apparatus for enabling a natural playback when the expression switching occurs.
  • a method of transmitting HTTP streaming comprising: configuring a plurality of segments configured with a base layer of scalable video coding for a first representation; Constructing a plurality of segments composed of an enhanced layer of scalable video coding for a second representation of higher quality than the first representation, and among the plurality of segments for the first representation in transmission of the first representation Transmitting at least a portion and transmitting at least a portion of the plurality of segments for the second representation together with at least some of the plurality of segments for the first representation in the transmission of the second expression.
  • a part of a plurality of segments constituting the first expression is received from the HTTP streaming server and played. And a part of the plurality of segments constituting the first expression and a part of the plurality of segments constituting the second expression when received from the HTTP streaming server. .
  • a part of the first representation composed of segments of low bit rate and scalable in the base layer of scalable video coding is scalable.
  • Receiving a portion of a second representation consisting of segments of high bit rate in an enhanced layer of video coding, and when a representation switching is made from high bit rate to low bit rate, the first representation received together upon receiving the second representation Can be used as a reference when decoding a low bit rate segment to be played next, thereby providing multimedia content without interruption of the screen.
  • FIG. 1 is a block diagram schematically illustrating an internal structure of a system for an HTTP streaming service in a multimedia system.
  • FIG. 2 is a block diagram when multimedia content is divided into a plurality of segments and stored in the same size for an HTTP streaming service.
  • 3 is a block diagram when multimedia content is divided into a plurality of segments and stored in different sizes for the HTTP streaming service.
  • FIG. 4 is a block diagram schematically illustrating an internal structure of a system for an HTTP streaming service according to an embodiment of the present invention.
  • FIG. 5 is a flowchart illustrating an HTTP streaming transmission process according to an embodiment of the present invention.
  • FIG. 6 is a flowchart illustrating an HTTP streaming receiving process according to an embodiment of the present invention.
  • first, second, A, and B may be used to describe various components, but the components should not be limited by the terms. The terms are used only for the purpose of distinguishing one component from another.
  • the first component may be referred to as the second component, and similarly, the second component may also be referred to as the first component.
  • the server 401 divides the multimedia content to be streamed into the same size or the same size into a plurality of segments, and configures a plurality of segments composed of the enhanced layer 421 of scalable video coding for the second representation. can do.
  • the segments generated by the server 401 are composed of one GOP, and the GOP is composed of an I frame based on a header part and intra-frame coding, and a P frame and B frame based on predictive coding.
  • the server 401 divides the multimedia content to be streamed in the same size into a plurality of segments, and divides the plurality of segments composed of the scalable video enhanced layer 421 for the second high-definition representation compared to the first expression.
  • the second representation since the second representation has a higher quality than the first representation, the second representation may have a bit rate higher than the bit rate of the first representation.
  • the first representation may have a first bit rate
  • the second representation may have a second bit rate higher than the first bit rate.
  • the first representation may have a bit rate of 512kbps and the second representation of 768kbps.
  • the first representation may have a bit rate of 500 kbps and the second representation is 1 Mbps.
  • the server 401 may have a playback time. 10 minutes of multimedia is divided into two seconds, and 300 segments of the scalable video coding base layer 411 corresponding to the bit rate 500 Kbps of the first representation are composed and scalable to the bit rate of 1 Mbps of the second representation. 300 segments composed of the enhanced layer 421 of video coding may be configured.
  • the server 401 divides the multimedia content to be streamed in a different size into a plurality of segments, and comprises a plurality of scalable video enhanced layers 421 for a second representation of higher quality than the first expression. A case of constructing a segment will be described. According to an embodiment of the present invention, if the playback time of the multimedia content is 10 minutes, the bit rate corresponding to the first representation is 500 kbps and the bit rate corresponding to the second representation is 1 Mbps, the server 401 may have a playback time.
  • Server 401 may receive a request to send a segment from client 402.
  • the client 402 receives a portion of the segment configured with the enhanced layer 421 of scalable video coding, and outputs a segment corresponding to a bit rate of 1 Mbps of the second representation.
  • the server 401 is the base layer 411 corresponding to 50 Kbps in the bit rate of the first representation At least some of the plurality of segments consisting of) are transmitted to the client 402.
  • the server 101 receives a portion of the segment composed of the base layer 411 of the scalable video coding by the client 102 and outputs a segment corresponding to the bit rate 500 Kbps of the first representation.
  • the server 401 receives a request for transmission of a segment corresponding to a high bit rate from the client 402 as the current channel state is improved, the server 401 corresponds to a bit rate of 50 Kbps in the first representation.
  • Client 102 may initiate a streaming service.
  • the client 402 receives some of the segments constituting the first representation composed of the base layer 411 from the server 401 and corresponds to the bit rate 500 Kbps of the first representation. Outputs the segment
  • the client 402 detects the current channel state, and if the current channel state is changed, requests the segment to the server 401 for a transmission request, and outputs the received segment according to the request.
  • a multimedia video having a playback time of 10 minutes is divided into 60 playback sections having a playback section of 10 seconds, and then a segment corresponding to a bit rate of 500 Kbps of the first representation is generated to generate scalable video.
  • 60 segments composed of scalable layer 421 of scalable video coding are constructed by constructing 60 segments composed of coding base layer 411 and generating segments corresponding to bit rate 1Mbps of the second representation. do.
  • the server 402 detects that the current channel state is improved, the bit rate 500 Kbps of the first representation from the server 402. At least some of the plurality of segments configured of the base layer 411 corresponding to and the enhanced layer 421 corresponding to the bit rate 1Mbps of the second representation are received.
  • the server 402 detects a deterioration of the current channel state, and thus the bit rate 500 Kbps of the first representation from the server 402.
  • the client 402 may receive a base when the enhanced layer 421 of the video coding currently being decoded and output is received.
  • the P frame of the segment included in the base layer 411 received from the server 401 is decoded and output using the I frame of the segment corresponding to the bit rate 500 Kbps of the first representation of the layer 411.
  • FIG. 5 is a flowchart illustrating an HTTP streaming transmission process according to an embodiment of the present invention.
  • the server 401 configures a plurality of segments configured as a base layer of scalable video coding with respect to the first representation (S501).
  • the server 401 may divide the multimedia content to be streamed into the same size or the same size into a plurality of segments to form a plurality of segments configured of the base layer 411 of scalable video coding for the first representation.
  • the segments generated by the server 401 are composed of one GOP, and the GOP is composed of an I frame based on a header part and intra-frame coding, and a P frame and B frame based on predictive coding.
  • the server 401 configures a plurality of segments composed of the base layer 411 of scalable video coding for the first representation by dividing the multimedia content to be streamed into the same size into a plurality of segments. Shall be.
  • the server 401 divides the multimedia content into 2 second units having a playback time of 10 minutes and then divides the first content into the first. 300 segments corresponding to a bit rate of 500 Kbps of a representation are generated, and 300 segments of the base layer 411 of scalable video coding are configured for the first representation.
  • the server 401 may divide the multimedia content to be streamed into a plurality of segments with different sizes, thereby configuring a plurality of segments including the base layer 411 of scalable video coding for the first representation.
  • the server 401 when the playback time of the multimedia content is 10 minutes and the bit rate corresponding to the first representation is 500 kbps, the server 401 alternates the multimedia with the playback time of 10 minutes in units of 2 seconds and 3 seconds. And segment, and 240 segments of the base layer 411 of scalable video coding are configured for the first representation.
  • the server 401 configures a plurality of segments composed of the enhanced layer 421 of scalable video coding with respect to the second representation having a higher quality than the first representation (S502).
  • the server 401 divides the multimedia content to be streamed into the same size or the same size into a plurality of segments, and configures a plurality of segments composed of the enhanced layer 421 of scalable video coding for the second representation. can do.
  • the segments generated by the server 401 are composed of one GOP, and the GOP is composed of an I frame based on a header part and intra-frame coding, and a P frame and B frame based on predictive coding.
  • the server 401 divides the multimedia content to be streamed in the same size into a plurality of segments, and divides the plurality of segments composed of the scalable video enhanced layer 421 for the second high-definition representation compared to the first expression.
  • the configuration will be described.
  • the server 401 may have a playback time. 10 minutes of multimedia is divided into two seconds, and 300 segments of the scalable video coding base layer 411 corresponding to the bit rate 500 Kbps of the first representation are composed and scalable to the bit rate of 1 Mbps of the second representation. 300 segments of the enhanced layer 421 of video coding are configured.
  • the server 401 divides the multimedia content to be streamed in a different size into a plurality of segments, and comprises a plurality of scalable video enhanced layers 421 for a second representation of higher quality than the first expression. A case of constructing a segment will be described. According to an embodiment of the present invention, if the playback time of the multimedia content is 10 minutes, the bit rate corresponding to the first representation is 500 kbps and the bit rate corresponding to the second representation is 1 Mbps, the server 401 may have a playback time.
  • the server 401 transmits at least some of the plurality of segments for the first representation (S504).
  • the server 101 receives a portion of the segment composed of the enhanced layer 421 of scalable video coding by the client 102 and selects a segment corresponding to a bit rate of 1 Mbps of the second representation.
  • the server 401 receives the transmission request of the segment corresponding to the bit rate 500 Kbps of the first representation from the client 402 in response to detecting the deterioration of the current channel state while outputting (S503)
  • the server 401 At least a part of the plurality of segments including the base layer 411 corresponding to 500 Kbps is transmitted at a bit rate of 1 representation (S504).
  • the server 401 transmits at least a part of the plurality of segments for the second expression together with at least some of the plurality of segments for the first expression (S505).
  • the server 101 receives a portion of the segment composed of the base layer 411 of the scalable video coding by the client 102 and outputs a segment corresponding to the bit rate 500 Kbps of the first representation. If the server 401 receives a request for transmission of a segment corresponding to a bit rate of 1 Mbps of the second representation from the client 402 as the current channel state is improved (S503), the server 401 receives a first request.
  • the server 401 transmits (S505) at least some of the plurality of segments for the second representation together with at least some of the plurality of segments for the first representation.
  • the server 401 may transmit at least some of the plurality of segments for the first representation and at least some of the plurality of segments for the second representation in the transmission of the second representation (S503).
  • the server 401 may transmit at least some of the plurality of segments for the second representation alternately with at least some of the plurality of segments for the first representation.
  • FIG. 6 is a flowchart illustrating an HTTP streaming receiving process according to an embodiment of the present invention.
  • the client 402 when the current channel state is changed (S601), the client 402 requests the server 401 to transmit a segment and outputs the received segment according to the request.
  • the client 402 requests a segment of a bit rate corresponding to the first representation (S602)
  • the client 402 receives and reproduces some of the plurality of segments constituting the first representation (S603).
  • a multimedia video having a playback time of 10 minutes is divided into 60 playback sections having a playback section of 10 seconds, and then a segment corresponding to a bit rate of 500 Kbps of the first representation is generated to generate scalable video.
  • 60 segments composed of scalable layer 421 of scalable video coding are constructed by constructing 60 segments composed of coding base layer 411 and generating segments corresponding to bit rate 1Mbps of the second representation. do.
  • the server 402 detects a deterioration of the current channel state, and thus the bit rate 500 Kbps of the first representation from the server 402.
  • the client 402 may receive a base when the enhanced layer 421 of the video coding currently being decoded and output is received.
  • the P frame of the segment included in the base layer 411 received from the server 401 is decoded and output using the I frame of the segment corresponding to the bit rate 500 Kbps of the first representation of the layer 411.
  • the client 402 When the client 402 requests a segment having a bit rate corresponding to the second representation (S602), the client 402 receives and reproduces some of the plurality of segments constituting the first representation and some of the plurality of segments constituting the second representation. (S604).
  • the server 402 detects that the current channel state is improved, the bit rate 500 Kbps of the first representation from the server 402. At least some of the plurality of segments configured of the base layer 411 corresponding to and the enhanced layer 421 corresponding to the bit rate 1Mbps of the second representation are received.
  • FIG. 6 an example of receiving and playing some of a plurality of segments constituting the second expression together with some of the plurality of segments constituting the first expression has been described. At least one of a part of the plurality of segments constituting the part and the second expression may be received and reproduced. For example, some of the plurality of segments constituting the first representation and some of the plurality of segments constituting the second representation may be alternately received and reproduced.
  • a method of transmitting HTTP streaming includes configuring a plurality of segments having a first bit rate of scalable video coding for a first representation, and scalable video for a second representation. Constructing a plurality of segments having a second bit rate of coding, wherein the second bit rate is higher than the first bit rate, and scalable video comprising at least one of the first representation and the second representation. Transmitting the coding streaming.
  • An apparatus for transmitting HTTP streaming configures a plurality of segments having a first bit rate of scalable video coding for a first representation, and a second bit of scalable video coding for a second representation.
  • a generation unit constituting a plurality of segments having a rate, wherein the second bit rate is higher than the first bit rate, and a scalable video coded streaming comprising at least one of the first representation and the second representation. It includes a transmission unit.
  • the transmission unit may transmit at least a part of a plurality of segments for the first representation when the first representation is transmitted.
  • the transmission unit may transmit at least one of a portion of the plurality of segments for the first expression and a portion of the plurality of segments for the second expression when the second expression is transmitted.
  • the transmission unit may alternately transmit some of the plurality of segments for the first expression and some of the plurality of segments for the second expression when the second expression is transmitted.
  • an HTTP streaming including at least one of a first representation and a second representation in an HTTP streaming receiver is received.
  • the method for receiving HTTP streaming according to an embodiment of the present invention includes receiving a first representation from an HTTP streaming server, the first representation including at least some of a plurality of segments having a first bit rate of scalable video coding; And receiving a second representation from the HTTP streaming server, the second representation comprising at least some of a plurality of segments having a second bit rate of the scalable video coding, wherein the second bit rate is higher than the first bit rate. And reproducing at least one of a plurality of segments constituting the first representation and at least one of a plurality of segments constituting the second representation from the HTTP streaming server. Steps.
  • the scalable video coding (SVC) content includes a first representation, a second representation, and a third representation. It can also be extended to have expressions.
  • the first representation may have a first bit rate
  • the second representation may have a second bit rate higher than the first bit rate
  • the third representation may have a third bit higher than the second bit rate. It can have a data rate.
  • the first representation may have a bit rate of 512k, the second representation 768k, and the third representation video 1024k.

Abstract

HTTP 스트리밍 전송 중에 표현 스위칭이 일어날 경우의 자연스러운 재생을 가능케하는 처리 방법이 개시된다. 제 1 표현에 대해서, 스케일러블 비디오 코딩의 베이스 레이어로 구성된 복수의 세그먼트를 구성하는 단계, 상기 제 1 표현에 비해서 고화질의 제 2 표현에 대해서, 스케일러블 비디오 코딩의 인핸스드 레이어로 구성된 복수의 세그먼트를 구성하는 단계 및 상기 제 1 표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송하고, 상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 함께 상기 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송하는 단계를 포함하여 구설될 수 있다. 따라서, 표현 스위칭이 발생될 경우, 제 2 표현에서 베이스 레이어만을 추출하여 다음에 재생될 저비트율 세그먼트를 디코딩할 때 참조하여 사용할 수 있기 때문에 화면의 끊김 없이 멀티미디어 컨텐츠를 제공할 수 있다.

Description

ＨＴＴＰ 스트리밍의 표현 스위칭시 자연스런 재생을 위한 스케일러블한 ＨＴＴＰ 스트리밍 전송 방법
본 발명은 멀티미디어 전송 방법의 하나인 HTTP 스트리밍 기술에 관한 것으로, 더욱 상세하게는 HTTP 스트리밍 전송 중에 표현 스위칭이 일어날 경우의 자연스러운 재생을 가능케하는 처리 방법에 관한 것이다.
최근 이동통신 기술의 발전은 이동통신 단말기의 대중화를 급속히 촉진시켜, 대부분의 일반인들도 핸드폰, PDA, 스마트 폰 등의 이동통신 단말기를 항상 소지하고 다니도록 우리의 생활을 변모시켰다. 이동통신 단말기는 사용자로 하여금 통신망의 접근을 보다 용이하게 하면서 종래의 전통적인 통신 시스템이 가지던 시스템 자원을 효율적으로 배분하게 하는 효과를 가져왔다.
이러한 기술 중에 이동통신 단말기를 가지고 이동 중에도 무선 컨텐츠 통신망을 통해 오디오 컨텐츠 및 비디오 컨텐츠와 같은 멀티미디어 컨텐츠를 실시간으로 전송 받아 재생할 수 있는 스트리밍 서비스가 제공되고 있다. 유선 IPTV에 적용되는 스트리밍 서비스는 멀티미디어 컨텐츠를 RTP(Real-time Transport Protocol)프로토콜 또는 RTP와 MPEG-2가 결합된 형태로 스트리밍 서비스가 제공된다.
하지만, 무선을 사용하여 스트리밍 서비스의 경우, RTP 프로토콜 또는 RTP 프로토콜과 MPEG-2가 결합된 형태로 스트리밍 서비스가 제공되는 경우 문제점이 발생한다. 먼저, RTP 프로토콜은 다중화를 지원하지 않기 때문에 멀티미디어 컨텐츠를 복수개의 패킷으로 나누어 전송할 경우, 복수개의 패킷에 따른 복수개의 포트를 열어야 한다는 문제점이 발생하며, 특히 방화벽이 설치된 지역에서는 RTP를 이용하여 스트리밍 서비스를 정상적으로 제공할 수 없다.
둘째로, RTP는 UDP 프로토콜 상에서 동작하게 되며, 무선 인터넷 상에서 UDP는 멀티미디어 컨텐츠를 복수개의 패킷으로 분할하여 수신측으로 전송한 후, 전송된 패킷들이 올바른 순서로 수신측에 도착했는지 확인하지 않는다. 이와 같은 이유로, 패킷의 손실이 발생될 수 있으며, 또한 패킷의 손실이 발생된 경우 손실된 컨텐츠 패킷을 수신측으로 재전송 하지 않기 때문에 컨텐츠의 손실을 가져올 수 있다. 따라서, 스마트폰과 같은 이동통신 단말기에는 TCP 프로토콜 위에서 동작하는 HTTP(Hyper Text Protocol)를 사용하여 스트리밍 서비스를 제공하는 방식이 통상적으로 이용된다. 이를 일반적으로 'HTTP 스트리밍(HTTP streaming)'으로 통칭하고 있다.
일반적으로 HTTP는 하이퍼 텍스트와 같은 텍스트 및 이미지를 전송하는데 사용되는 프로토콜이기 때문에, 스마트폰과 같은 이동통신 단말기에서 HTTP를 사용하여 멀티미디어 컨텐츠 스트리밍 서비스를 제공하는 경우, 멀티미디어 컨텐츠의 용량이 크기 때문에, 실시간으로 스트리밍 서비스를 제공할 수 없다는 문제점이 있다. 그러면 이하에서는 도 1을 참조하여, HTTP 스트리밍 서비스를 위한 시스템의 내부 구조를 보다 구체적으로 설명하기로 한다.
도 1은 멀티미디어 시스템에서 HTTP 스트리밍 서비스를 위한 시스템의 내부 구조를 개략적으로 도시한 블록도이다.
도 1을 참조하면, HTTP 스트리밍 서비스를 위한 시스템은 서버(101) 및 클라이언트를 포함하여 구성될 수 있으며, 저장부(103) 및 버퍼(104)를 더 포함하여 구성될 수 있다. 서버(101)는 동일한 크기 또는 동일하지 않는 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할할 수 있다.
먼저, 서버(101)가 동일한 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하는 경우를 설명하기로 한다. 서버(101)는 스트리밍 대상이 되는 멀티미디어 컨텐츠를 2초 단위로 분할함으로써 복수개의 세그먼트를 생성하고 저장할 수 있다. 이때, 동일한 멀티미디어 컨텐츠에 대해서 비트 전송율, 해상도, 부호화 코덱 등의 종류에 따라서 다른 버전을 가질 수 있으며, 이를 representation 이라 표현할 수 있다. 예를 들어, 멀티미디어 컨텐츠의 재생 시간이 90분이고, 컨텐츠 정보에 해당하는 비트 전송률이 75kbps, 150kbps 및 300kbps버전이 존재할 경우, 서버(101)는 재생 시간이 90분인 멀티미디어 컨텐츠를 각각의 버전에 따라2초 단위로 분할함으로써 멀티미디어 컨텐츠를 2700개의 세그먼트들로 분할할 수 있다. 그리고, 서버(101)는 2700개의 세그먼트들은 비트 전송율, 해상도, 부호화 코덱 등의 종류에 따라서 다른 버전을 가질 수 있기 때문에 멀티미디어 컨텐츠는 총 8100개의 세그먼트로 분할된다.
둘째로, 서버(101)가 동일하지 않은 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하는 경우를 설명하기로 한다. 예를 들어, 멀티미디어 컨텐츠의 재생 시간이 90분이고, 컨텐츠 정보에 해당하는 비트 전송률이 75kbps, 150kbps 및 300kbps버전이 존재할 경우, 서버(101)는 재생 시간이 0분에서 3분까지는 2초 단위로 분할함으로써 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할할 수 있고, 3분에서 4분까지는4초 단위로 분할함으로써 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할할 수 있다.
여기서, 서버(101)에 의해서 생성된 세그먼트들은 하나의 GOP(Group of Picture, 이하 'GOP' 라 칭하기로 함.)로 구성되며, GOP는 헤더부와 프레임내 부호화(intra-frame encoding)에 기초하는 I(Intra-coded) 프레임과, 예측 부호화에 기초하는 P(Predictive-coded) 프레임과 B(Bi-directionally Predictive coded) 프레임으로 구성된다.
멀티미디어 컨텐츠를 복수개의 세그먼트로 분할한 서버(101)는 소정의 개수로 분할된 복수개의 세그먼트들에 URL 정보를 할당하고, 각각의 세그먼트들에 대한 URL 정보를 미디어 정보 파일에 저장하여 클라이언트(102)로 전송한다. 이때, 미디어 정보 파일은 HTTP 스트리밍을 표준화하는 표준화 기구에 따라서 '미디어 표현 기술(MPD: Media Presentation Description)' 또는 '매니페스트 파일(Manifest file)' 등의 다양한 명칭으로 불리어 질 수 있다.
서버(101)는 클라이언트(102)가 스트리밍 서비스를 개시하는 것을 감지할 수 있다. 서버(101)가 클라이언트(102)가 스트리밍 서비스의 개시를 감지할 경우, 세그먼트에 대한 URL 정보를 저장한 미디어 정보 파일을 버퍼(104)를 통해서 클라이언트(102)로 전송한다. 서버(101)는 클라이언트(102)에 의해 세그먼트 요청 메시지를 수신하고, 세그먼트 전송 요청 메시지에 포함된 세그먼트 URL정보에 해당하는 세그먼트를 저장부(103)로부터 수신하여 클라이언트(102)로 전송한다. 여기서, 세그먼트 요청 메시지는 세그먼트를 검색하는데 사용되는 정보, 예를 들어 URL 정보 및 버전을 포함한다.
클라이언트(102)는 스트리밍 서비스를 개시할 수 있다. 클라이언트(102)가 스트리밍 서비스를 개시할 경우, 클라이언트(102)는 서버(101)로부터 세그먼트들에 대한 URL 정보를 포함하는 미디어 정보 파일을 수신한다. 또한, 클라이언트(102)는 네트워크 전송 환경을 감지할 수 있고, 감지된 현재 네트워크 전송 환경에 따라 출력할 세그먼트를 요청하는 세그먼트 요청 메시지를 서버(101)로 전송할 수 있다. 이때, 클라이언트(102)는 출력하고자 하는 세그먼트의 URL 정보를 세그먼트 요청 메시지에 포함시켜 서버(101)로 전송한다.
클라이언트(102)는 서버(101)로부터 세그먼트를 수신하여 출력할 수 있다. 예를 들어, 클라이언트(102)가 네트워크 전송 환경이 나빠졌다고 감지하여 서버(101)로 저비트율에 해당되는 세그먼트 전송을 요청하고, 서버(101)로부터 저비트율에 해당되는 세그먼트를 수신하여 디코딩을 수행할 경우, 고비트율의 I 프레임을 참조하여 저비트율에 해당되는 세그먼트의 P 프레임을 디코딩을 하기 때문에 표현 스위칭이 일어나 화면의 끊김이 발생될 수 있다.
저장부(103)는 서버(101)에 의해 분할된 세그먼트들 수신하고, 수신된 세그먼트들을 컨텐츠 정보 및 시간에 대응하여 저장한다. 또한, 서버(101)가 클라이언트(102)로부터 세그먼트 요청 메시지를 수신할 경우, 저장부(103)는 서버(101)로부터 수신된 URL에 해당하는 세그먼트를 검색하여 서버(101)로 전송한다. 그러면 이하에서 도 2 및 도 3을 참조하여 HTTP 스트리밍 서비스를 위해 서버(101)가 멀티미디어 컨텐츠를 동일한/동일하지 않는 소정의 기간으로 분할하여 저장부(103)에 저장한 경우의 저장부(103)의 내부 구조를 보다 구체적으로 설명하기로 한다.
도 2는 HTTP 스트리밍 서비스를 위해 동일한 크기로 멀티미디어 컨텐츠가 복수개의 세그먼트로 분할되어 저장된 경우의 블록도이고, 도 3은 HTTP 스트리밍 서비스를 위해 멀티미디어 컨텐츠를 동일하지 않은 크기로 멀티미디어 컨텐츠가 복수개의 세그먼트로 분할되어 저장된 경우의 블록도이다.
서버(101)는 동일한 크기 또는 동일하지 않은 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할될 수 있다. 먼저 도 2를 참조하여 서버(101)가 동일한 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하는 경우를 설명하기로 한다. 예를 들어, 멀티미디어 컨텐츠의 재생 시간이 90분이고, 컨텐츠 정보에 해당하는 비트 전송률이 500kbps, 1Mbps 및 2Mbps버전이 존재하고, 해상도가 SD, 720P, HD 버전이 존재할 경우, 서버(101)는 재생 시간이 90분인 멀티미디어 컨텐츠를 각각의 컨텐츠 정보에 따라2초 단위로 분할하여 2700개의 세그먼트들로 분할하고, 이때, 분할된 2700개의 세그먼트는 비트 전송률500kbps, 1Mbps, 2Mbps 및 해상도 SD, 720P, HD에 따라서 다른 표현을 가진 세그먼트로 생성됨으로써 총 8100개의 세그먼트들이 생성된다. 여기서, 서버(101)에 의해서 생성된 세그먼트들은 하나의 GOP로 구성되며, GOP는 헤더부와 프레임내 부호화에 기초하는 I 프레임과, 예측 부호화에 기초하는 P 프레임과 B 프레임으로 구성된다.
즉, 0초부터 2초까지의 컨텐츠를 포함하는 세그먼트들은 비트 전송률이 500kbps이고 해상도가 SD인 버전에 해당하는 세그먼트(203), 비트 전송률이 1Mbps이고 해상도가 720P인 버전에 해당하는 세그먼트(204), 비트 전송률이 2Mkbps이고 해상도가 HD급인 버전에 해당하는 세그먼트(205)로 구성되며, 나머지 세그먼트로 도 2초 단위로 분할됨으로써 2700개의 세그먼트들로 분할할 수 있다.
둘째로, 도 3을 참조하여 서버(101)가 동일하지 않은 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하는 경우를 설명하기로 한다. 예를 들어, 멀티미디어 컨텐츠의 재생 시간이 90분이고, 컨텐츠 정보에 해당하는 비트 전송률이 500kbps, 1Mbps 및 2Mbps버전이 존재하고, 해상도가 SD, 720P, HD 버전이 존재할 경우, 서버(101)는 멀티미디어 컨텐츠를 각각의 컨텐츠 정보에 따라0초부터 3초까지는 3초의 단위로 분할하고, 3초부터 5초까지는 2초 단위로 분할함으로써 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할할 수 있다. 여기서, 서버(101)에 의해서 생성된 세그먼트들은 하나의 GOP로 구성되며, GOP는 헤더부와 프레임내 부호화에 기초하는 I 프레임과, 예측 부호화에 기초하는 P 프레임과 B 프레임으로 구성된다.
즉, 서버(101)는 상기 컨텐츠 정보에 따른 버전의 개수의 배수에 비례한 만큼의 세그먼트를 각각 생성한다. 이와 같은 이유로, 많은 양의 세그먼트에 해당하는 URL 정보를 미디어 정보 파일에 포함시킬 경우, 미디어 정보 파일의 용량은 커지게 되어 빠른 속도로 클라이언트(102)에게 제공할 수 없다는 문제점이 있다.
즉, 0초부터 3초까지의 컨텐츠를 포함하는 세그먼트들은 비트 전송률이 500kbps이고 해상도가 SD인 버전에 해당하는 세그먼트(303), 비트 전송률이 1Mbps이고 해상도가 720P인 버전에 해당하는 세그먼트(304), 비트 전송률이 2Mkbps이고 해상도가 HD급인 버전에 해당하는 세그먼트(305)로 구성되며, 3초부터 5초까지의 컨텐츠를 포함하는 세그먼트들은 비트 전송률이 500kbps이고 해상도가 SD인 버전에 해당하는 세그먼트, 비트 전송률이 1Mbps이고 해상도가 720P인 버전에 해당하는 세그먼트(306), 비트 전송률이 2Mkbps이고 해상도가 HD급인 버전에 해당하는 세그먼트로 구성될 수 있다. 즉, 서버(101)는 상기 컨텐츠 정보에 따른 버전의 개수의 배수에 비례한 만큼의 세그먼트를 각각 생성한다. 따라서, 많은 양의 세그먼트에 해당하는 URL 정보를 미디어 정보 파일에 포함시킬 경우, 미디어 정보 파일의 용량은 커지게 되어 빠른 속도로 클라이언트(102)에게 제공할 수 없다는 문제점이 있다.
클라이언트(102)는 스트리밍 서비스를 개시할 수 있다. 클라이언트(102)가 서버(101)로부터 소정의 표현에 해당하는 세그먼트를 수신하여 출력할 수 있다. 또한, 클라이언트(102)는 현재 채널 상태를 감지하여 현채 채널 상태에 따른 세그먼트를 서버(101)로 요청할 수 있다. 예를 들어, 클라이언트(102)가 비트 전송률이 300kbps에 해당하는 세그먼트를 수신하여 화면에 출력되고 있는 중, 현재 채널 상태가 나빠짐을 감지한 경우, 낮은 비트 전송률에 해당하는 세그먼트의 전송을 서버(101)로 요청하고, 서버(101)로부터 비트 전송률이 150kbps에 해당하는 세그먼트를 수신하여 이를 출력할 수 있다.
예를 들어, 클라이언트(102)가 네트워크 전송 환경이 나빠졌다고 감지하여 서버(101)로 저비트율에 해당되는 세그먼트 전송을 요청하고, 서버(101)로부터 저비트율에 해당되는 세그먼트를 수신하여 디코딩을 수행할 경우, 고비트율의 I 프레임을 참조하여 저비트율에 해당되는 세그먼트의 P 프레임을 디코딩을 하기 때문에 표현 스위칭이 일어나 화면의 끊김이 발생될 수 있다.
또한, 각각의 세그먼트는 서로 다른 길이의 재생 시간을 가지고 있기 때문에, 현재 출력중인 세그먼트의 재생시간과 서버(101)로부터 수신되어 출력될 세그먼트의 재생시간이 이어지지 않은 경우가 발생한다. 예를 들어, 현재 출력중인 세그먼트의 재생시간은 9분 30초부터 12분 00초에 해당하지만, 서버(101)로부터 수신되어 출력될 세그먼트의 재생시간이 12분 03초부터 15분00초일경우, 현재 출력중인 세그먼트에서 다음에 출력될 세그먼트로 전환될 경우, 즉 표현 스위칭이 일어날 경우 화면의 끊김이 발생될 수 있다.
더구나, 스트리밍 대상이 되는 멀티미디어 컨텐츠의 재생 시간이 길어 질수록, 즉 멀티미디어 컨텐츠의 용량이 증가할수록 나누어지는 세그먼트의 개수는 증가하기 때문에, 많은 양의 세그먼트를 저장할 대용량 저장부가 요구되며, 대용량의 저장부가 사용됨에 따라 시스템을 구성하기 위한 많은 생산비가 요구된다는 문제점이 있다.
상기와 같은 문제점을 해결하기 위한 본 발명의 제 1 목적은, 표현 스위칭이 일어날 경우의 자연스러운 재생을 가능케하기 위한 HTTP 스트리밍 전송 방법 및 장치를 제공하는데 있다.
본 발명의 제 2 목적은, 표현 스위칭이 일어날 경우의 자연스러운 재생을 가능케하기 위한 HTTP 스트리밍 수신 방법을 제공하는데 있다.
상기한 본 발명의 제 1 목적을 달성하기 위한 본 발명에 일 실시예에 따른 HTTP 스트리밍의 전송 방법은, 제 1 표현에 대해서, 스케일러블 비디오 코딩의 베이스 레이어로 구성된 복수의 세그먼트를 구성하는 단계, 상기 제 1 표현에 비해서 고화질의 제 2 표현에 대해서, 스케일러블 비디오 코딩의 인핸스드 레이어로 구성된 복수의 세그먼트를 구성하는 단계 및 상기 제 1 표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송하고, 상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 함께 상기 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송하는 단계를 포함하여 구성될 수 있다.
본 발명의 제 2 목적을 달성하기 위한 본 발명의 일 실시예에 따른 HTTP 스트리밍의 수신 방법은, 제 1 표현의 재생시에는 제 1 표현을 구성하는 복수의 세그먼트 중 일부를 HTTP 스트리밍 서버로부터 수신하여 재생하는 단계 및 제 2 표현의 재생시에는 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 제 2 표현을 구성하는 복수의 세그먼트 중 일부를 함께 HTTP 스트리밍 서버로부터 수신하여 재생하는 단계를 포함하여 구성될 수 있다.
상기와 같은 본 발명에 따른 HTTP 스트리밍 전송 중에 표현 스위칭이 일어날 경우의 자연스러운 재생을 가능케하는 처리 방법을 이용할 경우에는 스케일러블 비디오 코딩의 베이스 레이어에서 저비트율의 세그먼트로 구성된 제 1 표현의 일부와 스케일러블 비디오 코딩의 인핸스드 레이어에서 고비트율의 세그먼트로 구성된 제 2 표현의 일부를 수신하고, 고비트율에서 저비트율로 전환되는 표현 스위칭이 발생될 경우, 제 2 표현을 수신할 시 함께 수신한 제 1 표현을 다음에 재생될 저비트율 세그먼트를 디코딩할 때 참조하여 사용할 수 있기 때문에 화면의 끊김 없이 멀티미디어 컨텐츠를 제공할 수 있다.
도 1은 멀티미디어 시스템에서 HTTP 스트리밍 서비스를 위한 시스템의 내부 구조를 개략적으로 도시한 블록도이다.
도 2는 HTTP 스트리밍 서비스를 위해 동일한 크기로 멀티미디어 컨텐츠가 복수개의 세그먼트로 분할되어 저장된 경우의 블록도이다.
도 3은 HTTP 스트리밍 서비스를 위해 멀티미디어 컨텐츠를 동일하지 않은 크기로 멀티미디어 컨텐츠가 복수개의 세그먼트로 분할되어 저장된 경우의 블록도이다.
도 4는 본 발명의 일 실시예에 따른 HTTP 스트리밍 서비스를 위한 시스템의 내부 구조를 개략적으로 도시한 블록도이다.
도 5는 본 발명의 일 실시예에 따른 HTTP 스트리밍 전송 과정을 설명하기 위한 흐름도이다.
도 6은 본 발명의 일 실시예에 따른 HTTP 스트리밍 수신 과정을 설명하기 위한 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다.
제1, 제2, A, B 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
서버(401)는 동일한 크기 또는 동일하지 않는 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하고, 제 2 표현에 대해서 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성할 수 있다. 여기서, 서버(401)에 의해서 생성된 세그먼트들은 하나의 GOP로 구성되며, GOP는 헤더부와 프레임내 부호화에 기초하는 I 프레임과, 예측 부호화에 기초하는 P 프레임과 B 프레임으로 구성된다.
먼저, 서버(401)가 동일한 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1표현에 비해서 고화질의 제 2 표현에 대한 스케일러블 비디오 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성하는 경우를 설명하기로 한다. 여기서, 제 2 표현이 제 1 표현에 비해서 고화질을 가지므로 제 2 표현은 제 1 표현의 비트 전송율보다 높은 비트 전송율을 가질 수 있다. 이하, 제 1 표현은 제1 비트 전송율(bit rate)을 가지고, 제2 표현은 제1 비트 전송율보다 높은 제2 비트 전송율을 가질 수 있다. 예를 들어, 제1 표현은 512kbps, 제2 표현은 768kbps의 비트 전송율을 가질 수 있다. 또는 제1 표현은 500kbps, 제2 표현은 1Mbps의 비트 전송율을 가질 수 있다.
본 발명의 일 실시예에 따르면, 멀티미디어 컨텐츠의 재생 시간이 10분이고, 제 1 표현에 해당하는 비트 전송률이 500kbps이고 제 2 표현에 해당하는 비트 전송률이 1Mbps일 경우, 서버(401)는 재생 시간이 10분인 멀티미디어 2초 단위로 분할하여 제 1 표현의 비트 전송률 500Kbps에 해당되는 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된300개의 세그먼트들을 구성하고, 제 2 표현의 비트 전송률 1Mbps 에 해당되는 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된300개의 세그먼트들을 구성할 수 있다.
둘째, 서버(401)가 동일하지 않은 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1표현에 비해서 고화질의 제 2 표현에 대한 스케일러블 비디오 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성하는 경우를 설명하기로 한다. 본 발명의 일 실시예에 따르면, 멀티미디어 컨텐츠의 재생 시간이 10분이고, 제 1 표현에 해당하는 비트 전송률이 500kbps이고 제 2 표현에 해당하는 비트 전송률이 1Mbps일 경우, 서버(401)는 재생 시간이 10분인 멀티미디어 2초 및 3초 단위로 교번하여 분할하여 제 1 표현의 비트 전송률 500Kbps에 해당되는 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된240개의 세그먼트들을 구성하고, 제 2 표현의 비트 전송률 1Mbps 에 해당되는 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 240개의 세그먼트들을 구성할 수 있다.
서버(401)는 클라이언트(402)로부터 세그먼트의 전송 요청을 수신할 수 있다. 본 발명의 일 실시예에 따르면 클라이언트(402)가 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 세그먼트 중 일부를 수신하여 제 2 표현의 비트 전송률 1Mbps에 해당되는 세그먼트를 출력하는 중 현재 채널 상태가 나빠짐을 감지함에 따라 서버(401)가 클라이언트(402)로부터 저비트율에 해당하는 세그먼트의 전송 요청을 수신한 경우, 서버(401)는 제 1 표현의 비트 전송률에 50Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부를 클라이언트(402)로 전송한다.
본 발명의 일 실시예에 따르면, 서버(101)는 클라이언트(102)가 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 세그먼트 중 일부를 수신하여 제 1 표현의 비트 전송률 500Kbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태가 좋아짐을 감지함에 따라 서버(401)가 클라이언트(402)로부터 고비트율에 해당하는 세그먼트의 전송 요청을 수신한 경우, 서버(401)는 제 1 표현의 비트 전송률에 50Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부와 함께 제 2 표현의 비트 전송률에 1Mbps에 해당되는 인핸스드 레이어(421)로 구성된 복수개의 세그먼트 중 일부를 클라이언트(402)로 전송한다.
클라이언트(102)는 스트리밍 서비스를 개시할 수 있다. 클라이언트(102)가 스트리밍 서비스를 개시할 경우, 클라이언트(402)는 서버(401)로부터 베이스 레이어(411)로 구성된 제 1 표현을 구성하는 세그먼트 중 일부를 수신하여 제 1 표현의 비트 전송률 500Kbps 에 해당되는 세그먼트를 출력한다. 또한, 클라이언트(402)는 현재 채널 상태를 감지하여 현재 채널 상태가 변경된 경우에는 세그먼트를 전송 요청을 서버(401)로 요청하고, 요청에 따라 수신된 세그먼트를 출력한다.
본 발명의 일 실시예에 따르면, 10분의 재생 시간을 가지는 멀티미디어 컨텐츠가 10초의 재생 구간을 가지는 60개의 재생 구간으로 분할된 후 제 1 표현의 비트 전송률 500Kbps에 해당되는 세그먼트들을 생성하여 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 60개의 세그먼트를 구성하고, 제 2 표현의 비트 전송률 1Mbps 에 해당되는 세그먼트들을 생성하여 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 60개의 세그먼트를 구성되었다고 가정한다.
본 발명의 일 실시예에 따르면, 클라이언트(402)가 제 1 표현의 비트 전송률 500Kbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태가 좋아짐을 감지함에 따라 서버(402)로부터 제 1 표현의 비트 전송률 500Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부와 제 2 표현의 비트 전송률 1Mbps에 해당되는 인핸스드 레이어(421)로 구성된 복수개의 세그먼트 중 적어도 일부를 수신한다.
본 발명의 일 실시예에 따르면, 클라이언트(402)가 제 2 표현의 비트 전송률 1Mbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태의 악화를 감지함에 따라 서버(402)로부터 제 1 표현의 비트 전송률 500Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부를 수신하여 출력할 경우, 클라이언트(402)는 현재 디코딩하여 출력중인 비디오 코딩의 인핸스드 레이어(421)가 수신될 때 함께 수신된 베이스 레이어(411)의 제 1 표현의 비트 전송률 500Kbps에 해당되는 세그먼트의 I 프레임을 이용하여 서버(401)로부터 수신된 베이스 레이어(411)에 포함된 세그먼트의 P프레임을 디코딩하여 출력한다. 그러면 이하에서는, 도 5를 참조하여 본 발명의 일 실시예에 따른 HTTP 스트리밍 전송 과정을 보다 구체적으로 설명하기로 한다.
도 5는 본 발명의 일 실시예에 따른 HTTP 스트리밍 전송 과정을 설명하기 위한 흐름도이다.
도 5를 참조하면, 서버(401)는 제 1 표현에 대해서, 스케일러블 비디오 코딩의 베이스 레이어로 구성된 복수의 세그먼트를 구성한다(S501). 서버(401)는 동일한 크기 또는 동일하지 않는 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1 표현에 대해서 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 복수의 세그먼트를 구성할 수 있다. 여기서, 서버(401)에 의해서 생성된 세그먼트들은 하나의 GOP로 구성되며, GOP는 헤더부와 프레임내 부호화에 기초하는 I 프레임과, 예측 부호화에 기초하는 P 프레임과 B 프레임으로 구성된다.
먼저, 서버(401)가 동일한 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1 표현에 대해서 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 복수의 세그먼트를 구성하는 경우를 설명하기로 한다. 본 발명의 일 실시예에 따르면, 멀티미디어 컨텐츠의 재생 시간이 10분이고, 제 1 표현에 해당하는 비트 전송률이 500kbps일 경우, 서버(401)는 재생 시간이 10분인 멀티미디어 2초 단위로 분할하여 제 1 표현의 비트 전송률 500Kbps에 해당되는300개의 세그먼트들을 생성하고, 제 1 표현에 대해서 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 300개의 세그먼트를 구성한다.
둘째, 서버(401)가 동일하지 않은 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1 표현에 대해서 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 복수의 세그먼트를 구성할 수 있다. 본 발명의 일 실시예에 따르면, 멀티미디어 컨텐츠의 재생 시간이 10분이고, 제 1 표현에 해당하는 비트 전송률이 500kbps 일 경우, 서버(401)는 재생 시간이 10분인 멀티미디어 2초 및 3초 단위로 교번하여 분할하고, 제 1 표현에 대해서 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 240개의 세그먼트들을 구성한다.
서버(401)는 제 1 표현에 비해서 고화질의 제 2 표현에 대해서, 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성한다(S502). 서버(401)는 동일한 크기 또는 동일하지 않는 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하고, 제 2 표현에 대해서 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성할 수 있다. 여기서, 서버(401)에 의해서 생성된 세그먼트들은 하나의 GOP로 구성되며, GOP는 헤더부와 프레임내 부호화에 기초하는 I 프레임과, 예측 부호화에 기초하는 P 프레임과 B 프레임으로 구성된다.
먼저, 서버(401)가 동일한 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1표현에 비해서 고화질의 제 2 표현에 대한 스케일러블 비디오 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성하는 경우를 설명하기로 한다. 본 발명의 일 실시예에 따르면, 멀티미디어 컨텐츠의 재생 시간이 10분이고, 제 1 표현에 해당하는 비트 전송률이 500kbps이고 제 2 표현에 해당하는 비트 전송률이 1Mbps일 경우, 서버(401)는 재생 시간이 10분인 멀티미디어 2초 단위로 분할하여 제 1 표현의 비트 전송률 500Kbps에 해당되는 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된300개의 세그먼트들을 구성하고, 제 2 표현의 비트 전송률 1Mbps 에 해당되는 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된300개의 세그먼트들을 구성한다.
둘째, 서버(401)가 동일하지 않은 크기로 스트리밍 대상이 되는 멀티미디어 컨텐츠를 복수개의 세그먼트로 분할하여 제 1표현에 비해서 고화질의 제 2 표현에 대한 스케일러블 비디오 인핸스드 레이어(421)로 구성된 복수의 세그먼트를 구성하는 경우를 설명하기로 한다. 본 발명의 일 실시예에 따르면, 멀티미디어 컨텐츠의 재생 시간이 10분이고, 제 1 표현에 해당하는 비트 전송률이 500kbps이고 제 2 표현에 해당하는 비트 전송률이 1Mbps일 경우, 서버(401)는 재생 시간이 10분인 멀티미디어 2초 및 3초 단위로 교번하여 분할하여 제 1 표현의 비트 전송률 500Kbps에 해당되는 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된240개의 세그먼트들을 구성하고, 제 2 표현의 비트 전송률 1Mbps 에 해당되는 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 240개의 세그먼트들을 구성한다.
제 1 표현의 전송시(S503)에는 서버(401)는 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송한다(S504). 본 발명의 일 실시예에 따르면, 서버(101)는 클라이언트(102)가 스케일러블 비디오 코딩의 인핸스드 레이어(421) 로 구성된 세그먼트 중 일부를 수신하여 제 2 표현의 비트 전송률 1Mbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태의 악화를 감지함에 따라 서버(401)가 클라이언트(402)로부터 제 1 표현의 비트 전송률 500Kbps 에 해당하는 세그먼트의 전송 요청을 수신한 경우(S503), 서버(401)는 제 1 표현의 비트 전송률에 500Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부를 전송한다(S504).
제 2표현의 전송시(S503)에는 서버(401)는 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 함께 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송한다(S505). 본 발명의 일 실시예에 따르면, 서버(101)는 클라이언트(102)가 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 세그먼트 중 일부를 수신하여 제 1 표현의 비트 전송률 500Kbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태가 좋아짐을 감지함에 따라 서버(401)가 클라이언트(402)로부터 제 2 표현의 비트 전송률 1Mbps 에 해당하는 세그먼트의 전송 요청을 수신한 경우(S503), 서버(401)는 제 1 표현의 비트 전송률에 500Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부와 함께 제 2 표현의 비트 전송률에 1Mbps에 해당되는 인핸스드 레이어(421)로 구성된 복수개의 세그먼트 중 일부를 전송한다(S505).
도 5에서는 제 2 표현의 전송시(S503)에는 서버(401)는 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 함께 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송(S505)하는 경우를 예를 들어 설명하였으나, 제 2 표현의 전송시(S503)에 서버(401)는 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부 중 적어도 하나를 전송할 수도 있다. 예를 들어, 제 2 표현의 전송시(S503)에 서버(401)는 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 교대로 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송할 수도 있다.
그러면 이하에서는, 도 6을 참조하여 본 발명의 제 1실시예에 따른 HTTP 스트리밍 수신 과정을 보다 구체적으로 설명하기로 한다.
그러면 이하에서는, 도 6을 참조하여 본 발명의 제 1실시예에 따른 HTTP 스트리밍 수신 과정을 보다 구체적으로 설명하기로 한다.
도 6은 본 발명의 일 실시예에 따른 HTTP 스트리밍 수신 과정을 설명하기 위한 흐름도이다.
도 6을 참조하면, 클라이언트(402)는 현재 채널 상태를 감지(S601)하여 현재 채널 상태가 변경된 경우에는 세그먼트를 전송 요청을 서버(401)로 요청하고, 요청에 따라 수신된 세그먼트를 출력한다. 클라이언트(402)가 제 1 표현에 해당하는 비트 전송률의 세그먼트를 요청할 경우(S602), 제 1 표현을 구성하는 복수의 세그먼트 중 일부를 수신하여 재생한다(S603).
본 발명의 일 실시예에 따르면, 10분의 재생 시간을 가지는 멀티미디어 컨텐츠가 10초의 재생 구간을 가지는 60개의 재생 구간으로 분할된 후 제 1 표현의 비트 전송률 500Kbps에 해당되는 세그먼트들을 생성하여 스케일러블 비디오 코딩의 베이스 레이어(411)로 구성된 60개의 세그먼트를 구성하고, 제 2 표현의 비트 전송률 1Mbps 에 해당되는 세그먼트들을 생성하여 스케일러블 비디오 코딩의 인핸스드 레이어(421)로 구성된 60개의 세그먼트를 구성되었다고 가정한다.
본 발명의 일 실시예에 따르면, 클라이언트(402)가 제 2 표현의 비트 전송률 1Mbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태의 악화를 감지함에 따라 서버(402)로부터 제 1 표현의 비트 전송률 500Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부를 수신하여 출력할 경우, 클라이언트(402)는 현재 디코딩하여 출력중인 비디오 코딩의 인핸스드 레이어(421)가 수신될 때 함께 수신된 베이스 레이어(411)의 제 1 표현의 비트 전송률 500Kbps에 해당되는 세그먼트의 I 프레임을 이용하여 서버(401)로부터 수신된 베이스 레이어(411)에 포함된 세그먼트의 P프레임을 디코딩하여 출력한다.
클라이언트(402)가 제 2 표현에 해당하는 비트 전송률의 세그먼트를 요청할 경우(S602), 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 제 2 표현을 구성하는 복수의 세그먼트 중 일부를 수신하여 재생한다(S604). 본 발명의 일 실시예에 따르면, 클라이언트(402)가 제 1 표현의 비트 전송률 500Kbps 에 해당되는 세그먼트를 출력하는 중 현재 채널 상태가 좋아짐을 감지함에 따라 서버(402)로부터 제 1 표현의 비트 전송률 500Kbps에 해당되는 베이스 레이어(411)로 구성된 복수의 세그먼트 중 적어도 일부와 제 2 표현의 비트 전송률 1Mbps에 해당되는 인핸스드 레이어(421)로 구성된 복수개의 세그먼트 중 적어도 일부를 수신한다.
도 6에서는 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 함께 제 2 표현을 구성하는 복수의 세그먼트 중 일부를 수신하여 재생하는 경우를 예를 들어 설명하였으나, 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 제 2 표현을 구성하는 복수의 세그먼트 중 일부 중 적어도 하나를 수신하여 재생할 수도 있다. 예를 들어, 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 제 2 표현을 구성하는 복수의 세그먼트 중 일부를 교대로 수신하여 재생할 수도 있다.
본 발명의 일 실시예에 따른 HTTP 스트리밍의 전송 방법은, 제 1 표현에 대해서, 스케일러블 비디오 코딩의 제1 비트 전송율을 가진 복수의 세그먼트를 구성하는 단계와, 제 2 표현에 대해서, 스케일러블 비디오 코딩의 제2 비트 전송율-여기서, 상기 제2 비트 전송율은 상기 제1 비트 전송율보다 높음-을 가진 복수의 세그먼트를 구성하는 단계와, 상기 제1 표현 및 상기 제2 표현 중 적어도 하나로 이루어진 스케일러블 비디오 코딩 스트리밍을 전송하는 단계를 포함할 수 있다.
본 발명의 일 실시예에 따른 HTTP 스트리밍의 전송 장치는 제 1 표현에 대해서 스케일러블 비디오 코딩의 제1 비트 전송율을 가진 복수의 세그먼트를 구성하고, 제 2 표현에 대해서 스케일러블 비디오 코딩의 제2 비트 전송율-여기서, 상기 제2 비트 전송율은 상기 제1 비트 전송율보다 높음-을 가진 복수의 세그먼트를 구성하는 생성부와, 상기 제1 표현 및 상기 제2 표현 중 적어도 하나로 이루어진 스케일러블 비디오 코딩 스트리밍을 전송하는 전송부를 포함한다. 상기 전송부는 상기 제 1 표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송할 수 있다. 상기 전송부는 상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 일부 중 적어도 하나를 전송할 수 있다. 상기 전송부는 상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 일부를 교대로 전송할 수 있다.
본 발명의 일 실시예에 따른 HTTP 스트리밍의 수신 방법은, HTTP 스트리밍 수신장치에서의 제1 표현 및 제2 표현 중 적어도 하나를 포함하는 HTTP 스트리밍을 수신한다. 구체적으로, 본 발명의 일 실시예에 따른 HTTP 스트리밍의 수신 방법은, 스케일러블 비디오 코딩의 제1 비트 전송율을 가진 복수의 세그먼트 중 적어도 일부를 포함하는 제1 표현을 HTTP 스트리밍 서버로부터 수신하는 단계와, 상기 스케일러블 비디오 코딩의 제2 비트 전송율-여기서, 상기 제2 비트 전송율은 상기 제1 비트 전송율보다 높음-을 가진 복수의 세그먼트 중 적어도 일부를 포함하는 제 2 표현을 상기 HTTP 스트리밍 서버로부터 수신하는 단계를 포함하되, 상기 제 2 표현의 재생시에는 상기 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 상기 제 2 표현을 구성하는 복수의 세그먼트 중 일부 중 적어도 하나를 상기 HTTP 스트리밍 서버로부터 수신하여 재생하는 단계를 포함한다.
상기에서는 스케일러블 비디오 코딩(SVC) 컨텐츠가 제1 표현 및 제2 표현을 가지는 경우를 예를 들어 설명하였으나, 본 발명은 스케일러블 비디오 코딩(SVC) 컨텐츠가 제1 표현, 제2 표현 및 제3 표현을 가지는 경우로도 확장 적용 될 수 있다. 이 경우, 제1 표현은 제1 비트 전송율(bit rate)을 가지고, 제2 표현은 제1 비트 전송율보다 높은 제2 비트 전송율을 가질 수 있고, 제3 표현은 제2 비트 전송율보다 높은 제3 비트 전송율을 가질 수 있다. 예를 들어, 제1 표현은 512k, 제2 표현은 768k, 제3 표현은 video 1024k의 비트 전송율을 가질 수 있다.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.

Claims (13)

  1. HTTP 스트리밍의 전송 방법으로서,
    제 1 표현에 대해서, 스케일러블 비디오 코딩(Scalable Video Coding)의 베이스 레이어로 구성된 복수의 세그먼트를 구성하는 단계;
    상기 제 1 표현에 비해서 고화질의 제 2 표현에 대해서, 스케일러블 비디오 코딩의 인핸스드 레이어로 구성된 복수의 세그먼트를 구성하는 단계; 및
    상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 적어도 일부 중 적어도 하나를 전송하는 단계를 포함한 스케일러블 HTTP 스트리밍 전송 방법.
  2. HTTP 스트리밍의 전송 방법으로서,
    제 1 표현에 대해서, 스케일러블 비디오 코딩의 제1 비트 전송율을 가진 복수의 세그먼트를 구성하는 단계; 및
    제 2 표현에 대해서, 스케일러블 비디오 코딩의 제2 비트 전송율-여기서, 상기 제2 비트 전송율은 상기 제1 비트 전송율보다 높음-을 가진 복수의 세그먼트를 구성하는 단계; 및상기 제1 표현 및 상기 제2 표현 중 적어도 하나로 이루어진 스케일러블 비디오 코딩 스트리밍을 전송하는 단계를 포함하는 스케일러블 HTTP 스트리밍 전송 방법.
  3. 제 2 항에 있어서,
    상기 스케일러블 비디오 코딩은 H.264/AVC의 SVC(Scalable Video Coding)에 따른 스케일러블 비디오 코딩 표준에 따른 압축 방식에 따른 스케일러블 HTTP 스트리밍 전송 방법.
  4. 제 2 항에 있어서,
    상기 제 1 표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송하는 단계를 포함한 스케일러블 HTTP 스트리밍 전송 방법.
  5. 제 4 항에 있어서,
    상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 일부 중 적어도 하나를 전송하는 단계를 포함한 스케일러블 HTTP 스트리밍 전송 방법.
  6. 제 5 항에 있어서,
    상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 일부를 교대로 전송하는 단계를 포함한 스케일러블 HTTP 스트리밍 전송 방법.
  7. HTTP 스트리밍의 전송 장치로서,
    제 1 표현에 대해서 스케일러블 비디오 코딩의 제1 비트 전송율을 가진 복수의 세그먼트를 구성하고, 제 2 표현에 대해서 스케일러블 비디오 코딩의 제2 비트 전송율-여기서, 상기 제2 비트 전송율은 상기 제1 비트 전송율보다 높음-을 가진 복수의 세그먼트를 구성하는 생성부; 및
    상기 제1 표현 및 상기 제2 표현 중 적어도 하나로 이루어진 스케일러블 비디오 코딩 스트리밍을 전송하는 전송부를 포함하는 스케일러블 HTTP 스트리밍 전송 장치.
  8. 제 7 항에 있어서,
    상기 전송부는 상기 제 1 표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 적어도 일부를 전송하는 것을 특징으로 하는 스케일러블 HTTP 스트리밍 전송 장치.
  9. 제 8 항에 있어서,
    상기 전송부는 상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 일부 중 적어도 하나를 전송하는 것을 특징으로 하는 스케일러블 HTTP 스트리밍 전송 장치.
  10. 제 9 항에 있어서,
    상기 전송부는 상기 제 2표현의 전송시에는 상기 제 1 표현에 대한 복수의 세그먼트 중 일부와 상기 제 2 표현에 대한 복수의 세그먼트 중 일부를 교대로 전송하는 것을 특징으로 하는 스케일러블 HTTP 스트리밍 전송 장치.
  11. HTTP 스트리밍 수신장치에서의 제1 표현 및 제2 표현 중 적어도 하나를 포함하는 HTTP 스트리밍의 수신 방법으로서,
    스케일러블 비디오 코딩의 제1 비트 전송율을 가진 복수의 세그먼트 중 적어도 일부를 포함하는 제1 표현을 HTTP 스트리밍 서버로부터 수신하는 단계; 및
    상기 스케일러블 비디오 코딩의 제2 비트 전송율-여기서, 상기 제2 비트 전송율은 상기 제1 비트 전송율보다 높음-을 가진 복수의 세그먼트 중 적어도 일부를 포함하는 제 2 표현을 상기 HTTP 스트리밍 서버로부터 수신하는 단계를 포함하되, 상기 제 2 표현의 재생시에는 상기 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 상기 제 2 표현을 구성하는 복수의 세그먼트 중 일부 중 적어도 하나를 상기 HTTP 스트리밍 서버로부터 수신하여 재생하는 단계를 포함하는 스케일러블 HTTP 스트리밍 수신 방법.
  12. 제 11 항에 있어서,
    상기 제 1 표현의 재생시에는 제 1 표현을 구성하는 복수의 세그먼트 중 일부를 HTTP 스트리밍 서버로부터 수신하여 재생하는 것을 특징으로 하는 스케일러블 HTTP 스트리밍 수신 방법.
  13. 제 11 항에 있어서, 상기 제 2 표현의 재생시에는 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 제 2 표현을 구성하는 복수의 세그먼트 중 일부 중 적어도 하나를 HTTP 스트리밍 서버로부터 수신하여 재생하는 단계는
    상기 제 2 표현의 재생시에는 제 1 표현을 구성하는 복수의 세그먼트 중 일부와 제 2 표현을 구성하는 복수의 세그먼트 중 일부 중 적어도 하나를 교대로 HTTP 스트리밍 서버로부터 수신하여 재생하는 것을 특징으로 하는 스케일러블 HTTP 스트리밍 수신 방법.
PCT/KR2011/007340 2010-10-06 2011-10-05 Ｈｔｔｐ 스트리밍의 표현 스위칭시 자연스런 재생을 위한 스케일러블한 ｈｔｔｐ 스트리밍 전송 방법 WO2012047004A2 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP11830889.9A EP2627082A4 (en) 2010-10-06 2011-10-05 METHOD FOR TRANSMITTING A SCALABLE HTTP DATA STREAM FOR NATURAL REPRODUCTION WHEN OCCURRENCE OF EXPRESSION SWITCHING DURING THE HTTP DATA STREAM
CN201180055312.7A CN103210642B (zh) 2010-10-06 2011-10-05 在http流送期间发生表达切换时传送用于自然再现的可缩放http流的方法
US13/877,995 US9369508B2 (en) 2010-10-06 2011-10-05 Method for transmitting a scalable HTTP stream for natural reproduction upon the occurrence of expression-switching during HTTP streaming

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20100097247 2010-10-06
KR10-2010-0097247 2010-10-06

Publications (2)

Publication Number Publication Date
WO2012047004A2 true WO2012047004A2 (ko) 2012-04-12
WO2012047004A3 WO2012047004A3 (ko) 2012-05-31

Family

ID=45928210

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2011/007340 WO2012047004A2 (ko) 2010-10-06 2011-10-05 Ｈｔｔｐ 스트리밍의 표현 스위칭시 자연스런 재생을 위한 스케일러블한 ｈｔｔｐ 스트리밍 전송 방법

Country Status (5)

Country Link
US (1) US9369508B2 (ko)
EP (1) EP2627082A4 (ko)
KR (1) KR20120035881A (ko)
CN (1) CN103210642B (ko)
WO (1) WO2012047004A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220094734A1 (en) * 2018-11-28 2022-03-24 Netflix, Inc. Techniques for encoding a media title while constraining quality variations

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101617340B1 (ko) * 2012-04-26 2016-05-02 후아웨이 테크놀러지 컴퍼니 리미티드 어댑티브 스트리밍을 위한 세그먼트 암호화 및 키 유도를 시그널링하기 위한 시스템 및 방법
US9264666B1 (en) * 2012-10-31 2016-02-16 Envid Technologies Llc Live streaming using multiple content streams
US9356981B2 (en) * 2012-11-29 2016-05-31 Broadcom Corporation Streaming content over a network
CN104270646A (zh) * 2014-09-22 2015-01-07 何震宇 一种基于移动流媒体的自适应传输方法和系统
DE102014219686A1 (de) * 2014-09-29 2016-03-31 Bayerische Motoren Werke Aktiengesellschaft Anpassung einer Videokomprimierung bei einem mobilen Server
US9509742B2 (en) 2014-10-29 2016-11-29 DLVR, Inc. Configuring manifest files referencing infrastructure service providers for adaptive streaming video
US10084838B2 (en) 2014-10-29 2018-09-25 DLVR, Inc. Generating and using manifest files including content delivery network authentication data
US10142386B2 (en) 2014-10-29 2018-11-27 DLVR, Inc. Determining manifest file data used in adaptive streaming video delivery
CN105657520A (zh) * 2014-11-18 2016-06-08 乐视网信息技术（北京）股份有限公司 一种视频清晰度切换方法和视频播放器
WO2018058993A1 (zh) * 2016-09-30 2018-04-05 华为技术有限公司 一种视频数据的处理方法及装置
US20230254533A1 (en) * 2019-10-15 2023-08-10 Interdigital Ce Patent Holdings, Sas Method and apparatuses for sending and receiving a video

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6496980B1 (en) * 1998-12-07 2002-12-17 Intel Corporation Method of providing replay on demand for streaming digital multimedia
GB9909607D0 (en) 1999-04-26 1999-06-23 Telemedia Systems Ltd Method of copying a media file
FI113124B (fi) * 1999-04-29 2004-02-27 Nokia Corp Tiedonsiirto
US7095782B1 (en) * 2000-03-01 2006-08-22 Koninklijke Philips Electronics N.V. Method and apparatus for streaming scalable video
US20030099364A1 (en) 2001-11-28 2003-05-29 Thompson Mark R. Playback manipulation of HTTP streamed content objects
US20030169813A1 (en) * 2002-03-08 2003-09-11 Van Der Schaar Mihaela Method and apparatus to execute a smooth transition between FGS encoded structures
US7483487B2 (en) * 2002-04-11 2009-01-27 Microsoft Corporation Streaming methods and systems
KR20040096718A (ko) * 2003-05-10 2004-11-17 삼성전자주식회사 멀티미디어 데이터 재생장치, 오디오 데이터 수신방법 및오디오 데이터 구조
ITBA20030039A1 (it) * 2003-08-29 2005-02-28 Grieco Luigi Alfredo Controllo di congestione rate-based del traffico entrante
WO2005032138A1 (en) 2003-09-29 2005-04-07 Koninklijke Philips Electronics, N.V. System and method for combining advanced data partitioning and fine granularity scalability for efficient spatio-temporal-snr scalability video coding and streaming
US20050254575A1 (en) * 2004-05-12 2005-11-17 Nokia Corporation Multiple interoperability points for scalable media coding and transmission
EP1742476A1 (en) * 2005-07-06 2007-01-10 Thomson Licensing Scalable video coding streaming system and transmission mechanism of the same system
KR20070020727A (ko) * 2005-08-16 2007-02-22 주식회사 팬택 순차 조각 다운로드 방식을 이용한 의사 스트리밍 다운로드기능을 가지는 단말기 및 그 방법
KR101480969B1 (ko) * 2006-07-28 2015-01-09 톰슨 리서치 펀딩 코포레이션 디지털 비디오에 관한 빠른 채널 변경을 위한 방법 및 장치
CN100550999C (zh) * 2006-11-22 2009-10-14 华为技术有限公司 一种数字频道快速切换方法和系统以及辅助频道生成设备
KR101366803B1 (ko) 2007-04-16 2014-02-24 삼성전자주식회사 Ｈｔｔｐ를 이용한 통신 방법 및 장치
US8539092B2 (en) * 2008-07-09 2013-09-17 Apple Inc. Video streaming using multiple channels
JP2011529674A (ja) * 2008-07-28 2011-12-08 トムソン ライセンシング スケーラブル・ビデオ符号化（ｓｖｃ）ストリームを用いて高速チャネル変更を行う方法および装置
JP5558481B2 (ja) * 2008-11-26 2014-07-23 テレフオンアクチーボラゲット エル エム エリクソン（パブル） 複数のメディアトラックを介してアクセス可能になるメディアコンテンツを扱う技術
WO2010124136A1 (en) * 2009-04-24 2010-10-28 Delta Vidyo, Inc. An efficient video skimmer

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
None
See also references of EP2627082A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220094734A1 (en) * 2018-11-28 2022-03-24 Netflix, Inc. Techniques for encoding a media title while constraining quality variations
US11677797B2 (en) * 2018-11-28 2023-06-13 Netflix, Inc. Techniques for encoding a media title while constraining quality variations

Also Published As

Publication number Publication date
WO2012047004A3 (ko) 2012-05-31
US20130204973A1 (en) 2013-08-08
CN103210642A (zh) 2013-07-17
EP2627082A2 (en) 2013-08-14
CN103210642B (zh) 2017-03-29
EP2627082A4 (en) 2014-04-09
KR20120035881A (ko) 2012-04-16
US9369508B2 (en) 2016-06-14

Similar Documents

Publication Publication Date Title
WO2012047004A2 (ko) Ｈｔｔｐ 스트리밍의 표현 스위칭시 자연스런 재생을 위한 스케일러블한 ｈｔｔｐ 스트리밍 전송 방법
US10554932B2 (en) Dynamic advertisement stream replacement
WO2012173389A2 (en) Method and apparatus for transmitting/receiving media contents in multimedia system
CN101505316B (zh) 重排和复用属于互相关会话的多媒体流的包的方法和设备
WO2012023833A2 (en) Method and apparatus for reducing deterioration of a quality of experience of a multimedia service in a multimedia system
JP2018186524A (ja) コンテンツ送信装置およびコンテンツ再生装置
JP5338394B2 (ja) 映像配信システム、映像配信方法、映像配信装置及び映像配信プログラム
WO2011159140A2 (en) Storage file format for multimedia streaming file, and storage method and client apparatus using the same
WO2012099423A2 (ko) 방송 시스템에서의 제어 메시지 구성 장치 및 방법
US8572670B2 (en) Video distribution device, video distribution system, and video distribution method
WO2015105377A1 (en) Method and apparatus for streaming dash content over broadcast channels
WO2011142569A2 (en) Method and apparatus for transmitting and receiving layered coded video
CN103843301A (zh) 经译码多媒体数据的网络串流期间的表示之间的切换
WO2012030120A2 (ko) Ｈｔｔｐ 스트리밍을 위한 미디어 정보 파일의 전송 및 수신 방법
WO2012039576A2 (ko) Ｈｔｔｐ 스트리밍에서 표현 스위칭시 처리 방법
JP2004272712A (ja) 受信装置および情報閲覧方法
KR20130127211A (ko) 다중 네트워크 환경 적응형 미디어 스트리밍 전송방법 및 그 장치
CN103339930A (zh) 合作媒体系统中管理多个终端设备上内容分配的方法和装置
US20110088069A1 (en) Network device, information processing apparatus, stream switching method, information processing method, program, and content distribution system
WO2018021616A1 (en) Operating method of client for streaming service
WO2013109113A1 (ko) 스트리밍 서비스를 제공하는 방법 및 장치
WO2015130126A1 (ko) 클라우드 스트리밍 서비스 시스템, 이를 위한 장치 및 클라우드 스트리밍 서비스 방법
JP4794640B2 (ja) 送信装置およびメディアデータ送信方法
WO2014014305A1 (ko) 동일 포트에 멀티플렉싱 된 다중 패킷 스트림의 패킷오류 구분을 선택적으로 수행하는 방법 및 그 장치
WO2017065571A1 (ko) 멀티미디어 시스템에서 패킷을 송/수신하는 방법 및 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11830889

Country of ref document: EP

Kind code of ref document: A2

WWE Wipo information: entry into national phase

Ref document number: 13877995

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2011830889

Country of ref document: EP