CN102812683B - 用于在http流传输中进行自适应的方法和装置 - Google Patents

用于在http流传输中进行自适应的方法和装置 Download PDF

Info

Publication number
CN102812683B
CN102812683B CN201180010081.8A CN201180010081A CN102812683B CN 102812683 B CN102812683 B CN 102812683B CN 201180010081 A CN201180010081 A CN 201180010081A CN 102812683 B CN102812683 B CN 102812683B
Authority
CN
China
Prior art keywords
key frame
time alignment
expression
information
http
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180010081.8A
Other languages
English (en)
Other versions
CN102812683A (zh
Inventor
托比杰恩·埃纳尔松
珀·福罗德亨
克林顿·普里德尔
巫壮飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Telefonaktiebolaget LM Ericsson AB
Original Assignee
Telefonaktiebolaget LM Ericsson AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Telefonaktiebolaget LM Ericsson AB filed Critical Telefonaktiebolaget LM Ericsson AB
Publication of CN102812683A publication Critical patent/CN102812683A/zh
Application granted granted Critical
Publication of CN102812683B publication Critical patent/CN102812683B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/756—Media network packet handling adapting media to device capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B18/00—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body
    • A61B18/18—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by applying electromagnetic radiation, e.g. microwaves
    • A61B18/20—Surgical instruments, devices or methods for transferring non-mechanical forms of energy to or from the body by applying electromagnetic radiation, e.g. microwaves using laser
    • A61B2018/2065—Multiwave; Wavelength mixing, e.g. using four or more wavelengths
    • A61B2018/207—Multiwave; Wavelength mixing, e.g. using four or more wavelengths mixing two wavelengths

Abstract

本发明提供了对在通信系统中的HTTP服务器和HTTP客户端之间的媒体内容的自适应HTTP流传输进行控制的方法，在该系统中，媒体内容被布置为多个周期，以及每个这样的周期包括媒体段的多个表示，该方法包括以下步骤：提供(S10)针对多个表示的媒体段的时间对准信息，该时间对准信息提供与在媒体内容的多个表示的段之间的时间关系有关的指示。此外，该方法包括：提供(S20)针对媒体段的关键帧位置信息，该关键帧位置信息提供与在多个表示的媒体段中的关键帧的位置有关的指示。最后，基于所提供的时间对准信息和/或所提供的关键帧位置信息，控制(S30)媒体内容的HTTP流传输的自适应。

Description

用于在http流传输中进行自适应的方法和装置
技术领域
本公开大体上涉及通信系统，具体地，涉及在这种系统中的HTTP流传输会话期间的自适应。
背景技术
针对媒体(具体地，视频)的HTTP(超文本传输协议)流传输的关注日益增加。最近，这已经超过了简单的渐进式下载，给出了两个新的特征：自适应和实况内容。对此进行实现的方式是将内容分为多个段或文件，每个段或文件对应于小的内容间隔，例如，10秒的内容。向客户端提供清单(manifest)文件(也称为媒体呈现描述(MPD))，其列出了不同的段和从何处取得这些段，以及客户端逐一地取得这些段。划分为经由标准web协议(如，HTTP)取得的不同段/文件的该划分也被称为是高速缓存友好的，或者CDN(内容分发网络)友好的，因为与基于例如RTSP(实时流传输协议)的协议的流传输服务器相比，其不需要服务器或者高速缓存中的任何状态。在间隔和段内，多个级别是可能的。例如，通过改变在一个间隔期间的内容来进行广告插入，然后在下一个间隔中返回原始的内容流，这是可能的。
通过提供多个版本的内容来实现自适应，以使得在给定网络性能/下载时间的情况下，客户端可以选择取得被估计为最佳的版本。从客户端的角度来看，如果不同版本或表示的段具有相同的持续时间，使得客户端针对每个段下载，可以简单地做出选择哪个版本的决定，则更容易解决自适应。然而，通过向段的所有版本强加相同的持续时间，其相应的大小将显著变化。对于高速缓存服务器来说，这绝不是最优的，如果段具有相同的或类似的大小，高速缓存服务器常常具有更好的性能。因此，大小对准是高速缓存/服务器所希望的，然而使得客户端中的自适应机制更加困难。应该针对服务器进行优化，还是针对客户端进行优化，需要进行权衡。
对该问题的两个现有解决方案是来自的SmoothStreaming和来自的LiveStreaming，它们都选择了相等的持续时间轨道(track)。在3GPP SA4中，讨论代之以主要处理相等大小轨道。
基于以上，需要允许在客户端侧上的自适应性能与服务器/高速缓存上的相等大小的文件/段之间进行不同权衡的解决方案。
发明内容
目标是避免以上缺点中的至少一些，并提供增强自适应HTTP媒体流传输控制。
根据第一方面，本公开呈现了对通信系统中的HTTP服务器和HTTP客户端之间的媒体内容的自适应HTTP流传输进行控制的方法，该媒体内容被布置为多个周期，以及每个这样的周期包括媒体段的多个表示。该方法包括以下步骤：提供针对多个表示的媒体段的时间对准信息，该时间对准信息提供与在媒体内容的多个表示的段之间的时间关系有关的指示。此外，该方法包括以下步骤：提供针对媒体段的关键帧位置信息，该关键帧位置信息提供与在多个表示的媒体段中的关键帧的位置有关的指示。最后，该方法包括以下步骤：基于所提供的时间对准信息和所提供的关键帧位置信息中的至少一项，控制媒体内容的HTTP流传输的自适应。
根据第二方面，本公开呈现了在向通信系统中的HTTP客户端流传输媒体内容的HTTP服务器节点中使用的方法，该媒体内容被布置为多个周期，以及每个这样的周期包括媒体段的多个表示。该方法包括以下步骤：提供针对多个表示的媒体段的时间对准信息，该时间对准信息提供与在媒体内容的多个表示的段之间的时间关系有关的指示。此外，该方法包括以下步骤：提供针对媒体段的关键帧位置信息，该关键帧位置信息提供与在多个表示的媒体段中的关键帧的位置有关的指示。
根据第三方面，本公开呈现了在从通信系统中的HTTP服务器接收流传输媒体内容的HTTP客户端节点中使用的方法，该媒体内容被布置为多个周期，以及每个这样的周期包括媒体段的多个表示。该方法包括以下步骤：接收针对多个表示的媒体段的时间对准信息，该时间对准信息提供与在媒体内容的多个表示的段之间的时间关系有关的指示。此外，该方法包括以下步骤：接收针对媒体段的关键帧位置信息，该关键帧位置信息提供与在多个表示的媒体段中的关键帧的位置有关的指示。最后，该方法包括以下步骤：基于接收到的时间对准信息和接收到的关键帧位置信息中的至少一项，控制媒体内容的HTTP流传输的自适应。
根据第四方面，本公开呈现了向通信系统中的HTTP客户端流传输媒体内容的HTTP服务器节点，该媒体内容被布置为多个周期，以及每个这样的周期包括媒体段的多个表示。服务器节点包括：时间对准信息提供器，被配置为：提供针对多个表示的媒体段的时间对准信息，该时间对准信息提供与在媒体内容的多个表示的段之间的时间关系有关的指示。此外，服务器节点包括：关键帧位置提供器，被配置为：提供针对媒体段的关键帧位置信息，该关键帧位置信息提供与在多个表示的媒体段中的关键帧的位置有关的指示。
根据第五方面，本公开呈现了从HTTP服务器节点接收流传输媒体内容的HTTP客户端节点，该媒体内容被布置为多个周期，以及每个这样的周期包括媒体段的多个表示。客户端节点包括：时间对准信息接收机，被配置为：接收针对多个表示的媒体段的时间对准信息，该时间对准信息提供与在媒体内容的多个表示的段之间的时间关系有关的指示。此外，客户端节点包括：关键帧位置接收机，被配置为：接收针对媒体段的关键帧位置信息，该关键帧位置信息提供与在多个表示的媒体段中的关键帧的位置有关的指示。最后，客户端节点包括：自适应控制器，被配置为：基于接收到的时间对准信息和接收到的关键帧位置信息中的至少一项，控制媒体内容的HTTP流传输的自适应。
本公开的优点包括支持在HTTP流传输会话期间进行的增强自适应控制。
附图说明
通过参考与附图相结合的以下描述，可以最好地理解本发明及其其他目标和优点，在附图中：
图1是根据本公开的方法的实施例的示意性流程图；
图2是根据本公开的在HTTP流传输服务器节点中使用的方法的实施例的示意性流程图；
图3是根据本公开的在HTTP流传输客户端节点中使用的方法的实施例的示意性流程图；
图4是根据本公开的HTTP流传输服务器节点和HTTP流传输客户端的实施例的示意性说明图；
图5A-E是示出了本公开的实施例的示意图；
图6A-D是示出了本公开的实施例的示意图；
图7是本公开的实现的示意性说明图。
缩写
HTTP 超文本传输协议
GOP 图片组
RAP 随机接入点(关键帧)
MPD 媒体呈现描述
CDN 内容分发网络
RSTP 实时流传输协议
具体实施方式
在全部附图中，相同的附图标记用于相似或者对应的单元。
如背景技术部分中讨论的，在当前的HTTP流传输系统中，需要对客户端侧上的自适应性能与服务器/高速缓存上的相同大小的文件/段之间的权衡加以平衡。发明人已认识到：如果有可能向客户端节点指示各个段和表示之间的关系，则允许大小不相等的段将是有利的。通过提供与分段的当前状态有关的信息(例如，在一个或多个表示中的一个或多个段之间的时间对准)的解决方案，为了客户端和服务器节点的利益，客户端可以基于该信息来执行自适应。
发明人已认识到：在前述的清单中，对段的所有版本或表示是否具有对准的边界加以信号通知将是有利的。例如，这可以在所有的表示在相同时间开始(因为给定这两个限制，发生对准)时使用旗标equalSegmentVersionDurations来完成。由于段对准使得自适应更加简单，在该旗标信号通知段对准的情况下，则客户端可以选择仅提供自适应。在没有设置旗标的情况下，需要针对段的每个版本提供持续时间，如果设置了该持续时间，仅需要将该持续时间应用到所有版本。虽然本公开主要描述清单中的信令，以某种其他方式来信号通知时间对准信息也是一样可能的。
参考图1，将描述对在通信系统中的HTTP服务器节点和HTTP客户端节点之间的媒体内容的自适应HTTP流传输进行控制的方法的实施例。如前所述，将媒体内容(例如，视频、音频等)布置为多个周期，每个周期包括媒体段的多个表示或版本。首先，针对每个表示的媒体段提供S10时间对准信息。该时间对准信息提供对在相同媒体内容的多个表示中的每个表示内的段之间的时间关系的指示。换言之，时间对准信息提供了与例如哪个表示的哪个段在给定的时间点处开始、每个相应段的持续时间、相同段的若干表示是否时间对准等等有关的信息。此外，提供S20媒体段的关键帧位置信息。关键帧位置信息提供了与媒体段中的关键帧的位置有关的指示。可以显式地或隐式地提供这两种类型的信息，下面将通过一些示例来进行说明。
最后，基于所提供的时间对准信息和关键帧位置信息中的至少一项来控制HTTP流传输会话的自适应。
参考图2，下面将描述在HTTP流传输服务器节点中的方法的实施例。
在HTTP流传输服务器节点中，在发送之前对要发送的媒体内容进行分段，此外，提供一个或多个段的多个版本或表示，以用于至客户端节点的流传输。根据例如客户端友好性之类的因素，服务器节点可以选择精确地在相同点处对每个表示分段(或接收预编码的段)。在这种情况下，所有的段是时间对准的。在服务器节点决定在不同的点处对表示进行分段的情况下，例如，出于高速缓存友好性，一些段可以时间对准，而其他段是不对准的。为了帮助接收客户端节点处的自适应，服务器节点需要信号通知表示是如何时间对准(未对准)的。因此，服务器节点向接收客户端节点提供S110针对相应表示的段的时间对准信息。此外，服务器节点选择或决定是否在各个表示段中包括任何关键帧以及在哪里包括。基于客户端友好性与取得一般的预编码内容的能力之间的权衡，与时间对准策略相对应地执行该选择。基于所选择的关键帧策略，服务器节点附加地向接收客户端节点提供S120针对各个段和表示的关键帧位置信息。
可以隐式地或者直接地执行提供时间对准信息S110和关键帧位置信息S120的步骤。通过提供指示所有段具有相等的持续时间的信息，有可能推断出所有表示的所有段是时间对准的。例如，可以指定缺省值。
根据具体实施例，在向接收客户端节点提供的清单文件或媒体呈现描述中，向接收客户端节点信号通知上述的时间对准信息和关键帧位置信息。然而，即使不一定有利，也可以通过某种其他信息交换向客户端节点提供该信息。
具体地，关键帧位置信息可以包括：在清单中，信号通知所有或一些具体的段是否以关键帧开始。这可以通过例如使用旗标StartsWithRAP来完成。因为以关键帧开始使得自适应更加简单，则客户端可以选择仅在该旗标信号通知特定的段以关键帧开始的情况下才提供自适应。
上述信号通知可以是隐式的或者显式的。例如，可以指定缺省值。
替代对关键帧或随机接入点出现在段的开始处的显式信号通知，或者对关键帧或随机接入点在段的开始中的位置的显式信号通知，可以提供描述流的RAP或GOP结构的信令。通过这种方式，客户端可以计算关键帧在流中的位置。
上面使用了术语“时间对准的段”。同等地，本公开也同样应用于恒定的段持续时间(其可以或者可以不与时间对准的段一致)。例如，可以信号通知在每三个音频分组上存在时间对准。
下面将参考图3来描述在HTTP流传输客户端节点(例如，接收客户端节点)中的方法的实施例。
客户端节点参与来自HTTP流传输服务器节点的HTTP流传输会话。客户端节点接收S210与针对一些或所有的可用表示及其相应的段的时间对准(或者缺乏时间对准)有关的信息。此外，客户端节点接收S220与关键帧在表示段中的位置有关的信息。基于接收到的信息，然后客户端节点可以通过根据是否信号通知了时间对准的段以及段是否以关键帧开始，执行自适应，以控制S230其针对流传输会话的自适应。
如果客户端接收到表示的段是时间对准的信息，其可以在段边界上直接进行自适应，而不需要重新计算新表示的时间线。相反，如果客户端接收到段没有时间对准的信息，客户端需要支持这些流的同步的其他信息(例如，来自文件内部或者来自呈现的开始)，然后执行媒体的拼接。
下面将描述一些实施例，这些实施例示出了基于所提供的时间对准信息对自适应的控制。根据一个实施例，客户端节点可以选择仅在以下情况下执行自适应：通过接收对所有的段具有相等的持续时间的指示，显式地或者隐式地指示时间对准的段。此外，根据另一个实施例，客户端可以选择仅在已经指示时间对准和恒定的段持续时间的情况下执行自适应。
根据又一实施例，客户端通过以下方式执行自适应：在信号通知时间对准的段并且编解码数据相同时，将已编码的段加以串接。
除了恒定的段持续时间，信令可以帮助客户端执行特殊的回放技巧，例如，通过每两个段跳过第二个段来快进。
在接收到关键帧位置信息或关键帧信令时，客户端可以决定其是否需要同时下载多个段，以提供无中断的回放。如果信令示出了关键帧信息，客户端精确地知道其在什么点上可以对新表示进行正确解码。可以使用该信息来决定是否在切换之前停止对当前帧解码。
其次，客户端可以使用在段的开始处没有关键帧，来决定不允许对这些段(或表示)进行自适应。
第三种可能性是将时间对准的段的信令与信号通知的关键帧相结合。如果段都是时间对准的，且他们以关键帧来开始，则流切换是最简单的，以及客户端可以选择仅在检测到两个信号的一些特定组合的情况下才进行流切换。
另一种类型的自适应可以在将其应用于立体视频时起作用。取决于网络带宽条件，可以在立体模式(左眼表示和右眼表示都下载)或单一模式(仅下载左/右眼表示)之间进行自适应。使用关键帧信令，客户端可以决定执行自适应的最优方式。例如，如果左眼表示的所有段以关键帧开始，并且右眼表示的很少的段以关键帧开始，将希望在立体模式和右眼模式之间进行自适应，因为关键帧在左眼视频中的频繁出现允许灵活地停止和重新开始。这可以极大地便于根据需要来调入和调出立体模式。
将参考图4描述系统的一些实施例，该系统包括至少一个HTTP流传输服务器节点100和至少一个HTTP流传输客户端节点200。如连接服务器节点100和客户端节点200的被标记为流传输媒体内容的箭头所指示的，这两个单元参与到流传输会话中，其中，客户端节点100从服务器节点取得特定表示的内容。
HTTP流传输服务器节点100包括通用输入/输出单元I/O以及时间对准信息提供器110，时间对准信息提供器110用于向HTTP流传输客户端节点200提供针对正在进行或已发起的HTTP流传输会话的表示段的时间对准信息(显式地或者隐式地)。此外，服务器节点100包括关键帧位置信息提供器120，用于提供针对表示段的关键帧位置信息。优选地，HTTP流传输节点100被配置为将这两个信息单元包括在针对服务器节点100和客户端节点200之间的当前流传输会话的清单或者媒体呈现描述文件内。除了以上特征，服务器节点100包括用于对表示进行分段的单元。最后，服务器节点包括用于发起和维持HTTP流传输会话的所有必须(但是没有示出)的单元。
HTTP流传输客户端节点200包括通用输入/输出单元I/O，以及时间对准信息接收机210。时间对准信息接收机210被配置为从HTTP流传输服务器节点100接收与流传输媒体的表示段的时间对准(显式地或者隐式地)有关的信息。可以在前述的清单文件中，或者在单独的信息交换中以某种其他手段接收该信息。此外，客户端节点200包括关键帧位置信息接收机200，用于接收任何关键帧在当前流传输会话中的各个表示段中的位置的信息。也可以在前述清单文件中对此进行接收。最后，客户端节点200包括自适应控制器230，用于基于接收到的时间对准信息和关键帧位置信息中的一项或两项来控制流传输会话的自适应。
将参考图5A-E来描述具有变化的时间对准的不同情况的一些示例。作为不同表示的示例，指示了质量的三个级别，即，高、中和低。
在图5A中，所有版本或表示的所有8个段具有相同的持续时间，即，每个质量的所有段都具有相同的持续时间。换言之，针对所有的表示，流传输服务器以相等的段持续时间对媒体分段。然后，流传输服务器节点向客户端节点提供该信息，优选地，在会话开始处的清单中提供。因此，时间对准信息指示了所有版本的所有段具有相同的持续时间，以及客户端可以控制在任何的段边界处执行自适应(即，表示切换)。
在图5B中，所有版本的所有段具有对准的段开始点，即，段是时间对准的。然而，每个表示的第一段比每个表示的第二段长，但是对于所有的表示具有相同的持续时间。换言之，在每个表示内，流传输服务器使用时间对准但是不相等的段持续时间对媒体分段。因此，时间对准信息提供了与对准的开始点和各个段持续时间有关的指示。对于之前的示例，客户端节点可以控制自适应在任何的段开始点处执行，因为这三个表示的所有段是时间对准的。
在图5C中，两个(或更多)版本的所有段具有相同的持续时间。在此，中和低质量版本是时间对准的，然而针对所有的段也具有相同的持续时间，而高质量表示段具有变化的持续时间。因此，时间对准信息指示了中和低质量段是时间对准的，然而高质量表示不是。因此，可以将自适应控制为在低和中表示(而不是高质量表示)之间的所有段边界之间执行，其中，需要使用附加的考虑或信息来支持自适应。
在图5D中，两个或更多版本的所有段具有对准的段开始点。这与图5C的情况类似，然而相同质量的段的持续时间不是恒定的。在该示例中，时间对准信息指示了高和中质量表示是时间对准的，并具有变化的段持续时间。从图5C可理解，则客户端节点可以控制要在高和中质量表示(而不是低质量表示)的段边界处执行的自适应。
最后，在图5E中，在一个或多个时间点处，在两个或更多版本的一个或多个段边界之间存在时间对准(由虚的垂直线指示)。这是更一般的情况，其中，使一些特定的时间点更适于质量切换。在该情况下，时间对准信息指示了哪些表示的哪些段边界是时间对准的。如通过示例示出的，在所指示的段边界处，所有三个表示都是时间对准的，为此，在这些特定的时间点处，而不是在其他时间点处，控制所有质量表示之间的自适应是可能的。
下面，将参考图6A-D提供与关键帧位置信息有关的一些说明性示例。如前所述，流传输服务器可以提供与关键帧位置有关的信息，以指示所有或一些具体的段是否以关键帧开始。作为响应，客户端节点可以在特定的段以关键帧开始(或者某个其他标准)的情况下选择提供自适应。
在图6A中，所有版本的所有段以关键帧开始(如虚的垂直线所指示的)。然后，向客户端节点提供关键帧位置的信息，以及客户端节点可以选择提供自适应，例如，在任何表示的任何段处切换表示。
在图6B中，一个版本的所有段都以关键帧开始。在该情况下，仅低质量版本在所有的段中具有关键帧，而中和高质量版本各自在一个段中有一个关键帧。因此，仅可能控制在一个时间点上，在一个特定段处，执行低和中质量之间的自适应，以及在另一稍后的时间点，在另一特定段处，执行低和高质量之间的自适应。
在图6C中，一个或多个版本的一个或多个段以关键帧开始。将这信号通知给客户端节点，然后，客户端节点可以选择基于这些提供的关键帧来提供自适应。
最后，在图6D中，提供一个或多个关键帧在一个或多个段中的位置，并在接收客户端节点中接收。与之前的实施例相对照，这些关键帧没有在它们相应的段的开始处提供，而是包含在它们的段中
可以使用任何传统技术在硬件中实现上面描述的步骤、功能、过程和/或块，所述传统技术例如是分立电路或集成电路技术，包括通用电子电路和专用电路。
备选地，可以在供合适的处理设备执行的软件中实现上述步骤、功能、过程和/或块中的至少一些，所述处理设备例如是微处理器、数字信号处理器(DSP)、和/或任何合适的可编程逻辑器件，如现场可编程门阵列(FPGA)器件。
还应该理解，重复使用网络节点的通用处理能力是可能的。例如，这可以通过对现有软件重新编程或者通过添加新的软件组件来执行。
可以将软件实现为计算机程序产品，计算机程序产品通常在计算机可读介质上执行。从而，可以将软件加载到计算机的操作存储器中，以由计算机的处理器来执行。计算机/处理器不是必须专用于仅执行上述步骤、功能、过程和/或块，而是还可以执行其他的软件任务。
下面，将参考图7来描述计算机实现的示例。计算机300包括处理器310、操作存储器320和输入/输出单元330。在该具体的示例中，以软件325来实现上述步骤、功能、过程和/或块中的至少一些，软件325被加载到操作存储器320中，以由处理器310执行。处理器310和存储器320经由系统总线彼此互连，以使得可以进行正常的软件执行。I/O单元330可以经由I/O总线与处理器310和/或存储器320互连，以进行相关数据的输入和/或输出(例如，输入参数和/或所产生的输出参数)。
应当将上述实施例理解为本发明的一些说明性的示例。本领域技术人员将理解，在不脱离本发明的范围的情况下，可以对实施例进行各种修改、组合和改变。具体地，只要技术上可能，可以按照其他配置来组合不同实施例中的不同部分解决方案。然而，本发明的范围由所附权利要求限定。

Claims (19)

1.一种对在通信系统中的HTTP服务器和HTTP客户端之间的媒体内容的自适应HTTP流传输进行控制的方法，所述媒体内容被布置为多个周期，以及每个所述周期包括三个或更多个媒体段的多个表示，所述方法包括：
提供(S10)针对所述多个表示的所述媒体段的时间对准信息，所述时间对准信息提供与对于所述媒体内容的所述多个表示的所有段公共的时间关系有关的指示，其中，所述时间对准信息是通过提供所述多个表示中的至少一个表示的至少一个段的段持续时间以及对所述多个表示共享公共开始时间的指示来隐式提供的；
提供(S20)针对所述媒体段的关键帧位置信息，所述关键帧位置信息指示关键帧是否位于所述多个表示中的每个段的开始处，其中，所述关键帧位置信息指示位于至少一个表示的至少一个段中的关键帧位置；以及
基于提供的所述时间对准信息和提供的所述关键帧位置信息中的至少一项，控制(S30)所述媒体内容的所述HTTP流传输的自适应。
2.根据权利要求1所述的方法，其中，控制所述HTTP流传输的自适应包括：基于提供的所述时间对准信息和提供的所述关键帧位置信息来控制所述HTTP流传输的自适应。
3.根据权利要求1所述的方法，其中，控制所述HTTP流传输的自适应包括：如果所述时间对准信息指示所述多个表示中的至少两个表示的各自至少一个相应段的开始是时间对准的，控制所述HTTP流传输的自适应，以在段边界处直接执行。
4.根据权利要求1所述的方法，其中，控制所述HTTP流传输的自适应包括：如果提供恒定的段持续时间，控制所述HTTP流传输的自适应。
5.根据权利要求1所述的方法，其中，提供所述关键帧位置信息包括：直接地或者隐式地提供所述关键帧位置信息。
6.一种在向通信系统中的HTTP客户端流传输媒体内容的HTTP服务器节点中使用的方法，所述媒体内容被布置为多个周期，以及每个所述周期包括三个或更多个媒体段的多个表示，所述方法包括：
提供(S110)针对所述多个表示的所述媒体段的时间对准信息，所述时间对准信息提供与对于所述媒体内容的所述多个表示的所有段公共的时间关系有关的指示；
提供(S120)针对所述媒体段的关键帧位置信息，所述关键帧位置信息指示关键帧是否位于所述多个表示中的每个段的开始处。
7.根据权利要求6所述的方法，其中，提供所述时间对准信息和所述关键帧位置信息包括：在媒体呈现描述文件或清单文件中提供所述时间对准信息和所述关键帧位置信息。
8.根据权利要求6所述的方法，还包括：在公共的时间点处对所述多个表示中的每个表示进行分段；
其中，提供所述时间对准信息包括：提供指示所述多个表示中的所有表示在公共的时间点处时间对准的时间对准信息。
9.根据权利要求6所述的方法，还包括：在关键帧位置处对所述多个表示中的每个表示进行分段。
10.根据权利要求6所述的方法，还包括：在不同时间点处对所述多个表示中的每个表示进行分段，
其中，提供时间对准信息包括：提供指示所述多个表示缺少时间对准的段的时间对准信息。
11.根据权利要求6所述的方法，还包括：在非关键帧位置处对所述多个表示中的每个表示进行分段，
其中，提供关键帧位置信息包括：提供指示所述多个表示中的关键帧位置的关键帧位置信息。
12.一种在从通信系统中的HTTP服务器节点接收流传输媒体内容的HTTP客户端节点中使用的方法，所述媒体内容被布置为多个周期，以及每个所述周期包括三个或更多个媒体段的多个表示，所述方法包括：
接收(S210)针对所述多个表示的所述媒体段的时间对准信息，所述时间对准信息提供与对于所述媒体内容的所述多个表示的所有段公共的时间关系有关的指示；
接收(S220)针对所述媒体段的关键帧位置信息，所述关键帧位置信息指示关键帧是否位于所述多个表示中的每个段的开始处；
基于接收到的所述时间对准信息和接收到的所述关键帧位置信息中的至少一项，控制(S230)所述媒体内容的所述HTTP流传输的自适应。
13.根据权利要求12所述的方法，其中，控制所述HTTP流传输的自适应包括：如果所述时间对准信息指示提供了时间对准的段，控制所述HTTP流传输的自适应。
14.根据权利要求12所述的方法，其中，控制所述HTTP流传输的自适应包括：如果通过恒定段持续时间指示隐式地接收所述时间对准信息，控制所述HTTP流传输的自适应。
15.根据权利要求12所述的方法，其中，控制所述HTTP流传输的自适应包括：如果接收到显式的时间对准信息和恒定段持续时间指示，控制所述HTTP流传输的自适应。
16.根据权利要求12所述的方法，其中，控制所述HTTP流传输的自适应包括：如果接收到时间对准信息并且编解码数据相同，通过串接编码段来控制所述HTTP流传输的自适应。
17.根据权利要求12所述的方法，其中，控制所述HTTP流传输的自适应包括：仅在接收到关键帧位置指示的情况下，才控制所述HTTP流传输的自适应。
18.一种向通信系统中的HTTP客户端流传输媒体内容的HTTP服务器节点(100)，所述媒体内容被布置为多个周期，以及每个所述周期包括三个或更多个媒体段的多个表示，所述服务器节点(100)包括：
时间对准信息提供器(110)，被配置为：提供针对所述多个表示的所述媒体段的时间对准信息，所述时间对准信息提供与对于所述媒体内容的所述多个表示的所有段公共的时间关系有关的指示；
关键帧位置提供器(120)，被配置为：提供针对所述媒体段的关键帧位置信息，所述关键帧位置信息指示关键帧是否位于所述多个表示的每个段的开始处。
19.一种从HTTP服务器节点接收流传输媒体内容的HTTP客户端节点(200)，所述媒体内容被布置为多个周期，以及每个所述周期包括三个或更多个媒体段的多个表示，所述客户端节点包括：
时间对准信息接收机(210)，被配置为：接收针对所述多个表示的所述媒体段的时间对准信息，所述时间对准信息提供与对于所述媒体内容的所述多个表示的所有段公共的时间关系有关的指示；
关键帧位置接收机(220)，被配置为：接收针对所述媒体段的关键帧位置信息，所述关键帧位置信息指示关键帧是否位于所述多个表示的每个段的开始处；
自适应控制器(230)，被配置为：基于接收到的所述时间对准信息和接收到的所述关键帧位置信息中的至少一项，控制所述媒体内容的HTTP流传输的自适应。
CN201180010081.8A 2010-02-19 2011-02-16 用于在http流传输中进行自适应的方法和装置 Active CN102812683B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US30598310P 2010-02-19 2010-02-19
US61/305,983 2010-02-19
PCT/SE2011/050167 WO2011102792A1 (en) 2010-02-19 2011-02-16 Method and arrangement for adaption in http streaming

Publications (2)

Publication Number Publication Date
CN102812683A CN102812683A (zh) 2012-12-05
CN102812683B true CN102812683B (zh) 2016-08-17

Family

ID=44483192

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180010081.8A Active CN102812683B (zh) 2010-02-19 2011-02-16 用于在http流传输中进行自适应的方法和装置

Country Status (10)

Country Link
US (2) US9112933B2 (zh)
EP (2) EP3018881A1 (zh)
JP (1) JP5824465B2 (zh)
KR (2) KR101624013B1 (zh)
CN (1) CN102812683B (zh)
AU (1) AU2011218489B2 (zh)
CA (1) CA2786257C (zh)
MX (1) MX2012007838A (zh)
PL (1) PL2537319T3 (zh)
WO (1) WO2011102792A1 (zh)

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7068729B2 (en) 2001-12-21 2006-06-27 Digital Fountain, Inc. Multi-stage code generator and decoder for communication systems
US6307487B1 (en) 1998-09-23 2001-10-23 Digital Fountain, Inc. Information additive code generator and decoder for communication systems
US9240810B2 (en) 2002-06-11 2016-01-19 Digital Fountain, Inc. Systems and processes for decoding chain reaction codes through inactivation
EP1552617A2 (en) 2002-10-05 2005-07-13 Digital Fountain, Inc. Systematic encoding and decoding of chain reaction codes
CN1954501B (zh) 2003-10-06 2010-06-16 数字方敦股份有限公司 通过通信信道接收从源发射的数据的方法
JP4971144B2 (ja) 2004-05-07 2012-07-11 デジタル ファウンテン， インコーポレイテッド ファイルダウンロードおよびストリーミングのシステム
KR101292851B1 (ko) 2006-02-13 2013-08-02 디지털 파운튼, 인크. 가변적 ｆｅｃ 오버헤드 및 보호 구간을 이용하는 스트리밍및 버퍼링
US9270414B2 (en) 2006-02-21 2016-02-23 Digital Fountain, Inc. Multiple-field based code generator and decoder for communications systems
US7971129B2 (en) 2006-05-10 2011-06-28 Digital Fountain, Inc. Code generator and decoder for communications systems operating using hybrid codes to allow for multiple efficient users of the communications systems
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US9419749B2 (en) 2009-08-19 2016-08-16 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9209934B2 (en) 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9178535B2 (en) 2006-06-09 2015-11-03 Digital Fountain, Inc. Dynamic stream interleaving and sub-stream based delivery
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
JP5027305B2 (ja) 2007-09-12 2012-09-19 デジタル ファウンテン， インコーポレイテッド 信頼できる通信を可能にするためのソース識別情報の生成および伝達
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
US9288010B2 (en) 2009-08-19 2016-03-15 Qualcomm Incorporated Universal file delivery methods for providing unequal error protection and bundled file delivery services
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
US9049497B2 (en) 2010-06-29 2015-06-02 Qualcomm Incorporated Signaling random access points for streaming video data
US8918533B2 (en) 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US9319448B2 (en) 2010-08-10 2016-04-19 Qualcomm Incorporated Trick modes for network streaming of coded multimedia data
US9270299B2 (en) 2011-02-11 2016-02-23 Qualcomm Incorporated Encoding and decoding using elastic codes with flexible source block mapping
US8958375B2 (en) 2011-02-11 2015-02-17 Qualcomm Incorporated Framing for an improved radio link protocol including FEC
CN108366070A (zh) * 2011-03-16 2018-08-03 韩国电子通信研究院 用于提供媒体内容的方法和客户端
US9462024B2 (en) * 2011-06-08 2016-10-04 Futurewei Technologies, Inc. System and method of media content streaming with a multiplexed representation
KR101840008B1 (ko) * 2011-06-24 2018-05-04 에스케이플래닛 주식회사 고화질 비디오 스트리밍 서비스 방법 및 시스템
US9253233B2 (en) * 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9843844B2 (en) * 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
PL2798816T3 (pl) * 2011-12-29 2016-11-30 Inicjowane sieciowo sterowanie strumieniowego przesyłania zawartości
US9294226B2 (en) 2012-03-26 2016-03-22 Qualcomm Incorporated Universal object delivery and template-based file delivery
JP6021385B2 (ja) * 2012-03-30 2016-11-09 エヌ・ティ・ティ・コミュニケーションズ株式会社 ストリーミングメディア再生装置、ストリーミングメディア再生方法、及びプログラム
CN102780919A (zh) * 2012-08-24 2012-11-14 乐视网信息技术（北京）股份有限公司 通过关键帧进行视频定位和播放的方法
US9813325B2 (en) 2012-12-27 2017-11-07 Comcast Cable Communications, Llc Information stream management
US9654533B2 (en) * 2013-01-17 2017-05-16 Electronics And Telecommunications Research Institute Method of adaptively delivering media based on reception status information from media client and apparatus using the same
WO2014133589A1 (en) * 2013-03-01 2014-09-04 Intel Corporation Wireless local area network (wlan) traffic offloading
HUE043713T2 (hu) * 2013-03-29 2019-09-30 Intel Ip Corp Minõségtudatos sebességillesztési technikák DASH streameléshez
EP3065414B1 (en) * 2013-10-30 2019-01-09 Saturn Licensing LLC Transmission device, transmission method, reception device, and reception method
US9197717B2 (en) 2013-11-27 2015-11-24 At&T Intellectual Property I, Lp Server-side scheduling for media transmissions according to client device states
WO2015105327A1 (ko) * 2014-01-08 2015-07-16 한국전자통신연구원 Ｄａｓｈ를 사용하는 비디오 재생을 위한 비트 깊이 표현 방법
DE102014109088A1 (de) * 2014-06-27 2015-12-31 Deutsche Telekom Ag Verfahren zum kontinuierlichen Überwachen einer Synchronität zwischen verschiedenen beim HTTP adaptiven Streaming verwendeten Qualitätsprofilen
KR101600469B1 (ko) * 2014-07-16 2016-03-07 김재경 스트리밍 서비스를 위한 클라이언트 및 서버의 동작 방법
KR101919726B1 (ko) * 2015-02-15 2018-11-16 후아웨이 테크놀러지 컴퍼니 리미티드 하이퍼텍스트 전송 프로토콜 미디어 스트림에 기초한 미디어 프레젠테이션 가이드 방법 및 관련 장치
US10652625B1 (en) * 2016-06-27 2020-05-12 Amazon Technologies, Inc. Synchronization of multiple encoders for streaming content
US10812558B1 (en) * 2016-06-27 2020-10-20 Amazon Technologies, Inc. Controller to synchronize encoding of streaming content
US10652292B1 (en) * 2016-06-28 2020-05-12 Amazon Technologies, Inc. Synchronization of multiple encoders for streaming content
US10652166B2 (en) * 2017-06-27 2020-05-12 Cisco Technology, Inc. Non-real time adaptive bitrate recording scheduler

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101576930A (zh) * 2008-04-22 2009-11-11 波尔图科技有限责任公司 把由第一用户观看的视频内容项的关键帧发布到第二用户

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7155735B1 (en) * 1999-10-08 2006-12-26 Vulcan Patents Llc System and method for the broadcast dissemination of time-ordered data
US6792047B1 (en) * 2000-01-04 2004-09-14 Emc Corporation Real time processing and streaming of spliced encoded MPEG video and associated audio
US20060064716A1 (en) * 2000-07-24 2006-03-23 Vivcom, Inc. Techniques for navigating multiple video streams
US7908628B2 (en) * 2001-08-03 2011-03-15 Comcast Ip Holdings I, Llc Video and digital multimedia aggregator content coding and formatting
KR100486713B1 (ko) * 2002-09-17 2005-05-03 삼성전자주식회사 멀티미디어 스트리밍 장치 및 방법
KR100798551B1 (ko) * 2005-03-01 2008-01-28 비브콤 인코포레이티드 인포머셜 제공 방법
CN100444637C (zh) * 2005-04-14 2008-12-17 中兴通讯股份有限公司 一种在网络中传输视频流的方法
CN102752639B (zh) 2005-07-18 2015-08-05 汤姆森许可贸易公司 使用元数据来处理多个视频流的方法和设备
JP2007036666A (ja) * 2005-07-27 2007-02-08 Onkyo Corp コンテンツ配信システム、クライアント及びクライアントプログラム
US20070169152A1 (en) * 2005-12-30 2007-07-19 Daniel Roodnick Data and wireless frame alignment for error reduction
JP2008236390A (ja) 2007-03-20 2008-10-02 Asv:Kk 映像再生システムにおける映像シーク制御方式
US8635360B2 (en) * 2007-10-19 2014-01-21 Google Inc. Media playback point seeking using data range requests
US8543720B2 (en) * 2007-12-05 2013-09-24 Google Inc. Dynamic bit rate scaling
US8379851B2 (en) * 2008-05-12 2013-02-19 Microsoft Corporation Optimized client side rate control and indexed file layout for streaming media
US8831402B2 (en) * 2008-06-16 2014-09-09 Telefonaktiebolaget Lm Ericsson (Publ) Media stream processing
CN101511010A (zh) * 2009-03-27 2009-08-19 北京中星微电子有限公司 一种媒体流发送方法及装置
US8355433B2 (en) * 2009-08-18 2013-01-15 Netflix, Inc. Encoding video streams for adaptive video streaming
US8914835B2 (en) * 2009-10-28 2014-12-16 Qualcomm Incorporated Streaming encoded video data
EP3220281A1 (en) * 2009-11-04 2017-09-20 Amotech Co., Ltd. System and method for media content streaming
US8456531B2 (en) * 2010-01-14 2013-06-04 Cheetah Technologies, L.P. Video alignment and calibration for video quality measurement
WO2012032502A1 (en) 2010-09-10 2012-03-15 Nokia Corporation A method and apparatus for adaptive streaming

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101576930A (zh) * 2008-04-22 2009-11-11 波尔图科技有限责任公司 把由第一用户观看的视频内容项的关键帧发布到第二用户

Also Published As

Publication number Publication date
KR20130009740A (ko) 2013-01-23
EP3018881A1 (en) 2016-05-11
EP2537319A1 (en) 2012-12-26
US20120317189A1 (en) 2012-12-13
WO2011102792A1 (en) 2011-08-25
AU2011218489B2 (en) 2015-08-13
EP2537319A4 (en) 2013-08-14
CA2786257C (en) 2018-03-06
EP2537319B1 (en) 2016-02-10
JP2013520865A (ja) 2013-06-06
JP5824465B2 (ja) 2015-11-25
US9112933B2 (en) 2015-08-18
CA2786257A1 (en) 2011-08-25
AU2011218489A1 (en) 2012-08-09
KR101709903B1 (ko) 2017-02-23
US20150237094A1 (en) 2015-08-20
KR20160052763A (ko) 2016-05-12
KR101624013B1 (ko) 2016-05-24
CN102812683A (zh) 2012-12-05
MX2012007838A (es) 2012-07-30
US9479555B2 (en) 2016-10-25
PL2537319T3 (pl) 2016-06-30

Similar Documents

Publication Publication Date Title
CN102812683B (zh) 用于在http流传输中进行自适应的方法和装置
US10873608B2 (en) Methods and devices for media description delivery
JP6231583B2 (ja) ネットワークを介するメディアストリーミングのためのトランスポートダイバーシティおよびタイムシフトバッファのサポート
EP2497267B1 (en) Streaming with optional broadcast delivery of data segments
RU2552176C2 (ru) Управление сеансом связи для передачи медиапотока
CN107925669B (zh) 一种消息交互的方法和提供媒体服务的系统
CN111836059B (zh) 一种媒体流发送方法、装置和设备
EP3001692A1 (en) Streaming media processing method, apparatus and system
KR20190088052A (ko) 데이터 스트리밍에 대한 보조의 노드 타입 기반 제어
WO2015142752A1 (en) Transport accelerator implementing a multiple interface architecture
WO2017202373A1 (zh) 流媒体快速启动方法、装置和系统
CN110832821B (zh) 下载视听内容的方法和设备
CN104602047B (zh) Epg数据的分享方法、服务器、终端及系统
CN111835697A (zh) 一种媒体流发送方法、装置、设备和系统
WO2011136703A1 (en) Method and arrangement for playing out a media object
US10158923B2 (en) Method of broadcasting contents by streaming in a peer-to-peer network
WO2016119735A1 (en) Method and device for adaptive video content delivery using http
JP2015008475A (ja) データセグメントのオプションのブロードキャスト配信によるストリーミング

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant