CN105052107B - 使用质量信息进行媒体内容自适应传输 - Google Patents

使用质量信息进行媒体内容自适应传输 Download PDF

Info

Publication number
CN105052107B
CN105052107B CN201480004582.9A CN201480004582A CN105052107B CN 105052107 B CN105052107 B CN 105052107B CN 201480004582 A CN201480004582 A CN 201480004582A CN 105052107 B CN105052107 B CN 105052107B
Authority
CN
China
Prior art keywords
media content
mass value
quality
information
bit rate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480004582.9A
Other languages
English (en)
Other versions
CN105052107A (zh
Inventor
张少波
亚历山大·吉拉德
王新
许阳坡
刘欣
邸佩云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN105052107A publication Critical patent/CN105052107A/zh
Application granted granted Critical
Publication of CN105052107B publication Critical patent/CN105052107B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]

Abstract

本发明提供了一种媒体内容实例信息的客户端获取设备，其包括，包括：处理器；与所述处理器相连接的存储器，所述存储器存储有指令，当所述指令由所述设备执行，则会使所述设备执行如下操作：获取媒体内容实例信息，所述信息包括指示所述媒体内容实例的部分的质量值可用性的质量信息，其中，所述部分还有与其相关联的各自的比特率，所述质量值包括所述媒体内容实例的部分的质量指标；获取所述质量信息指示的质量值；选择所述部分中的第一部分进行下载，选取的所述第一部分使用所述质量值中的一个质量值。

Description

使用质量信息进行媒体内容自适应传输
背景技术
视频流媒体越来越受欢迎，据估计，视频流量超过了内容分发网络(CDNs) 总流量的百分之五十。DASH(超文本传输协议(HTTP)动态自适应流媒体) 的目的是通过基于HTTP的内容分发网络提升服务器与客户端之间多媒体内容的传输效率。
HTTP自适应流媒体允许流媒体客户端在多媒体内容的不同表示之间切换，所述多媒体内容以多种不同的比特率进行了编码(压缩)。每一个表示可被划分为一个或多个片段，每个片段可被划分为一个或多个子片段。无论是处于表示级别还是片段/子片段级别，每一表示的比特率信息都是通过一个包含元数据的文件提供给客户端的，该文件被称为媒体描述文件(MPD)。基于所述比特率信息，客户端可以根据可用带宽从一个表示切换到另一个表示。从一个表示到另一个表示的切换发生在片段/子片段边界，称为流媒体接入点(SAPs)。因此，所述客户端可以在有较多的带宽可用时从一个较高的比特率表示对片段/子片段进行串流，在较少的带宽可用时从较低的比特率表示对片段/子片段进行串流。通常，比特率驱动的自适应流媒体本性贪婪，每个客户端会选择并传输在可用的带宽量下具有客户端所能处理的最高比特率的表示。
比特率能够影响质量水平，尽管质量并非完全由比特率决定。当带宽或比特率随着时间变化，例如，当客户端在高比特率表示和低比特率表示之间来回切换时，质量会产生波动。此外，由于多个流媒体客户端和应用争用带宽，本性贪婪的比特率驱动的自适应流媒体有时能够在可用的带宽下加大变化的程度和频率，因此也会加大质量波动。
表示可以被编码成固定比特率(CBR)版本或者可变比特率(VBR)版本。在CBR下，比特率控制良好，比特率接近于固定。然而，内容的复杂度会由于从相对静态(不太复杂)的场景到动态(更复杂)场景的切换而发生变化。因此，除非指定的比特率很高足以包络更为复杂的场景，否则，质量会剧烈的波动。然而，针对不太复杂的场景，当这些场景通过网络发送时，持续地使用较高的比特率意味着带宽的浪费。
VBR可以不受限制，也可以是受到限制(比特率有上限最高值)。在VBR 下，较高的比特率可以分配至较为复杂的场景，较低的比特率可以分配至不太复杂的场景。因此，质量波动相对较小，但质量仍然不能稳定，尤其在VBR 受限时。同样地，使用较高的比特率并不一定能够提升质量；结果，较高比特率的使用不但不能带来质量上的提升反而造成了带宽的浪费。
综上所述，比特率驱动的自适应流媒体会导致至少以下两个问题：质量波动和带宽的低效利用。
发明内容
在网络中，例如在无线网络中，频繁而剧烈的带宽变化十分常见。自适应流媒体的解决方案通常旨在当尽可能多的带宽被使用时去适应网络带宽的变化。在当今的DASH(HTTP动态自适应流媒体)标准(例如，ISO/IEC 23009-1) 中，仅基于比特率信息的表示(或片段/子片段)切换使得变化的带宽能够被适应；通过匹配表示/片段/子片段的比特率和可用带宽实现了这种适应。
如上所述，匹配媒体内容比特率和可用带宽的适应可导致流媒体内容质量的剧烈波动，从而给观众的体验带来负面影响；带宽的波动也会转化成质量的波动。此外，带宽会被浪费掉；更高的带宽并不意味着更高的质量，尤其是针对不是太复杂的场景，较低的比特率即可带来满意的质量。
在本发明实施例中，这些问题通过向客户端提供媒体数据的质量指标(例如，质量值)得以解决。本发明实施例还介绍了如何将质量值发送至客户端，如何向客户端提供质量值，以及客户端在自适应流媒体中如何使用质量值。
在本发明实施例中，不同的表示与媒体内容实例(如电影)相关联，一个表示可包括媒体内容的多个部分(如多个片段或者子片段)。相应的质量值可以与每个部分相关联。生成媒体内容实例信息(例如，MPD(媒体描述文件))。所述信息包括媒体内容实例的质量信息。所述内容实例信息，包括质量信息，可以让客户端获取和/或发送至客户端。所述质量信息指示质量值的可用性，以及质量值所在的位置和/或怎样能够检索到这些质量值。
在一个实施例中，所述媒体内容实例的一个部分的质量值包含在与该部分相关联的容器(数据结构)中。在该类实施例中，在DASH实现中，所述质量值包含在与需要的部分相关联的“sidx”容器中。在该类实施例中，所述媒体内容实例信息(如，MPD)包含的所述质量信息包括指示所述质量值在所述容器中可用的元素(例如，可扩展标记语言(XML)元素)。这种方法可称作是“带内”。
在一个实施例中，所述媒体内容实例信息(如，MPD)包含的所述质量信息包括一个元素(例如，XML元素)，且所述媒体内容实例的部分的质量值为所述元素的属性。这种方法可称作是“带外”。
在一个实施例中，所述媒体内容实例的一个部分的质量值包含在第一文件或位置中，所述第一文件或位置与包括媒体内容的第一部分的任何文件或位置分开(不同)。在该类实施例中，所述媒体内容实例信息(如，MPD)包含的所述质量信息包括一个元素(例如，XML元素)，所述元素指示所述质量值在所述第一文件中可用并且提供该文件的位置。这种方法也可称作是“带外”。
为了传输媒体内容实例，客户端可获取所述媒体内容实例信息(例如， MPD)，包括所述质量信息。如上所述，所述客户端通过质量信息意识到媒体内容实例的质量值的存在以及质量值所在的位置。所述客户端可获取所述质量值，然后基于某个部分(例如，一个片段或子片段)的质量值请求媒体内容实例的该个部分。
在一个实施例中，客户端可基于比特率选取待下载的媒体内容实例的部分的候选集，然后将所述候选集中的一个部分替换为具有不同(比如，更低) 的比特率但仍然具有良好质量值的另一个部分。在下载所述媒体内容时，客户端可通过将所述候选集中的一个部分替换为同时基于比特率和质量值选择的一个不同部分来适应可用宽带的变化。
综上所述，本发明实施例利用质量感知的适应增强了比特率驱动的适应。质量和比特率信息用于做出更加明智的适应决定。这样可以提供更加稳定的质量。此外，与比特率驱动的适应相比，在流媒体传输中不会一直选取最高的比特率表示(片段/子片段)。例如，在使用较低的比特率片段或较高的比特率片段都可以实现令人满意的质量水平时，会选取较低的比特率片段使用。因此，可用带宽可以被更有效地利用，也不会浪费不必要的带宽。
通过阅读下面结合各附图介绍的实施例的详细描述，本领域普通技术人员可以了解到本发明实施例的目的和优点。
附图说明
所述附图并入并形成本说明书的一部分，其中相同的数字表示相同的元素，示出了本发明实施例的内容并与本说明书一起用于描述本发明的原理。
图1为实现本发明实施例所基于的一个系统(例如，DASH系统)的组件示例的方框图。
图2示出了本发明实施例提供的一种媒体内容实例的表示。
图3示出了本发明实施例提供的一种媒体内容实例的表示。
图4为本发明实施例提供的一种由计算机实现的包括质量信息在内的媒体内容准备方法的示例的流程图。
图5为本发明实施例提供的一种由计算机实现的质量值定位、获取和使用方法的示例的流程图。
图6为本发明实施例提供的一种基于质量值选取的媒体内容实例的部分的列表的一个示例。
图7和图8为本发明实施例提供的一种由计算机实现的质量值获取和使用方法的示例的流程图。
图9为本发明实施例提供的一种由计算机实现的质量值供应方法的示例的流程图。
图10为实现本发明实施例所基于的一个计算系统的示例的方框图。
具体实施方式
现在请详细地参考本发明的各个实施例，其示例如附图所示。应当理解，尽管在本发明中结合了这些实施例来进行说明，但本发明并不局限于所提到的这些实施例。相反，本发明的保护范围涵盖在所附权利要求限定的本发明的精神和范围内做出的任何修改和替换。此外，本发明具体实施方式中阐述了许多具体的细节以便彻底理解本发明。然而，应当理解的是本发明可以在没有这些具体细节的情况下实行。在其他情况下，一些公知的方法、过程、组件和电路没有进行详细描述，从而防止本发明一些内容变得晦涩难懂。
该具体实施方式的一些部分按照程序、逻辑块、处理、以及对计算机存储器中的数据位的操作的其它符号表示来呈现。这些描述和表示是数据处理领域技术人员向该领域其他技术人员有效传达工作实质内容使用的方法。在本发明中，将程序、逻辑块、处理等设想为首尾一致的步骤或指令序列，以产生期望的结果。这些步骤利用了物理量的物理操控。通常，并不是完全必须的，这些量以电信号或磁信号的形式存在，可以被存储、转移、合并和比较，否则将在电脑系统中被操控。有时候这种方法被证明是行之有效的，主要出于常见用法的考虑，将这些信号作为事务、比特位、数值、元素、符号、字符、样品、或像素等等。
然而，应牢记的是，所有这些和类似的术语都将与适当的物理量相关联，并且仅仅是应用于这些物理量的便捷的标签。除非特别声明，否则从下面的讨论中可以明显发现，在本发明中，“接收”、“识别”、“关联”、“获取”、“请求”、“使用”、“指示”、“检索”、“选取”、“替换”、“监测”、“提供”、“发布”、“评测”、“记录”和“生成”等术语表示电脑系统或类似的电子计算设备或处理器 (例如，图10的系统1000)的行动和过程(例如，分别在图4、5、7、8和 9中的流程400、500、700、800和900)。所述电脑系统或类似的电子计算设备对表示为电脑系统存储器、寄存器或者其他信息存储、传输或显示设备中的物理(电子)量的数据进行操控和转换。
所述实施例可以在计算机可执行指令的一般上下文中讨论，其中所述指令驻留在某种形式的计算机可读存储介质，比如程序模块，由一个或多个计算机或者其他设备执行。举例来说，计算机可读存储介质可以包括非瞬时性计算机存储介质和通信介质。通常，所述程序模块包括例程、程序、对象、组件和数据结构等，可完成特定的任务或者实现特定的抽象数据类型。根据各实施例的需求，可以对所述程序模块的功能进行组合或分布。
计算机存储介质包括任何方法或技术实现的用于存储计算机可读指令、数据结构、程序模块或其它数据等信息的易失性和非易失性的、可移动和不可移动的介质。计算机存储介质包括但不限于随机存取存储器(RAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)，快闪式存储器或其它存储器技术、只读光盘(CD-ROM)、数字多功能光盘(DVDs)或其它光存储、磁盒、磁带、磁盘存储或其它磁存储设备、或其它任何可用于存储所需信息并容许对该信息进行获取检索的介质。
通信介质可包含计算机可执行指令、数据结构和程序模块，还包括任何信息传输介质。举例来说，通信介质包括但不限于有线网络或直接有线连接等有线介质以及例如声学、射频(RF)、红外线和其它无线介质等无线介质。上述介质的任意组合也可以包含在计算机可读介质的范围内。
为了简化描述，在一些使用DASH(HTTP(超文本传输协议)动态自适应流媒体)术语的实例中，本发明实施例可在DASH的背景下讨论。然而，应当理解的是，本发明实施例不一定局限于DASH实现，DASH术语的使用并非一定将此类实施例限制为DASH实现。
图1为实现本发明实施例所基于的一个系统100(例如，DASH系统) 的组件示例的方框图。服务器105为不同媒体内容实例的来源，包括录制的项目(比如但不限于影片)和直播事件(比如但不限于新闻或体育直播)。所述媒体内容可包括音频内容和/或视频内容。
所述媒体内容实例可以进行可变编码(压缩)。换言之，例如，媒体内容实例可使用不同的编码方案(编解码器)进行编码，具有不同的分辨率和带宽(比特率)。媒体内容的一个实例可以基于相同的原始内容但进行不同的编码。换言之，相同的内容实例可以使用不同的编解码器以不同的分辨率和不同的比特率进行编码；每个唯一的分辨率和比特率等的组合可称作是一个表示。
所述服务器105可编码和以其他方式处理媒体内容实例，或者所述媒体内容实例可在其他服务器上进行编码和处理然后发送到所述服务器105上。所述媒体内容实例可通过内容分发网络(CDN)110发送给客户端115。
所述CDN 110可以是有线的、无线的或两者的结合形式。在DASH实现中，所述CDN110使用HTTP是因为HTTP允许在媒体流传输时使用现有的 Web结构。同时，也可以使用部分GET等HTTP命令。
所述客户端115可以是一种计算设备，例如但不限于手提电脑、台式计算机、笔记本、手机、智能手机、媒体播放器、相机、游戏控制台等。
结合图2，媒体内容实例200的表示1、2、…N以不同的比特率、分辨率和宽高比等进行编码。如上所述，媒体内容实例200对应于相同的原始内容(如，单个影片)；媒体内容的单个实例可以有不同的表示(具有不同的比特率等)。
每一个表示1、2、…N可被分割成片段(SEG.)，每个片段可被分为子片段(未显示)。每个片段或子片段表示媒体内容实例200的一个部分；如本文所使用的媒体内容实例的一个部分可以指一个片段或一个子片段。表示可以被分组为适应集；一个适应集可包括媒体内容实例中特定时间段的一个或多个表示。
例如，媒体内容的一个实例逻辑上可以划分成任何数目的时间段。一个或多个适应集可与每个时间段相关联。一个或多个表示可以与每个适应集相关联。一个或多个部分可以与表示相关联。一个或多个片段可与每个表示相关联；一个或多个子片段可与每个片段相关联。
所述服务器105上可用的媒体内容的每个实例的信息将以一种让客户端 115意识到该内容可用性的方式发布和播放。在DASH实现中，媒体内容实例信息包含在MPD(媒体描述文件)中；MPD是为媒体内容的每个实例制订并发布的。MPD为XML(可扩展标记语言)文件，可以被客户端获取。媒体内容实例信息(例如，MPD)描述了该实例各种表示的性质，比如比特率、分辨率和宽高比，还描述了如何在服务器105中检索内容。例如，所述媒体内容实例信息可以包括该实例的每个片段/子片段的通用资源定位器 (URLs)。
值得注意的是，在本发明实施例中，所述媒体内容实例信息还包括质量信息。在DASH实现中，所述质量信息包含在所述MPD中。
一般来说，质量指标(例如，一个或多个质量值)生成并可由所述客户端115获取。所述质量指标可以在表示级别提供(例如，为媒体内容实例的一个表示的所有片段提供一个质量值)或在片段/子片段级别提供(为媒体内容实例的每个部分提供一个质量值)。所述媒体内容实例信息包括的质量信息指示质量指标可用于该实例。所述质量信息还指出了质量值所在的位置和/或怎样能够检索到这些质量值。
所述客户端115在进行流媒体传输时可使用质量指标来做出更加明智的决定。更具体的说，所述客户端115在流媒体传输过程中可以综合考虑比特率和质量指标。基于比特率和质量指标，所述客户端115可基于网络110(图 1)中的可用带宽选择合适的片段/子片段，还可以通过HTTP请求在所述服务器105上检索这些片段/子片段。
所述质量值可在“带内”或“带外”提供。下面将描述带内和带外两种方法。接着，再描述质量值的产生和在流媒体传输中的使用。
带内方法
在本发明的一些实施例中，质量值在带内提供，所述质量值具有构成所述媒体内容的数据。图3示出了在DASH实现中片段300的一个示例。所述片段300可利用自身的URL进行识别和获取，并可以独立于其他此类片段下载到所述客户端。
符合ISO(国际标准化组织)基本媒体文件格式的文件形成的一系列的对象或数据结构称为“容器”。实质上，容器是由一种独特类型的标识符定义的一种面向对象的构建模块，包括长度字段和净负荷。片段300包括若干个这样的容器：styp、sidx、moof和mdat。
所述styp容器指示片段的类型。所述sidx容器包括所述片段300的索引信息；所述moof容器包括媒体内容分片的元数据；所述mdat容器包括所述分片的媒体数据(例如，音频和/或视频帧)。初始片段305指定用于初始化媒体内容的媒体内容。
在带内实施例中，所述片段300的质量指标包含在所述sidx容器中。更具体地说，在一个实施例中，通常包含在所述sidx容器中的信息被扩展，如表1中的例子所示。
在表1中，星号(*)用于标示所述sidx容器中的扩展部分；“quality_value”为一个数值，该数值表示所引用的片段/子片段中的媒体数据的质量；“scale_factor”控制所述质量值的精度。
表1-sidx容器扩展的示例
aligned(8)class SegmentlndexBox extends FUIIBOX(-sidx\version,0){
unsigned int(32)erence—ID；
unsigned int(32)timescale；
if(<ersjon＝＝o)
{
unsigned int(32)earliesr-presentation-time；
unsigned int(32)first—offset；
}
Else
{
unsigned int(64)earliest-presentation—time
unsigned int(64)first—offset；
}
unsigned int(16)reserved＝0
unsigned int(16)reference—count；
for(i＝1；i<＝reference—count；T+)
{
bit(1) reference-tupe；
Undigned int(31) referenced-size；
Undigned int(32) subsegment-durabion；
bit(1) starts-with-SAP；
Undigned int(3) SAP-type；
Undigned int(28) SAP-delta-time；
If(reference-type＝＝0)；//if media data is referenced
{
Undigned int(16)quality-value
Undigned int(16)scale-factor
}
}
}
qidx容器可被定义为直播流中使用的片段的sidx容器的相对简单的版本。可以包含在qidx容器中的信息类型如表2中的例子所示。
表2-sidx容器的示例
aligned(8)class SegmentlndexBox extends FullBox('qidx',version,0){unsigned int(32)reference—ID；unsigned int(16)quality_value；unsigned int(16)scale_factor；
所述qidx容器可置于所述styp容器之后，moof和mdat容器之前。
在一个实施例中，所述媒体内容实例信息(如，MPD)包含的所述质量信息包括一个元素(例如，XML元素)，该元素表明一个片段容器(例如， sidx容器或qidx容器)中的质量指标的存在并指示使用了什么样的质量度量。表3定义了在DASH实现中可包含在MPD中的XML元素。换言之，在DASH 实现中，对MPD进行了扩展以包含一个新的元素(QualityMetric)。
表3中，元素名称为“QualityMetric”，其属性包括“@schemeIDUri”、“@value”和“@accuracy”。所述元素可在适应集级别或表示级别适用。
表3-MPD元素和属性(带内)的示例
Element or Attribute.Name
QualityMetric Element name
@schemelDUri,Identifies the scheme
@value Indicates the metric sed to express quality
@accuracy Float type,indicating accuracy of
the quality value for all segments.
If not present,the quality value is.
rounded off to last digit.
所述质量指标可以表示为例如峰值信噪比(PSNR)、平均意见得分(MOS) 或者结构相似性指数(SSIM)等。
在一个实施例中，qinfo容器被定义并包含在初始片段305中，旨在提供质量度量的一般信息。可以包含在所述qinfo容器中的信息类型如表4中的例子所示。
表4-qinfo容器的示例
aligned(8)class SegmentlndexBox extends Box('qinfo'){unsigned int(4)metric_type unsigned int(28)reserved；
}
带内方法十分优越，因为它可以利用现有的索引机制(如，sidx)来实现，通过扩展sidx容器来包含质量值，从而保持向后兼容性。此外，不需要额外的文件来携带所述质量值。
带外方法
在本发明的一些实施例中，质量值在带外提供。
在带外实施例中，所述媒体内容实例信息(如，MPD)包含的所述质量信息包括一个元素(例如，XML元素)，所述元素包括质量指标(质量值为其中一个属性)。换言之，在DASH实现中，对MPD进行了扩展以包含一个新的元素(QualityTimeline)。
表5定义了在DASH实现中可包含在MPD中的XML元素的一个示例。表5中，元素名称为“QualityTimeline”，其属性包括“@qualityMetric”、“@scaleFactor”、“@s”、“@n”、“@sf”、“@q”和“@b”。在一个实施例中， QualityTimeline元素应用于片段级别。
表5-MPD元素和属性(带外)的示例
Element or Attribute Name Descriptio
QualityTimeline Indicates what metric is used to express quality(e.g., PSNR,MOS,SSIM)
@qualityMetric The default scale factor for the value of@q in all Qelements
Q 0...N
@s Segment number of the first segment contained in the element Whennot present,it is the segment number of the first segment of therepresentation in the current period if this is the first Q element inQualityTimeline,or it is the segment number of the segment next to the lastsegment contained in the previous Q element.
@n Number of segments contained in the element sharing the samequality and bandwidth values Scale factor for value
@sf Scale factor for value@q in the enclosing Q element.When present,itoverrides@scaleFactor in parent element.When not present.@scaleFactor inQualityTimeline is used
@q Scaled value of the quality metric in
integer.
@b Bandwidth required for real time
delivery of the segment,in kbps.If not present,the value ofRepresentation@bandwidth attribute applies.
运行长度编码可用于压缩所述QualityTimeline元素的尺寸。所述Q元素包含一个或多个具有相同质量和比特率的(子)片段；每个Q元素中的(子) 片段的数量由所述属性@n表示。可以将质量和/或比特率(@q和/或@b的值) 进行量化，这样具有相近质量和比特率的(子)片段就可以组合在一起。所述QualityTimeline元素的设计使非线性量化成为可能。缩放因子 (@scaleFactor)的默认值可在元素级别呈现，缩放因子可在每个Q元素中呈现；后一个值会覆盖默认缩放因子。如果每个(子)片段的时长已知，比特率和尺寸可以彼此推导出来。然而，比特率可以使用更少的数字和更小的空间来表达。表5的示例中使用了比特率(@b)。由于比特率可从MPD中获得，因此即便所述媒体片段中没有呈现sidx容器，仍然可使用表5实施例。
在另一个带外实施例中，质量值在一个单独的索引文件中提供。即，所述质量值包含在一个文件(本文称之为质量索引文件)中，所述文件与任何包含媒体内容的文件处于不同位置。在此类实施例中，所述媒体内容实例信息(如，在MPD中)包含的所述质量信息包括一个标示所述质量索引文件位置的元素(例如，XML元素)。换言之，在DASH实现中，对MPD进行了扩展以包含一个新的元素(Qualitylndex)。
表6定义了在DASH实现中可包含在MPD中的XML元素的一个示例。表6中，元素名称为“QualityIndex”，其属性包括“@sourceURL”和“@range”。在一个实施例中，所述质量索引元素应用于表示级别。
表6-MPD元素和属性(带外)的示例
Element or Attribute Name Description
Qualitylndex Element name.
@sourceURL The URL of the index file,
(grange Byte range within the index file.
可以包含在质量索引文件中的信息类型如表7所示。
表7-质量索引文件的示例
aligned(8)class QualitylndexEntry extends Box('qidx'){unsigned int(4)quality_metric；unsigned int(4)reserved；unsigned int(32)num_quality_ranges；for(i＝0；i<num_quality_ranges；i++){unsigned int(32)num_subsegments； unsignedint(32)scale_factor；unsigned int(32)quality_value；
}
}
在表7中，“quality_value”为一个指示在引用的表示中的媒体数据质量的数值，“scale_factor”控制着所述质量值的精度，“quality-metric”指示表示质量的度量的类型(例如，1＝PSNR,2＝MOS,3＝SSIM)。
带外方法十分优越，因为可以将质量值与所述媒体内容分开进行携带和传输，因此在请求相关的媒体片段之前，可独立检索所述质量值。
媒体内容准备
图4为本发明实施例提供的一种由计算机实现的包括质量信息在内的媒体内容准备方法的示例的流程图400。流程图400可以被实现为驻留在某种形式的非瞬时性计算机可读存储介质的计算机可执行指令。所述流程图400 的操作可以在图1中系统100的服务器侧(比如，服务器105，或者与所述服务器105耦合的一个或多个服务器)实现。尽管上文是以使用单个媒体内容实例为例进行描述的，所述操作也可以轻易地扩展至使用多个媒体内容实例。
在图4方框402中，将媒体内容的一个实例编码成具有不同比特率的多个表示。所述内容可以以VBR或CBR进行编码。
在方框404中，在一个实施例中，将每一个表示划分为较小的部分(例如，片段/子片段)。所述部分可以有不同的长度(不同的时间段)。
在方框406中，评估并记录每个表示中每一部分的质量。本领域已经存在关于质量评估的技术。
在方框408中，将所述表示封装成可进一步划分为子片段的片段。
在方框410中，把所述部分(片段/子片段)发送至并存储在服务器(例如，图1中的服务器105)中。
在方框412中，生成媒体内容实例信息(例如，MPD)，描述什么样的媒体内容可用以及如何获取并检索该内容。根据本发明实施例，所述媒体内容实例信息(例如，MPD)包括质量信息(带内或带外)。所述质量信息表明质量值是可用的，以及质量值所在的位置和/或怎样能够检索到这些质量值。
在带内实施例中，在DASH实现中，质量信息包括上述MPD的 QualityMetric元素。
在带外实施例中，在DASH实现中，质量信息包括上述QualityTimeline 元素。
在带外实施例中，在DASH实现中，质量信息包括上述Qualitylndex元素。
在方框414中，将包括质量信息(例如，MPD)的所述媒体内容实例信息发布在比如网页上，客户端可通过URL对其进行获取。客户端可以通过 Web浏览器、电子邮件、短信(SMS)等获取所述媒体内容实例信息。
质量感知的自适应流媒体
图5为本发明实施例提供的一种由计算机实现的质量值定位、获取和使用方法的示例的流程图500。流程图500可以被实现为驻留在某种形式的非瞬时性计算机可读存储介质的计算机可执行指令。流程图500的操作可在图 1中所述系统100的客户端侧(例如，客户端115)实现。
在图5的方框502中，客户端获取(读取或检索)媒体内容实例信息(比如，MPD)，包括质量信息。所述客户端可对媒体内容实例信息进行解析以识别服务器105(图1)上哪些表示可用以及它们的特征，比如带宽、分辨率和使用的编解码器等。
在一个实施例中，在DASH实现中，如果上述QualityMetric元素呈现，客户端就会知道带内质量信息是可用的(例如，质量值在sidx或qidx容器中)。
在一个实施例中，在DASH实现中，如果上述QualityTimeline元素呈现，客户端就会知道带外质量信息是可用的(质量值为该元素的属性)。
在一个实施例中，在DASH实现中，如果上述Qualitylndex元素呈现，客户端就会知道带外质量信息是可用的(质量值在一个单独的质量索引文件，其位置包含在所述元素中)。
在方框504中，所述客户端基于其能力或用户的偏好等选择一组表示。
在图5的方框506中，通过内容实例信息(比如，MPD)，所述客户端从所述一组表示中选择一段时间内要下载的候选部分(片段/子片段)的列表。换言之，所述客户端创建了一个在媒体内容的长度(时间)上的一个部分与时间的对照图。本质上就是，所述客户端每隔一个时间段选择一个部分。最初，在一个实施例中，所述客户端基于比特率选择候选部分。一般而言，就此，所述客户端会以它能够运用(处理)的最高比特率来选择部分。
图6示出了客户端选择了三种不同的表示R1、R2和R3的示例。在T0 到T1这一时间段内(其中T0与媒体内容实例的起始一致)，表示R1的第一部分被识别为R1P0，比特率为1Mbps，质量等级为5(5)(在本例子中，可以使用任意质量单位)。类似地，在T0到T1这一时间段内，表示R2的第一部分被识别为R2P0，比特率为0.5Mbps，质量等级为4(4)；在T0到T1这一时间段内，表示R3的第一部分被识别为R3P0，比特率为0.25Mbps，质量等级为3(3)。在其他时间段，其他部分也同样被识别，并具有如图所示的各自的比特率和质量等级。
在图5的方框506中，基于比特率，候选部分的初始列表600最初包括R1P0、R1P1、R1P2和R1P3。
在方框508中，所述客户端获取(读取)选取的表示组(R1、R2和R3) 中的部分的质量值。
在带内实施例中，所述客户端可以从所述sidx容器或者qidx容器中获得质量值。所述客户端并非一定要请求每一个部分(例如，整个媒体片段)来获得所述质量值。相反，所述客户端可请求组成所述sidx或qidx容器的相对较小的部分。例如，针对选取的所述表示组(R1、R2和R3)中的每个部分，所述客户端可通过HTTP部分GET命令请求所述sidx或qidx容器，然后在容器中检索质量值。
在带外实施例中，所述客户端可从媒体内容实例信息本身获得质量值(例如，从MPD本身)。
在另一个带外实施例中，所述客户端可从媒体内容实例信息(例如，MPD) 中指定的质量索引文件获得质量值。
在方框510，所述客户端将候选部分的所述初始列表600中的部分替换为具有良好质量的低比特率部分。在一个实施例中，所述客户端可以将每个部分的质量值与阈值等预定义要求进行比较。质量要求可以是基于历史经验或用户偏好的预定义值，或者是由下载的(子)片段的质量水平推导出来的动态值。如果一个部分的质量值满足所述质量要求，这个部分可以被替换为列表中具有较低比特率的部分。在一个实施例中，不管相关的比特率是多少，选择具有最接近阈值的质量值的部分。在另一个实施例中，不管相关的比特率是多少，选择具有不超过阈值的最高质量值的部分。
在图6的示例中，所述质量阈值为4(该值是用于说明而选择的任意值)。在T0到T1这个时间段内，部分R1P0、R2P0和R3P0都满足该质量阈值。然而，选择R3P0是因为它具有最低比特率，用R3P0替换候选部分的质量感知列表610中的R1P0。以相似的方式，选择R2P1来替换R1P1，选择R3P3 来替换R1P3。
因此，与传统方法相比，所述客户端不一定要请求和下载具有最高比特率的部分(片段/子片段)。相应的，节省了带宽。
在这种方式下，所述客户端可以为媒体内容实例的部分构建一个随时间推移的质量和比特率的详细质量感知列表610。为了降低启动延迟，这可以在流媒体启动之后在后台进行。
值得注意的是，与传统方法相比，所述客户端不一定要请求和下载具有最高比特率的部分(片段/子片段)。相应的，节省了带宽。
在图5的方框512中，所述客户端按顺序请求列表610中的部分(片段或子片段)。基本上，所述客户端通过候选集的列表610依次请求每个部分。
在方框514中，所述客户端监控网络情况，尤其是可用带宽。如果所述客户端要请求某个特定的部分，但是可用带宽降低至低于该部分所需的比特率，此时，所述客户端可选择具有满足可用带宽的比特率的其他部分。例如，所述客户端可以获取某一时间点网络可用带宽量的指示信息，将在包含该时间点的间隔内要下载的列表610中的一个部分替换为另一个具有满足可用带宽量的相应比特率的部分。如果所述客户端可以以不同的比特率从多个部分 (比如，多个片段)中选择一个替换物，则可以以之前描述的方式使用质量等级来选择替换物。换言之，在列表610中将部分P1替换为部分P2或者部分P3，部分P2的比特率小于部分P3但两者质量等级相同或相近，此时，选择部分P2作为替换物。
图7和图8分别为本发明实施例提供的一种由计算机实现的方法的示例的流程图700和800。流程图700和800可以被实现为驻留在某种形式的非瞬时性计算机可读存储介质的计算机可执行指令。尤其是，流程图700和800 的操作可在图1中所述系统100的客户端侧(例如，客户端115)实现。
在图7的方框702中，获取媒体内容的实例信息(例如，获取MPD)。所述信息包括指示媒体内容实例的部分的质量值的质量信息。所述质量值可以是带内或带外，所述质量信息指示质量值的存在以及它们的位置。
在方框704中，获取所述质量信息指示的质量值。
在方框706中，获取媒体内容实例的一个部分。所述部分是利用第一部分的质量值选取的。
在方框708中，接收所述第一部分。
在图8的方框802中，获取内容分发网络上可用带宽量的指示信息。
在方框804中，识别媒体内容实例的部分。所述部分具有满足可用带宽量的各自的比特率。所述部分还具有与其相关的各自的质量指标(质量值)。
在方框806中，选择所述部分中的第一部分来下载。所述第一部分是根据其相关的质量指标选取的。
在方框808中，请求第一部分以通过内容分发网络进行传送。
图9为本发明实施例提供的一种由计算机实现的方法的示例的流程图 900。流程图900可以被实现为驻留在某种形式的非瞬时性计算机可读存储介质的计算机可执行指令。所述流程图900的操作可以在图1中系统100的服务器侧(比如，服务器105，或者与所述服务器105耦合的一个或多个服务器)实现。
在图9的方框902中，生成媒体内容实例的信息。所述信息包括所述媒体内容实例的质量信息。
所述媒体内容实例的每个部分都有与其相关的各自的质量值。
在方框904中，将包括所述质量信息的所述信息提供给客户端。如本文先前所描述的，所述质量信息指示质量值的可用性以及如何找到这些质量值。
综上所述，本发明实施例利用质量感知的适应增强了比特率驱动的适应。质量和比特率信息用于做出更加明智的适应决定。这样可以提供更加稳定的质量。此外，与比特率驱动的适应相比，在流媒体传输中不会一直选取最高的比特率表示(片段/子片段)。例如，在使用较低的比特率片段或较高的比特率片段都可以实现令人满意的质量水平时，会选取较低的比特率片段使用。因此，可用带宽可以被更有效地利用，也不会浪费不必要的带宽。
网络运营商(内容提供商)和内容用户都能受益。运营商可以受益是因为通过更有效地使用网络资源，能够容纳更多的用户。用户受益是因为它们可以以可接受的质量水平对内容进行串流，同时对那些基于消费的数据规划花费更少。此外，客户端设备消耗的能量可以有所减少，由于电量消耗与带宽使用直接相关，因此，这对电量有限的移动设备来说意义重大。
图10为能够实现本发明实施例的计算系统1000的示例的方框图。所述计算系统1000广义地代表任何能够执行计算机可读指令的单个或多处理器计算设备或系统。所述计算系统1000可以用于执行图1中的服务器105或所述系统100中的任何其它服务器组件提供的功能。所述计算系统1000还可用于执行图1中客户端115的功能。在具体实现中，所述计算系统1000可能不包括图10所示的所有元素，和/或可以包括除了图10所示的元素之外的元素。
在最基本的配置中，所述计算系统1000可以包括至少一个处理器1002 (CPU)和至少一个存储器1004。所述处理器1002通常代表能够处理数据或解译并执行指令的任何类型或形式的处理单元。在某些实施例中，所述处理器1002可从软件应用程序或模块处接收指令。这些指令可以使得所述处理器 1002执行一个或多个示例性实施例所描述和/或说明的功能。
所述存储器1004通常代表能够存储数据和/或其它计算机可读指令的任何类型或形式的易失性或非易失性存储设备或媒介。在某些实施例中，所述计算系统1000可包括易失性存储单元(例如，所述存储器1004)和非易失性存储单元(未显示)。
所述计算系统1000还包括与所述处理器1002耦合的显示设备1006。所述显示设备1006通常用于显示图形用户界面(GUI)，该界面提供了一个用户和计算系统之间易于使用的界面。
所述计算系统1000还包括与所述处理器1002耦合的输入设备1008。所述输入设备1008可包括触摸感应设备(触摸屏)，用于接收用户的触摸输入并将该信息发送给处理器1002。所述处理器1002按照其编程来解译该触摸信息。
输入设备1008可以与所述显示设备1006相结合，或者作为两个单独的组件。在所阐述的实施例中，所述输入设备1008为安放在所述显示设备1006 上面或前面的触摸屏。在此，所述输入设备1008和所述显示设备1006可以统称为触摸屏显示器1007。
图10中的通信接口1022广义上代表能够促进所述计算系统1000和一个或多个附加设备之间通信的任何类型或形式的通信设备或适配器。例如，所述通信接口1022可促进所述计算系统1000和包含有附加计算系统的私有或公共网络之间的通信。所述通信接口1022例如可包括但不限于有线网络接口 (比如网络接口卡)、无线网络接口(比如无线网络接口卡)、调制解调器以及其他任何合适的接口。在一个实施例中，所述通信接口1022通过直接链路为远程服务器与网络，比如因特网，提供直接连接。所述通信接口1022也可以通过其他任何合适的连接间接地提供这样的连接。所述通信接口1022还可以代表主机适配器，用于通过外部总线或者通信通道促进所述计算系统1000 与一个或多个附加网络或存储设备之间的通信。
如图10所示，所述计算系统1000还可包括至少一个输入/输出(I/O)设备1010。所述I/O设备1010通常代表能够向/从计算系统1000提供/接收计算机或人为生成的输入或输出的任何类型或形式的输入设备。I/O设备1010例如包括但不限于键盘、指向或光标控制设备(如鼠标)、语音识别设备或任何其他输入设备。
所述计算系统1000还可与许多其他设备或子系统相连。反过来，并不是图10所示的所有组件和设备都需要在实施所述实施例时被用到。上面提及的设备和子系统也可以以不同于图10所示的方式相互连接。所述计算系统1000 也可以使用任意数量的软件、固件和/或硬件配置。例如，所公开的示例性实施例可以编码为计算机可读介质上的计算机程序(也称作计算机软件、软件应用、计算机可读指令、或计算机控制逻辑)。
所述包含计算机程序的计算机可读介质可被加载到所述计算系统1000。存储在所述计算机可读介质上的所有或部分计算机程序可存储于存储器1004。当所述处理器1002执行所述计算系统1000上加载的一个计算机程序时，所述计算机程序会使得所述处理器1002执行和/或用于执行这里描述和/或说明的示例性实施例的功能。另外，可选的，这里描述和/或说明的示例性实施例可在固件和/或硬件内实现。
上述说明阐述了使用了特定方框图、流程图以及示例的实施例，这里描述和/或说明的每个方框图组件、流程图步骤、操作和/或组件可以通过硬件、软件或固件(或者其任意组合)配置单独地和/或共同地实现。此外，关于包含在其他组件内的组件的任何说明都应该视为示例，因为通过执行许多其他架构可以实现相同的功能。
这里描述和/或说明的步骤的过程参数和顺序仅以举例的方式给出并且可以根据需要改变。例如，虽然这里描述和/或说明的步骤以某种特定的顺序显示或论述，但这些步骤不一定需要以所论述或说明的顺序来执行。所描述和/或说明的各种示例性方法可以省略所描述或说明的一个或多个步骤，也可以包括除了这些描述的步骤之外的额外步骤。
尽管各实施例是在全功能计算系统的背景下进行描述和/或说明的，一个或多个所述示例性实施例可以分布为不同形式的程序产品，无论实际执行该分布的计算机可读介质的是什么类型。公开的所述实施例可通过执行特定任务的软件模块来实现。这些软件模块可以包括存储在计算机可读存储介质或计算系统中的脚本、批处理命令或其它可执行文件。这些软件模块可以对计算设备进行配置从而执行所述一个或多个示例性实施例。在此公开的一个或多个软件模块可在云计算环境中实现。云计算环境可以通过互联网提供各种服务和应用。这些基于云的服务(例如，软件服务，平台服务，基础设施服务)可以通过Web浏览器或其他远程界面来获取。这里所说的各种功能可以通过远程桌面环境或者其他任何基于云的计算环境提供。
为了更好地解释本发明内容，在上述描述中结合了具体的实施例。然而，以上说明性的讨论不旨在穷举或将本发明限制为所公开的具体形式。鉴于上述论述，许多修改和变化也可以接受。所选择并描述的实施例旨在更好地解释本发明的原理及其实际应用，从而使得本领域技术人员能够针对预期的特定用途做种各种修改从而更好地利用本发明和各实施例。
以上为对本发明实施例所作的描述。虽然本发明已经在具体的实施例中进行了描述，但是应当理解的是，本发明不应该理解为受这些实施例所限制，而是根据下面的权利要求来理解的。

Claims (13)

1.一种媒体内容实例信息的客户端获取设备，其特征在于，包括：处理器；
与所述处理器相连接的存储器，所述存储器存储有指令，当所述指令由所述设备执行，则会使所述设备执行如下操作：
获取媒体内容实例信息，所述信息包括指示所述媒体内容实例的部分的质量值可用性的质量信息，其中，所述部分还有与其相关联的各自的比特率，所述质量值包括所述媒体内容实例的部分的质量指标；
获取所述质量信息指示的质量值；选择所述部分中的第一部分进行下载，选取的所述第一部分使用所述质量值中的一个质量值，其中，所述质量值包含在第一文件中，所述第一文件与包括媒体内容实例的第一部分的第二文件处于不同的位置。
2.根据权利要求1所述的设备，其特征在于，其中所述质量值包含在与所述第一部分相关的容器中，所述获取所述质量值包括在请求第一部分之前从所述容器中检索所述质量值。
3.根据权利要求2所述的设备，其特征在于，所述质量信息包括指示容器中的所述质量值可用的元素。
4.根据权利要求1所述的设备，其特征在于，所述质量信息包括一个元素，所述质量值为所述元素的属性。
5.根据权利要求1所述的设备，其特征在于，所述质量信息包括指示所述质量值在所述第一文件的元素，所述获取所述质量值包括在请求所述第一部分之前从所述第一文件检索所述质量值。
6.根据权利要求1所述的设备，其特征在于，所述操作还包括：
基于比特率选取要从网络下载的所述部分的候选集；
将候选集中的一个部分替换为具有满足预定义要求的相应质量值的另一部分。
7.根据权利要求1所述的设备，其特征在于，所述操作还包括：
基于比特率和所述质量值选取要从网络下载的所述部分的候选集；
获取在某个时间点网络可用带宽量的指示信息；
识别在包含该时间点的间隔内要下载的具有超出可用带宽量的比特率的所述候选集中的一个部分；
将所述部分替换为具有满足可用带宽量的比特率的第二部分，所述第二部分也是基于其质量值选取的。
8.一种生成媒体内容实例信息的方法，其特征在于，包括：
生成媒体内容实例信息，所述信息包括所述媒体内容实例的质量信息，其中所述媒体内容实例与不同的多个表示相关联，所述多个表示中的每个不同的表示包括所述媒体内容实例的多个部分，所述多个部分中的每个部分有一个与其相关联的相应的质量值，所述质量值包括所述媒体内容实例各自部分的质量指标；其中，所述媒体内容实例的第一部分的质量值包含在第一文件中，所述第一文件与包含媒体内容的第一部分的第二文件处于不同的位置；
将所述信息提供给客户端，所述信息指示所述质量值的可用性。
9.根据权利要求8所述的方法，其特征在于，所述媒体内容实例的第一部分的质量值包含在与所述第一部分相关联的容器中。
10.根据权利要求9所述的方法，其特征在于，所述质量信息包括所述媒体内容实例信息中的元素，所述元素指示所述质量值在所述容器中可用。
11.根据权利要求8所述的方法，其特征在于，所述质量信息包括所述媒体内容实例信息中的元素，所述媒体内容实例的第一部分的质量值为所述元素的属性。
12.根据权利要求8所述的方法，其特征在于，所述质量信息包括所述媒体内容实例信息中的元素，所述元素指示所述质量值在所述第一文件中可用并提供了所述第一文件的路径。
13.根据权利要求8所述的方法，其特征在于，所述方法还包括为所述多个部分中的每个部分测量并记录质量值。
CN201480004582.9A 2013-01-15 2014-01-15 使用质量信息进行媒体内容自适应传输 Active CN105052107B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361752796P 2013-01-15 2013-01-15
US201361752831P 2013-01-15 2013-01-15
US61/752,831 2013-01-15
US61/752,796 2013-01-15
PCT/US2014/011706 WO2014113486A1 (en) 2013-01-15 2014-01-15 Using quality information for adaptive streaming of media content

Publications (2)

Publication Number Publication Date
CN105052107A CN105052107A (zh) 2015-11-11
CN105052107B true CN105052107B (zh) 2019-04-12

Family

ID=51166096

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480004582.9A Active CN105052107B (zh) 2013-01-15 2014-01-15 使用质量信息进行媒体内容自适应传输

Country Status (6)

Country Link
US (2) US9571543B2 (zh)
EP (1) EP2939420B1 (zh)
JP (2) JP6270873B2 (zh)
KR (1) KR101758167B1 (zh)
CN (1) CN105052107B (zh)
WO (1) WO2014113486A1 (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8924580B2 (en) * 2011-08-12 2014-12-30 Cisco Technology, Inc. Constant-quality rate-adaptive streaming
CN105379293B (zh) * 2013-04-19 2019-03-26 华为技术有限公司 基于超文本协议的动态自适应流媒体中的媒体质量信息指示
JP2015012305A (ja) * 2013-06-26 2015-01-19 ソニー株式会社 コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム
WO2015031507A1 (en) * 2013-08-29 2015-03-05 F5 Networks, Inc. Generating frame chunking for video fast starts
CN104717555B (zh) * 2013-12-11 2018-01-02 华为技术有限公司 视频码流的获取方法及装置
US9699464B2 (en) * 2014-07-10 2017-07-04 Intel Corporation Adaptive bitrate streaming for wireless video
US9787751B2 (en) 2014-08-06 2017-10-10 At&T Intellectual Property I, L.P. Method and apparatus for delivering media content utilizing segment and packaging information
US20160043978A1 (en) * 2014-08-11 2016-02-11 Facebook, Inc. Techniques for hot snapshots for message syncing
US9722903B2 (en) * 2014-09-11 2017-08-01 At&T Intellectual Property I, L.P. Adaptive bit rate media streaming based on network conditions received via a network monitor
US9894130B2 (en) * 2014-09-23 2018-02-13 Intel Corporation Video quality enhancement
US9807336B2 (en) * 2014-11-12 2017-10-31 Mediatek Inc. Dynamic adjustment of video frame sampling rate
US20160182594A1 (en) * 2014-12-19 2016-06-23 Cable Television Laboratories, Inc. Adaptive streaming
US10812546B2 (en) 2014-12-24 2020-10-20 Intel IP Corporation Link-aware streaming adaptation
CN107211193B (zh) * 2015-02-07 2021-04-13 视觉波公司 感知体验质量估计驱动的智能适应视频流传输方法和系统
US9961004B2 (en) * 2015-02-18 2018-05-01 Viasat, Inc. Popularity-aware bitrate adaptation of linear programming for mobile communications
US20170026444A1 (en) * 2015-07-24 2017-01-26 Airwatch Llc Policy driven media consumption framework
US10666961B2 (en) 2016-01-08 2020-05-26 Qualcomm Incorporated Determining media delivery event locations for media transport
JP2017157904A (ja) * 2016-02-29 2017-09-07 富士ゼロックス株式会社 情報処理装置
EP3427481A4 (en) 2016-03-06 2019-10-30 SSIMWAVE Inc. METHOD AND SYSTEM FOR THE AUTOMATIC EXPERIENCE QUALITY MEASUREMENT OF STREAMING VIDEOS
WO2017201379A1 (en) * 2016-05-19 2017-11-23 Vid Scale, Inc. Client centric service quality control
US10206232B2 (en) 2016-09-29 2019-02-12 At&T Intellectual Property I, L.P. Initial access and radio resource management for integrated access and backhaul (IAB) wireless networks
US10644924B2 (en) 2016-09-29 2020-05-05 At&T Intellectual Property I, L.P. Facilitating a two-stage downlink control channel in a wireless communication system
US10602507B2 (en) * 2016-09-29 2020-03-24 At&T Intellectual Property I, L.P. Facilitating uplink communication waveform selection
US20180146019A1 (en) * 2016-11-21 2018-05-24 International Business Machines Corporation Light-weight resolution switching for online video streaming
US10834406B2 (en) 2016-12-12 2020-11-10 Netflix, Inc. Device-consistent techniques for predicting absolute perceptual video quality
JP6891497B2 (ja) * 2017-01-06 2021-06-18 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システム及びプログラム
US10742708B2 (en) 2017-02-23 2020-08-11 Netflix, Inc. Iterative techniques for generating multiple encoded versions of a media title
US11184621B2 (en) * 2017-02-23 2021-11-23 Netflix, Inc. Techniques for selecting resolutions for encoding different shot sequences
US11153585B2 (en) 2017-02-23 2021-10-19 Netflix, Inc. Optimizing encoding operations when generating encoded versions of a media title
US11166034B2 (en) 2017-02-23 2021-11-02 Netflix, Inc. Comparing video encoders/decoders using shot-based encoding and a perceptual visual quality metric
JP6611748B2 (ja) * 2017-03-23 2019-11-27 Ｋｄｄｉ株式会社 画質情報でセグメント受信を制御するクライアント、システム、プログラム及び方法
US10362080B2 (en) * 2017-04-25 2019-07-23 At&T Intellectual Property I, L.P. Methods, systems, and devices for video streaming adaptation using control theoretic approach
WO2018216929A1 (en) * 2017-05-25 2018-11-29 Samsung Electronics Co., Ltd. Methods and systems for saving data while streaming video
US10759159B2 (en) 2017-05-31 2020-09-01 The Boeing Company Feedstock lines for additive manufacturing
US10652166B2 (en) * 2017-06-27 2020-05-12 Cisco Technology, Inc. Non-real time adaptive bitrate recording scheduler
KR20240038175A (ko) 2017-07-06 2024-03-22 프라운호퍼 게젤샤프트 쭈르 푀르데룽 데어 안겐반텐 포르슝 에. 베. 분할된 비디오 스트리밍 개념
US10666992B2 (en) 2017-07-18 2020-05-26 Netflix, Inc. Encoding techniques for optimizing distortion and bitrate
US10728180B2 (en) 2018-08-21 2020-07-28 At&T Intellectual Property I, L.P. Apparatus, storage medium and method for adaptive bitrate streaming adaptation of variable bitrate encodings
WO2020042018A1 (zh) 2018-08-29 2020-03-05 华为技术有限公司 一种检测带宽的方法及检测设备
US10887660B2 (en) * 2018-12-27 2021-01-05 Comcast Cable Communications, Llc Collaborative media quality determination
US10827181B1 (en) 2019-05-03 2020-11-03 At&T Intellectual Property I, L.P. Differential adaptive bitrate streaming based on scene complexity
US11115697B1 (en) * 2019-12-06 2021-09-07 Amazon Technologies, Inc. Resolution-based manifest generator for adaptive bitrate video streaming
US11190826B1 (en) * 2020-06-25 2021-11-30 Disney Enterprises, Inc. Segment quality-guided adaptive stream creation
KR102372421B1 (ko) * 2020-11-11 2022-03-07 포항공과대학교 산학협력단 네트워크 상태에 따른 멀티미디어 데이터 실시간 스트리밍을 위한 시스템 및 그방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101577631A (zh) * 2008-05-07 2009-11-11 华为技术有限公司 评价用户体验质量的方法、系统及网络装置

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7965650B2 (en) * 2006-05-18 2011-06-21 Cisco Technology, Inc. Method and system for quality monitoring of media over internet protocol (MOIP)
US7925774B2 (en) * 2008-05-30 2011-04-12 Microsoft Corporation Media streaming using an index file
DK2347599T3 (en) * 2008-11-04 2015-05-11 Ericsson Telefon Ab L M METHOD AND SYSTEM FOR DETERMINING A QUALITY VALUE OF A VIDEO FLOW
US8396114B2 (en) 2009-01-29 2013-03-12 Microsoft Corporation Multiple bit rate video encoding using variable bit rate and dynamic resolution for adaptive video streaming
US20130272121A1 (en) * 2012-04-17 2013-10-17 Cygnus Broadband, Inc. Systems and methods for application-aware admission control in a communication network
US8484368B2 (en) * 2009-10-02 2013-07-09 Disney Enterprises, Inc. Method and system for optimizing download and instantaneous viewing of media files
US9124642B2 (en) 2009-10-16 2015-09-01 Qualcomm Incorporated Adaptively streaming multimedia
KR101777347B1 (ko) 2009-11-13 2017-09-11 삼성전자주식회사 부분화에 기초한 적응적인 스트리밍 방법 및 장치
EP2375680A1 (en) * 2010-04-01 2011-10-12 Thomson Licensing A method for recovering content streamed into chunk
EP2383999A1 (en) * 2010-04-29 2011-11-02 Irdeto B.V. Controlling an adaptive streaming of digital content
WO2011143223A2 (en) * 2010-05-10 2011-11-17 Board Of Regents, The University Of Texas System Determining quality of an image or a video using a distortion classifier
US20120008445A1 (en) * 2010-07-12 2012-01-12 Promos Technologies Pte.Ltd. Dual bit line precharge architecture and method for low power dynamic random access memory (dram) integrated circuit devices and devices incorporating embedded dram
US8190677B2 (en) * 2010-07-23 2012-05-29 Seawell Networks Inc. Methods and systems for scalable video delivery
US9479739B2 (en) * 2010-10-04 2016-10-25 Telefonaktiebolaget Lm Ericsson (Publ) Methods and apparatuses for adaptive control of streaming
US8997160B2 (en) * 2010-12-06 2015-03-31 Netflix, Inc. Variable bit video streams for adaptive streaming
KR20140119200A (ko) * 2011-02-11 2014-10-08 인터디지탈 패튼 홀딩스, 인크 콘텐츠 배포 및 수신 방법 및 장치
US20140020138A1 (en) * 2011-03-23 2014-01-16 University Of Medicine And Dentistry Of New Jersey Transgenic plants expressing dispersinb
EP2695352A4 (en) * 2011-04-01 2014-12-31 Intel Corp ADAPTIVE BROADCASTING IN HTTP FLOW WITH OPTIMIZATION BETWEEN LAYERS
WO2011100901A2 (zh) * 2011-04-07 2011-08-25 华为技术有限公司 媒体内容的传输处理方法、装置与系统
CN202150611U (zh) * 2011-06-30 2012-02-22 广东明家科技股份有限公司 一种旋转插头
US9357275B2 (en) * 2011-09-06 2016-05-31 Qualcomm Incorporated Network streaming of coded video data
CN102695058B (zh) * 2012-05-30 2014-07-02 北京世纪鼎点软件有限公司 基于大尺度缓冲策略的音、视频编码流控方法
KR20190026965A (ko) * 2012-07-10 2019-03-13 브이아이디 스케일, 인크. 품질 주도형 스트리밍
US9125073B2 (en) * 2012-08-03 2015-09-01 Intel Corporation Quality-aware adaptive streaming over hypertext transfer protocol using quality attributes in manifest file
US20140040496A1 (en) * 2012-08-06 2014-02-06 General Instrument Corporation On-demand http stream generation
US9264475B2 (en) * 2012-12-31 2016-02-16 Sonic Ip, Inc. Use of objective quality measures of streamed content to reduce streaming bandwidth

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101577631A (zh) * 2008-05-07 2009-11-11 华为技术有限公司 评价用户体验质量的方法、系统及网络装置

Also Published As

Publication number Publication date
JP2018023133A (ja) 2018-02-08
JP6270873B2 (ja) 2018-01-31
US20140201324A1 (en) 2014-07-17
EP2939420A1 (en) 2015-11-04
CN105052107A (zh) 2015-11-11
JP2016508348A (ja) 2016-03-17
EP2939420A4 (en) 2015-11-25
KR101758167B1 (ko) 2017-07-14
EP2939420B1 (en) 2018-03-14
US9571543B2 (en) 2017-02-14
WO2014113486A1 (en) 2014-07-24
JP6469788B2 (ja) 2019-02-13
KR20150106961A (ko) 2015-09-22
US20170111426A1 (en) 2017-04-20

Similar Documents

Publication Publication Date Title
CN105052107B (zh) 使用质量信息进行媒体内容自适应传输
KR101693584B1 (ko) 미디어 콘텐츠에 대해 적응 스트리밍을 수행하는 방법 및 장치
US9344517B2 (en) Downloading and adaptive streaming of multimedia content to a device with cache assist
US10904642B2 (en) Methods and apparatus for updating media presentation data
CN110636339B (zh) 基于码率的调度方法、装置及电子设备
CN107634930B (zh) 一种媒体数据的获取方法和装置
CA2850416C (en) Method and device for transmitting streaming media
GB2533624A (en) Methods, devices, and computer programs for improving coding of media presentation description data
US10681431B2 (en) Real-time interstitial content resolution and trick mode restrictions
CN113767608B (zh) 接收会话的媒体数据的方法、装置和非易失性计算机可读介质
US10419798B2 (en) Method and apparatus for just-in-time transcoding
CN109547839A (zh) 直播内容的动态预览处理方法及装置、介质、电子设备
CN113742518A (zh) 存储和提供视频的方法、设备和计算机程序产品
EP1671495A2 (en) Method and apparatus for converting the modality of multimedia contents to support the quality of service according to media resource
CN113079386B (zh) 一种视频在线播放方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant