CN115867906A - 使用基于会话的dash操作的基于会话的描述url定制 - Google Patents

使用基于会话的dash操作的基于会话的描述url定制 Download PDF

Info

Publication number
CN115867906A
CN115867906A CN202280004388.5A CN202280004388A CN115867906A CN 115867906 A CN115867906 A CN 115867906A CN 202280004388 A CN202280004388 A CN 202280004388A CN 115867906 A CN115867906 A CN 115867906A
Authority
CN
China
Prior art keywords
sbd
presbd
descriptor
client
url
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280004388.5A
Other languages
English (en)
Inventor
伊拉吉·索达加
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent America LLC
Original Assignee
Tencent America LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent America LLC filed Critical Tencent America LLC
Publication of CN115867906A publication Critical patent/CN115867906A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/65—Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393—Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H04N21/6543—Transmission by server directed to the client for forcing some client operations, e.g. recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8543—Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

提供了一种用于在基于超文本传输协议的动态自适应流媒体传输(DASH)流会话中提供视频内容的方法和装置。该方法可以包括获取DASH流会话的预先基于会话的描述(PreSBD)信息，所述PreSBD信息指示PreSBD客户端为DASH流会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)。该方法可以进一步包括实例化PreSBD客户端并传递PreSBD描述符信息。然后，该方法可以包括控制与来自DASH流会话的多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成。该方法可以进一步包括基于定制的SBD文档URL启动第一SBD客户端并传递第一SBD描述符。

Description

使用基于会话的DASH操作的基于会话的描述URL定制
相关申请的交叉引用
本申请基于并要求于2021年4月21日提交的美国临时专利申请第63/177,788号的优先权，该申请的公开内容通过引用全部并入本文。
背景技术
运动图像专家组(Moving Picture Experts Group，MPEG)最近对用于基于会话的动态自适应流媒体传输(Dynamic Adaptive Streaming over HTTP，DASH)操作的DASH标准化表现出了越来越多的兴趣。在讨论DASH标准化的会话期间，在媒体呈现描述(mediapresentation description，MPD)对于所有客户端是通用的同时，客户端可以获得称为基于会话的描述(session-based description，SBD)的副文件，该副文件为客户端提供指令以使MPD专用于该会话。
基于会话的DASH操作是对每个会话以及可能对每个客户端定制MPD的重要方法。当前的设计允许将一个或多个SBD文档应用于统一资源定位器(uniform resourcelocator，URL)部分或各种请求的查询。但是，当前的设计不允许将SBD文档应用于对请求SBD文档进行查询。即，当前的设计不允许可以在SBD描述符中使用的SBD文档URL的定制。需要能够在同一清单文件中定制SBD文档URL。
发明内容
根据本公开实施例，一种用于提供视频内容的方法可以包括：获取会话的预先基于会话描述(pre-session-based description，PreSBD)信息，该PreSBD信息指示PreSBD客户端为会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)；实例化PreSBD客户端并传递PreSBD描述符信息；控制与来自会话的多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成；以及基于定制的SBD文档URL启动第一SBD客户端并传递第一SBD描述符。
根据实施例，该方法可以进一步包括：基于第一SBD描述符和定制的SBD文档URL来控制片段URL的生成，并通过至少修改片段URL来处理对视频内容的片段的请求；以及基于修改的片段URL提供视频内容的片段。
根据实施例的方法，其中，会话的多个SBD描述符包括：在具有PreSBD描述符信息的同一媒体呈现描述(MPD)元素中的SBD描述符，或者在与具有PreSBD描述符信息的MPD元素相比较低层级的MPD元素中的SBD描述符。
根据实施例的方法，其中，PreSBD描述符信息包括具有值为“sbd”的@urlclass属性。
根据实施例的方法，其中，PreSBD描述符信息包括一种类型的超文本传输协议(hypertext transfer protocol，HTTP)获得请求，这种类型的HTTP获得请求经受定制的SBD文档URL生成。
根据实施例的方法，其中，在媒体呈现描述(MPD)元素中存在不超过一个PreSBD描述符信息。
根据实施例的方法，其中，在具有PreSBD描述符信息的媒体呈现描述(MPD)元素的较低层级的元素中不存在PreSBD描述符信息。
根据实施例的方法，其中，在启动第一SBD客户端或启动任意非PreSBD客户端之前实例化PreSBD客户端。
根据实施例的方法，其中，在处理对视频内容的片段的相应请求之前，将与会话的多个SBD描述符相关联的相应SBD文档URL发送到PreSBD客户端。
根据本公开实施例，一种用于提供视频内容的装置可以包括：至少一个存储器，配置为存储计算机程序代码；至少一个处理器，配置为访问计算机程序代码并按照计算机程序代码的指示进行操作。计算机程序代码可以包括：获取代码，配置为使得至少一个处理器获取会话的预先基于会话描述(PreSBD)信息，该PreSBD信息指示PreSBD客户端为会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)；实例化代码，配置为使得至少一个处理器实例化PreSBD客户端并传递PreSBD描述符信息；第一控制代码，配置为使得至少一个处理器控制与来自会话的多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成；以及启动代码，配置为使得至少一个处理器基于定制的SBD文档URL启动第一SBD客户端并传递第一SBD描述符。
根据本公开实施例，一种用于提供视频内容的非暂时性计算机可读介质，存储有指令，当该指令由至少一个处理器执行，该指令可以使得至少一个处理器执行以下操作：获取会话的预先基于会话描述(PreSBD)信息，该PreSBD信息指示PreSBD客户端为会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)；实例化PreSBD客户端并传递PreSBD描述符信息；控制与来自会话的多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成；以及基于定制的SBD文档URL启动第一SBD客户端并传递第一SBD描述符。
附图说明
下面将参考附图描述本公开的示例性实施例的特征、优点和重要性，在附图中类似的附图标记表示类似的元素。
图1是根据实施例的通信系统的简化示意图。
图2是根据实施例的流环境中的组件的简化示意图。
图3是根据实施例的示例性解码器的简化框图。
图4是根据实施例的示例性编码器的简化框图。
图5是根据实施例的用于基于会话的DASH操作的示例性架构的简化框图。
图6是根据实施例的用于基于会话的描述URL定制的过程的简化流程图。
图7是根据实施例的用于基于会话的描述URL定制的调用流的简化示意图。
图8是根据实施例的根据计算机系统的示意图。
具体实施方式
下面讨论的所提出的特征可单独使用或以任何顺序组合使用。此外，实施例可由处理电路(例如，一个或多个处理器或者一个或多个集成电路)实现。在一个示例中，一个或多个处理器执行存储在非暂时性计算机可读介质中的程序。
图1示出了根据本申请的实施例的通信系统100的简化框图。通信系统100可包括经由网络105互连的至少两个终端102和103。对于数据的单向传输，第一终端103可对本地位置处的视频数据进行编码，以经由网络105传输到另一终端102。第二终端102可从网络105接收另一终端的已编码视频数据，对已编码数据进行解码并显示恢复的视频数据。单向数据传输在媒体服务应用等中会是较常见的。
图1示出了被设置成支持已编码视频的双向传输的第二终端对101和104，该双向传输可例如在视频会议期间发生。对于数据的双向传输，每个终端101和104可以对在本地位置捕获的视频数据进行编码，以经由网络105传输到另一终端。每个终端101和104还可接收由另一终端传输的已编码视频数据，可以对已编码数据进行解码，并可以在本地显示设备上显示恢复的视频数据。
在图1中，终端101、终端102、终端103和终端104可被示出为服务器、个人计算机和智能电话，但本公开的原理不限于此。本公开的实施例适用于膝上型计算机、平板电脑、媒体播放器和/或专用视频会议设备。网络105表示在终端101、终端102、终端103和终端104之间传送已编码视频数据的任何数量的网络，包括例如有线和/或无线通信网络。通信网络105可在电路交换和/或分组交换信道中交换数据。代表性的网络包括电信网络、局域网、广域网和/或互联网。出于本讨论的目的，除非在下文中有所解释，否则网络105的架构和拓扑对于本公开的操作来说可能是无关紧要的。
作为所公开的主题的应用的示例，图2示出了视频编码器和视频解码器在流式传输环境中的放置方式。所公开的主题可同等地适用于其它支持视频的应用，包括例如视频会议、数字TV、在包括CD、DVD、存储棒等的数字介质上存储压缩视频等等。
流式传输系统可包括采集子系统203，该采集子系统可包括例如数码相机的视频源201，该视频源创建例如未压缩的视频样本流213。当与已编码视频比特流相比时，样本流213可由高数据量强调，并可由耦接到相机201的编码器202处理。编码器202可包括硬件、软件或软硬件组合以实现或实施如下文更详细地描述的所公开的主题的各方面。当与样本流相比时，由较低数据量强调的已编码视频比特流204可存储在流式传输服务器205上以供将来使用。一个或多个流式传输客户端212和207可访问流式传输服务器205以检索已编码视频比特流204的副本208和副本206。客户端212可包括视频解码器211，视频解码器211对已编码视频比特流208的传入副本进行解码，且创建可在显示器209或另一呈现装置(未描绘)上呈现的输出视频样本流210。在一些流式传输系统中，可根据某些视频编码/压缩标准对视频比特流204、视频比特流206和视频比特流208进行编码。这些标准的示例在上面指出并在这里进一步描述。
图3可以是根据本申请的一个实施例的视频解码器300的功能框图。
接收器302可接收将由解码器300解码的一个或多个已编码视频序列；在同一实施例或另一实施例中，一次接收一个已编码视频序列，其中每个已编码视频序列的解码独立于其它已编码视频序列的解码。可从信道301接收已编码视频序列，该信道可以是通向存储已编码视频数据的存储装置的硬件/软件链路。接收器302可接收可转发到它们各自的使用实体(未描绘)的已编码视频数据以及其它数据，例如已编码音频数据和/或辅助数据流。接收器302可将已编码视频序列与其它数据分开。为了防止网络抖动，缓冲存储器303可耦接在接收器302与熵解码器/解析器304(此后称为“解析器”)之间。当接收器302从具有足够带宽和可控性的存储/转发装置或从等时同步网络接收数据时，可能不需要缓冲器303，或可将该缓冲器做得较小。为了尽力在互联网等业务分组网络上使用，可能需要缓冲器303，该缓冲器可相对较大并可有利地具有自适应性大小。
视频解码器300可包括解析器304以根据熵编码的视频序列重建符号313。这些符号的类别包括用于管理解码器300的操作的信息，以及用以控制呈现装置(例如，显示器312)的潜在信息，该呈现装置不是解码器的组成部分，但可耦接到解码器。用于呈现装置的控制信息可以是辅助增强信息(Supplemental Enhancement Information，SEI消息)或视频可用性信息参数集片段(未描绘)的形式。解析器304可对接收到的已编码视频序列进行解析/熵解码。已编码视频序列的编码可根据视频编码技术或标准进行，且可遵循本领域技术人员公知的各种原理，包括可变长度编码、霍夫曼编码(Huffman coding)、具有或不具有上下文灵敏度的算术编码等等。解析器304可基于对应于群组的至少一个参数，从已编码视频序列提取用于视频解码器中的像素的子群中的至少一个子群的子群参数集。子群可包括图片群组(Group of Pictures，GOP)、图片、图块、切片、宏块、编码单元(Coding Unit，CU)、块、变换单元(Transform Unit，TU)、预测单元(Prediction Unit，PU)等等。熵解码器/解析器还可从已编码视频序列提取信息，例如变换系数、量化器参数值、运动矢量等等。
解析器304可对从缓冲器303接收的视频序列执行熵解码/解析操作，从而创建符号313。解析器304可接收已编码数据，并选择性地解码特定符号313。此外，解析器304可确定特定符号313是否提供给运动补偿预测单元306、缩放器/逆变换单元305、帧内预测单元307或环路滤波器311。
取决于已编码视频图片或一部分已编码视频图片(例如：帧间图片和帧内图片、帧间块和帧内块)的类型以及其它因素，符号313的重建可涉及多个不同单元。涉及哪些单元以及涉及方式可由解析器304从已编码视频序列解析的子群控制信息来控制。为了简洁起见，未描绘解析器304与下文的多个单元之间的此类子群控制信息流。
除已经提及的功能块以外，解码器300可在概念上细分成如下文所描述的数个功能单元。在商业约束下运行的实际实施方式中，这些单元中的许多单元彼此紧密交互且可至少部分地彼此集成。然而，出于描述所公开的主题的目的，概念上细分成下文的功能单元是适当的。
第一单元是缩放器/逆变换单元305。缩放器/逆变换单元305从解析器304接收作为符号313的量化变换系数以及控制信息，包括使用哪种变换方式、块大小、量化因子、量化缩放矩阵等。缩放器/逆变换单元305可输出包括样本值的块，该样本值可输入到聚合器310中。
在一些情况下，缩放器/逆变换单元305的输出样本可属于帧内编码块；即：不使用来自先前重建的图片的预测性信息，但可使用来自当前图片的先前重建部分的预测性信息的块。此类预测性信息可由帧内图片预测单元307提供。在一些情况下，帧内图片预测单元307采用从当前(部分重建)图片309提取的周围已重建信息生成大小和形状与正在重建的块相同的块。在一些情况下，聚合器310基于每个样本，将帧内预测单元307生成的预测信息添加到由缩放器/逆变换单元305提供的输出样本信息中。
在其它情况下，缩放器/逆变换单元305的输出样本可属于帧间编码和潜在运动补偿块。在这种情况下，运动补偿预测单元306可访问参考图片存储器308以提取用于预测的样本。在根据属于块的符号313对提取的样本进行运动补偿之后，这些样本可由聚合器310添加到缩放器/逆变换单元的输出(在这种情况下被称作残差样本或残差信号)，从而生成输出样本信息。运动补偿单元从其获取预测样本的参考图片存储器内的地址可受到运动矢量控制，以符号313的形式而供运动补偿单元使用，符号313可具有例如X、Y和参考图片分量。运动补偿还可包括在使用子样本精确运动矢量时，从参考图片存储器提取的样本值的内插、运动矢量预测机制等等。
聚合器310的输出样本可经受环路滤波器单元311中的各种环路滤波技术。视频压缩技术可包括环路内滤波器技术，该环路内滤波器技术受控于包括在已编码视频比特流中且作为来自解析器304的符号313可用于环路滤波器单元311的参数，然而，视频压缩技术还可响应于在解码已编码图片或已编码视频序列的先前(按解码次序)部分期间获得的元信息，以及响应于先前重建且经过环路滤波的样本值。
环路滤波器单元311的输出可以是样本流，该样本流可输出到呈现装置312以及存储在参考图片存储器557中，以用于将来的帧间图片预测。
一旦完全重建，某些已编码图片就可用作参考图片以用于将来预测。一旦已编码图片被完全重建，且已编码图片(通过例如解析器304)被识别为参考图片，则当前参考图片309可变为参考图片缓冲器308的一部分，且可在开始重建后续已编码图片之前重新分配新的当前图片存储器。
视频解码器300可根据可记录在例如ITU-T建议书H.265标准中的预定视频压缩技术执行解码操作。在已编码视频序列遵循如视频压缩技术文件或标准中特别是其配置文件中指定的视频压缩技术或标准的语法的意义上，已编码视频序列可符合所使用的视频压缩技术或标准指定的语法。对于合规性，还可要求已编码视频序列的复杂度处于视频压缩技术或标准的层级所限定的范围内。在一些情况下，层级限制最大图片大小、最大帧率、最大重建取样率(以例如每秒兆(mega)个样本为单位进行测量)、最大参考图片大小等。在一些情况下，由层级设定的限制可通过假想参考解码器(Hypothetical Reference Decoder，HRD)规范和在已编码视频序列中用信号通知的HRD缓冲器管理的元数据来进一步限定。
在一个实施例中，接收器302可连同已编码视频的接收一起接收附加(冗余)数据。该附加数据可被包括作为已编码视频序列的一部分。该附加数据可由视频解码器300使用以对数据进行适当解码和/或较准确地重建原始视频数据。附加数据可呈例如时间、空间或信噪比(signal noise ratio，SNR)增强层、冗余切片、冗余图片、前向纠错码等形式。
图4可以是根据本申请的实施例的视频编码器400的功能框图。
编码器400可从视频源401(并非编码器的一部分)接收视频样本，该视频源可采集将由编码器400编码的视频图像。
视频源401可提供将由编码器(303)编码的呈数字视频样本流形式的源视频序列，该数字视频样本流可具有任何合适位深度(例如：8位、10位、12位……)、任何色彩空间(例如BT.601Y CrCB、RGB……)和任何合适采样结构(例如YCrCb 4：2：0、Y CrCb 4：4：4)。在媒体服务系统中，视频源401可以是存储先前已准备的视频的存储装置。在视频会议系统中，视频源401可以是采集本地图像信息作为视频序列的相机。可将视频数据提供为多个单独的图片，当按顺序观看时，这些图片被赋予运动。图片自身可构建为空间像素阵列，其中取决于所用的采样结构、色彩空间等，每个像素可包括一个或多个样本。本领域技术人员可容易理解像素与样本之间的关系。下文侧重于描述样本。
根据一个实施例，编码器400可实时或在由应用所要求的任何其它时间约束下，将源视频序列的图片编码且压缩成已编码视频序列410。施行适当的编码速度是控制器402的一个功能。控制器控制如下文所描述的其它功能单元且在功能上耦接到这些单元。为了简洁起见，图中未描绘耦接。由控制器设置的参数可包括速率控制相关参数(图片跳过、量化器、率失真优化技术的λ值……)、图片大小、图片群组(GOP)布局、最大运动矢量搜索范围等。本领域技术人员可容易确定控制器402的其它功能，因为这些功能可涉及针对某一系统设计优化的视频编码器400。
一些视频编码器在本领域技术人员容易认识到的“编码环路”中进行操作。作为简单的描述，编码环路可包括编码器402(此后称为“源编码器”。)的编码部分(负责基于待编码的输入图片和参考图片创建符号)和嵌入于编码器400中的(本地)解码器406，解码器406重建符号以用类似于(远程)解码器还可创建样本数据的方式创建样本数据(因为在所公开的主题所考虑的视频压缩技术中，符号与已编码视频比特流之间的任何压缩是无损的)。将重建的样本流输入到参考图片存储器405。由于符号流的解码产生与解码器位置(本地或远程)无关的位精确结果，因此参考图片缓冲器的内容在本地编码器与远程编码器之间也是按比特位精确对应的。换句话说，编码器的预测部分“看到”的参考图片样本与解码器将在解码期间使用预测时所“看到”的样本值完全相同。这种参考图片同步性基本原理(以及在例如因信道误差而无法维持同步性的情况下产生的漂移)对于本领域技术人员是公知的。
“本地”解码器406的操作可与已在上文结合图3详细描述的“远程”解码器300的操作相同。然而，另外简要参考图4，当符号可用且熵编码器408和解析器304可无损地将符号编码/解码为已编码视频序列时，包括信道301、接收器302、缓冲器303和解析器304在内的解码器300的熵解码部分，可能无法完全在本地解码器406中实施。
此时可观察到，除存在于解码器中的解析/熵解码之外的任何解码器技术，也必定以基本上相同的功能形式存在于对应的编码器中。可简化编码器技术的描述，因为编码器技术与全面地描述的解码器技术互逆。仅在某些区域中需要更详细的描述，并在下文提供。
在其一部分操作期间，源编码器403可执行运动补偿预测编码，参考来自视频序列中被指定为“参考帧”的一个或多个先前已编码帧，该运动补偿预测编码对输入帧进行预测性编码。以此方式，编码引擎407对输入帧的像素块与参考帧的像素块之间的差异进行编码，该参考图片可被选作该输入帧的预测参考。
本地视频解码器406可基于源编码器403创建的符号，对可指定为参考帧的帧的已编码视频数据进行解码。编码引擎407的操作可有利地为有损过程。当已编码视频数据可在视频解码器(图4中未示)处被解码时，已重建视频序列通常可以是源视频序列的副本，但带有一些误差。本地视频解码器406复制解码过程，该解码过程可由视频解码器对参考帧执行，且可使重建参考帧存储在参考帧高速缓存405中。以此方式，编码器400可在本地存储重建参考帧的副本，该副本与将由远端视频解码器获得的重建参考帧具有共同内容(不存在传输误差)。
预测器404可针对编码引擎407执行预测搜索。即，对于将要编码的新帧，预测器404可在参考图片存储器405中搜索可作为该新图片的适当预测参考的样本数据(作为候选参考像素块)或某些元数据，例如参考图片运动矢量、块形状等。预测器404可基于样本块逐像素块操作，以找到合适的预测参考。在一些情况下，如由预测器404获得的搜索结果所确定的那样，输入图片可具有从参考图片存储器405中存储的多个参考图片取得的预测参考。
控制器402可管理视频编码器403的编码操作，包括例如设置用于对视频数据进行编码的参数和子群参数。
可在熵编码器408中对所有上述功能单元的输出进行熵编码。熵编码器根据本领域技术人员已知的例如霍夫曼编码、可变长度编码、算术编码等技术对各种功能单元生成的符号进行无损压缩，从而将该符号变换成已编码视频序列。
传输器409可缓冲由熵编码器408创建的已编码视频序列，从而为通过通信信道411进行传输做准备，该通信信道可以是通向将存储已编码视频数据的存储装置的硬件/软件链路。传输器409可将来自视频编码器403的已编码视频数据与要传输的其它数据合并，该其它数据例如是已编码音频数据和/或辅助数据流(未示出来源)。
控制器402可管理编码器400的操作。在编码期间，控制器405可给每个已编码图片分配某一已编码图片类型，但这可能影响可应用于相应的图片的编码技术。例如，通常可将图片分配为以下任一种图片类型：
帧内图片(I图片)，其可以是不将序列中的任何其它图片用作预测源就可被编码和解码的图片。一些视频编解码器容许不同类型的帧内图片，包括例如独立解码器刷新(Independent Decoder Refresh，“IDR”)图片。本领域技术人员了解I图片的这些变体及其相应的应用和特征。
预测性图片(P图片)，其可以是可使用帧内预测或帧间预测进行编码和解码的图片，该帧内预测或帧间预测使用至多一个运动矢量和参考索引来预测每个块的样本值。
双向预测性图片(B图片)，其可以是可使用帧内预测或帧间预测进行编码和解码的图片，该帧内预测或帧间预测使用至多两个运动矢量和参考索引来预测每个块的样本值。类似地，多个预测性图片可使用多于两个参考图片和相关联的元数据以用于重建单个块。
源图片通常可在空间上细分成多个样本块(例如，4×4、8×8、4×8或16×16个样本的块)，且逐块进行编码。这些块可参考其它(已编码)块进行预测性编码，该其它块由应用于块的相应图片的编码分配来确定。举例来说，I图片的块可进行非预测性编码，或该块可参考同一图片的已编码块来进行预测性编码(空间预测或帧内预测)。P图片的像素块可参考一个先前编码的参考图片通过空间预测或通过时间预测进行非预测性编码。B图片的块可参考一个或两个先前编码的参考图片通过空间预测或通过时间预测进行非预测性编码。
视频编码器400可根据例如ITU-T建议书H.265的预定视频编码技术或标准执行编码操作。在操作中，视频编码器400可执行各种压缩操作，包括利用输入视频序列中的时间和空间冗余的预测编码操作。因此，已编码视频数据可符合所使用的视频编码技术或标准指定的语法。
在一个实施例中，传输器409可在传输已编码视频时传输附加数据。源编码器403可包括此类数据作为已编码视频序列的一部分。附加数据可包括时间/空间/SNR增强层、冗余图片和切片等其它形式的冗余数据、辅助增强信息(SEI)消息、视频可用性信息(VUI)参数集片段等。
图5示出了根据实施例的用于基于会话的DASH操作的示例性架构500的简化框图。
流媒体或视频内容可以起源于源头501并提供给内容分发网络(contentdelivery network，CDN)502，CDN 502可以向DASH访问客户端503提供MPD/片段。会话客户端506可以被控制以由DASH访问客户端503请求值，该值可以从会话客户端506提供给DASH访问客户端503。作为示例，可以由DASH访问客户端503请求诸如通过getValue(key,time)得到的值，该值可以从会话客户端506提供给DASH访问客户端503。会话客户端506可以结合来自会话控制器504和505以及它们各自的SBD数据SBD[0]和SBD[1]的如图6和图7的示例实施例中的控制，将值提供给DASH访问客户端503。
作为示例，为URL模板在SBD描述符中引入了元素，并且根据实施例更具体地说，SBD操作(例如，查询或URL定制)应该使得会话客户端506在从DASH访问客户端503中的MPD中检索到足够的信息之后，可以将其处理应用于由DASH访问客户端503生成的片段URL。然而，在示例实施例中，SBD操作不应该拦截DASH访问客户端503的操作，并且，尽管示例实现方式可以组合MPD和SBD处理，但其他实施例认为因此可以完成这些特征。因此，其优点可以是SBD操作可以作为应用添加到任何DASH访问客户端，而不是与DASH客户端逻辑集成。因此，可以添加将URL更改为新值的实施例。
根据本公开实施例，可以扩展与SBD相关的基于会话的DASH操作标准(例如，ISO/IEC 23009-8)以允许SBD文档URL或SBD URL的定制。即，允许将多个文档应用于各种请求的查询或URL的SBD标准可以扩展到请求并应用其他SBD URL请求。
MPD元素可以具有一个或多个SBD描述符。然而，如上所述，虽然URL和请求可以使用SBD描述符来修改，但是用于SBD描述符的SBD文档URL不能使用现有的标准来修改。因此，为了解决该技术问题并在定制中提供更大的灵活性，本公开实施例增加了称为预先会话描述(pre-session-description，PreSBD)的SBD描述符，并且PreSBD可用于定制其他的SBDURL请求。
根据本公开实施例，PreSBD描述符可以具有与“常规”SBD描述符相同的语法，其中，值“sbd”分配给其@urlclass属性。@urlclass属性可以指定哪些HPPT GET请求可以经受SBD处理。由于@urlclass属性指定哪些HPPT GET请求可以经受SBD处理，因此值“sbd”可以指示PreSBD描述符信息可以包括一种类型的超文本传输协议(hypertext transferprotocol，HTTP)获得请求，这种类型的HTTP获得请求经受定制的SBD文档URL生成。
与@urlclass相关联的值可能是一个可允许密钥的串联列表的列表。对于PreSBD描述符，@urlclass属性值可以是包含至少“sbd”的串联列表。串联列表中可以包含的其他可能值是“segment”、“xlink”、“mpd”、“callback”、“chaining”和“fallback”。
PreSBD描述符的属性可以不局限于@urlclass属性。表1示出了使用PreSBD描述符进行基于会话的DASH处理的MPD EssentialProperty描述符属性的示例。
表1PreSBD的MPD EssentialProperty描述符属性
Figure BDA0003952593990000131
/>
Figure BDA0003952593990000141
/>
Figure BDA0003952593990000151
/>
Figure BDA0003952593990000161
/>
Figure BDA0003952593990000171
/>
Figure BDA0003952593990000181
根据本公开实施例，在MPD处理中包括PreSBD描述符可以具有一个或多个限制。
虽然MPD可以具有一个或多个PreSBD描述符，但根据一些实施例，MPD元素可以仅具有至多一个PreSBD描述符。在一些实施例中，MPD可以具有多于一个PreSBD，在一个MPD元素中可以存在不多于一个PreSBD描述符信息。在一个实施例中，具有PreSBD的MPD元素的较低层级元素可以不具有PreSBD描述符。因此，在具有PreSBD描述符信息的MPD元素的较低层级元素中可以不存在PreSBD描述符信息。因此，根据一些实施例，MPD元素可以具有至多一个PreSBD描述符。
根据本公开实施例，对于MPD元素，可以在处理该MPD元素中的任何“常规”SBD描述符之前处理PreSBD描述符。本公开旨在使用其他SBD URL定制SBD文档URL。为了实现这样的分层结构并使得“常规”SBD描述符能够定制它们的SBD文档URL，可以在MPD元素中的任何其他描述符之前处理PreSBD描述符。因此，可以在实例化MPD元素的任何其他SBD客户端之前实例化PreSBD客户端。
根据本公开实施例，在作出对SBD文档的请求之前，可以将任何SBD描述符的SBD文档URL发送到对应的PreSBD客户端进行定制。在一些实施例中，在进行对SBD文档的请求并且相应的SBD客户端为视频内容的片段生成和/或修改片段URL之前，可以将任何SBD描述符的SBD文档URL发送到对应的PreSBD客户端进行定制。因此，在处理对视频内容的片段的相应请求之前，可以将与用于会话的同一MPD元素中的多个SBD描述符相关联的相应SBD文档URL发送到PreSBD客户端。
现在参考图6和图7，图6是示出用于基于会话的描述URL定制的过程600的流程图；图7是根据实施例的用于基于会话的描述URL定制的调用流700的示例性说明。
如图6所示，在操作610中，可以获得PreSBD信息，PreSBD信息指示PreSBD客户端为会话的多个SBD描述符生成定制的SBD文档URL。作为示例，诸如DASH访问客户端503的DASH客户端可以解析诸如来自CDN 502的MPD，并获得会话的PreSBD信息，该PreSBD信息指示PreSBD客户端为该会话的多个SBD描述符生成定制的SBD文档URL。
在操作620中，可以实例化PreSBD客户端，并且可以将PreSBD描述符信息传递给PreSBD客户端。作为示例，诸如DASH客户端705的DASH客户端可以执行对PreSBD描述符的查找，该PreSBD描述符可以实例化诸如PreSBD客户端710的PreSBD客户端。在一些实施例中，PreSBD描述符信息可以包括具有值“sbd”的@urlclass属性，该属性可以由DASH客户端705使用。在一些实施例中，PreSBD描述符信息可以包括一种类型的HTTP GET请求，该GET请求可以经受定制的SBD文档URL生成，并且这种信息可以由DASH客户端705使用。
根据实施例，在启动MPD元素中的第一SBD客户端或启动MPD元素中的任意非PreSBD客户端之前，可以实例化PreSBD客户端。作为示例，参考图7，在调用流700的操作755中，DASH客户端705可执行对PreSBD描述符的查找，PreSBD描述符可实例化诸如PreSBD客户端710的PreSBD客户端，并将PreSBD描述符传递给PreSBD客户端710。
在过程600的操作630中，可以控制与来自会话的多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成。作为示例，在调用流700的操作760中，DASH客户端705可以控制与诸如SBD1描述符的第一SBD描述符相关联的定制的SBD文档URL的生成。在操作765中，DASH客户端705可以接收与第一SBD描述符SBD1相关联的定制的SBD文档URL。在一些实施例中，PreSBD客户端710可以在DASH客户端705的指导下生成定制的SBD文档。
根据实施例，可以为其生成定制的SBD文档URL的会话的多个SBD描述符可以包括：在具有PreSBD描述符信息的同一MPD元素中的SBD描述符，或者在与具有PreSBD描述符信息的MPD元素相比具有较低层级的MPD元素中的SBD描述符。如上所述，PreSBD处理可以具有一些限制，包括：在MPD元素中可以存在不超过一个PreSBD描述符信息，并且在具有PreSBD描述符信息的MPD元素的较低层级元素中可以不存在PreSBD描述符信息。
由于需要PreSBD描述符来实例化PreSBD客户端并生成与来自会话的多个SBD描述符中的一SBD描述符相关联的定制的SBD文档URL，根据实施例，可以在启动第一SBD客户端或启动任何非PreSBD客户端之前实例化PreSBD客户端。类似地，根据实施例，在处理对视频内容的片段的相应请求之前，将与会话的多个SBD描述符相关联的相应SBD文档URL发送到PreSBD客户端。
在过程600的操作640中，可以基于定制的SBD文档URL启动第一SBD客户端，并且可以将第一SBD描述符传递给第一SBD客户端。作为示例，在调用流700的操作770中，DASH客户端705可以基于与在操作765中接收的与第一SBD描述符SBD1相关联的定制的SBD文档URL来启动SBD1客户端715。
在过程600的操作650中，可基于第一SBD描述符和定制的SBD文档URL来控制片段URL的生成，并且可以通过至少修改片段URL来处理对视频内容片段的请求。作为示例，在操作770和775中，DASH客户端705可以基于PreSBD描述符和SBD1描述符来控制片段URL的生成。在一些实施例中，SBD1客户端715可以在DASH客户端705的指导下生成片段URL。
此外，在操作650中，可以通过至少修改片段URL来处理对视频内容的片段的请求。根据实施例，在处理对视频内容的片段的相应请求之前，可以将与会话的多个SBD描述符相关联的相应SBD文档URL发送到PreSBD客户端。
在操作660中，可以提供基于修改的片段URL的视频内容的片段。作为示例，在调用流程700的操作780中，DASH客户端705可以基于从SBD1客户端715接收的修改的片段URL来提供视频内容的片段。在一些实施例中，在调用流程700的操作780中，DASH客户端705可以通过至少修改从SBD1客户端715接收的片段URL来处理对视频内容的片段的请求，并基于修改的片段URL提供视频内容的片段。
可以将上述技术实现为计算机软件，该计算机软件使用计算机可读指令，且物理地存储在一个或多个计算机可读介质中，或者通过专门配置的一个或多个硬件处理器来实现。例如，图8示出了适合于实施所公开的主题的某些实施例的计算机系统800。
可使用任何合适的机器代码或计算机语言来对计算机软件进行编码，任何合适的机器代码或计算机语言可经受汇编、编译、链接或类似的机制以创建包括指令的代码，该指令可由一个或多个计算机中央处理单元(CPU)、图形处理单元(GPU)等直接执行或通过解释、微代码等执行。
指令可以在各种类型的计算机或其组件上执行，例如包括个人计算机、平板计算机、服务器、智能电话、游戏装置、物联网装置等。
图8所示的计算机系统800的组件本质上是示例性的，并且不旨在对实施本申请的实施例的计算机软件的使用范围或功能提出任何限制。组件的配置也不应被解释为具有与计算机系统800的示例性实施例中所示的组件中的任何一个组件或组件的组合有关的任何依赖性或要求。
计算机系统800可包括某些人机接口输入装置。此类人机接口输入装置可响应于一个或多个人类用户例如通过下述的输入：触觉输入(例如：击键、划动，数据手套移动)、音频输入(例如：语音、拍手)、视觉输入(例如：手势)、嗅觉输入(未描绘出)。人机接口装置还可用于捕获不一定与人的意识输入直接相关的某些媒体，例如音频(例如：语音、音乐、环境声音)、图像(例如：扫描的图像、从静止图像相机获取摄影图像)、视频(例如二维视频、包括立体视频的三维视频)。
输入人机接口装置可包括下述中的一项或多项(每种中仅示出一个)：键盘801、鼠标802、触控板803、触摸屏810、操纵杆805、麦克风806、扫描仪808、相机807。
计算机系统800还可包括某些人机接口输出装置。此类人机接口输出装置可例如通过触觉输出、声音、光和气味/味道来刺激一个或多个人类用户的感官。此类人机接口输出装置可包括触觉输出装置(例如触摸屏810的触觉反馈或操纵杆805，但是还可以是不作为输入设备的触觉反馈装置)、音频输出装置(例如：扬声器809、耳机(未描绘出))、视觉输出装置(例如包括CRT屏幕、LCD屏幕、等离子屏幕、OLED屏幕的屏幕810，每种屏幕有或没有触摸屏输入功能，每种屏幕都有或没有触觉反馈功能-其中的一些屏幕能够通过诸如立体图像输出之类的装置、虚拟现实眼镜(未描绘出)、全息显示器和烟箱(未描绘出)以及打印机(未描绘出)来输出二维视觉输出或超过三维输出。
计算机系统800还可包括人类可访问存储装置及其关联介质：例如包括具有CD/DVD等介质811的CD/DVD ROM/RW820的光学介质、指状驱动器822、可拆卸硬盘驱动器或固态驱动器823、诸如磁带和软盘之类的传统磁性介质(未描绘出)、诸如安全软件狗之类的基于专用ROM/ASIC/PLD的装置(未描绘出)等。
本领域技术人员还应该理解，结合当前公开的主题使用的术语“计算机可读介质”不涵盖传输介质、载波或其他瞬时信号。
计算机系统800还可包括通到一个或多个通信网络898的接口899。网络898可以例如是无线网络、有线网络、光网络。网络898可以进一步地是本地网络、广域网络、城域网络、车辆和工业网络、实时网络、耐延迟网络等。网络898的示例包括诸如以太网之类的局域网、无线LAN、包括GSM、3G、4G、5G、LTE等的蜂窝网络、包括有线电视、卫星电视和地面广播电视的电视有线或无线广域数字网络、包括CANBus的车辆和工业用电视等等。某些网络898通常需要连接到某些通用数据端口或外围总线(850和851)的外部网络接口适配器(例如计算机系统800的USB端口)；如下所述，其他网络接口通常通过连接到系统总线而集成到计算机系统800的内核中(例如，连接到PC计算机系统中的以太网接口或连接到智能手机计算机系统中的蜂窝网络接口)。计算机系统800可使用这些网络898中的任何一个与其他实体通信。此类通信可以是仅单向接收的(例如，广播电视)、仅单向发送的(例如，连接到某些CANbus装置的CANbus)或双向的，例如，使用局域网或广域网数字网络连接到其他计算机系统。如上所述，可以在那些网络和网络接口中的每一个上使用某些协议和协议栈。
上述人机接口装置、人机可访问的存储装置和网络接口可附接到计算机系统800的内核840。
内核840可包括一个或多个中央处理单元(CPU)841、图形处理单元(GPU)842、图形适配器817、现场可编程门区域(FPGA)843形式的专用可编程处理单元、用于某些任务的硬件加速器844等。这些装置以及只读存储器(ROM)845、随机存取存储器846、诸如内部非用户可访问的硬盘驱动器、SSD等之类的内部大容量存储器847可通过系统总线848连接。在一些计算机系统中，可以以一个或多个物理插头的形式访问系统总线848，以能够通过附加的CPU、GPU等进行扩展。外围装置可直接连接到内核的系统总线848或通过外围总线851)连接到内核的系统总线848。外围总线的体系结构包括PCI、USB等。
CPU841、GPU842、FPGA843和加速器844可执行某些指令，这些指令可以组合来构成上述计算机代码。该计算机代码可存储在ROM845或RAM846中。过渡数据也可以存储在RAM846中，而永久数据可例如存储在内部大容量存储器847中。可通过使用高速缓存来进行到任何存储装置的快速存储及检索，该高速缓存可以与下述紧密关联：一个或多个CPU841、GPU842、大容量存储器847、ROM845、RAM846等。
计算机可读介质可以在其上具有用于执行各种由计算机实现的操作的计算机代码。介质和计算机代码可以是出于本公开的目的而专门设计和构造的介质和计算机代码，或者介质和计算机代码可以是计算机软件领域的技术人员公知且可用的类型。
作为非限制性示例，可以由于一个或多个处理器(包括CPU、GPU、FPGA、加速器等)执行包含在一种或多种有形的计算机可读介质中的软件而使得具有架构800，特别是内核840的计算机系统提供功能。此类计算机可读介质可以是与如上所述的用户可访问的大容量存储器相关联的介质，以及某些非暂时性的内核840的存储器，例如内核内部大容量存储器847或ROM845。可以将实施本申请的各种实施例的软件存储在此类装置中并由内核840执行。根据特定需要，计算机可读介质可包括一个或多个存储装置或芯片。软件可引起内核840，特别是其中的处理器(包括CPU、GPU、FPGA等)执行本文所描述的特定过程或特定过程的特定部分，包括定义存储在RAM846中的数据结构以及根据由软件定义的过程来修改此类数据结构。附加地或替换地，可以由于硬连线或以其他方式体现在电路(例如，加速器844)中的逻辑而使得计算机系统提供功能，该电路可替换软件或与软件一起运行以执行本文描述的特定过程或特定过程的特定部分。在适当的情况下，提及软件的部分可包含逻辑，反之亦然。在适当的情况下，提及计算机可读介质的部分可包括存储用于执行的软件的电路(例如集成电路(integrated circuit，IC))、体现用于执行的逻辑的电路或两者都包括。本申请包括硬件和软件的任何合适的组合。
尽管本申请已经描述了多个示例性实施例，但是存在落入本申请的范围内的修改、置换和各种替换等效物。因此，应当理解，本领域技术人员将能够设计出许多系统和方法，这些系统和方法虽然未在本文中明确示出或描述，但是其体现了本申请的原理，因此落入本申请的精神和范围内。

Claims (20)

1.一种用于在基于超文本传输协议的动态自适应流媒体传输(DASH)流会话中提供视频内容的方法，所述方法由至少一个处理器执行，并且所述方法包括：
获取DASH流会话的预先基于会话的描述(PreSBD)信息，所述PreSBD信息指示PreSBD客户端为所述DASH流会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)；
实例化所述PreSBD客户端并传递PreSBD描述符信息；
控制与来自所述DASH流会话的所述多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成；以及
基于所述定制的SBD文档URL启动第一SBD客户端并向所述第一SBD客户端传递所述第一SBD描述符。
2.根据权利要求1所述的方法，进一步包括：
基于所述第一SBD描述符和所述定制的SBD文档URL来控制片段URL的生成，并通过至少修改所述片段URL来处理对所述视频内容的片段的请求；以及
基于所修改的片段URL提供所述视频内容的所述片段。
3.根据权利要求1所述的方法，其中，所述DASH流会话的所述多个SBD描述符包括：在具有所述PreSBD描述符信息的同一媒体呈现描述(MPD)元素中的SBD描述符，或者在与具有所述PreSBD描述符信息的MPD元素相比较低层级的MPD元素中的SBD描述符。
4.根据权利要求1所述的方法，其中，所述PreSBD描述符信息包括具有值为“sbd”的@urlclass属性。
5.根据权利要求1所述的方法，其中，所述PreSBD描述符信息包括一种类型的超文本传输协议(HTTP)获得请求，所述类型的HTTP获得请求经受定制的SBD文档URL生成。
6.根据权利要求1所述的方法，其中，在媒体呈现描述(MPD)元素中存在不超过一个PreSBD描述符信息。
7.根据权利要求1所述的方法，其中，在与具有所述PreSBD描述符信息的媒体呈现描述(MPD)元素相比较低层级的元素中不存在所述PreSBD描述符信息。
8.根据权利要求1所述的方法，其中，在启动所述第一SBD客户端或启动任意非PreSBD客户端之前实例化所述PreSBD客户端。
9.根据权利要求1所述的方法，其中，在处理针对所述视频内容的片段的相应请求之前，将与所述DASH流会话的所述多个SBD描述符相关联的相应SBD文档URL发送到所述PreSBD客户端。
10.一种装置，包括：
至少一个存储器，配置为存储计算机程序代码；
至少一个处理器，配置为访问所述计算机程序代码并按照所述计算机程序代码的指示进行操作，所述计算机程序代码包括：
获取代码，配置为使得所述至少一个处理器获取DASH流会话的预先基于会话的描述(PreSBD)信息，所述PreSBD信息指示PreSBD客户端为所述DASH流会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)；
实例化代码，配置为使得所述至少一个处理器实例化所述PreSBD客户端并传递PreSBD描述符信息；
第一控制代码，配置为使得所述至少一个处理器控制与来自所述DASH流会话的所述多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成；以及
启动代码，配置为使得所述至少一个处理器基于所述定制的SBD文档URL启动第一SBD客户端并传递所述第一SBD描述符。
11.根据权利要求10所述的装置，进一步包括：
发送控制代码，配置为使得所述至少一个处理器基于所述第一SBD描述符和所述定制的SBD文档URL来控制片段URL的生成，并通过至少修改所述片段URL来处理对所述视频内容的片段的请求；以及
提供代码，配置为使得所述至少一个处理器基于所修改的片段URL提供所述视频内容的所述片段。
12.根据权利要求10所述的装置，其中，所述DASH流会话的所述多个SBD描述符包括：在具有所述PreSBD描述符信息的同一媒体呈现描述(MPD)元素中的SBD描述符，或者在与具有所述PreSBD描述符信息的MPD元素相比较低层级的MPD元素中的SBD描述符。
13.根据权利要求10所述的装置，其中，所述PreSBD描述符信息包括一种类型的超文本传输协议(HTTP)获取请求，所述类型的HTTP获得请求经受定制的SBD文档URL生成。
14.根据权利要求10所述的装置，其中，在媒体呈现描述(MPD)元素中存在不超过一个PreSBD描述符信息。
15.根据权利要求10所述的装置，其中，在与具有所述PreSBD描述符信息的媒体呈现描述(MPD)元素相比较低层级的元素中不存在所述PreSBD描述符信息。
16.根据权利要求10所述的装置，其中，在启动所述第一SBD客户端或启动任意非PreSBD客户端之前实例化所述PreSBD客户端。
17.根据权利要求10所述的装置，其中，在处理对所述视频内容的所述片段的相应请求之前，将与所述DASH流会话的所述多个SBD描述符相关联的相应SBD文档URL发送到所述PreSBD客户端。
18.一种非暂时性计算机可读介质，存储有指令，当所述指令由至少一个处理器执行，所述指令使得所述至少一个处理器执行以下操作：
获取DASH流会话的预先基于会话的描述(PreSBD)信息，所述PreSBD信息指示PreSBD客户端为所述DASH流会话的多个SBD描述符生成定制的基于会话的描述(SBD)文档统一资源定位符(URL)；
实例化所述PreSBD客户端并传递PreSBD描述符信息；
控制与来自所述DASH流会话的所述多个SBD描述符中的第一SBD描述符相关联的定制的SBD文档URL的生成；以及
基于所述定制的SBD文档URL启动第一SBD客户端并传递所述第一SBD描述符。
19.根据权利要求18所述的非暂时性计算机可读介质，所述介质进一步存储指令，所述指令使得所述至少一个处理器执行以下操作：
基于所述第一SBD描述符和所述定制的SBD文档URL来控制片段URL的生成，并通过至少修改所述片段URL来处理对所述视频内容的片段的请求；以及
提供代码，所述代码被配置为使得所述至少一个处理器基于所修改的片段URL提供所述视频内容的所述片段。
20.根据权利要求18所述的非暂时性计算机可读介质，其中，所述DASH流会话的所述多个SBD描述符包括：在具有所述PreSBD描述符信息的同一媒体呈现描述(MPD)元素中的SBD描述符，或者在与具有所述PreSBD描述符信息的MPD元素相比较低层级的MPD元素中的SBD描述符。
CN202280004388.5A 2021-04-21 2022-03-25 使用基于会话的dash操作的基于会话的描述url定制 Pending CN115867906A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202163177788P 2021-04-21 2021-04-21
US63/177,788 2021-04-21
US17/702,874 2022-03-24
US17/702,874 US11895172B2 (en) 2021-04-21 2022-03-24 Session-based description URL customization using the session-based DASH operations
PCT/US2022/021885 WO2022225644A1 (en) 2021-04-21 2022-03-25 Session-based description url customization using the session-based dash operations

Publications (1)

Publication Number Publication Date
CN115867906A true CN115867906A (zh) 2023-03-28

Family

ID=83694545

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280004388.5A Pending CN115867906A (zh) 2021-04-21 2022-03-25 使用基于会话的dash操作的基于会话的描述url定制

Country Status (6)

Country Link
US (2) US11895172B2 (zh)
EP (1) EP4111330A4 (zh)
JP (1) JP7407308B2 (zh)
KR (1) KR20220160090A (zh)
CN (1) CN115867906A (zh)
WO (1) WO2022225644A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10970881B2 (en) * 2018-12-21 2021-04-06 Samsung Display Co., Ltd. Fallback modes for display compression

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101629748B1 (ko) 2012-07-09 2016-06-13 후아웨이 테크놀러지 컴퍼니 리미티드 Dash 클라이언트 행위 프레임워크 및 세션 관리의 실현
CN104782147B (zh) 2012-10-24 2019-06-18 华为技术有限公司 一种通信发送/接收器以及内容发送及接收方法
US20150172066A1 (en) * 2013-12-13 2015-06-18 Qualcomm Incorporated Practical implementation aspects of unicast fetch for http streaming over embms
US9397848B2 (en) * 2014-03-20 2016-07-19 Cellco Partnership Interface for accessing evolved multimedia broadcast multicast services (eMBMS) middleware services
WO2016018042A1 (en) * 2014-07-31 2016-02-04 Lg Electronics Inc. Apparatus and method for transmitting/receiving processes of a broadcast signal
US10454985B2 (en) * 2015-03-04 2019-10-22 Qualcomm Incorporated File format based streaming with dash formats based on LCT
MX2017015340A (es) * 2015-06-12 2018-04-11 Sony Corp Aparato de procesamiento de informacion y metodo de procesamiento de informacion.
WO2017054844A1 (en) * 2015-09-29 2017-04-06 Telefonaktiebolaget Lm Ericsson (Publ) Pcc control of http adaptive bit rate video streaming protocols
US11038938B2 (en) * 2016-04-25 2021-06-15 Time Warner Cable Enterprises Llc Methods and apparatus for providing alternative content
US10313418B2 (en) * 2016-06-20 2019-06-04 Ramp Holdings, Inc. Chunked HTTP video cache routing
US10904642B2 (en) 2018-06-21 2021-01-26 Mediatek Singapore Pte. Ltd. Methods and apparatus for updating media presentation data
US11438731B2 (en) * 2019-03-19 2022-09-06 Nokia Technologies Oy Method and apparatus for incorporating location awareness in media content
DE112020003766T5 (de) * 2019-08-08 2022-07-07 Intel Corporation Linkleistungsprognose und Medienstreaming-Technologien
US11303956B2 (en) 2019-09-11 2022-04-12 Verizon Patent And Licensing Inc. Systems and methods for internet protocol tuning
US11425187B2 (en) 2019-09-30 2022-08-23 Tencent America Llc. Session-based information for dynamic adaptive streaming over HTTP
US11616822B2 (en) 2019-09-30 2023-03-28 Tencent America LLC Session-based information for dynamic adaptive streaming over HTTP
US11418561B2 (en) * 2020-03-03 2022-08-16 Tencent America LLC Remote link validity interval in media streaming

Also Published As

Publication number Publication date
WO2022225644A1 (en) 2022-10-27
EP4111330A1 (en) 2023-01-04
KR20220160090A (ko) 2022-12-05
JP7407308B2 (ja) 2023-12-28
US20220345509A1 (en) 2022-10-27
US20240121286A1 (en) 2024-04-11
JP2023525667A (ja) 2023-06-19
EP4111330A4 (en) 2023-08-02
US11895172B2 (en) 2024-02-06

Similar Documents

Publication Publication Date Title
CN112292859B (zh) 一种用于解码至少一个视频流的方法和装置
CN113711605B (zh) 视频编解码的方法、装置、系统以及计算机可读介质
JP2021517408A5 (zh)
CN112118456B (zh) 莱斯参数选择方法、装置、计算机设备及存储介质
CN114556942A (zh) 用于无损和近无损压缩的量化器
US20240121286A1 (en) Session-based description url customization using the session-based dash operations
CN114641976B (zh) 用于流式传输媒体内容的方法、设备和计算机可读介质
CN113273152B (zh) 媒体解码的方法、装置与计算机可读介质
US20230075516A1 (en) System and method for decoding including network abstraction layer unit structure with picture header
CN113994686A (zh) 点云编码的数据单元和参数集设计
US20200213603A1 (en) Method for syntax controlled decoded picture buffer management
CN114270329A (zh) 清单内更新事件
CN114073084A (zh) 在视频码流中有效发信号通知图片大小和分区信息的方法和装置
US11470136B2 (en) URL customization using the session-based dash operations
US20230222823A1 (en) Method for annotating vvc subpictures in dash
CN114667738A (zh) Mpd有效期到期处理模型
CN116508319A (zh) 神经图像压缩中的逐块熵编码方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination