CN115552387A - 事件消息轨迹中的事件之间的扩展关系信令 - Google Patents

事件消息轨迹中的事件之间的扩展关系信令 Download PDF

Info

Publication number
CN115552387A
CN115552387A CN202280004015.8A CN202280004015A CN115552387A CN 115552387 A CN115552387 A CN 115552387A CN 202280004015 A CN202280004015 A CN 202280004015A CN 115552387 A CN115552387 A CN 115552387A
Authority
CN
China
Prior art keywords
event message
message instance
value
relationship
instance box
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280004015.8A
Other languages
English (en)
Inventor
伊拉吉·索达加
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent America LLC
Original Assignee
Tencent America LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent America LLC filed Critical Tencent America LLC
Publication of CN115552387A publication Critical patent/CN115552387A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/764Media network packet handling at the destination 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1083In-session procedures
    • H04L65/1089In-session procedures by adding media; by removing media

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

提供用于HTTP上动态自适应流式传输(DASH)的系统、设备和方法。方法包括:获得包括多个事件消息实例框的事件消息轨迹,事件消息轨迹被配置成由DASH客户端进行处理以显示媒体内容;获得包括在事件消息轨迹中的第一事件消息实例框;获得包括在事件消息轨迹中的第二事件消息实例框,其中,第二事件消息实例框包括第一信息和第二信息,第一信息标识第一事件消息实例框,以及第二信息指定第一事件消息实例框和第二事件消息实例框之间的关系;基于第一信息和第二信息,修改第一事件消息实例框;以及向DASH客户端提供事件消息轨迹,或者基于事件消息轨迹来显示媒体内容。

Description

事件消息轨迹中的事件之间的扩展关系信令
相关申请的交叉引用
本申请要求于2021年4月20日提交的美国临时申请No.63/177,271的优先权,该美国临时申请的公开内容通过引用整体并入本文中。
技术领域
本公开的实施例针对于媒体流式传输,更具体地,针对于超文本传输协议(HTTP)上的动态自适应流式传输(DASH)。
背景技术
ISO/IEC 23009-1HTTP上动态自适应流式传输(DASH)标准引入了用于携带媒体片段的事件的事件消息框。此外,ISO/IEC 23001-19CD定义了事件消息轨迹格式,其中,轨迹可携带事件消息。
目前的事件消息轨迹规范使用框来携带每个事件实例。在该框中可以用信号表示的两个实例之间的唯一关系是两个事件实例何时等同,即,何时处理一个事件实例就足够了。然而,对于两个事件实例之间的关系,可存在更多可能的情况。
“信息技术-视听对象的编码-第12部分:ISO基本媒体文件格式(Informationtechnology—Coding of audiovisual objects—Part 12:ISO base media fileformat)”,ISO/IEC 14496-12(2015年12月);“ISO/IEC 23000-19分段媒体的通用媒体应用格式的FDIS草案(Draft of FDIS of ISO/IEC 23000-19Common Media ApplicationFormat for Segmented Media)”,ISO/IEC JTC1/SC29/WG11 MPEG117/16819(2017年4月);以及“ISO/IEC FDIS 23009-1第4版文本(Text of ISO/IEC FDIS 23009-1 4th edition)”,ISO/IEC JTC 1/SC 29/WG 11N18609(2019年8月)通过引用整体并入本文中。
发明内容
在实施例中,一种由至少一个处理器执行的方法包括:获得包括多个事件消息实例框的事件消息轨迹,事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容;获得包括在事件消息轨迹中的第一事件消息实例框;获得包括在事件消息轨迹中的第二事件消息实例框,其中,第二事件消息实例框包括第一信息和第二信息,第一信息标识第一事件消息实例框,以及第二信息指定第一事件消息实例框和第二事件消息实例框之间的关系;基于第一信息和第二信息,修改第一事件消息实例框;以及向DASH客户端提供事件消息轨迹,或者基于事件消息轨迹来显示媒体内容。
在实施例中,一种设备包括:至少一个存储器,存储程序代码;以及至少一个处理器,被配置成读取程序代码并按照程序代码的指令进行操作,程序代码包括:第一获得代码,被配置成使得至少一个处理器获得包括多个事件消息实例框的事件消息轨迹,事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容;第二获得代码,被配置成使得至少一个处理器获得包括在事件消息轨迹中的第一事件消息实例框;第三获得代码,被配置成使得至少一个处理器获得包括在事件消息轨迹中的第二事件消息实例框,其中,第二事件消息实例框包括第一信息和第二信息,第一信息标识第一事件消息实例框,以及第二信息指定第一事件消息实例框和第二事件消息实例框之间的关系;修改代码,被配置成使得至少一个处理器基于第一信息和第二信息,修改第一事件消息实例框;以及提供代码,被配置成使得至少一个处理器向DASH客户端提供事件消息轨迹,或者基于事件消息轨迹来显示媒体内容。
在实施例中,一种非暂时性计算机可读介质,存储有指令,当指令由至少一个处理器执行时,指令使得至少一个处理器:获得包括多个事件消息实例框的事件消息轨迹,事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容;获得包括在事件消息轨迹中的第一事件消息实例框;获得包括在事件消息轨迹中的第二事件消息实例框,其中,第二事件消息实例框包括第一信息和第二信息,第一信息标识第一事件消息实例框,以及第二信息指定第一事件消息实例框和第二事件消息实例框之间的关系;基于第一信息和第二信息,修改第一事件消息实例框;以及向DASH客户端提供事件消息轨迹,或者基于事件消息轨迹来显示媒体内容。
附图说明
根据以下详细描述和附图,所公开的主题的进一步的特征、性质和各种优点将更加明显,在附图中:
图1是根据实施例的可实现本文描述的方法、装置和系统的环境的图。
图2是图1的一个或多个设备的示例组件的框图。
图3是根据实施例的DASH客户端的图。
图4是根据实施例的方法的图。
图5是根据实施例的计算机代码的图。
具体实施方式
图1是根据实施例的可实现本文描述的方法、装置和系统的环境100的图。如图1所示,环境100可包括用户设备110、平台120和网络130。环境100的设备可经由有线连接、无线连接或者有线连接和无线连接的组合进行互连。
用户设备110包括能够接收、生成、存储、处理和/或提供与平台120相关联的信息的一个或多个设备。例如,用户设备110可包括计算设备(例如,台式计算机、膝上型计算机、平板计算机、手持式计算机、智能扬声器、服务器等)、移动电话(例如,智能电话、无线电电话等)、可穿戴设备(例如,智能眼镜或智能手表)或类似设备。在一些实现方式中,用户设备110可以从平台120接收信息和/或向平台120发送信息。
平台120包括如本文其它位置所描述的一个或多个设备。在一些实现方式中,平台120可包括云服务器或一组云服务器。在一些实现方式中,平台120可设计成模块化平台,使得根据特定需要,软件组件可被调入或调出。因此,平台120可针对不同用途而容易地和/或快速地重新配置。
在一些实现方式中,如图所示,平台120可托管(hosted)在云计算环境122中。应注意,虽然本文描述的实现方式将平台120描述成托管在云计算环境122中,但是在一些实现方式中,平台120可以不基于云(即,可以在云计算环境之外实现)或者可部分地基于云。
云计算环境122包括托管平台120的环境。云计算环境122可提供计算、软件、数据访问、存储等服务,这些服务不需要终端用户(例如,用户设备110)了解托管平台120的系统和/或设备的物理位置和配置。如图所示,云计算环境122可包括一组计算资源124(统称为“计算资源124”,单独一个计算资源称为“计算资源124”)。
计算资源124包括一个或多个个人计算机、工作站计算机、服务器设备或其它类型的计算和/或通信设备。在一些实现方式中,计算资源124可托管平台120。云资源可包括在计算资源124中运行的计算实例、在计算资源124中提供的存储设备、由计算资源124提供的数据传输设备等。在一些实现方式中,计算资源124可经由有线连接、无线连接或者有线连接和无线连接的组合与其它计算资源124通信。
如图1进一步所示,计算资源124包括一组云资源,例如一个或多个应用程序(“APP”)124-1、一个或多个虚拟机(“VM”)124-2、虚拟化存储器(“VS”)124-3、一个或多个管理程序(“HYP”)124-4等。
应用程序124-1包括一个或多个软件应用程序,其可提供给用户设备110和/或平台120或者由用户设备110和/或平台120访问。应用程序124-1无需在用户设备110上安装和运行软件应用程序。例如,应用程序124-1可包括与平台120相关联的软件和/或能够经由云计算环境122提供的任何其它软件。在一些实现方式中,一个应用程序124-1可经由虚拟机124-2向一个或多个其它应用程序124-1发送信息/从一个或多个其它应用程序124-1接收信息。
虚拟机124-2包括类似于物理机那样执行程序的机器(例如,计算机)的软件实现。根据虚拟机124-2对任何真机的对应程度和用途,虚拟机124-2可以是系统虚拟机或过程虚拟机。系统虚拟机可提供支持完整操作系统(“OS”)的运行的完整系统平台。过程虚拟机可运行单个程序,且可支持单个过程。在一些实现方式中,虚拟机124-2可代表用户(例如,用户设备110)来运行,且可管理云计算环境122的基础设施,例如数据管理、同步或长时间数据传输。
虚拟化存储器124-3包括在计算资源124的存储系统或设备内使用虚拟化技术的一个或多个存储系统和/或一个或多个设备。在一些实现方式中,在存储系统的上下文中,虚拟化的类型可包括块虚拟化和文件虚拟化。块虚拟化可指的是从物理存储抽象(或分离)出逻辑存储,使得可以在不考虑物理存储或异构结构的情况下访问存储系统。上述分离可允许存储系统的管理员在管理员如何管理终端用户的存储方面具有灵活性。文件虚拟化可消除以文件级访问的数据和物理地存储文件的位置之间的依赖性。这可实现存储器使用、服务器整合和/或无中断文件迁移性能的优化。
管理程序124-4可提供硬件虚拟化技术,硬件虚拟化技术允许多个操作系统(例如“客户操作系统”)在诸如计算资源124的主计算机上同时运行。管理程序124-4可以给客户操作系统呈现虚拟操作平台,且可管理客户操作系统的运行。各种操作系统的多个实例可共享虚拟化硬件资源。
网络130包括一个或多个有线网络和/或无线网络。例如,网络130可包括蜂窝网络(例如,第五代(5G)网络、长期演进(LTE)网络、第三代(3G)网络、码分多址(CDMA)网络等)、公共陆地移动网络(PLMN)、局域网(LAN)、广域网(WAN)、城域网(MAN)、电话网(例如,公共交换电话网(PSTN))、专用网络、自组织网络、内部网、因特网、基于光纤的网络等,和/或这些网络或其它类型网络的组合。
图1所示的设备和网络的数量和布置作为示例提供。在实际中,与图1所示的设备和/或网络相比,可存在额外的设备和/或网络、更少的设备和/或网络、不同的设备和/或网络、或不同地布置的设备和/或网络。此外,图1所示的两个或更多个设备可以在单个设备内实现,或者图1所示的单个设备可实现为多个分布式设备。另外或者替代地,环境100的一组设备(例如,一个或多个设备)可执行被描述成由环境100的另一组设备执行的一个或多个功能。
图2是图1的一个或多个设备的示例组件的框图。设备200可对应于用户设备110和/或平台120。如图2所示,设备200可包括总线210、处理器220、存储器230、存储组件240、输入组件250、输出组件260和通信接口270。
总线210包括允许设备200的组件之间进行通信的组件。处理器220以硬件、固件或硬件和软件的组合来实现。处理器220是中央处理单元(CPU)、图形处理单元(GPU)、加速处理单元(APU)、微处理器、微控制器、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、专用集成电路(ASIC)或另一类型的处理组件。在一些实现方式中,处理器220包括能够被编程以执行功能的一个或多个处理器。存储器230包括随机存取存储器(RAM)、只读存储器(ROM),和/或存储供处理器220使用的信息和/或指令的另一类型的动态或静态存储设备(例如,闪存、磁性存储器和/或光学存储器)。
存储组件240存储与设备200的操作和使用相关的信息和/或软件。例如,存储组件240可包括硬盘(例如,磁盘、光盘、磁-光盘和/或固态盘)、光盘(CD)、数字通用光盘(DVD)、软盘、盒式磁盘、磁带和/或另一类型的非暂时性计算机可读介质、以及相应的驱动器。
输入组件250包括允许设备200例如经由用户输入接收信息的组件(例如,触摸屏显示器、键盘、小键盘、鼠标、按钮、开关和/或麦克风)。另外或者替代地,输入组件250可包括用于感测信息的传感器(例如,全球定位系统(GPS)组件、加速计、陀螺仪和/或致动器)。输出组件260包括提供来自设备200的输出信息的组件(例如,显示器、扬声器和/或一个或多个发光二极管(LED))。
通信接口270包括类似于收发器的组件(例如,收发器和/或单独的接收器和发射器),其使得设备200能够例如经由有线连接、无线连接或者有线连接和无线连接的组合与其它设备通信。通信接口270可允许设备200接收来自另一设备的信息和/或向另一设备提供信息。例如,通信接口270可包括以太网接口、光学接口、同轴接口、红外接口、射频(RF)接口、通用串行总线(USB)接口、Wi-Fi接口、蜂窝网络接口等。
设备200可执行本文描述的一个或多个过程。设备200可响应于处理器220执行由非暂时性计算机可读介质(诸如存储器230和/或存储组件240)存储的软件指令来执行这些过程。计算机可读介质在本文中定义为非暂时性存储器设备。存储器设备包括单个物理存储设备内的存储器空间或分布在多个物理存储设备上的存储器空间。
软件指令可经由通信接口270从另一计算机可读介质或从另一设备读入存储器230和/或存储组件240中。当被执行时,存储在存储器230和/或存储组件240中的软件指令可使得处理器220执行本文描述的一个或多个过程。另外或者替代地,可使用硬连线电路来代替软件指令或者与软件指令组合,以执行本文描述的一个或多个过程。因此,本文描述的实现方式不限于硬件电路和软件的任何特定组合。
图2所示的组件的数量和布置作为示例提供。在实际中,与图2所示的组件相比,设备200可包括额外的组件、更少的组件、不同的组件、或不同地布置的组件。另外或者替代地,设备200的一组组件(例如,一个或多个组件)可执行被描述成由设备200的另一组组件执行的一个或多个功能。
图3示出了根据本公开的实施例的示例性DASH客户端300,DASH客户端300被配置成处理媒体呈现描述(MPD)事件301、带内事件302和稀疏定时元数据轨迹事件。DASH客户端300还可用于处理通用媒体应用格式(CMAF)事件。根据一个实施例,DASH客户端300可由图1的用户设备100实现。
可提供事件,以用信号向DASH客户端300或应用程序表示非周期性信息。事件可以定时(例如,每个事件从特定的媒体呈现时间开始,且可具有一定持续时间)。事件可包括特定于DASH的信令或特定于应用程序的事件。DASH事件可通过方案标识符来识别。对于特定于应用程序的事件,方案标识符可识别应用程序,使得DASH客户端300可以将事件转发给合适的应用程序。
如图3所示,DASH客户端300可包括应用程序310、DASH播放器的控制、选择和启发式逻辑315、清单解析器(manifest parser)320、DASH访问API 325、带内事件和“moof”(电影片段框)解析器330、定时元数据轨迹解析器335、事件和定时元数据缓冲器340、同步器和调度器345、文件格式解析器350、媒体缓冲器355、媒体解码器360以及HTTP堆栈370。
在图3中,虚线表示控制和/或同步;常规实线表示事件和/或定时元数据流;粗体实线表示媒体数据流。例如,控制和/或同步可包括订阅功能306和事件/元数据API 307。例如,事件和/或定时元数据流可包括MPD事件301、带内事件302、定时元数据303以及DASH事件305。例如,媒体数据流可包括媒体片段304等。
DASH客户端300可接收清单(例如MPD),且可以对清单进行处理。清单可描述按CMAF交换集和选择集分组的独立打包的CMAF轨迹的组合和同步,以形成同步多媒体呈现。清单可以向DASH客户端300提供信息,以选择、初始化、开始对齐和同步要播放的CMAF轨迹,并将CMAF媒体对象(例如,CMAF标头、CMAF块和CMAF片段)识别为访问且可能下载信息的资源。CMAF轨迹和CMAF片段可包含足够的信息,以能够实现解密、解码和呈现调度。除了资源识别和呈现描述之外,清单还可提供与传输协议、网络管理、授权、许可获取等相关的信息。清单还可以用信号表示轨迹符合CMAF媒体配置文件。
作为参考,CMAF片段可以是编码和解码的媒体对象。CMAF片段可包括一对或多对电影片段框(“mof”)和媒体数据框(“mdat”)。每一对“moof”和“mdat”可称为CMAF块,每个CMAF块可包含属于CMAF片段的媒体样本的连续子集。
CMAF轨迹可以是其呈现顺序符合CMAF媒体配置文件的一个或多个CMAF片段和相关联的CMAF标头的连续序列。CMAF标头可包含MovieBox,MovieBox足以处理和呈现CMAF轨迹中的所有CMAF片段。CMAF轨迹可由编码器和ISOBMFF文件打包器生成,但是可形成为可以以CMAF可寻址媒体对象的形式访问,CMAF可寻址媒体对象可作为由外部媒体应用程序规范定义的资源来参考。
DASH客户端300可基于清单中描述的地址来请求媒体片段。清单还可描述元数据轨迹。DASH客户端300还可访问元数据轨迹片段,对元数据轨迹片段进行解析,以及将元数据轨迹片段发送到应用程序。
此外,在媒体片段的地址中,DASH清单可以向索引片段提供地址。每个索引片段可提供与一个片段的持续时间和大小相关的信息。表示索引可以向给定表示的所有片段提供索引信息。
根据实施例,清单解析器320可以对来自清单的MPD事件301进行解析,以及将MPD事件301附加到事件和定时元数据缓冲器340。基于MPD,DASH客户端300可管理从HTTP堆栈370提取和解析片段。片段的解析可由带内事件和“moof”解析器330执行。带内事件和“moof”解析器可以对来自片段的媒体片段304进行解析,然后将媒体片段304附加到媒体缓冲器355。由带内事件和“moof“解析器330进行的解析还可包括对来自片段的带内事件302和定时元数据303(例如,定时元数据轨迹)进行解析。此外,定时元数据轨迹解析器335可以对高级框(例如,定时元数据303的事件消息框和定时元数据308的事件消息实例框)进行解析,以及将高级框附加到事件和定时元数据缓冲器340。
事件和定时元数据缓冲器340可以将事件和定时元数据样本传递给同步器和调度器345,同步器和调度器345可称为事件和定时元数据同步器和调度器功能。
同步器和调度器345可以向DASH播放器的控制、选择和启发式逻辑315调度DASH客户端300特定事件。如果应用程序310订阅特定事件和/或定时元数据流,则同步器和调度器345可通过事件/元数据API 307向应用程序310调度对应的事件实例和/或定时元数据样本。
实施例可提供一种用于在一个事件消息轨迹中用信号表示事件实例之间的关系的方法。因此,实施例可扩展事件消息实例框来用信号表示事件实例之间更为扩展的(moreextended)关系。
在实施例中,可扩展事件消息实例框,以用信号表示事件实例之间更广泛的关系。例如,在实施例中,事件消息实例框可用于用信号表示:
1.一个事件实例是之前的事件的更新。
2.定时更改:更改之前的事件的开始和/或持续时间。
3.事件已撤消,无需进一步处理。
4.为了进一步扩展而保留位。
在实施例中,事件消息实例框可如下扩展:
Figure BDA0003929508360000101
在如上所示的扩展后的事件消息实例框中:
·update_id:可指示新实例是与该字段具有相同值的之前的实例的更新。
·update_mode:每个值可定义与之前的实例的特定关系。例如:
0:可指示替换,使得新事件替换之前的事件。
1:定时的更改,即,事件的开始和/或已更新。
2:撤销:可指示该事件实例撤消了之前的实例,即,无需处理之前的实例。
因此,实施例可提供一种用信号表示事件消息轨迹中的事件实例之间更为扩展的关系(例如,超越等同的关系)的方法,其中,一个或多个事件实例可使用唯一的新标识符链接在一起以进行更新,另一个字段可显示包括替换、定时更改和撤消的关系,其中,当检测到事件消息实例是对之前的实例的更新时,客户端仅可处理更新后的实例或改正先前处理的实例。
图4是用于管理包括DASH客户端300的媒体流式传输系统的示例过程400的流程图。在一些实现方式中,图4的一个或多个过程框可由用户设备441执行。在一些实现方式中,图4的一个或多个过程框可由与用户设备110分离或包括用户设备110的另一设备或一组设备(例如,平台120)执行。
如图4所示,过程400可包括:获得包括多个事件消息实例框的事件消息轨迹,事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容(框410)。
进一步如图4所示,过程400可包括:获得包括在事件消息轨迹中的第一事件消息实例框(框420)。
进一步如图4所示,过程400可包括:获得包括在事件消息轨迹中的第二事件消息实例框,其中,第二事件消息实例框包括第一信息和第二信息,第一信息标识第一事件消息实例框,以及第二信息指定第一事件消息实例框和第二事件消息实例框之间的关系(框430)。
进一步如图4所示,过程400可包括:基于第一信息和第二信息,修改第一事件消息实例框(框440)。
进一步如图4所示,过程400可包括:向DASH客户端提供事件消息轨迹,或者基于事件消息轨迹来显示媒体内容(框440)。
在实施例中,第一事件消息实例框可包括标识符,第一信息可包括更新标识符,过程400可进一步包括:基于标识符的值等于更新标识符的值,确定第一事件消息实例框与第二事件消息实例框相关。
在实施例中,第二信息可包括指示第一事件消息实例框和第二事件消息实例框之间的关系的类型的值。
在实施例中,基于该值是第一值,第二信息指示关系具有第一关系类型,基于该值是第二值,第二信息指示关系具有第二关系类型,以及基于该值是第三值,第二信息指示关系具有第三关系类型。
在实施例中,第一关系类型可以是替换关系,以及基于该值是第一值,修改第一事件消息实例框可包括:使用第二事件消息实例框来替换事件消息轨迹中的第一事件消息实例框。
在实施例中,第二关系类型可以是定时更改关系,以及基于该值是第二值,修改第一事件消息实例框可包括:更改对应于第一事件消息实例框的开始时间或者对应于第一事件消息实例框的结束时间中的至少一者。
在实施例中,第三关系类型可以是撤销关系,以及基于该值是第三值,修改第一事件消息实例框可包括:从事件消息轨迹中撤消第一事件消息实例框。
虽然图4示出了过程400的示例性框,但是在一些实现方式中,过程400可包括额外的框、更少的框、不同的框、或与图4所描绘的框不同布置的框。另外或者替代地,过程400的两个或更多个框可并行地执行。
参考图5,描述根据实施例的计算机代码500。计算机代码500可由包括DASH客户端300的媒体流式传输系统执行。例如,媒体流式传输系统可由针对于图1描述的环境100实现。媒体流式传输系统可包括被配置成存储计算机代码500的存储器,以及被配置成访问计算机代码500并按照计算机代码500的指令进行操作的至少一个处理器。计算机代码500可分布在媒体流式传输系统的不同组件(例如,服务器、客户端等)的存储器中,且可配置成使得特定组件的至少一个处理器执行任意数量的功能,包括本公开中描述的功能。例如,计算机代码500可包括第一获得代码510、第二获得代码520、第三获得代码530、修改代码540以及提供代码550中任意数量的代码。
在实施例中,第一获得代码510、第二获得代码520、第三获得代码530、修改代码540以及提供代码550可分别配置成使得包括DASH客户端300的媒体流式传输系统执行上文参考图4描述的过程的各方面。
本公开的实施例可单独使用,或者可以以任何顺序组合。此外,每个方法、服务器以及客户端可通过处理电路(例如,一个或多个处理器或者一个或多个集成电路)来实现。在一个示例中,一个或多个处理器执行存储在非暂时性计算机可读介质中的程序。
前述公开内容提供了说明和描述,但是不旨在穷举或将实现方式限制为所公开的精确形式。根据上述公开内容可进行修改和变化,或者可以从实现方式的实践中获得修改和变化。
将显而易见的是,本文描述的系统和/或方法可以以不同形式的硬件、固件、或者硬件和软件的组合来实现。用于实现这些系统和/或方法的实际专用控制硬件或软件代码并不限制实现方式。因此,应理解,软件和硬件可设计成实现基于本文的描述的系统和/或方法。
虽然在权利要求中记载和/或在说明书中公开了特征的组合,但是这些组合并不旨在限制可能的实现方式的公开内容。实际上,这些特征中的许多特征可以以未在权利要求中具体记载和/或在说明书中公开的方式组合。虽然下面列出的每个从属权利要求可仅直接从属于一个权利要求,但是可能的实现方式的公开内容包括每个从属权利要求与权利要求集中的每一个其它权利要求的组合。
本文使用的元素、动作或指令不应理解为关键的或必要的,除非如此明确描述。此外,如本文所使用的,冠词“一”和“一个”旨在包括一个或多个项目,且可与“一个或多个”互换地使用。此外,如本文所使用的,术语“集”旨在包括一个或多个项目(例如,相关项目、不相关项目、相关项目和不相关项目的组合等),且可与“一个或多个”互换地使用。在意图仅是一个项目的情况下,使用术语“一”或类似的语言。此外,如本文所使用的,术语“具有”、“含有”、“有”或类似术语旨在是开放式术语。此外,短语“基于”的意思旨在是“至少部分地基于”,除非另有明确说明。

Claims (20)

1.一种由至少一个处理器执行的方法,所述方法包括:
获得包括多个事件消息实例框的事件消息轨迹,所述事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容,所述多个事件消息实例框对应于多个事件,所述多个事件包括以下中的一项或多项:媒体呈现描述(MPD)事件、带内事件、定时元数据、通用媒体应用格式(CMAF)事件和DASH事件;
获得包括在所述事件消息轨迹中的第一事件消息实例框;
获得包括在所述事件消息轨迹中的第二事件消息实例框,其中,所述第二事件消息实例框包括第一信息和第二信息,所述第一信息标识所述第一事件消息实例框,以及所述第二信息指定所述第一事件消息实例框和所述第二事件消息实例框之间的关系;
基于所述第一信息和所述第二信息,修改所述第一事件消息实例框;以及
向所述DASH客户端提供所述事件消息轨迹,或者基于所述事件消息轨迹来显示媒体内容。
2.根据权利要求1所述的方法,所述第一事件消息实例框包括标识符,
其中,所述第一信息包括更新标识符,并且
其中,所述方法进一步包括:基于所述标识符的值等于所述更新标识符的值,确定所述第一事件消息实例框与所述第二事件消息实例框相关。
3.根据权利要求1所述的方法,其中,所述第二信息包括指示所述第一事件消息实例框和所述第二事件消息实例框之间的所述关系的类型的值。
4.根据权利要求3所述的方法,其中,基于所述值是第一值,所述第二信息指示所述关系具有第一关系类型,
其中,基于所述值是第二值,所述第二信息指示所述关系具有第二关系类型,并且
其中,基于所述值是第三值,所述第二信息指示所述关系具有第三关系类型。
5.根据权利要求4所述的方法,其中,所述第一关系类型是替换关系,并且
其中,基于所述值是所述第一值,所述修改所述第一事件消息实例框包括:使用所述第二事件消息实例框来替换所述事件消息轨迹中的所述第一事件消息实例框。
6.根据权利要求4所述的方法,其中,所述第二关系类型是定时更改关系,并且
其中,基于所述值是所述第二值,所述修改所述第一事件消息实例框包括:更改对应于所述第一事件消息实例框的开始时间或者对应于所述第一事件消息实例框的结束时间中的至少一者。
7.根据权利要求4所述的方法,其中,所述第三关系类型是撤销关系,并且
其中,基于所述值是所述第三值,所述修改所述第一事件消息实例框包括:从所述事件消息轨迹中撤消所述第一事件消息实例框。
8.一种设备,包括:
至少一个存储器,存储程序代码;以及
至少一个处理器,被配置成读取所述程序代码并按照所述程序代码的指令进行操作,所述程序代码包括:
第一获得代码,被配置成使得所述至少一个处理器获得包括多个事件消息实例框的事件消息轨迹,所述事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容,所述多个事件消息实例框对应于多个事件,所述多个事件包括以下中的一项或多项:媒体呈现描述(MPD)事件、带内事件、定时元数据、通用媒体应用格式(CMAF)事件和DASH事件;
第二获得代码,被配置成使得所述至少一个处理器获得包括在所述事件消息轨迹中的第一事件消息实例框;
第三获得代码,被配置成使得所述至少一个处理器获得包括在所述事件消息轨迹中的第二事件消息实例框,其中,所述第二事件消息实例框包括第一信息和第二信息,所述第一信息标识所述第一事件消息实例框,以及所述第二信息指定所述第一事件消息实例框和所述第二事件消息实例框之间的关系;
修改代码,被配置成使得所述至少一个处理器基于所述第一信息和所述第二信息,修改所述第一事件消息实例框;以及
提供代码,被配置成使得所述至少一个处理器向所述DASH客户端提供所述事件消息轨迹,或者基于所述事件消息轨迹来显示媒体内容。
9.根据权利要求8所述的设备,所述第一事件消息实例框包括标识符,
其中,所述第一信息包括更新标识符,并且
其中,所述修改代码被进一步配置成使得所述至少一个处理器基于所述标识符的值等于所述更新标识符的值,确定所述第一事件消息实例框与所述第二事件消息实例框相关。
10.根据权利要求8所述的设备,其中,所述第二信息包括指示所述第一事件消息实例框和所述第二事件消息实例框之间的所述关系的类型的值。
11.根据权利要求8所述的设备,其中,基于所述值是第一值,所述第二信息指示所述关系具有第一关系类型,
其中,基于所述值是第二值,所述第二信息指示所述关系具有第二关系类型,并且
其中,基于所述值是第三值,所述第二信息指示所述关系具有第三关系类型。
12.根据权利要求11所述的设备,其中,所述第一关系类型是替换关系,并且
其中,基于所述值是所述第一值,所述修改代码被进一步配置成使得所述至少一个处理器使用所述第二事件消息实例框来替换所述事件消息轨迹中的所述第一事件消息实例框。
13.根据权利要求11所述的设备,其中,所述第二关系类型是定时更改关系,并且
其中,基于所述值是所述第二值,所述修改代码被进一步配置成使得所述至少一个处理器更改对应于所述第一事件消息实例框的开始时间或者对应于所述第一事件消息实例框的结束时间中的至少一者。
14.根据权利要求11所述的设备,其中,所述第三关系类型是撤销关系,并且
其中,基于所述值是所述第三值,所述修改代码被进一步配置成使得所述至少一个处理器从所述事件消息轨迹中撤消所述第一事件消息实例框。
15.一种非暂时性计算机可读介质,存储有指令,当所述指令由至少一个处理器执行时,所述指令使得所述至少一个处理器:
获得包括多个事件消息实例框的事件消息轨迹,所述事件消息轨迹被配置成由超文本传输协议上的动态自适应流式传输(DASH)客户端进行处理以显示媒体内容,所述多个事件消息实例框对应于多个事件,所述多个事件包括以下中的一项或多项:媒体呈现描述(MPD)事件、带内事件、定时元数据、通用媒体应用格式(CMAF)事件和DASH事件;
获得包括在所述事件消息轨迹中的第一事件消息实例框;
获得包括在所述事件消息轨迹中的第二事件消息实例框,其中,所述第二事件消息实例框包括第一信息和第二信息,所述第一信息标识所述第一事件消息实例框,以及所述第二信息指定所述第一事件消息实例框和所述第二事件消息实例框之间的关系;
基于所述第一信息和所述第二信息,修改所述第一事件消息实例框;以及
向所述DASH客户端提供所述事件消息轨迹,或者基于所述事件消息轨迹来显示媒体内容。
16.根据权利要求15所述的非暂时性计算机可读介质,其中,所述第二信息包括指示所述第一事件消息实例框和所述第二事件消息实例框之间的所述关系的类型的值。
17.根据权利要求16所述的非暂时性计算机可读介质,其中,基于所述值是第一值,所述第二信息指示所述关系具有第一关系类型,
其中,基于所述值是第二值,所述第二信息指示所述关系具有第二关系类型,并且
其中,基于所述值是第三值,所述第二信息指示所述关系具有第三关系类型。
18.根据权利要求17所述的非暂时性计算机可读介质,其中,所述第一关系类型是替换关系,并且
其中,基于所述值是所述第一值,所述修改所述第一事件消息实例框包括:使用所述第二事件消息实例框来替换所述事件消息轨迹中的所述第一事件消息实例框。
19.根据权利要求17所述的非暂时性计算机可读介质,其中,所述第二关系类型是定时更改关系,并且
其中,基于所述值是所述第二值,所述修改所述第一事件消息实例框包括:更改对应于所述第一事件消息实例框的开始时间或者对应于所述第一事件消息实例框的结束时间中的至少一者。
20.根据权利要求17所述的非暂时性计算机可读介质,其中,所述第三关系类型是撤销关系,并且
其中,基于所述值是所述第三值,所述修改所述第一事件消息实例框包括:从所述事件消息轨迹中撤消所述第一事件消息实例框。
CN202280004015.8A 2021-04-20 2022-03-28 事件消息轨迹中的事件之间的扩展关系信令 Pending CN115552387A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202163177271P 2021-04-20 2021-04-20
US63/177,271 2021-04-20
US17/704,344 US11509701B2 (en) 2021-04-20 2022-03-25 Extended relationship signaling between events in event message tracks
US17/704,344 2022-03-25
PCT/US2022/022113 WO2022225652A1 (en) 2021-04-20 2022-03-28 Extended relationship signaling between events in event message tracks

Publications (1)

Publication Number Publication Date
CN115552387A true CN115552387A (zh) 2022-12-30

Family

ID=83602757

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280004015.8A Pending CN115552387A (zh) 2021-04-20 2022-03-28 事件消息轨迹中的事件之间的扩展关系信令

Country Status (6)

Country Link
US (1) US11509701B2 (zh)
EP (1) EP4118535A4 (zh)
JP (1) JP7513748B2 (zh)
KR (1) KR20220160049A (zh)
CN (1) CN115552387A (zh)
WO (1) WO2022225652A1 (zh)

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014031885A1 (en) * 2012-08-22 2014-02-27 Huawei Technologies Co., Ltd. Carriage of iso-bmff event boxes in an mpeg-2 transport stream
TW201618517A (zh) * 2014-07-01 2016-05-16 Vid衡器股份有限公司 藉由媒體播放器裝置在媒體串流中伺服器端通信期控制
JPWO2016017451A1 (ja) 2014-08-01 2017-05-18 ソニー株式会社 受信装置、受信方法、送信装置、及び、送信方法
GB2533624B (en) * 2014-12-23 2017-08-09 Canon Kk Methods, devices, and computer programs for improving coding of media presentation description data
EP3563574A1 (en) * 2017-01-02 2019-11-06 Koninklijke KPN N.V. Selectively updating a dynamic manifest file
US10771842B2 (en) 2018-04-09 2020-09-08 Hulu, LLC Supplemental content insertion using differential media presentation descriptions for video streaming
US11310303B2 (en) 2019-10-01 2022-04-19 Tencent America LLC Methods and apparatuses for dynamic adaptive streaming over HTTP
US10979784B1 (en) * 2019-12-02 2021-04-13 CodeShop, B.V. Track format for carriage of event messages
US11546406B2 (en) * 2020-04-13 2023-01-03 Tencent America LLC Media systems and methods including mixed event message tracks
US11533346B2 (en) * 2021-01-05 2022-12-20 Tencent America LLC Methods and apparatuses for dynamic adaptive streaming over HTTP

Also Published As

Publication number Publication date
EP4118535A4 (en) 2023-09-27
KR20220160049A (ko) 2022-12-05
EP4118535A1 (en) 2023-01-18
WO2022225652A1 (en) 2022-10-27
JP7513748B2 (ja) 2024-07-09
JP2023525655A (ja) 2023-06-19
US11509701B2 (en) 2022-11-22
US20220337641A1 (en) 2022-10-20

Similar Documents

Publication Publication Date Title
US20240004831A1 (en) Method and apparatus for media scene description
WO2022150080A1 (en) Method and apparatus for media scene description
US11770440B2 (en) Events message tracks types and mixed event message tracks
JP7513748B2 (ja) イベントメッセージトラックにおけるイベント間の拡張された関係シグナリング
EP4128726B1 (en) Signaling schemes in events message tracks
CN111831834A (zh) 基于网络的媒体处理(nbmp)中处理媒体内容的方法和装置
US20240236165A1 (en) Method and apparatus for signaling preselection with extensible multiplexing instructions
CN113853799B (zh) 用于基于树的点云压缩媒体流的方法和装置
WO2024151819A1 (en) Method and apparatus for signaling preselection with extensible multiplexing instructions
KR20230104258A (ko) 클라우드 플랫폼에서 넷제로 작업흐름 수정을 시그널링하는 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40079295

Country of ref document: HK