CN114080816A - 用于内容传递的时延管理 - Google Patents

用于内容传递的时延管理 Download PDF

Info

Publication number
CN114080816A
CN114080816A CN202080049385.4A CN202080049385A CN114080816A CN 114080816 A CN114080816 A CN 114080816A CN 202080049385 A CN202080049385 A CN 202080049385A CN 114080816 A CN114080816 A CN 114080816A
Authority
CN
China
Prior art keywords
media program
playback
media
latency
program
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080049385.4A
Other languages
English (en)
Inventor
M·沃尔特斯
K·克劳斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dolby International AB
Original Assignee
Dolby International AB
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dolby International AB filed Critical Dolby International AB
Publication of CN114080816A publication Critical patent/CN114080816A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440281—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the temporal resolution, e.g. by frame skipping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/2625—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for delaying content or additional data distribution, e.g. because of an extended sport event
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

本文件公开了一种用于经由传递信道来回放媒体内容的方法。传递信道通常可以指将音频或视频节目传递(发送)给用户(接收器)所通过的信道。媒体内容通常可以包括连续媒体节目。特别地，对于媒体内容内的特定媒体节目，还提供了该特定媒体节目的相应内容类型。该方法可以包括接收媒体节目对回放时延的敏感性的指示。该方法可以进一步包括接收媒体节目的至少一部分。该方法还可以进一步包括基于媒体节目对回放时延的敏感性的指示来调整媒体节目的回放。

Description

用于内容传递的时延管理
相关申请的交叉引用
本申请要求以下优先申请的优先权：于2019年7月17日提交的美国临时申请62/875,063(参考号：D18140USP1)和于2019年7月17日提交的欧洲申请19186801.7(参考号：D18140EP)，所述申请通过引用并入本文。
技术领域
本文件涉及用于内容传递的时延管理。特别地，本文件涉及传统的“24/7”广播信道(或具有连续节目的任何信道)及其通过IP网络的传递。
背景技术
一般而言，传统的“24/7”广播信道通常由连续的节目(如新闻、电影、广告、剧集、(直播)游戏表演、体育直播等)构成。通常，在这样的广播信道中，通过特定的(节目)调度器自动在正确的时间发送正确的节目。
通过IP网络传递(多个)A/V内容的众多挑战之一是时延。通常，消费者很看重直播广播(例如，体育、直播游戏表演等)的低时延传递。然而，通过IP网络实现低时延通常并不总是可能的，并且通常需要运营商付出(比特率)成本。另外，众所周知地，与高时延流式传输相比，低时延流式传输更有可能经历(例如，由网络连接的抖动导致的)缓冲区欠载(underrun)，因为低时延流式传输通常意味着在回放设备中使用较小的缓冲区。
现如今，时延通常与流相关联，并且被认为在给定流的(至少在一段)时间内是恒定的。然而，广播信道上只有几个节目是时延敏感的(如体育直播)，而其他节目不是(如电影)。
因此，需要进行低时延流式传输的主要是需要低时延的节目(如体育直播)，并且当节目对时延不敏感(如电影)时可以切换到较高时延。
发明内容
鉴于上述问题(和使用情况)中的一些或全部，本公开提出了一种用于经由传递信道来回放媒体内容的方法和设备以及一种用于经由传递信道来传递媒体内容的系统，该方法、设备和系统具有相应独立权利要求的特征。
作为广泛的方面，本公开提供了一种用于经由传递信道来回放媒体内容的方法。传递信道通常可以指将音频或视频节目传递(发送)给用户(接收器)所通过的信道，例如以广播、多播或单播方式。例如，这种传递信道可以是(传统的)“24/7”广播信道。媒体内容通常可以包括连续媒体节目，例如新闻、电影、广告、剧集、(直播)游戏表演、体育直播等。特别地，对于媒体内容内的特定媒体节目，还将该特定媒体节目的相应内容类型与媒体内容一起提供。如技术人员理解和认识到的，该内容类型可以以任何合适的方式来表示和传递。例如，在媒体节目的比特流的报头中或在伴随节目的元数据中，可以使用特定或附加的字段来表示或指示内容类型。作为另一个示例，可以使用查找表来指示内容类型。类似地，内容类型可以与媒体节目的传递一起实时地被传递(发送)，或者可以在媒体节目的传递之前被共享。媒体内容可以被携带在媒体流中，并且经由通信网络(例如，基于因特网协议的网络)从内容传递服务器传递到用户设备。
特别地，该方法可以包括(例如，在用户设备、接收器或回放设备处)接收媒体节目对回放时延(也称为媒体节目的目标时延)的敏感性的指示(的步骤)。更特别地，媒体节目对回放时延的敏感性与媒体节目的内容类型相关联。换言之，媒体节目对回放时延的敏感性是基于媒体节目的内容类型来设置的。然而，可能还有其他因素会影响期望的回放时延。例如，虽然体育直播通常可能倾向于低时延，但服务运营商可能想要将低时延非常重要的体育节目(重大赛事的决赛)和低时延相对不那么重要的较不重要比赛的比赛区分开。因此，基于媒体节目对回放时延的敏感性的指示来调整媒体节目的回放不应该排除为确定目标回放时延还考虑的其他因素。
该方法可以进一步包括接收媒体节目的至少一部分。如技术人员理解和认识到的，媒体节目的一部分通常是指媒体节目的一定数量的帧(图片、数据块等)，取决于例如媒体节目的表示和/或传递方法/机制。该方法还可以进一步包括基于媒体节目对回放时延的敏感性的指示来调整媒体节目的回放。
在一些示例中，接收媒体节目对回放时延的敏感性的另一个指示，并且基于接收到的指示逐步调整同一媒体节目的回放。这可以重复多次，以便顺序地向回放设备提供多个目标时延。例如，可以使用采用多个敏感性指示的方式在过渡到后续的或另一个节目之前逐步地管理回放特性，因为否则过渡可能由于节目之间目标时延的跃变而引起丢失或对用户体验具有其他不利影响。因此，除了基于单个指示进行目标时延的单次跃变之外，还建议在特定时间段内对媒体节目的回放进行调整。这允许可以逐步(在多个步骤中)改变服务器侧的目标时延，从而通过接收到的回放时延指示的序列来远程控制接收器(解码器)侧的调整速度。
在一些示例中，调整媒体节目的回放可以包括例如在接收器或回放设备处调整媒体节目的缓冲。特别地，调整媒体节目的回放的步骤可以包括调整在回放媒体节目数据之前(在回放设备处)缓冲的媒体节目数据的量。如技术人员认识到的，(在回放设备处的)缓冲机制可以以应用程序级别、以系统级别或以任何其他合适的方式实施。例如，可以应用媒体节目对回放时延的敏感性的改变的多个增量指示来在过渡到后续的或另一个节目之前逐步地管理接收器缓冲程度，因为否则过渡可能由于节目之间目标时延的跃变而引起丢失或对用户体验具有其他不利影响。
在一些示例中，媒体节目对回放时延的敏感性的指示可以包括在回放媒体节目数据之前能够接受的时延的定性指示或定量指示。通过示例的方式，时延的定性指示可以涉及对用户而言被回放的媒体节目对时延的敏感性，例如，更长的时延是否会被(多个)节目观看者注意到，和/或短的时延是否会导致(多个)可注意到的假象(例如，抖动、帧丢弃等)。在一些情况下，这种定性指示可以简单地表示为“高”、“中”或“低”。另一方面，时延的定量指示例如可以是能够接受的最大时延或目标时延(例如，5秒)。
在一些示例中，调整媒体节目的回放可以包括调整媒体节目的回放速度。在一些情况下，媒体节目的回放速度可以被表示为例如每秒帧数(fps)。例如，如果节目的正常回放速度是20fps，则将回放速度加倍意味着该节目以40fps回放。
在一些示例中，媒体节目的回放可以包括修改接收到的媒体节目的内容。特别地，如果媒体节目的对回放时延的敏感性的指示相对于传递信道的先前的或后续的媒体节目发生改变，则可以修改接收到的媒体节目的内容。一般而言，在一些情况下，这意味着回放设备(例如，回放设备的应用程序)可以跳过媒体节目的一些或完整片段(帧)，例如以便赶上进度。在一些其他情况下，回放设备(例如，回放设备的应用程序)可能需要插入例如一些“无声”或重复的片段或帧，以便减慢回放。这样的改变通常是能够由观看者注意到的，并且因此在某些情况/场景中可能被认为是不太令人期望的。
在一些示例中，可以在当前媒体节目中插入附加内容(例如，按帧或片段)。特别地，如果当前媒体节目相对于先前的媒体节目允许更大的时延，或者后续的媒体节目相对于当前媒体节目允许更大的时延，则可以执行(多个)附加内容的插入。在一些情况下，这可能意味着回放设备处的缓冲区大小必须被增大，并且缓冲区可以被适当地填满。
在一些其他示例中，可以在当前媒体节目中跳过内容(例如，按帧或片段)。特别地，如果当前媒体节目相对于先前的媒体节目要求更小的时延，或者后续的媒体节目相对于当前媒体节目要求更小的时延，则可以执行跳过(多个)内容。在一些情况下，这可能意味着回放设备处的缓冲区大小必须被减小，并且缓冲区可以被适当地清空。
在一些示例中，可以认为媒体节目包括多个连续片段。分段可以取决于例如所应用的用于将媒体节目发送到接收器的传输模式或传输格式。也就是说，在这种情况下，媒体播放器的内部处理可以按片段来组织。对应地，调整媒体节目的回放然后可以包括调整在回放媒体节目数据之前缓冲的片段的数量。可选地，如上所述，如果需要的话，可以跳过或重复媒体节目的至少一个片段。
在一些示例中，调整媒体节目的回放可以包括切换媒体节目的(例如，在回放设备处的媒体播放器的)回放模式。如技术人员理解和认识到的，回放模式可以例如涉及媒体播放器输出媒体节目的不同方式。例如，在一种回放模式下，媒体播放器等待处理或输出媒体节目直到接收到整个(传输格式)片段，而在另一种回放模式下，媒体播放器一接收到足以解码的媒体数据就进行播出。因此，当接收到低目标时延的指示时，回放模式可以被切换到对应于低时延要求的模式，例如，尽可能快地输出媒体数据而不等待接收到完整片段。
在一些示例中，媒体节目对回放时延的敏感性的指示可以被携带在与媒体节目相关联的带外元数据中。例如，这样的元数据可以被携带在根据ISO IEC 23009-1的媒体节目描述(MPD)中或在任何其他合适的元数据中，如技术人员认识到的。可以以许多不同的方式将元数据提供给回放设备，例如作为在回放设备启动时、在切换到传递信道时、在初始访问媒体流时和/或在传递信道内的新媒体节目开始时读取的配置文件。为此目的，回放设备可以被提供配置文件或回放设备可经由通信网络访问的配置文件的链接。
在一些示例中，媒体节目对回放时延的敏感性的指示可以是由用于通过传递信道传递的连续媒体节目的(节目)调度器生成的。(节目)调度器可以驻留在内容传递系统的网络侧(例如，在广播公司或运营商侧，或者作为独立实体)。可选地，调度器还可以负责经由任何合适的方式将敏感性指示添加/插入到媒体节目的元数据中。然而，可以使用其他合适的实体(功能块)来将敏感性指示添加到媒体节目的元数据中，例如，位于更上游的网络实体。在任何情况下，后续步骤或实体(特别是多路复用和分段步骤)也应该(显性地)支持该元数据。
在一些示例中，该方法可以进一步包括在编码器侧调整媒体节目的编码模式。如技术人员理解和认识到的，调整编码模式例如可以意味着：对于时延关键内容，以减小的帧大小对内容进行编码，而对于非时延敏感内容则切换回较长的帧持续时间。特别地，可以根据媒体节目对回放时延的敏感性来调整编码模式。
在一些示例中，可以经由带内事件(inband event)用信号通知媒体节目对回放时延的敏感性改变的指示。例如，这样的带内事件可以根据ISO IEC 23009-1来定义。然后，对用信号通知媒体节目对回放时延的敏感性改变的带内事件的接收可以使回放设备重新读取媒体节目的元数据(例如，MPD)，并且重新配置与媒体节目相关联的媒体流的内部处理，如本公开中所提出的。
在一些示例中，可以在特定媒体节目开始以前(之前)用信号通知该媒体节目的对回放时延的敏感性。在这种情况下，回放设备(例如，回放设备的播放器)可能已经提前开始准备(例如，准备缓冲区的、调整回放模式等)，使得可以享受到(不同时延的)媒体节目的无缝观看体验。
在一些示例中，调整媒体节目的回放与媒体节目的开始可以是异步的。例如，回放设备的播放器应用程序可以在时延敏感的节目开始之前或之后切换到较低时延，即，以与媒体节目的开始无关的异步(或仅松散同步)的方式。
可选地，调整媒体节目的回放还可以包括调整先前的媒体节目的回放。
作为另一个广泛的方面，提供了一种用于经由传递信道来回放媒体内容的设备。传递信道通常可以指以如广播或多播方式将音频或视频节目传递(发送)给用户(接收器)所通过的信道。例如，这种传递信道可以是(传统的)“24/7”广播信道。媒体内容通常可以包括如新闻、电影、广告、剧集、(直播)游戏表演、体育直播等连续媒体节目。特别地，对于媒体内容内的特定媒体节目，还提供了该特定媒体节目的相应内容类型。如技术人员理解和认识到的，该内容类型可以以任何合适的方式来表示和传递。例如，可以使用媒体节目的报头中的特定或附加的字段来表示或指示内容类型。作为另一个示例，可以使用查找表来指示内容类型。类似地，内容类型可以与媒体节目的传递一起实时地被传递(发送)，或者可以在媒体节目的传递之前共享。通常，该设备可以被配置为执行先前的方法步骤中的任何一个。
特别地，该设备可以包括接收器，用于接收媒体节目对回放时延的敏感性的指示。更特别地，媒体节目对回放时延的敏感性可以与媒体节目的内容类型相关联。该设备可以进一步包括接收器，用于经由媒体流来接收媒体节目的至少一部分。媒体节目的一部分通常是指媒体节目的一定数量的帧(图片、数据块等)，取决于例如媒体节目的表示和/或传递。如技术人员认识到的，用于接收媒体节目的敏感性的指示的接收器和用于接收媒体节目的接收器可以被实施为能够接收和区分被打包在例如单个比特流中的这两种类型的信息(即，敏感性指示和媒体节目)的一个单一物理接收器。换言之，用于接收媒体节目的敏感性指示的接收器和用于接收媒体节目的接收器可以在逻辑上分开，但不必在物理上分开。这两种类型的信息可以都在单个物理接收器处被接收。例如，仅一个物理接收器就可以用于接收媒体节目的敏感性的指示和媒体节目两者。在这种情况下，该设备可以包括合适的机制以用于分离可能在同一物理接收器处接收的不同输入信号。在一些示例中，接收器被布置为经由基于因特网协议(IP)的通信网络来接收信息。可以使用不同的物理层(无线或有线、铜、光纤)和应用协议(UDP、TCP、http...)来传递携带媒体节目对回放时延的敏感性的媒体流和/或元数据。通信网络有时也被称为内容传递网络。
该设备可以进一步包括用于播放媒体内容的回放单元。回放单元可以例如调用一些合适的应用程序以回放媒体内容。
设备还可以进一步包括控制器，用于基于接收到的媒体节目对回放时延的敏感性的指示来调整媒体节目的回放。
在一些示例中，设备的回放单元(例如，媒体播放器)可以包括用于接收到的媒体节目片段的缓冲区。另一方面，在一些情况下，缓冲区也可能例如由操作系统提供，并且然后回放单元可以被配置为使用任何合适的方式访问和使用该缓冲区。缓冲区可以例如实施为内存(存储)块或以任何其他合适的方式，如技术人员认识到的。此外，控制器可以被配置为基于对回放时延的敏感性的指示来调整在回放节目数据之前缓冲的节目数据的量。
在一些示例中，设备可以进一步包括媒体内容修改器，该媒体内容修改器被配置为调整接收到的媒体节目的内容以插入附加媒体内容或移除媒体内容。在一些示例中，媒体内容修改器可以被配置为在当前媒体节目中插入/添加附加内容(例如，按帧或片段)。例如，如果当前媒体节目相对于先前的媒体节目允许更大的时延，或者后续的媒体节目相对于当前媒体节目允许更大的时延，则可以执行(多个)附加内容的插入。在一些其他示例中，媒体内容修改器可以被配置为跳过或移除特定内容(或其一部分)。例如，这可以在当前媒体节目相对于先前的媒体节目要求更小的时延，或者后续的媒体节目相对于当前媒体节目要求更小的时延时执行。
在一些示例中，用于接收媒体节目对回放时延的敏感性的指示的接收器可以被配置为解码媒体节目的元数据或接收带内事件，例如取决于如何以及在何处将对回放时延的敏感性(或这种敏感性改变)的指示传递到如上所述的回放设备。元数据的示例可以是根据ISO IEC 23009-1的MPD，并且带内事件的示例可以是根据ISO IEC 23009-1定义的带内事件。
作为又一个广泛的方面，提供了一种用于经由传递信道来传递媒体内容的系统。传递信道通常可以指以如广播或多播方式将音频或视频节目传递(发送)给用户(接收器)所通过的信道。例如，这种传递信道可以是(传统的)“24/7”广播信道。媒体内容通常可以包括如新闻、电影、广告、剧集、(直播)游戏表演、体育直播等连续媒体节目。特别地，对于媒体内容内的特定媒体节目，还提供了该特定媒体节目的相应内容类型。如技术人员理解和认识到的，该内容类型可以以任何合适的方式来表示和传递。例如，可以使用媒体节目的报头中的特定或附加的字段来表示或指示内容类型。作为另一个示例，可以使用查找表来指示内容类型。类似地，内容类型可以与媒体节目的传递一起实时地被传递(发送)，或者可以在媒体节目的传递之前共享。系统可以包括内容传递服务器和如内容提供商服务器等其他部件。
特别地，系统可以包括调度器，调度器用于调度媒体节目以通过传递信道进行连续传递。一般而言，调度过程可以包括为媒体节目调度(分配)传递信道的适当时间。如技术人员认识到的，媒体节目的调度可以根据如节目议程、节目的重要性和/或紧急性等不同的情况和/或要求来执行。系统还可以包括至少一个打包器(或封装器)，该打包器(或封装器)被配置为以任何合适的方式将媒体节目打包(封装)在连续媒体流中。特别地，打包器可以被配置为将媒体节目对回放时延的敏感性的相应指示添加到媒体流中。如上所述，媒体节目对回放时延的敏感性与媒体节目的内容类型相关联。
在一些示例中，打包器可以被配置为根据媒体节目对回放时延的敏感性来进一步调整用于媒体节目的编码模式，例如，对于时延关键内容，以减少的片段持续时间对媒体节目进行编码，而对于非时延敏感内容则切换回更长的片段持续时间。
在一些示例中，打包器可以被配置为进一步将媒体节目对回放时延的敏感性的指示插入媒体节目的元数据中或带内事件中，例如取决于如何以及在何处将对回放时延的敏感性的指示传递到如上所述的回放设备。元数据的示例可以是根据ISO IEC 23009-1的MPD，并且带内事件的示例可以是根据ISO IEC 23009-1定义的带内事件。
本公开的另一个方面涉及计算机软件、计算机程序产品或体现计算机软件指令的任何介质或数据，这些计算机软件指令用于在包括至少一个处理器的可编程计算机或专用硬件上执行，这使得该至少一个处理器执行本文件中公开的方法步骤、特别是本文件中提出的所公开的方法。
所公开的装置的实施方式可以包括使用但不限于一个或多个处理器、一个或多个专用集成电路(ASIC)和/或一个或多个现场可编程门阵列(FPGA)。该装置的实施方式还可以包括使用如软件可编程处理器等其他传统和/或定制硬件。
将认识到，设备/装置特征可以以多种方式互换。特别地，如技术人员所认识的，所公开的设备的细节可以被实施为方法，反之亦然。另外，即使没有明确地公开，上述方面也可以以多种方式组合。技术人员将理解，除非产生明确被排除的矛盾，否则方面和特征/步骤的这些组合都是可能的。
通过参考附图，在以下讨论的过程中本发明的其他和另外的实施例将变得清楚。
附图说明
下面参考附图以示例性方式解释本公开的实施例，其中：
图1示意性地图示了媒体内容的示例；
图2示意性地图示了用于传递媒体内容的系统的示例；
图3示意性地图示了根据本发明实施例的用于回放媒体内容的设备的示例；以及
图4示意性地图示了根据本发明实施例的用于回放媒体内容的方法的示例。
具体实施方式
图1示意性地图示了根据本发明实施例的媒体内容流100的一部分的示例。媒体内容流100通常可以包括连续(不同)的媒体节目101-106。例如，在图1所示的示例中，媒体内容流100可以在时间段t1到t2内包括体育直播节目101(例如，足球比赛)；在时间段t2到t3内包括广告节目102；在时间段t3到t4内包括新闻节目103；在时间段t4到t5内包括电影节目104；在时间段t5到t6内包括另一个新闻节目105；以及在时间段t6到t7内包括直播游戏表演节目106。应该注意，图1仅示出了媒体内容传递信道的可以以“24/7”方式连续操作的部分。
如技术人员认识到的，媒体内容流100可以在不同的时间段包括其他媒体节目，并且如图1所示的媒体内容流100仅是用于说明目的的一个示例。值得注意的是，媒体内容流100可以经由内容传递网络(图1中未示出)的传递信道从内容分发器进行传递。传递信道通常可以指以如广播、多播或单播方式、或甚至以点对点(如视频点播，VOD)方式将音频或视频节目传递(发送)到终端用户(接收器/观看者)所通过的信道(例如，无线或有线信道)。例如，这样的传递信道可以是(传统的)“24/7”广播信道或任何其他合适的(多个)信道，如技术人员理解和认识到的。然后，观看者(回放设备)可以以合适的方式(例如，使用合适的播放器应用程序、调用适当的编解码器等)来回放接收到的(多个)媒体节目。
此外，为了促进媒体内容流100的传递，可以针对媒体内容流100内的特定媒体节目提供该特定媒体节目的内容类型(图1中未示出)。通常，媒体节目的内容类型以如新闻、体育、表演、电影等多种内容类别提供了媒体节目的广泛分类。内容类型可以由制作媒体节目的内容提供商设置，或者可以由内容传递网络的运营商设置。如技术人员理解和认识到的，该内容类型可以以任何合适的方式来表示和传递。例如，可以使用媒体节目的报头中的特定或附加的字段来表示或指示内容类型。作为另一个示例，可以使用查找表来指示内容类型。类似地，内容类型可以与媒体节目的传递一起实时地传递(发送)，或者可以在媒体节目的传递之前共享。
另外，还可以提供特定媒体节目对回放时延(也称为目标时延)的敏感性的指示。特别地，媒体节目对回放时延的敏感性可以是在回放媒体节目数据之前能够接受的时延的定性指示或定量指示，并且该时延的定性指示或定量指示与媒体节目的内容类型相关联。
确定媒体节目的目标时延的关键元素是内容类型。换言之，内容类型影响/主导目标时延的规格。然而，可能有特定的步骤来从内容类型得到目标时延的指示，因为该映射并不总是明确的。例如，内容分发器可以基于足球比赛的重要性为不同的足球比赛选择不同的目标时延。还存在其他内容类型(如非直播内容)，对于这些内容类型，内容分发器可以为目标时延选择固定的默认值而无需进一步调节/微调。但是在其他情况下，创建节目时间表的人可以选择偏离这样的默认值(例如，世界锦标赛中的足球决赛要实现可能的最低时延，而其他足球比赛将不会以这样极低的数字为目标)。因此，媒体节目的目标时延是基于内容类型来确定的，但并非是根据内容类型排他地设置的。
在回放设备侧，会接收到媒体节目的至少一部分和媒体节目的目标时延。媒体节目的一部分通常是指媒体节目的一定数量的帧(图片、数据块等)，取决于例如媒体节目的表示和/或传递方法/机制。接下来，基于媒体节目的目标时延来调整媒体节目的回放。可以在单个步骤中改变(例如，从低到高)目标时延，并且可以相应地调整回放设备中的媒体播放器。另外，提出了在特定时间段内调整回放设备中的媒体播放器，例如以便赶上或减慢缓冲程度和/或回放速度。接收侧的播出调整算法可以具有在给定目标时延和目标时延中的更新之间进行内插的给定特性(如果目标时延的跃变过于剧烈，目标时延中的更新可能会以不期望的方式被执行)。因此，可以逐步地(以多个步骤)改变服务器侧的指示目标时延，从而例如在过渡到具有不同目标时延的另一个节目之前远程控制接收器侧的调整速度并管理接收器侧的缓冲程度。因此，除了目标时延中的单次跃变之外，还建议通过被安排在特定时间段内的多个步骤来调整媒体节目的回放。在后一种情况下，服务器以针对回放时延的多个顺序的指示来逐步改变用信号通知的目标时延。
图2示意性地图示了用于传递媒体内容的系统200的示例。媒体内容可以包括如图1示出的101-106所示的连续媒体节目。在图2的示例中，系统200可以例如包括服务(内容)提供商210，用于准备和提供不同的媒体节目(例如，如图1示出的101-106所示的媒体节目)。作为示例而非限制性地，内容提供商210可以是运营商、视频节目平台或如技术人员认识到的任何其他合适的提供商。特别地，在一些情况下，节目可以是如体育、直播游戏表演等直播(实时)节目211。在一些其他情况下，节目可以是如广告、电影等非实时节目212。这样的非实时节目212可以在节目开始以前准备(制作)。
可用的节目211和212可以被实时或提前传递/发送到系统200的调度器220。如技术人员理解和认识到的，调度器220可以例如作为独立应用程序、控制器的功能块或以任何其他合适的方式来实施。调度器220可以驻留在(以合适的无线、有线等方式)可连接到内容提供商210的计算机或服务器中。调度器可以是内容分发系统的一部分。
调度器220可以被配置为调度媒体节目以通过传递信道进行连续传递。如技术人员认识到的，媒体节目的调度可以根据如节目议程、节目的优先级等不同的情况和/或要求来执行。一般而言，调度过程可以包括例如基于传递信道的特性为媒体节目调度(分配)传递信道的适当时间资源。然后，可以经由合适的接口221将调度的媒体节目传递/传送到例如编码器、打包器、分段器、加密器和/或清单生成器(这些功能可以以略微不同的顺序出现，并且可以组合成更少的处理步骤。)230，以便以任何合适的方式将媒体节目打包/编码在连续媒体流中。然后，可以经由合适的网络连接231(例如，IP连接)将被打包的媒体节目(即，媒体内容)传递(例如，广播)到终端用户的回放设备240。编码/解码可以指对任何媒体内容的相应处理，如音频和/或视频编码/解码等。
除了适当地调度和传递媒体节目之外，调度器220还可以负责经由合适的接口222向(多个)下游设备(如至少一个打包器230)指示媒体节目对回放时延的敏感性。类似地，至少一个打包器230可以相应地经由合适的网络连接232以合适的方式将媒体节目对回放时延的敏感性的指示传播到终端用户的回放设备240。
值得注意的是，在一些情况下，打包器230可以被配置为将媒体节目对回放时延的敏感性的指示与媒体节目本身一起打包(多路复用)在比特流中。例如，打包器230可以将媒体节目对回放时延的敏感性的指示打包(封装)在媒体节目的元数据中。元数据的示例可以是根据ISO IEC 23009-1的MPD。另外，如对回放时延的敏感性的指示等元数据中的改变可以经由带内事件用信号通知。像这样配置，分别用于传递媒体节目和敏感性指示的两个逻辑(网络)连接231和232可以不必分开，因此可以只用一个合适的连接来向回放设备240传递媒体节目和敏感性指示两者。
在一些情况下，打包器230可以被配置为根据媒体节目对回放时延的相应敏感性来进一步调整用于媒体节目的编码模式，例如，对于时延关键内容，以减少的片段持续时间来对媒体节目进行编码，而对于非时延敏感内容则切换回更长的片段持续时间。
如技术人员理解和认识到的，回放设备240通常包括一个或多个合适的部件，如稍后将更详细地描述的(多个)接收器、(多个)缓冲区、处理器、显示器/显示屏、扬声器等。特别地，为了正确地回放接收到的媒体内容，回放设备240通常需要建立其回放链(例如，应用程序、编解码器、缓冲区等)，特别是以便支持媒体节目的期望时延。特别地，根据不同的情况，设置可以包括减少(或增加)在回放设备中缓冲的片段(或帧)的数量，以减少(或增加)时延。此外，根据不同的情况(如所使用的传输格式)，该设置还可以包括切换到特定(例如，低时延)回放模式。低时延模式的示例可以是基于ISO/IEC 23000-19中规定的通用媒体应用格式(CMAF)的、ETSI TS 103 285V1.3.1中规定的低时延呈现。
图3示意性地图示了根据本发明实施例的用于回放媒体内容的设备300的示例。设备300可以对应于图2的回放设备240。传递信道提供的媒体内容可以对应于或类似于图1的媒体内容100，媒体内容100包括连续媒体节目并且具有与媒体节目相关联的相应内容类型。
特别地，设备300可以包括接收器301，用于接收媒体节目对回放时延的敏感性的指示。媒体节目对回放时延的敏感性与媒体节目的内容类型相关联。如上所示，在被设备300接收之前，敏感性的指示可以由图2的调度器220调度并由图2的至少一个打包器230打包。根据如何在打包器侧打包(编码)敏感性的指示，接收器301还可以被配置为适当地解包(提取或解码)这样的指示。例如，如果敏感性的指示位于元数据(如根据ISO IEC 23009-1的MPD)中，则接收器301可以被配置为从这样的元数据中提取指示。在一些示例中，元数据被提供为在启动时、当切换到传递信道时、当初始访问媒体流时和/或在传递信道内的新媒体节目开始时由接收器301读取的配置文件。
设备300可以进一步包括接收器302，用于接收媒体节目的至少一部分。媒体节目的一部分通常是指媒体节目的一定数量的帧(图片、数据块等)，取决于例如媒体节目的表示和/或传递。
如技术人员认识到的，用于接收媒体节目的敏感性指示(即，目标时延)的接收器301和用于接收媒体节目的接收器302可以被实施为能够接收和区分这两种输入(即，敏感性指示和媒体节目)的一个单一接收器。换言之，用于接收媒体节目的敏感性指示的接收器301和用于接收媒体节目的接收器302可以在逻辑上分开，但不必在物理上分开。这两种输入可以都在单个物理接收器处被接收。例如，仅一个物理接收器就可以用于接收媒体节目的敏感性指示和媒体节目两者。在这种情况下，设备300可以包括合适的机制以用于分离可能在同一物理接收器处接收的不同输入信号。
设备300可以进一步包括用于播放媒体内容的媒体节目的回放单元310。回放单元310可以例如调用某个合适的应用程序(以及可选地合适的编解码器)以回放媒体内容，如技术人员认识到的。在一些示例中，设备的回放单元可以包括用于存储和访问媒体节目的接收到的片段的缓冲区315。另一方面，在一些情况下，缓冲区也可以例如由操作系统提供，并且然后回放单元可以被配置为使用任何合适的方式访问和使用该缓冲区。缓冲区315可以例如被实施为内存(存储)块或以任何其他合适的方式实施，如技术人员认识到的。
设备300还可以进一步包括控制器320，用于基于接收到的媒体节目对回放时延的敏感性的指示来调整媒体节目的回放。在一些情况下，控制器320可以被配置为基于对回放时延的敏感性的指示来调整在回放节目数据之前缓冲的节目数据的量。特别地，回放设备300上的改变可以异步地完成。也就是说，(例如，在设备300的播放器应用程序上)回放可以在时延敏感的节目开始之前或之后(例如，由控制器320)切换到较低的时延。在任一种情况下，要求回放从较高时延回放赶上较低时延回放，或者增加其时延。控制器320可以包括用于在当前目标时延与新接收到的目标时延之间进行内插的播出调整算法，以避免目标时延中的不期望的剧烈跃变。
在一些情况下，设备300还可以进一步包括媒体内容修改器330，该媒体内容修改器被配置为调整接收到的媒体节目的内容以插入附加媒体内容或移除媒体内容。特别地，媒体内容修改器330可以被配置为在当前媒体节目中插入/添加附加内容(例如，按帧或片段)。附加内容例如可以是“无声”(空)片段或重复片段。例如，如果当前媒体节目相对于先前的媒体节目允许更大的时延，或者后续的媒体节目相对于当前媒体节目允许更大的时延，则可以执行(多个)附加内容的插入。在一些其他示例中，媒体内容修改器330可以被配置为跳过或移除特定内容(或其一部分)。例如，这可以在当前媒体节目相对于先前的媒体节目要求更小的时延，或者后续的媒体节目相对于当前媒体节目要求更小的时延时执行。然而，在一些情况下，添加或移除内容的这种改变可能能够被观看者注意到，并且因此可以被认为是不太令人期望的。
可替代地或另外地，控制器320(或设备300的某个其他部件)可以被配置为将回放速度控制为比实时更快或更慢，以赶上进度或增加时延。例如，回放单元310可以包括可以改变回放速度的算法，该算法通常与音频的音调校正相结合。通常，应该在不改变音频信号的音调的情况下改变回放速度。一般而言，10％-20％的回放速度差异通常被认为是不会被观看者注意到/令其不快的。因此，从较高的时延(例如25秒)到较低的时延(例如2秒)的过渡时段可能需要将回放加速(例如10％)约230秒——将近4分钟。在这种情况下，这也意味着短时间段的节目(例如，广告)不太可能改变时延，因为过渡时段比实际内容更长。
此外，为了防止重新缓冲事件(例如，万一播放器由于丢失用于解码的数据而需要中断回放)，特别是当从小片段切换到大片段(从低时延切换到高时延)时，应该提前向设备300通知这种改变。例如，ISO/IEC 23009-1中定义的带内事件可以被用于这样的信号通知。如上文所指示的，相同或不同的带内事件也可以用来通知播放器对时延的敏感性改变。例如，带内事件也可以被用来用信号通知MPD中的改变。在接收到这样的带内事件的情况下，播放器可以再次访问MPD，以便确定节目元数据中的改变(如对回放时延的敏感性的改变)。
应该注意，为了简洁起见，在图3中省略了设备300内的各个单元/部件之间的互连。然而，如技术人员理解和认识到的，如果有必要的话，设备300可以包括和/或提供用于在设备300内的单元/部件之间交换(内部)消息的这种互连。还应该注意，其他单元/部件也可以存在于设备300中用于设备300的成功操作，尽管它们可能并未在图3中示出。这些单元/部件可以例如包括但不限于用于显示回放的节目的显示器/显示屏、用于输出音频的一个或多个扬声器等。
图4示意性地图示了根据本发明实施例的用于回放媒体内容的方法400的示例。方法400可以例如由图3的回放设备300来执行。媒体内容可以对应于或类似于图1的媒体内容100，媒体内容100包括连续媒体节目，并且具有与媒体节目相关联的相应内容类型。
特别地，方法300可以包括接收媒体节目对回放时延的敏感性的指示的步骤S410。特别地，媒体节目对回放时延的敏感性与媒体节目的内容类型相关联。方法400可以进一步包括接收媒体节目的至少一部分的步骤S420。最后，方法400还可以包括基于媒体节目对回放时延的敏感性的指示来调整媒体节目的回放的步骤S430。
应当注意，上述装置(设备)特征对应于相应方法特征，然而，出于简洁的原因，这些方法特征可能未被明确描述。本文件的公开内容被认为也扩展到这样的方法特征。特别地，本公开被理解为涉及操作上述设备的方法，和/或涉及提供和/或布置这些设备的相应元件的方法。
还应该注意，可以使用硬件和/或软件配置以多种方式实施所公开的实施例。例如，所公开的实施例可以使用专用硬件和/或与能够在其上执行的软件相关联的硬件来实施。附图中的部件和/或元件仅是示例，并且不限制实施本公开的特定实施例的任何硬件、与硬件组合的软件、固件、嵌入式逻辑部件或两个或更多个这样的部件的组合的使用范围或功能。
还应该注意，说明书和附图仅说明了本公开的原理。本领域技术人员将能够实施体现本发明的原理并且被包括在其精神和范围内的各种布置，即使这些布置并未在本文中明确描述或示出。此外，本公开中概述的所有示例和实施例主要明确地旨在仅用于解释目的，以便帮助读者理解所提出的方法的原理。此外，本文中的提供本发明的原理、方面和实施例以及其具体示例的所有陈述旨在涵盖其等效物。
可以从以下列举的示例实施例(EEE)中理解本发明的各个方面：
1.一种用于经由传递信道来回放媒体内容的方法，所述媒体内容包括具有相应内容类型的连续媒体节目，所述方法包括：
-接收媒体节目对回放时延的敏感性的指示，媒体节目对回放时延的所述敏感性与所述媒体节目的内容类型相关联；
-接收所述媒体节目的至少一部分；
-基于所述媒体节目对回放时延的敏感性的所述指示来调整所述媒体节目的回放。
2.如EEE 1所述的方法，其中，所述调整所述媒体节目的回放包括调整所述媒体节目的缓存，特别是调整在回放媒体节目数据之前缓存的所述媒体节目数据的量。
3.如EEE 1或2所述的方法，其中，媒体节目对回放时延的敏感性的所述指示包括在回放媒体节目数据之前能够接受的时延的定性指示。
4.如任一前述EEE所述的方法，其中，所述调整所述媒体节目的回放包括调整所述媒体节目的回放速度。
5.如任一前述EEE所述的方法，其中，所述调整所述媒体节目的回放包括如果接收到的媒体节目对回放时延的敏感性的所述指示相对于所述传递信道的先前的或后续的媒体节目改变，则修改所述媒体节目的内容。
6.如EEE 5所述的方法，其中，如果当前媒体节目相对于所述先前的媒体节目允许更大的时延，或者所述后续的媒体节目相对于所述当前媒体节目允许更大的时延，则将附加内容插入所述当前媒体节目中。
7.如EEE 5所述的方法，其中，如果所述当前媒体节目相对于所述先前的媒体节目要求更小的时延，或者所述后续的媒体节目相对于所述当前媒体节目要求更小的时延，则在所述当前媒体节目中跳过内容。
8.如EEE 6或7所述的方法，其中，媒体节目包括多个连续片段，并且其中，所述调整所述媒体节目的回放包括在回放所述媒体节目数据之前调整缓冲片段的数量，其中，可选地跳过或重复所述媒体节目的至少一个片段。
9.如任一前述EEE所述的方法，其中，所述调整所述媒体节目的回放包括在回放设备的媒体播放器中切换针对所述媒体节目的回放模式。
10.如任一前述EEE所述的方法，其中，接收媒体节目对回放时延的敏感性的另一个指示，并且基于接收到的指示逐步调整所述媒体节目的回放。
11.如任一前述EEE所述的方法，其中，媒体节目对回放时延的敏感性的所述指示是由用于通过所述传递信道传递的所述连续媒体节目的调度器生成的，并且所述指示可选地被添加到所述媒体节目的元数据中。
12.如任一前述EEE所述的方法，进一步包括根据所述媒体节目对回放时延的所述敏感性来调整针对所述媒体节目的编码模式。
13.如任一前述EEE所述的方法，其中，经由例如根据ISO IEC 23009-1的带内事件用信号通知媒体节目对回放时延的敏感性的改变的指示。
14.如EEE 13所述的方法，其中，在媒体节目开始以前用信号通知所述媒体节目的对回放时延的敏感性。
15.如EEE 14所述的方法，其中，所述调整所述媒体节目的回放与所述媒体节目的开始是异步的，并且可选地包括调整先前的媒体节目的回放。
16.一种用于经由传递信道来回放媒体内容的设备，所述媒体内容包括具有相应内容类型的连续媒体节目，所述设备包括：
-接收器，用于接收媒体节目对回放时延的敏感性的指示，媒体节目对回放时延的所述敏感性与所述媒体节目的内容类型相关联；
-接收器，用于接收所述媒体节目的至少一部分；
-回放单元，用于播放所述媒体内容；以及
-控制器，用于基于所述媒体节目对回放时延的敏感性的接收到的指示来调整所述媒体节目的回放。
17.如EEE 16所述的设备，其中，所述回放单元包括用于媒体节目的接收到的片段的缓冲区，并且所述控制器基于对回放时延的敏感性的所述指示来调整在回放节目数据之前缓冲的所述节目数据的量。
18.如EEE 16或17所述的设备，进一步包括媒体内容修改器，用于调整所述接收到的媒体节目的内容以插入附加媒体内容或移除媒体内容。
19.如EEE 16至18所述的设备，其中，用于接收媒体节目对回放时延的敏感性的指示的接收器被配置为进行以下各项中的至少一项：解码所述媒体节目的元数据、以及接收带内事件。
20.一种用于经由传递信道来传递媒体内容的系统，所述媒体内容包括具有相应内容类型的连续媒体节目，所述系统包括：
-调度器，用于调度所述媒体节目以通过所述传递信道进行连续传递；
-至少一个打包器，用于将所述媒体节目打包在连续媒体流中，其中，所述打包器被配置为将所述媒体节目对回放时延的敏感性的指示添加到所述媒体流，媒体节目对回放时延的所述敏感性与所述媒体节目的内容类型相关联。
21.如EEE 20所述的系统，其中，所述打包器被配置为根据所述媒体节目对回放时延的所述敏感性来调整针对所述媒体节目的编码模式。
22.如EEE 20或21所述的系统，其中，所述打包器被配置为进行以下各项中的至少一项：将所述媒体节目对回放时延的敏感性的所述指示打包在所述媒体节目的元数据中、以及经由带内事件用信号通知回放时延中的改变。

Claims (16)

1.一种用于经由传递信道来回放媒体内容的方法，所述媒体内容包括具有相应内容类型的连续媒体节目，所述方法包括：
-接收媒体节目对回放时延的敏感性的指示，媒体节目对回放时延的所述敏感性与所述媒体节目的所述内容类型相关联；
-接收所述媒体节目的至少一部分；
-基于所述媒体节目对回放时延的敏感性的所述指示来调整所述媒体节目的回放，
其中，所述调整所述媒体节目的回放包括如果针对所述媒体节目的对回放时延的敏感性的所述指示相对于所述传递信道的先前的或后续的媒体节目发生改变，则调整针对所述媒体节目的回放速度，以调整在回放媒体节目数据之前缓冲的所述媒体节目数据的量。
2.如权利要求1所述的方法，其中，媒体节目对回放时延的所述敏感性的所述指示包括在回放所述媒体节目数据之前能够接受的时延的定性指示。
3.如任一前述权利要求所述的方法，其中，所述调整所述媒体节目的回放包括如果针对接收到的媒体节目的对回放时延的敏感性的所述指示相对于所述传递信道的先前的或后续的媒体节目发生改变，则修改所述媒体节目的内容。
4.如权利要求3所述的方法，其中，如果当前媒体节目相对于所述先前的媒体节目允许更大的时延，或者所述后续的媒体节目相对于所述当前媒体节目允许更大的时延，则将附加内容插入所述当前媒体节目中，或者
其中，如果所述当前媒体节目相对于所述先前的媒体节目要求更小的时延，或者所述后续的媒体节目相对于所述当前媒体节目要求更小的时延，则在所述当前媒体节目中跳过内容。
5.如权利要求4所述的方法，其中，媒体节目包括多个连续片段，并且其中，所述调整所述媒体节目的回放包括在回放所述媒体节目数据之前调整缓冲片段的数量，其中，可选地跳过或重复所述媒体节目的至少一个片段。
6.如任一前述权利要求所述的方法，其中，所述调整所述媒体节目的回放包括在回放设备的媒体播放器中切换针对所述媒体节目的回放模式。
7.如任一前述权利要求所述的方法，其中，媒体节目对回放时延的所述敏感性的所述指示是由用于通过所述传递信道传递的所述连续媒体节目的调度器生成的，并且所述指示可选地被添加到所述媒体节目的元数据中。
8.如任一前述权利要求所述的方法，其中，经由例如根据ISO IEC 23009-1的带内事件用信号通知媒体节目对回放时延的所述敏感性的改变的指示。
9.如权利要求8所述的方法，其中，在媒体节目开始以前用信号通知针对所述媒体节目的对回放时延的所述敏感性。
10.如权利要求9所述的方法，其中，所述调整所述媒体节目的回放与所述媒体节目的开始是异步的，并且可选地包括调整所述先前的媒体节目的回放。
11.一种用于经由传递信道来回放媒体内容的设备，所述媒体内容包括具有相应内容类型的连续媒体节目，所述设备包括：
-接收器，用于接收媒体节目对回放时延的敏感性的指示，媒体节目对回放时延的所述敏感性与所述媒体节目的所述内容类型相关联；
-接收器，用于接收所述媒体节目的至少一部分；
-回放单元，用于播放所述媒体内容；以及
-控制器，用于基于所述媒体节目对回放时延的敏感性的接收到的指示来调整所述媒体节目的回放，
其中，所述回放单元包括用于所述媒体节目的接收到的片段的缓冲区，并且如果针对所述媒体节目的对回放时延的敏感性的所述指示相对于所述传递信道的先前的或后续的媒体节目发生改变以调整，则所述控制器通过调整针对所述媒体节目的回放速度来调整在回放节目数据之前缓冲的所述节目数据的量。
12.如权利要求11所述的设备，进一步包括媒体内容修改器，用于调整接收到的媒体节目的内容以插入附加媒体内容或移除媒体内容。
13.如权利要求11或12所述的设备，其中，用于接收媒体节目对回放时延的敏感性的指示的所述接收器被配置为进行以下各项中的至少一项：解码所述媒体节目的元数据、以及接收带内事件。
14.一种用于经由传递信道来传递媒体内容的系统，所述媒体内容包括具有相应内容类型的连续媒体节目，所述系统包括：
-调度器，用于调度所述媒体节目以通过所述传递信道进行连续传递；
-至少一个打包器，用于将所述媒体节目打包在连续媒体流中，其中，所述打包器被配置为将所述媒体节目对回放时延的敏感性的指示添加到所述媒体流，媒体节目对回放时延的所述敏感性与所述媒体节目的所述内容类型相关联。
15.如权利要求14所述的系统，进一步包括根据所述媒体节目对回放时延的所述敏感性来调整针对所述媒体节目的编码模式。
16.如权利要求14或15所述的系统，其中，所述打包器被配置为进行以下各项中的至少一项：将所述媒体节目对回放时延的所述敏感性的所述指示打包在所述媒体节目的元数据中、以及经由带内事件用信号通知回放时延中的改变。
CN202080049385.4A 2019-07-17 2020-07-15 用于内容传递的时延管理 Pending CN114080816A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201962875063P 2019-07-17 2019-07-17
EP19186801.7 2019-07-17
US62/875,063 2019-07-17
EP19186801 2019-07-17
PCT/EP2020/070042 WO2021009255A1 (en) 2019-07-17 2020-07-15 Latency management for content delivery

Publications (1)

Publication Number Publication Date
CN114080816A true CN114080816A (zh) 2022-02-22

Family

ID=71575408

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080049385.4A Pending CN114080816A (zh) 2019-07-17 2020-07-15 用于内容传递的时延管理

Country Status (7)

Country Link
US (1) US20220256236A1 (zh)
EP (1) EP4000275A1 (zh)
JP (1) JP7372354B2 (zh)
KR (1) KR20220024655A (zh)
CN (1) CN114080816A (zh)
BR (1) BR112021025587A2 (zh)
WO (1) WO2021009255A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230046801A (ko) * 2021-09-30 2023-04-06 삼성전자주식회사 디스플레이 장치 및 그 동작 방법

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1689264A (zh) * 2002-10-25 2005-10-26 艾利森电话股份有限公司 通信链路之间的延迟交换
CN101466034A (zh) * 2008-12-25 2009-06-24 华为技术有限公司 发送、播放流媒体数据的方法和装置及流媒体点播系统
CN101583025A (zh) * 2009-06-11 2009-11-18 中兴通讯股份有限公司 一种流媒体播放方法及装置
US20140101341A1 (en) * 2012-10-04 2014-04-10 Sony Computer Entertainment America Llc Method and apparatus for decreasing presentation latency
CN105429984A (zh) * 2015-11-27 2016-03-23 刘军 媒体播放方法、设备及音乐教学系统
CN108235136A (zh) * 2018-03-15 2018-06-29 青岛海信传媒网络技术有限公司 一种数据播放方法及终端设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7382796B2 (en) * 2000-12-13 2008-06-03 Visible World, Inc. System and method for seamless switching through buffering
US20050166135A1 (en) * 2004-01-05 2005-07-28 Burke David G. Apparatus, system and method for synchronized playback of data transmitted over an asynchronous network
US8341282B2 (en) * 2006-11-21 2012-12-25 Verizon Patent And Licensing Inc. Hybrid buffer management
US20080232763A1 (en) * 2007-03-15 2008-09-25 Colin Brady System and method for adjustment of video playback resolution
US8468571B2 (en) * 2007-12-21 2013-06-18 General Instrument Corporation Enabling trick plays during VBR playback of a CBR transmitted media file
AR077680A1 (es) * 2009-08-07 2011-09-14 Dolby Int Ab Autenticacion de flujos de datos
US9306987B2 (en) * 2014-04-29 2016-04-05 Cisco Technology, Inc. Content message for video conferencing
KR102389312B1 (ko) * 2014-07-08 2022-04-22 삼성전자주식회사 멀티미디어 데이터를 전송하는 방법 및 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1689264A (zh) * 2002-10-25 2005-10-26 艾利森电话股份有限公司 通信链路之间的延迟交换
CN101466034A (zh) * 2008-12-25 2009-06-24 华为技术有限公司 发送、播放流媒体数据的方法和装置及流媒体点播系统
CN101583025A (zh) * 2009-06-11 2009-11-18 中兴通讯股份有限公司 一种流媒体播放方法及装置
US20140101341A1 (en) * 2012-10-04 2014-04-10 Sony Computer Entertainment America Llc Method and apparatus for decreasing presentation latency
CN105429984A (zh) * 2015-11-27 2016-03-23 刘军 媒体播放方法、设备及音乐教学系统
CN108235136A (zh) * 2018-03-15 2018-06-29 青岛海信传媒网络技术有限公司 一种数据播放方法及终端设备

Also Published As

Publication number Publication date
KR20220024655A (ko) 2022-03-03
EP4000275A1 (en) 2022-05-25
JP2022542767A (ja) 2022-10-07
WO2021009255A1 (en) 2021-01-21
US20220256236A1 (en) 2022-08-11
BR112021025587A2 (pt) 2022-02-01
WO2021009255A9 (en) 2021-03-25
JP7372354B2 (ja) 2023-10-31

Similar Documents

Publication Publication Date Title
US20210076084A1 (en) System And Method For Seamless Switching Through Buffering
CN109792545B (zh) 从服务器向客户端装置传送视频内容的方法
US7382796B2 (en) System and method for seamless switching through buffering
US8411569B2 (en) Method of splicing encoded multimedia data streams
US6637031B1 (en) Multimedia presentation latency minimization
US9756369B2 (en) Method and apparatus for streaming media data segments of different lengths wherein the segment of different length comprising data not belonging to the actual segment and beginning with key frames or containing key frames only
US8468571B2 (en) Enabling trick plays during VBR playback of a CBR transmitted media file
US20130016791A1 (en) Media streaming with adaptation
US8355450B1 (en) Buffer delay reduction
EP3520421B1 (en) Viewer importance adaptive bit rate delivery
US20080024663A1 (en) Content receiver terminal device with zapping response improved in viewing multi-channel video content
CN114080816A (zh) 用于内容传递的时延管理
WO2014115389A1 (ja) ビデオ表示装置及びビデオ表示方法
RU2789776C1 (ru) Управление временем задержки для доставки контента
CN113132806A (zh) 一种播放终端及其节目播放方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination