CN110049011A - 用于媒体数据递送控制的方法和装置 - Google Patents

用于媒体数据递送控制的方法和装置 Download PDF

Info

Publication number
CN110049011A
CN110049011A CN201910189779.9A CN201910189779A CN110049011A CN 110049011 A CN110049011 A CN 110049011A CN 201910189779 A CN201910189779 A CN 201910189779A CN 110049011 A CN110049011 A CN 110049011A
Authority
CN
China
Prior art keywords
delay
grouping
entity
information
media data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910189779.9A
Other languages
English (en)
Other versions
CN110049011B (zh
Inventor
I.波阿齐齐
K.P.巴特
林荣权
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN110049011A publication Critical patent/CN110049011A/zh
Application granted granted Critical
Publication of CN110049011B publication Critical patent/CN110049011B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/764—Media network packet handling at the destination 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/762—Media network packet handling at the source 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00—Arrangements for detecting or preventing errors in the information received
    • H04L1/004—Arrangements for detecting or preventing errors in the information received by using forward error control
    • H04L1/0045—Arrangements at the receiver end
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/752—Media network packet handling adapting media to network capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00—Packet switching elements
    • H04L49/90—Buffering arrangements
    • H04L49/9005—Buffering arrangements using dynamic buffer space allocation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H04N21/4381—Recovering the multiplex stream from a specific network, e.g. recovering MPEG packets from ATM cells

Abstract

一种在传输系统中操作接收实体的方法，该方法包括：从传输系统中的发送实体接收媒体数据的至少一个分组、用于向接收实体的应用层传递至少一个分组的缓冲区大小要求的信息、以及固定延迟的信息；以及识别缓冲区大小要求的信息和固定延迟的信息，并且其中，缓冲区大小要求基于与至少一个分组有关的最大比特率、最大传输延迟以及最小传输延迟而确定，并且其中，如果前向纠错FEC被应用于至少一个分组，则固定延迟基于FEC缓冲延迟和最大传输延迟的和而确定。

Description

用于媒体数据递送控制的方法和装置
本申请是申请日为2013年10月10日，申请号为201380053098.0，发明名称为“用于媒体数据递送控制的方法和装置”的发明专利申请的分案申请。
技术领域
本申请一般涉及传输系统中的媒体数据递送，而且更具体地，涉及媒体数据的递送和呈现。
背景技术
运动图像专家组(MPEG)媒体传递(MMT)是数字容器标准或格式，其指定用于在异构IP网络环境中递送用于多媒体服务的编码媒体数据的技术。递送的编码媒体数据包括需要同步解码和在指定的时间呈现数据的特定单元的视听媒体数据(即，定时数据)、以及基于服务的上下文或通过用户交互在任意时间解码和呈现的其他类型的数据(即，非定时数据)二者。
发明内容
技术问题
MMT是基于这样的假设来设计的：编码的媒体数据将通过使用诸如实时传输协议(RTP)、传输控制协议(TCP)、用户数据报协议(UDP)等的因特网协议(IP地址)的基于分组的递送网络进行递送。MMT还通过考虑不同的递送环境的特点来设计。例如，每个分组从发送实体向接收实体的递送的端到端延迟可能不总是恒定的，并且底层网络提供者必须提供将信令消息与媒体数据区分开的方法。因此，需要MMT媒体数据递送中的改善的标准。
技术方案
本公开的实施例提供了在传输系统中控制媒体数据的递送的方法和装置。
在一个示例性实施例中，提供了一种在传输系统中操作发送实体的方法。该方法包括识别传输系统中与媒体数据的传输相关联的固定延迟。该方法还包括发送关于固定延迟的信息，作为在传输之后媒体数据被传递给接收实体的应用层组件或被呈现给用户的时间长度的要求。
在另一个示例性实施例中，提供了一种在传输系统中操作接收实体的方法。该方法包括接收媒体数据和关于与媒体数据相关联的固定延迟的信息。该方法还包括从关于固定延迟的信息识别在传输之后媒体数据被传递给应用层组件或被呈现给用户的时间长度的要求。
在又一个示例性实施例中，提供了一种在传输系统中的发送实体中的装置。该装置包括控制器，被配置为识别传输系统中与媒体数据的传输相关联的固定延迟。该装置还包括发送器，被配置为发送关于固定延迟的信息，作为在传输之后媒体数据被传递给接收实体的应用层组件或被呈现给用户的时间长度的要求。
在再一个示例性实施例中，提供了一种传输系统中的接收实体中的装置。该装置包括接收器，被配置为接收媒体数据和关于与媒体数据相关联的固定延迟的信息。该装置还包括控制器，被配置为从关于固定延迟的信息识别在传输之后媒体数据被传递给应用层组件或被呈现给用户的时间长度的要求。
在又一个示例性实施例中，提供了一种在传输系统中操作接收实体的方法，该方法包括：从传输系统中的发送实体接收媒体数据的至少一个分组、用于向接收实体的应用层传递至少一个分组的缓冲区大小要求的信息、以及固定延迟的信息；以及识别缓冲区大小要求的信息和固定延迟的信息，并且其中，缓冲区大小要求基于与至少一个分组有关的最大比特率、最大传输延迟以及最小传输延迟而确定，并且其中，如果前向纠错FEC被应用于至少一个分组，则固定延迟基于FEC缓冲延迟和最大传输延迟的和而确定。
在又一个示例性实施例中，提供了一种传输系统中的接收实体，该接收实体包括：接收器，被配置为从传输系统中的发送实体接收媒体数据的至少一个分组、用于向接收实体的应用层传递至少一个分组的缓冲区大小要求的信息、以及与媒体数据相关联的固定延迟的信息；以及控制器，被配置为识别缓冲区大小要求的信息和固定延迟的信息；并且其中，缓冲区大小要求基于与至少一个分组有关的最大比特率、最大传输延迟以及最小传输延迟而确定，并且其中，如果前向纠错FEC被应用于至少一个分组，则固定延迟基于FEC缓冲延迟和最大传输延迟的和而确定。
在对下面的具体实施方式进行描述之前，对贯穿本专利文件中所使用的某些词和短语的定义进行阐明是有利的：术语“包括(include)”和“包含(comprise)”以及其派生词意味着包括而不是限制；术语“或”是包含性的，意味着和/或；短语“与……相关联”和“与其相关联”以及派生词可以意味着包括、被包括在内、与……互连，包含，被包含在内、连接到或与……连接、藕接到或与……藕接、可与……通信、与……合作、交错(interleave)、并列(juxtapose)、接近于…、绑定到或与……绑定、具有、具有…属性等；术语“控制器”意指控制至少一个操作的设备、系统或其一部分，这样的设备可以以硬件、固件或软件、或者它们中的至少两个的某个组合来实现。应当注意是：与任何特定控制器相关联的功能可以在本地或者在远端集中或分布。贯穿该专利文件提供了某些词和短语的定义，本领域普通技术人员应该理解的是，在很多情况下，即使不是在大多数情况下，这些定义适用于这样限定的词和短语的现有的以及未来的使用。
附图说明
为了更加全面地理解本公开及其优点，现在参考以下结合附图的描述，在附图中相同的参考数字表示相同的部分：
图1示出了本公开的各种实施例可以在其中实施的传输系统的例子；
图2示出了根据本公开的各种实施例的在MMT媒体数据传输环境中的MMT协议输入/输出的框图；
图3示出了根据本公开的各种实施例的用于在发送侧模拟接收器行为和用于估计缓冲区延迟和大小要求的接收器缓冲区模型的框图；
图4示出了根据本公开的各种实施例的图3中的MMTP解封装缓冲区中的MMTP分组处理的时序图；
图5示出了根据本公开所示的实施例的在传输系统中操作发送实体的过程；
图6示出了根据本公开所示的实施例的在传输系统中操作接收实体的过程；以及
图7示出了本公开的各种实施例可以在其中实施的示例电子设备。
具体实施方式
下面讨论的图1到图7、以及用于描述该专利文件中本公开的原理的各种实施例仅是说明性的，并且不应被解释为以任何方式限制本公开的范围。本领域普通技术人员将理解，本公开的原理可以在任何适当布置的系统和设备中实现。
MMT编码和媒体递送将在下面的文件和标准描述中讨论：ISO/IEC JTC 1/SC29/WG11，High efficiency coding and media delivery in heterogeneous environmentsPart 1:MPEG Media Transport(MMT)(异构环境中的高效编码和媒体递送部分1：MPEG媒体传递(MMT)),2012年7月，其被并入本公开，就好像在这里充分阐述一样。为了在异构IP网络环境中高效和有效地递送编码的媒体数据，MMT提供了：用于构建由用于混聚(mash-up)应用的各种组件构成的内容的逻辑模型；传送关于用于递送层处理(诸如分组化和自适应)的编码媒体数据的信息的数据结构；用于递送(包括混合递送)在TCP或UDP上使用的特定媒体类型或编码方法不可知的媒体内容的分组化方法和分组结构；用于管理媒体内容的呈现和递送的信令消息的格式；用于管理媒体内容的呈现和递送的信令消息的格式；跨层交换以促进跨层通信的信息的格式。
MMT定义了三个功能区，包括封装、递送和信令。封装功能区定义了媒体内容的逻辑结构、MMT包、和要由MMT兼容实体进行处理的数据单元的格式。MMT包指定包括媒体内容和媒体内容之间的关系的组件，以提供自适应递送所需的信息。数据单元的格式被定义为封装编码媒体，以便或被存储或被携带作为递送协议的有效载荷，而且容易地在存储和携带之间转换。递送功能区定义了有效载荷的应用层协议和格式。与用于递送多媒体的传统应用层协议相比，该应用层协议提供了增强的特征，包括复用，以用于递送MMT包。有效载荷格式被定义为携带特定媒体类型或编码方法不可知的编码媒体数据。信令功能区定义用于管理MMT包的递送和消费的消息的格式。用于消费管理的消息被用于以信号发送MMT包的结构，而且用于递送管理的消息被用于以信号发送有效载荷格式的结构和协议的配置。
MMT定义了用于递送诸如音频、视频的时间连续多媒体以及诸如窗口小部件、文件等的其它静态内容的新框架。MMT指定了用于向接收实体递送MMT包的协议(即，MMTP)。MMTP以信号发送MMTP包的传输时间作为协议头的一部分。这个时间使得接收实体能够通过检查每个传入MMT分组的发送时间和接收时间来执行去抖动。
本公开的实施例认识到，基于传输路径、传输格式、和接收设备的类型，用于接收媒体数据的环境条件可能有所不同，这导致了发送和接收之间的延迟(例如，端到端延迟)。例如，不同的传输介质(例如，无线数据通信(LTE、HSPA、3G、无线网络等)、物理介质(例如，有线、线缆、以太网、光纤等)、卫星广播等)具有不同的相关联的传输延迟。本公开的实施例认识到，除了传输延迟，其他源可能导致抖动。例如，前向纠错(FEC)解码可能插入附加延迟，以使能恢复丢失的分组，这需要接收足够的源和奇偶校验分组。延迟的又一些其他来源可能是由于在传输期间可能已经执行的数据交织导致的。本公开的实施例还认识到，接收设备组件也可能影响延迟。诸如计算机的具有更大存储器和更快处理能力的设备的延迟可以低于诸如机顶盒的具有更小存储器和更慢处理能力的其他设备的延迟。
本公开的实施例认识到重要地是，在某些环境中，诸如广播环境中，具有固定端到端延迟，即，每个发送的分组在点对多点传输系统中从发送直到留在接收实体的MMT处理栈经历相同的延迟。例如，本公开的实施例认识到重要地是，在不可知设备、协议或传输介质实现的情况下，提供或保证接收相同节目的所有客户端在相同时间呈现相同内容。另外，为了使能接收器的硬件实现，本公开的实施例认识到，可能需要提供确保固定分组递送延迟所需的存储空间的上界。根据网络的性质和服务的设置，MMT分组可能被暴露于大范围的抖动，这会接着导致不同的缓冲要求。例如，在较大源块上提供FEC保护并且通过因特网携带的服务可能需要比在被管理的广播上携带的且没有FEC保护的服务更多的缓冲。
因此，本公开的实施例提供了用于提供、加强和/或确保固定端到端延迟和用于缓冲传入MMT分组的有限存储器要求的方法和装置。本公开的实施例还提供工具以便以信号发送缓冲区要求和固定延迟到接收实体。
图1示出了本公开的各种实施例可以在其中实施的传输系统100的例子。在所示的实施例中，系统100包括发送实体101、网络105、接收实体110-116、无线传输点(例如，演进节点B(eNB)，节点B)，诸如基站(BS)102、基站(BS)103、以及其他类似的基站或中继站(未示出)。发送实体101经由网络105与基站102和基站103通信，网络105可以是，例如，互联网、媒体广播网络或基于IP的通信系统。接收实体110-116经由网络105和/或基站102和103与发送实体101通信。
基站102为基站102的覆盖区域120内的第一多个接收实体(例如，用户设备、移动电话、移动站、用户站)提供到网络105的无线接入。第一多个接收实体包括用户设备111，其可以位于小企业(SB)；用户设备112，其可以位于企业(E)；用户设备113，其可以位于WiFi热点(HS)；用户设备114，其可以位于第一住宅(R)；用户设备115，其可以位于第二住宅(R)；和用户设备116，其可以是移动设备(M)，诸如蜂窝电话、具有无线通信功能的膝上型计算机、具有无线通信功能的PDA、平板计算机等。
基站103为基站103的覆盖区域125内的第二多个用户设备提供对网络105的无线接入。第二多个用户设备包括用户设备115和用户设备116。在示范性实施例中，基站101-103可以使用OFDM或OFDMA技术彼此通信并且与用户设备111-116通信。
虽然在图1中仅描绘了六个用户设备，但是可以理解的是，系统100可以为另外的用户设备提供无线宽带和网络。应当指出的是，用户设备115和用户设备116位于覆盖区域120和覆盖区域125二者的边缘。用户设备115和用户设备116每个与基站102和基站103二者通信，并且可以被称为操作在切换模式中，如本领域技术人员所知的。
用户设备111-116可以经由网络105接入语音、数据、视频、视频会议、和/或其它宽带服务。在示范性实施例中，一个或多个用户设备111-116可以与WiFi WLAN的接入点(AP)相关联。用户设备116可以是多个移动设备中的任何一个，包括具有无线功能的膝上型计算机、个人数据助理、笔记本、手持设备、或其它具有无线功能的设备。用户设备114和115可以是，例如，具有无线功能的个人计算机(PC)、膝上型计算机、网关或其他设备。
图2示出了根据本公开的各种实施例的在MMT媒体数据传输环境200中的MMT协议输入/输出的框图。在这个说明性示例中，发送实体205根据MMTP通过传输介质向接收实体210发送媒体数据。媒体数据215在发送实体205处根据MMTP来处理。例如，发送实体205可以执行MMT包封装、编码、递送和发信号，以用于将媒体数据作为MMT处理单元(MPU)和MMT片段单元(MFU)215(例如，MPU的片段)。经处理的媒体数据随后(例如，作为分组)被发送到接收实体210，以用于根据MMTP进行处理(例如，解封装、解码等)。在接收实体210处处理的媒体数据然后作为MPU和/或MFU被传递到上层编程(例如，诸如媒体播放器的应用层程序)以用于呈现给用户，完成媒体数据的递送。
图3示出了根据本公开的各种实施例的用于在发送侧模拟接收器行为和用于估计缓冲区延迟和大小要求的接收器缓冲区模型300的框图。在本公开的各种实施例中，诸如媒体递送服务器(或其他MMT感知节点)的发送实体205计算、确定和/或识别点对多点传输系统中的媒体数据递送的固定端到端延迟。例如，发送实体205可以利用模型300根据接收实体210的接收器中的接收限制确定在分组流上执行的媒体数据处理的效果。例如，发送实体205可以利用模型确定所需的缓冲区延迟和所需的缓冲区大小，并且将这个信息通信到接收媒体数据的实体。
在这个说明性示例中，FEC解码缓冲区305是用于估计与FEC解码相关联的延迟和/或缓冲区大小要求的模型。FEC解码典型用于许多应用，其中更低层传输可能对于恢复信道错误或当网络拥塞可能导致分组丢失或过度延迟时不足够。为了执行FEC解码，接收实体210使用缓冲区，传入分组被存储在该缓冲区中，直到足够的源(“S”)和修复数据(“P”奇偶校验数据)可用于执行FEC解码。
在这个说明性示例中，发送实体205使用FEC解码缓冲区305的模型以确定接收实体210将采取的关于FEC解码的动作，以估计与FEC解码相关联的延迟。换句话说，发送实体205使用FEC解码缓冲区305的模型预测由接收实体210采取的动作以估计FEC解码延迟。这种由发送实体205对FEC解码缓冲区305的建模开始于，FEC解码缓冲区305被假设为最初是空的。接着，对于具有传输时间戳tS的每个传入分组i，如果buffer_occupancy(缓冲区占据)+packet_size(分组大小)<max_buffer_size(最大缓冲区大小)，则接收实体210使用FEC解码缓冲区305来缓冲分组i。否则，接收实体210丢弃分组i，因为它不符合缓冲区模型。接收实体210然后确定FEC是否被应用于分组i。如果FEC被应用于分组i，则接收实体210确定分组i所属的源块j，确定源块j的第一分组的插入时间t，在时间t+FEC_buffer_time处将源块j的所有分组(在FEC纠错之后，如果需要)移动到去抖动(de-jitter)缓冲区，并且丢弃修复分组。发送实体205利用FEC_buffer_time作为从对源块的第一分组的接收直到FEC解码被尝试为止的对于FEC解码所需的缓冲时间。这个时间通常基于FEC块大小来计算。
去抖动缓冲区310是由发送实体用来估计与分组上的去抖动相关联的延迟和/或缓冲区大小要求(即，去除分组的延迟抖动)的模型。去抖动缓冲区最终确保MMTP分组经受从源到MMTP协议栈的输出的固定传输延迟，假设为最大传输延迟。接收实体210可以丢弃经历了大于最大传输延迟的传输延迟的数据单元，因为它太迟了。
这种由发送实体205对去抖动缓冲区310的建模开始于，去抖动缓冲区310被假设为最初是空的。接收实体210然后在MMTP分组到达时将该分组插入到去抖动缓冲区310中。接收实体210随后在时间tS+Δ处去除MMTP分组，其中tS是MMTP分组的传输时间戳，并且Δ是用于媒体数据的用信号发送的固定端到端延迟。在应用了去抖动之后，正确到达的(或通过FEC/重传恢复的)所有MMTP分组将经历相同的端到端延迟。
MMTP解封装缓冲区315是由发送实体用来估计与在将输出传递给上层之前的MMTP处理相关联的延迟和/或缓冲区大小要求的模型。MMTP处理的输出可以或者是MFU有效载荷(在低延迟操作中)、完整的电影片段，或者是完整的MPU。MPU可以被分段成更小的分组或者被聚集成更大的分组，这取决于它们的大小。分组的解封装(去除MMTP分组和有效载荷头)以及任何所需的解分段/解聚集然后被执行，作为MMTP处理的一部分。这个过程可能需要一些缓冲延迟，被称为解封装延迟，以便当MPU被分段成多个MMTP分组时进行组装。然而，在这个说明性的实施例中，解封装延迟可以不被认为是固定端到端延迟的一部分，并且由编码媒体层消费的MPU的可用性可以通过将MPU分段成多个MMTP分组的实体来保证，而不管解封装延迟。
图4示出了根据本公开的各种实施例的MMTP解封装缓冲区315中的MMTP分组处理的时序图400。时序图400是当MMTP分组被处理并被输出到上层时，MMTP解封装缓冲区315中的缓冲区电平关于时间的例子。例如，时序图400是估计与MMTP分组处理相关联的缓冲区要求的图示。
由发送实体205对MMTP解封装缓冲区315的建模开始于，MMTP解封装缓冲区被假设为最初是空的。在执行了去抖动之后，接收实体210将MMTP分组插入到MMTP解封装缓冲区315中。对于携带聚集的有效载荷的MMTP分组，接收实体210去除分组和有效载荷头，并且将聚合分割成单独的MPU。对于携带分段的有效载荷的MMTP分组，接收实体210将分组保持在MMTP解封装缓冲区315中，直到所有的对应片段被正确地接收或直到接收到不属于相同分段的MPU的分组。如果接收到MPU的所有片段(例如，在时间405或时间410)，则接收实体210去除MMTP分组和有效载荷头，重新组装，并将重构的MPU转发到上层。否则，如果没有接收到MPU的一些片段，则接收实体210可以丢弃不完整的MPU的片段。
基于这种接收器缓冲区模型300，在假设目标路径中的最大传递延迟的情况下，发送实体205能够确定传输调度、缓冲区大小和缓冲延迟，减少和/或确保没有分组被丢弃。发送实体205提供和/或保证，经历了低于设定阈值的传输延迟的分组在经过点对多点传输系统的恒定延迟之后将被输出到上层，而且不使客户端缓冲区下溢或溢出。
在确定媒体数据所需的缓冲区大小和固定端到端延迟之后，发送实体205将这个信息通信给接收实体210。例如，发送实体205可以使用发送实体和接收实体之间的信令协议，将这个信息通信给接收实体210。在各种实施例中，发送实体205可以连续运行接收器缓冲区模型300，以验证所选择的端到端延迟和缓冲区大小被对准并且不会导致缓冲区下运行或超运行。在接收器侧，固定延迟的信令指示接收实体210执行缓冲，以使得数据单元在被转发到上层之前，每个数据单元经历信号化的固定端到端延迟。在假设发送实体和接收实体之间的时钟被同步的情况下，接收实体210可以基于传输时间戳和信号化的固定端到端延迟来计算数据的输出时间。
在一些实施例中，发送实体205使用会话描述文件，诸如会话描述协议(SDP)文件，来执行信令。在SDP中，描述了正在使用MMTP协议递送的媒体会话。媒体会话包括固定端到端延迟和/或所需的缓冲区大小。下面的表1示出了SDP文件的媒体会话描述的一个例子，其以信号发送固定端到端延迟和缓冲区大小要求。
表1：
M＝asset 23442 UDP/MMTP 1
a＝assetid：1MP4
a＝最小缓冲区大小：1000000
a＝端到端延迟：2500
在另一个实施例中，使用MMTP信令功能来执行固定端到端延迟和缓冲区大小要求的信令。在这样的实施例中，设计了新的信令消息来携带上述信息。
在这个实施例中，缓冲区大小以字节为单位给出，并且固定端到端延迟以毫秒为单位给出。在其他实施例中，发送实体205可以使用MMTP信令消息来执行信令，其中，要么特定信令消息类型被定义要么信息被包括在现有的信令消息中。
在确定固定延迟时，发送实体205估计在下至接收器的传输路径中的预期的最大和可容忍的传输延迟。在要求FEC解码来恢复丢失的MMTP分组的情况下，如果使用了FEC，则发送实体205添加FEC缓冲延迟，其涵盖组装源块所需要的时间(例如，上面讨论的FEC_buffer_time)。此外，发送实体205添加分组的片段可能导致的任何延迟。发送实体205将所得的MMTP传递延迟的估计作为固定端到端延迟来发信号。估计固定端到端延迟的一个例子通过下面的等式1来提供：
固定端到端延迟＝最大传输延迟+FEC_buffer_time[等式1]
在各种实施例中，为了估计导致的缓冲区要求，发送实体205可以使用固定端到端延迟，并且减去用于下至接收器的传输路径的最小传输延迟，作为数据将需要通过发送实体205被缓冲的估计的最大时间量。发送实体205然后可以将缓冲区大小要求估计为MMTP流的最大比特率乘以计算出的缓冲数据的持续时间。估计固定端到端延迟的例子通过下面的等式2来提供：
缓冲区大小＝(最大延迟-最小延迟)*最大比特率[等式2]
虽然本文所描述的各种实施例讨论了MMT数据通信，但是应该注意的是，本公开的各个实施例不限于MMT通信。例如，根据本公开的原理，固定延迟和缓冲区大小确定可以被应用于任何适当类型的数据或媒体内容递送和/或任何适当类型的传输系统。
图5示出了根据本公开所示的实施例的在传输系统中操作发送实体的过程。例如，在图5中所描绘的过程可以由图2中的发送实体205执行。该过程也可以由图1中的发送实体101执行。
过程开始于发送实体识别与媒体数据的传输相关联的固定延迟(步骤505)。例如，在步骤505中，发送实体可以是点对多点传输系统中的媒体服务器，其通过各种通信介质将时间敏感内容提供到各种设备。为了识别这种延迟，发送实体可以估计延迟或识别来自另一源的预先计算的或标准化的延迟。在一个例子中，发送实体可以估计与多点传输系统中从发送实体到一个或多个接收实体的传输路径(例如，无线，以太网，卫星广播等)相关联的传输延迟。例如，传输延迟可以是基于与多点传输系统中的每个接收实体相关联的传输介质和设备类型对最大传输延迟的估计。发送实体也可以估计与在接收实体中处理接收到的媒体数据的分组相关联的缓冲延迟。然后发送实体可以基于传输延迟和缓冲延迟计算固定延迟。
发送实体然后确定接收实体的缓冲区大小要求(步骤510)。例如，在步骤510中，发送实体可以将数据需要通过接收实体缓冲的预期的时间量确定为固定延迟减去最小传输延迟。然后发送实体可以基于这个缓冲时间量和与媒体数据相关联的比特率来计算缓冲区大小要求。
此后，发送实体发送关于固定延迟和缓冲区大小要求的信息(步骤515)。例如，在步骤515中，发送实体可以在消息中用信号发送缓冲区大小要求，与发送媒体数据分开，或者在元数据之前或伴随媒体数据的传输。在这些例子中，固定延迟是在传输之后、媒体数据呈现给接收实体的用户的时间长度的要求。换句话说，固定延迟是这样的时间，在该时间之后，发送实体被允许将媒体数据向上传送到上层程序以用于将媒体数据最终呈现给用户。在这些实施例中，发送实体提供和/或确保媒体数据在可以存在于点对多点传输环境中的多个接收设备当中在大约完全相同的时间被显示，与传输介质或接收设备类型无关。
图6示出了根据本公开所示的实施例的在传输系统中操作接收实体的过程。例如，在图6中所描绘的过程可以由图2中的接收实体210执行。该过程也可以由图1中的接收实体110执行。
过程开始于接收实体接收媒体数据和关于与媒体数据相关联的固定延迟的信息(步骤605)。例如，在步骤605中，接收实体可以与媒体数据一起、或者先于媒体数据接收该信息。
接收实体然后识别传输之后、媒体数据呈现给接收用户的时间长度的要求(步骤610)。例如，在步骤610中，接收实体可以使用固定延迟作为确定何时将接收到的媒体数据传递到上层以便最终呈现给用户的时间的长度。
此后，接收实体将接收到的与媒体数据相关联的数据存储在缓冲区中(步骤615)。例如，在步骤615中，接收实体可以在接收时存储媒体数据，直到与接收到的数据相关联的传输时间戳加上固定延迟的时间已经逝去。接收实体然后确定当前时间是否是传输时间戳加上固定延迟(步骤620)。如果当前时间小于传输时间戳加上固定延迟，则发送实体继续缓冲媒体数据，以稍后呈现和递送。如果当前时间大于传输时间戳加上固定延迟，则发送实体可以丢弃该数据，因为接收太晚。
然而，如果当前时间是传输时间戳加上固定延迟，则接收实体经由用户接口将接收到的数据提供给用户(步骤625)，过程随后终止。例如，在步骤625中，接收实体可以将媒体数据传递到应用层程序，以将媒体数据呈现用户。在这些实施例中，接收实体识别并遵照媒体数据的固定延迟，以确保媒体数据在可以存在于点对多点传输环境中的其他接收实体中在大约完全相同的时间在接收实体上显示。
尽管图5和图6分别示出了在传输系统中发送实体和接收实体的过程的例子，但是可以对图5和图6做出各种改变。例如，虽然被示为一系列步骤，但是每个图中的各个步骤可以重叠、并行发生、以不同的顺序发生，或多次发生。
图7示出了本公开的实施例可以在其中实施的示例电子设备700。在这个例子中，电子设备700包括控制器704、存储器706、持久储存装置708、通信单元710、输入/输出(I/O)单元712和显示器714。在这些说明性的例子中，电子设备700是图1的发送实体101和/或接收实体110-116的一个实现的例子。电子设备700也是图2中的发送实体205和/或接收实体210的一个例子。
控制器704是任何设备、系统或其部件，其控制至少一个操作。这样的设备可以以硬件、固件或软件、或者它们中的至少两个的某种组合来实现。例如，控制器704可以包括被配置为控制电子设备700的操作的硬件处理单元和/或软件程序。例如，控制器704处理可被加载到存储器706中的软件的指令。根据具体实现，控制器704可以包括多个处理器、多处理器核、或一些其他类型的处理器。此外，控制器704可以使用多个异构处理器系统来实现，其中，主处理器与辅助处理器存在于单个芯片上。作为另一说明性的例子，控制器704可以包括对称多处理器系统，其包含相同类型的多个处理器。
存储器706和永久储存装置708是储存设备716的例子。储存设备是能够临时和/或永久地存储信息的任何硬件，所述信息是，诸如例如，但不限于，数据、功能形式的程序代码、和/或其他合适的信息。在这些例子中，存储器706可以是，例如，随机存取存储器或任何其它合适的易失性或非易失性储存设备。例如，永久储存装置708可以包含一个或多个组件或设备。永久储存装置708可以是硬盘驱动器、闪速存储器、光盘或上述的一些组合。由永久储存装置708所使用的介质也可以是可移除的。例如，可移除的硬盘驱动器可以被用于持久储存装置708。
通信单元710提供与其他数据处理系统或设备的通信。在这些例子中，通信单元710可以包括无线(蜂窝、无线网络等)发送器、接收器和/或发送器、网络接口卡、和/或用于通过物理或无线通信介质发送和/或接收通信的任何其他合适的硬件。通信单元710可以通过使用物理和无线通信链路中的任一者或两者来提供通信。
输入/输出单元712允许与其它设备输入和输出数据，所述其它设备可以被连接到电子设备700或者是电子设备700的一部分。例如，输入/输出单元712可以包括接收触摸用户输入的触摸面板、接收音频输入的麦克风、提供音频输出的扬声器、和/或提供触觉输出的马达。输入/输出单元712是用于向电子设备700的用户提供和递送媒体数据(例如，音频数据)的用户接口的一个例子。在另一例子中，输入/输出单元712可以为通过键盘、鼠标、外部扬声器、外部麦克风和/或一些其它合适的输入/输出设备的用户输入提供连接。此外，输入/输出单元712可以发送输出到打印机。显示器714提供了向用户显示信息的机制，并且是向电子设备700的用户提供和传递媒体数据(例如，图像和/或视频数据)的用户接口的一个例子。
用于操作系统、应用或其他程序的程序代码可以位于与控制器704通信的储存设备716中。在一些实施例中，程序代码以功能形式位于永久储存装置708上。这些指令可以被加载到存储器706中，以用于由控制器704进行处理。可以由控制器704使用计算机实现的指令(其可以位于存储器706中)来实施不同实施例的过程。例如，控制器704可以执行用于如上所述的模块和/或设备中的一个或多个的过程。
在一些实施例中，以上描述的各种功能由计算机程序产品实现或支持，所述计算机程序产品由计算机可读程序代码形成并且被实现在计算机可读介质中。计算机程序产品的程序代码可以以功能形式位于选择性地可移除的计算机可读存储设备中，并且可以被加载到或传送到电子设备700以便由控制器704进行处理。在一些说明性的实施例中，程序代码可以通过网络从另一设备或数据处理系统下载到永久储存装置708以用于在电子设备700内使用。例如，存储在服务器数据处理系统中的计算机可读存储介质中的程序代码可以通过网络从服务器下载到电子设备700。提供程序代码的数据处理系统可以是服务器计算机、客户端计算机、或者能够存储和递送程序代码的一些其他设备。
本公开的实施例认识到，MMTP已经发展为通过提供适合于递送媒体数据的通用协议来改善并替换现有的传输协议。MMTP解决了延迟容忍应用以及实时低延迟应用，诸如流媒体直播。为了确保MMTP协议在多个接收器上一致地操作以及确保所需的缓冲区空间在客户端可用，本公开的实施例提供了确定端到端延迟以估计所需的缓冲区空间并且将这个信息用信号发送到接收器的方法和装置。这种功能对于接收客户端(例如机顶盒)以硬件实现的广播接收器而言尤其重要。
虽然已经利用示例性实施例描述了本公开，但是可以向本领域技术人员暗示各种改变和修改。本公开意图包含这些落入所附权利要求范围内的改变和修改。

Claims (4)

1.一种在传输系统中操作接收实体的方法，所述方法包括：
从传输系统中的发送实体接收媒体数据的至少一个分组、用于向接收实体的应用层传递至少一个分组的缓冲区大小要求的信息、以及固定延迟的信息；以及
识别缓冲区大小要求的信息和固定延迟的信息，并且
其中，缓冲区大小要求基于与至少一个分组有关的最大比特率、最大传输延迟以及最小传输延迟而确定，并且
其中，如果前向纠错FEC被应用于至少一个分组，则固定延迟基于FEC缓冲延迟和最大传输延迟的和而确定。
2.根据权利要求1所述的方法，
其中，至少一个分组中的每一个包括传输时间戳，并且
所述方法还包括：
在传输时间戳和固定延迟的和处，从接收实体的去抖动缓冲区去除至少一个分组当中的一个或多个分组。
3.一种传输系统中的接收实体，所述接收实体包括：
接收器，被配置为从传输系统中的发送实体接收媒体数据的至少一个分组、用于向接收实体的应用层传递至少一个分组的缓冲区大小要求的信息、以及与媒体数据相关联的固定延迟的信息；以及
控制器，被配置为：
识别缓冲区大小要求的信息和固定延迟的信息；并且
其中，缓冲区大小要求基于与至少一个分组有关的最大比特率、最大传输延迟以及最小传输延迟而确定，并且
其中，如果前向纠错FEC被应用于至少一个分组，则固定延迟基于FEC缓冲延迟和最大传输延迟的和而确定。
4.根据权利要求3所述的接收实体，
其中，至少一个分组中的每一个包括传输时间戳，并且
控制器还被配置为：
在传输时间戳和固定延迟的和处，从接收实体的去抖动缓冲区去除至少一个分组当中的一个或多个分组。
CN201910189779.9A 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置 Active CN110049011B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261712045P 2012-10-10 2012-10-10
US61/712,045 2012-10-10
US14/049,022 US10356143B2 (en) 2012-10-10 2013-10-08 Method and apparatus for media data delivery control
US14/049,022 2013-10-08
CN201380053098.0A CN104782133B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201380053098.0A Division CN104782133B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置

Publications (2)

Publication Number Publication Date
CN110049011A true CN110049011A (zh) 2019-07-23
CN110049011B CN110049011B (zh) 2021-12-03

Family

ID=50432633

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201910189780.1A Active CN109889535B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置
CN201910189779.9A Active CN110049011B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置
CN201380053098.0A Active CN104782133B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910189780.1A Active CN109889535B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201380053098.0A Active CN104782133B (zh) 2012-10-10 2013-10-10 用于媒体数据递送控制的方法和装置

Country Status (10)

Country Link
US (3) US10356143B2 (zh)
EP (2) EP3554086A1 (zh)
JP (1) JP6516674B2 (zh)
KR (4) KR102328556B1 (zh)
CN (3) CN109889535B (zh)
AU (1) AU2013330649B2 (zh)
CA (1) CA2887997C (zh)
MX (1) MX341787B (zh)
RU (1) RU2634908C2 (zh)
WO (1) WO2014058237A1 (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9852140B1 (en) * 2012-11-07 2017-12-26 Axcient, Inc. Efficient file replication
KR102020025B1 (ko) * 2013-10-23 2019-09-10 한국전자통신연구원 수신품질피드백 메시지를 이용한 ｍｍｔ 버퍼 모델 관리 장치 및 방법
KR102127641B1 (ko) * 2014-06-20 2020-06-30 삼성전자주식회사 응용 계층 순방향 오류 정정 방식을 사용하여 제공되는 방송 서비스의 수신을 제어하는 방법 및 장치
KR102202597B1 (ko) 2014-06-20 2021-01-13 삼성전자주식회사 이종망 기반 방송 서비스를 제공하는 방법 및 장치
JP6706784B2 (ja) * 2014-09-12 2020-06-10 パナソニックＩｐマネジメント株式会社 送信装置、受信装置、送信方法及び受信方法
CN106572062B (zh) * 2015-10-10 2019-08-09 上海交通大学 一种异构媒体传输网络下的资源动态请求方法
KR101743441B1 (ko) 2015-02-13 2017-06-05 에스케이텔레콤 주식회사 기지국 연동 노드를 통한 스트리밍 데이터 제공 방법, 이를 위한 기지국 연동 노드
WO2017022211A1 (ja) * 2015-08-03 2017-02-09 パナソニックＩｐマネジメント株式会社 送信方法、受信方法、送信装置及び受信装置
US10225301B2 (en) * 2015-08-26 2019-03-05 Zhan Ma Method and apparatus for use of input messages in media transport to support interactive communications
US10116576B2 (en) 2015-10-19 2018-10-30 Samsung Electronics Co., Ltd. Methods and apparatus for random access of HEVC bitstream for MMT
WO2018006926A1 (en) * 2016-07-04 2018-01-11 Telefonaktiebolaget Lm Ericsson (Publ) A method, apparatus and system for handling an internet protocol packet
CN107801103B (zh) * 2016-08-29 2020-04-03 上海交通大学 异构网络下基于网络状况的多媒体资源自适应同步方法
KR102391799B1 (ko) * 2017-10-19 2022-04-29 삼성전자주식회사 유니캐스트　기반 멀티미디어 서비스 방법 및 장치
CN109688179B (zh) * 2017-10-19 2021-06-22 华为技术有限公司 通信方法和通信装置
CN110505494B (zh) * 2018-05-18 2022-07-01 杭州海康威视数字技术股份有限公司 去除网络抖动的方法及装置
CN111447026B (zh) * 2019-01-17 2021-09-14 华为技术有限公司 处理数据的方法和处理数据的装置
FR3100412B1 (fr) * 2019-09-04 2021-08-06 Sagemcom Broadband Sas Procédé de décodage d’un flux d’entrée audio/vidéo
CN111400653A (zh) * 2020-03-05 2020-07-10 江西师范大学 一种基于多路径传输系统的鲁棒性分析模型测评方法
CN111800491A (zh) * 2020-06-23 2020-10-20 成都完美时空网络技术有限公司 一种数据传输方法、系统、计算设备及存储介质
CN113010538A (zh) * 2021-03-26 2021-06-22 和芯星通科技(北京)有限公司 一种卫星数据的管理方法
KR102589864B1 (ko) * 2023-02-16 2023-10-16 (주)유유코리아 음향 동기화 기술이 적용된 디지털 음향의 무선 WiFi 전송 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040475A (zh) * 2004-10-06 2007-09-19 诺基亚公司 对前向纠错帧进行组合
US20070253449A1 (en) * 2005-12-22 2007-11-01 Arnab Das Methods and apparatus related to determining, communicating, and/or using delay information
CN101584221A (zh) * 2006-12-20 2009-11-18 汤姆森研发基金公司 在iptv系统中使用低比特率流的视频数据丢失恢复
US20110154161A1 (en) * 2009-12-18 2011-06-23 Electronics And Telecommunications Research Institute Forward error correction (fec) encoding and decoding method of variable length packet based on three-dimensional storage apparatus
CN102215402A (zh) * 2010-04-09 2011-10-12 索尼公司 信息处理设备、方法和程序

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5566208A (en) * 1994-03-17 1996-10-15 Philips Electronics North America Corp. Encoder buffer having an effective size which varies automatically with the channel bit-rate
JPH10229429A (ja) 1997-02-13 1998-08-25 Oki Electric Ind Co Ltd 通信ネットワークシステム
US6577621B1 (en) 1999-06-22 2003-06-10 Ericsson Inc. System and method for providing high-speed local telecommunications access
GB9929794D0 (en) 1999-12-16 2000-02-09 Nokia Networks Oy Data transmission apparatus
DE60104353T2 (de) * 2000-04-07 2005-07-21 Ntt Docomo Inc. Verfahren und Einrichtung zur Reduktion des Verzögerungsjitters in der Datenübertragung
CA2417863A1 (en) 2000-08-03 2002-02-14 Unicru, Inc. Electronic employee selection systems and methods
JP3857533B2 (ja) 2001-03-21 2006-12-13 株式会社日立製作所 信号受信装置及び信号受信方法
AU2003249115A1 (en) * 2002-07-16 2004-02-02 Nokia Corporation Method for enabling packet transfer delay compensation in multimedia streaming
US7787539B2 (en) * 2002-07-17 2010-08-31 Broadcom Corporation Decoding and presentation time stamps for MPEG-4 advanced video coding
KR100994940B1 (ko) * 2002-07-19 2010-11-19 코닌클리케 필립스 일렉트로닉스 엔.브이. 전송 매체를 통해 송신기로부터 수신기로 데이터 패킷들을 송신하는 방법 및 전송 매체를 통해 상호 결합된 송신기 및 수신기를 포함하는 전송 시스템
US7228422B2 (en) 2002-10-17 2007-06-05 Matsushita Electric Industrial Co., Ltd. Packet transmission/reception device
US20040117858A1 (en) * 2002-12-12 2004-06-17 Boudreau Paul A. Data enhanced multi-media system for an external device
US7474624B2 (en) * 2003-05-29 2009-01-06 Motorola, Inc. Method and apparatus for reducing delay jitter
JP2005136464A (ja) 2003-10-28 2005-05-26 Pioneer Electronic Corp データ出力装置、データ送信装置、データ処理システム、データ出力方法、データ送信方法、データ処理方法、それらのプログラム、および、それらのプログラムを記録した記録媒体
JP2005184580A (ja) 2003-12-22 2005-07-07 Sony Corp 通信システム、情報処理装置および方法、並びに、プログラムおよび記録媒体
US20050254508A1 (en) 2004-05-13 2005-11-17 Nokia Corporation Cooperation between packetized data bit-rate adaptation and data packet re-transmission
US7733919B2 (en) * 2004-07-12 2010-06-08 General Instrument Corporation Method and apparatus for processing transport stream packets to compensate for jitter
IL163092A (en) 2004-07-19 2010-11-30 Veraz Networks Ltd Processing of packets forwarded in communication networks
MX2007002483A (es) * 2004-08-30 2007-05-11 Qualcomm Inc Memoria intermedia sin oscilacion adaptiva para voz sobre ip.
US7522528B2 (en) * 2004-11-18 2009-04-21 Qvidium Technologies, Inc. Low-latency automatic repeat request packet recovery mechanism for media streams
WO2006106185A1 (en) * 2005-04-07 2006-10-12 Nokia Corporation Buffering in streaming delivery
US7613112B2 (en) * 2005-06-28 2009-11-03 Nokia Corporation Optimizing playback startup time of bursty real-time streams
JP4970284B2 (ja) * 2005-12-28 2012-07-04 パナソニック株式会社 送信装置、及び受信装置
US7746882B2 (en) * 2006-08-22 2010-06-29 Nokia Corporation Method and device for assembling forward error correction frames in multimedia streaming
US20080225838A1 (en) * 2007-03-15 2008-09-18 Nokia Corporation Common Rate Matching Slot for Variable Bit Rate Services
JP4919890B2 (ja) * 2007-07-11 2012-04-18 株式会社日立製作所 無線システム、基地局および移動局
US8340121B2 (en) * 2007-08-22 2012-12-25 Qualcomm Incorporated Method and apparatus for transmission of circuit switched voice over packet switched networks
KR101571145B1 (ko) * 2007-10-23 2015-11-23 톰슨 라이센싱 무선 근거리 네트워크들에서의 신뢰 가능한 멀티캐스트를 위해 병합된 자동 반복 요청으로 적응 순방향 에러 정정을 하기 위한 방법 및 장치
EP2099176A1 (en) * 2007-12-18 2009-09-09 Nokia Corporation Method and device for adapting a buffer of a terminal and communication system comprising such device
US9143810B2 (en) * 2008-03-13 2015-09-22 Telefonaktiebolaget L M Ericsson (Publ) Method for manually optimizing jitter, delay and synch levels in audio-video transmission
US20100011274A1 (en) 2008-06-12 2010-01-14 Qualcomm Incorporated Hypothetical fec decoder and signalling for decoding control
US7920475B2 (en) * 2008-12-15 2011-04-05 Verizon Patent And Licensing Inc. System and method for adaptive removal of delay jitter effect and low end-to-end delay
JP5284534B2 (ja) * 2009-03-16 2013-09-11 コニンクリジケ ケーピーエヌ エヌブィー 変更されたストリーム同期
CN101656682B (zh) * 2009-06-12 2011-09-21 中兴通讯股份有限公司 一种移动多媒体数据广播业务处理的方法及系统
JP2011023992A (ja) 2009-07-16 2011-02-03 Hitachi Consumer Electronics Co Ltd コンテンツ配信システム、再生装置、及び配信サーバ
EP2343845A3 (en) 2009-12-31 2011-10-19 Thomson Licensing Precise compensation of video propagation duration
EP3627798A1 (en) * 2010-01-27 2020-03-25 Koninklijke KPN N.V. Method, system and device for synchronization of media streams
JP2011223359A (ja) 2010-04-09 2011-11-04 Sony Corp 遅延制御装置、制御方法、及び通信システム
JP2012070322A (ja) 2010-09-27 2012-04-05 Hitachi Kokusai Electric Inc 映像信号ｉｐ伝送システム
EP2651125B1 (en) 2010-12-10 2017-05-31 Panasonic Corporation Transmitting device, receiving device, transmitting method and receiving method
KR20120084234A (ko) 2011-01-19 2012-07-27 삼성전자주식회사 Ｍｐｅｇ ｍｅｄｉａ ｔｒａｎｓｐｏｒｔ（ｍｍｔ）에서 ｍｍｔ ａｕ를 전송하는 방법
US8599827B2 (en) * 2011-10-21 2013-12-03 Telefonaktiebolaget Lm Ericsson (Publ) Methods and apparatuses for maintaining synchronization between a radio equipment controller and an item of radio equipment

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040475A (zh) * 2004-10-06 2007-09-19 诺基亚公司 对前向纠错帧进行组合
US20070253449A1 (en) * 2005-12-22 2007-11-01 Arnab Das Methods and apparatus related to determining, communicating, and/or using delay information
CN101584221A (zh) * 2006-12-20 2009-11-18 汤姆森研发基金公司 在iptv系统中使用低比特率流的视频数据丢失恢复
US20110154161A1 (en) * 2009-12-18 2011-06-23 Electronics And Telecommunications Research Institute Forward error correction (fec) encoding and decoding method of variable length packet based on three-dimensional storage apparatus
CN102215402A (zh) * 2010-04-09 2011-10-12 索尼公司 信息处理设备、方法和程序

Also Published As

Publication number Publication date
KR20150067348A (ko) 2015-06-17
CA2887997C (en) 2021-01-05
AU2013330649A1 (en) 2015-05-28
KR20210142767A (ko) 2021-11-25
KR102196710B1 (ko) 2020-12-31
CN109889535A (zh) 2019-06-14
AU2013330649B2 (en) 2017-01-12
US20190364082A1 (en) 2019-11-28
KR20200146045A (ko) 2020-12-31
US10356143B2 (en) 2019-07-16
RU2634908C2 (ru) 2017-11-08
CN110049011B (zh) 2021-12-03
US11381622B2 (en) 2022-07-05
JP6516674B2 (ja) 2019-05-22
KR102107716B1 (ko) 2020-05-08
MX2015004596A (es) 2015-07-14
WO2014058237A1 (en) 2014-04-17
RU2015117519A (ru) 2016-12-10
US10382515B2 (en) 2019-08-13
CA2887997A1 (en) 2014-04-17
EP2907312A4 (en) 2016-05-25
CN109889535B (zh) 2021-12-07
EP2907312B1 (en) 2019-05-29
KR102411983B1 (ko) 2022-06-22
EP3554086A1 (en) 2019-10-16
KR102328556B1 (ko) 2021-11-19
EP2907312A1 (en) 2015-08-19
CN104782133A (zh) 2015-07-15
AU2013330649A2 (en) 2015-08-06
KR20200049900A (ko) 2020-05-08
JP2015536592A (ja) 2015-12-21
MX341787B (es) 2016-09-02
US20140098811A1 (en) 2014-04-10
US20160255130A1 (en) 2016-09-01
CN104782133B (zh) 2019-04-05

Similar Documents

Publication Publication Date Title
CN104782133B (zh) 用于媒体数据递送控制的方法和装置
EP3127287B1 (en) Signaling and operation of an mmtp de-capsulation buffer
CN112637144B (zh) 根据mmt协议传送与媒体数据有关的信息的装置和方法
JP6976276B2 (ja) レートペーシングのためにバッファを管理する装置及び方法
Kim et al. An efficient delay-constrained ARQ scheme for MMT packet-based real-time video streaming over IP networks
JP6970124B2 (ja) Ｍｍｔｐパケットを送受信する方法及びその装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant