CN109068155B - 传送媒体数据的设备以及接收媒体数据的设备 - Google Patents

传送媒体数据的设备以及接收媒体数据的设备 Download PDF

Info

Publication number
CN109068155B
CN109068155B CN201810725263.7A CN201810725263A CN109068155B CN 109068155 B CN109068155 B CN 109068155B CN 201810725263 A CN201810725263 A CN 201810725263A CN 109068155 B CN109068155 B CN 109068155B
Authority
CN
China
Prior art keywords
time
layer
media data
media
timing information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810725263.7A
Other languages
English (en)
Other versions
CN109068155A (zh
Inventor
柳政柱
金昌基
金泰廷
郑秢昈
洪镇佑
徐光德
李洪来
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Electronics and Telecommunications Research Institute ETRI
Original Assignee
Electronics and Telecommunications Research Institute ETRI
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Electronics and Telecommunications Research Institute ETRI filed Critical Electronics and Telecommunications Research Institute ETRI
Publication of CN109068155A publication Critical patent/CN109068155A/zh
Application granted granted Critical
Publication of CN109068155B publication Critical patent/CN109068155B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23602—Multiplexing isochronously with the video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605—Creation or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614—Multiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4342—Demultiplexing isochronously with video sync, e.g. according to bit-parallel or bit-serial interface formats, as SDI
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4343—Extraction or processing of packetized elementary streams [PES]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Synchronisation In Digital Transmission Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Databases & Information Systems (AREA)

Abstract

提供了用于传送和接收媒体数据的方法和设备，其能提供从基于MMT系统的媒体传送服务传送的、并且用于及时同步媒体和媒体的播出时间所需的D‑层定时信息。所述用于传送媒体数据的设备包括用于生成传递层分组(D‑层分组)的分组化器，其对封装层数据(E‑层数据)进行分组化以包括定时信息，其中该定时信息包括采样时间信息和传送处理延迟信息。

Description

传送媒体数据的设备以及接收媒体数据的设备
本申请是申请日为2012年09月21日、申请号为201280057672.5、发明名称为“用于活动画面专家组媒体传输系统的传送媒体数据的方法和设备、以及接收媒体数据的设备和方法”的发明专利申请的分案申请。
技术领域
本发明涉及用于传送和接收媒体数据的设备和方法，并更具体地，涉及用于MPEG媒体传输(MMT)系统的传送和接收媒体数据所需的传递层(D-层)的定时信息。
背景技术
MPEG媒体传输(MMT)是MPEG系统子工作组开始开发的新标准技术。现有MPEG-2系统已将MPEG-2传输流(TS)技术标准化为用于在当前广泛使用的广播网络中传送AV内容所需要的分组化、同步、多路复用等的功能的标准。然而，MPEG-2TS在其中网络基于因特网协议(IP)的分组传递环境中效率低。所以，ISO MPEG已在考虑新媒体传送环境和将来期望的媒体传送环境的情况下认识到新媒体传送标准的必要性，并已开始MMT标准化。
图1是示出了MMT系统的层级结构的概念图并示出了功能架构。该层级结构被配置为主要包括诸如封装层(E-层)、传递层(D-层)、信令层(S-层)等的三层。本发明中设想的定时信息是D-层中需要的功能。MMT的D-层的重要功能之一在发送器处向接收终端传送在为MMT分组的生成和传送所准备的D-层分组化处理期间生成的重要定时信息。可在接收器处连同E-层定时信息一起使用传送的定时信息。这是为了在维持媒体之间的同步的同时播放媒体。所以，本发明可包括用于在基于MMT系统的媒体服务中的媒体之间提供精确时间同步的D-层定时信息、和使用该定时信息的同步方法。
作为用于传送与MMT的定时模型类似的在媒体传送处理期间生成的重要时间信息的现有技术，存在在MPEG-2系统技术中采用的DTS、基于PTS的定时模型、以及RTP协议中提供的基于RTP时间戳和NTP时间戳信息的定时模型。
更详细地描述，现有技术中已开发的用于传送媒体的定时模型主要具有两类。首先，存在MPEG-2系统技术，以及其次，存在使用实时传输协议(RTP)和RTP控制协议(RTCP)的组合的方法。在MPEG-2系统中，使用呈现时间戳(PTS)和解码时间戳(DTS)定时信息作为用于配置定时模型的定时信息，以便确定媒体播出(playout)时间。在混合使用RTP和RTCP的方法的情况下，可同时使用RTP中记录的RTP时间戳信息以及RTCP发送器报告(SR)中记录的网络时间协议(NTP)时间戳。
MPEG-2系统技术提出了用于通过诸如广播网络的稳定传送网络来传送压缩媒体的定时模型。MPEG-2系统一般是为了数字广播服务的目的而开发的标准，使得将传送的MPEG-2传输流(TS)通过其中信道质量相对稳定的作为电路交换网的广播网而传送到接收器。所以，传送信道中经历的MPEG-2TS分组的分组延迟时间相对短和恒定，并且用于顺序处理到达接收器的TS分组的定时模型相对稳定地操作。然而，在除了广播网之外的IP网的情况下，传送的TS分组所经历的到达延迟时间的间隔非常不规则，并所以，难以稳定维持MPEG-2系统技术所采用的定时模型。
在基于RTP/RTCP的定时模型的情况下，RTP分组的报头中记录的RTP时间戳代表特定媒体流的内部时间顺序关系。所以，为了提供不同媒体流之间的同步，存在传送与挂钟对应的定时信息的需求。用于实现以上目的的传送到终端的定时信息是NTP时间戳。NTP时间戳通过在RTCP发送器报告(SR)分组上携带而传送，并在具有预定周期的同时重复传送。RTCP SR分组是与用于媒体传送的RTP流分离传输的流，并且结果，增加网络的业务负担，并且由于UDP端口以及服务器/终端需要管理的流的数目增加，所以传送和接收系统的操作复杂。
所以，在已重新标准化以便解决这些方法的问题的MMT技术的D-层中，存在对于能够向接收终端有效传送在为MMT分组传送而准备的D-层分组化处理期间生成的重要时间信息的定时模型的需求。
发明内容
本发明可包括能够向接收终端有效传送在为MMT技术的D-层中的MMT分组传送准备的D-层分组化处理期间生成的重要时间信息的简单定时模型、以及操作该定时模型所需的定时信息。所以，可能通过设计要从MMT系统的D-层提供的定时信息，来实现在基于MMT系统的媒体传送服务中的传送媒体之间的精确时间同步。
本发明提供了用于传送媒体数据的设备和方法，其能够提供在基于MMT系统的媒体传输服务中的传送媒体的播出时间、以及媒体之间的时间同步所需的D-层定时信息。
本发明还提供了用于接收媒体数据的设备和方法，其能够提供在基于MMT系统的媒体传输服务中的传送媒体的播出时间、以及媒体之间的时间同步所需的D-层定时信息。
在一个方面中，一种用于传送媒体数据的设备包括：分组化器，用于对封装层数据(E-层数据)进行分组化，以生成包括定时信息的传递层分组(D-层分组)，该定时信息包括采样时间信息和发送器处理延迟。该设备可进一步包括：编码器，用于编码该媒体数据以生成媒体流；缓冲器，用于存储编码后的媒体流；封装器，用于封装编码后的媒体流以生成E-层数据；和发射器，用于传送分组化后的D-层分组。该采样时间信息可以是网络时间协议(NTP)时间戳格式，并包括秒部分和秒分数部分，以及所述秒部分可具有与32比特和16比特中的任一个对应的尺寸。该发送器处理延迟可包括在根据采样时间信息的采样时间之后、直到生成D-层分组并开始其传送的时间的延迟时间信息。
在另一方面中，一种用于接收媒体数据的设备包括：解分组化器，用于对传递层分组(D-层分组)进行解分组化，以生成封装层数据(E-层数据)并提取定时信息，该定时信息包括采样时间信息和发送器处理延迟。所述用于接收媒体数据的设备可进一步包括：接收器，用于接收传递层分组(D-层分组)；解封装器，用于对E-层数据进行解封装以生成编码后的媒体流；缓冲器，用于存储编码后的媒体流；解码器，用于对编码后的媒体流进行解码；和渲染缓冲器，用于重新排列解码后的媒体数据用于显示。所述用于接收媒体数据的设备可进一步包括：控制器，用于确定传递时间，该传递时间表示用于传送媒体数据的设备基于采样时间信息和发送器处理延迟来生成D-层分组、并开始传送生成的D-层分组的时间。该控制器可测量表示D-层分组到达用于接收媒体数据的设备的到达时间，并基于到达时间和传送时间来附加确定传送延迟。该控制器可基于发送器处理延迟以及发送器处理延迟中包括的接收器处理延迟，来确定接收器处理延迟，以便恒定维持延迟时间的总和。其间，该控制器可使用采样时间信息和发送器处理延迟，以便调整从用于传送媒体数据的不同设备接收的媒体数据的同步。
在另一方面中，一种用于传送媒体数据的方法包括：对封装层数据(E-层数据)进行分组化，以生成包括定时信息的传递层分组(D-层分组)，其中该定时信息包括采样时间信息和发送器处理延迟。所述传送媒体数据的方法可进一步包括：编码该媒体数据以生成媒体流；存储编码后的媒体流；封装编码后的媒体流以生成E-层数据；和传送分组化后的D-层分组。该采样时间信息可以是网络时间协议(NTP)时间戳格式，并可包括秒部分和秒分数部分，以及所述秒部分可具有与32比特和16比特中的任一个对应的尺寸。该发送器处理延迟可包括在根据采样时间信息的采样时间之后、直到生成D-层分组并开始其传送的时间的延迟时间信息。
在另一方面中，一种用于接收媒体数据的方法包括：对传递层分组(D-层分组)进行解分组化，以生成封装层数据(E-层数据)并提取定时信息，其中该定时信息包括采样时间信息和发送器处理延迟。所述用于接收媒体数据的方法可进一步包括：接收传递层分组(D-层分组)；对E-层数据进行解封装以生成编码后的媒体流；存储编码后的媒体流；对编码后的媒体流进行解码；和重新排列解码后的媒体数据用于显示。所述接收媒体数据的方法可进一步包括：确定传递时间，该传递时间表示用于传送媒体数据的设备基于采样时间信息和发送器处理延迟来生成D-层分组、并开始传送生成的D-层分组的时间。所述用于接收媒体数据的方法可进一步包括：测量表示D-层分组到达用于接收媒体数据的设备的到达时间，并基于到达时间和传送时间来附加确定传送延迟。所述用于接收媒体数据的方法可进一步包括：基于发送器处理延迟以及发送器处理延迟中包括的接收器处理延迟来确定接收器处理延迟，以便恒定维持延迟时间的总和。其间，可使用采样时间信息和发送器处理延迟，以实现从用于传送媒体数据的不同设备接收的媒体数据的同步。
附图说明
图1是示出了MMT层级结构的概念图。
图2是示出了在MMT的D-层报头中记录的基本定时信息的图。
图3是示出了根据本发明示范实施例的用于传送媒体数据的设备的配置的框图。
图4是示出了在用于传送媒体数据的设备中维持媒体之间的精确同步所需要考虑的主要时间信息的图。
图5是示出了用于选择图2的采样定时信息的秒部分的长度的方法的图。
图6是示出了根据本发明示范实施例的用于接收媒体数据的设备的配置的框图。
图7是示出了在用于接收媒体数据的设备中维持媒体之间的精确同步所需要考虑的主要时间信息的图。
图8是示出了在本发明的示范实施例中使用的定时信息之间的时间相关性的图。
图9是根据本发明示范实施例的用于传送媒体数据的方法的流程图。
图10是根据本发明示范实施例的用于接收媒体数据的方法的流程图。
具体实施方式
由于本发明可以按照各种方式修改并且具有几个示范实施例，所以特定示范实施例将在附图中示出并详细描述。
然而，应理解的是，本发明不限于特定示范实施例，而是包括本发明的精神和范围中包括的所有修改、等效和替换。
说明书中使用的术语“第一”、“第二”等可用来描述各个组件，但是这些组件不应被解释为限于这些术语。即，这些术语用来区分一个组件与另一组件。所以，第一组件可被称为第二组件，并且第二组件可被称为第一组件。术语“和/或”包括多个项目的组合或多个项目中的任一个。
应理解的是，当一个元件被称为“连接到”或“耦接到”另一元件时，其可直接连接或直接耦接到另一元件，或者可在其间插入有其他元件的情况下连接到或耦接到另一元件。另一方面，应理解的是，当一个元件被称为“直接连接到”或“直接耦接到”另一元件时，其可在其间不插入有其他元件的情况下连接到或耦接到另一元件。
使用本说明书中使用的术语，仅为了描述特定示范实施例而不是限制本发明。单数形式意欲包括复数形式，除非上下文按照别的方式进行了清楚指明。将进一步理解的是，该说明书中使用的术语“包括”或“具有”指定阐明的特征、步骤、操作、组件、部分、或其组合的存在，但是不排除一个或多个其他特征、数字、步骤、操作、组件、部分、或其组合的存在或添加。
除非按照别的方式指明，否则应理解的是，包括技术和科学术语的说明书中使用的所有术语和本领域技术人员理解的含义具有相同含义。必须理解，字典中定义的术语和现有技术的上下文中的含义相同，并且它们不应被理想或过分正式地定义，除非上下文按照别的方式进行了清楚指明。
其后，将参考附图来更详细地描述本发明的示范实施例。为了促进在描述本发明时对本发明的一般理解，贯穿附图中，将使用相同的附图标记来描述相同组件，并且将省略相同组件的重复描述。
MMT层级结构
图1是示出了MMT层级结构的概念图。
参考图1，MMT层包括封装层、传递层和S层的功能区域。MMT层在传输层上操作。
封装层(E-层)扮演传输的媒体的诸如分组化、分段、同步、多路复用等的角色。
E-层可由MMT E.1层、MMT E.2层、和MMT E.3层配置，如图1中所示。
E.3层封装从媒体编解码器A层提供的媒体分段单元(MFU)，以生成M-单元。
MFU可具有独立于任何特定编解码器的格式，以便携带可在媒体解码器中独立消耗的数据单元。MFU可以是例如画面或视频片段。
M-单元可由一个或多个MFU配置，并可具有独立于特定编解码器的格式，以便携带一个或多个存取单元。
E.2层封装在E.3层中生成的M-单元，以生成MMT资产。
作为由来自单一数据源的一个或多个M-单元配置的数据实体的MMT资产是其中定义组成信息和传输特性的数据单元。MMT资产可对应于分组化基本流(PES)，并可对应于例如视频、音频、节目信息、MPEG-U窗口小部件、JPEG图像、MPEG 4文件格式、MPEG传输流(M2TS)等。
E.1层封装在E.2层中生成的MMT资产，以生成MMT包装。
MMT包装可由一个或多个MMT资产连同诸如组成信息和传输特性的附加信息配置。该组成信息包括关于MMT资产之间的关系的信息，并且当一个内容由多个MMT包装配置时，该组成信息可进一步包括示出多个MMT包装之间的关系的信息。该传输特性可包括确定MMT资产或MMT分组的传递条件所需的传输特性信息，例如业务描述符参数和QoS描述符。MMT包装可对应于MPEG-2TS的节目。
传递层可执行通过例如网络传送的媒体的网络流多路复用、网络分组化、QoS控制等。
传递层(D-层)可由MMT D.1层、MMT D.2层、和MMT D.3层配置，如图1中所示。
D.1-层接收在E.1层中生成的MMT包装，以生成MMT有效载荷格式。MMT有效载荷格式是用于传送MMT资产、并传送由MMT应用协议或诸如RTP的其他现有应用传输协议消耗的信息的有效载荷格式。MMT有效载荷可包括MFU的分段连同诸如AL-FEC的信息。
D.2-层接收在D.1-层中生成的MMT有效载荷格式，以生成MMT传输分组或MMT分组。MMT传输分组或MMT分组是用于MMT的应用传输协议而使用的数据格式。
D.3-层提供通过交叉层(cross-layer)在层之间交换信息的功能以支持QoS。例如，D.3-层可使用MAC/PHY层的QoS参数，来执行QoS控制。
S层执行信令功能。例如，S层可执行传送的媒体的诸如会话初始化/控制/管理、基于服务器和/或基于客户机的特技(trick)模式、服务发现、同步等的信令功能。
S-层可由MMT S.1层和MMT S.2层配置，如图1中所示。
S.1层可执行服务发现、媒体会话初始化/终止、媒体会话呈现/控制、传递(D)层和封装(E)层之间的对接功能。S.1层可定义用于媒体呈现会话管理的应用之间的控制消息的格式。
S.2层可定义关于流控制、传递会话管理、传递会话监视、误差控制、和混合网络同步控制的、在传递层(D-层)的传递端点之间交换的控制消息的格式。
S.2层可包括传递会话建立和释放、传递会话监视、流控制、误差控制、用于建立的传递会话的资源保留、用于混合传递环境下的同步的信令、以及用于自适应传递的信令，以便支持传递层的操作。可能提供发送器和接收器之间需要的信令。即，S.2层可提供发送器和接收器之间需要的信令，以便支持上述传递层的操作。另外，S.2层可执行传递层和封装层之间的对接功能。
本发明的示范实施例涉及用于传送和接收媒体数据的设备和方法，其能够获得关于MMT系统中的媒体的播出时间信息，并包括用于在维持媒体之间的时间同步的同时播放媒体的D-层定时信息。本发明的示范实施例可在MMT的D-层中记录在用于生成要在用于传送MMT的系统中传送的MMT分组的处理期间生成的重要时间信息，并可向接收终端传送记录的时间信息。用于接收媒体数据的设备可在基于D-层时间信息维持媒体之间的精确时间同步的同时播放媒体。为此，用于传送媒体数据的设备可在D-层报头中记录能在生成MMT分组时确保生成D-层报头的时间的重要时间信息。
图3是示出了根据本发明示范实施例的用于传送媒体数据的设备的配置的框图。如图3中所示，根据本发明示范实施例的用于传送媒体数据的设备300可包括用于对媒体数据进行编码以生成媒体流的编码器310、用于存储编码后的媒体流的缓冲器320、用于封装编码后的媒体流以生成封装层数据(E-层数据)的封装器330、用于对E-层数据进行分组化以生成包括定时信息的传递层分组(D-层分组)的分组化器340、以及用于传送分组化后的D-层分组的发射器350。在该配置中，D-层数据中包括的定时信息包括采样时间信息以及发送器处理延迟信息。
图2是示出了在MMT的D-层报头中记录的基本定时信息的图。另外，图4是示出了在用于传送媒体数据的设备中维持媒体之间的精确同步所需要考虑的主要时间信息的图。其后，将参考图2和4来详细描述使用定时信息中包括的采样时间信息和发送器处理延迟信息、在用于传送媒体数据的设备中维持同步的定时模型。
如图2中所示，在MMT的D-层数据的报头中记录的定时信息可包括采样时间信息(其后，称为“NTP(TSam)”)210以及发送器过程延迟信息220(其后，称为“发送器处理延迟”)220。定时信息可在MMT的E-层中生成以便被分配到在MMT分组的有效载荷上携带的MMT包装。这里，采样时间信息是网络时间协议(NTP)时间戳格式，并包括秒部分和秒分数部分，其中整数部分可具有与32比特或16比特中的任一个对应的尺寸。此外，发送器过程延迟信息包括在根据采样时间信息的采样时间之后、直到生成D-层分组并开始其传送的时间的延迟时间信息。
参考图4进行更详细描述，采样时间信息(TSam)210可包括用于按照压缩顺序输入到媒体编码器310的画面的采样时间。NTP(TSam)210将作为输入到MMT的编码器310的媒体帧的采样时间的与NTP(TSam)210对应的通用时间调整(UTC)时间表示为NTP时间戳格式。用于将NTP(TSam)210表示为NTP时间戳格式的方法可按照两种类型实现。
基本上，NTP时间戳格式可由总共64比特配置。64比特的长度可包括按照整数精度单位将秒时间表示为32比特的长度的秒部分、以及按照分数精度单位将秒时间表示为32比特的长度的秒分数部分。在表示整数精度的秒部分的情况下，当使用32比特的总长度时，可表示与1900年1月1日之后136年对应的UTC时间。然而，如果用于基于MMT系统的媒体服务的媒体同步而使用的时间间隔在几天之内，则这是足够的。所以，如果服务在服务开始之后的18小时之内完成，则仅使用下16比特而不使用32比特的总间隔是足够的。其间，为了使得时间同步的精度最大化，分数精度单位中的秒时间可根据原始格式使用全部32比特。
图5是示出了用于选择图2的采样定时信息的秒部分的长度的方法的图。如图5中所示，在根据本发明示范实施例的用于接收媒体数据的设备300中，用于表示用于NTP(TSam)210的NTP时间戳的方法可参考图5中所示方法来对于每一版本选择(16比特(秒部分)+32比特(秒分数部分)＝48比特)和(32比特(秒部分)+32比特(秒分数部分)＝64比特)之一。即，秒部分可具有与32比特和16比特中的任一个对应的尺寸。
发送器处理延迟(DS)220可表示在采样时间之后直到作为生成D-层分组并开始其传送的时间的传递时间(TDel)的、用于在传送媒体数据的设备300中处理所消耗的延迟时间。
图6是示出了根据本发明示范实施例的用于接收媒体数据的设备的配置的框图。
如图6中所示，根据本发明示范实施例的用于接收媒体数据的设备600可包括用于接收传递层分组(D-层分组)的接收器610、用于对D-层分组进行解分组化以生成封装层数据(E-层数据)并提取定时信息的解分组化器620、用于对E-层数据进行解封装以生成编码后的媒体流的解封装器630、用于存储编码后的媒体流的缓冲器640、用于解码编码后的媒体流的解码器650、以及用于重新排列解码后的媒体数据用于显示的渲染缓冲器660。
这里，定时信息可包括采样时间信息以及发送器处理延迟。定时信息与前述用于传送媒体数据的设备的定时信息相同。即，D-层定时信息可包括两个字段，诸如采样时间信息NTP(TSam)210、发送器处理延迟220等
图7是示出了在用于接收媒体数据的设备中维持媒体之间的精确同步所需要考虑的主要时间信息的图。将参考图6和7来更详细地描述根据本发明示范实施例的用于接收媒体数据的设备600。
在用于传送媒体数据的设备300中，在传递时间(TDel)传送的MMT D-层分组可经由发射器350、传送信道(未示出)、和接收器610，在传送延迟(DT)之后在到达时间(TArr)被输入到用于接收媒体数据的设备600的D层解分组化器620。继续地，MMT D-层分组在作为经由解分组化器620、E-层解封装器630、和缓冲器640消耗的延迟时间的接收器处理延迟(DS)之后被输入到解码器650，并可在解码时间(TDec)开始被解码。
MMT D-层分组被解码并在渲染缓冲器660中停留和渲染时间偏移(DO)一样多的时间，并由输出装置605在渲染时间(TRen)处播放。基于定时时间(TSam)来表示图4和7中示出的诸如传递时间(TDel)、到达时间(TArr)、解码时间(TDec)等的定时信息，其由以下等式1表示。
[等式1]
TDel＝TSam+DS
TArr＝TSam+DS+DT
TDec＝TSam+DS+DT+DR
图8是示出了在本发明的示范实施例中使用的定时信息之间的时间相关性的图。将参考图8来描述在MMT系统的E-层和D-层中需要考虑的主要定时信息之间的时间相关性。
图8中示出的定时信息可通过一般在MPEG-2系统和RTP传输系统中使用的、按照90KHz的精度操作的采样时钟频率来表示。在定时信息之中，采样时间和渲染时间是可在MMT的E-层中提供的信息，并且传递时间和解码时间能基于能在D-层中提供的定时信息来导出。到达时间可通过在用于接收媒体数据的设备中使用UTC时间来实际测量。当使用测量的到达时间和与D-层中提供的传递时间对应的UTC时间信息时，能精确计算传送延迟值。
其后，将描述允许根据本发明示范实施例的用于接收媒体数据的设备600使用图4、7和8中示出的定时信息来实现精确媒体同步的方法。
为了在执行基于MMT系统的端到端终端之间(即，用于传送媒体数据的设备和用于接收媒体数据的设备之间)的同步的同时、无缝提供媒体服务，发送器处理延迟(DS)、传送延迟(DT)、和接收器处理延迟(DR)的总和需要维持为以下等式2表示的常数值DTot。
[等式2]
DS+DT+DR＝DTot
在以上等式2中，DS是在处理用于传送媒体数据的设备300的处理期间预先生成的延迟时间，DT是在通过网络的传送处理期间预先生成的延迟时间，使得用于接收媒体数据的设备600可适当地控制DR值以恒定维持DTot。
可考虑到消费者经历的服务延迟时间，来将DTot参数的尺寸确定为适当值。DTot参数在媒体服务的初始步骤由MMT的S-层基于信令过程从服务器传送到用于接收媒体数据的设备600，并所以，在认真执行媒体传送服务之前被用于接收媒体数据的设备600先前知道。
用于传送媒体数据的设备300可在MMT分组的D-层报头中记录图2中示出的NTP(TSam)210和DS 220，以传送MMT D-层分组。这里，如图6中所示，用于接收媒体数据的设备600可进一步包括控制器670，用于确定传递时间，该传递时间表示用于传送媒体数据的设备300基于NTP(TSam)210和DS 220生成D-层分组并开始传送生成的D-层分组的时间。即，在接收MMT D-层分组的用于接收媒体数据的设备600中，控制器670可基于以下等式3来计算与传递时间(TDel)对应的UTC时间的NTP格式所表示的时间值。
[等式3]
NTP(TDel)＝NTP(TSam)+DS/90,000
在以上等式3中，假设使用在MPEG-2系统和RTP传输系统中一般使用的按照90KHz精度操作的采样时钟频率。即使当采用具有除了90KHz精度之外的精度的采样时钟频率时，也能应用相同原理。
传送延迟(DT)意味着图4的传递时间(TDel)和图7的到达时间(TArr)之间经过的时间。可在MMT D-层分组到达接收器610之后测量到达时间(TArr)，并且与该时间对应的UTC时间可通过作为NTP格式的NTP(TArr)来表示。
这里，控制器670测量表示D-层分组到达用于接收媒体数据的设备600的时间的到达时间，并可基于到达时间和传送时间来附加确定传送延迟。即，用于接收媒体数据的设备600的控制器670使用测量的NTP(TArr)和在等式3中计算的NTP(TDel)值，以基于以下等式4来计算传送延迟(DT)。
[等式4]
DT＝(NTP(TArr)-NTP(TDel))×90,000
这里，控制器670可基于在发送器处理延迟中包括的发送器处理延迟(DS)和传送延迟(DT)来确定接收器处理延迟(DR)，以便恒定维持延迟时间的总和(DTot)。即，满足等式2的DR值可基于以下等式5、根据在MMTD-层分组中记录并传递的DS值、以及通过以上等式4而获得的DT值而确定。
[等式5]
DR＝DTot-(DS+DT)
用于接收媒体数据的设备600的控制器670可使用DR值来导出在对压缩的帧数据进行解码之前保留在缓冲器640中的精确时间，并可由此在精确满足解码时间(TDec)的同时处理MMT数据。在TDec处执行解码之后获得的解压后的帧数据可在渲染缓冲器660中保留和渲染时间偏移(DO)一样长的时间之后，在渲染时间(TRen)由输出装置605播放。
其间，上面提出的方法可简单匹配从相同服务器传送的多个媒体流之间的同步以及从不同服务器(即，用于传送媒体数据的设备)传送的多个媒体流之间的同步。即，控制器670可使用采样时间信息以及发送器处理延迟，以便调整从用于传送媒体数据的不同设备接收的媒体数据的同步。例如，当多视图视频的左视图和右视图经由不同服务器传送到特定终端时，接收终端在使得左视图和右视图同步的同时，处理通过不同路径接收的左视图和右视图。当执行根据所描述的本发明的示范实施例的处理时，能实现平滑同步。
作为另一示例，即使当可将视频流和音频流从不同服务器传送到特定终端时，也可通过所描述的本发明的实施例来简单执行视频流和音频流之间的边缘同步(lip-synchronization)。所以，所描述的本发明的示范实施例可非常有效地用来在其中通过各种信道路径来实况(live)传送多个媒体的混合传递环境下提供同步。
图9是根据本发明示范实施例的用于传送媒体数据的方法的流程图。
如图9中所示，根据本发明示范实施例的用于传送媒体数据的方法可包括编码媒体数据以生成媒体流(S910)，存储编码后的媒体流(S920)，封装编码后的媒体流以生成封装层数据(E-层数据)(S930)，对E-层数据进行分组化以生成包括定时信息的传递层分组(D-层分组)(S940)，并传送分组化后的D-层分组(S950)。这里，定时信息可包括采样时间信息和发送器处理延迟。
这里，采样时间信息是网络时间协议(NTP)时间戳格式，并包括秒部分和秒分数部分，其中整数部分可具有与32比特或16比特中的任一个对应的尺寸。此外，发送器过程延迟信息包括在根据采样时间信息的采样时间之后、直到生成D-层分组并开始其传送的时间的延迟时间信息。
图10是根据本发明示范实施例的用于接收媒体数据的方法的流程图。
如图10中所示，根据本发明示范实施例的用于接收媒体数据的方法首先接收传递层分组(D-层分组)(S1010)。此外，D-层分组可被解分组化以生成封装层数据(E-层数据)并提取定时信息(S1020)。这里，定时信息可包括采样时间信息和发送器处理延迟。接下来，可通过对E-层数据解封装而生成编码后的媒体流(S1030)。
当完成定时信息的提取时，可确定传递时间，该传递时间表示用于传送媒体数据的设备基于定时信息中包括的采样时间信息和发送器处理延迟而生成D-层分组、并开始传送生成的D-层分组的时间(S1040)。另外，可测量表示D-层分组到达用于接收媒体数据的设备的时间的到达时间，并可基于到达时间和传送时间来确定传送延迟(S1050)。其后，可基于发送器处理延迟中包括的发送器处理延迟时间和接收器处理延迟，来确定接收器处理延迟(S1060)，以便恒定维持延迟时间的总和。
接下来，可存储编码后的媒体流(S1070)，可对编码后的媒体流进行解码(S1080)，并可重新排列解码后的媒体数据用于显示(S1090)。
依照根据本发明示范实施例的用于传送媒体数据的设备和方法以及用于接收媒体数据的设备和方法，可能提供基于MMT系统的媒体传输服务中的媒体的播出时间、以及用于媒体之间的时间同步的定时信息。使用本发明的示范实施例所提出的MMT的D-层定时信息、连同代表在E-层中提供的媒体帧的编码器输入时间的采样时间、和代表媒体帧的播出时间的渲染时间，来在维持接收终端处的媒体之间的精确时间同步的同时实现该服务。
尽管已结合这些实施例示出和描述了本发明，但是本领域技术人员将清楚的是，可进行修改和变型，而不脱离所附权利要求限定的本发明的精神和范围。

Claims (12)

1.一种用于传送媒体数据的设备，包括：
分组化器，用于对封装层数据进行分组化，以生成包括定时信息的传递层分组，
其中使用该定时信息用于进行自适应延迟解码，该定时信息用于来自不同传送设备的媒体数据的流之间的时间同步，
其中，该定时信息包括采样时间信息和发送器处理延迟，其中该采样时间信息将与媒体数据的媒体帧的采样时间对应的通用时间调整UTC时间表示为网络时间协议NTP时间戳格式，和
其中定时信息被包括在传递层分组的报头中。
2.如权利要求1所述的设备，其中，所述采样时间信息包括秒部分和秒分数部分，所述秒部分具有与16比特或32比特对应的尺寸。
3.如权利要求1所述的设备，其中，所述定时信息还包括传递时间和解码时间。
4.如权利要求1所述的设备，还包括：
编码器，用于编码该媒体数据以生成媒体流；
缓冲器，用于存储编码后的媒体流；
封装器，用于封装编码后的媒体流以生成该封装层数据；和
发射器，用于传送分组化后的传递层分组。
5.如权利要求1所述的设备，其中，该发送器处理延迟包括在根据采样时间信息的采样时间之后、直到生成传递层分组并开始其传送的时间的延迟时间信息。
6.一种用于接收媒体数据的设备，包括：
解分组化器，用于对传递层分组进行解分组化，以生成封装层数据并提取定时信息，
其中使用该定时信息用于进行自适应延迟解码，该定时信息用于来自不同传送设备的媒体数据的流之间的时间同步，
其中，该定时信息包括采样时间信息和发送器处理延迟，其中该采样时间信息将与媒体数据的媒体帧的采样时间对应的通用时间调整UTC时间表示为网络时间协议NTP时间戳格式，和
其中定时信息被包括在传递层分组的报头中。
7.如权利要求6所述的设备，其中，所述采样时间信息包括秒部分和秒分数部分，所述秒部分具有与16比特或32比特对应的尺寸。
8.如权利要求6所述的设备，其中，所述定时信息还包括传递时间和解码时间。
9.如权利要求6所述的设备，还包括：
接收器，用于接收传递层分组；
解封装器，用于对该封装层数据进行解封装以生成编码后的媒体流；
缓冲器，用于存储编码后的媒体流；
解码器，用于对编码后的媒体流进行解码；和
渲染缓冲器，用于重新排列解码后的媒体数据用于显示。
10.如权利要求6所述的设备，还包括：
控制器，用于确定传递时间，该传递时间表示用于传送媒体数据的设备基于采样时间信息和发送器处理延迟来生成传递层分组、并开始传送生成的传递层分组的时间。
11.如权利要求10所述的设备，其中该控制器测量表示传递层分组到达用于接收媒体数据的设备的时间的到达时间，并基于到达时间和传递时间来附加确定传送延迟。
12.如权利要求11所述的设备，其中，该控制器基于发送器处理延迟中包括的传送延迟和发送器处理延迟来确定接收器处理延迟，以便恒定维持延迟时间的总和。
CN201810725263.7A 2011-09-23 2012-09-21 传送媒体数据的设备以及接收媒体数据的设备 Active CN109068155B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR20110096491 2011-09-23
KR10-2011-0096491 2011-09-23
CN201280057672.5A CN103947215B (zh) 2011-09-23 2012-09-21 传送媒体数据的方法和设备、接收媒体数据的设备和方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201280057672.5A Division CN103947215B (zh) 2011-09-23 2012-09-21 传送媒体数据的方法和设备、接收媒体数据的设备和方法

Publications (2)

Publication Number Publication Date
CN109068155A CN109068155A (zh) 2018-12-21
CN109068155B true CN109068155B (zh) 2021-01-26

Family

ID=48435517

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201810725263.7A Active CN109068155B (zh) 2011-09-23 2012-09-21 传送媒体数据的设备以及接收媒体数据的设备
CN201810724208.6A Active CN109068154B (zh) 2011-09-23 2012-09-21 传送媒体数据的方法以及接收媒体数据的方法
CN201280057672.5A Active CN103947215B (zh) 2011-09-23 2012-09-21 传送媒体数据的方法和设备、接收媒体数据的设备和方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
CN201810724208.6A Active CN109068154B (zh) 2011-09-23 2012-09-21 传送媒体数据的方法以及接收媒体数据的方法
CN201280057672.5A Active CN103947215B (zh) 2011-09-23 2012-09-21 传送媒体数据的方法和设备、接收媒体数据的设备和方法

Country Status (3)

Country Link
US (1) US20140351874A1 (zh)
KR (2) KR101959260B1 (zh)
CN (3) CN109068155B (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102121479B1 (ko) * 2011-10-13 2020-06-11 삼성전자주식회사 멀티미디어 서비스 송수신 방법 및 장치
KR102331705B1 (ko) 2011-10-13 2021-12-01 삼성전자주식회사 멀티미디어 서비스 송수신 방법 및 장치
WO2015068352A1 (ja) * 2013-11-08 2015-05-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 送信方法、受信方法、送信装置、及び受信装置
JP6505413B2 (ja) * 2013-11-08 2019-04-24 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 送信方法、受信方法、送信装置、及び受信装置
EP3069489B1 (en) * 2013-11-13 2018-04-25 Telefonaktiebolaget LM Ericsson (publ) Methods and devices for media processing in distributed cloud
US10530828B2 (en) * 2014-03-31 2020-01-07 Samsung Electronics Co., Ltd. Method and apparatus for signaling and operation of low delay consumption of media data in MMT
CN106034262B (zh) * 2015-03-13 2021-01-22 中兴通讯股份有限公司 自适应流媒体处理方法及装置
CN106210708B (zh) 2015-04-30 2019-02-01 杭州海康威视数字技术股份有限公司 一种图像延迟的检测方法和系统
KR102519209B1 (ko) 2015-06-17 2023-04-07 한국전자통신연구원 스테레오스코픽 비디오 데이터를 처리하기 위한 mmt 장치 및 방법
KR102153554B1 (ko) 2015-06-17 2020-09-08 한국전자통신연구원 미디어 데이터의 처리를 위한 mmt 장치 및 방법
CN107852523B (zh) 2015-09-30 2021-01-19 苹果公司 用于在终端之间同步媒体渲染的方法、终端和设备
KR102421791B1 (ko) * 2016-05-26 2022-07-15 삼성전자주식회사 Mmt 네트워크 시스템에서 미디어 시간 정보를 전송 하는 방법 및 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1996897A (zh) * 2005-12-28 2007-07-11 中兴通讯股份有限公司 一种在rtp中实时检测网络传输时延的方法
CN101483782A (zh) * 2008-01-11 2009-07-15 株式会社日立制作所 数字广播接收装置以及数字广播接收方法
WO2009104869A1 (en) * 2008-02-20 2009-08-27 Electronics And Telecommunications Research Institute Method and apparatus for svc video and aac audio synchronization using npt

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06284148A (ja) * 1993-03-30 1994-10-07 Hitachi Ltd 動画通信制御方法及び通信制御装置
US6282250B1 (en) * 1999-05-05 2001-08-28 Qualcomm Incorporated Low delay decoding
US7088911B2 (en) * 2000-04-26 2006-08-08 Sony Corporation Recording apparatus and method, playback apparatus and method, and recording medium therefor
US7787539B2 (en) * 2002-07-17 2010-08-31 Broadcom Corporation Decoding and presentation time stamps for MPEG-4 advanced video coding
TW200509000A (en) * 2003-08-26 2005-03-01 Assetcore Technology Co Ltd Sample-and-hold method
US7496686B2 (en) * 2005-01-28 2009-02-24 Gencsus Localizing a remote event timestamp from a network device with an independent clock method and apparatus
US20070047590A1 (en) * 2005-08-26 2007-03-01 Nokia Corporation Method for signaling a device to perform no synchronization or include a synchronization delay on multimedia stream
US7724780B2 (en) * 2007-04-19 2010-05-25 Cisco Technology, Ink. Synchronization of one or more source RTP streams at multiple receiver destinations
KR100916505B1 (ko) * 2008-02-20 2009-09-08 한국전자통신연구원 정상 재생 타임을 이용한 스케일러블 비디오 코딩 정보와어드밴스드 오디오 코딩 정보의 동기화 지원 방법 및 장치
EP2292013B1 (en) 2008-06-11 2013-12-04 Koninklijke Philips N.V. Synchronization of media stream components
KR100986990B1 (ko) * 2008-09-30 2010-10-11 전자부품연구원 다중표준 모바일 방송 스트림 수신장치 및 그 방법
EP2368365A1 (en) * 2008-12-19 2011-09-28 Thomson Licensing Method for transport stream synchronizing in a multiplexer comprising an external coprocessor
JP5086285B2 (ja) * 2009-01-22 2012-11-28 株式会社日立製作所 映像配信システム，映像配信装置，及び同期補正処理装置
GB2476116A (en) * 2009-12-14 2011-06-15 Dublin Inst Of Technology Real-time VoIP transmission quality predictor and quality-driven de jitter buffer
JP5482178B2 (ja) * 2009-12-16 2014-04-23 ソニー株式会社 送信装置および方法、並びに、受信装置および方法
CN102860021B (zh) * 2010-04-20 2017-06-20 三星电子株式会社 用于传送和接收媒体数据的接口装置和方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1996897A (zh) * 2005-12-28 2007-07-11 中兴通讯股份有限公司 一种在rtp中实时检测网络传输时延的方法
CN101483782A (zh) * 2008-01-11 2009-07-15 株式会社日立制作所 数字广播接收装置以及数字广播接收方法
WO2009104869A1 (en) * 2008-02-20 2009-08-27 Electronics And Telecommunications Research Institute Method and apparatus for svc video and aac audio synchronization using npt

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于嵌入式操作系统的实时多媒体传输系统的可靠性研究;李鸿明;《中国优秀硕士学位论文全文数据库 信息科技辑》;20060715(第7期);I136-70 *

Also Published As

Publication number Publication date
KR101959260B1 (ko) 2019-03-18
CN103947215A (zh) 2014-07-23
CN109068154A (zh) 2018-12-21
KR102049907B1 (ko) 2019-11-28
KR20130032842A (ko) 2013-04-02
CN103947215B (zh) 2018-07-27
US20140351874A1 (en) 2014-11-27
CN109068154B (zh) 2021-01-26
KR20190029551A (ko) 2019-03-20
CN109068155A (zh) 2018-12-21

Similar Documents

Publication Publication Date Title
CN109068155B (zh) 传送媒体数据的设备以及接收媒体数据的设备
JP6887466B2 (ja) マルチメディア伝送システムにおけるパケットを伝送する装置
TWI668982B (zh) 用於多媒體和檔案傳輸的傳輸介面的方法及伺服器設備、及用於記錄相關指令於其上的電腦可讀取儲存媒體
KR102469676B1 (ko) Lct에 기초한 dash 포맷들을 이용하는 파일 포맷 기반 스트리밍
US11758209B2 (en) Video distribution synchronization
US20130173826A1 (en) Method of providing timing information using mmt signaling layer signaling for synchronizing mmt packet streams in mmt hybrid delivery service and method of synchronizing mmt packet streams in mmt hybrid delivery service
US20150181003A1 (en) Method and apparatus for transmitting and receiving packets in hybrid transmission service of mmt
KR102026266B1 (ko) 부호화된 미디어 데이터를 전송하는 장치에서의 네트워크 지터 추정 방법
KR20130009670A (ko) 엠엠티 시스템에서의 패킷 전송 장치 및 방법, 및 패킷 수신 장치 및 방법
KR101180540B1 (ko) 스트리밍 서비스 송/수신 장치 및 방법
KR20190018142A (ko) Mmt 전송 패킷의 설정 방법 및 전송 방법
WO2013098809A1 (en) Media stream rate reconstruction system and method
KR20130009671A (ko) 엠엠티 시스템에서의 패킷 전송 장치 및 방법, 및 패킷 수신 장치 및 방법
KR101920051B1 (ko) Ｍｍｔ 복합 전달 서비스에서 ｍｍｔ 패킷 스트림 동기화를 위한 타이밍 정보 제공 방법 및 ｍｍｔ 패킷 스트림 동기화 방법
WO2013042999A1 (ko) Ｍｍｔ 시스템을 위한 미디어 데이터 전송 장치 및 방법, 그리고 미디어 데이터 수신 장치 및 방법
KR20130032843A (ko) Ｍｍｔ 시스템을 위한 미디어 데이터 전송 장치 및 방법, 그리고 미디어 데이터 수신 장치 및 방법
KR20120084246A (ko) Ｍｐｅｇ 미디어 전송방법
KR20130058540A (ko) 하이브리드 전송시 동기화 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant