CN109313628B - 媒体传输的动态延迟均衡 - Google Patents

媒体传输的动态延迟均衡 Download PDF

Info

Publication number
CN109313628B
CN109313628B CN201780033944.0A CN201780033944A CN109313628B CN 109313628 B CN109313628 B CN 109313628B CN 201780033944 A CN201780033944 A CN 201780033944A CN 109313628 B CN109313628 B CN 109313628B
Authority
CN
China
Prior art keywords
media
delay
propagation delay
signal
output device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780033944.0A
Other languages
English (en)
Other versions
CN109313628A (zh
Inventor
E·古芬克尔
M·K·戴维斯
查尔斯·H·范杜森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Biamp Systems LLC
Original Assignee
Biamp Systems LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Biamp Systems LLC filed Critical Biamp Systems LLC
Publication of CN109313628A publication Critical patent/CN109313628A/zh
Application granted granted Critical
Publication of CN109313628B publication Critical patent/CN109313628B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04J—MULTIPLEX COMMUNICATION
    • H04J3/00—Time-division multiplex systems
    • H04J3/02—Details
    • H04J3/06—Synchronising arrangements
    • H04J3/0635—Clock or time synchronisation in a network
    • H04J3/0682—Clock or time synchronisation in a network by delay compensation, e.g. by compensation of propagation delay or variations thereof, by ranging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/22—Traffic shaping
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24—Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402—Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
    • H04N7/54—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal the signals being synchronous
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2368—Multiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/6437—Real-time Transport Protocol [RTP]

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Cable Transmission Systems, Equalization Of Radio And Reduction Of Echo (AREA)

Abstract

本公开的系统和方法提供媒体传输系统中的相关媒体信号的动态延迟均衡。方法包括接收多个相关媒体信号，沿不同媒体路径传输该相关媒体信号，计算媒体路径的未校正传播延迟，以及将每个相关媒体信号延迟与(未校正传播延迟的)最长传播延迟和相关媒体信号/媒体路径的未校正传播延迟之间的差值相关的量。可以响应于相关媒体信号/媒体路径中的至少一个的传播延迟的改变来执行计算未校正的传播延迟和延迟相关的媒体信号。附加地或备选地，可以在传输相关媒体信号的同时执行计算未校正传播延迟和延迟相关媒体信号。

Description

媒体传输的动态延迟均衡
相关申请
本申请要求于2017年5月31日提交的名称为“DYNAMIC DELAY EQUALIZATION FORMEDIA TRANSPORT(媒体传输的动态延迟均衡)”的序列号为No.15/610,158的美国专利申请和于2016年6月2日提交的名称为“DYNAMIC DELAY EQUALIZATION FOR MEDIA TRANSPORT(媒体传输的动态延迟均衡)”的序列号为No.62/344,614的美国临时专利申请的优先权，将上述申请的全部公开内容在此通过引用并入以用于所有目的。
技术领域
本公开涉及用于媒体传输的动态延迟均衡。
背景技术
当相关的音频和视频内容一起渲染(将要被同时观看)时，音频和视频信号需要时间对齐，否者观察者将识别到“唇型同步(lip sync)”错误。这个错误被称为唇型同步，因为当一个人的嘴唇的视觉与该人的语音的伴随声音的定时不匹配时，观察者敏锐地意识到它。唇型同步错误是由于音频和视频信号以不同的延迟量被呈现。通过延迟较早的信号(几乎总是音频信号)来校正该错误。
唇型同步错误是一个关注的问题，因为视频处理通常会导致比音频处理延迟明显更长的延迟。一些研究表明，在音频超前(超过)视频超过45毫秒(毫秒)时以及在音频滞后(跟在后面)视频超过125毫秒时，观察者会注意到唇型同步错误。ATSC(高级电视系统委员会)实施小组委员会IS-191的建议是将相关的音频和视频信号在-15ms(音频在前)到45ms(音频滞后)的范围内对齐。
此外，如果没有充分地在时间上对齐，则一起渲染的音频信号可能产生明显的延迟或回声。人类观察者将听到两个声音以足够短的延迟分开作为单个融合的听觉图像(哈斯效应)。最大延迟(称为回声阈值)根据声音和环境的类型而变化，并且可以在大约5-40ms的范围内变化。因此，一起渲染的音频信号可能需要小于约40ms的相对延迟以实现听觉融合。即使低于音频融合的阈值，如果相同的音频信号由产生几毫秒或更短的相对延迟的单独的换能器渲染，则可以听到梳状滤波效应。
发明内容
本公开的系统和方法提供媒体传输系统中的相关媒体信号的动态延迟均衡。方法包括接收多个相关媒体信号，沿不同媒体路径传输相关媒体信号，计算媒体路径的未校正传播延迟，以及将每个相关媒体信号延迟与最长传播延迟之间的差值相关的量(未校正传播延迟)和相关媒体信号/媒体路径的未校正传播延迟。相关媒体信号均来自共享源空间，并且指向共享观察空间。可以响应于至少一个相关媒体信号/媒体路径的传播延迟的改变来执行计算未校正的传播延迟和延迟相关的媒体信号。附加地或备选地，可以在传输相关媒体信号的同时执行计算未校正传播延迟和延迟相关媒体信号。
系统包括边缘输入设备和边缘输出设备，以接收和发送媒体信号。边缘输入设备和边缘输出设备被配置为沿着媒体路径在边缘输入设备和边缘输出设备之间传输媒体信号。媒体路径具有动态延迟元件以根据命令延迟媒体信号。边缘输入设备被配置将上游延迟信号(表征媒体信号所遇到的传播延迟)发送到边缘输出设备。边缘输出设备被配置为确定媒体路径中的媒体信号的未校正传播延迟。边缘输出设备被配置为交换与未校正的传播延迟有关的信息，以确定所有媒体信号的目标传播延迟(例如，未校正传播延迟的最大值)，并且被配置为命令动态延迟元件根据目标传播延迟与单独的媒体信号未校正传播延迟之间的差值来延迟单独的媒体信号。
附图说明
图1是本公开的媒体传输系统的示意图。
图2是本公开的媒体传输系统中的若干媒体路径的示意图。
图3是根据本公开的用于动态延迟均衡的方法的示意图。
图4是根据本公开的计算机化系统的示意图。
具体实施方式
对于广义的媒体信号集(其各自单独地可以包括音频信号和/或视频信号)，唇型同步错误校正可以被称为延迟均衡、同步和/或时间对齐。例如，延迟均衡可以包括向除了最慢的媒体信号之外的所有媒体信号添加延迟，使得所有媒体信号可以在时间上基本上对齐地呈现，而没有显著的同步错误。人类对错误的感知定义了显著错误。因此，延迟均衡可能需要知道或估计音频或视频信号的总传播延迟以及相关音频或视频信号的总传播延迟的差值，达到优于约50ms(±50ms)的准确度。在一些实施例中，准确度优于20ms，优于10ms，优于1ms，优于0.1ms，或优于0.01ms。本公开的系统和方法可以被配置为将相关的音频信号和视频信号对齐到优于50ms，优于10ms，或优于1ms。本公开的系统和方法可以被配置为将相关的音频信号对齐到优于10ms，优于1ms，优于0.1ms，或优于0.01ms。诸如所有音频信号或立体声音频信号之类的信号组可以独立地对齐，且然后该组与其他组或其他单独的信号对齐。
在系统配置和/或系统设计时，由于音频处理的性质(通常是小的和类似的延迟)，音频延迟可以是已知的或可估计的。例如，在系统设计和/或系统配置之前和/或期间，可以知道、表征和/或选择处理和传输的所有延迟。然而，诸如由于视频处理、可变长度音频处理和网络传输，一些延迟可能根据信号源、所应用的处理类型和/或网络架构而显著变化。在配置和/或设计时已知或可估计所有媒体信号的延迟的情况下，延迟均衡可称为静态延迟均衡。在至少一些延迟可能在运行时(在媒体传输系统的操作期间而不是在媒体传输系统的配置和/或设计期间)变化或改变的情况下，延迟均衡可以被称为动态延迟均衡。
在本公开的动态延迟均衡系统和方法中，相关媒体信号可以在运行时通过跟踪在运行时相关媒体信号的总传播延迟并且将个体化延迟施加于除了相关媒体信号中的最慢(最长传播延迟)相关媒体信号之外的所有相关媒体信号来进行同步。通常，相关媒体信号包括至少一个音频信号和至少一个视频信号。根据本公开的动态延迟均衡可以被称为自动动态延迟均衡，因为本公开的系统和方法提供了提供动态延迟均衡的机制，其几乎不需要用户干预(例如，在系统或方法的操作期间)。
当在本文中使用时，媒体信号是传送媒体信息的信号(通常是数字信号)。媒体信息可以是音频(可能包括多个音频通道，例如立体声，环绕声等)，视频，音频和视频，和/或关联数据(例如，隐藏式字幕，时间码等)。媒体信号的源可以是诸如摄像机、麦克风等的换能器，其产生表示物理环境的媒体信号。媒体信号的源可以是接收电子输入并发出媒体信号的接收器和/或解码器(例如，媒体服务器，音频接收器，视频接收器，音频-视频接收器和流媒体设备)。媒体信号可以使用数字通信协议和/或接口(例如，HDMI(高清多媒体接口)，SDI(串行数字接口)，显示端口(DisplayPort)，USB(通用串行总线)，火线(FireWire(IEEE1394))，IP(互联网协议)，UDP(用户数据报协议)，TCP(传输控制协议)，RTP(实时传输协议)，AES67(音频工程协会)，AVB(音频视频桥接)和AVB/TSN(音频视频桥接/时间敏感网络)来传送。媒体信号可以作为媒体流或其他形式的连续或准连续数据流传播。媒体流和数据流不一定是通过互联网、以太网或其他网络连接而来源或传输的数据。
如果媒体信号具有相同的起源和相同的目的地，则它们是相关的。具有相同起源的媒体信号起源于相同的物理空间、相同的环境和/或相同的设备中。例如，作为来自诸如媒体播放器、视频服务器、卫星接收器等的源的组合信号而被传送的媒体信号是具有相同起源的媒体信号。由观察相同事件的麦克风和摄像机产生的媒体信号是具有相同起源的媒体信号。来自视频媒体播放器源(DVD、卫星接收器等)的嵌入式音频与视频是具有相同起源的媒体信号。在本文中使用时，相关媒体信号的共同起源被称为共享源空间，并且可以被称为共享获取空间、统一源空间、共享定时环境和统一定时环境。具有相同目的地的媒体信号在相同的物理空间、相同的环境或相同的设备中被渲染，或者影响在相同的物理空间、相同的环境或相同的设备中渲染的音频和/或视频。例如，如果屏幕上的视频和来自扬声器的音频同时可观察，则显示在屏幕上的视频信号和由扬声器播放的音频信号具有相同的目的地。作为输出信号和/或流而组合、传输和/或编码在一起的媒体信号(例如，作为嵌入式音频和视频，多媒体文件等)具有相同的目的地。在本文中使用时，相关媒体信号的共同目的地被称为共享观察空间，并且可以被称为共享渲染空间、统一观察空间、共享渲染环境和统一渲染环境。因此，相关媒体信号源自共享源空间并且在共享观察空间中被渲染。
图1-4示出了用于媒体传输的动态延迟均衡的系统和方法。大体上，在附图中，可能包括在给定实施例中的元件以实线示出，而可选的元件或替代元件以虚线示出。然而，以实线示出的元件并非对于本公开的所有实施例都是必需的，并且在不脱离本公开的范围的情况下，可以从特定实施例中省略以实线示出的元件。用于相似或至少基本相似的目的的元件以在这些图中一致的数字标记。在每个附图中相同的数字和相应的元件可能不参考每个附图在此详细讨论。类似地，可能不在每个图中标记或示出所有元件，但是可以使用与其关联的附图标记来保持一致性。在不脱离本公开的范围的情况下，参考一个或多个附图讨论的元件、组件和/或特征可以包括在任何附图中和/或与任何附图一起使用。
图1是媒体传输系统10的示意图，其包括至少两个不同的媒体路径16，以将至少两个不同的媒体信号12从共享源空间26传输到共享观察空间28。因为媒体信号12起源于共享源空间26并且目的地是共享观察空间28，媒体信号12可以被称为相关媒体信号。每个媒体路径16包括在媒体路径的入口14处的边缘输入设备30和在媒体路径的出口24处的边缘输出设备34。尽管图1的示例仅示出了两个媒体路径16(第一媒体路径18和第二媒体路径20)，但是媒体传输系统10可以包括共享源空间26和共享观察空间28之间的多个媒体路径16。媒体路径16的数量可为能够用硬件和/或软件配置的。媒体传输系统10可以允许用户指定共享源空间26、共享观察空间28、哪些媒体信号相关、哪些媒体路径承载相关媒体信号12、哪些边缘设备在共享源空间26中具有入口和/或哪些边缘设备在共享观察空间28中具有出口。
入口14和出口24是到/来自媒体路径16的物理和/或逻辑连接，其允许媒体信号12进入/退出媒体路径16。媒体路径16可以具有多个入口14，用于将不同的媒体信号12输入到一个媒体路径16。另外或备选地，一个入口14可以接受多个媒体信号12。媒体路径16可以具有多个出口24，用于从一个媒体路径16输出不同的媒体信号12。另外或备选地，一个出口24可以发出多个媒体信号12。每个边缘输入设备30提供通向至少一个媒体路径16的至少一个入口14。每个边缘输出设备34呈现来自至少一个媒体路径16的至少一个出口24。
边缘输入设备30被配置为从共享源空间26通过关联的入口14接收关联的媒体信号12。相关媒体信号可以作为视听信号中的视频和嵌入式音频来起源，例如来自视频媒体文件、DVD视频媒体播放器等。关联的媒体信号可以源自传感器，例如观察相同事件的摄像机和/或麦克风。边缘输入设备30接收每个单独的媒体信号12(音频或视频信号)。单个边缘输入设备30可以接收多于一个媒体信号12和/或多于一种类型的媒体信号12(例如，音频信号，视频信号，嵌入式音频和视频信号)。
边缘输出设备34被配置为从相应的边缘输入设备30接收关联的媒体信号12。关联的媒体信号12可以直接或间接地在边缘输入设备30和边缘输出设备34之间传输。例如，媒体路径16可以包括在边缘输入设备30和边缘输出设备34之间的一个或多个中间设备38。作为另一个例子，媒体信号12可以通过网络结构64传输，如在此进一步讨论的那样。
在入口14和出口24之间的传输期间(例如，通过边缘输入设备30，通过边缘输出设备34，以及在边缘设备之间)，媒体信号12经历传播延迟。在本文中使用时，传播延迟包括处理和传输延迟。
至少一个媒体信号12通过与另一个媒体信号12不同的媒体路径16传输。通常，每个媒体信号12从(一个或多个)入口14通过不同的媒体路径16传输到(一个或多个)出口24，即使多于一个媒体信号12沿着从一个入口14到一个出口24的路径通过相同的一个设备或多个设备。如果在媒体路径之间存在一些差异的话，媒体路径16是不同的。例如，如果为下列情况中的至少一种：边缘输入设备30不同、边缘输出设备34不同、一个或多个中间设备38不同或者一个或多个设备内的处理不同，则媒体路径16是不同的。通常，不同媒体路径16中的媒体信号12经历不同的传播延迟(不包括动态延迟均衡的影响)。
边缘输出设备34还被配置为从上游设备或多个上游设备接收上游延迟信号36。上游延迟信号36与媒体信号12在其传送通过边缘输入设备30、中间设备38和/或网络或其他传输时所经历的传播延迟有关。上游延迟信号36可以指示延迟时间、等待时间和/或时间戳。延迟时间、等待时间和/或时间戳可以是绝对的(从测量的时段的开始到结束)或相对于给定事件、给定时间和/或给定媒体信号的。延迟时间、等待时间和时间戳均可以独立地表示为时间值和/或时钟的周期数。
至少媒体路径16内的边缘输入设备30被配置为估计和/或确定媒体信号12在其传送通过边缘输入设备30时经历的传播延迟(处理和传输延迟)。边缘输出设备34被配置为从边缘输入设备30(直接或通过中介，例如网络或中间设备38)接收传播延迟(或与传播延迟相关的值)。另外或备选地，中间设备38可以被配置为从边缘输入设备30或其他中间设备38接收上游延迟信号36并且通过将对象中间设备的传播延迟(估计或确定的)添加到上游设备或多个上游设备的传播延迟来修改上游延迟信号36。向上游延迟信号36添加传播延迟的每个设备还可以添加上游延迟信号的起源与对象设备之间的传播延迟的估计或确定。因此，上游延迟信号36从传输上游延迟信号的设备传送媒体信号12的总传播延迟的估计和/或确定直到传输点。
在图1的示例中，上游延迟信号36被示为在设备之间的独立信道中传播。任何或所有上游延迟信号36可以在与媒体信号12相同的介质、相同的信道和/或相同的端口中传输。通常，传输上游延迟信号36的边缘输入设备30和中间设备38为相应的设备处理的每个媒体信号12提供上游延迟信号。
边缘输出设备34还被配置为基于上游延迟信号36(其传送上游延迟)确定从入口14到出口24的未校正的传播延迟。未校正的传播延迟通常不包括由媒体传输系统10施加的用于对媒体信号12进行时间对齐的动态延迟(如本文中进一步描述的)。未校正的传播延迟还可以基于通过边缘输出设备34的媒体信号12的传播延迟和/或到共享观察空间28中的渲染点的媒体信号的传播延迟的估计和/或确定。因此，未校正的传播延迟可以包含估计的、已知的或以其他方式确定的媒体信号12从入口14到出口24和/或到媒体信号的最终呈现点的传播延迟。出口24之后的传播延迟可以包括传输延迟和渲染媒体信号的设备(例如，视频显示器)的媒体处理延迟(例如，视频处理延迟)。
媒体信号12可以通过媒体传输系统10的网络结构64传输。网络结构64可以具有固定或动态拓扑。例如，网络结构64可以是连接媒体传输系统10的各种设备的直接电缆网络。作为另一个例子，网络结构64可以包括和/或可以是AVB网络(例如，AVB/TSN网络)、CobraNet网络和/或AES67网络。
每个媒体路径16包括动态延迟元件40，其被配置为基于由延迟信号42传送的延迟命令来延迟媒体信号12。动态延迟元件40可为缓冲器、中继器(repeater)等。动态延迟元件40引入的可变延迟通常不反映在由边缘输出设备34确定的未校正传播延迟中。静态延迟，其为不受延迟信号42影响的延迟，可以反映在未校正传播延迟中。媒体路径16可以包括多个动态延迟元件40，在这种情况下，施加于每个媒体信号12的总延迟可以分布在媒体路径16的动态延迟元件40中。动态延迟元件40可以是媒体路径16中的独立的可编程延迟元件和/或可以并入边缘输入设备30、边缘输出设备34和/或一个或多个中间设备38中。
边缘输出设备34被配置为交换与由每个边缘输出设备34确定的未校正的传播延迟相关的延迟协调信号44。例如，每个边缘输出设备34可以向其他边缘输出设备34中的每一个提供其未校正的传播延迟。因此，每个边缘输出设备34可以能够获取所有未校正的传播延迟。附加地或备选地，媒体传输系统10可以包括动态延迟代理60，其可以从每个边缘输出设备34接收未校正的传播延迟(经由延迟协调信号44)。动态延迟代理60是媒体传输系统10的过程和/或设备。动态延迟代理60可以实现为代理、代理器(broker)、中央集权(central authority)、守护进程、服务等。
动态延迟代理60、边缘输出设备34中的至少一个和/或每个边缘输出设备34可以计算未校正的传播延迟的最大值(其可以被称为最长传播延迟和目标传播延迟)。也就是说，边缘输出设备34利用延迟协调信号44(直接或间接地通过动态延迟代理60)来确定最长(目标)传播延迟。动态延迟代理60或边缘输出设备34之一可以确立最长的传播延迟并将该值分发给剩余的边缘输出设备34。另外或备选地，每个边缘输出设备34可以使用相同方法来计算最长的传播延迟(值可以或可以不在边缘输出设备34之间交换或以其他方式分发)。
最长传播延迟和每个媒体信号12的未校正传播延迟之间的差值可以施加于相应的动态延迟元件40，以使除了最长被延迟的媒体信号之外的每个媒体信号被延迟与最长传播延迟匹配的总延迟。在要施加的延迟小于阈值(例如，小于50ms，20ms，10ms，1ms，0.1ms或0.01ms)的情况下，可以不将延迟传送到动态延迟元件40和/或动态延迟元件40可以不施加延迟。要由每个动态延迟元件40施加的延迟可以由动态延迟代理60和/或边缘输出设备34传送到动态延迟元件(通过延迟信号42)。每个边缘输出设备34可以接收最长传播延迟和/或最长传播延迟与该边缘输出设备34的未校正传播延迟之间的差值。
如果媒体路径16的任何元件改变传播延迟(例如，通过改变处理、源和/或传输)，则上游延迟信号36将修正的延迟传送到下游元件，直到由媒体路径16的边缘输出设备34接收和使用。边缘输出设备34然后可以计算修正的未校正传播延迟，其可能影响施加于每个媒体路径的延迟。如果修正的未校正传播延迟小于最长传播延迟，则(经由动态延迟元件40)施加到修正的未校正传播延迟的媒体路径的延迟受到影响。如果修正的未校正传播延迟大于最长传播延迟，则可能影响施加于所有媒体路径16的延迟。如果未校正传播延迟的先前值是最长传播延迟，则可能影响施加于所有媒体路径16的延迟。
因此，所有相关媒体信号12可以时间对齐(同步)。相关媒体信号12通常在出口24处和/或在共享观察空间28中对齐。媒体信号12另外可以在媒体传输系统10内的一个或多个处理或传输边界处对齐。但是，在共享源空间26和共享观察空间28之间补偿每个媒体信号12的传播延迟仅一次会允许相关媒体信号12的总等待时间与最长被延迟的媒体信号所经历的总传播延迟基本相同(没有施加任何动态延迟)。使用中间点进行时间对齐可以导致施加于所有媒体信号的额外延迟并因此导致总等待时间增加。
媒体传输系统10可以包括用于其他媒体信号的设施(facility)和未连接到共享源空间26的共享观察空间28的其他媒体路径。媒体传输系统10可以独立于或结合相关媒体信号12对其他媒体信号进行时间对齐。附加地或备选地，媒体传输系统10可以对相关的媒体信号12和/或其他媒体信号施加静态延迟均衡(即，在运行时不改变的延迟)。在静态延迟均衡中，媒体传输系统10可以估计、确定或以其他方式识别每个媒体信号需要来进行时间对齐的延迟(静态延迟)(省略运行时可变延迟)。此外，媒体传输系统10可以将静态延迟施加于每个受影响的媒体信号。对于相关媒体信号12，静态延迟可以作为最小延迟嵌入动态延迟元件40中。
当集成静态延迟均衡方案和动态延迟均衡方案时，使用时间戳来限定静态和动态延迟可能是方便的。附加地或备选地，静态和动态延迟可以表示为等待时间和/或延迟时间。
图2示出了具有若干媒体路径的媒体传输系统10，每个媒体路径可受静态延迟均衡和动态延迟均衡的影响。共享源空间26和共享观察空间28之间的媒体路径可以包括从设备-1(边缘输入设备30)到设备-5(边缘输出设备34)的路径，从设备-2(边缘输入设备30)到设备-5的直接路径，从设备-2到设备-5的间接路径(通过设备-4，中间设备38)，从设备-2到设备-6(边缘输出设备34)的路径，从设备-3(边缘输入设备30)到设备-5的路径，以及从设备-3到设备-6的路径。媒体路径可以通过多路复用器58(可以切换和/或复制媒体信号12的设备)。在图2中，传播延迟和时间戳值大体从左向右增加。
在图2的示例中，上游延迟信号被配置为使得下游设备(诸如设备-4，设备-5和设备-6)可以从相同媒体路径中的上游设备或多个上游设备接收上游延迟信号36。边缘输入设备30和中间设备38中的每一个可以提供上游延迟信号，该上游延迟信号传送与设备的输出关联的时间戳。例如，在设备-1到设备-5的媒体路径中，设备-1可以计算并提供反映传输的媒体信号的传播延迟的时间戳。设备-1可以通过各种机制(例如，直接信号，广播，过程间通信，事件驱动通信等)将时间戳传送到设备-5。例如，设备-1可以提供时间戳作为可订阅元素，且设备-5可以订阅该元素。当设备-1改变其时间戳时，被订阅的设备(例如设备-5)接收上游延迟信号以报告修正的时间戳。设备-2、设备-3和设备-4中的每一个可以以与描述的相同和/或彼此相同的方式提供时间戳。设备-4、设备-5和设备-6中的每一个可以以与描述的相同和/或彼此相同的方式接收时间戳。
从下游设备(即，设备-4、设备-5和设备-6)之一接收时间戳(进入时间戳)的每个设备可以通过向进入时间戳添加设备之间的网络等待时间的估计或确定并且添加接收设备的内部传播延迟的估计或确定来确定其输出处的时间戳。以这种方式，每个边缘输出设备34可以确定输出的媒体信号的未校正传播延迟的独立值。边缘输入设备30和/或中间设备38可以不具有任何媒体信号—包括通过设备的媒体信号—的未校正传播延迟的任何指示。因为时间戳下游传播，所以上游设备对媒体信号的处理和/或传输的改变(导致传播时间的改变)可以被传送到下游设备，其可以通过计算修正的未校正传播延迟来作用于该改变。
在图2的示例中，设备-2和设备-3经受静态延迟均衡，如其输入相对于共享源空间26的边缘处的时间戳的源偏移54所指示的。例如，设备-3和设备-6可以是仅音频设备，其传播延迟不会根据输入或处理类型而显著变化。对于由于静态延迟而具有源偏移54的设备(例如，设备-2和设备-3)，源偏移可以包含在设备的时间戳中和/或源偏移可以被传送到在媒体路径的末端的边缘输出设备(例如，设备-5和/或设备-6)。
在配置期间，媒体传输系统10可以在每个边缘输出设备34之前插入动态延迟元件40(对于输入到设备的每个媒体信号12)，使得每个媒体信号遇到至少一个动态延迟元件。例如，在图2的示例中直接位于边缘输出设备34上游的动态延迟元件40是DD5a，DD5b，DD5c和DD6。媒体传输系统10可以在诸如边缘输入设备30和中间设备38的一个或多个上游设备之后插入动态延迟元件40。例如，在图2的示例中直接位于其他设备下游的动态延迟元件40是DD3和DD4。对于包括多于一个动态延迟元件40的媒体路径，总添加的延迟可以分布在动态延迟元件间。附加地或备选地，一个动态延迟元件40可以影响可以通过多于一个边缘输出设备34路由的媒体信号的传播延迟。例如，动态延迟元件DD3和DD4可以影响通过多路复用器58被路由到设备-5和/或设备-6的媒体信号。
图3示意性地表示用于诸如媒体传输系统10的媒体传输系统中的媒体信号的动态延迟均衡(动态时间对齐)的方法100。方法100包括接收102相关媒体信号，传输104相关媒体信号，计算106未校正传播延迟(Dj)，计算108最长传播延迟(Dmax)，并根据最长传播延迟和相应的未校正传播延迟之间的差值(Dmax-Dj)延迟110每个媒体信号。大体上，在传输104时执行计算106未校正传播延迟，计算108最长传播延迟，以及延迟110每个媒体信号。因此，可以使用各个媒体信号的传播延迟的变化来在媒体传输系统的运行时期间保持媒体信号在时间上对齐。
接收102包括接收至少两个相关媒体信号，并且可以包括接收多个媒体信号。相关媒体信号都在共享源空间中具有起源。接收102可以包括在媒体传输系统的边缘输入设备的不同入口处接收每个媒体信号。相关媒体信号都具有在共享观察空间中的目的地。
传输104包括沿不同媒体路径传输相关媒体信号。也就是说，沿着与其他媒体信号的至少一个其他媒体路径不同的媒体路径路由至少一个媒体信号。传输104可以包括将每个媒体信号传输到媒体传输系统的边缘输出设备的不同出口。另外，传输104可以包括在媒体传输系统的相应出口处传输每个媒体信号。传输104可以包括通过网络结构(例如AVB网络)传输媒体信号，该网络结构与媒体传输系统的入口和出口互连。
传输104可以在每个媒体信号中引起传播延迟。传输104可以包括将媒体信号传输到处理设备(例如，边缘输入设备30，边缘输出设备34和中间设备38)和/或从处理设备传输媒体信号。附加地或备选地，传输104可以包括处理媒体信号。在媒体传输系统内传输104和/或处理的结果是相关媒体信号经历不同的传播延迟(在延迟110之前)。也就是说，至少一个媒体信号经历与至少一个其他媒体信号不同的传播延迟。
计算106包括计算由于每个媒体信号所采用的单独的媒体路径而导致的每个媒体信号的未校正传播延迟(Dj)。计算106可以包括估计和/或确定由于每个媒体信号的相应媒体路径内的每个处理和传输元件引起的传播延迟。
计算106可以包括估计和/或确定共享观察空间内的每个媒体信号的传播延迟。边缘输入设备可以计算由于边缘输入设备的影响和/或上游影响引起的相应媒体信号的传播延迟。边缘输入设备可以将传播延迟传送到下游设备。下游设备可以计算由于对象设备的影响和/或上游影响(诸如由边缘输入设备传送的传播延迟和/或由传输引起的传播延迟)而引起的媒体信号的传播延迟。每个中间设备可以将其传播延迟添加到由上游设备传送的传播延迟，并将得到的累积延迟传送到下游设备。因此，下游设备可以接收上游延迟信号，该上游延迟信号包括上游设备和/或设备之间的传输的传播延迟。边缘输出设备可以基于累积的上游传播延迟(和/或上游设备和/或设备之间的传输的上游传播延迟)以及边缘输出设备的传播延迟的估计或确定来计算未校正的传播延迟。每个边缘输出设备可以独立地计算由该边缘输出设备处理的媒体信号的未校正传播延迟。
计算108包括计算未校正传播延迟(Dj)的最大值。最大值是最长传播延迟(Dmax)。边缘输出设备可以彼此传送由单独的边缘输出设备计算的媒体信号的未校正的传播延迟。边缘输出设备可以各自独立地基于所有媒体信号的未校正传播延迟来独立地计算最长延迟。附加地或备选地，媒体传输系统可以包括计算最长传播延迟的动态延迟代理。
延迟110包括延迟每个媒体信号，使得所有媒体信号具有基本相同(例如，在人类感知中)的总传播延迟(包括未校正的传播延迟和延迟110的影响)。例如，媒体信号的传播延迟范围(从最大值到最小值的差值)可小于100毫秒，小于40毫秒，小于20毫秒，小于10毫秒，小于2毫秒，小于1毫秒，小于0.2毫秒，小于0.05毫秒，小于0.02毫秒，或小于0.01毫秒。替代地表达，创建媒体信号的特定传播延迟范围可以被描述为将媒体信号时间对齐(或同步)到特定范围内。对于混合音频和视频信号，视频信号的平均传播延迟与音频信号的平均传播延迟之间的绝对差值可小于100毫秒，小于40毫秒，小于20毫秒，小于10毫秒，小于2毫秒，或小于1毫秒。音频和视频媒体信号应该足够对齐，以避免观察两种类型的媒体信号的观察者对唇型同步错误的感知。对于音频媒体信号(例如，整个媒体信号组或混合媒体信号组的一部分)，音频信号的传播延迟范围可小于40ms，小于20ms，小于10ms，小于2ms，小于1ms，小于0.2ms，小于0.05ms，小于0.02ms，或小于0.01ms。可以将音频媒体信号足够对齐，以便在观察音频媒体信号的观察者中实现听觉融合。音频媒体信号可以被对齐到音频媒体信号的几个数字采样周期内(例如，在48kHz采样音频媒体信号的4个周期内，2个周期内，或者1个周期内)。
具有最长传播延迟的媒体信号可能不会通过延迟110额外地被延迟。由延迟110对每个媒体信号施加的延迟可以是最长延迟与媒体信号的未校正传播延迟之间的差值(Dmax-Dj)。对于具有最长传播延迟的媒体信号，该差值为零。所有其他媒体信号被延迟110延迟。延迟110可以包括将每个媒体信号延迟大于Dmax-Dj的均匀量。
延迟110可以包括插入动态延迟元件和/或在除了最长被延迟的媒体路径之外的所有媒体路径(或在所有媒体路径)中施加动态延迟元件。动态延迟元件可以是动态延迟元件40。
图4示意性地表示可用于实现和/或实例化媒体传输系统10及其组件(例如边缘输入设备30，边缘输出设备34，中间设备38和动态延迟元件40)的计算机化系统200。计算机化系统200包括处理单元202，处理单元202可以通过通信基础设施210操作性地耦联到计算机可读存储器206。处理单元202可以包括一个或多个计算机处理器204，并且可以包括分布式计算机处理器组204。处理单元202可包括或可在可编程、可重新配置和/或专用硬件—例如现场可编程门阵列、数字信号处理器和/或专用集成电路—上实现。
计算机化系统200还可包括计算机可读存储介质组件212，其操作性地耦联到处理单元202和/或计算机可读存储器206，例如通过通信基础设施210。计算机可读存储介质组件212可以包括一个或多个非暂时性计算机可读存储介质214，并且可以包括非暂时性计算机可读存储介质214的分布式组。
通信基础设施210可以包括：本地数据总线，通信接口和/或网络接口。通信基础设施210可以被配置为传输和/或接收信号，例如电信号、电磁信号、光信号和/或声信号。通信基础设施210可以包括入口14和/或出口24。
计算机化系统200可以包括操作性地耦联到处理单元202、计算机可读存储器206和/或计算机可读存储介质组件212的一个或多个输入-输出设备216。输入-输出设备216通常被配置用于用户交互，并且可以被配置用于视觉、音频和/或触觉输入和/或输出。每个输入-输出设备216可以独立地配置为仅输入、仅输出、主要是输入、主要是输出和/或输入和输出的组合。输入-输出设备216的示例包括监视器(例如，视频监视器)，显示器(例如，字母数字显示器，灯和/或LED)，键盘，指示设备(例如，鼠标)，触摸屏，扬声器和蜂鸣器。
计算机化系统200可以包括计算机、服务器、工作站等的分布式组，其各自可以直接或间接地(包括通过网络连接)互连。因此，计算机化系统200可以包括一个或多个处理单元202，计算机可读存储器206，计算机可读存储介质组件212和/或输入-输出设备216，它们彼此远离。
计算机可读存储器206和计算机可读存储介质组件212中的一个或两个包括控制逻辑220和/或数据222。控制逻辑220(其也可以称为软件，固件，门件(gateware)和/或硬件)可以包括指令，当由处理单元202执行时，该指令使计算机化系统200执行这里描述的一个或多个方法。控制逻辑220可以包括动态延迟元件40和动态延迟代理60中的一个或多个。数据222可以包括媒体信号，传播延迟值，最长传播延迟，和/或与本文描述的方法关联的数据。
在将设备、元件和/或方法描述为执行一个或多个功能的情况下，相应的设备和/或元件被配置(例如，编程)为执行(一个或多个)功能。相应的设备和/或元件可以包括一个或多个程序、代理、服务和/或组件，其被配置(例如，编程)为在该程序、代理、服务和/或组件由处理单元202执行时或者以其它方式由计算机化系统200操作时执行(一个或多个)功能。控制逻辑220和/或数据222可以包括与该程序、代理、服务和/或组件相对应的指令和/或信息。
根据本公开内容的发明主题的示例在下面列举的段中描述。
A1.一种用于媒体传输系统中的媒体信号的动态延迟均衡的方法，该方法包括：
在媒体传输系统的第一入口处接收第一媒体信号，并沿媒体传输系统中的第一媒体路径将第一媒体信号传输到媒体传输系统的第一出口；
在媒体传输系统的第二入口处接收第二媒体信号，并沿媒体传输系统中的第二媒体路径将第二媒体信号传输到媒体传输系统的第二出口，其中第一媒体信号和第二媒体信号源自共享源空间并且目的地是共享观察空间；
计算由于第一媒体路径引起的第一未校正传播延迟，计算由于第二媒体路径引起的第二未校正传播延迟，并且计算最短传播延迟，该最短传播延迟是第一未校正传播延迟和第二未校正支柱中的较短者；
将第一媒体信号和第二媒体信号中具有最短未校正传播延迟的一个延迟与第一未校正传播延迟和第二未校正传播延迟之间的差值相关的量；
响应于在传输第二媒体信号时的改变的第一媒体信号传播参数，计算修正的第一未校正传播延迟，并计算修正的最短传播延迟，该修正的最短传播延迟是修正的第一未校正传播延迟和第二未校正传播延迟中的较短者；
将第一媒体信号和第二媒体信号中具有修正的最短未校正传播延迟的一个延迟与修正的第一未校正传播延迟和第二未校正传播延迟之间的差值相关的量。
A2.段A1所述的方法，其中接收第一媒体信号包括在媒体传输系统的第一入口处利用媒体传输系统的第一边缘输入设备接收第一媒体信号，并且其中接收第二媒体信号包括在媒体传输系统的第二入口处利用媒体传输系统的第二边缘输入设备接收第二媒体信号。
A2.1.段A2所述的方法，其中第一边缘输入设备在第一媒体信号中引起第一输入传播延迟，其中计算由于第一媒体路径引起的第一未校正传播延迟包括基于第一输入传播延迟来计算第一未校正传播延迟，其中第二边缘输入设备在第二媒体信号中引起第二输入传播延迟，并且其中计算由于第二媒体路径引起的第二未校正传播延迟包括基于第二输入传播延迟计算第二未校正传播延迟。
A2.2.段A2-A2.1中任一段所述的方法，其中传输第一媒体信号包括在媒体传输系统的第一出口处将第一媒体信号从第一边缘输入设备传输到媒体传输系统的第一边缘输出设备，且其中传输第二媒体信号包括在媒体传输系统的第二出口处将第二媒体信号从第二边缘输入设备传输到媒体传输系统的第二边缘输出设备。
A2.2.1.段A2.2所述的方法，其中第一边缘输出设备在第一媒体信号中引起第一输出传播延迟，其中计算由于第一媒体路径引起的第一未校正传播延迟包括基于第一输出传播延迟计算第一未校正传播延迟，其中第二边缘输出设备在第二媒体信号中引起第二输出传播延迟，并且其中计算由于第二媒体路径引起的第二未校正传播延迟包括基于第二输出传播延迟计算第二未校正传播延迟。
A2.2.2.段A2.2-A2.2.1中任一段所述的方法，其中第一边缘输入设备在第一媒体信号中引起一/该第一输入传播延迟，其中计算由于第一媒体路径而引起第一未校正传播延迟包括在第一边缘输出设备处接收与第一输入传播延迟有关的第一上游延迟信号，其中第二边缘输入设备在第二媒体信号中引起一/该第二输入传播延迟，并且其中计算由于第二媒体路径引起的第二未校正传播延迟包括在第二边缘输出设备处接收与第二输入传播延迟有关的第二上游延迟信号。
A2.2.3.段A2.2-A2.2.2中任一段所述的方法，其中计算最短传播延迟包括将第一未校正传播延迟从第一边缘输出设备传送到第二边缘输出设备，将第二未校正传播延迟从第二边缘输出设备传送到第一边缘输出设备，以及计算第一边缘输出设备和第二边缘输出设备中的最短传播延迟。
A3.段A1-A2.2.3中任一段所述的方法，其中沿第一媒体路径传输第一媒体信号包括沿媒体传输系统的网络结构内的第一媒体路径传输第一媒体信号，并且其中沿着第二媒体路径传输第二媒体信号包括沿网络结构内的第二媒体路径传输第二媒体信号，并且可选地，其中网络结构包括AVB(音频视频桥接)网络。
A4.段A1-A3中任一段所述的方法，其中第一媒体信号是视频信号，第二媒体信号是视频信号和音频信号之一。
A5.段A1-A3中任一段所述的方法，其中第一媒体信号是音频信号，第二媒体信号是音频信号。
A6.段A1-A5中任一段所述的方法，其中第一入口和第二入口是相同的。
A7.段A1-A6中任一段所述的方法，其中第一出口和第二出口是相同的。
A8.段A1-A7中任一段所述的方法，其中延迟第一媒体信号和第二媒体信号中具有最短未校正传播延迟的一个包括产生第一媒体信号和第二媒体信号的相对传播延迟，其小于100ms，小于40ms，小于20ms，小于10ms，小于2ms，小于1ms，小于0.2ms，小于0.05ms，小于0.02ms或小于0.01ms。
A9.段A1-A7中任一段所述的方法，其中延迟第一媒体信号和第二媒体信号中具有修正的最短未校正传播延迟的一个包括产生第一媒体信号和第二媒体信号的相对传播延迟，其小于100ms，小于40ms，小于20ms，小于10ms，小于2ms，小于1ms，小于0.2ms，小于0.05ms，小于0.02ms或小于0.01ms。
A10.媒体传输系统执行段A1-A9中任一段所述的方法的用途。
A11.一种媒体传输系统，包括：
计算机可读存储器；
操作性地耦联到计算机可读存储器的处理单元；和
计算机可读存储介质组件，其中计算机可读存储介质组件操作性地耦联到计算机可读存储器，并且包括当由处理单元执行时使系统执行段A1-A9中任一段所述的方法的指令。
B1.一种用于媒体传输系统中的相关媒体信号的动态延迟均衡的方法，该方法包括：
(a)由媒体传输系统接收多个相关媒体信号，其中相关媒体信号均源自共享源空间，且目的地是共享观察空间；
(b)沿着不同媒体路径在媒体传输系统中传输相关媒体信号；
(c)计算每个媒体路径的未校正传播延迟并计算最长传播延迟，该最长传播延迟是未校正传播延迟的最大值；
(d)将每个相关媒体信号延迟与最长传播延迟和该相关媒体信号的未校正传播延迟之间的差值相关的量；
(e)响应于在传输相关媒体信号时相关媒体信号中的至少一个的传播延迟的变化，确定每个媒体路径的修正的未校正传播延迟，且确定修正的最长传播延迟，该修正的最长传播延迟是修正的未校正传播延迟中的最大值；以及
(f)将每个相关媒体信号延迟与修正的最长传播延迟和该相关媒体信号的修正的未校正传播延迟之间的差值相关的量。
B2.B1段所述的方法，其中确定每个媒体路径的修正的未校正传播延迟包括计算经历该变化的相关媒体信号的修正的未校正传播延迟。
B3.段B1-B2中的任一段所述的任何方法，其中多个相关媒体信号包括第一媒体信号和第二媒体信号，并且其中该方法包括段A1-A9中任一段所述的方法。
B4.段B1-B3中的任一段所述的方法，其中每个媒体路径包括引起输入传播延迟的边缘输入设备和引起输出传播延迟的边缘输出设备，其中(c)计算每个媒体路径的未校正传播延迟包括基于输入传播延迟和输出传播延迟来计算未校正传播延迟。
B4.1.段B4所述的方法，还包括：对于每个媒体路径，与沿着媒体路径传输的相关媒体信号并行地将输入传播延迟从边缘输入设备传送到边缘输出设备，并且可选地，其中(c)计算每个媒体路径的未校正传播延迟包括由接收相关媒体信号和输入传播延迟的边缘输出设备计算未校正传播延迟。
B4.2.段B4-B4.1中的任一段所述的方法，其中(a)接收多个相关媒体信号包括由媒体路径的边缘输入设备接收多个相关媒体信号。
B4.3.段B4-B4.2中的任一段所述的方法，其中(b)传输相关媒体信号包括在媒体路径的边缘输入设备和边缘输出设备之间传输相关媒体信号。
B4.4.段B4-B4.3中的任一段所述的方法，还包括将每个相关媒体信号和相关媒体路径的累积传播延迟传送到媒体路径的边缘输出设备，并且可选地，其中(c)计算每个媒体路径的未校正传播延迟包括由接收相关媒体信号和累积传播延迟的边缘输出设备基于累积传播延迟计算未校正传播延迟。
B5.段B1-B4.4中的任一段所述的方法，其中多个相关媒体信号包括至少一个视频媒体信号和至少一个音频媒体信号。
B6.段B1-B5中的任一段所述的方法，其中多个相关媒体信号包括至少两个音频媒体信号。
B7.段B1-B6中的任一段所述的方法，其中(d)延迟包括将所有相关媒体信号时间对齐到100ms内，40ms内，20ms内，10ms内，2ms内，1ms内，在0.2ms内，0.05ms内，0.02ms内，或0.01ms内。
B8.段B1-B7中的任一段所述的方法，其中(d)延迟包括将相关媒体信号的所有音频媒体信号时间对齐到40ms内，20ms内，10ms内，2ms内，1ms内，0.2ms，0.05ms内，0.02ms内或0.01ms内。
B9.段B1-B8中的任一段所述的方法，其中(d)延迟包括将相关媒体信号的所有音频媒体信号与相关媒体信号的所有视频媒体信号时间对齐，以相对于视频媒体信号在音频媒体信号之间产生一定范围的传播延迟，该范围为小于100毫秒，小于40毫秒，小于20毫秒，小于10毫秒，小于2毫秒或小于1毫秒。
B10.段B1-B9中的任一段所述的方法，其中(f)延迟包括将所有相关媒体信号时间对齐到100ms内，40ms内，20ms内，10ms内，2ms内，1ms内，0.2ms内，0.05ms内，0.02ms内，或0.01ms内。
B11.段B1-B10中的任一段所述的方法，其中(f)延迟包括将相关媒体信号的所有音频媒体信号时间对齐在40ms内，20ms内，10ms内，2ms内，1ms内，0.2ms，0.05ms内，0.02ms内或0.01ms内。
B12.段B1-B11中的任一段所述的方法，其中(f)延迟包括将相关媒体信号的所有音频媒体信号与相关媒体信号的所有视频媒体信号进行时间对齐，以相对于视频媒体信号在音频媒体信号之间产生一定范围的传播延迟，该范围为小于100毫秒，小于40毫秒，小于20毫秒，小于10毫秒，小于2毫秒或小于1毫秒。
B13.媒体传输系统执行段B1-B12中的任一段所述的方法的用途。
B14.一种媒体传输系统，包括：
计算机可读存储器；
操作性地耦联到计算机可读存储器的处理单元；和
计算机可读存储介质组件，其中计算机可读存储介质组件操作性地耦联到计算机可读存储器，并且包括当由处理单元执行时使系统执行段B1-B12中的任何一段所述的方法的指令。
C1.一种用于媒体传输系统中的相关媒体信号的动态延迟均衡的方法，该方法包括：
由媒体传输系统接收多个相关媒体信号，其中相关媒体信号均源自共享源空间并且目的地是共享观察空间；
沿着不同媒体路径在媒体传输系统传输相关媒体信号；且在传输相关媒体信号时：
计算每个媒体路径的未校正传播延迟，并计算最长传播延迟，该最长传播延迟是未校正传播延迟的最大值；并且
将每个相关媒体信号延迟与最长传播延迟和该相关媒体信号的未校正传播延迟之间的差值相关的量。
C2.段C1所述的方法，其中至少一个相关媒体信号的传播延迟在传输期间变化。
C3.段C1-C2中的任一段所述的方法，其中多个相关媒体信号包括第一媒体信号和第二媒体信号，并且其中该方法包括段A1-A9中任一段所述的方法。
C4.段C1-C3中的任一段所述的方法，其中每个媒体路径包括引起输入传播延迟的边缘输入设备和引起输出传播延迟的边缘输出设备，其中计算每个媒体路径的未校正传播延迟包括基于输入传播延迟和输出传播延迟计算未校正传播延迟。
C4.1.段C4所述的方法，还包括：对于每个媒体路径，与沿着媒体路径传输的相关媒体信号并行地将输入传播延迟从边缘输入设备传送到边缘输出设备，并且可选地，其中，计算每个媒体路径的未校正传播延迟包括由接收相关媒体信号和输入传播延迟的边缘输出设备计算未校正传播延迟。
C4.2.段C4-C4.1中的任一段所述的方法，其中接收多个相关媒体信号包括由媒体路径的边缘输入设备接收多个相关媒体信号。
C4.3.段C4-C4.2中的任一段所述的方法，其中传输相关媒体信号包括在媒体路径的边缘输入设备和边缘输出设备之间传输相关媒体信号。
C4.4.段C4-C4.3中的任一段所述的方法，还包括将每个相关媒体信号和关联媒体路径的累积传播延迟传送到媒体路径的边缘输出设备，并且可选地，其中，计算每个媒体路径的未校正传播延迟包括由接收相关媒体信号和累积传播延迟的边缘输出设备基于累积传播延迟计算未校正传播延迟。
C5.段C1-C4.4中的任一段所述的方法，其中多个相关媒体信号包括至少一个视频媒体信号和至少一个音频媒体信号。
C6.段C1-C5中的任一段所述的方法，其中多个相关媒体信号包括至少两个音频媒体信号。
C7.段C1-C6中的任一段所述的方法，其中延迟包括将所有相关媒体信号时间对齐到100ms内，40ms内，20ms内，10ms内，2ms内，1ms内，0.2ms内，0.05ms内，0.02ms内，或0.01ms内。
C8.段C1-C7中的任一段所述的方法，其中延迟包括将相关媒体信号的所有音频媒体信号时间对齐到40ms内，20ms内，10ms内，2ms内，1ms内，0.2ms内，0.05ms内，0.02ms内，或0.01ms内。
C9.段C1-C8中的任一段所述的方法，其中延迟包括将相关媒体信号的所有音频媒体信号与相关媒体信号的所有视频媒体信号时间对齐，以相对于视频媒体信号在音频媒体信号之间产生一定范围的传播延迟，该范围为小于100毫秒，小于40毫秒，小于20毫秒，小于10毫秒，小于2毫秒或小于1毫秒。
C10.媒体传输系统执行段C1-C9中的任一段所述的方法的用途。
C11.一种媒体传输系统，包括：
计算机可读存储器；
操作性地耦联到计算机可读存储器的处理单元；
计算机可读存储介质组件，其中计算机可读存储介质组件操作性地耦联到计算机可读存储器，并且包括当由处理单元执行时使系统执行段C1-C9中任一段所述的方法的指令。
D1.一种媒体传输系统，包括：
第一媒体路径，包括第一入口处的第一边缘输入设备和第一出口处的第一边缘输出设备，其中第一边缘输入设备被配置为从共享源空间接收第一媒体信号，其中第一边缘输出设备配置为从第一边缘输入设备接收第一媒体信号并从第一边缘输入设备接收第一上游延迟信号，其中第一边缘输出设备被配置为将第一媒体信号传输到共享观察空间，其中第一边缘输出设备被配置为基于第一上游延迟信号确定从第一入口到第一出口的第一未校正传播延迟，并且其中第一媒体路径包括被配置为基于第一媒体命令来延迟第一媒体信号的第一动态延迟元件；
第二媒体路径，包括第二入口处的第二边缘输入设备和第二出口处的第二边缘输出设备，其中，第二边缘输入设备被配置为从共享源空间接收第二媒体信号，其中第二边缘输出设备被配置为从第二边缘输入设备接收第二媒体信号以及从第二边缘输入设备接收第二上游延迟信号，其中第二边缘输出设备被配置为将第二媒体信号传输到共享观察空间，其中第二边缘输出设备被配置为基于第二上游延迟信号确定从第二入口到第二入口的第二未校正传播延迟，并且其中第二媒体路径包括第二动态延迟元件，其被配置为基于第二延迟命令延迟第二媒体信号；
其中第一边缘输出设备和第二边缘输出设备被配置为交换与第一未校正传播延迟和第二未校正传播延迟有关的延迟协调信号，并且被配置为确定至少与第一未校正传播延迟和第二未校正传播延迟的最大值一样大的目标传播延迟；
其中第一边缘输出设备被配置为命令第一动态延迟元件将第一媒体信号延迟与第一未校正传播延迟和目标传播延迟之间的差值相关的延迟量；
其中第二边缘输出设备被配置为命令第二动态延迟元件使第二媒体信号延迟与第二未校正传播延迟和目标传播延迟之间的差值相关的延迟量。
D2.段D1所述的媒体传输系统，其中媒体传输系统包括网络结构，用于将第一媒体路径从第一边缘输入设备互连到第一边缘输出设备，并将第二媒体路径从第二边缘输入设备互连到第二边缘输出设备，并且可选地，其中网络结构包括AVB(音频视频桥接)网络。
D3.段D1-D2中的任一段所述的媒体传输系统，其中第一媒体信号是视频信号，第二媒体信号是视频信号和音频信号之一。
D4.段D1-D2中的任一段所述的媒体传输系统，其中第一媒体信号是音频信号，第二媒体信号是音频信号。
D5.段D1-D4中的任一段所述的媒体传输系统，其中第一边缘输出设备被配置为命令第一动态延迟元件将第一媒体信号延迟与第二未校正传播延迟超过第一未校正传播延迟的值相关的延迟量。
D6.段D1-D5中的任一段所述的媒体传输系统，其中第二边缘输出设备被配置为命令第二动态延迟元件将第二媒体信号延迟与第一未校正传播延迟超过第二未校正传播延迟的值相关的延迟量。
D7.段D1-D6中的任一段所述的媒体传输系统，其中第一边缘输出设备和第二边缘输出设备被配置为交换第一未校正传播延迟和第二未校正传播延迟，并且可选地其中第一边缘输出设备和第二边缘输出设备中的每一个被配置为将第一未校正传播延迟和第二未校正传播延迟中的最大值确定为目标传播延迟。
D8.段D1-D6中的任一段所述的媒体传输系统，其中第一边缘输出设备被配置为从第二边缘输出设备接收第二未校正传播延迟，其中第一边缘输出设备被配置为将第一未校正传播延迟和第二未校正传播延迟中的最大值确定为目标传播延迟，并且其中第一边缘输出设备被配置为将目标传播延迟发送到第二边缘输出设备。
D9.段D1-D8中的任一段所述的媒体传输系统，其中第一边缘输出设备被配置为命令第一动态延迟元件将第一媒体信号延迟目标传播延迟与第一未校正传播延迟之间的差值。
D10.段D1-D9中的任一段所述的媒体传输系统，其中第二边缘输出设备被配置为命令第二动态延迟元件将第二媒体信号延迟目标传播延迟与第二未校正传播延迟之间的差值。
D11.段D1-D10中的任一段所述的媒体传输系统，其中，媒体传输系统包括多个入口和多个出口，被配置为在多个入口处从共享源空间接收多个相关媒体信号，以及被配置为从多个出口向共享观察空间传输多个相关媒体信号；
其中多个入口包括第一入口和第二入口，其中多个出口包括第一出口和第二出口，并且其中多个相关媒体信号包括第一媒体信号和第二媒体信号；
其中，多个媒体信号中的每一个具有未校正传播延迟，并且其中目标传播延迟是多个相关媒体信号的未校正传播延迟的最大值。
D12.段D1-D11中的任一段所述的媒体传输系统，其中第一边缘输入设备和第二边缘输入设备被配置为通过命令第一动态延迟元件和第二动态延迟元件，以相对传播延迟从第一出口传输第一媒体信号并且从第二出口传输第二媒体信号，所述相对传播延迟小于100ms，小于40ms，小于20ms，小于10ms，小于2ms，小于1ms，小于0.2ms，小于0.05ms，小于0.02ms或小于0.01ms。
D13.段D1-D12中的任一段所述的媒体传输系统动态地均衡媒体信号之间的延迟的用途，其可选地根据段A1-A9、B1-B12或C1-C9所述的方法中的任何一个。
如本文所使用的，术语“适于”和“配置”意味着元件、组件或其他主题被设计为和/或旨在执行给定的功能。因此，术语“适于”和“配置”的使用不应被解释为意指给定元件、组件或其他主题仅仅“能够执行给定功能”，而是元件、组件和/或其他主题为了执行功能而被具体选择、创建、实现、利用、编程和/或设计。被引用为适于执行特定功能的元件、组件和/或其他引用的主题可以附加地或备选地被描述为被配置为执行该功能，反之亦然，这也在本公开的范围内。类似地，被描述为被配置为执行特定功能的主题可以附加地或备选地被描述为操作性的以执行该功能。
如本文所使用的，短语“例如”，短语“作为示例”和/或简称为“示例”，当参考根据本公开的一个或多个组件，特征，细节，结构，实施例和/或方法使用时，旨在表达所描述的组件，特征，细节，结构，实施例和/或方法是根据本公开的组件，特征，细节，结构，实施例和/或方法的说明性的、非排他性的示例。因此，所描述的组件，特征，细节，结构，实施例和/或方法不旨在为限制性的，要求的或排他/穷举的；且包括结构上和/或功能上相似和/或等同的组件，特征，细节，结构，实施例和/或方法的其他组件，特征，细节，结构，实施例和/或方法也在本公开的范围内。
如本文所使用的，短语“至少一个”和“一个或多个”—参考一个以上实体的列举，表示实体列举中的任何一个或多个实体，并且不是限于实体列举中具体列出的每个实体中的至少一个。例如，“A和B中的至少一个”(或者，等效地，“A或B中的至少一个”，或者，等效地，“A和/或B中的至少一个”)可以指单独的A，单独的B，或A和B的组合。
如本文所用，单数形式“一”，“一个”和“该”可以意图也包括复数形式，除非上下文另有明确说明。
如果任何专利，专利申请或其他参考文献在本文中通过引用结合，且(1)以与本公开的非结合部分或任何其他结合的参考文献以不一致的方式限定术语，和/或(2)以其它方式不一致，本公开的非结合部分应当支配，并且其中的术语或结合的公开内容仅应当关于其中定义该术语和/或所结合的公开内容原始地存在的参考文献进行支配。
工业实用性
本文公开的系统和方法适用于通信、娱乐和视频制作行业。
根据本公开的所有系统和方法不需要本文公开的系统的各种公开元件和方法步骤，并且本公开包括本文公开的各种元件和步骤的所有新颖的和非显而易见的组合和子组合。此外，本文公开的各种元件和步骤中的任何元件和步骤，或者各种元件和/或步骤的任何组合可以限定独立的发明主题，其与整个公开的系统或方法分开。因此，这些发明主题不需要与本文明确公开的具体系统和方法关联，并且这样的发明主题可以在本文未明确公开的系统和/或方法中找到用途。
相信以下权利要求特别指出了针对所公开的发明之一的某些组合和子组合，并且是新颖的和非显而易见的。可以通过在本申请或相关申请中修改本权利要求或提出新权利要求来要求保护以特征，功能，元件和/或属性的其他组合和子组合实现的发明。这些修改的或新的权利要求，无论它们是针对不同的发明还是针对相同的发明，无论是与原始权利要求的范围不同、更宽、更窄还是相同，都可被认为包括在本公开的发明的主题内。

Claims (14)

1.一种用于媒体传输系统中的相关媒体信号的动态延迟均衡的方法，该方法包括：
(a)由媒体传输系统接收多个相关媒体信号，其中，相关媒体信号均源自共享源空间，并且目的地是共享观察空间；
(b)沿着不同媒体路径在媒体传输系统中传输相关媒体信号，每个媒体路径包括在媒体路径的入口处的边缘输入设备、在媒体路径的出口处的边缘输出设备和用于延迟在媒体路径上从边缘输入设备传输到边缘输出设备的媒体信号的动态延迟元件；
(c)计算每个媒体路径的未校正传播延迟并计算最长传播延迟，该最长传播延迟是未校正传播延迟的最大值；
(d)向每个媒体路径的动态延迟元件发送相应的延迟信号，该延迟信号指示该媒体路径的最长传播延迟和未校正的传播延迟之间的差值；
(e)通过所述动态延迟元件将每个相关媒体信号延迟等于该媒体路径的最长传播延迟和未校正传播延迟之间的差值的量；
(f)响应于在传输相关媒体信号时至少一个所述相关媒体信号的传播延迟的变化，确定每个媒体路径的修正的未校正传播延迟，并且确定修正的最长传播延迟，所述修正的最长传播延迟是修正的未校正传播延迟的最大值；以及
(g)向每个媒体路径的动态延迟元件发送相应的另外的延迟信号，该另外的延迟信号指示该媒体路径的修正的最长传播延迟和修正的未校正传播延迟之间的差值；
(h)通过所述动态延迟元件将每个相关媒体信号延迟等于该媒体路径的所述修正的最长传播延迟和修正的未校正传播延迟之间的差值的量。
2.如权利要求1所述的方法，其中，每个媒体路径的所述边缘输入设备引起输入传播延迟并且每个媒体路径的所述边缘输出设备引起输出传播延迟，其中(c)计算每个媒体路径的未校正传播延迟包括基于所述输入传播延迟和所述输出传播延迟来计算未校正传播延迟。
3.如权利要求2所述的方法，还包括：对于每个媒体路径，与沿着所述媒体路径传输的相关媒体信号并行地从所述边缘输入设备向所述边缘输出设备传送所述输入传播延迟，并且其中(c)计算每个媒体路径的未校正传播延迟包括由接收所述相关媒体信号和所述输入传播延迟的边缘输出设备计算所述未校正传播延迟。
4.如权利要求2所述的方法，还包括：将每个相关媒体信号和关联媒体路径的累积传播延迟传送到所述媒体路径的边缘输出设备，并且其中(c)计算每个媒体路径的未校正传播延迟包括由接收所述相关媒体信号和所述累积传播延迟的所述边缘输出设备基于所述累积传播延迟来计算所述未校正传播延迟。
5.如权利要求1所述的方法，其中所述(e)延迟和所述(h)延迟各自包括将所有相关媒体信号时间对齐到20ms内。
6.如权利要求1所述的方法，其中所述(e)延迟和所述(h)延迟各自包括将相关媒体信号的所有音频媒体信号时间对齐到2ms内。
7.一种媒体传输系统，包括：
第一媒体路径，包括第一入口处的第一边缘输入设备和第一出口处的第一边缘输出设备，其中第一边缘输入设备被配置为从共享源空间接收第一媒体信号，其中第一边缘输出设备被配置为从第一边缘输入设备接收第一媒体信号并从第一边缘输入设备接收第一上游延迟信号，其中第一边缘输出设备被配置为将所述第一媒体信号传输到共享观察空间，其中所述第一边缘输出设备被配置为基于所述第一上游延迟信号来确定从第一入口到第一出口的第一未校正传播延迟，并且其中所述第一媒体路径包括被配置为基于第一延迟命令来延迟所述第一媒体信号的第一动态延迟元件；
第二媒体路径，包括第二入口处的第二边缘输入设备和第二出口处的第二边缘输出设备，其中所述第二边缘输入设备被配置为从所述共享源空间接收第二媒体信号，其中所述第二边缘输出设备被配置为从所述第二边缘输入设备接收第二媒体信号，并从所述第二边缘输入设备接收第二上游延迟信号，其中所述第二边缘输出设备被配置为将所述第二媒体信号传输到所述共享观察空间，其中第二边缘输出设备被配置为基于第二上游延迟信号确定从第二入口到第二出口的第二未校正传播延迟，并且其中所述第二媒体路径包括第二动态延迟元件，所述第二动态延迟元件被配置为基于第二延迟命令来延迟所述第二媒体信号；
其中所述第一边缘输出设备和第二边缘输出设备被配置为交换与第一未校正传播延迟和第二未校正传播延迟有关的延迟协调信号，并且被配置为确定至少与所述第一未校正传播延迟和所述第二未校正传播延迟的最大值一样大的目标传播延迟；
其中所述第一边缘输出设备被配置为发送指示所述第一未校正传播延迟和所述目标传播延迟之间的差值的第一延迟信号，以命令所述第一动态延迟元件使所述第一媒体信号延迟等于所述第一未校正传播延迟和所述目标传播延迟之间的差值的延迟量；
其中，所述第二边缘输出设备被配置为发送指示所述第二未校正传播延迟和所述目标传播延迟之间的差值的第二延迟信号，以命令所述第二动态延迟元件使所述第二媒体信号延迟等于所述第二未校正传播延迟和所述目标传播延迟之间的差值的延迟量。
8.如权利要求7所述的媒体传输系统，其中，所述媒体传输系统包括网络结构，以用于将所述第一媒体路径从所述第一边缘输入设备互连到所述第一边缘输出设备，并且将所述第二媒体路径从所述第二边缘输入设备互连到第二边缘输出设备。
9.如权利要求7或8所述的媒体传输系统，其中，所述第一边缘输出设备被配置为命令所述第一动态延迟元件使所述第一媒体信号延迟所述目标传播延迟与所述第一未校正传播延迟之间的差值，并且其中，所述第二边缘输出设备被配置为命令所述第二动态延迟元件使第二媒体信号延迟所述目标传播延迟与所述第二未校正传播延迟之间的差值。
10.如权利要求7或8所述的媒体传输系统，其中，所述第一边缘输出设备被配置为命令所述第一动态延迟元件使所述第一媒体信号延迟与所述第二未校正传播延迟超过所述第一未校正传播延迟的值相关的延迟量，并且其中，所述第二边缘输出设备被配置为命令所述第二动态延迟元件使所述第二媒体信号延迟等于所述第一未校正传播延迟超过所述第二未校正传播延迟的值的延迟量。
11.如权利要求7所述的媒体传输系统，其中，所述第一边缘输出设备和所述第二边缘输出设备被配置为交换所述第一未校正传播延迟和所述第二未校正传播延迟，并且其中，所述第一边缘输出设备和所述第二边缘输出设备中的每一个被配置为将所述第一未校正传播延迟和所述第二未校正传播延迟中的最大值确定为目标传播延迟。
12.如权利要求7所述的媒体传输系统，其中，所述第一边缘输出设备被配置为从所述第二边缘输出设备接收所述第二未校正传播延迟，其中，所述第一边缘输出设备被配置为将所述第一未校正传播延迟和第二未校正传播延迟中的最大值确定为目标传播延迟，并且其中所述第一边缘输出设备被配置为将目标传播延迟发送到所述第二边缘输出设备。
13.如权利要求7所述的媒体传输系统，其中，所述媒体传输系统包括多个入口和多个出口、被配置为在所述多个入口处从所述共享源空间接收多个相关媒体信号并且被配置为从所述多个出口向所述共享观察空间发送所述多个媒体信号；
其中，所述多个入口包括第一入口和第二入口，其中，所述多个出口包括第一出口和第二出口，并且其中，所述多个媒体信号包括第一媒体信号和第二媒体信号；并且
其中，所述多个媒体信号中的每一个具有未校正传播延迟，并且其中，所述目标传播延迟是所述多个媒体信号的未校正传播延迟的最大值。
14.如权利要求7所述的媒体传输系统，其中，所述第一边缘输入设备和所述第二边缘输入设备被配置为：通过命令所述第一动态延迟元件和所述第二动态延迟元件，以小于20ms的相对传播延迟从所述第一出口传输所述第一媒体信号，并且从所述第二出口传输所述第二媒体信号。
CN201780033944.0A 2016-06-02 2017-06-01 媒体传输的动态延迟均衡 Active CN109313628B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662344614P 2016-06-02 2016-06-02
US62/344,614 2016-06-02
US15/610,158 US9866883B2 (en) 2016-06-02 2017-05-31 Dynamic delay equalization for media transport
US15/610,158 2017-05-31
PCT/US2017/035534 WO2017210479A1 (en) 2016-06-02 2017-06-01 Dynamic delay equalization for media transport

Publications (2)

Publication Number Publication Date
CN109313628A CN109313628A (zh) 2019-02-05
CN109313628B true CN109313628B (zh) 2022-05-27

Family

ID=60479103

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780033944.0A Active CN109313628B (zh) 2016-06-02 2017-06-01 媒体传输的动态延迟均衡

Country Status (5)

Country Link
US (7) US9866883B2 (zh)
EP (1) EP3465456B1 (zh)
CN (1) CN109313628B (zh)
AU (1) AU2017273847A1 (zh)
WO (1) WO2017210479A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10810471B1 (en) * 2018-03-22 2020-10-20 Amazon Technologies, Inc. Intelligent coalescing of media streams
US10778361B1 (en) * 2019-03-04 2020-09-15 Mellanox Technologies Tlv Ltd. Stream synchronization
EP3796723A1 (de) * 2019-09-17 2021-03-24 Siemens Aktiengesellschaft Verfahren und vorrichtung zur einfachen zeitsynchronisation einer kommunikation im industriellen umfeld
US20220165318A1 (en) * 2020-11-20 2022-05-26 Texas Instruments Incorporated Automatic serial bus equalization trim
CN118104240A (zh) * 2021-09-29 2024-05-28 杜比实验室特许公司 音频扬声器协同系统
CN115686630B (zh) * 2022-10-28 2024-09-24 龙芯中科(南京)技术有限公司 被控组件的控制方法、系统、电子设备及可读介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101731011A (zh) * 2007-05-11 2010-06-09 奥迪耐特有限公司 用于设置接收器延迟时间的系统、方法和计算机可读介质
CN103023866A (zh) * 2011-08-25 2013-04-03 罗技欧洲公司 无线音频信号的易共享
US8922713B1 (en) * 2013-04-25 2014-12-30 Amazon Technologies, Inc. Audio and video synchronization

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7130309B2 (en) 2002-02-20 2006-10-31 Intel Corporation Communication device with dynamic delay compensation and method for communicating voice over a packet-switched network
US7301831B2 (en) 2004-09-15 2007-11-27 Rambus Inc. Memory systems with variable delays for write data signals
US7954128B2 (en) * 2005-02-11 2011-05-31 Time Warner Cable Inc. Methods and apparatus for variable delay compensation in networks
US7822139B2 (en) * 2005-03-02 2010-10-26 Rohde & Schwarz Gmbh & Co. Kg Apparatus, systems, methods and computer products for providing a virtual enhanced training sequence
US7747725B2 (en) 2005-04-22 2010-06-29 Audinate Pty. Limited Method for transporting digital media
US7869420B2 (en) 2005-11-16 2011-01-11 Cisco Technology, Inc. Method and system for in-band signaling of multiple media streams
US7724780B2 (en) * 2007-04-19 2010-05-25 Cisco Technology, Ink. Synchronization of one or more source RTP streams at multiple receiver destinations
US8677437B2 (en) * 2008-05-07 2014-03-18 Evertz Microsystems Ltd. Systems and methods for calculating the delay between media signals
US20100183316A1 (en) 2009-01-20 2010-07-22 Telefonaktiebolaget L M Ericsson (Publ) Methods and Systems for Dynamic Equalization Delay Passive Optical Networks
US8326319B2 (en) 2009-01-23 2012-12-04 At&T Mobility Ii Llc Compensation of propagation delays of wireless signals
JP2012204941A (ja) * 2011-03-24 2012-10-22 Toshiba Corp 受信装置および受信方法
EP2702710A4 (en) 2011-04-29 2014-10-29 Corning Cable Sys Llc DETERMINING THE TRANSMISSION DELAY OF COMMUNICATIONS IN DISTRIBUTED ANTENNA SYSTEMS AND CORRESPONDING COMPONENTS, SYSTEMS AND METHODS
US9088818B2 (en) 2011-06-21 2015-07-21 Harman International Industries, Incorporated Adaptive media delay matching
CN104185285A (zh) 2013-05-28 2014-12-03 华为技术有限公司 一种媒体数据的传输方法、装置和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101731011A (zh) * 2007-05-11 2010-06-09 奥迪耐特有限公司 用于设置接收器延迟时间的系统、方法和计算机可读介质
CN103023866A (zh) * 2011-08-25 2013-04-03 罗技欧洲公司 无线音频信号的易共享
US8922713B1 (en) * 2013-04-25 2014-12-30 Amazon Technologies, Inc. Audio and video synchronization

Also Published As

Publication number Publication date
US11606589B2 (en) 2023-03-14
US20170353749A1 (en) 2017-12-07
US20190379922A1 (en) 2019-12-12
CN109313628A (zh) 2019-02-05
US9866883B2 (en) 2018-01-09
US20220286723A1 (en) 2022-09-08
US20180146226A1 (en) 2018-05-24
EP3465456A4 (en) 2019-06-26
US10390061B2 (en) 2019-08-20
US10116977B2 (en) 2018-10-30
US11343552B2 (en) 2022-05-24
EP3465456B1 (en) 2024-03-13
AU2017273847A1 (en) 2018-11-22
US20200404349A1 (en) 2020-12-24
US10764620B2 (en) 2020-09-01
US20190069009A1 (en) 2019-02-28
EP3465456A1 (en) 2019-04-10
US11949930B2 (en) 2024-04-02
US20230164372A1 (en) 2023-05-25
WO2017210479A1 (en) 2017-12-07

Similar Documents

Publication Publication Date Title
CN109313628B (zh) 媒体传输的动态延迟均衡
TWI637630B (zh) 一種在多媒體裝置之間用於促進音訊及視訊同步化之裝置
US20200076868A1 (en) Methods and apparatus for communicating delay information and minimizing delays
US10778361B1 (en) Stream synchronization
EP2866451A1 (en) Method and apparatus for IP video signal synchronization
EP2538689A1 (en) Adaptive media delay matching
AU2008101244A4 (en) Device and method for synchronisation of digital video and audio streams to media presentation devices
US8743292B2 (en) Video/audio production processing control synchronization
US20200280750A1 (en) Video Transmission System
US10862944B1 (en) Real-time video streaming with latency control
US11259058B2 (en) Use of rendered media to assess delays in media distribution systems
US20230370691A1 (en) Systems and methods for determining delay of a plurality of media streams
JP6796234B2 (ja) 映像伝送システム
US20120084453A1 (en) Adjusting audio and video synchronization of 3g tdm streams
US8797378B1 (en) Distributed communications
KR20050099745A (ko) 트랜스포트 스트림 전송 시스템에서의 피씨알 보정 장치 및 그 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant