CN205545723U - 多媒体系统 - Google Patents

多媒体系统 Download PDF

Info

Publication number
CN205545723U
CN205545723U CN201521130353.XU CN201521130353U CN205545723U CN 205545723 U CN205545723 U CN 205545723U CN 201521130353 U CN201521130353 U CN 201521130353U CN 205545723 U CN205545723 U CN 205545723U
Authority
CN
China
Prior art keywords
media
client
media server
media player
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201521130353.XU
Other languages
English (en)
Inventor
G·杰拉斯
A-K·斯利瓦斯塔瓦
D·潘戴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
STMicroelectronics International NV
Original Assignee
STMicroelectronics International NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by STMicroelectronics International NV filed Critical STMicroelectronics International NV
Application granted granted Critical
Publication of CN205545723U publication Critical patent/CN205545723U/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4305—Synchronising client clock from received content stream, e.g. locking decoder clock with encoder clock, extraction of the PCR packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/1063—Application servers providing network services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/401—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference
    • H04L65/4015—Support for services or applications wherein the services involve a main real-time session and one or more additional parallel real-time or time sensitive sessions, e.g. white board sharing or spawning of a subconference where at least one of the additional parallel sessions is real time or time sensitive, e.g. white board sharing, collaboration or spawning of a subconference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H04L65/765—Media network packet handling intermediate
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L7/00—Arrangements for synchronising receiver with transmitter
    • H04L7/0016—Arrangements for synchronising receiver with transmitter correction of synchronization errors
    • H04L7/0033—Correction by delay
    • H04L7/0037—Delay of clock signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/214—Specialised server platform, e.g. server located in an airplane, hotel, hospital
    • H04N21/2143—Specialised server platform, e.g. server located in an airplane, hotel, hospital located in a single building, e.g. hotel, hospital or museum
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23608—Remultiplexing multiplex streams, e.g. involving modifying time stamps or remapping the packet identifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4344—Remultiplexing of multiplex streams, e.g. by modifying time stamps or remapping the packet identifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637—Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/647—Control signaling between network components and server or clients; Network processes for video distribution between server and clients, e.g. controlling the quality of the video stream, by dropping packets, protecting content from unauthorised alteration within the network, monitoring of network load, bridging between two different networks, e.g. between IP and wireless
    • H04N21/64723—Monitoring of network processes or resources, e.g. monitoring of network load
    • H04N21/64738—Monitoring network characteristics, e.g. bandwidth, congestion level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Abstract

本实用新型涉及多媒体系统，包括：媒体服务器，所述媒体服务器通信地耦接至网络和多个客户端媒体播放器，所述媒体服务器被配置成用于对经由所述网络接收到的多个多媒体信号进行解调和解码，以输出至所述多个客户端媒体播放器；主媒体播放器，所述主媒体播放器被配置成用于接收来自所述媒体服务器的节目，所述节目包括用于在显示设备上渲染的视频数据和用于向第一扬声器渲染的一组音频数据；次媒体播放器，所述次媒体播放器被配置成用于接收来自所述媒体服务器的、用于向第二扬声器渲染的一组音频数据；以及存储多个指令的存储器。

Description

多媒体系统
技术领域
本披露总体上涉及多媒体呈现，并且具体地涉及管理在多个客户端设备上的多个多媒体流的同步呈现的多媒体系统。
背景技术
大约半个世纪以来，多媒体新闻和娱乐包括接收广播信号以在电视上显示。逐渐地，针对多媒体信号的娱乐和新闻订阅的附加提供商出现，如有线提供商、卫星提供商和之后的互联网提供商。这些多媒体信号由包括以下各项的机顶盒接收：调谐器/解调器、用于解码信号的解复用器以及显示器输出端口。因此，虽然新闻和娱乐内容源拓展了，内容的目的地仍然是电视或者可能多个电视。然而，近几年来，替代性显示设备已经成为配备有能够预先接收旨在TV上显示的多媒体信号的硬件和软件。这些目的设备包括交互式游戏控制台、计算机、膝上计算机、平板计算机和移动设备(如，例如，智能电话)。现在，所有这些设备被用作媒体播放器以渲染来自互联网连接的电视节目分销商和提供商的视听内容。此外，许多这些媒体播放器是移动的并且在无线客户端-服务器网络环境中接收多媒体内容。
实用新型内容
所披露的多媒体系统用于拆分与单个节目相关联的多媒体内容流以在多个目的设备中进行同步渲染。例如，当同一电影的两个观看者希望听到不同语言的音轨时，拆分多媒体内容会是令人期望的。在这种情况下，媒体服务器针对单个节目处理多媒体流以提供与该节目相关联的视频数据和音频数据以用于在不同媒体播放器上基本上同步呈现。例如，媒体服务器可以提供视频以用于在电视屏幕上显示，而英语音轨经由电视声音系统呈现。同时，法语音轨可以从多媒体流中拆分并在同一时间呈现于分开的设备(例如，智能电话)上，从而使得当观看TV上的视频时第二用户可以通过耳机听到法语的电影声道。此外，视频信息可以在两个或者更多个设备之间被拆分从而使得当电影在电视屏幕上显示时，包含字幕的视频版本以同步的方式也在平板计算机上显示。在另一个场景中，纪录片电影可以被提供为一对视频流，其中，一个流仅包括图像，而另一个流包括补充信息如叠加在图像上的历史事实。替代性地，体育赛事可以连同包括运动员信息、比赛统计、比赛详情注释等等的第二视频流被呈现。
一种多媒体系统，包括：媒体服务器，所述媒体服务器通信地耦接至网络和多个客户端媒体播放器，所述媒体服务器被配置成用于对经由所述网络接收到的多个多媒体信号进行解调和解码，以输出至所述多个客户端媒体播放器；主媒体播放器，所述主媒体播放器被配置成用于接收来自所述媒体服务器的节目，所述节目包括用于在显示设备上渲染的视频数据和用于向第一扬声器渲染的一组音频数据；次媒体播放器，所述次媒体播放器被配置成用于接收来自所述媒体服务器的、用于向第二扬声器渲染的一组音频数据；以及存储多个指令的存储器，当由微处理器执行时，所述多个指令导致所述媒体服务器将与所述节目相关联的多媒体信号拆分为分开的视频流和音频流；将视频流和音频流传输至所述主媒体播放器；将音频流传输至所述次媒体播放器；协调与同一节目相关联的视频流和音频流在不同的媒体播放器上基本上同时显示；并且协调与同一节目相关联的不同组音频数据在所述第一扬声器和所述第二扬声器上基本上同时显示。
附图说明
在附图中，完全相同的参考号标识类似的元件。附图中元件的大小和相对位置不一定成比例地绘制。
图1是示出了根据在此所描述的一个实施例的家庭多媒体娱乐系统的部件的框图。
图2是示出了根据在此所描述的实施例在图1中示出的以无线网络配置安排的家庭多媒体娱乐系统的部件的布局。
图3是根据在此所描述的实施例包括媒体服务器、主客户端和次客户端的基本多客户端媒体呈现安排的示图。
图4是示出了根据在此所描述的一个实施例的在图3中所描绘的媒体服务器的内部部件的框图。
图5示出了如在本领域中所惯用的节目时钟基准(PCR)值的数据表示。
图6是展示了根据在此所描述的实施例操作网络时延计算器的包图。
图7是示出了根据在此所描述的一个实施例将多媒体内容从媒体服务器流式传输至不同媒体播放器的方法中的一般化步骤的流程图。
图8是根据在此所描述的一个实施例作为时间的函数的PTS的图。
图9是展示了根据在此所描述的实施例的同步化方法的图画示意图。
图10是示出了根据在此所描述的一个实施例将多媒体内容从媒体服务器流式传输至不同媒体播放器的示例性方法中的一系列步骤的流程图。
具体实施方式
在以下说明中，陈述了某些具体细节以便提供对所披露的主题的不同方面的全面理解。然而，所披露的主题可以在没有这些具体细节的情况下实施。在一些实例中，尚未具体描述包括在此披露的主题的实施例的公知结构和方法以免模糊本披露的其它方面的描述。
除非上下文另有要求，否则贯穿说明书和所附权利要求书，“包括(comprise)”一词及其多种变体(诸如，“包括(comprises)”和“包括(comprising)”)将以一种开放式的和包含性的意义来进行解释，也就是作为“包括，但不限于(including,but not limited to)”。
贯穿本说明书对“一个实施例”或“一种实施例”的引用意味着关于实施例所描述的特定的特征、结构、或特性是包括在至少一个实施例中的。因此，在贯穿本说明书的各种地方出现的短语“在一个实施例中”或“在一种实施例中”不一定都是指相同的方面。此外，可以将这些特定的特征、结构、或特性以任何适当的方式在本披露的一个或多个方面中进行组合。
在此说明书中，本披露的实施例展示了订户卫星电视服务作为示例。此详细描述不旨在将本披露限制于任何特定的实施例。本披露同样可适用于有线电视系统、广播电视系统、互联网流媒体系统、网络文件播放、本地文件播放或者包括用户硬件(典型地以由媒体提供商或由第三方维护服务提供商支持的接收器或机顶盒的形式)的其他电视分发系统或视频分发系统。此类硬件还可以包括例如数字视频记录器(DVR)设备和/或数字视频光盘(DVD)记录设备或者机顶盒内侧的或与其分离的其他附属设备。
贯穿本说明书，术语“订户”指作为媒体服务提供商的消费者并且具有与媒体服务提供商相关联的账户的终端用户。订户设备驻留在该订户的住址处。术语“用户”和“观看者”指使用在此所描述的家庭娱乐系统部件中的部分或全部部件的任何人。术语“消费者”指发出服务呼叫的人。
本披露在各种地方使用了术语“信号”。本领域的技术人员将认识到信号可以是任何数字信号或模拟信号。那些信号可以包括但不限于：位、规定的位集、A/C信号、D/C信号、分组或者流。在本描述中使用术语“信号”可以包括这些不同解释的任何一种。本领域的技术人员还将理解的是术语“连接”不限于物理连接而是可以指通信地或操作地耦接两个设备的任何方式。
作为一般情况，本披露使用术语“电视转换器”、“接收器”、“机顶盒”、“电视接收设备”、“电视接收器”、“电视记录设备”、“卫星机顶盒”、“卫星接收器”、“有线机顶盒”、“有线接收器”和“内容接收器”来可互换地指能够采集、处理和分发由广播分销商、有线分销商、电话分销商或卫星分销商传输的一个或多个电视信号的转换器设备或电子设备。DVR和“个人录像机(PVR)”可互换地指可以记录和播放电视信号并且可以实现包括但不限于播放、快进、倒退和暂停的播放功能的设备。如本说明书以及与其相关的附图中所陈述的，DVR和PVR功能性或设备可以与电视转换器组合。由这些广播分销商、有线分销商、电话分销商、卫星分销商或其他分销商传输的信号可以单独地或者以任何组合包括互联网数据、无线电数据、电视数据或电话数据以及流媒体。本领域的技术人员将认识到电视转换器设备可以被实现为例如一个外部自闭合单元、多个外部自闭合单元或者封装在电视内的内部单元。本领域的技术人员将进一步认识到本披露可以应用于模拟或数字卫星机顶盒。
作为另一个一般情况，本领域的技术人员将理解术语“电视”指电视机或视频显示器，该电视或视频显示器可以包含集成电视转换器设备，例如，容纳在电视内的内部可接收有线电视的电视调谐器或者替代地连接到外部电视转换器设备的电视调谐器如经由线缆连接至电视的外部机顶盒。外部电视转换器设备的进一步实施例是艾科斯达霍珀(EchoStar Hopper)组合卫星机顶盒和DVR。
显示器可以包括但不限于：电视显示器、监视器显示器、交织视频显示器、非交织视频显示器、逐行倒相制式(PAL)显示器、国家电视系统委员会(NTSC)系统显示器、逐行扫描显示器、等离子体显示器、液晶显示(LCD)显示器、阴极射线管(CRT)显示器和各种高清(HD)显示器、IMAXTM屏幕、电影屏幕、投影屏幕等。
在此参照已制造的多媒体系统描述具体的实施例；然而，本披露和对某些材料、尺寸以及加工步骤的细节和次序的引用是示例性的，并且不应当被限制于所示的这些。
现在转向附图，图1根据一个实施例示出了构成在当前媒体生态系统中操作的典型家庭多媒体系统100的一组电子部件。家庭多媒体系统100替代地可以在非家庭环境中实现，如办公室大厦、旅馆、度假区、商业企业、工业环境或任何其他固定的环境。示例性家庭多媒体系统100包括媒体服务器101和以下示例性部件中的一个或多个：个人计算机102(例如，桌上计算机或膝上计算机)；电视104或其他显示设备(如前面屏幕或背面屏幕投影系统)；客户端机顶盒106；游戏控制台108；联网存储设备110；平板计算机112；以及移动设备114(如，例如，智能电话)。这些部件102-114经由本地网络115与媒体服务器101并且与彼此进行通信。多媒体系统100的其他实施例可以包括比在附图中示出的那些部件更多或更少的部件。本地网络115可以是硬连线的网络、无线网络，或者本地网络115可以包括有线数据路径和无线数据路径两者。媒体服务器101表示经由线缆或卫星接收宽带互联网信号以及电视信号和/或无线电信号的一个或多个设备，并且经由本地网络115将多媒体内容分发至其他部件。通过宽带连接，媒体服务器101可以提供接入互联网流源如You-TubeTM、NetflixTM和HuluTM等等。媒体服务器101可以是例如包含片上系统(SOC)、配备有加强型软件以实现以下描述的特征的简易机顶盒。内容可以被存储在联网的存储设备110中以用于在稍后的时间处各种部件之间的共享访问。联网的存储设备110可以是硬盘驱动器、TiVoTM设备或者适合于存储多媒体数据的其他类似的高密度数据存储单元。
图2根据一个实施例示出了家庭多媒体系统100的示例性系统布局。卫星反射器天线116位于住宅的屋顶上。经由耦接至媒体服务器101的电话线或同轴线缆118提供宽带互联网连接。在公用区如起居室或家庭活动室的电视104a被硬连线至媒体服务器101。媒体服务器101可以被耦接至无线路由器或者可以包括内部无线路由器，以提供遍及住宅以被多个播放设备以及联网的存储设备110接收的无线互联网连接。客户端机顶盒106位于例如藏书室/媒体室105中，并且被硬连线至第二电视显示器104b。所示示例性数据路径中的任何一条路径可以被实现为硬连线连接或者无线连接。
图3示出了基本多媒体客户端媒体系统120的示例性实施例，其中，媒体服务器101被通信地耦接至主客户端(电视104)以及至次客户端(移动电话114)。媒体服务器106向主客户端和次客户端提供多媒体流和相关联的信息并且监测网络时延和系统时延。媒体服务器106还修改PCR，并且在某些实例中生成PCR。客户端设备中的每一个设备是提供帧渲染信息的媒体播放器并且以由媒体服务器106发出的ping分组的形式对查询进行应答。客户端设备还使用由媒体服务器提供的PCR来管理音视频同步。
对在图3中示出的系统布局进行配置通常是有可能的，从而使得在电视104b上示出的电影的两个观看者可以听到两种不同语言的音频。例如，位于藏书室/媒体室105中的电视104b可以包括内部扬声器系统，该内部扬声器系统针对一个观看者播放英语音频，而另一个观看者使用耳机在智能电话上调谐成法语音轨。可以经由媒体服务器101从互联网流式传输音轨和视频两者。然而，因为各种原因，经由移动设备114播放的法语音轨未能与在电视104上的视频播放正确地同步。例如，某人在家中使用Skype(Wi-Fi带宽的大消费者)而可能导致延迟或时延。另外或替代性地，使用导致关于在主客户端上的视频播放的时延的存储缓冲器可以在第二客户端上渲染音频信号。此外，可能存在与互联网连接或者与不同客户端的系统时钟随着时间推移彼此漂移远离的走势相关联的时延和/或抖动。对观看者而言，未能使音轨与视频显示同步是非常恼人且令人混乱的，本质上毁坏了观看体验。
本披露陈述了一种用于协调同步多媒体流的方法，该方法使用由客户端的呈现时间戳(PTS)确定的网络时延信息和客户端系统时延信息来从PCR值130生成经修改的PCR值(PCR2)。参照图4、图5、图6和图7，根据示例性实施例通过在图3中示出的包括媒体服务器101、主客户端设备(例如，电视104)和次客户端设备(例如，移动设备114)的多客户端系统120展示了这种方法。在其他实施例中，多客户端系统120可以包括更多或更少的客户端设备。
图4根据一个实施例更详细地展示了在多客户端系统120中的媒体服务器101。在本示例中的媒体服务器101包括主系统121和扩展系统122。主系统121包括客户端网络时延计算器123、客户端系统时延计算器124、PCR调整模块125、媒体流模块126和客户端信息流模块127。扩展系统122包括PCR生成器128和传输流复用器/转码器单元(TS-mux)129。
PCR生成器128将PCR值130作为节目时钟基准分组标识符(PCR-PID)信号输出至PCR调整模块125。PCR生成器128还包括生成27MHz时钟信号的锁相环路(PLL)振荡器131。PCR调整模块125接收来自客户端网络时延计算器123和客户端系统时延计算器124的时延信息并且产生经修改的PCR信号(PCR2)以使次客户端设备(例如，移动设备114)与主客户端设备(例如，电视104)同步。客户端信息流模块127向媒体流模块126提供客户端的附加信息和状态数据。
媒体服务器101的多媒体输入信号包括直播媒体流输入132(如，来自卫星和有线TV内容提供商服务的多媒体信号)；所记录的内容输入133(如，来自具有传输流分组输出的数字视频记录器(DVR)类型设备的多媒体信号)以及播放内容输入134(如，来自DVD或VCR设备的多媒体信号)。多媒体输入信号132、133和134中的每一个信号通常包括视频信息、音频信息和文本信息。多媒体信号132、133和134被拆分成分开的音频流和视频流，这些音频流和视频流作为视频-PID信号、音频1-PID信号和音频2-PID信号被提供给媒体流单元126以便流式传输至不同的客户端设备(例如，电视104和移动设备114)。
如在图4和表I中示出的，各种类型的输入信号132、133和134可由媒体服务器101区别地对待。媒体服务器系统101是可扩展的从而包括扩展系统122的多个方面(仅当其被需要时)。例如，被归类为输入类型1的直播内容多媒体输入信号132可以已经被编码于TS分组中并且具有来自媒体数据流的PCR。因此，为了处理直播卫星输入132，媒体系统101仅包括主系统121以对次客户端设备进行PCR修改。被归类为输入类型2的所记录的内容多媒体输入133是在TS容器中(例如，来自DVR设备)，并且需要包括PCR生成器128的扩展系统122以生成PCR值130，接着在主系统121中修改PCR以补偿归因于缓冲、时钟漂移等等的时延。被归类为输入类型3的本地文件播放输入134可以不在TS容器中，因此其需要TS-mux 129来拆分视频流和音频流并转码成具有分开的音频-视频PID的TS分组。此外，需要PCR生成器128以生成PCR值130，接着在主系统121中修改PCR。
表I
主系统121的部件并行地操作以传递多媒体流从而用于在客户端设备上同步渲染。媒体流模块126支持媒体服务，该媒体服务将包化基本流(PES)发送至主客户端设备和次客户端设备，而客户端系统时延计算器和客户端网络时延计算器周期地监测与如以下更详细描述的每个连接的客户端相关联的时延时间。例如，PES可以被格式化为MPEG-2传输流(TS)分组，其携带由四字节头部作为前缀的184字节的载荷数据。非视频流部分的附加数据(如PCR、PTS等等)可以被包含在头部中。
同时PCR调整模块125使用时延时间数据以使在客户端设备处的解码器呈现与视频数据同步的音频数据。如在图5中示出的，除了将媒体信号流式传输至客户端设备，PCR值130也被周期地(例如，每100毫秒(ms))传输或者替代地作为头部的一部分与每个视频帧一起被传输。每个视频帧对应于有待在与客户端设备相关联的屏幕上显示的静止图像。
图5示出了作为在解码器处系统时间时钟(STC)的42位表示的典型PCR值130。42位PCR值130包括基于90KHz传输流时钟的33位基础135和基于27MHz时钟的9位延伸136。通过采取呈现时间戳(PTS)和/或解码时间戳(DTS)作为基础而从42位的PCR值130导出针对输入133、134的PCR。将PCR值130发送至在客户端设备处的解码器指示当PCR被接收时在解码器处STC应当被设置成什么。因此，一旦接收到PCR值130，客户端设备中的解码器首先将本地时钟设置为匹配系统时间时钟(STC)，并且然后解码视频帧。根据针对唯一的客户端设备的惯用同步方法，音频数据和视频数据然后被呈现在使用呈现时间戳的唯一的客户端设备上，该呈现时间戳独立地同步于PCR值130。在位于客户端设备中的片上系统内完成同步。内容提供商在内容接收器(例如，机顶盒(STB))中支持这种同步方法。
多客户端系统120使用两步骤的过程实现多媒体流的同步。在图6中展示了同步化中的第一步骤，其中，由所测量的时间延迟确定网络时延。在图6中展示了同步化中的第二步骤，其中，由客户端设备提供的呈现时间戳确定客户端系统时延。在两步骤的同步化方法200中将两种类型的时延考虑在内以生成经修改的PCR2从而使得第二客户端维持与主客户端同步。在图7中进一步详细地示出了方法200。
图6示出了执行同步化方法200的示例性多客户端系统120，其中，媒体服务器101使用客户端网络时延计算器123持续地监测网络时延。客户端网络时延计算器123可以在指令集中被实现，该指令集在结合了本领域公知的媒体服务器101中通常提供的电子存储器以及网络信号传输、接收和信号处理硬件的微处理器上执行。
在201处，在x秒的初始稳定化间隔过程中，媒体服务器将数据流式传输至客户端，在该过程中不监测网络时延。然而，在稳定化间隔过程中，客户端系统时延Δ在203处被考虑在内并且使用关系式Δ＝PTS1-PTS2被确定。
在202处，媒体服务器确定x秒是否已经消逝。
在204处，当稳定化间隔已经过去时，网络时延监测开始。媒体服务器101通过将时延监测信号137或者ping发送至连接到本地网络115的多个客户端设备而监测网络时延，并且通过接收网络时延而对时延监测信号进行应答。可以根据网络连接性和每个客户端设备的配置经由有线路径或无线路径来发送时延监测信号137。
在一个实施例中，第一时延监测信号137被发送至主客户端设备(电视104)。电视104通过返回ping应答分组而对媒体服务器101进行应答，可以从该分组计算主客户端设备的网络时延NL1。接着，媒体服务器将第二时延监测信号137发送至次客户端设备(移动设备114)。移动设备114通过发送回ping应答分组而对媒体服务器101进行应答，可以从该分组计算次客户端设备的网络时延NL2。因此，响应于接收到时延监测信号137，每个客户端设备将确认ping应答分组返回至媒体服务器101，该媒体服务器指示与特定客户端设备相关联的时变网络通信延迟。
在205处，在媒体服务器101中的网络时延计算器123分析从客户端设备接收到的应答的时间延迟。
在206处，网络时延计算器123根据关系式δ＝NL2–NL1计算网络时延δ，其中，NL2和NL1是与对应的客户端设备相关联的网络时延时间。在一个实施例中，网络时延时间被设置为响应时间的一半。例如，如果来自客户端1的ping应答花费200ms并且来自客户端2的ping应答花费400ms，那么NL1＝100ms且NL2＝200ms。因此，δ＝100ms。针对各种客户端设备的网络时延是随时间变化的动态值。以此方式，媒体服务器101持续地间接地监测移动客户端设备的相对时延。
图6示出了客户端系统时延计算器124和媒体服务器101中的PCR生成器128协同操作以执行以下动作：
在207处，客户端系统时延计算器监测与每个客户端相关联的PTS，并行地监测网络时延δ。被称为呈现时间戳(PTS)的经渲染的PES的时间戳值可以被用作客户端系统时延监测信号。媒体服务器将传输流(TS)分组发送至主客户端设备和次客户端设备(电视104和移动设备114)。在渲染其对应的包封于TS分组中的PES分组之后，客户端设备分别地将与经渲染的PES相关联的时间戳PTS1和PTS2返回至媒体服务器101。例如，客户端1的PTS1可以是30分钟或1,800,000ms，而客户端2的PTS2可以是1,799,980ms，滞后客户端1达20ms。
针对输入133和134，当不存在PCR时，可以如以下生成PCR。例如，如果主客户端PTS＝3600ms，而当前42位系统计数器是4000ms，相继的PCR系统计数器值可以偏移-400ms。因此，在1000ms之后，PCR1＝4000+1000–400＝4600ms。
在208处，在稳定化周期之后，根据关系式Δ＝PTS1-PTS2，每z秒重新计算客户端系统时延Δ。在以上示例中，Δ＝20ms。
在209处，媒体服务器101将时延与PCR阈值122进行比较。
在210处，当时延小于阈值(例如，10ms)时，PCR生成器138在不调整时延的情况下将次客户端设备的PCR值设置成等于主客户端设备的PCR值，即PCR2＝PCR1。在以上示例中，PCR2＝PCR1＝1,799,870ms。
在211处，当网络时延和系统时延继续被监测时，用于显示视频的主客户端设备(电视104)与PCR1同步地渲染视频帧并且将与经渲染的视频样本相关联的时间戳PTS1发送至媒体服务器101。
在212处，在媒体服务器101中的PCR调整模块125基于网络时延δ和客户端系统时延Δ信息两者修改PCR值以产生PCR2＝PCR1+δ+Δ，其中，δ＝NL2–NL1表示网络时延。在以上示例中，其中，网络时延δ＝100ms而客户端系统时延Δ＝20ms，PCR2＝1,799,870+100+20＝1,799,990ms。
在214处，媒体服务器101将经修改的PCR值PCR2发送至次客户端设备(移动设备114)。
在216处，移动设备114然后与PCR2同步的音频数据并且因此PCR1与相关联的视频流被显示在电视104上。
通过执行方法200，与在每个客户端设备内执行分开的同步化相反，跨所有三个设备(媒体服务器101和这些客户端设备)执行系统间同步化。这允许同一节目在多个设备上被完全地播放或者拆分并且部分地播放，同时维持在这些不同设备之间音频数据和视频数据之间的同步。
图8展示了在两个客户端设备之间拆分的由于时延而从同步中漂移出来的呈现的走势以及方法200在恢复同步时的效果。图8绘制了客户端1的PTS和相对于客户端1的作为时间的函数的PTS的客户端2的PTS。在开始执行方法200时，由于网络时延和缓冲在两个客户端之间存在PTS差分230。在第一个x秒过程中，相对于客户端1的PTS调整客户端2的PTS以校正由于客户端系统时延已经发生的漂移，然而，该网络时延还被未考虑。随后，在每z秒的间隔过程中调整客户端2的PTS以校正漂移，该漂移是由于持续计算的网络时延δ和每z秒重新计算的客户端系统时延Δ两者而出现的。因此，调整的PTS引入周期性校正，该校正防止两个呈现的定时偏差。从在图8中示出的两个曲线图明显的是在没有此类校正的情况下，时延将累积并且导致在客户端2上的呈现显著地滞后于在客户端1上的呈现。
参照图9和图10，使用以上描述的同步化方法允许媒体服务器101执行方法250以将同步化的内容流式传输至各种不同的客户端设备。图9示出了具有三个客户端设备(电视104、平板计算机112和移动设备114)的多客户端系统240。多客户端系统240执行在图10中示出的方法250，如下：
在252处，媒体服务器101将多媒体信号242拆分成分开的视频流和音频流。拆分多媒体信号242可以包括对多媒体信号242进行解调和解码。拆分多媒体信号242可以进一步包括对源自多媒体信号242的视频流进行转码以提供具有不同分辨率的视频信号。拆分多媒体信号242可以进一步包括生成多个音频流，这些音频流提供多媒体信号242的音频部分的外语翻译。
在254处，媒体服务器101将有待同时显示在电视104上的视频流242a和英语音频流242b传输至主客户端(例如，客户端机顶盒106)。
同时，在256处，媒体服务器101拆分开并传输仅一个法语音频流242c以呈现于次客户端(例如，移动设备114)上。
在258处，一对信号可以从多媒体信号242中拆分以传输至另一个次客户端(例如，平板计算机112)。在一个实施例中，这些信号中的一个信号包含与同一节目相关的加强型视频内容，如事件的附加描述。例如，一个信号可以包含加强型视频流242a’，其是用于视频242a相关的加强型图形或图像增强的视频流242a。同时，其他信号包含英语音频流242b。使用同步化方法200，加强型视频内容流242a’可以与英语音频流242b同步地呈现于平板计算机上。
在260处，媒体服务器101使用在以上的图6至图7中示出的方法协调不同流在不同媒体播放器上同步播放。此方法可以被以许多不同的方式用于加强观看者的体验。在一个实施例中，当前节目事件是足球比赛，其中，比赛内容可以显示于电视104上，而加强型视频内容(例如以足球比赛注释的形式)叠加于比赛视频上以显示于平板计算机112上。在一个实施例中，当前节目事件是纪录片，其中，加强型视频内容(以说明性历史注释或地图等等的形式)被显示于平板计算机112上。在一个实施例中，当前节目事件是交互式游戏，其中，游戏图形显示于电视104上，而游戏声音被拆分并且被发送至移动设备114。
以上所描述的各个实施例可以被组合以提供进一步的实施例。在本说明书中引用的和/或在申请数据表中列举的所有美国专利、美国专利申请公开、美国专利申请、外国专利、外国专利申请和非专利公开通过引用而完全并入于此。如果有必要，可以对实施例的各方面进行修改，以采用各专利、申请和公开的概念来提供更进一步的实施例。
应当理解的是，虽然出于说明性目的在此描述了本披露的具体实施例，但是可在不脱离本披露的精神和范围的情况下做出各种修改。相应地，除所附权利要求书之外，本披露不受限制。
鉴于以上详细的描述，可以对这些实施例做出这些和其他改变。总之，在以下权利要求书中，所使用的术语不应当被解释为将权利要求书局限于本说明书和权利要求书中所披露的特定实施例，而是应当被解释为包括所有可能的实施例、连同这些权利要求有权获得的等效物的整个范围。相应地，权利要求书不受本披露的限制。

Claims (8)

1.一种多媒体系统，其特征在于，包括：
媒体服务器，所述媒体服务器通信地耦接至网络和多个客户端媒体播放器，所述媒体服务器被配置成用于对经由所述网络接收到的多个多媒体信号进行解调和解码，以输出至所述多个客户端媒体播放器；
主媒体播放器，所述主媒体播放器被配置成用于接收来自所述媒体服务器的节目，所述节目包括用于在显示设备上渲染的视频数据和用于向第一扬声器渲染的一组音频数据；
次媒体播放器，所述次媒体播放器被配置成用于接收来自所述媒体服务器的、用于向第二扬声器渲染的一组音频数据；以及
存储多个指令的存储器，当由微处理器执行时，所述多个指令导致所述媒体服务器
将与所述节目相关联的多媒体信号拆分为分开的视频流和音频流；
将视频流和音频流传输至所述主媒体播放器；
将音频流传输至所述次媒体播放器；
协调与同一节目相关联的视频流和音频流在不同的媒体播放器上基本上同时显示；并且
协调与同一节目相关联的不同组音频数据在所述第一扬声器和所述第二扬声器上基本上同时显示。
2.如权利要求1所述的系统，其特征在于，所述客户端媒体播放器包括电视、游戏控制台、DVR、计算机、膝上计算机、平板计算机或智能电话中的一者或多者。
3.如权利要求1所述的系统，其特征在于，所述媒体服务器是加强型广播媒体机顶盒。
4.如权利要求1所述的系统，其特征在于，所述次媒体播放器进一步被配置成用于接收用于在第二显示器上渲染的视频流，并且所述多个指令进一步导致所述媒体服务器用节目时钟信号在所述第二显示器上同步渲染所述视频流。
5.如权利要求4所述的系统，其特征在于，所述音频流之一是将另一个音频流翻译成不同的语言。
6.如权利要求5所述的系统，其特征在于，用说明性文本、字幕、注释、图形和叠加图像中的一者或多者增强视频流。
7.如权利要求1所述的系统，其特征在于，所述媒体服务器包括被配置成用于执行时延调整的主系统。
8.如权利要求7所述的系统，其特征在于，所述媒体服务器进一步包括扩展系统，所述扩展系统配置有节目时钟基准生成器和传输流复用器。
CN201521130353.XU 2015-06-30 2015-12-30 多媒体系统 Expired - Fee Related CN205545723U (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/788,289 US20170006331A1 (en) 2015-06-30 2015-06-30 Synchronized rendering of split multimedia content on network clients
US14/788,289 2015-06-30

Publications (1)

Publication Number Publication Date
CN205545723U true CN205545723U (zh) 2016-08-31

Family

ID=54843630

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201511021166.2A Pending CN106331753A (zh) 2015-06-30 2015-12-30 在多个网络客户端上同步渲染经拆分的多媒体内容
CN201521130353.XU Expired - Fee Related CN205545723U (zh) 2015-06-30 2015-12-30 多媒体系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201511021166.2A Pending CN106331753A (zh) 2015-06-30 2015-12-30 在多个网络客户端上同步渲染经拆分的多媒体内容

Country Status (3)

Country Link
US (1) US20170006331A1 (zh)
EP (1) EP3113498A1 (zh)
CN (2) CN106331753A (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105161123B (zh) * 2015-08-25 2018-07-06 广东欧珀移动通信有限公司 一种播放设备分组的方法及终端
GB2552795B (en) * 2016-08-08 2020-01-15 Powerchord Group Ltd A method of presenting media
CN106507202B (zh) 2016-11-11 2019-12-17 传线网络科技（上海）有限公司 播放控制方法及装置
CN107222833A (zh) * 2017-05-22 2017-09-29 深圳市沃特沃德股份有限公司 实现同声翻译的方法、系统和装置
EP3474512B1 (en) * 2017-10-20 2022-08-24 Google LLC Controlling dual-mode bluetooth low energy multimedia devices
CN108055574A (zh) * 2017-11-29 2018-05-18 上海网达软件股份有限公司 媒体文件转码生成多音轨多字幕点播内容的方法及系统
CN108566558B (zh) 2018-04-24 2023-02-28 腾讯科技（深圳）有限公司 视频流处理方法、装置、计算机设备及存储介质
US10771866B2 (en) * 2018-05-24 2020-09-08 Google Llc Methods, systems, and media synchronizing audio and video content on multiple media devices
US11297670B2 (en) * 2018-09-27 2022-04-05 Apple Inc. Coordinated transmission and control for audio output devices
US11474776B2 (en) * 2018-12-18 2022-10-18 Intel Corporation Display-based audio splitting in media environments
US11190836B2 (en) 2018-12-20 2021-11-30 Hisense Visual Technology Co., Ltd. Audio playing and transmitting methods and apparatuses
CN111641864B (zh) * 2019-03-01 2022-05-20 腾讯科技（深圳）有限公司 一种视频信息获取方法、装置及设备
US11445238B2 (en) * 2019-05-10 2022-09-13 Cinewav Pte. Ltd. System and method for synchronizing audio content on a mobile device to a separate visual display system
FR3100412B1 (fr) * 2019-09-04 2021-08-06 Sagemcom Broadband Sas Procédé de décodage d’un flux d’entrée audio/vidéo
CN110995959B (zh) * 2019-12-31 2022-06-17 安博思华智能科技有限责任公司 一种同步双屏显示信息的方法和装置
US11575959B2 (en) * 2020-06-01 2023-02-07 Western Digital Technologies, Inc. Storage system and method for media-based fast-fail configuration
CN112134999B (zh) * 2020-09-18 2021-12-03 咪咕文化科技有限公司 一种视频彩铃的处理方法、设备及计算机可读存储介质
CN114554277B (zh) * 2020-11-24 2024-02-09 腾讯科技（深圳）有限公司 多媒体的处理方法、装置、服务器及计算机可读存储介质
WO2022187876A1 (en) * 2021-03-04 2022-09-09 Mobii Systems (Pty) Ltd A method of providing a time-synchronized multi-stream data transmission
CN113259725B (zh) * 2021-04-14 2022-08-05 北京数字电视国家工程实验室有限公司 一种ts流时钟调整方法、系统、存储介质及电子设备
CN113259726A (zh) * 2021-06-18 2021-08-13 广州朗国电子科技有限公司 多媒体节目分发方法、系统以及多媒体终端、存储装置
CN115243088A (zh) * 2022-07-21 2022-10-25 苏州金螳螂文化发展股份有限公司 一种多主机视频帧级同步渲染方法
CN116600150B (zh) * 2023-05-29 2024-02-06 佛山市炫新智能科技有限公司 一种矩阵式直播展示系统及其展示方法

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7852416B2 (en) * 2005-11-30 2010-12-14 Broadcom Corporation Control device with language selectivity
US9413799B2 (en) * 2007-01-27 2016-08-09 Blackfire Research Corporation Broadcasting media from a stationary source to multiple mobile devices over wi-fi
US8027560B2 (en) * 2007-02-05 2011-09-27 Thales Avionics, Inc. System and method for synchronizing playback of audio and video
US8102836B2 (en) * 2007-05-23 2012-01-24 Broadcom Corporation Synchronization of a split audio, video, or other data stream with separate sinks
US8320410B2 (en) * 2007-05-23 2012-11-27 Broadcom Corporation Synchronization of media data streams with separate sinks using a relay
US7936790B2 (en) * 2007-08-30 2011-05-03 Silicon Image, Inc. Synchronizing related data streams in interconnection networks
WO2009120301A2 (en) * 2008-03-25 2009-10-01 Square Products Corporation System and method for simultaneous media presentation
US8194756B2 (en) * 2008-05-28 2012-06-05 Broadcom Corporation Using program clock references to assist in transport of video stream to wireless device
US8639830B2 (en) * 2008-07-22 2014-01-28 Control4 Corporation System and method for streaming audio
US8731370B2 (en) * 2009-01-12 2014-05-20 At&T Intellectual Property I, L.P. Method and device for transmitting audio and video for playback
WO2012048928A1 (en) * 2010-10-15 2012-04-19 Cinemo Gmbh Distributed playback architecture
US9237324B2 (en) * 2010-10-22 2016-01-12 Phorus, Inc. Playback synchronization
US9398322B2 (en) * 2011-04-27 2016-07-19 Time Warner Cable Enterprises Llc Multi-lingual audio streaming
EP2533547A1 (en) * 2011-06-10 2012-12-12 Koninklijke KPN N.V. Method and system for providing a synchronised user experience from multiple modules
US8997169B2 (en) * 2012-03-23 2015-03-31 Sony Corporation System, method, and infrastructure for synchronized streaming of content
US9100687B2 (en) * 2013-05-31 2015-08-04 Sonic Ip, Inc. Playback synchronization across playback devices
WO2015039888A1 (en) * 2013-09-20 2015-03-26 Koninklijke Kpn N.V. Correlating timeline information between media streams
US9210204B2 (en) * 2013-10-31 2015-12-08 At&T Intellectual Property I, Lp Synchronizing media presentation at multiple devices
US9560312B2 (en) * 2013-12-11 2017-01-31 Cellco Partnership Time synchronization of video and data inside a mobile device

Also Published As

Publication number Publication date
CN106331753A (zh) 2017-01-11
EP3113498A1 (en) 2017-01-04
US20170006331A1 (en) 2017-01-05

Similar Documents

Publication Publication Date Title
CN205545723U (zh) 多媒体系统
US8707382B2 (en) Synchronizing presentations of multimedia programs
US9668031B2 (en) Apparatus, systems and methods for accessing and synchronizing presentation of media content and supplemental media rich content
KR101687640B1 (ko) 동기화된 컨텐츠 재생 방법
US8583555B1 (en) Synchronizing multiple playback device timing utilizing DRM encoding
TWI495331B (zh) 機上盒、快閃眼鏡及多個用戶同時觀看多套影音節目的方法
CN105453580A (zh) 接收方法、发送方法、接收装置及发送装置
US8143508B2 (en) System for providing lyrics with streaming music
WO2013163291A1 (en) Video display system
KR101472013B1 (ko) 부가 데이터를 포함하는 음원 스트리밍을 제공하는 서버 및 방법, 그리고 디바이스
JP2009272945A (ja) 同期再生装置
JP5841715B2 (ja) 映像音声出力装置、および映像音声出力システム、およびマスタ装置
KR101841313B1 (ko) 멀티미디어 흐름 처리 방법 및 대응하는 장치
US8276182B2 (en) Television content from multiple sources
CN106817628A (zh) 一种网络直播平台
KR20060038487A (ko) 동영상 공동 관람 서비스 제공 방법 및 시스템
CN106412646B (zh) 一种实现同步播放的方法和装置
JP2022095777A (ja) 放送サービス通信ネットワーク配信装置および方法
JP2005236777A (ja) メッセ−ジ表示システム
JP6324829B2 (ja) 映像提供システムおよびプロラム
JP5581437B1 (ja) 映像提供システムおよびプロラム
KR101236813B1 (ko) 디지털 방송에서의 개방형 음성 서비스 시스템 및 서비스 방법
US20180359503A1 (en) Method And System For Communicating Inserted Material To A Client Device In A Centralized Content Distribution System
TW201210321A (en) Interactive AV system, system and method for broadcasting AV information
JP2014045413A (ja) コンテンツ配信管理装置、コンテンツ出力システム、コンテンツ配信方法、およびコンテンツ配信プログラム

Legal Events

Date Code Title Description
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160831

Termination date: 20181230