CN116506667A - 同步多个媒体设备上的音频内容和视频内容的方法和系统 - Google Patents

同步多个媒体设备上的音频内容和视频内容的方法和系统 Download PDF

Info

Publication number
CN116506667A
CN116506667A CN202310572438.6A CN202310572438A CN116506667A CN 116506667 A CN116506667 A CN 116506667A CN 202310572438 A CN202310572438 A CN 202310572438A CN 116506667 A CN116506667 A CN 116506667A
Authority
CN
China
Prior art keywords
audio
media
video
content
content item
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310572438.6A
Other languages
English (en)
Inventor
尼基塔·古普塔
肯尼思·玛凯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN116506667A publication Critical patent/CN116506667A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4112—Peripherals receiving signals from specially adapted client devices having fewer capabilities than the client, e.g. thin client having less processing power or no tuning capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4344—Remultiplexing of multiplex streams, e.g. by modifying time stamps or remapping the packet identifiers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H04N21/6336—Control signals issued by server directed to the network components or client directed to client directed to decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请公开了同步多个媒体设备上的音频内容和视频内容的方法和系统。该方法包括：在媒体设备处接收要使用媒体设备呈现媒体内容项的指示；确定媒体设备与用于呈现媒体内容项的媒体设备群组相关联；生成用于控制音频内容在媒体设备群组上的呈现的音频时间戳；生成用于控制视频内容在媒体设备群组上的呈现的视频时间戳；以及使得在媒体设备处使用生成的视频时间戳呈现与媒体内容项相关联的视频内容，并且通过下述方式使得通过媒体设备群组中的至少一个音频设备同时呈现与媒体内容项相关联的音频内容，方式为：经由控制信道向媒体设备群组中的至少一个音频设备传输音频时间戳，以用于修改至少一个音频设备上的音频流。

Description

同步多个媒体设备上的音频内容和视频内容的方法和系统
分案说明
本申请属于申请日为2019年5月22日的中国发明专利申请201980018517.4的分案申请。
技术领域
所公开的主题涉及用于同步多个媒体设备上的音频内容和视频内容的方法、系统和介质。更具体地，所公开的主题涉及创建多个设备的群组，所述多个设备具有视频和/或音频回放能力以回放媒体内容项，并且使媒体内容项的视频部分和音频部分在所述群组中的多个设备中的每个上的回放同步。
背景技术
随着联网媒体设备的增加，用户对组合多个设备来查看媒体内容从而创建更丰富的媒体体验感兴趣。例如，用户可能会对在将与视频相关联的音频路由传递到与电视设备相关联的扬声器以及与电视设备位于同一房间的其他扬声器以创建环绕立体声体验的同时在电视设备上查看视频感兴趣。然而，可能难以同步多个扬声器上的音频回放，并且还可能难以将扬声器上的音频回放与电视设备上的视频回放同步。例如，在从视频共享服务流传输媒体内容的情况下，由于流传输期间网络速度和网络品质的变化，同步可能特别困难。
因此，需要提供用于同步多个设备上的音频内容和视频内容的新方法、系统和介质。
发明内容
提供了用于同步多个媒体设备上的音频内容和视频内容的方法、系统和介质。
根据所公开主题的一些实施例，提供了一种用于同步音频内容和视频内容的方法，所述方法包括：在媒体设备处接收要使用所述媒体设备呈现媒体内容项的指示，其中所述媒体设备包括用于呈现与媒体内容项相关联的音频内容的音频组件和用于呈现与媒体内容项相关联的视频内容的视频组件；确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联，其中所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的音频内容的至少一个音频设备；生成音频时间戳，所述音频时间戳用于控制音频内容在所述媒体设备群组上的呈现；生成视频时间戳，所述视频时间戳控制视频内容在所述媒体设备群组上的呈现；以及使得在所述媒体设备处使用所述生成的视频时间戳呈现与所述媒体内容项相关联的视频内容，并且通过以下方式使得通过所述媒体设备群组中的至少一个音频设备同时呈现与所述媒体内容项相关联的音频内容，该方式为：经由控制信道向所述媒体设备群组中的至少一个音频设备传输音频时间戳，以用于修改至少一个音频设备上的音频流。
在一些实施例中，媒体设备跨媒体设备群组中的媒体设备同步音频内容和视频内容。
在一些实施例中，响应于将媒体设备的音频组件设置为主设备并且将媒体设备群组中的至少一个音频设备设置为跟随设备，使视频时间戳基于生成的音频时间戳。
在一些实施例中，所述方法进一步包括确定是否在媒体设备的音频组件和至少一个音频设备上呈现媒体内容项的音频内容。
在一些实施例中，所述方法进一步包括：响应于确定要在至少一个音频设备上呈现媒体内容项的音频内容，禁止在媒体设备上呈现与媒体内容项相关联的音频内容。
在一些实施例中，使用生成的音频时间戳在媒体设备上呈现音频内容，并且其中，响应于确定要在媒体设备的音频组件和至少一个音频设备上呈现媒体内容项的音频内容，向所述至少一个音频设备传输音频时间戳。
在一些实施例中，所述方法进一步包括：接收媒体内容项的回放改变的指示；以及响应于接收到回放改变的指示，通过以下方式使得基于所述指示而修改与媒体内容项相关联的视频内容在媒体设备上的呈现以及媒体设备群组中的至少一个音频设备对与媒体内容项相关联的音频内容的呈现，该方式为：生成更新的音频时间戳，所述更新的音频时间戳被传输到所述音频设备群组中的至少一个音频设备；以及基于所述更新的音频时间戳而生成更新的视频时间戳。
在一些实施例中，结合使得所述音频设备群组中的至少一个音频设备根据所述更新的音频时间戳来呈现音频内容的指令，传输更新的音频时间戳。在一些实施例中，结合使得所述音频设备群组中的至少一个音频设备使用所述更新的音频时间戳在至少一个音频设备上呈现音频流的指令，传输更新的音频时间戳。在一些实施例中，所述指令使得音频设备群组中的至少一个音频设备基于更新的音频时间戳的值而在音频流中重复音频样本或跳过音频样本。
在一些实施例中，结合使得所述视频组件根据所述更新的视频时间戳呈现视频内容的媒体流的指令，向媒体设备的视频组件传输更新的视频时间戳。在一些实施例中，所述指令使得媒体设备基于更新的视频时间戳的值在媒体流中的重复视频帧或跳过视频帧。
在一些实施例中，媒体内容项的回放改变是媒体内容项的回放位置的改变。
在一些实施例中，媒体内容项的回放改变是与媒体内容项相关联的音频内容的音量的改变。
在一些实施例中，基于当前音频时间戳、自媒体内容项在媒体设备上开始呈现以来经过的持续时间以及与媒体内容项相关联的音频内容的采样率而生成音频时间戳。
在一些实施例中，所述方法进一步包括：检测具有音频回放能力和视频回放能力中的至少一个的多个媒体设备；以及使得呈现用于选择多个检测到的媒体设备中的一个或多个的用户界面，其中使从多个媒体设备中选择的媒体设备的子集放置在媒体设备群组中。
在一些实施例中，所述方法进一步包括：媒体设备经由媒体设备群组中的第一媒体设备接收媒体内容项以进行回放；以及同步音频内容和/或视频内容在媒体设备群组中的至少一个另一第二媒体设备上的呈现。
根据所公开主题的一些实施例，提供了一种用于同步音频内容和视频内容的系统，所述系统包括存储器以及硬件处理器，所述硬件处理器耦合到所述存储器，所述硬件处理器被编程为：在媒体设备处接收要使用媒体设备呈现媒体内容项的指示，其中媒体设备包括用于呈现与媒体内容项相关联的音频内容的音频组件和用于呈现与媒体内容项相关联的视频内容的视频组件；确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联，其中所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的音频内容的至少一个音频设备；生成音频时间戳，所述音频时间戳用于控制音频内容在所述媒体设备群组上的呈现；生成视频时间戳，所述视频时间戳控制视频内容在所述媒体设备群组上的呈现；以及使得在所述媒体设备处使用所述生成的视频时间戳呈现与所述媒体内容项相关联的视频内容，并且通过以下方式使得通过所述媒体设备群组中的至少一个音频设备同时呈现与所述媒体内容项相关联的音频内容，该方式为：经由控制信道将音频时间戳传输到所述媒体设备群组中的至少一个音频设备，以修改至少一个音频设备上的音频流。
根据所公开主题的一些实施例，提供了一种包含计算机可执行指令的非暂时性计算机可读介质，所述计算机可执行指令在由处理器实行时使得处理器执行用于同步音频内容和视频内容的方法，所述方法包括：在媒体设备处接收要使用媒体设备呈现媒体内容项的指示，其中媒体设备包括用于呈现与媒体内容项相关联的音频内容的音频组件和用于呈现与媒体内容项相关联的视频内容的视频组件；确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联，其中所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的音频内容的至少一个音频设备；生成音频时间戳，所述音频时间戳用于控制音频内容在所述媒体设备群组上的呈现；生成视频时间戳，所述视频时间戳控制视频内容在所述媒体设备群组上的呈现；以及使得在所述媒体设备处使用所述生成的视频时间戳呈现与所述媒体内容项相关联的视频内容，并且通过以下方式使得通过所述媒体设备群组中的至少一个音频设备同时呈现与所述媒体内容项相关联的音频内容，该方式为：经由控制信道向所述媒体设备群组中的至少一个音频设备传输音频时间戳，以用于修改至少一个音频设备上的音频流。
根据所公开主题的一些实施例，提供了一种用于同步音频内容和视频内容的系统，所述系统包括：用于在媒体设备处接收要使用媒体设备呈现媒体内容项的指示的装置，其中媒体设备包括用于呈现与媒体内容项相关联的音频内容的音频组件和用于呈现与媒体内容项相关联的视频内容的视频组件；用于确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联的装置，其中所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的音频内容的至少一个音频设备；用于生成音频时间戳的装置，所述音频时间戳用于控制音频内容在所述媒体设备群组上的呈现；用于生成视频时间戳的装置，所述视频时间戳控制视频内容在所述媒体设备群组上的呈现；以及用于使得在所述媒体设备处使用所述生成的视频时间戳呈现与所述媒体内容项相关联的视频内容的装置，和用于通过如下方式使得通过所述媒体设备群组中的至少一个音频设备同时呈现与所述媒体内容项相关联的音频内容的装置，该方式为：经由控制信道向所述媒体设备群组中的至少一个音频设备传输音频时间戳，以用于修改至少一个音频设备上的音频流。
附图说明
当结合以下附图考虑时，参考以下对所公开主题的详细描述，可以更充分地了解所公开主题的各种目标、特征和优点，其中相同的附图标记标识相同的要素。
图1A和图1B示出了根据所公开主题的一些实施例的用于同步媒体呈现设备的用户界面的示例。
图2示出了根据所公开主题的一些实施例的用于在多个设备上呈现同步的音频内容和视频内容的过程的示例。
图3示出了根据所公开主题的一些实施例的用于将多个音频设备与视频设备同步的过程的示例。
图4示出了根据所公开主题的一些实施例的适合于实现本文所描述的用于同步音频内容和视频内容的机制的说明性系统的示意图。
图5示出了根据所公开的主题的一些实施例的可以在图4的服务器和/或用户设备中使用的硬件的详细示例。
具体实施方式
根据各种实施例，提供了用于同步多个媒体设备上的音频内容和视频内容的机制(可以包括方法、系统和介质)。
在一些实施例中，本文所描述的机制可以用于在媒体设备群组上同时地呈现媒体内容项，所述媒体设备群组诸如媒体呈现设备(例如，电视、投影仪、数字媒体接收器和/或任何其他合适类型的媒体呈现设备)和一个或多个音频设备。例如，在一些实施例中，媒体呈现设备可以是特定房间中具有视频和音频回放能力的电视(例如，连接到数字媒体接收器的客厅电视、卧室电视和/或任何其他合适的媒体呈现设备)，并且媒体设备群组中包括的音频设备可以包括一个或多个扬声器，例如与显示设备位于同一房间或位于附近房间的扬声器(例如，客厅扬声器、卧室扬声器和/或任何其他合适的扬声器)、连接在同一局域网上的扬声器、连接到数字媒体接收器的扬声器、呈立体声对配置的一组至少两个扬声器等。在更特定的示例中，显示设备可以经由连接到显示设备的诸如数字媒体接收器的媒体呈现设备来接收媒体内容项以进行回放，其中媒体呈现设备可以同步音频内容和/或视频内容在相关联的媒体设备(诸如与媒体呈现设备分组在一起的扬声器)上的呈现。
在一些实施例中，本文所描述的机制可以确定媒体设备群组将被用于回放选定的媒体内容项，其中每个媒体设备具有特定的音频和/或视频能力。例如，所述机制可以提供允许用户将多个媒体设备放置到媒体设备群组中的用户界面，所述媒体设备群组诸如包括数字媒体接收器(或任何其他合适的流传输媒体设备)和外部扬声器系统的客厅组。在继续该示例中，响应于选择媒体内容项以在与数字媒体接收器进行通信的移动设备上回放，所述机制可以确定数字媒体接收器属于包括相关联媒体设备的媒体群组，所述相关联媒体设备诸如用于呈现选定媒体内容项的音频内容的呈立体声对配置的一组扬声器(例如，其中一个扬声器回放左声道音频信号，而另一个扬声器回放右声道音频信号)。基于媒体群组，所述机制可以使得在连接到数字媒体接收器的显示设备上呈现选定媒体内容项的视频内容，并且可以同时使得在至少外部扬声器系统上呈现选定媒体内容项的音频内容(例如，同时禁止在与显示设备相关联的音频组件上呈现选定媒体内容项的音频内容，同时同步显示设备的音频组件和外部扬声器系统两者上选定媒体内容项的音频内容)。
在一些实施例中，媒体内容项的同步呈现可以包括任何合适的特征。例如，在一些实施例中，可以将在显示设备上呈现的视频内容与由媒体设备群组中的一个或多个扬声器设备呈现的音频内容同步，其中将显示设备设置为主设备并且将音频信号设置为主信号，并且将媒体设备群组中的其余媒体设备设置为跟随设备，并且其中使主设备的视频信号和跟随设备的音频信号与主设备的音频信号同步。在继续该示例中，所述机制可以确定是否在媒体设备的群组中的音频设备和显示设备上呈现音频内容，或者是否在音频设备上呈现音频内容并禁止在显示设备的音频组件上呈现音频内容。
应当注意，在一些实施例中，可以从例如主设备将音频数据(或其他媒体数据)流传输到对应的跟随设备。
在一些实施例中，媒体内容项的查看者可以从显示设备、音频设备群组中的音频设备和/或连接到显示设备或音频设备中的一个的任何合适的计算设备操纵媒体内容项的回放。例如，查看者可以使来自显示设备和/或音频设备群组中的音频设备中的任何一个的音频内容静音。在另一示例中，查看者可以使媒体内容项的呈现快进或倒退，并且本文所描述的机制可以从显示设备和媒体设备群组中的音频设备两者同步地调整音频内容和视频内容的呈现。下面结合图1A、图1B和图2进一步描述用于调整和保持媒体内容项的呈现同步性的技术。
在一些实施例中，本文所描述的机制可以使用任何合适的技术或技术组合来维持媒体内容项在媒体呈现设备与媒体设备群组中的一个或多个音频设备之间的呈现同步性。例如，在一些实施例中，本文所描述的机制可以将与媒体呈现设备相关联的音频组件设置为主设备，其中与媒体呈现设备和媒体设备群组中的音频设备中的每个相关联的视频组件可以被设置为主设备的跟随设备。作为更特定的示例，在一些实施例中，在媒体呈现设备上实现的机制可以计算更新的音频时间戳(例如，基于自媒体内容项的回放开始以来的时间，基于音频内容的采样率，和/或基于以下结合图3所描述的任何其他合适的信息)，并且可以将更新的时间戳传输到媒体设备群组中的音频设备，由此确保根据同一时间戳呈现由媒体呈现设备和媒体设备群组中的音频设备两者呈现的音频内容。作为另一个更特定的示例，在一些实施例中，在媒体呈现设备上实现的机制可以计算更新的视频时间戳(例如，基于更新的音频时间戳，如下面结合图3所描述的)，并且可以将更新的视频时间戳传输到媒体呈现设备的视频组件或显示设备，由此确保从显示设备呈现的视频内容对应于由媒体设备群组中的至少音频设备所呈现的音频内容。
转向图1A，示出了根据所公开主题的一些实施例的用于初始化要同步的媒体呈现设备群组的用户界面的示例100。在一些实施例中，用户界面100可以呈现在任何合适的设备上，所述设备诸如为使设备初始化的用户的移动电话、平板计算机或可穿戴计算机和/或任何其他合适的设备。在一些实施例中，可以结合任何合适的应用来呈现用户界面100，所述应用例如为用于控制用户的家中的不同设备(例如，不同的媒体设备、诸如智能恒温器的智能设备和/或任何其他合适的设备)的应用。在更特定的示例中，可以响应于在设备上执行应用并选择“创建群组”选项以将一个或多个媒体设备放置在媒体群组中来呈现用户界面100。
如图所示，用户界面100可以用于选择多个音频设备，所述多个音频设备将与播放音频内容和视频内容的媒体呈现设备(诸如连接到流传输媒体设备的电视或显示设备)分组在一起。例如，如图1A中所示，用户界面100可以用于从扬声器群组102中选择扬声器，所述扬声器群组102将与连接到流传输媒体设备的客厅电视分组在一起。在一些实施例中，音频设备群组102可以包括任何合适数量的个别扬声器，诸如客厅扬声器104、餐厅扬声器、一组立体声对扬声器(例如，其中一个扬声器回放左声道音频信号而另一个扬声器回放右声道音频信号)和/或任何其他合适的扬声器。
应当注意，虽然图1A呈现了两个音频设备的列表供选择以与媒体呈现设备分组在一起，但是这仅是说明性的。具有音频和/或视频回放能力的任何合适的媒体设备可以包括在列表102中。例如，列表102可以包括：多个外部扬声器系统，所述多个外部扬声器系统位于媒体呈现设备近端；多个媒体呈现设备，所述多个媒体呈现设备各自连接到显示设备；多个媒体接收器设备，所述多个媒体接收器设备各自连接到扬声器设备；多个计算设备，所述多个计算设备具有音频和/或视频回放能力；等等。
在一些实施例中，可以响应于检测到连接到局域网(例如，同一个Wi-Fi网络)的媒体设备(例如，具有音频和视频回放能力的一个或多个媒体设备以及仅具有音频回放能力的一个或多个音频设备)而呈现用户界面100。可替代地，响应于在用户界面100上选择用户界面要素，可以传输设备信息查询，所述设备信息查询等待来自局域网上的媒体设备的响应，其中所述响应包括例如设备标识符、设备能力信息、网络信息等。此类响应可以用于在用户界面100内填充用于放置在媒体群组中的媒体设备的列表。
应当注意，在一些实施例中，电视和音频设备中的每个可以以任何合适的方式连接。例如，在一些实施例中，每个设备可以连接到用户家中的Wi-Fi网络。作为另一示例，在一些实施例中，每个设备可以使用蓝牙通信和/或以任何其他合适的方式与其他设备通信。在另一示例中，在一些实施例中，可以在计算设备与音频设备之间建立无线连接，诸如自组织无线网络连接、短距离无线通信协议(例如，蓝牙、低功耗蓝牙、无线USB等)等。应当注意，在一些实施例中，设备可以直接或经由流传输媒体接口连接到Wi-Fi网络，所述流传输媒体接口连接(例如，经由HDMI连接和/或以任何其他合适的方式连接)到所述设备。
在一些实施例中，用户界面100可以包括指示符，所述指示符指示特定媒体设备当前是否连接到通信网络以及是否可供选择。例如，与音频设备标识符相邻的指示符可以指示音频设备当前连接到局域网并且可用于包括在媒体群组(例如，“我客厅中的电影”媒体群组)内。在另一示例中，设备标识符的表示可以被修改以指示所述媒体设备先前在局域网上被检测到，但是当前未被检测到，并且因此不可用于放置到媒体群组中。在另一示例中，设备标识符的表示可以被修改以指示用于放置到媒体群组中的建议的媒体设备(例如，基于先前的群组设置，基于与显示设备的接近度，基于位置信息，基于设备信息等)。
在一些实施例中，用户界面100可以包括默认选择106。在一些实施例中，选择默认选择106可以使得来自音频设备群组102的选定音频设备默认与特定媒体呈现设备(例如，连接到媒体流传输设备的客厅电视，如图1A中所示)分组在一起以供未来呈现媒体内容。例如，在一些实施例中，选择默认选择106可以使得使用来自音频设备群组102的选定扬声器同步地呈现与在客厅电视上呈现的媒体内容项相关联的音频内容。
在一些实施例中，可以创建多个媒体设备群组。例如，使用用户界面100，用户可以输入群组名称并选择与所述群组名称相关联的特定媒体设备。在更特定的示例中，可以使用特定视频设备和特定音频设备创建“电影”媒体群组，以回放电影内容。在另一更特定的示例中，可以使用特定视频设备和特定音频设备创建“深夜”媒体群组，以便在特定时间之后回放媒体内容(例如，晚上9点之后当用户的孩子们通常处于睡眠状态时使用该媒体群组)。在另一示例中，响应于确定来自所连接的媒体设备中的每个的设备能力信息，可以在用户界面100中呈现建议的群组的列表(例如，用于观看恐怖电影的建议媒体设备群组，用于第一视频设备的音频设备群组和用于第二视频设备的不同音频设备群组等)。
转向图1B，根据所公开主题的一些实施例示出用于调整分组的音频设备上的音量的用户界面的示例150。在一些实施例中，用户界面150可以呈现在诸如移动设备(例如，移动电话、平板计算机、可穿戴计算机和/或任何其他合适的移动设备)的任何合适的设备上，所述移动设备可以用于发起和/或控制媒体内容在媒体回放设备上的回放。应当注意，在一些实施例中，可以结合在设备上执行的任何合适的应用来呈现用户界面150，所述应用诸如为用于控制用户家中的各种设备的应用，用于发起和/或控制媒体内容的回放的应用(例如，与视频共享服务相关联的应用和/或任何其他合适的应用)和/或任何其他合适的应用。
如图所示，在一些实施例中，用户界面150可以包括用于调整群组中的音频设备的音量的用户界面控件。例如，在将客厅电视和客厅扬声器分组在一起的实例中，用户界面150可以呈现用户界面控件，以调整客厅电视的音量和客厅扬声器的音量。作为更特定的示例，用户界面150可以包括如图1B中示出的音量调整滑块152和154，以分别调整客厅电视的音量和客厅扬声器的音量。应当注意，在一些实施例中，如下面结合图2更详细地描述的，调整分组在一起的任何设备的音量(或使声音输出静音)可以使得音量被调整。
转向图2，示出了根据所公开主题的一些实施例的用于同步视频内容和音频内容的过程的示例200。在一些实施例中，可以由呈现媒体内容的用户设备(诸如电视)来实现过程200。另外或可替代地，在一些实施例中，可以通过以任何合适的方式(例如，HDMI连接和/或任何其他合适类型的连接)连接到媒体回放设备(例如，电视)的流传输媒体接口来实现过程200。
过程200可以通过接收要呈现媒体内容项的指示而在202处开始。在一些实施例中，过程200可以任何合适的方式接收指示。例如，在一些实施例中，过程200可以基于来自用户设备(例如，移动电话、平板计算机、膝上型计算机和/或任何其他合适类型的用户设备)的输入而接收指示，指示将在特定显示设备(例如，电视和/或任何其他合适类型的媒体回放设备)上呈现媒体内容项。在一些实施例中，媒体内容项可以是任何合适类型的媒体内容，诸如视频、电视节目、电影和/或任何其他合适类型的媒体内容。
在204处，过程200可以识别设备群组，从所述设备群组呈现与媒体内容项相关联的音频内容。例如，过程200可以确定显示设备是否与媒体设备群组相关联。在更特定的示例中，如上面结合图1A所示出和所描述的，在要在特定显示设备(诸如客厅电视)上呈现媒体内容项的实例中，过程200可以识别已与客厅电视分组在一起的任何合适的设备，诸如客厅扬声器(例如，呈立体声对配置的一组扬声器)。
在一些实施例中，过程200可以基于由用户进行的显式分组而识别用于播放音频内容的媒体设备，如上面结合图1A所示出和所描述的。另外或可替代地，在一些实施例中，过程200可以使用任何合适的设备发现方法来识别可用设备。例如，在一些实施例中，过程200可以识别当前连接到特定网络(例如，媒体回放设备所连接的Wi-Fi网络，和/或任何其他合适类型的网络)的能够呈现音频内容的一个或多个设备，并且可以呈现用户界面，所述用户界面允许用户选择识别出的设备中的任何一个以便呈现与202处所指示的媒体内容项相关联的音频内容。
应当注意，在一些实施例中，响应于创建媒体设备群组，过程200可以配置媒体设备以便跨群组中的媒体设备同步音频内容和视频内容。例如，过程200可以通过关闭与媒体回放设备相关联的同步特征而开始。在更特定的示例中，过程200可以确定媒体回放设备包括同步特征，其中媒体回放设备将诸如视频管线的视频组件设置为主组件，并且作为响应，过程200可以禁用媒体回放设备的同步特征。反过来，过程200可以将媒体回放设备设置为主设备，并且将媒体回放设备的诸如音频管线的音频组件设置为主组件，并且可以将媒体设备群组中的其余媒体设备设置为跟随设备，其中主设备的视频信号和跟随设备的音频信号与主设备的音频信号同步。如下面进一步描述的，媒体回放设备可以确定音频时间戳并将音频时间戳传输给跟随设备，并且媒体回放设备还可以确定基于确定的音频时间戳的视频时间戳，以供主设备的视频组件(例如，视频缓冲器)使用。
应当注意，在一些实施例中，响应于将媒体回放设备设置为主设备并且将其余媒体设备(例如，音频设备)设置为跟随设备，可以将音频数据(或其他媒体数据)从被设置为主设备的媒体回放设备流传输到对应的跟随设备。例如，可以使用带有重传的用户数据报协议(UDP)上的实时传输协议(RTP)(例如，参见RFC 4588)来将音频数据(或其他媒体数据)从被设置为主设备的媒体回放设备流传输到对应的跟随设备。在另一示例中，系统中的主设备与相关联的跟随设备之间的TLS/TCP控制信道(控制信道)可以被主设备用来向其相关联的(回放群组)跟随设备发送与多区(群组)媒体回放相对应的各种命令。此类命令可以包括：起动媒体流命令；暂停/恢复命令(可以包括主设备的暂停或恢复的时间戳，以使得跟随设备可以同步地暂停和恢复)；结束媒体流命令(可以包括最后一个媒体数据帧的序列号和时间戳)；和/或用于群组回放的音量控制命令。应当注意，任何合适的命令可以由主设备提供。
还应当注意，在一些实施例中，媒体回放设备可以确定视频时间戳，并且还可以确定基于确定的视频时间戳的音频时间戳，以传输到跟随设备的音频组件和/或媒体回放设备的音频组件。例如，当跨媒体设备群组启动群组回放时，主设备上用于相关联媒体内容的呈现过程可以被配置成将解复用的音频流/视频流重定向到多区(群组)过程以进行本地回放(例如，由引导设备进行)并且分发(例如，音频数据)到随后的设备(例如，由跟随设备进行回放)。
在206处，过程200可以使得在显示设备上呈现媒体内容项的视频内容，并且可以使得在与显示设备分组在一起的至少音频设备上呈现音频内容(例如，如上面结合204所描述的)。在一些实施例中，过程200可以禁止显示设备的音频组件呈现音频内容(例如，因为分组在一起的音频设备中的每个的音频能力大于显示设备中音频组件的音频能力)。例如，过程200可以使得由显示设备的音频组件生成的音频信号和音频时间戳与由显示设备呈现的视频内容以及由与显示设备分组在一起的一个或多个设备呈现的音频内容同步。例如，在一些实施例中，过程200可以执行任何合适的技术或技术的组合(如下面结合图3更详细地描述的)，以使得音频内容跨分组在一起的媒体设备同步并且使得视频内容与音频内容同步。
在一些实施例中，过程200可以以任何合适的方式发起媒体内容项在显示器上的呈现。例如，在一些实施例中，过程200可以从用户设备(例如，移动电话、平板计算机和/或任何其他合适的用户设备)接收对要在显示设备上呈现的特定媒体内容项的选择，如上面结合202所描述的。应当注意，在一些实施例中，可以通过耦合到显示设备(例如，经由HDMI连接，和/或以任何其他合适的方式连接)的流传输媒体接口来接收所述选择。在一些实施例中，响应于接收到对媒体内容项的选择，显示设备和/或耦合到显示设备的流传输媒体接口可以请求媒体内容项(例如，来自视频共享服务，来自流传输视频内容服务，和/或来自任何其他合适的位置)。作为更特定的示例，在一些实施例中，显示设备和/或连接到所述显示设备的流传输媒体接口可以使用通用资源定位符(URL)或与媒体内容项相关联的其他标识符来要求来自视频共享服务的媒体内容项。作为另一示例，在一些实施例中，与在用户设备上选择的媒体内容项相关联的视频内容和/或音频内容可以被传输到显示设备，和/或被传输到连接到显示设备的流传输媒体接口。作为更特定的示例，在一些实施例中，在用户设备上选择的媒体内容项可以在用户设备和显示设备两者上呈现。
在一些实施例中，过程200可以使得使用任何合适的技术或技术组合在与媒体回放设备分组在一起的一个或多个音频设备上呈现与媒体内容项相关联的音频内容。例如，在一些实施例中，过程200可以使得指令被传输到流传输媒体接口，所述流传输媒体接口连接到一个或多个设备中的每一个，该设备指示使得呈现音频内容的媒体内容项(例如，通过URL，和/或以任何其他合适的方式)。作为更特定的示例，在一些实施例中，指令可以从显示设备和/或从连接到显示设备的流传输媒体接口传输到音频设备群组中音频设备中的每一个。
应当注意，在一些实施例中，过程200可以使得通过音频设备群组中的第一音频设备呈现音频内容的第一声道，并且可以使得通过音频设备群组中的第二音频设备呈现音频内容的第二声道。例如，在一些实施例中，过程200可以使得通过音频设备群组中的左扬声器呈现音频内容的左声道，并且可以使得通过音频设备群组中的右扬声器呈现音频内容的右声道，由此创建更丰富的声音体验。在另一特定示例中，在图1A的用户界面100中，过程200可以从用户接收指示：将第一扬声器设置为输出音频内容的左声道，并且将第二扬声器设置为输出音频内容的右声道。在一些实施例中，显示设备和/或连接到显示设备的流传输媒体接口可以向每个音频设备传输指令，指示要通过音频设备呈现的音频内容的特定声道。
在208处，过程200可以接收媒体内容项的回放改变的指示。例如，回放改变可以对应于暂停媒体内容项、改变媒体内容项的回放位置(例如，在媒体内容项的呈现中倒退或向前跳过)、使与媒体内容项相关联的音频内容静音、调整呈现与媒体内容项相关联的音频内容的一个或多个设备的音量和/或回放中的任何其他合适的调整。在一些实施例中，过程200可以以任何合适的方式并且从任何合适的设备接收指示。例如，如上面结合图1B所示出和所描述的，过程200可以从用户设备(例如，移动电话、平板计算机、可穿戴计算机和/或任何其他合适的设备)接收指示。作为更特定的示例，在一些实施例中，可以经由用户界面接收指示，所述用户界面是结合用于控制用户家中的不同设备的应用和/或结合用于发起和控制媒体内容回放的应用而呈现的。
在210处，过程200可以使得显示设备和/或与显示设备分组在一起的媒体设备群组基于接收的指示而修改媒体内容项的回放。例如，在所述指示是暂停媒体内容项的呈现的实例中，过程200可以使得暂停所有媒体设备上的与媒体内容项相关联的视频内容和音频内容。作为另一示例，在所述指示是在媒体内容项内倒退或向前跳过的实例中，过程200可以使得显示设备和与显示设备分组在一起的音频设备基于所述指示而改变呈现时间点，以使得视频内容和音频内容改变为指示的时间点。作为另一示例，在所述指示是使音频内容静音的实例中，过程200可以使得来自显示设备和与显示设备分组在一起的音频设备两者的音频内容被静音。作为另一示例，在所述指示是使来自特定设备(例如，来自显示设备，来自与显示设备相关联的特定扬声器和/或任何其他合适的设备)的音频内容静音的实例中，过程200可以使得来自指示的设备的音频内容被静音。作为另一示例，在所述指示是调整来自特定设备的音频内容的音量的实例中，过程200可以使得基于所述指示而使来自指示的设备的音频内容的音量升高和/或降低。
转向图3，示出了根据所公开主题的一些实施例的用于调整音频内容和视频内容的时间戳以保持媒体内容呈现的同步性的过程的示例300。在一些实施例中，过程300的框可以由呈现媒体内容项的显示设备执行，所述显示设备用作正在与显示设备同步地呈现与媒体内容项相关联的音频内容的一个或多个其他音频设备的主设备。例如，在一些实施例中，显示设备可以是电视、平板计算机、膝上型计算机、游戏机、媒体播放器和/或用于呈现媒体内容的任何其他合适的显示设备。另外或可替代地，在一些实施例中，过程300的框可以由连接到显示设备(例如，经由HDMI连接和/或任何其他合适类型的连接)的流传输媒体接口执行，如上面结合图2所描述的。另外，应当注意，过程300的框描述了显示设备或连接到显示设备的流传输媒体接口的音频组件和视频组件。在一些此类实施例中，音频组件和/或视频组件可以对应于显示设备或连接到显示设备的流传输媒体接口的任何合适的硬件组件。
过程300可以通过接收要在显示设备上呈现媒体内容项的指示而在302处开始。在一些实施例中，过程300可以任何合适的方式接收指示。例如，在一些实施例中，过程300可以经由对表示特定媒体内容项的可选择输入的选择而从可用媒体内容项群组接收对特定媒体内容项的选择。在一些此类实施例中，可以以任何合适的方式来接收选择。例如，在一些实施例中，可以经由遥控器接收选择。作为另一示例，在一些实施例中，可以经由用户设备接收选择，所述用户设备将选定的媒体内容项的指示传输到连接到显示设备的流传输媒体接口。
应当注意，在一些实施例中，选定的媒体内容项可以是任何合适类型的媒体内容。例如，在一些实施例中，媒体内容项可以是视频、电视节目、电影、歌曲、实时流传输视频内容和/或任何其他合适类型的媒体内容项。作为另一示例，在一些实施例中，选定的媒体内容项可以是媒体内容项的其他集合的播放列表。
在304处，过程300可以识别用于呈现与选定的媒体内容项相关联的音频内容的音频设备群组。在一些实施例中，所述音频设备群组可以包括任何合适的音频设备，诸如扬声器。在一些实施例中，过程300可以使用任何合适的技术或技术组合来识别音频设备群组。例如，在一些实施例中，过程300可以识别已与显示设备分组在一起的音频设备群组，如上面结合图1A和图2所描述。作为更特定的示例，在一些实施例中，音频设备群组可以是已经由显示设备的用户与显示设备明确地分组在一起的音频设备，诸如客厅扬声器或已与客厅电视分组在一起的一对客厅扬声器。作为另一更特定的示例，在一些实施例中，音频设备群组可以是已在显示设备附近检测到(例如，基于音频设备和显示设备的相似位置，诸如在房子的同一房间内)并且已与显示设备自动地分组在一起的音频设备。
在306处，过程300可以使得显示设备的音频组件或连接到所述显示设备的流传输媒体接口的音频组件用作主设备，以用于协调使用显示设备和音频设备群组的媒体内容项的同步呈现。例如，在一些实施例中，在306处，音频组件可以将指令传输到音频设备群组，以在预确定的持续时间内和/或直到满足特定标准(例如，通过显示设备缓冲了预确定量的媒体内容项，和/或任何其他合适的标准)为止呈现无声帧。作为另一示例，在一些实施例中，音频组件可以将指令传输到显示设备的视频组件，以在预确定的持续时间内和/或直到满足特定标准(例如，通过显示设备缓冲了预确定量的媒体内容项)为止呈现空白帧。
在更特定的实施例中，被设计为主设备的显示设备的音频组件与系统中的相关联跟随设备之间的TLS/TCP控制信道(控制信道)可以被主设备用来向其相关联(回放群组)跟随设备发送与多区(群组)媒体回放相对应的各种命令。例如，主设备可以使用控制信道将指令传输到跟随设备，以在预确定的持续时间内和/或直到满足特定标准为止呈现无声帧。
在308处，过程300可以使得开始使用显示设备和音频设备群组以同步的方式呈现媒体内容项。在一些实施例中，过程300可以响应于确定已经满足任何合适的标准(例如，显示设备已经缓冲了预确定量的媒体内容项，和/或任何其他合适的标准)而开始媒体内容项的同步呈现。在一些实施例中，使用显示设备和音频设备群组的媒体内容项的同步呈现可以包括任何合适的特征，如上面结合图2更详细地描述的。例如，在一些实施例中，媒体内容项的同步呈现可以包括与媒体内容项相关联的音频内容在显示设备的音频组件(例如，显示设备的音频管线)与音频设备群组之间的同步呈现。作为另一示例，在一些实施例中，媒体内容项的同步呈现可以包括在显示设备的视频组件之间的与媒体内容项相关联的视频内容的同步呈现以及由音频设备群组中的音频设备和/或显示设备的音频组件呈现的与媒体内容项相关联的音频内容的同步呈现。在一些实施例中，媒体内容项的呈现的初始化可以与初始音频时间戳和初始视频时间戳相关联。为了同时由显示设备呈现媒体内容项和由音频设备呈现音频内容，初始音频和/或视频时间戳的值可以被用于在起动了媒体内容项的呈现时也起动音频设备群组中的音频设备。
在310处，过程300可以计算更新的音频时间戳和更新的视频时间戳以用于媒体内容项的呈现。在一些实施例中，可以通过可以用作主设备的显示设备的音频组件来计算更新的音频时间戳和更新的视频时间戳，并且显示设备的视频组件和音频设备群组可以用作跟随设备。在一些实施例中，过程300可以使用任何合适的信息和/或任何合适的技术来计算更新的音频时间戳和更新的视频时间戳。例如，在一些实施例中，过程300可以基于自媒体内容项的呈现启动以来已经呈现的音频样本的数量、音频内容的采样率和/或任何其他合适的信息而计算更新的音频时间戳。作为更特定的示例，在一些实施例中，可以将更新的音频时间戳new_audio_pts计算为：
new_audio_pts＝<自回放启动以来的音频样本数量>/<采样率>。
在一些实施例中，可以基于如上面所描述计算的更新的音频时间戳而计算更新的视频时间戳。例如，在一些实施例中，可以基于前一视频时间戳以及更新的音频时间戳与前一音频时间戳之间的差异而计算更新的视频时间戳。作为更特定的示例，在一些实施例中，更新的视频时间戳new_video_pts可以被计算为：
new_video_pts＝old_video_pts+(new_audio_pts–old_audio_pts)，
其中old_audio_pts可以是new_audio_pts计算之前的前一音频时间戳。
应当注意，在一些实施例中，过程300可以基于媒体内容项的呈现的启动而计算更新的视频时间戳，并且可以基于更新的视频时间戳而计算更新的音频时间戳。例如，在一些实施例中，可以基于前一音频时间戳以及更新的视频时间戳与前一视频时间戳之间的差异而计算更新的音频时间戳。
在312处，过程300可以使得使用更新的音频时间戳和更新的视频时间戳继续在显示设备与音频设备群组之间同步地呈现媒体内容项。例如，在一些实施例中，过程300可以结合使得音频设备群组中的每个音频设备根据更新的音频时间戳呈现音频内容的指令，向所述音频设备群组中的每个音频设备传输对更新的音频时间戳的指示。在更特定的示例中，充当主设备的显示设备可以使用系统中的主设备与相关联的跟随设备之间的TLS/TCP控制信道(控制信道)以将与多区(群组)媒体回放相对应的各种命令发送到其相关联的(回放群组)跟随设备。例如，主设备可以使用控制信道来将更新的时间戳信息(例如，更新的音频时间戳、更新的视频时间戳和/或其他媒体数据)传输到其相关联的跟随设备。
应当注意，在一些实施例中，基于更新的音频时间戳的值，所述指令可以使得音频设备群组中的音频设备重复音频样本或跳过音频样本。作为另一示例，在一些实施例中，过程300可以结合使得视频组件根据更新的视频时间戳呈现视频内容的指令，向显示设备的视频组件传输对更新的视频时间戳的指示。应当注意，在一些实施例中，基于更新的视频时间戳的值，指令可以使得显示设备的视频组件重复视频帧或跳过视频帧。
然后，过程300可以循环回到310，并且计算更新的音频时间戳和更新的视频时间戳，然后可以在框312处使用所述更新的音频时间戳和更新的视频时间戳，以使得使用显示设备和音频设备群组继续同步地呈现媒体内容项。例如，主设备可以使用控制信道来向其相关联的跟随设备传输更新的时间戳信息(例如，更新的音频时间戳、更新的视频时间戳和/或其他媒体数据)。在更特定的示例中，跟随设备可以被配置成基于更新的时间戳信息而与主设备同步地播放媒体流(例如，音频流)。在另一更特定的示例中，跟随设备可以基于更新的时间戳信息而修改媒体流(例如，音频流)以与主设备同步。
应当注意，在一些实施例中，过程300可以通过以下方式保持媒体内容项在显示设备与音频设备群组之间的同步呈现：操纵显示设备的音频组件和视频组件的时钟速率和/或音频设备群组中的音频设备的时钟速率，而不是计算更新的时间戳并将其从显示设备的音频组件传输到显示设备的视频组件以及音频设备群组中的音频设备，如上所述。例如，在一些此类实施例中，过程300可以使用与显示设备相关联的任何合适的硬件来修改时钟脉冲，以保持跨设备的同步。
转向图4，示出根据所公开的主题的一些实施例的用于同步音频和视频的硬件的示例400。如所图示的，硬件400可以包括服务器402、通信网络404和/或一个或多个用户设备406，诸如用户设备408和410。
服务器402可以是用于存储信息、数据和/或媒体内容的任何合适的服务器。例如，在一些实施例中，服务器402可以存储媒体内容项，其可以被传输到用户设备406以进行呈现。在一些这样的实施例中，媒体内容项可以包括任何合适类型的媒体内容，诸如视频、电影、电视节目、直播流式传输的内容、音频内容(例如，音乐、有声读物、广播节目和/或任何其他合适的音频内内容)和/或任何其他合适类型的媒体内容。在另一个示例中，在一些实施例中，服务器402可以基于当前音频时间戳信息、自在用户设备406上开始呈现媒体内容项以来已经流逝的持续时间以及与媒体内容项相关联的音频内容的采样率来确定时间戳信息，并将确定的时间戳信息发送到用户设备406。
在一些实施例中，通信网络404可以是一个或多个有线和/或无线网络的任何合适的组合。例如，通信网络404能够包括以下各项中的任何一种或多种：互联网、内联网、广域网(WAN)、局域网(LAN)、无线网络、数字订户线路(DSL)网络、帧中继网络、异步传输模式(ATM)网络、虚拟专用网(VPN)和/或任何其它合适的通信网络。用户设备406能够通过一个或多个通信链路(例如，通信链路412)连接到通信网络404，该通信网络404能够经由一个或多个通信链路(例如，通信链路414)被链接到服务器402。通信链路可以是适合于在用户设备406和服务器402之间传送数据的任何通信链路，诸如网络链路、拨号链路、无线链路、硬连线链路、任何其它合适的通信链路或此类链路的任何合适的组合。
用户设备406可以包括适合于呈现视频内容和/或音频内容的任何一个或多个用户设备。例如，在一些实施例中，用户设备406可以包括电视、扬声器、移动电话、平板计算机、媒体播放器、台式计算机、车辆娱乐系统、可穿戴计算机和/或任何其他合适类型的用户设备。
在更特定的示例中，用户设备408可以是媒体呈现设备，诸如连接到显示设备的数字媒体接收器或媒体流设备，其中连接到显示设备的媒体呈现设备具有视频回放能力和音频回放能力，并且用户设备410可以是具有音频回放能力的扬声器设备。在该示例中，用户设备408和用户设备410可以通过诸如无线局域网的通信网络404连接。
在一些实施例中，用户设备408可以是媒体呈现设备，诸如连接到显示设备的数字媒体接收器或媒体流传输设备。媒体呈现设备可以是任何合适的设备，诸如智能手机、平板计算机、可穿戴计算机、膝上型计算机、个人计算机、电子阅读器、数字媒体接收器、智能电视、游戏机、任何其他合适的计算设备或它们的任何合适的组合。例如，媒体呈现设备可以从内容服务器420请求媒体内容项，并且可以指导媒体内容项的回放以在所连接的显示设备(例如，数字媒体接收器设备所连接的电视设备)上开始。
在继续该示例中，媒体呈现设备可以包括被配置成处理视频和音频同步的后端组件，其中媒体呈现设备的视频组件被设置为主设备。
在一些实施方式中，媒体呈现设备可以使用通信链路412耦合到用户设备。用户设备可以是任何合适的设备，诸如智能手机、平板计算机、可穿戴计算机、膝上型计算机、个人计算机、电子阅读器、数字媒体接收器、智能电视、游戏机、任何其他合适的计算设备或其任意合适的组合。在一些实施方式中，通信链路412可以包括任何合适的通信链路。另外，通信链路412可以包括网络，诸如具有有线和/或无线连接的局域网(LAN)。另外或可替代地，通信链路412可以包括媒体呈现设备与用户设备之间的无线连接，诸如自组织无线网络连接、短距离无线通信协议(例如，蓝牙、低功耗蓝牙、无线USB等)等。在一些实施方式中，可以使用任何合适的加密技术来加密通过通信链路412在媒体呈现设备和用户设备之间的通信。例如，可以使用任何合适的加密方案，例如，使用用于消息的加密和解密的公钥-私钥对，来加密从用户设备(诸如移动设备)发送到媒体呈现设备的消息。作为另一个示例，可以使用传输层安全(TLS)对通信链路412上的通信进行加密。
在一些实施例中，在用户设备410是包括扬声器的外部声音系统的实施方式中，外部声音系统可以是可以接收音频信号并向一个或者多个扬声器输出音频信号(潜在地通过一个或多个中间设备)的任何合适的设备。例如，外部声音系统可以是音频/视频(AV)接收器、扬声器、放大器、音频开关、HDMI开关、任何其他合适的外部声音系统和/或它们的任何合适组合。更具体地，外部声音系统可以包括扬声器、用于呈现诸如模拟和/或数字音频和/或视频数据的媒体内容的硬件和/或软件、电源等。外部声音系统可以包括各种输入端口，用于从各种来源接收音频和/或视频数据。此类输入端口可以包括一个或多个HDMI端口、一个或多个分量视频端口、一个或多个复合视频端口、一个或多个USB端口、一个或多个S视频端口、一个或多个TOSLINK端口、一个或多个同轴端口、一个或多个以太网端口(有线或无线)等。另外或者可替代地，在一些实施方式中，外部声音系统可以配置成通过诸如到局域网的连接的任何合适的无线连接(例如，经由符合IEEE 802.11x协议家族之一的连接，其有时称为Wi-Fi连接)，或外部声音系统与用户设备308(例如，数字媒体接收器)之间的无线连接，诸如自组织无线网络连接、短距离无线通信协议(例如，蓝牙、低功耗蓝牙、无线USB等)等来接收音频。
在一些实施例中，诸如媒体呈现设备或媒体接收器设备的用户设备408可以经由设备发现请求来确定用户设备410是用户设备408的特定邻近范围内的多个扬声器，该用户设备410与具有期望的视频回放能力(例如，具有特定分辨率的显示器、具有特定尺寸的显示器等)和不期望的音频回放能力的用户设备408相比具有期望音频回放能力。
尽管将服务器402图示为一个设备，但是在一些实施例中，可以使用任何适当数量的设备来执行由服务器402执行的功能。例如，在一些实施例中，可以使用多个设备来实现由服务器402执行的功能。在更特定的示例中，可以实现第一服务器来处理设备发现，并且可以实现第二服务器来传输媒体内容项。
尽管在图4中示出两个用户设备408和410以避免使附图过于复杂，但是在一些实施例中可以使用任何合适数量的用户设备和/或任何合适类型的用户设备。
在一些实施例中，服务器402和用户设备406可以使用任何合适的硬件来实现。例如，在一些实施例中，可以使用任何合适的通用计算机或专用计算机来实现设备402和406。例如，可以使用专用计算机来实现移动电话。任何这样的通用计算机或专用计算机可以包括任何合适的硬件。例如，如在图5的示例硬件500中所图示的，这样的硬件可以包括硬件处理器502、存储器和/或存储504、输入设备控制器506、输入设备508、显示/音频驱动器510、显示和音频输出电路512、通信接口514、天线516和总线518。
硬件处理器502可以包括任何合适的硬件处理器，诸如微处理器、微控制器、数字信号处理器、专用逻辑和/或用于控制通用计算机或专用计算机的运行的任何其他合适的电路。在一些实施例中，硬件处理器502可以由存储在诸如服务器502的服务器的存储器和/或存储中的服务器程序控制。例如，在一些实施例中，服务器程序可以使硬件处理器502经由通信网络404向用户设备406传输所请求的媒体内容项，和/或执行任何其他合适的功能。在一些实施例中，硬件处理器502可以由存储在用户设备406的存储器和/或存储504中的计算机程序控制。例如，计算机程序可以使硬件处理器502识别一个或多个音频设备(例如，扬声器，和/或任何其他合适的音频设备)，与媒体内容项关联的音频内容将从该音频设备呈现，并且可以使来自于音频设备的音频内容与从用户设备406呈现的音频和视频内容同步，和/或执行任何其他合适的功能。
在一些实施例中，存储器和/或存储504可以是用于存储程序、数据和/或任何其它合适的信息的任何合适的存储器和/或存储。例如，存储器和/或存储504能够包括随机存取存储器、只读存储器、闪速存储器、硬盘存储装置、光学介质和/或任何其它合适的存储器。
在一些实施例中，输入设备控制器506可以是用于控制并接收来自一个或多个输入设备508的输入的任何合适的电路。例如，输入设备控制器506可以是用于接收来自触摸屏、键盘、一个或多个按钮、话音识别电路、麦克风、相机、光学传感器、加速度计、温度传感器、近场传感器、压力传感器、编码器和/或任何其它类型的输入设备的输入的电路。
在一些实施例中，显示/音频驱动器510可以是用于控制并驱动到一个或多个显示/音频输出设备512的输出的任何合适的电路。例如，显示/音频驱动器510可以是用于驱动触摸屏、平板显示器、阴极射线管显示器、投影仪、一个或多个扬声器和/或任何其它合适的显示器和/或呈现设备的电路。
通信接口514可以是用于与一个或多个通信网络(例如，计算机网络404)接口的任何合适的电路。例如，接口514能够包括网络接口卡电路、无线通信电路和/或任何其它合适类型的通信网络电路。
在一些实施例中，天线516可以是用于以无线方式与通信网络(例如，通信网络404)进行通信的任何合适的一个或多个天线。在一些实施例中，能够省略天线416。
在一些实施例中，总线518可以是用于在两个或更多个组件502、504、506、510和514之间进行通信的任何合适的机制。
根据一些实施例，能够在硬件400中包括任何其它合适的组件。
在一些实施例中，能够以不限于结合各图示出并描述的次序和顺序的任何次序或顺序实施或执行图2和图3的过程的上述框中的至少一些。另外，能够在适当的情况下基本上同时或并行地实施或执行图2和图3的上述框中的一些以减少时延和处理时间。附加地或可替代地，能够省略图2和图3的过程的上述框中的一些。
在一些实施例中，任何合适的计算机可读介质能够被用于存储用于执行本文的功能和/或过程的指令。例如，在一些实施例中，计算机可读介质可以是暂时性的或非暂时性的。例如，非暂时性计算机可读介质能够包括诸如以下各项的介质：非暂时性形式的磁性介质(诸如硬盘、软盘和/或任何其它合适的磁性介质)、非暂时性形式的光学介质(诸如光盘、数字视频光盘、蓝光盘和/或其它任何合适的光学介质)、非暂时性形式的半导体介质(诸如闪速存储器、电可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)和/或任何其它合适的半导体介质)、在传输期间不会转瞬即逝或没有任何永久性外观的任何合适的介质和/或任何合适的有形介质。作为另一示例，暂时性计算机可读介质能够包括网络上、电线、导体、光纤、电路、在传输期间转瞬即逝或没有任何永久性外观的任何合适的介质和/或任何合适的无形介质中的信号。
因此，提供用于同步多个设备上的音频和视频内容的方法、系统和介质。
尽管已经在前面的说明性实施例中描述并图示了本发明，但是应理解，本公开仅通过示例的方式进行，并且在不脱离本发明的精神和范围的情况下，能够对本发明的实施细节进行许多改变，本发明的精神和范围仅由以下权利要求限定。能够以各种方式组合并重新布置所公开的实施例的特征。

Claims (21)

1.一种用于同步音频内容和视频内容的方法，所述方法包括：
在具有用于呈现音频内容的音频组件和用于呈现视频内容的视频组件的媒体设备处接收要使用所述媒体设备呈现的媒体内容项的指示；
确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联，其中，所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的所述音频内容的至少一个音频设备；
生成控制所述音频内容在所述媒体设备群组上的呈现的音频时间戳；
基于所生成的音频时间戳来生成控制所述视频内容在所述媒体设备群组上的呈现的视频时间戳；以及
使得在所述媒体设备处使用所生成的视频时间戳来呈现与所述媒体内容项相关联的所述视频内容，并且通过下述方式使得通过所述媒体设备群组中的所述至少一个音频设备同时呈现与所述媒体内容项相关联的所述音频内容，所述方式为：向所述媒体设备群组中的所述至少一个音频设备传输所述音频时间戳。
2.根据权利要求1所述的方法，其中，所述视频时间戳是响应于将所述媒体设备的所述音频组件设置为主设备并且将所述媒体设备群组中的所述至少一个音频设备设置为次设备基于所生成的音频时间戳而生成的。
3.根据权利要求1所述的方法，进一步包括：确定是否在所述媒体设备的所述音频组件和所述至少一个音频设备上呈现所述媒体内容项的所述音频内容。
4.根据权利要求3所述的方法，进一步包括：响应于确定要在所述至少一个音频设备上呈现所述媒体内容项的所述音频内容，禁止在所述媒体设备上呈现与所述媒体内容项相关联的所述音频内容。
5.根据权利要求3所述的方法，其中，所述音频内容是使用所生成的音频时间戳在所述媒体设备上呈现的，并且其中，所述音频时间戳是响应于确定要在所述媒体设备的所述音频组件和所述至少一个音频设备上呈现所述媒体内容项的所述音频内容而向所述至少一个音频设备传输的。
6.根据权利要求1所述的方法，进一步包括：
接收所述媒体内容项的回放改变的指示；以及
响应于接收到所述回放改变的所述指示，通过下述方式使得基于所述指示而修改与所述媒体内容项相关联的视频内容在所述媒体设备上的呈现以及与所述媒体内容项相关联的音频内容由所述媒体设备群组中的所述至少一个音频设备的呈现，所述方式为：生成被传输到所述音频设备群组中的所述至少一个音频设备的更新的音频时间戳，以及基于所述更新的音频时间戳而生成更新的视频时间戳。
7.根据权利要求6所述的方法，其中，所述媒体内容项的所述回放改变是所述媒体内容项的回放位置的改变。
8.根据权利要求6所述的方法，其中，所述媒体内容项的所述回放改变是与所述媒体内容项相关联的所述音频内容的音量的改变。
9.根据权利要求1所述的方法，其中，所述音频时间戳是基于当前音频时间戳、自所述媒体内容项在所述媒体设备上开始呈现以来经过的持续时间以及与所述媒体内容项相关联的所述音频内容的采样率而生成的。
10.根据权利要求1所述的方法，进一步包括：
检测具有音频回放能力和视频回放能力中的至少一个的多个媒体设备；以及
使得呈现用于选择检测到的多个媒体设备中的一个或多个的用户界面，其中，使从所述多个媒体设备中选择的媒体设备的子集放置在所述媒体设备群组中。
11.一种用于同步音频内容和视频内容的媒体设备，所述系统包括：
用于呈现音频内容的音频组件；
用于呈现视频内容的视频组件；以及
被耦合到所述音频组件和所述视频组件的硬件处理器，所述硬件处理器：
接收要使用所述媒体设备呈现的媒体内容项的指示；
确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联，其中，所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的所述音频内容的至少一个音频设备；
生成控制所述媒体设备群组上的所述音频内容的呈现的音频时间戳；
基于所生成的音频时间戳来生成控制所述视频内容在所述媒体设备群组上的呈现的视频时间戳；以及
使得使用所生成的视频时间戳来呈现与所述媒体内容项相关联的所述视频内容，并且通过下述方式使得通过所述媒体设备群组中的所述至少一个音频设备同时呈现与所述媒体内容项相关联的所述音频内容，所述方式为：向所述媒体设备群组中的所述至少一个音频设备传输所述音频时间戳。
12.根据权利要求11所述的媒体设备，其中，所述视频时间戳是响应于将所述媒体设备的所述音频组件设置为主设备并且将所述媒体设备群组中的所述至少一个音频设备设置为次设备基于所生成的音频时间戳而生成的。
13.根据权利要求11所述的媒体设备，其中，所述硬件处理器进一步确定是否要在所述媒体设备的所述音频组件和所述至少一个音频设备上呈现所述媒体内容项的所述音频内容。
14.根据权利要求13所述的媒体设备，其中，所述硬件处理器进一步响应于确定要在所述至少一个音频设备上呈现所述媒体内容项的所述音频内容，禁止在所述媒体设备上呈现与所述媒体内容项相关联的所述音频内容。
15.根据权利要求13所述的媒体设备，其中，所述音频内容是使用所生成的音频时间戳在所述媒体设备上呈现的，并且其中，所述音频时间戳是响应于确定要在所述媒体设备的所述音频组件和所述至少一个音频设备上呈现所述媒体内容项的所述音频内容而向所述至少一个音频设备传输的。
16.根据权利要求11所述的媒体设备，其中，所述硬件处理器进一步：
接收所述媒体内容项的回放改变的指示；以及
响应于接收到所述回放改变的所述指示，通过下述方式使得基于所述指示而修改与所述媒体内容项相关联的视频内容在所述媒体设备上的呈现以及与所述媒体内容项相关联的音频内容由所述媒体设备群组中的所述至少一个音频设备的呈现，所述方式为：生成被传输到所述音频设备群组中的所述至少一个音频设备的更新的音频时间戳，以及基于所述更新的音频时间戳而生成更新的视频时间戳。
17.根据权利要求16所述的媒体设备，其中，所述媒体内容项的所述回放改变是所述媒体内容项的回放位置的改变。
18.根据权利要求16所述的媒体设备，其中，所述媒体内容项的所述回放改变是与所述媒体内容项相关联的所述音频内容的音量的改变。
19.根据权利要求11所述的媒体设备，其中，所述音频时间戳是基于当前音频时间戳、自所述媒体内容项在所述媒体设备上开始呈现以来经过的持续时间以及与所述媒体内容项相关联的所述音频内容的采样率而生成的。
20.根据权利要求11所述的媒体设备，其中，所述硬件处理器进一步：
检测具有音频回放能力和视频回放能力中的至少一个的多个媒体设备；以及
使得呈现用于选择检测到的多个媒体设备中的一个或多个的用户界面，其中，使从所述多个媒体设备中选择的媒体设备的子集放置在所述媒体设备群组中。
21.一种包含计算机可执行指令的非暂时性计算机可读介质，所述计算机可执行指令在由处理器执行时使所述处理器执行用于同步音频内容和视频内容的方法，所述方法包括：
在具有用于呈现音频内容的音频组件和用于呈现视频内容的视频组件的媒体设备处接收要使用所述媒体设备呈现的媒体内容项的指示；
确定所述媒体设备与用于呈现所述媒体内容项的媒体设备群组相关联，其中，所述媒体设备群组包括所述媒体设备和呈现与所述媒体内容项相关联的所述音频内容的至少一个音频设备；
生成控制所述音频内容在所述媒体设备群组上的呈现的音频时间戳；
基于所生成的音频时间戳来生成控制所述视频内容在所述媒体设备群组上的呈现的视频时间戳；以及
使得在所述媒体设备处使用所生成的视频时间戳来呈现与所述媒体内容项相关联的所述视频内容，并且通过下述方式使得通过所述媒体设备群组中的所述至少一个音频设备同时呈现与所述媒体内容项相关联的所述音频内容，所述方式为：向所述媒体设备群组中的所述至少一个音频设备传输所述音频时间戳。
CN202310572438.6A 2018-05-24 2019-05-22 同步多个媒体设备上的音频内容和视频内容的方法和系统 Pending CN116506667A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US15/988,307 US10771866B2 (en) 2018-05-24 2018-05-24 Methods, systems, and media synchronizing audio and video content on multiple media devices
US15/988,307 2018-05-24
CN201980018517.4A CN111837400A (zh) 2018-05-24 2019-05-22 用于同步多个媒体设备上的音频内容和视频内容的方法、系统和介质
PCT/US2019/033502 WO2019226760A1 (en) 2018-05-24 2019-05-22 Methods, systems, and media for synchronizing audio and video content on multiple media devices

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201980018517.4A Division CN111837400A (zh) 2018-05-24 2019-05-22 用于同步多个媒体设备上的音频内容和视频内容的方法、系统和介质

Publications (1)

Publication Number Publication Date
CN116506667A true CN116506667A (zh) 2023-07-28

Family

ID=66821455

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201980018517.4A Pending CN111837400A (zh) 2018-05-24 2019-05-22 用于同步多个媒体设备上的音频内容和视频内容的方法、系统和介质
CN202310572438.6A Pending CN116506667A (zh) 2018-05-24 2019-05-22 同步多个媒体设备上的音频内容和视频内容的方法和系统

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201980018517.4A Pending CN111837400A (zh) 2018-05-24 2019-05-22 用于同步多个媒体设备上的音频内容和视频内容的方法、系统和介质

Country Status (4)

Country Link
US (2) US10771866B2 (zh)
EP (1) EP3741131A1 (zh)
CN (2) CN111837400A (zh)
WO (1) WO2019226760A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070297961A1 (en) 2006-06-27 2007-12-27 Caterpillar Inc. System for removing sulfur oxides from recycled exhaust
CN109729404B (zh) * 2019-01-15 2021-06-04 晶晨半导体(上海)股份有限公司 一种基于嵌入式的播放器的同步调制方法
CN113748689A (zh) * 2019-02-28 2021-12-03 搜诺思公司 音频设备之间的回放转换
US10992992B2 (en) * 2019-03-13 2021-04-27 ROVl GUIDES, INC. Systems and methods for reconciling playback using progress point information
US11483085B1 (en) * 2019-09-16 2022-10-25 Amazon Technologies, Inc. Device time synchronization by networking device
CN112218115B (zh) * 2020-09-25 2022-07-29 深圳市捷视飞通科技股份有限公司 流媒体音视频同步的控制方法、装置、计算机设备
US11831943B2 (en) 2021-10-26 2023-11-28 Apple Inc. Synchronized playback of media content
CN114125576A (zh) * 2021-11-29 2022-03-01 广州繁星互娱信息科技有限公司 多媒体资源的同步方法和装置、存储介质及电子设备
CN114339302B (zh) * 2021-12-31 2024-05-07 咪咕文化科技有限公司 导播方法、装置、设备以及计算机存储介质
CN115426514A (zh) * 2022-07-22 2022-12-02 北京罗克维尔斯科技有限公司 跨设备音视频同步方法、装置、设备及介质

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4454821B2 (ja) * 2000-10-03 2010-04-21 キヤノン株式会社 伝送装置、伝送方法、および記憶媒体
US20070110074A1 (en) 2004-06-04 2007-05-17 Bob Bradley System and Method for Synchronizing Media Presentation at Multiple Recipients
US20080147558A1 (en) * 2006-10-24 2008-06-19 Robert Korbin Kraus Method and system for providing prospective licensees and/or purchasers with access to licensable media content
US8320410B2 (en) 2007-05-23 2012-11-27 Broadcom Corporation Synchronization of media data streams with separate sinks using a relay
WO2010138777A1 (en) * 2009-05-27 2010-12-02 Arsh Technologies, Llc Automatic resource retrieval and use
US20120066711A1 (en) * 2009-08-24 2012-03-15 Novara Technology, LLC Virtualized home theater service
US9237324B2 (en) 2010-10-22 2016-01-12 Phorus, Inc. Playback synchronization
RU2015111194A (ru) * 2012-08-28 2016-10-20 Конинклейке Филипс Н.В. Устройство пересылки звука и соответствующий способ
US9635334B2 (en) * 2012-12-03 2017-04-25 Avago Technologies General Ip (Singapore) Pte. Ltd. Audio and video management for parallel transcoding
US9438193B2 (en) * 2013-06-05 2016-09-06 Sonos, Inc. Satellite volume control
US9834984B2 (en) * 2013-10-31 2017-12-05 Fibar Group S.A. Roller shutter controller
US9832507B2 (en) 2014-06-27 2017-11-28 Qualcomm Incorporated System and method for synchronizing media output devices connected on a network
US10034035B2 (en) * 2014-12-10 2018-07-24 DISH Technologies L.L.C. Methods, devices and systems for audiovisual synchronization with multiple output devices
US9532099B2 (en) * 2015-03-24 2016-12-27 Intel Corporation Distributed media stream synchronization control
US20170006331A1 (en) * 2015-06-30 2017-01-05 Stmicroelectronics International N.V. Synchronized rendering of split multimedia content on network clients
US10237319B2 (en) * 2015-10-14 2019-03-19 Google Llc Capture, recording, and streaming of media content
US10098082B2 (en) * 2015-12-16 2018-10-09 Sonos, Inc. Synchronization of content between networked devices
US10158905B2 (en) 2016-09-14 2018-12-18 Dts, Inc. Systems and methods for wirelessly transmitting audio synchronously with rendering of video

Also Published As

Publication number Publication date
US10771866B2 (en) 2020-09-08
US20190364346A1 (en) 2019-11-28
WO2019226760A1 (en) 2019-11-28
CN111837400A (zh) 2020-10-27
US11606596B2 (en) 2023-03-14
US20200404399A1 (en) 2020-12-24
EP3741131A1 (en) 2020-11-25

Similar Documents

Publication Publication Date Title
US11606596B2 (en) Methods, systems, and media for synchronizing audio and video content on multiple media devices
US10405026B2 (en) Methods, devices and systems for audiovisual synchronization with multiple output devices
JP7120997B2 (ja) オーディオとビデオのマルチモード同期レンダリング
KR102268442B1 (ko) 다수의 디바이스에서 동기화된 미디어 콘텐츠 재생 동안 품질 레벨을 조절하기 위한 방법들, 시스템들 및 매체들
US20230053256A1 (en) Methods, systems, and media for providing dynamic media sessions with audio stream expansion features
US20230396829A1 (en) Methods, systems, and media for synchronized media content playback on multiple devices
US20200014969A1 (en) User interface for multimode synchronous rendering of headphone audio and video
CN109379613A (zh) 音视频同步调整方法、电视、计算机可读存储介质及系统
US11943515B2 (en) Methods, systems, and media for presenting media content
CA3143942C (en) Methods, systems, and media for providing dynamic media sessions
CN115278324A (zh) 一种显示设备、蓝牙设备和bis音频传输方法
US20210185365A1 (en) Methods, systems, and media for providing dynamic media sessions with video stream transfer features
EE et al. Published

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination