CN109937448A - 用于在特技播放回放期间提供音频内容的系统和方法 - Google Patents

用于在特技播放回放期间提供音频内容的系统和方法 Download PDF

Info

Publication number
CN109937448A
CN109937448A CN201780031871.1A CN201780031871A CN109937448A CN 109937448 A CN109937448 A CN 109937448A CN 201780031871 A CN201780031871 A CN 201780031871A CN 109937448 A CN109937448 A CN 109937448A
Authority
CN
China
Prior art keywords
content
playback apparatus
segment
audio content
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780031871.1A
Other languages
English (en)
Other versions
CN109937448B (zh
Inventor
W·弗朗茨
E·W·格拉布
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Emperor Vision Ltd
Divx LLC
Original Assignee
Emperor Vision Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Emperor Vision Ltd filed Critical Emperor Vision Ltd
Publication of CN109937448A publication Critical patent/CN109937448A/zh
Application granted granted Critical
Publication of CN109937448B publication Critical patent/CN109937448B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387—Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Information Transfer Between Computers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

公开了根据本发明的实施例的用于在特技播放模式期间提供音频内容的回放的系统和方法。媒体内容可以包括音频内容和视频内容。音频内容被分成片段，并且视频内容包括帧。同步信息将音频内容的每个片段的呈现时间与与视频内容的图像相关联的一个或多个帧的呈现时间相关联。当请求特技播放模式时，确定来自被呈现的视频内容的下一帧。同步信息用于确定与下一帧相关联的音频内容的片段。当以特技播放模式显示帧时，呈现所确定的片段音频内容。

Description

用于在特技播放回放期间提供音频内容的系统和方法
技术领域
本发明一般涉及自适应流传输，更具体地说，涉及可在回放的特技播放模式期间提供音频内容的流传输系统。
背景技术
术语流传输媒体描述了在回放设备上的媒体回放，其中媒体存储在服务器上并且在回放期间通过网络连续地发送到回放设备。通常，回放设备在回放期间的任何给定时间将足够数量的媒体存储在缓冲器中，以防止由于回放设备在接收到下一部分媒体之前完成所有缓冲媒体的回放而导致的回放中断。自适应比特率流传输或自适应流传输涉及实时检测当前流传输条件(例如，用户的网络带宽和CPU容量)并相应地调整流传输的媒体的质量。通常，源媒体被以多个比特率编码，并且回放设备或客户端根据可用资源在流传输不同的编码之间切换。
自适应流传输解决方案通常使用由因特网工程任务组和万维网联盟作为RFC2616发布的超文本传输协议(HTTP)，或由因特网工程任务组作为RFC 2326发布的实时流协议(RTSP)，以在服务器和回放设备之间流传输媒体。HTTP是一种无状态协议，它使回放设备能够请求文件中的字节范围。HTTP被描述为无状态的，因为服务器不需要记录关于回放设备请求信息的状态或回放设备请求的字节范围的信息，以便响应从回放设备接收的请求。RTSP是用于控制流传输媒体服务器的网络控制协议。回放设备将控制命令(例如“播放”和“暂停”)发送到流传输媒体的服务器来控制媒体文件的回放。当使用RTSP时，媒体服务器记录每个客户端设备的状态，并基于从客户端设备接收的指令和客户端的状态确定要流传输的媒体。
在自适应流传输系统中，源媒体通常作为顶级索引文件存储在媒体服务器上，该顶级索引文件指向包含实际视频和音频数据的多个备用流。每个流通常被存储在一个或多个容器文件中。不同的自适应流传输解决方案通常使用不同的索引和媒体容器。由万维网联盟开发的同步多媒体集成语言(SMIL)用于在若干自适应流传输解决方案中创建索引，该自适应流传输解决方案包括由华盛顿州雷蒙德市的微软公司开发的IIS平滑流传输和由加州圣何塞的奥多比系统公司开发的Flash动态流传输。由加州库比蒂诺的苹果计算机公司开发的HTTP自适应比特率流传输使用扩展的M3U播放列表文件(.M3U8)实现索引文件，该文件是包含通常标识媒体容器文件的URI列表的文本文件。最常用的媒体容器格式是在MPEG-4的第14部分(即，ISO/IEC 14496-14)中规定的MP4容器格式和在MPEG-2的第1部分(即，ISO/IEC标准13818-1)中规定的MPEG传输流(TS)容器。在IIS平滑流传输和Flash动态流传输中使用MP4容器格式。TS容器用于HTTP自适应比特率流。
Matroska容器是由法国Aussonne的Matroska非营利组织作为开放标准项目开发的媒体容器。Matroska容器基于可扩展二进制元语言(EBML)，其为可扩展标记语言(XML)的二进制衍生物。由许多消费电子(CE)设备支持Matroska容器的解码。由加州圣地亚哥的DivX，LLC开发的DivX Plus文件格式使用Matroska容器格式的扩展(即，基于Matroska容器格式，但包括未在Matroska格式中指定的元素)。
为了提供通过因特网传送媒体内容的一致方法，国际标准化组织(ISO)和国际电工委员会(IEC)提出了基于HTTP的动态自适应流传输(DASH)标准。DASH标准规定了媒体内容的格式和使用HTTP传送MPEG内容的内容的描述。根据DASH，用于呈现媒体内容的每个分量存储在一个或多个流中。每个流被分成多个片段。媒体呈现描述(MPD)是一种数据结构，其包括关于每个流中的片段的信息以及在回放期间呈现媒体内容所需的其他信息。回放设备使用MPD来使用自适应比特率流传输来获得媒体内容的分量以进行回放。
由于内容可以自适应地流传输的延迟得到改善，诸如体育赛事和音乐会之类的直播事件的流传输已经变得流行。在这种类型的内容中，内容的音频部分可以给出用户可能感兴趣的呈现部分的指示。这样，用户可能想要在搜索媒体内容时使用音频提示来查找感兴趣的内容的部分。然而，大多数传统的回放系统在使用诸如倒带、快进和寻找感兴趣内容的特技播放特征期间不提供音频内容的回放。根据本发明的一些实施例的用于在特技播放模式中的回放期间提供音频内容的回放的系统和方法被公开了。
发明内容
根据本发明的一些实施例，回放设备被配置为以下列方式执行用于提供具有音频内容的特技播放回放的处理，回放设备在回放设备中的缓冲区中存储媒体内容的音频内容部分的片段和视频内容部分的帧。同步信息存储在回放设备的存储器中。同步信息将音频内容部分的一个或多个片段中的每个片段的呈现时间与视频内容的一个或多个帧的呈现时间相关联。回放设备以特技播放模式接收用于回放媒体内容的命令。呈现的下一帧由回放设备基于特技播放模式确定。根据存储在存储器中的同步信息确定与下一帧相关联的每个音频内容的片段。回放设备在特技播放模式的回放期间呈现与下一帧相关联的音频内容的每个片段。
根据一些实施例，所确定的下一帧被呈现在回放设备的显示器上。根据这些实施例中的一些实施例，与下一帧相关联的音频内容的每个片段与下一帧的呈现同时呈现。根据这些实施例中的一些其他，回放设备响应于确定音频内容的相关片段将与下一帧相关联的音频内容的每个片段添加到队列，并且与下一个帧相关联的音频内容的每个片段被基于队列呈现的并且与回放设备的显示器上的视频内容的下一帧的呈现无关。
根据一些实施例，回放设备生成用于视频内容的搓擦条的显示，其指示来自视频内容的下一帧的呈现时间，并且在显示器上的图像的呈现上覆盖用于视频内容的搓擦条。根据许多实施例，回放设备生成用于音频内容的搓擦条的显示，其指示与下一帧相关联的音频内容的每个片段的呈现时间并且在显示器上的图像的呈现上覆盖用于音频内容的搓擦条的显示。根据多个实施例，用于音频内容的搓擦条与用于显示器中的视频内容的搓擦条分离。
根据许多实施例，使用自适应比特率流传输在网络上从内容提供商系统在回放设备中接收音频内容部分的片段、视频内容的多个帧的数据和同步信息的数据。根据多个这些实施例，以下面的方式执行数据的接收。回放设备通过网络从内容提供商系统接收顶级索引文件。顶级索引文件识别视频内容的备选流，其中多个备选流的至少一部分以不同的最大比特率和至少一个音频内容的流编码。回放设备基于回放设备和内容提供商系统之间的网络带宽，使用备选流从内容提供商请求视频内容的部分，并且响应于请求在回放设备中接收视频内容的所请求部分。回放设备从接收的视频内容的部分生成视频内容的帧，将多个帧存储在缓冲器中。回放设备还从来自内容提供商系统的至少一个音频内容的流请求音频内容的部分，接收所请求的音频内容的部分，从接收的音频内容的部分生成音频内容的片段并将音频内容的片段存储在缓冲区中。回放设备基于顶级索引文件中的信息从内容提供商系统获得同步信息，并将同步信息存储在回放设备的存储器中。根据这些实施例中的一些实施例，通过从顶级索引文件读取指向包括同步信息的文件的指针，使用该回放设备从内容提供者系统请求该文件并且在回放设备中接收所请求的文件来获得同步信息。
附图说明
图1示出了根据本发明的实施例的自适应比特率流传输系统的网络图。
图2示出了诸如回放设备中的处理系统的处理系统的组件的框图。
图3示出了根据本发明的实施例的处理系统，例如在编码系统和/或内容提供商系统中的处理系统。
图4示出了根据本发明的实施例的由编码系统执行的用于编码媒体内容流并且生成同步数据的处理的流程图，该媒体内容流包括被划分成片段的至少一个音频数据流和包括帧的至少一个视频内容流，并且该同步数据将音频内容的一个或更多个片段与视频内容的帧相关联。
图5示出了根据本发明的实施例的由回放设备执行以获得媒体内容的音频和视频内容以及媒体内容的同步信息的处理的流程图。
图6示出了根据本发明的实施例的由回放设备执行以获得媒体内容的音频和视频内容以及使用自适应比特率流传输的媒体内容的同步信息的处理的流程图。
图7示出了根据本发明的实施例的由回放设备执行以在特技播放模式下回放媒体内容期间提供音频内容的处理的流程图。
图8示出了根据本发明的实施例的在特技播放模式期间提供音频内容的回放期间的显示器的屏幕截图。
具体实施方式
现在转到附图，示出了根据本发明的一些实施例的用于在特技播放模式下回放视频内容期间提供音频内容的回放的系统和方法。出于讨论的目的，特技播放模式是这样一种模式，其中视频内容以不同于根据预期呈现时间的视频内容的顺序呈现的方式呈现。特技播放模式的示例包括但不限于倒带、快进和搜寻。根据一些实施例，由回放设备接收来自用户的指示特定特技播放模式的命令来启动特技播放模式。然后，回放设备通过确定接下来要显示的视频内容的哪个图像以及与图像相关联的视频内容的帧来开始特技模式播放。在若干实施例中，回放设备然后确定与帧相关联的音频内容的一个或多个片段。然后将图像呈现在回放设备的显示器上，并且经由回放设备的音频系统呈现音频内容的片段。
根据一些实施例，音频内容的片段仅在呈现相关联的帧时被呈现。根据一些其他实施例，无论呈现的当前帧如何，都播放整个音频数据段。根据这些实施例中的许多实施例，维持要播放的音频内容片段的队列，并且无论所显示的帧如何，都以连续顺序从队列播放片段。根据这些实施例中的许多实施例，当一段音频内容结束时确定被呈现的当前帧并且与当前帧相关联的音频内容被呈现，这可以导致队列中与在前一段可听内容被呈现时呈现的帧相关联的音频内容的片段被跳过。根据一些实施例，如果在与一个或多个帧相关联的一个或多个可听片段的呈现结束时仍然呈现该帧，则重复与该帧相关联的一个或多个音频片段的呈现。
根据一些实施例，由编码设备生成指示音频数据的片段与视频内容的帧的关联的同步信息。根据一些实施例，可以从字幕轨道或隐藏字幕轨道确定同步信息，该轨道将视频呈现时间与口头评论和/或对话相关联。根据这些实施例中的许多实施例，同步信息存储在存储音频和/或视频内容的文件中。根据许多其他实施例，同步信息存储在与媒体内容相关联的索引文件中。可以在回放开始时检索同步信息并存储以在请求特技播放模式时使用。
根据许多实施例，在特技播放模式期间提供音频回放的回放设备使用自适应比特率流传输来获得媒体内容。根据这些实施例中的一些实施例，根据DASH标准将媒体内容被存储在流中。然而，本领域技术人员将认识到，诸如但不限于Matroska(MKV)容器文件格式的格式可用于存储媒体内容的流，而不脱离本发明。
通过以以下方式对每个备选流中的源视频的每个部分进行编码，可以显着增强根据本发明的一些实施例的自适应比特率流传输系统的性能：视频的一部分在每个流中被编码为以瞬时解码器刷新(IDR)帧(其为帧内帧)开始的单个(或至少一个)闭合图像组(GOP)。回放设备可以在群集回放完成时在正常回放期间使用的备选流之间切换，并且无论群集是从哪个流获得的，群集中的第一帧将是可以被在不参考容纳在Cluster元素中的编码媒体以外的任何编码媒体的状态下被解码的IDR帧。
在许多实施例中，回放设备从顶级索引文件或清单文件获得关于每个可用流的信息，并选择一个或多个流以在媒体的回放中使用。然后，回放设备可以从包含一个或多个比特流的容器文件中获得头信息，并且文件头和/或清单文件可以提供关于流的解码的信息。回放设备还可以请求对存储在相关容器文件内的编码媒体进行索引的索引信息。索引信息(包括但不限于将音频内容的片段与视频内容的帧相关联的元数据)可以被存储在容器文件内或与索引文件分开地存储在顶级索引中或在独立的容器文件中。索引信息可以使回放设备能够通过来自服务器的HTTP请求容器文件中与GOP相对应的字节范围。根据本发明的各种实施例，当接收到顶级索引文件时，回放设备可以获取索引信息中的元数据信息，在接收到顶级索引文件之后请求存储索引信息的文件，或者请求容器文件的存储索引信息的部分。根据一些实施例，回放设备使用索引信息来从备选流请求媒体内容的部分。在回放设备从具有以网络条件可支持的比特率编码的媒体内容的流请求编码内容的部分的状态下，回放继续。
下面进一步讨论根据本发明的一些实施例的在自适应比特率流传输系统中使用的源视频的编码，该系统在特技播放模式期间提供音频回放以及使用自适应比特率流在特技播放模式下回放媒体内容。
自适应流传输系统架构
现在转向图1，示出了根据本发明实施例的包括回放设备的自适应流传输系统，该回放设备在特技播放模式下的回放期间提供音频回放。自适应流传输系统10包括源编码器12，源编码器12被配置为将源媒体编码为多个备选流。在所示实施例中，源编码器是服务器。在其他实施例中，源编码器可以是任何处理设备，包括处理器和足以执行源媒体(包括但不限于视频、音频和/或字幕)的代码转换的资源。通常，源编码服务器12生成对于包含流和/或元数据信息(其中至少多个是备选流)的多个容器文件的顶级索引。备选流是以不同方式编码的相同媒体内容的流。在许多情况下，备选流以不同的最大比特率编码媒体内容(例如但不限于视频内容和/或音频内容)。在许多实施例中，视频内容的备选流以不同的分辨率和/或以不同的帧速率编码。顶级索引文件和容器文件被上载到HTTP服务器14。然后，各种回放设备可以使用HTTP或其他适当的无状态协议来经由诸如因特网的网络16请求顶级索引文件、其他索引文件和/或容器文件的部分。
在所示实施例中，回放设备包括个人计算机18、CE播放器和移动电话20。在其他实施例中，回放设备可以包括消费电子设备，例如DVD播放器、蓝光播放器、电视、机顶盒、视频游戏控制台、平板电脑和其他能够通过HTTP连接到服务器并回放编码媒体的设备。根据本发明的实施例，尽管图1中示出了特定的架构，但是包括执行传统流传输而不是自适应比特率流传输的系统的任何架构都可以被用来使得回放设备能够请求顶级索引文件和容器文件的部分。
回放设备
根据本发明的实施例的用于提供方法和配置系统的一些处理由回放设备执行。在图2中示出了可以执行根据本发明实施例的处理的回放设备中的相关组件。本领域技术人员将认识到，回放设备可以包括为简洁起见而省略的其他组件，而不脱离所描述的本发明的实施例。回放设备200包括处理器205、非易失性存储器210和易失性存储器215。处理器205是处理器、微处理器、控制器或处理器、微处理器和/或控制器的组合，其执行存储在易失性存储器215或非易失性存储器210中的指令，以操纵存储在存储器中的数据。非易失性存储器210可以存储用于配置回放设备200以执行处理的处理器指令和/或用于处理利用的数据，该处理包括根据本发明实施例的处理。根据一些实施例，这些指令包括在回放应用中，该回放应用在回放设备上执行媒体内容的回放。根据各种实施例，回放设备软件和/或固件可以存储在适合于特定应用的各种非暂时性计算机可读介质中的任何一种中。
服务器
用于提供根据本发明实施例的方法和系统的一些处理由HTTP服务器；源编码服务器；和/或本地和网络时间服务器执行。在图3中示出了根据本发明的实施例的执行这些处理中的一个或多个的服务器中的相关组件。本领域技术人员将认识到，服务器可以包括为简洁起见而省略的其他组件，而不脱离描述了本发明的实施例。服务器300包括处理器305、非易失性存储器310和易失性存储器315。处理器305是处理器、微处理器、控制器或处理器、微处理器和/或控制器的组合，其执行存储在易失性存储器315或非易失性存储器310中的指令，以操纵存储在存储器中的数据。非易失性存储器310可以存储用于配置服务器300以执行包括根据本发明实施例的处理的处理的处理器指令和/或用于处理利用的数据。根据一些实施例，执行媒体内容的编码的指令是编码应用的一部分。根据各种实施例，服务器软件和/或固件可以存储在适合于特定应用的各种非暂时性计算机可读介质中的任何一种中。尽管图3中示出了特定服务器，但是根据本发明的实施例，可以使用被配置为执行任何数量的处理的各种服务器中的任何一个。
备选流中的可听和视频内容流和同步信息的编码
根据一些实施例，在特技播放模式下的回放期间提供可听内容的回放设备接收包括视频内容和音频内容的媒体内容；以及使用自适应比特率流传输将来自内容提供商系统的音频内容的片段与视频内容中的帧相关联的同步信息。为了提供通过自适应比特率流传输提供媒体内容所需的数据，可以在流中编码音频内容和视频内容，并且可以以使得同步信息可以被提供给回放设备的方式生成和存储用于音频内容和视频内容的同步信息。根据一些实施例，音频内容以特定的最大比特率被编码到一个流中；并且视频内容被编码到以不同的最大比特率、分辨率、宽高比等编码的多个流中，以供经历不同网络业务条件的不同回放设备使用。根据一些其他实施例，音频内容被以变化的最大比特率编码到多个流中；并且视频内容被编码到以不同的最大比特率、分辨率、宽高比等编码的多个流中，以供经历不同网络业务条件的不同回放设备使用。在许多实施例中，视频内容还可以被编码成特技播放流，其仅包括用于在回放期间提供特技播放模式的视频内容的特定部分。
根据一些实施例，同步信息包括在存储处在顶级索引文件中的索引信息中。根据许多实施例，同步信息被存储在由顶级索引文件指向的索引文件中。在许多实施例中，同步信息可以作为元数据存储在存储音频内容和/或视频内容的流的部分的文件中。根据一些实施例，可以从字幕轨道或隐藏字幕轨道确定同步信息，该字幕轨道或隐藏字幕轨道将视频呈现时间与口头评论和/或对话相关联。图4示出了根据本发明实施例的由编码器服务器系统执行的用于编码包括音频内容和视频内容的媒体内容以及同步信息的处理。
处理400开始于接收要编码的媒体内容(405)。媒体内容包括音频内容和视频内容。根据本发明的一些实施例，音频内容被分成片段，并且视频内容包括帧，其中每个帧提供视频内容中的一个或多个图像的信息。然后，处理400将音频内容和视频内容编码成流(410)。根据许多实施例，音频内容被以特定的最大比特率编码到一个流中；并且视频内容被编码到以不同的最大比特率、分辨率、宽高比等编码的多个流中，以供经历不同网络业务条件的不同回放设备使用。根据一些其他实施例，音频内容被以变化的最大比特率编码到多个流中；并且视频内容被编码到以不同的最大比特率、分辨率、宽高比等编码的多个流中，以供经历不同网络业务条件的不同回放设备使用。在许多实施例中，视频内容还可以被编码成特技播放流，其仅包括视频内容的特定部分，以用于在回放期间提供特技播放模式。
处理400获得同步信息，该同步信息将可听内容的至少一些部分的呈现时间与视频内容的特定帧的呈现时间相关联(415)。根据一些实施例，可以与媒体内容一起接收同步信息。根据许多实施例，同步信息可以由编码器服务器系统生成。根据多个实施例，可以作为编码器同步服务器的运营商的输入来接收同步信息。然后可以将同步信息编码为媒体内容的索引信息(420)。
处理400生成媒体内容的容器文件和索引文件(425)。根据一些实施例，(音频和视频内容两者)的每个流被分成片段，并且每个片段被放置在单独的容器文件中。根据许多实施例，音频数据被分段，使得音频内容的每个识别的部分是单个片段并存储在单独的容器文件中。根据许多实施例，索引信息被放置在顶级索引文件中。根据多个实施例，索引信息被放置在由顶级索引文件指向的一个或多个索引文件中。在其他一些实施例中，包括同步信息的索引信息被作为元数据存储在容器文件中。在一些特定实施例中，音频数据的特定部分的同步信息被作为元数据存储在容器文件中，该容器文件存储包括音频数据的特定部分的片段。
尽管上面描述了根据本发明一个实施例的用于编码包括音频内容、视频内容和同步信息的备选媒体内容流的一个实施例。本领域技术人员将认识到，可以根据本发明的一些实施例执行用于编码流的其他处理。
在特技播放模式中回放媒体内容，包括提供音频数据
根据本发明的一些实施例，回放设备在特技播放模式下的回放期间提供音频内容。为了这样做，回放设备存储被划分为多个部分的音频内容、包括分别与帧相关联的图像的视频内容以及将音频内容的部分的呈现时间与用于音频内容中的该图像的帧的呈现时间相关联的同步数据。图5示出了根据本发明实施例的获得音频内容、视频内容和同步信息的处理。
处理500接收包括音频内容和视频内容的媒体内容(505)。根据本发明的一些实施例，通过自适应比特率流传输来接收媒体内容。根据一些其他实施例，可以从存储器读取媒体内容。根据其他实施例，从存储媒体内容的非暂时性媒体读取媒体内容。视频内容包括图像。每个图像与提供用于形成图像的信息的帧相关联。音频内容被分成具有回放持续时间的片段，该回放持续时间近似等于或小于与视频内容中的帧相关联的图像的回放持续时间。当媒体内容由回放设备解码时，音频内容和视频内容被存储在缓冲器中以供回放(510)。
在处理500中接收同步信息(515)。同步信息将音频内容的一个或多个部分的(一个或多个)呈现时间与视频内容中的图像的帧的呈现相关联。根据一些实施例，同步信息包括用于音频内容的每个部分的同步信息。根据一些其他实施例，同步信息包括将音频数据的至少一部分与视频数据的每个帧相关联的同步信息。根据其他实施例，同步信息可以仅将音频数据的特定部分与视频数据中的特定帧相关联。根据本发明的一些实施例，所接收的同步信息存储在存储器中以供在回放期间使用，并且更具体地用于在特技播放模式下回放音频内容期间使用(520)。
尽管以上参考图5讨论了用于获得用于以特技播放模式提供音频内容的回放的媒体内容的各种处理，但是本领域技术人员将认识到，可以根据本发明的各种实施例执行用于获得媒体内容的其他处理。
根据本发明的一些特定实施例，回放设备可以使用自适应比特率流传输来获得用于以特技播放模式提供音频内容的回放的媒体内容。在图6中示出了根据本发明实施例的用于获得音频内容、视频内容和同步信息以用于在特技播放模式中提供音频内容的回放的处理。
在处理600中，回放设备从内容提供商系统接收索引文件(605)。回放设备使用索引文件来从内容提供商系统请求音频内容和视频内容的部分(630)。根据本发明的一些实施例，回放设备监视用于在回放设备和内容提供商系统之间通过网络进行通信的网络带宽；以及选择以可以根据测量的带宽处理的最高最大比特率编码的音频和视频内容的流。标题为“Systems and Methods for Determining Available Bandwidth and PerformingInitial Stream Selection When Commencing Streaming Using Hypertext TransferProtocol”的美国专利申请序列号13/251,061和标题为“Systems and Methods forPerforming Multiphase Adaptive Bitrate Streaming”的美国专利申请序列号13/339,992更详细地公开了用于使用自适应比特率流传输选择流和开始回放以及获得媒体内容的系统和方法，其公开内容通过引用整体并入本文。所请求的音频和视频内容的部分由回放设备接收(635)。然后，音频和视频内容通过回放从接收的部分(640)准备，并将其提供给回放设备中的缓冲器，以便由客户端应用存储以供呈现(645)。本领域技术人员将注意到，可以迭代地执行音频和视频内容的请求(630)、接收(635)、生成(640)和提供，直到通过由回放设备根据自适应比特率流传输处理接收媒体内容的所有音频和视频内容为止。
回放设备还获得将音频内容的片段的呈现与视频内容的帧的呈现相关联的同步信息(650)。根据一些实施例，当在自适应比特率流传输处理的初始启动期间接收到顶级索引文件时，可以从顶级索引文件读取同步信息。根据一些其他实施例，回放设备从顶级索引文件中读取指向索引文件的指针；并且在自适应比特率流传输处理的初始启动期间向内容提供商系统请求并接收索引文件。根据其他实施例，在音频和/或视频内容的流传输期间接收同步信息作为元数据。根据一些实施例，可以从字幕轨道或隐藏字幕轨道确定同步信息，该轨道将视频呈现时间与口头评论和/或对话相关联。然后，同步信息被提供给客户端回放应用(655)，客户端回放应用可以将同步作为数据结构存储在存储器中以供在回放期间使用。
尽管上面参考图6讨论了用于使用自适应比特率流传输来获得用于在特技播放模式下提供音频内容的回放的媒体内容的处理，但是本领域技术人员将认识到用于获得媒体内容的其他处理可以根据本发明的各种实施例执行。
在特技播放模式器件提供可听的回放
有时，媒体呈现中的可听内容可以指示用户可能感兴趣的媒体内容的一部分。例如，体育赛事的媒体内容可以包括比赛的比赛描述的可听内容。用户可以在使用特技播放来查找内容中感兴趣的事件的同时，从该描述中找到感兴趣的内容的一部分，例如得分或重要比赛。这样，一些回放系统可能想要在特技播放模式期间的回放期间提供可听内容以增强用户体验。在图7中示出了根据本发明的实施例的由回放设备执行以在特技播放模式期间提供可听回放的处理。
在处理700中，回放设备接收以特技播放模式呈现媒体内容的请求(705)。根据一些实施例，特技播放模式可以包括但不限于快进、倒带、前向搜索和后向搜索。根据许多实施例，通过输入/输出(I/O)设备接收特技播放模式命令作为输入。根据本发明的各种实施例的I/O设备的示例包括但不限于键盘、鼠标、触摸屏等。回放设备基于由命令启动的当前特技播放模式确定待呈现的视频内容的下一帧(710)。根据本发明的一些实施例，待呈现的下一帧基于所采用的特技播放模式和特技播放模式的所选速度。根据一些其他实施例，可以基于待呈现的预定图像(例如但不限于以搜索模式呈现的预定图像)的列表来确定下一帧。
回放设备使用由回放设备存储的同步信息确定与下一帧相关联的音频内容的(一个或多个)片段(712)。将与要呈现的下一帧相关联的音频内容的(一个或多个)片段被与与正呈现的视频内容的当前帧相关联的音频内容的片段进行比较(715)。如果与下一帧相关联的音频内容的(一个或多个)片段与与正呈现的当前帧相关联的音频内容的(一个或多个)片段相同，则正呈现的(一个或多个)当前音频片段被用于回放(730)。根据一些实施例，当前音频内容的使用可以包括第二次呈现音频内容的当前片段。在其他实施例中，当前音频片段的使用可以包括允许呈现整个片段和/或音频数据的当前片段之后的片段。然后从缓冲器获得下一帧用于呈现(735)。如果与下一帧相关联的音频内容的(一个或多个)片段与与正呈现的当前帧相关联的音频内容的(一个或多个)片段不同，则回放设备然后从存储音频内容的(一个或多个)缓冲器的获得与下一帧相关联的音频内容的(一个或多个)片段(725)。本领域技术人员将理解，(一个或多个)音频片段的呈现的持续时间可以与帧的呈现时间不同。因此，可以维持要播放的音频片段的队列，并且所获得的音频片段被添加到队列中(727)。
使用显示设备呈现下一帧，并且使用音频系统呈现音频片段(735)。根据许多实施例，音频片段以队列提供的顺序呈现。根据这些实施例中的一些实施例，队列可以提供何时音频片段与多个片段相关联的指示，这些片段需要在回放期间重新呈现音频片段或者提供后续片段直到与音频片段相关联的帧改变为止。
根据一些实施例，生成“搓擦条”的显示，以指示正呈现的当前音频片段和图像，该搓擦条相对于总体呈现时间指示当前正呈现的音频片段的呈现时间以及相对于总体呈现时间指示正呈现的当前图像的呈现时间(740)。在图8中示出了根据本发明实施例的具有指示视频和音频内容的呈现时间的搓擦条的具有音频内容的回放期间的显示的示例。显示器800当前正在示出的视频内容的帧，其具有由视频搓擦条805上的点指示的呈现时间。经由音频系统呈现的音频内容的呈现时间被示出在音频搓擦条810上。如图8所示，在特技播放模式中图像的呈现时间与音频片段的呈现之间可能不存在一对一的对应关系，视频搓擦条805和音频搓擦条810对于看到在呈现的音频和视频内容之间的呈现时间的差异是有用的，以允许用户找到期望内容的呈现时间。
返回图7，当前图像和与图像相关联的音频片段被呈现(745)。根据一些实施例，在呈现图像的同时播放与图像的帧相关联的音频内容，并且当与正呈现的图像相关联的帧改变时，呈现的音频片段改变。根据一些其他实施例，维持要呈现的音频内容的队列，并且根据队列回放音频内容，而与在特技播放模式中正呈现的图像无关。根据提供“搓擦条”的实施例，所生成的“搓擦条”的显示被覆盖在正呈现的图像上(750)。
然后，回放设备确定特技播放模式是否完成(755)。根据一些实施例，特技播放模式的完成的指示可以是接收指示恢复正常回放的输入命令。根据其他实施例，特技播放的完成的指示可以是到达媒体内容的预定部分。如果特技播放模式完成，则处理700结束并恢复传统回放。如果没有完成回放模式，则处理700从确定要呈现的下一帧并使用先前确定的下一帧作为当前帧开始重复。
尽管以上参照图7描述了根据本发明的实施例的在特技播放模式期间提供音频回放的各种处理，但是根据本发明的实施例可以由回放设备执行其他处理以在特技播放模式期间提供音频回放。
尽管已经在某些特定方面描述了本发明，但是对于本领域技术人员来说许多其他修改和变化是显而易见的。因此，应该理解本发明可以在不脱离本发明的范围和精神的状态下以不同于具体描述的方式实施，包括实施方式的各种改变，例如利用支持超出它们所遵循的特定标准中指定的特征的编码器和解码器。因此，本发明的实施例应该在所有方面都被认为是说明性的而非限制性的。

Claims (20)

1.一种用于在媒体内容的回放期间以特技播放模式提供音频内容的回放的方法，该方法包括：
将媒体内容的音频内容部分的多个片段存储在回放设备中的缓冲器中；
将媒体内容的视频内容部分的多个帧存储在回放设备中的缓冲器中；
将同步信息存储在回放设备的存储器中，其中同步信息将音频内容部分的所述多个片段中的一个或多个片段中的每个片段的呈现时间与视频内容的所述多个帧中的一个或多个帧的呈现时间相关联；
在回放设备中接收以特技播放模式回放媒体内容的命令；
使用回放设备基于特技播放模式从所述多个帧确定待呈现的下一帧；
根据存储在存储器中的同步信息，从音频内容的所述多个片段中确定与下一帧相关联的每个片段；和
使用回放设备在回放期间以特技播放模式呈现音频内容的所述多个片段中的与下一帧相关联的每个片段。
2.如权利要求1所述的方法，还包括：
在回放设备的显示器上呈现下一帧。
3.如权利要求2所述的方法，其中，音频内容的所述多个片段中的与下一帧相关联的每个片段的呈现与下一帧的呈现同时执行。
4.如权利要求2所述的方法，还包括：
响应于确定音频内容的所述多个片段中的与下一帧相关联的每个片段，使用回放设备将音频内容的所述多个片段中的与该帧相关联的每个片段添加到队列；和
其中，所述多个片段中的与下一帧相关联的每个片段是被基于队列呈现的，并且独立于在回放设备的显示器上的来自视频内容的下一帧的呈现。
5.如权利要求2所述的方法，还包括：
使用回放设备生成用于视频内容的搓擦条的显示，指示来自视频内容的下一帧的呈现时间；和
在显示器上将用于视频内容的搓擦条的显示覆盖在图像的呈现上。
6.如权利要求2所述的方法，还包括：
使用回放设备生成用于音频内容的搓擦条的显示，指示音频内容的与下一帧相关联的每个片段的呈现时间；和
在显示器上将用于音频内容的搓擦条的显示覆盖在图像的呈现上。
7.如权利要求6所述的方法，其中，用于音频内容的搓擦条与用于视频内容的搓擦条在显示器中分开。
8.如权利要求1所述的方法，还包括：
在回放设备中使用自适应比特率流传输在网络上从内容提供商系统接收音频内容部分的所述多个片段的数据、视频内容的所述多个帧的数据以及同步信息。
9.如权利要求8所述的方法，其中，在回放设备中使用自适应比特率流传输在网络上从内容提供商系统接收音频内容部分的所述多个片段的数据、视频内容的所述多个帧的数据以及同步信息包括：
在回放设备中通过网络从内容提供商系统接收顶级索引文件，其中顶级索引文件识别视频内容的多个备选流以及至少一个音频内容流，其中所述多个备选流的至少一部分被以不同的最大比特率编码；和
基于回放设备和内容提供商系统之间的网络带宽，使用回放设备从内容提供商系统请求来自所述多个备选流的视频内容的部分；
在回放设备中响应于请求接收所请求的视频内容的部分；
在回放设备中从由回放设备接收的视频内容的部分生成视频内容的所述多个帧；
将所述多个帧存储在回放设备的缓冲器中；
使用回放设备从内容提供商系统请求来自所述至少一个音频内容流的音频内容的部分；
在回放设备中接收所请求的音频内容的部分；
使用回放设备从所接收的音频内容的部分生成音频内容的所述多个片段；
将音频内容的所述多个片段存储在回放设备的缓冲器中；
基于顶级索引文件中的信息，使用回放设备从内容提供商系统获取同步信息；和
将同步信息存储在回放设备中的存储器中。
10.如权利要求9所述的方法，其中，获得同步信息包括：
使用回放设备从顶级索引文件中读取指向包括同步信息的文件的指针；
使用回放设备从内容提供商系统请求该文件；和
在回放设备中接收所请求的文件。
11.一种回放设备，包括：
存储器；
网络接口；和
处理器，读取存储在存储器中的指令，所述指令指示处理器：
将媒体内容的音频内容部分的多个片段存储在回放设备中的缓冲器中；
将媒体内容的视频内容部分的多个帧存储在回放设备中的缓冲器中；
将同步信息存储在存储器中，其中同步信息将音频内容部分的所述多个片段中的一个或多个片段中的每个片段的呈现时间与视频内容的所述多个帧中的一个或多个帧的呈现时间相关联；
接收以特技播放模式回放媒体内容的命令；
基于特技播放模式从所述多个图像确定待呈现的下一帧；
根据存储在存储器中的同步信息，从音频内容的所述多个片段中确定与下一帧相关联的每个片段；和
使用回放设备在回放期间以特技播放模式呈现音频内容的所述多个片段中的与下一帧相关联的每个片段。
12.如权利要求11所述的回放设备，其中所述指令还指示处理器：
在回放设备的显示器上呈现下一帧。
13.如权利要求12所述的回放设备，其中，音频内容的与下一帧相关联的每个片段的呈现与下一帧的呈现同时执行。
14.如权利要求12所述的回放设备，其中所述指令还指示处理器：
响应于确定音频内容的与下一帧相关联的每个片段，将音频内容的与下一帧相关联的每个片段添加到队列中；和
其中，每个片段的呈现是基于队列的，并且独立于在回放设备的显示器上的来自视频内容的下一帧的呈现。
15.如权利要求12所述的回放设备，其中所述指令还指示处理器：
生成用于视频内容的搓擦条的显示，指示来自视频内容的下一帧的呈现时间；和
在显示器上将用于视频内容的搓擦条的显示覆盖在图像的呈现上。
16.如权利要求12所述的回放设备，其中所述指令还指示处理器：
生成用于音频内容的搓擦条的显示，在呈现每个片段的同时指示音频内容的与下一帧相关联的每个片段的呈现时间；和
在显示器上将用于音频内容的搓擦条的显示覆盖在图像的呈现上。
17.如权利要求16所述的回放设备，其中，用于音频内容的搓擦条与用于的视频内容的搓擦条在显示器中分开。
18.如权利要求11所述的回放设备，其中所述指令还指示所述处理器：
使用自适应比特率流传输在网络上从内容提供商系统接收音频内容部分的所述多个片段的数据、视频内容的所述多个帧的数据以及同步信息。
19.如权利要求18所述的回放设备，其中使用自适应比特率流传输在网络上从内容提供商系统接收音频内容部分的所述多个片段的数据、视频内容的所述多个帧的数据以及同步信息的指令进一步指示处理系统：
通过网络从内容提供商系统接收顶级索引文件，其中顶级索引文件识别视频内容的多个备选流以及至少一个音频内容流，其中所述多个备选流的至少一部分被以不同的最大比特率编码；和
基于回放设备和内容提供商系统之间的网络带宽，从内容提供商系统请求来自所述多个备选流的视频内容的部分；
接收所请求的视频内容的部分；
从所接收的视频内容的部分生成视频内容的所述多个帧；
将所述多个图像存储在缓冲器中；
从内容提供商系统请求来自所述至少一个音频内容流的音频内容的部分；
接收所请求的音频内容的部分；
从所接收的音频内容的部分生成音频内容的所述多个片段；
将音频内容的所述多个片段存储在回放设备的缓冲器中；
基于顶级索引文件中的信息，从内容提供商系统获取同步信息；和
将同步信息存储在回放设备中的存储器中。
20.一种包含处理器指令的非暂时性机器可读介质，其中处理器执行指令使得处理器执行包括以下步骤的处理：
将媒体内容的音频内容部分的多个片段存储在缓冲器中；
将媒体内容的视频内容部分的多个帧存储在缓冲器中；
将同步信息存储在存储器中，其中同步信息将音频内容部分的所述多个片段中的一个或多个片段中的每个片段的呈现时间与视频内容的所述多个帧中的一个或多个帧的呈现时间相关联；
接收以特技播放模式回放媒体内容的命令；
基于特技播放模式从所述多个图像确定待呈现的一图像；
确定与待呈现的图像相关联的视频内容的帧；
根据存储在存储器中的同步信息，从音频内容的所述多个片段中确定与所述图像的所述帧相关联的每个片段；和
在回放期间以特技播放模式呈现音频内容的所述多个片段中的与所述帧相关联的每个片段。
CN201780031871.1A 2016-05-24 2017-05-04 用于在特技播放回放期间提供音频内容的系统和方法 Active CN109937448B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/163,370 2016-05-24
US15/163,370 US10231001B2 (en) 2016-05-24 2016-05-24 Systems and methods for providing audio content during trick-play playback
PCT/US2017/031097 WO2017205028A1 (en) 2016-05-24 2017-05-04 Systems and methods for providing audio content during trick-play playback

Publications (2)

Publication Number Publication Date
CN109937448A true CN109937448A (zh) 2019-06-25
CN109937448B CN109937448B (zh) 2021-02-09

Family

ID=60411825

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780031871.1A Active CN109937448B (zh) 2016-05-24 2017-05-04 用于在特技播放回放期间提供音频内容的系统和方法

Country Status (7)

Country Link
US (4) US10231001B2 (zh)
EP (1) EP3465460B1 (zh)
JP (2) JP2019517219A (zh)
KR (1) KR102054654B1 (zh)
CN (1) CN109937448B (zh)
ES (1) ES2949432T3 (zh)
WO (1) WO2017205028A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10701417B2 (en) 2016-05-24 2020-06-30 Divx, Llc Systems and methods for providing audio content during trick-play playback
CN112637659A (zh) * 2020-04-15 2021-04-09 西安诺瓦星云科技股份有限公司 媒体音频播放方法、装置和系统
CN115398924A (zh) * 2021-01-06 2022-11-25 腾讯美国有限责任公司 用于媒体流传输的方法和设备

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10389785B2 (en) * 2016-07-17 2019-08-20 Wei-Chung Chang Method for adaptively streaming an audio/visual material
US11627350B2 (en) * 2016-12-30 2023-04-11 Tivo Solutions Inc. Advanced trick-play modes for streaming video
US11303689B2 (en) * 2017-06-06 2022-04-12 Nokia Technologies Oy Method and apparatus for updating streamed content
CN111510755A (zh) * 2019-01-30 2020-08-07 上海哔哩哔哩科技有限公司 音视频的切换方法、装置、计算机设备及可读存储介质
US20230106679A1 (en) * 2021-10-06 2023-04-06 Lifecast Incorporated Image Processing Systems and Methods
CN115062168A (zh) * 2022-06-28 2022-09-16 北京字跳网络技术有限公司 媒体内容展示方法、装置、设备及存储介质
CN116233472B (zh) * 2023-05-08 2023-07-18 湖南马栏山视频先进技术研究院有限公司 一种音频视频同步的方法和云端处理系统

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060093320A1 (en) * 2004-10-29 2006-05-04 Hallberg Bryan S Operation modes for a personal video recorder using dynamically generated time stamps
CN1784737A (zh) * 2003-05-10 2006-06-07 三星电子株式会社 多媒体数据再现设备、音频数据接收方法及其音频数据结构
KR20070096406A (ko) * 2006-03-24 2007-10-02 엘지전자 주식회사 디지털 멀티미디어 파일의 변속 재생 제어방법
CN101106723A (zh) * 2007-07-10 2008-01-16 中国传媒大学 一种快速播放多媒体信息的系统和方法
CN101106724A (zh) * 2006-07-12 2008-01-16 联发科技股份有限公司 将视频数据及音频数据同步的方法及系统
US7432940B2 (en) * 2001-10-12 2008-10-07 Canon Kabushiki Kaisha Interactive animation of sprites in a video production
CN101662689A (zh) * 2008-08-25 2010-03-03 华为技术有限公司 交互电视频道切换方法及系统、音视频流发送方法及装置
CN101674486A (zh) * 2009-09-29 2010-03-17 深圳市融创天下科技发展有限公司 一种流媒体音视频同步方法及系统
WO2012094171A1 (en) * 2011-01-05 2012-07-12 Divx, Llc. Adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
CN103053170A (zh) * 2011-02-14 2013-04-17 艾科星先进科技公司 用以在串流重放期间提供特技播放的系统和方法
US8640181B1 (en) * 2010-09-15 2014-01-28 Mlb Advanced Media, L.P. Synchronous and multi-sourced audio and video broadcast
US8655156B2 (en) * 2010-03-02 2014-02-18 Cisco Technology, Inc. Auxiliary audio transmission for preserving synchronized playout with paced-down video

Family Cites Families (229)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5953485A (en) 1992-02-07 1999-09-14 Abecassis; Max Method and system for maintaining audio during video control
US5400401A (en) 1992-10-30 1995-03-21 Scientific Atlanta, Inc. System and method for transmitting a plurality of digital services
JP2707950B2 (ja) 1993-07-30 1998-02-04 ソニー株式会社 ディジタル画像情報処理装置
US5596564A (en) 1993-10-08 1997-01-21 Matsushita Electric Industrial Co., Ltd. Information recording medium and apparatus and method for recording and reproducing information
JPH07327029A (ja) 1994-05-31 1995-12-12 Fujitsu Ltd 暗号化通信システム
JP2842796B2 (ja) 1994-12-06 1999-01-06 富士通株式会社 動画像の暗号化処理方法及び装置及び暗号化された動画像の復号化処理方法及び装置
US6009237A (en) 1995-02-24 1999-12-28 Hitachi Ltd. Optical disk and optical disk reproduction apparatus
US6002834A (en) 1995-02-24 1999-12-14 Hitachi, Ltd. Optical disk having table relating sector address and time and optical disk reproducing apparatus
TW430785B (en) 1995-04-14 2001-04-21 Toshiba Corp Interactively broadcasting recording-media and its regeneration system
US5813010A (en) 1995-04-14 1998-09-22 Kabushiki Kaisha Toshiba Information storage and information transmission media with parental control
WO1997007504A1 (fr) 1995-08-21 1997-02-27 Matsushita Electric Industrial Co., Ltd. Disque optique multimedia capable de creer des situations tout a fait inattendues sur la base de l'interactivite, appareil et procede de reproduction de ce disque
TW436777B (en) 1995-09-29 2001-05-28 Matsushita Electric Ind Co Ltd A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
TW385431B (en) 1995-09-29 2000-03-21 Matsushita Electric Ind Co Ltd A method and an apparatus for encoding a bitstream with plural possible searching reproduction paths information useful in multimedia optical disk
US5751280A (en) 1995-12-11 1998-05-12 Silicon Graphics, Inc. System and method for media stream synchronization with a base atom index file and an auxiliary atom index file
CA2237293A1 (en) 1995-12-29 1997-07-10 Scientific-Atlanta, Inc. Method and apparatus for providing conditional access in connection-oriented, interactive networks with a multiplicity of service providers
US6957350B1 (en) 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
WO1997046027A1 (en) 1996-05-29 1997-12-04 Sarnoff Corporation Preserving synchronization of audio and video presentation
US6065050A (en) 1996-06-05 2000-05-16 Sun Microsystems, Inc. System and method for indexing between trick play and normal play video streams in a video delivery system
JP3148648B2 (ja) 1996-08-08 2001-03-19 松下電器産業株式会社 磁気記録再生方法および磁気記録再生装置
US5805700A (en) 1996-10-15 1998-09-08 Intel Corporation Policy based selective encryption of compressed video data
US5893062A (en) 1996-12-05 1999-04-06 Interval Research Corporation Variable rate video playback with synchronized audio
FI106071B (fi) 1997-03-13 2000-11-15 Nokia Mobile Phones Ltd Mukautuva suodatin
MY124583A (en) 1997-03-19 2006-06-30 Sony Corp Video data decoding apparatus and method and video signal reproduction apparatus and method
US6654933B1 (en) 1999-09-21 2003-11-25 Kasenna, Inc. System and method for media stream indexing
US6970564B1 (en) 1998-07-13 2005-11-29 Sony Corporation Data multiplexing device, program distribution system, program transmission system, pay broadcast system, program transmission method, conditional access system, and data reception device
FI103003B1 (fi) 1997-06-13 1999-03-31 Nokia Mobile Phones Ltd Suodatusmenetelmä, suodatin ja matkaviestinpääte
KR100242448B1 (ko) 1997-06-28 2000-02-01 윤종용 디지털 비디오 디스크 고속 재생 제어장치 및 방법
US6594699B1 (en) 1997-10-10 2003-07-15 Kasenna, Inc. System for capability based multimedia streaming over a network
US6057832A (en) 1997-12-02 2000-05-02 V Soft Ltd. Method and apparatus for video-on-demand with fast play capability
JP4186242B2 (ja) 1997-12-26 2008-11-26 ソニー株式会社 画像信号処理装置及び画像信号処理方法
US6751623B1 (en) 1998-01-26 2004-06-15 At&T Corp. Flexible interchange of coded multimedia facilitating access and streaming
US7809138B2 (en) 1999-03-16 2010-10-05 Intertrust Technologies Corporation Methods and apparatus for persistent control and protection of content
JPH11289512A (ja) * 1998-04-03 1999-10-19 Sony Corp 編集リスト作成装置
JPH11355719A (ja) * 1998-06-05 1999-12-24 Sony Corp 記録再生装置、記録再生方法、および提供媒体
US6320905B1 (en) 1998-07-08 2001-11-20 Stream Machine Company Postprocessing system for removing blocking artifacts in block-based codecs
US7457415B2 (en) 1998-08-20 2008-11-25 Akikaze Technologies, Llc Secure information distribution system utilizing information segment scrambling
US6931531B1 (en) 1998-09-02 2005-08-16 Matsushita Electric Industrial Co., Ltd. Image object recording, compression, and encryption method and system
US6351538B1 (en) 1998-10-06 2002-02-26 Lsi Logic Corporation Conditional access and copy protection scheme for MPEG encoded video data
CN1165165C (zh) 1998-10-12 2004-09-01 松下电器产业株式会社 信息记录介质及用于记录或再现数据的装置和方法
CA2289958C (en) 1998-11-19 2003-01-21 Tomoyuki Okada Information recording medium, apparatus and method for recording or reproducing data thereof
US6236764B1 (en) 1998-11-30 2001-05-22 Equator Technologies, Inc. Image processing circuit and method for reducing a difference between pixel values across an image boundary
EP1021048A3 (en) 1999-01-14 2002-10-02 Kabushiki Kaisha Toshiba Digital video recording system and its recording medium
AU2515800A (en) 1999-01-26 2000-08-07 Infolio, Inc. Universal mobile id system and method for digital rights management
JP3433125B2 (ja) 1999-01-27 2003-08-04 三洋電機株式会社 動画像再生装置
WO2000046803A1 (fr) 1999-02-05 2000-08-10 Kabushiki Kaisha Toshiba Procede permettant de creer des trains de donnees et procede permettant d'effectuer des suppressions partielles
DE19906449C1 (de) 1999-02-16 2000-08-10 Fraunhofer Ges Forschung Verfahren und Vorrichtung zum Erzeugen eines verschlüsselten Nutzdatenstroms und Verfahren und Vorrichtung zum Abspielen eines verschlüsselten Nutzdatenstroms
DE19906450C1 (de) 1999-02-16 2000-08-17 Fraunhofer Ges Forschung Verfahren und Vorrichtung zum Erzeugen eines verschlüsselten Nutzdatenstroms und Verfahren und Vorrichtung zum Entschlüsseln eines verschlüsselten Nutzdatenstroms
JP3805985B2 (ja) 1999-02-18 2006-08-09 株式会社東芝 ストリームデータの情報記憶媒体、その記録方法、再生方法、記録装置および再生装置
US6415031B1 (en) 1999-03-12 2002-07-02 Diva Systems Corporation Selective and renewable encryption for secure distribution of video on-demand
WO2000055854A1 (fr) 1999-03-17 2000-09-21 Kabushiki Kaisha Toshiba Procede d'enregistrement de donnees en fluxet de leur structure
EP1039468A3 (en) 1999-03-19 2000-10-04 Deutsche Thomson-Brandt Gmbh Method for implementing trickplay modes in a data stream recorder
US8689265B2 (en) * 1999-03-30 2014-04-01 Tivo Inc. Multimedia mobile personalization system
US6757906B1 (en) 1999-03-30 2004-06-29 Tivo, Inc. Television viewer interface system
BR0006128A (pt) 1999-05-14 2001-03-27 Koninkl Philips Electronics Nv Processos e meios de conversão para converter um fluxo em pacote de sinais de informação, e para converter um fluxo de sinais de informação, sistema para armazenamento e recuperação de um fluxo em pacote de sinais de informaçào fluxo em pacote de sinais de informação, processo para transmitir um fluxo em pacote de sinais de informação , e, sinal incluindo um fluxo serial de sinais de informação e sinais de pacote de marca de tempo
US6912513B1 (en) 1999-10-29 2005-06-28 Sony Corporation Copy-protecting management using a user scrambling key
US7151832B1 (en) 1999-11-18 2006-12-19 International Business Machines Corporation Dynamic encryption and decryption of a stream of data
US6792047B1 (en) 2000-01-04 2004-09-14 Emc Corporation Real time processing and streaming of spliced encoded MPEG video and associated audio
ATE387775T1 (de) 2000-01-21 2008-03-15 Sony Corp Daten-identifizierungs-system
JP2001209583A (ja) 2000-01-26 2001-08-03 Sony Corp データ記録再生器およびセーブデータ処理方法、並びにプログラム提供媒体
JP4599740B2 (ja) 2000-04-21 2010-12-15 ソニー株式会社 情報処理装置および方法、記録媒体、プログラム、並びに記録媒体
US7088911B2 (en) 2000-04-26 2006-08-08 Sony Corporation Recording apparatus and method, playback apparatus and method, and recording medium therefor
GB2362532B (en) 2000-05-15 2004-05-05 Nokia Mobile Phones Ltd Video coding
US6829781B1 (en) * 2000-05-24 2004-12-07 At&T Corp. Network-based service to provide on-demand video summaries of television programs
KR100448452B1 (ko) 2000-06-09 2004-09-13 엘지전자 주식회사 고밀도 광 기록매체의 메뉴 지원방법
US6871006B1 (en) 2000-06-30 2005-03-22 Emc Corporation Processing of MPEG encoded video for trick mode operation
KR20040041082A (ko) 2000-07-24 2004-05-13 비브콤 인코포레이티드 멀티미디어 북마크와 비디오의 가상 편집을 위한 시스템및 방법
US7373422B1 (en) 2000-08-04 2008-05-13 Oracle International Corporation Techniques for supporting multiple devices in mobile applications
US6704024B2 (en) 2000-08-07 2004-03-09 Zframe, Inc. Visual content browsing using rasterized representations
WO2002017637A1 (fr) 2000-08-25 2002-02-28 Matsushita Electric Industrial Co., Ltd. Procede de transmission de donnees et procede de relais de donnees
US6453115B1 (en) 2000-08-31 2002-09-17 Keen Personal Media, Inc. Digital video recording system which generates an index data structure for displaying a video stream in trickplay mode
US7242772B1 (en) 2000-09-07 2007-07-10 Eastman Kodak Company Encryption apparatus and method for synchronizing multiple encryption keys with a data stream
US7212726B2 (en) 2000-09-15 2007-05-01 International Business Machines Corporation System and method of processing MPEG streams for file index insertion
US6920181B1 (en) 2000-09-19 2005-07-19 Todd Porter Method for synchronizing audio and video streams
US7031393B2 (en) 2000-10-20 2006-04-18 Matsushita Electric Industrial Co., Ltd. Block distortion detection method, block distortion detection apparatus, block distortion removal method, and block distortion removal apparatus
JP2002278597A (ja) * 2001-03-21 2002-09-27 Sanyo Electric Co Ltd オーディオ再生装置
US7450641B2 (en) 2001-09-14 2008-11-11 Sharp Laboratories Of America, Inc. Adaptive filtering based upon boundary strength
US7130316B2 (en) 2001-04-11 2006-10-31 Ati Technologies, Inc. System for frame based audio synchronization and method thereof
US7110664B2 (en) 2001-04-20 2006-09-19 Front Porch Digital, Inc. Methods and apparatus for indexing and archiving encoded audio-video data
US7065213B2 (en) 2001-06-29 2006-06-20 Scientific-Atlanta, Inc. In a subscriber network receiving digital packets and transmitting digital packets below a predetermined maximum bit rate
CN100470654C (zh) 2001-07-23 2009-03-18 松下电器产业株式会社 将信息记录到信息记录介质的装置及方法
JP4145586B2 (ja) 2001-07-24 2008-09-03 セイコーエプソン株式会社 画像処理装置及び画像処理プログラム、並びに画像処理方法
US20030044166A1 (en) 2001-08-31 2003-03-06 Stmicroelectronics, Inc. System for multiplexing video data streams in a digital video recorder and method of operating the same
US6931071B2 (en) 2001-08-31 2005-08-16 Stmicroelectronics, Inc. Apparatus and method for synchronizing video and audio MPEG streams in a video playback device
AU2002323591A1 (en) 2001-09-05 2003-03-18 Emblaze Systems Ltd. Method for reducing blocking artifacts
KR100424762B1 (ko) 2001-09-06 2004-03-30 삼성전자주식회사 영상 데이터 제공 시스템 및 방법
US6983079B2 (en) 2001-09-20 2006-01-03 Seiko Epson Corporation Reducing blocking and ringing artifacts in low-bit-rate coding
US20030077071A1 (en) 2001-10-23 2003-04-24 Shu Lin Fast forward trick mode and reverse trick mode using an information file
JP2003152698A (ja) 2001-11-15 2003-05-23 Nippon Hoso Kyokai <Nhk> コンテンツ利用制御送信方法、コンテンツ利用制御受信方法およびコンテンツ利用制御送信装置、コンテンツ利用制御受信装置ならびにコンテンツ利用制御送信プログラム、コンテンツ利用制御受信プログラム
AU2002347635B2 (en) 2001-11-29 2008-04-24 Godo Kaisha Ip Bridge 1 Coding distortion removal method and video encoding end decoding methods
EP2320661B8 (en) 2001-11-29 2015-09-02 Godo Kaisha IP Bridge 1 Coding distortion removal method
US20040037421A1 (en) 2001-12-17 2004-02-26 Truman Michael Mead Parital encryption of assembled bitstreams
US8027470B2 (en) 2002-01-02 2011-09-27 Sony Corporation Video slice and active region based multiple partial encryption
US7065651B2 (en) 2002-01-16 2006-06-20 Microsoft Corporation Secure video card methods and systems
JP2003230089A (ja) 2002-01-31 2003-08-15 Toshiba Corp 情報記憶媒体及び情報記録装置
US7116894B1 (en) 2002-05-24 2006-10-03 Digeo, Inc. System and method for digital multimedia stream conversion
US7174021B2 (en) 2002-06-28 2007-02-06 Microsoft Corporation Systems and methods for providing secure server key operations
AU2003268037A1 (en) 2002-07-30 2004-02-16 Digital Interactive Streams, Inc. Digital content security system and method
US20040022391A1 (en) 2002-07-30 2004-02-05 O'brien Royal Digital content security system and method
US7167560B2 (en) 2002-08-08 2007-01-23 Matsushita Electric Industrial Co., Ltd. Partial encryption of stream-formatted media
MXPA04004148A (es) 2002-09-05 2005-07-05 Lg Electronics Inc Medio de grabacion, que tiene estructura de datos para adminstrar reproduccion de imagenes fijas ahi grabadas y metodos y aparatos para grabacion y reproduccion.
WO2004023480A1 (en) 2002-09-06 2004-03-18 Lg Electronics Inc. Recording medium having data structure for managing reproduction of still images recorded thereon and recording and reproducing methods and apparatuses
JP2004112176A (ja) * 2002-09-17 2004-04-08 Pioneer Electronic Corp 情報処理装置、その方法、そのプログラム、そのプログラムを記録した記録媒体、および、再生装置
US20050144468A1 (en) 2003-01-13 2005-06-30 Northcutt J. D. Method and apparatus for content protection in a personal digital network environment
US7020287B2 (en) 2002-09-30 2006-03-28 Sony Corporation Method and system for key insertion for stored encrypted content
US7295673B2 (en) 2002-10-23 2007-11-13 Divx, Inc. Method and system for securing compressed digital video
KR20040039852A (ko) 2002-11-05 2004-05-12 주식회사 디지털앤디지털 프레임 인덱스를 이용한 트릭 플레이 구현방법
US8572408B2 (en) 2002-11-05 2013-10-29 Sony Corporation Digital rights management of a digital device
RU2334285C2 (ru) 2002-11-20 2008-09-20 Эл Джи Электроникс Инк. Носитель записи со структурой данных для управления воспроизведением записанных на нем данных и способы и устройства записи и воспроизведения
US7227901B2 (en) 2002-11-21 2007-06-05 Ub Video Inc. Low-complexity deblocking filter
WO2004080081A1 (en) 2003-03-03 2004-09-16 Koninklijke Philips Electronics N.V. Video encoding
US7007170B2 (en) 2003-03-18 2006-02-28 Widevine Technologies, Inc. System, method, and apparatus for securely providing content viewable on a secure device
US6995311B2 (en) 2003-03-31 2006-02-07 Stevenson Alexander J Automatic pitch processing for electric stringed instruments
DE602004027799D1 (de) 2003-04-10 2010-08-05 Panasonic Corp Informationsaufzeichnungsmedium, einrichtung und verfahren zum aufzeichnen von informationen in einem informationsaufzeichnungsmedium
JP4902935B2 (ja) 2003-05-08 2012-03-21 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び記録媒体
KR100492567B1 (ko) 2003-05-13 2005-06-03 엘지전자 주식회사 이동통신 시스템의 ｈｔｔｐ 기반 비디오 스트리밍 장치및 방법
US7424501B2 (en) 2003-06-30 2008-09-09 Intel Corporation Nonlinear filtering and deblocking applications utilizing SIMD sign and absolute value operations
JP4411879B2 (ja) 2003-07-01 2010-02-10 株式会社ニコン 信号処理装置、信号処理プログラム、および電子カメラ
KR101081729B1 (ko) 2003-07-07 2011-11-08 로비 솔루션스 코포레이션 저작권 침해를 제어하고 쌍방향 컨텐츠를 인에이블시키기 위한 재프로그램가능한 보안
US20050013494A1 (en) 2003-07-18 2005-01-20 Microsoft Corporation In-loop deblocking filter
US7382879B1 (en) 2003-07-23 2008-06-03 Sprint Communications Company, L.P. Digital rights management negotiation for streaming media over a network
JP2005057435A (ja) 2003-08-01 2005-03-03 Sony Corp クライアント機器及びクライアント機器におけるコンテンツ処理方法、並びにコンテンツ提供システム
DE602004031625D1 (de) 2003-08-07 2011-04-14 Pervenio Ltd Server zum bestimmen und speichern von mobilgerät-leistungsmerkmalen
JP2005086362A (ja) * 2003-09-05 2005-03-31 Matsushita Electric Ind Co Ltd データ多重化方法、データ送信方法およびデータ受信方法
US7853980B2 (en) 2003-10-31 2010-12-14 Sony Corporation Bi-directional indices for trick mode video-on-demand
JP4537083B2 (ja) 2004-01-28 2010-09-01 キヤノン株式会社 データ処理装置及びその制御方法
US9094699B2 (en) 2004-02-05 2015-07-28 Broadcom Corporation System and method for security key transmission with strong pairing to destination client
US7546641B2 (en) 2004-02-13 2009-06-09 Microsoft Corporation Conditional access to digital rights management conversion
US20070208571A1 (en) 2004-04-21 2007-09-06 Pierre-Anthony Stivell Lemieux Audio Bitstream Format In Which The Bitstream Syntax Is Described By An Ordered Transversal of A Tree Hierarchy Data Structure
US7539248B2 (en) 2004-04-29 2009-05-26 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7400679B2 (en) 2004-04-29 2008-07-15 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7397853B2 (en) 2004-04-29 2008-07-08 Mediatek Incorporation Adaptive de-blocking filtering apparatus and method for MPEG video decoder
US7477749B2 (en) 2004-05-12 2009-01-13 Nokia Corporation Integrity protection of streamed content
US8600217B2 (en) 2004-07-14 2013-12-03 Arturo A. Rodriguez System and method for improving quality of displayed picture during trick modes
CN1989564A (zh) 2004-08-17 2007-06-27 松下电器产业株式会社 信息记录媒体、数据区别装置、以及数据再生装置
US7957535B2 (en) 2005-01-18 2011-06-07 Panasonic Corporation Data storing method, data playback method, data recording device, data playback device, and recording medium
US7349886B2 (en) 2005-03-25 2008-03-25 Widevine Technologies, Inc. Securely relaying content using key chains
CN102005228B (zh) 2005-04-07 2013-04-10 松下电器产业株式会社 记录方法和再现装置
KR100677026B1 (ko) 2005-04-07 2007-02-01 (주)아이티너스 코리아 영상 신호 송수신 시스템 및 이에 사용되는 보안 모듈
US8683066B2 (en) 2007-08-06 2014-03-25 DISH Digital L.L.C. Apparatus, system, and method for multi-bitrate content streaming
EP2106135A3 (en) * 2005-05-18 2009-12-30 Panasonic Corporation Content reproduction apparatus
EP1908303A4 (en) 2005-07-01 2011-04-06 Sonic Solutions METHOD, DEVICE AND SYSTEM FOR USE IN MULTIMEDIA SIGNAL CODING
US8799757B2 (en) 2005-07-01 2014-08-05 Microsoft Corporation Synchronization aspects of interactive multimedia presentation management
JP4321550B2 (ja) 2005-08-31 2009-08-26 ソニー株式会社 情報処理装置、情報記録媒体製造装置、情報記録媒体、および方法、並びにコンピュータ・プログラム
US20070067472A1 (en) 2005-09-20 2007-03-22 Lsi Logic Corporation Accurate and error resilient time stamping method and/or apparatus for the audio-video interleaved (AVI) format
US20070083467A1 (en) 2005-10-10 2007-04-12 Apple Computer, Inc. Partial encryption techniques for media data
US7991891B2 (en) 2006-02-02 2011-08-02 Microsoft Corporation Version-specific content searching
US8219553B2 (en) * 2006-04-26 2012-07-10 At&T Intellectual Property I, Lp Methods, systems, and computer program products for managing audio and/or video information via a web broadcast
US7414550B1 (en) 2006-06-30 2008-08-19 Nvidia Corporation Methods and systems for sample rate conversion and sample clock synchronization
JP5052514B2 (ja) 2006-07-12 2012-10-17 パナソニック株式会社 音声復号装置
EP1879347B1 (en) * 2006-07-14 2012-05-30 Sony Europe Limited System and method of audio/video streaming
US8224041B2 (en) 2006-07-19 2012-07-17 Panasonic Corporation Media data processing apparatus and media data processing method
US8856371B2 (en) 2006-08-07 2014-10-07 Oovoo Llc Video conferencing over IP networks
US7743161B2 (en) 2006-10-10 2010-06-22 Ortiva Wireless, Inc. Digital content buffer for adaptive streaming
TW200820783A (en) 2006-10-25 2008-05-01 Realtek Semiconductor Corp Apparatus and method for deblock filtering
US20080131075A1 (en) * 2006-12-01 2008-06-05 The Directv Group, Inc. Trick play dvr with audio pitch correction
US8243924B2 (en) 2007-06-29 2012-08-14 Google Inc. Progressive download or streaming of digital media securely through a localized container and communication protocol proxy
US8677397B2 (en) 2007-09-20 2014-03-18 Visible World, Inc. Systems and methods for media packaging
US10277956B2 (en) 2007-10-01 2019-04-30 Cabot Communications Method and apparatus for streaming digital media content and a communication system
US20090106082A1 (en) 2007-10-23 2009-04-23 Senti Thad E System and method to facilitate targeted advertising
JP5513400B2 (ja) 2007-11-16 2014-06-04 ソニック アイピー， インコーポレイテッド マルチメディアファイルのための階層的で簡略なインデックス構造体
US8169916B1 (en) 2007-11-23 2012-05-01 Media Melon, Inc. Multi-platform video delivery configuration
US8131875B1 (en) 2007-11-26 2012-03-06 Adobe Systems Incorporated Device profile assignment based on device capabilities
US8479229B2 (en) * 2008-02-29 2013-07-02 At&T Intellectual Property I, L.P. System and method for presenting advertising data during trick play command execution
WO2009109976A2 (en) 2008-03-05 2009-09-11 Webtview Ltd. Distributing internet channels to a media viewer
CN101540645A (zh) 2008-03-21 2009-09-23 华为技术有限公司 动态内容分发方法和装置
US20090249081A1 (en) 2008-03-31 2009-10-01 Kabushiki Kaisha Toshiba-1 Shibaura 1-Chomominatoku Storage device encryption and method
US8379851B2 (en) 2008-05-12 2013-02-19 Microsoft Corporation Optimized client side rate control and indexed file layout for streaming media
WO2009149364A2 (en) 2008-06-06 2009-12-10 Deluxe Digital Studios, Inc. Methods and systems for use in providing playback of variable length content in a fixed length framework
CN101426179A (zh) 2008-09-22 2009-05-06 深圳华为通信技术有限公司 业务激活的方法和业务提供的方法以及终端设备和服务器
EP2180664A1 (en) 2008-10-22 2010-04-28 Vivendi Mobile Entertainment System and method for accessing multi-media content via a mobile terminal
US8788079B2 (en) 2010-11-09 2014-07-22 Vmware, Inc. Monitoring audio fidelity and audio-video synchronization
US8463108B2 (en) * 2009-01-06 2013-06-11 Microsoft Corporation Client-side ad insertion during trick mode playback
CN102792291B (zh) 2009-08-17 2015-11-25 阿卡麦科技公司 基于http的流分发的方法和系统
US9203816B2 (en) 2009-09-04 2015-12-01 Echostar Technologies L.L.C. Controlling access to copies of media content by a client device
US20110096828A1 (en) 2009-09-22 2011-04-28 Qualcomm Incorporated Enhanced block-request streaming using scalable encoding
US8473558B2 (en) 2009-09-22 2013-06-25 Thwapr, Inc. Progressive registration for mobile media sharing
US10264029B2 (en) 2009-10-30 2019-04-16 Time Warner Cable Enterprises Llc Methods and apparatus for packetized content delivery over a content delivery network
US8930991B2 (en) 2009-11-19 2015-01-06 Gregory Philpott System and method for delivering content to mobile devices
US8539535B2 (en) * 2009-11-30 2013-09-17 Time Warner Cable Enterprises Llc Methods and apparatus for supporting VOD requests in a system with hierarchical content stores
CA2782825C (en) 2009-12-04 2016-04-26 Divx, Llc Elementary bitstream cryptographic material transport systems and methods
US9038116B1 (en) 2009-12-28 2015-05-19 Akamai Technologies, Inc. Method and system for recording streams
US20110296048A1 (en) 2009-12-28 2011-12-01 Akamai Technologies, Inc. Method and system for stream handling using an intermediate format
DK2526671T3 (en) 2010-01-18 2017-02-27 ERICSSON TELEFON AB L M (publ) METHODS AND DEVICES FOR HTTP MEDIA FLOW DISTRIBUTION
US20110179185A1 (en) 2010-01-20 2011-07-21 Futurewei Technologies, Inc. System and Method for Adaptive Differentiated Streaming
EP3333741B1 (en) 2010-02-17 2019-07-31 Verimatrix, Inc. Systems and methods for securing content delivered using a playlist
EP2362651A1 (en) 2010-02-19 2011-08-31 Thomson Licensing Multipath delivery for adaptive streaming
EP2360923A1 (en) 2010-02-24 2011-08-24 Thomson Licensing Method for selectively requesting adaptive streaming content and a device implementing the method
US8819116B1 (en) 2010-03-08 2014-08-26 Amazon Technologies, Inc. Providing services using a device capabilities service
EP2375680A1 (en) 2010-04-01 2011-10-12 Thomson Licensing A method for recovering content streamed into chunk
US9043484B2 (en) 2010-04-02 2015-05-26 Disney Enterprises, Inc. Streaming playback and dynamic ad insertion
US9137278B2 (en) 2010-04-08 2015-09-15 Vasona Networks Inc. Managing streaming bandwidth for multiple clients
WO2011153475A1 (en) 2010-06-04 2011-12-08 Skype Ireland Technologies Holdings Limited Server-assisted video conversation
AU2010202741B1 (en) 2010-06-30 2010-12-23 Brightcove Inc. Dynamic chunking for media streaming
US20130080267A1 (en) 2011-09-26 2013-03-28 Unicorn Media, Inc. Single-url content delivery
KR101670850B1 (ko) 2010-07-20 2016-10-31 톰슨 라이센싱 트릭 모드 작동 동안 컨텐츠 표현을 위한 방법
US8782268B2 (en) 2010-07-20 2014-07-15 Microsoft Corporation Dynamic composition of media
US9319448B2 (en) 2010-08-10 2016-04-19 Qualcomm Incorporated Trick modes for network streaming of coded multimedia data
US8677428B2 (en) 2010-08-20 2014-03-18 Disney Enterprises, Inc. System and method for rule based dynamic server side streaming manifest files
JP5400009B2 (ja) 2010-09-27 2014-01-29 ルネサスエレクトロニクス株式会社 トランスコード装置及びトランコード方法並びにプログラム
US8736700B2 (en) 2010-09-30 2014-05-27 Apple Inc. Techniques for synchronizing audio and video data in an image signal processing system
KR101175014B1 (ko) 2010-10-18 2012-08-17 에스비리모티브 주식회사 이차 전지
WO2012059376A1 (en) 2010-11-02 2012-05-10 Telefonaktiebolaget L M Ericsson (Publ) Methods and devices for media description delivery
US9264750B2 (en) 2010-12-23 2016-02-16 Verizon Patent And Licensing Inc. Advertising insertion for playback of video streams on user devices
US8914534B2 (en) 2011-01-05 2014-12-16 Sonic Ip, Inc. Systems and methods for adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
EP2509073A1 (en) 2011-04-07 2012-10-10 EVS International (Swiss) Sàrl Time-stretching of an audio signal
US8849950B2 (en) 2011-04-07 2014-09-30 Qualcomm Incorporated Network streaming of video data using byte range requests
US9646141B2 (en) 2011-06-22 2017-05-09 Netflix, Inc. Fast start of streaming digital media playback with deferred license retrieval
BR112013032846A2 (pt) 2011-06-28 2017-02-21 Ericsson Telefon Ab L M técnica para gerenciar o tráfego de mídia de transmissão em uma entidade de rede
US8832297B2 (en) 2011-06-29 2014-09-09 Sonic Ip, Inc. Systems and methods for performing multiphase adaptive bitrate streaming
US20130007200A1 (en) 2011-06-30 2013-01-03 Divx, Llc Systems and methods for determining available bandwidth and performing initial stream selection when commencing streaming using hypertext transfer protocol
CN103650451B (zh) 2011-07-07 2016-10-19 瑞典爱立信有限公司 网络容量优化的自适应http流播
US9887852B2 (en) 2011-08-11 2018-02-06 Intel Corporation Methods for switching between a MBMS download and an HTTP-based delivery of DASH formatted content over an IMS network
US8787570B2 (en) * 2011-08-31 2014-07-22 Sonic Ip, Inc. Systems and methods for automatically genenrating top level index files
US20130141643A1 (en) 2011-12-06 2013-06-06 Doug Carson & Associates, Inc. Audio-Video Frame Synchronization in a Multimedia Stream
JP2013126184A (ja) * 2011-12-15 2013-06-24 Sharp Corp コンテンツ再生装置、その制御方法および制御プログラム、並びにコンテンツ表示制御装置
EP2611051B1 (en) * 2011-12-29 2014-06-04 Thomson Licensing Method for synchronizing media services
JP5879169B2 (ja) 2012-03-26 2016-03-08 日本放送協会 字幕同期再生装置およびそのプログラム
US20130336379A1 (en) 2012-06-13 2013-12-19 Divx, Llc System and Methods for Encoding Live Multimedia Content with Synchronized Resampled Audio Data
US9762955B2 (en) * 2012-11-16 2017-09-12 At&T Mobility Ii Llc Substituting alternative media for presentation during variable speed operation
US9317188B2 (en) 2013-03-15 2016-04-19 Arris Enterprises, Inc. Devices and methods for providing navigation images associated with adaptive bit rate video content
US9100687B2 (en) * 2013-05-31 2015-08-04 Sonic Ip, Inc. Playback synchronization across playback devices
US9888333B2 (en) 2013-11-11 2018-02-06 Google Technology Holdings LLC Three-dimensional audio rendering techniques
US9407858B2 (en) 2014-01-20 2016-08-02 Custom Solutions Group, LLC Voiceover system and method
EP2963892A1 (en) * 2014-06-30 2016-01-06 Thomson Licensing Method and apparatus for transmission and reception of media data
US9923942B2 (en) * 2014-08-29 2018-03-20 The Nielsen Company (Us), Llc Using messaging associated with adaptive bitrate streaming to perform media monitoring for mobile platforms
US10264269B2 (en) * 2014-10-13 2019-04-16 Apple Inc. Metadata hints to support best effort decoding for green MPEG applications
US9516291B2 (en) * 2014-12-01 2016-12-06 The Board Of Trustees Of The Leland Stanford Junior University Television systems incorporating separate A/V processing systems and television displays
US10034035B2 (en) * 2014-12-10 2018-07-24 DISH Technologies L.L.C. Methods, devices and systems for audiovisual synchronization with multiple output devices
US10231001B2 (en) 2016-05-24 2019-03-12 Divx, Llc Systems and methods for providing audio content during trick-play playback

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7432940B2 (en) * 2001-10-12 2008-10-07 Canon Kabushiki Kaisha Interactive animation of sprites in a video production
CN1784737A (zh) * 2003-05-10 2006-06-07 三星电子株式会社 多媒体数据再现设备、音频数据接收方法及其音频数据结构
US20060093320A1 (en) * 2004-10-29 2006-05-04 Hallberg Bryan S Operation modes for a personal video recorder using dynamically generated time stamps
KR20070096406A (ko) * 2006-03-24 2007-10-02 엘지전자 주식회사 디지털 멀티미디어 파일의 변속 재생 제어방법
CN101106724A (zh) * 2006-07-12 2008-01-16 联发科技股份有限公司 将视频数据及音频数据同步的方法及系统
CN101106723A (zh) * 2007-07-10 2008-01-16 中国传媒大学 一种快速播放多媒体信息的系统和方法
CN101662689A (zh) * 2008-08-25 2010-03-03 华为技术有限公司 交互电视频道切换方法及系统、音视频流发送方法及装置
CN101674486A (zh) * 2009-09-29 2010-03-17 深圳市融创天下科技发展有限公司 一种流媒体音视频同步方法及系统
US8655156B2 (en) * 2010-03-02 2014-02-18 Cisco Technology, Inc. Auxiliary audio transmission for preserving synchronized playout with paced-down video
US8640181B1 (en) * 2010-09-15 2014-01-28 Mlb Advanced Media, L.P. Synchronous and multi-sourced audio and video broadcast
WO2012094171A1 (en) * 2011-01-05 2012-07-12 Divx, Llc. Adaptive bitrate streaming of media stored in matroska container files using hypertext transfer protocol
CN103053170A (zh) * 2011-02-14 2013-04-17 艾科星先进科技公司 用以在串流重放期间提供特技播放的系统和方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10701417B2 (en) 2016-05-24 2020-06-30 Divx, Llc Systems and methods for providing audio content during trick-play playback
US11044502B2 (en) 2016-05-24 2021-06-22 Divx, Llc Systems and methods for providing audio content during trick-play playback
US11546643B2 (en) 2016-05-24 2023-01-03 Divx, Llc Systems and methods for providing audio content during trick-play playback
CN112637659A (zh) * 2020-04-15 2021-04-09 西安诺瓦星云科技股份有限公司 媒体音频播放方法、装置和系统
CN112637659B (zh) * 2020-04-15 2023-03-14 西安诺瓦星云科技股份有限公司 媒体音频播放方法、装置和系统
CN115398924A (zh) * 2021-01-06 2022-11-25 腾讯美国有限责任公司 用于媒体流传输的方法和设备

Also Published As

Publication number Publication date
US10231001B2 (en) 2019-03-12
US11546643B2 (en) 2023-01-03
US20170347136A1 (en) 2017-11-30
US10701417B2 (en) 2020-06-30
CN109937448B (zh) 2021-02-09
US11044502B2 (en) 2021-06-22
JP7078697B2 (ja) 2022-05-31
JP2021040342A (ja) 2021-03-11
JP2019517219A (ja) 2019-06-20
KR20190021250A (ko) 2019-03-05
EP3465460A1 (en) 2019-04-10
WO2017205028A1 (en) 2017-11-30
ES2949432T3 (es) 2023-09-28
US20220046296A1 (en) 2022-02-10
EP3465460B1 (en) 2023-06-14
US20190208239A1 (en) 2019-07-04
KR102054654B1 (ko) 2019-12-11
US20200351530A1 (en) 2020-11-05
EP3465460A4 (en) 2019-10-30

Similar Documents

Publication Publication Date Title
CN109937448A (zh) 用于在特技播放回放期间提供音频内容的系统和方法
JP7096292B2 (ja) トリックプレイモードにおいて可変速度を提供するためのシステムおよび方法
KR102190364B1 (ko) 비디오 콘텐트를 인코딩하기 위한 시스템 및 방법
JP6081541B2 (ja) データ伝送方法及び装置
CN104871551B (zh) 自适应比特率视频内容传递中特技播放禁用的实施
KR101837687B1 (ko) 콘텐트의 품질을 결정하는 복수의 인자에 기초한 적응적인 스트리밍 방법 및 장치
JP5748765B2 (ja) メインコンテンツに他のコンテンツを挿入して動作するストリーミング方法及び装置
US20120272281A1 (en) Method and apparatus for transmitting media data, and method and apparatus for receving media data
KR20110105710A (ko) 복수의 챕터를 포함하는 콘텐트를 적응적으로 스트리밍하는 방법 및 장치
CN110073341A (zh) 用于数字视频流传输的自适应缓冲的系统和方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant