CN101803335A - 用于组合媒体数据的系统和方法 - Google Patents

用于组合媒体数据的系统和方法 Download PDF

Info

Publication number
CN101803335A
CN101803335A CN200880107442A CN200880107442A CN101803335A CN 101803335 A CN101803335 A CN 101803335A CN 200880107442 A CN200880107442 A CN 200880107442A CN 200880107442 A CN200880107442 A CN 200880107442A CN 101803335 A CN101803335 A CN 101803335A
Authority
CN
China
Prior art keywords
specific medium
medium data
data flow
data file
remote source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN200880107442A
Other languages
English (en)
Other versions
CN101803335B (zh
Inventor
M·博伊克
J·阿亚斯
G·赖特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
RealNetworks Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by RealNetworks Inc filed Critical RealNetworks Inc
Publication of CN101803335A publication Critical patent/CN101803335A/zh
Application granted granted Critical
Publication of CN101803335B publication Critical patent/CN101803335B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/70—Media network packetisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

一种用于处理本地存储的特定媒体数据文件部分以生成第一标准化打包流的方法和计算机程序产品。处理来自远程源的特定媒体数据流以生成第二标准化打包流，使用丢包容忍拼接算法将所述第一标准化打包流的至少一部分与所述第二标准化打包流的至少一部分组合以生成经损失补偿的媒体数据流。

Description

用于组合媒体数据的系统和方法
相关申请
本申请要求2007年7月27日提交的美国申请序号11/829,672的优先权。
技术领域
本公开涉及媒体数据，以及更具体而言，涉及将来自多个源的媒体数据组合。
背景技术
可以使用各种方法来实现电子媒体数据(例如音乐、视频、电影、以及电视节目)的分发。例如，可以将整个媒体数据文件从媒体数据服务器传输到客户端电子设备。可替换地，可以在媒体数据服务器与客户端电子设备之间建立媒体数据流。
遗憾的是，每种方法都有它自己的缺点。具体而言，对于其中将文件传输到客户端电子设备的系统而言，常常需要在开始呈现媒体数据文件之前传输整个文件。此外，对于其中在媒体数据服务器与客户端电子设备之间建立媒体数据流的系统而言，可能需要大量时间(例如＞10秒)来建立与媒体数据服务器的连接，常常导致不太理想的用户体验。
发明内容
在第一实施方式中，一种方法包括处理本地存储的特定媒体数据文件部分，以生成第一标准化打包流。处理来自远程源的特定媒体数据流，以生成第二标准化打包流。使用丢包容忍拼接算法将第一标准化打包流的至少一部分与第二标准化打包流的至少一部分组合，以生成经损失补偿的媒体数据流。
可以包括以下特征中的一个或多个。可以在客户端电子设备上呈现所述经损失补偿的媒体数据流。所述客户端电子设备可以选自由以下各项组成的组：个人计算机；膝上型计算机；笔记本计算机；个人媒体设备；个人数字助理；数据使能蜂窝式电话；电视；电缆箱；因特网收音机；以及专用网络设备。
可以以第一位速率对所述本地存储的特定媒体数据文件部分进行采样。可以以第二位速率对所述来自远程源的特定媒体数据流进行采样。所述第一位速率可以小于所述第二位速率。
可以使用联网协议从远程源获得所述本地存储的特定媒体数据文件部分。所述联网协议可以选自由以下各项组成的组：多媒体消息服务(MMS)协议；超文本传输协议(HTTP)；FLUTE协议；以及简易信息聚合(RSS)协议。
可以使用联网协议从远程源获得所述来自远程源的特定媒体数据流。所述联网协议可以选自由以下各项组成的组：实时流协议(RTSP)；实时传输协议(RTP)；以及用户数据报协议(UDP)。
处理本地存储的特定媒体数据文件部分以生成第一标准化打包流可以包括：解析所述本地存储的特定媒体数据文件部分以生成第一标准化打包流。处理来自远程源的特定媒体数据流以生成第二标准化打包流可以包括：解析所述来自远程源的特定媒体数据流以生成第二标准化打包流。
所述本地存储的特定媒体数据文件部分可以包括元数据。所述元数据可以定义所述来自远程源的特定媒体数据流的位置。所述经损失补偿的媒体数据流可以包括经A/V损失补偿的媒体数据流。
在另一实施方式中，一种计算机程序产品存在于具有存储在上面的多个指令的计算机可读介质上。当被处理器执行时，所述指令促使所述处理器执行操作，该操作包括处理本地存储的特定媒体数据文件部分，以生成第一标准化打包流。处理来自远程源的特定媒体数据流以生成第二标准化打包流。使用丢包容忍拼接算法将所述第一标准化打包流的至少一部分和所述第二标准化打包流的至少一部分组合，以生成经损失补偿的媒体数据流。
可以包括以下特征中的一个或多个。可以在客户端电子设备上呈现所述经损失补偿的媒体数据流。所述客户端电子设备可以选自由以下各项组成的组：个人计算机；膝上型计算机；笔记本计算机；个人媒体设备；个人数字助理；数据使能蜂窝式电话；电视；电缆箱；因特网收音机；以及专用网络设备。
可以以第一位速率对所述本地存储的特定媒体数据文件部分进行采样。可以以第二位速率对所述来自远程源的特定媒体数据流进行采样。所述第一位速率可以小于所述第二位速率。
可以使用联网协议从远程源获得所述本地存储的特定媒体数据文件部分。所述联网协议可以选自由以下各项组成的组：多媒体消息服务(MMS)协议；超文本传输协议(HTTP)；FLUTE协议；以及简易信息聚合(RSS)协议。
可以使用联网协议从远程源获得所述来自远程源的特定媒体数据流。所述联网协议可以选自由以下各项组成的组：实时流协议(RTSP)；实时传输协议(RTP)；以及用户数据报协议(UDP)。
处理本地存储的特定媒体数据文件部分以生成第一标准化打包流可以包括：解析所述本地存储的特定媒体数据文件部分，以生成第一标准化打包流。处理来自远程源的特定媒体数据流以生成第二标准化打包流可以包括：解析所述来自远程源的特定媒体数据流，以生成第二标准化打包流。
所述本地存储的特定媒体数据文件部分可以包括元数据。所述元数据可以定义所述来自远程源的特定媒体数据流的位置。所述经损失补偿的媒体数据流可以包括经A/V损失补偿的媒体数据流。
下面在附图和说明书中阐述一种或多种实施方式的细节。通过说明书、图、以及权利要求，其它特征和优点将变得显而易见。
附图说明
图1是在耦合到分布式计算网络的客户端电子设备上执行的媒体数据处理的示意图。
图2是图1的客户端电子设备的等距视图；
图3是图1的客户端电子设备的示意图；
图4是图1的媒体数据处理的流程图；以及
图5是图1的媒体数据处理的一部分的示意图。
相同的附图标记在各种图中指示相同的元件。
具体实施方式
参照图1，示出了媒体数据处理10。如下文将更详细地讨论的那样，媒体数据处理10可以从媒体分发系统16接收多个媒体数据文件部分12和特定媒体数据流14。媒体数据处理10可以处理特定媒体数据文件部分(选自所述多个媒体数据文件部分12)和特定媒体数据流14，以生成第一和第二标准化打包流，可以使用丢包容忍拼接算法将所述第一和第二标准化打包流组合，以生成经损失补偿的媒体数据流。
多个媒体数据文件部分12和/或特定媒体数据流14的示例可以包括但不限于：可以使用已知压缩技术来压缩的数字编码音频和/或视频媒体数据。此类压缩技术的示例可以包括但不限于MPEG-1、MPEG-2、MPEG-4、H.263、H.264、高级音频编码、及由例如国际标准组织和运动图像专家组发布的其它技术。
媒体分发系统16可以向多个用户(例如用户18、20、22、24)提供媒体数据(例如采取多个媒体数据文件部分12和/或特定媒体数据流14的形式)。媒体分发系统16的示例可以包括但不限于由华盛顿州西雅图市的RealNetworks公司提供的Rhapsodytm服务。
媒体分发系统16可以是存在于连接到网络28(例如因特网)的服务器计算机26上并由服务器计算机26执行的服务器应用程序。服务器计算机26可以是运行网络操作系统的web服务器，所述操作系统的示例可以包括但不限于Microsoft Windows XP Servertm、NovellNetwaretm、或Redhat Linuxtm。服务器计算机26的示例可以包括但不限于：个人计算机、一个服务器计算机、以及多个服务器计算机。例如，服务器计算机26可以包括用于分发多个特定媒体数据文件部分12的远程分发服务器计算机(未示出)和用于提供特定媒体数据流14的点播媒体服务器(未示出)。
服务器计算机26还可以执行web服务器应用程序，其示例可以包括但不限于Microsoft IIStm、Novell Webservertm、或ApacheWebservertm，其允许经由网络28来对服务器计算机26进行HTTP(即超文本传输协议)访问。网络28可以连接到一个或多个二次网络(例如网络30)，诸如：例如局域网；广域网；或内部网。
可以由结合到服务器计算机26中的一个或多个处理器(未示出)及一个或多个存储器体系结构(未示出)来执行媒体分发系统16的指令集和子程序，该指令集和子程序可以存储在耦合到服务器计算机26的存储设备32上。另外，可以将可从媒体分发系统16获得的多个特定媒体数据文件部分12和/或特定媒体数据流14存储在例如耦合到服务器计算机26的存储设备32上。存储设备32可以包括但不限于硬盘驱动器、磁带驱动器、光驱、RAID阵列、随机存取存储器(RAM)、或只读存储器(ROM)。
用户18、20、22、24可以通过例如网络28和/或二次网络30来访问媒体分发系统16。此外，如用虚线34所示，服务器计算机26(即执行媒体分发系统16的计算机)可以通过二次网络32连接到网络28。
可以通过各种客户端电子设备来访问媒体分发系统16，所述客户端电子设备的示例可以包括但不限于：例如个人媒体设备36；个人媒体设备38、个人数字助理40；数据使能蜂窝式电话42；个人计算机(未示出)；膝上型计算机(未示出)；笔记本计算机(未示出)；电视(未示出)；电缆箱(未示出)；因特网收音机(未示出)；或专用网络设备(例如Rokutm Soundbridge M500、M1000和M2000；未示出)。
客户端电子设备(例如个人媒体设备36；个人媒体设备38、个人数字助理40；数据使能蜂窝式电话42)可以直接访问或者可以间接访问(例如通过客户端计算机)媒体分发系统16。例如，用户18、22、24被示为通过个人媒体设备36、个人数字助理40、以及数据使能蜂窝式电话42(分别)直接访问媒体分发系统16。相反，用户20被示为通过个人媒体设备38经由客户端计算机44来间接地访问媒体分发系统16。
客户端电子设备(例如个人媒体设备36；个人媒体设备38、个人数字助理40；数据使能蜂窝式电话42)可以被无线地耦合或硬线连接到网络28、30(并因此连接到媒体分发系统16)。
例如，个人媒体设备38被示为被硬线连接到客户端计算机44，客户端计算机44被示为经由硬线网络连接直接耦合到网络28。客户端计算机44可以执行允许例如用户20经由网络28(或网络30)访问并配置媒体分发系统16的客户端侧媒体管理器46(其示例可以包括但不限于可从华盛顿州雷蒙德市的微软公司获得的Microsoft InternetExplorertm、可从华盛顿州西雅图市的RealNetworks公司获得的Rhapsodytm客户端和RealPlayertm客户端、以及专用接口)。客户端计算机44可以执行操作系统，操作系统的示例可以包括但不限于Microsoft Windows XPtm和Redhat Linuxtm。
可以由结合到客户端计算机44中的一个或多个处理器(未示出)和一个或多个存储器体系结构(未示出)来执行可以被存储在耦合到客户端计算机44的存储设备48上的客户端侧媒体管理器46的指令集和子程序。存储设备48可以包括但不限于硬盘驱动器、磁带驱动器、光驱、RAID阵列、随机存取存储器(RAM)、只读存储器(ROM)、紧凑式闪存(CF)存储设备、安全数字(SD)存储设备、以及记忆棒存储设备。
如上文所讨论的，客户端电子设备可以无线地耦合到网络30、32(并因此耦合到媒体分发系统16)。例如，个人媒体设备36被示为经由在被示为直接耦合到网络28的无线接入点(即WAP)52与个人媒体设备36之间建立的无线通信信道50无线地耦合到网络28。WAP 52可以是例如IEEE 802.11a、802.11b、802.11g、Wi-Fi、和/或能够建立个人媒体设备36与WAP 52之间的通信信道50的蓝牙设备。
如本领域中所已知的那样，IEEE 802.11x规范可以使用具有用于路径共享的冲突避免的载波感应多路访问(即CSMA/CA)和以太网协议。各种802.11x规范可以使用例如相移键控(即PSK)调制或补码键控(即CCK)调制。如本领域中所已知的那样，蓝牙是允许例如使用短程无线连接来将移动电话、计算机、以及个人数字助理互连的电信行业规范。
另外，个人数字助理40被示为经由蜂窝式/网络桥接器54(其被示为直接耦合到网络28)无线地耦合到网络28；并且数据使能蜂窝式电话42被示为经由蜂窝式/网络桥接器56(其被示为直接耦合到网络30)无线地耦合到网络30。
客户端电子设备：
如上所讨论的，客户端电子设备的示例可以包括但不限于个人媒体设备36、38、个人数字助理40、以及数据使能蜂窝式电话42。因此，虽然以下公开针对个人媒体设备38，但应理解的是，以下公开可以同样地应用于任何客户端电子设备(包括个人媒体设备36、个人数字助理40、蜂窝式电话42、电视(未示出)；电缆箱(未示出)；因特网收音机(未示出)；以及专用网络设备(未示出))。
还参照图2，个人媒体设备38可以经由底座100连接到例如客户端计算机44。通常，个人媒体设备38包括将个人媒体设备38耦合到底座100的总线接口(下文将更详细地讨论)。底座100可以(用电缆102)耦合到例如包括在客户端计算机44内的通用串行总线(即USB)端口、串行端口、或IEEE 1394(即火线)端口。例如，包括在个人媒体设备38内的总线接口可以是USB接口，且底座100可以充当USB集线器(即，允许个人媒体设备38与底座100的“热”耦合和解耦的即插即用接口)。
客户端计算机44可以充当个人媒体设备38的因特网网关。例如，通过使用例如通用即插即用协议(即UPnP)，个人媒体设备38可以使用客户端计算机44经由网络28(和网络30)来访问媒体分发系统16，并获得多个特定媒体数据文件部分12和/或特定媒体数据流14。具体而言，在从个人媒体设备38接收到对媒体分发系统16的请求后，客户端计算机44(充当代表个人媒体设备38的因特网客户端)可以请求来自服务器计算机26(即执行媒体分发系统16的计算机)的适当网页/服务。当所请求的网页/服务被返回到客户端计算机44时，客户端计算机44可以使返回的网页/服务与原始请求(由个人媒体设备38发出)关联，且可以将该网页/服务转送至个人媒体设备38。因此，客户端计算机44可以充当用于将个人媒体设备38耦合到服务器计算机26并因此耦合到媒体分发系统16的管道。
还参照图3，示出了个人媒体设备38的示意图。个人媒体设备38可以包括微处理器150(例如由加利福尼亚州圣克拉拉市的英特尔公司制造的ARMtm微处理器)、非易失性存储器(例如只读存储器152)、以及易失性存储器(例如随机存取存储器154)；其中的每一个可以经由一个或多个数据/系统总线156、158互连。例如，个人媒体设备38还可以包括用于例如向可移除地接合例如头戴受话器组件164、远程扬声器组件166、或耳塞组件168的音频插孔162提供模拟音频信号的音频子系统160。可替换地，个人媒体设备38可以被配置为包括一个或多个内部音频扬声器(未示出)。
个人媒体设备38可以执行设备应用程序58(其示例可以包括但不限于Rhapsodytm客户端、RealPlayertm客户端、或专用接口)。个人媒体设备38可以运行操作系统，操作系统的示例可以包括但不限于Microsoft Windows CEtm、Redhat Linuxtm、Palm OStm、或设备专用(即自定义)操作系统。
可以由结合到个人媒体设备38中的一个或多个处理器(未示出)和一个或多个存储器体系结构(未示出)来执行设备应用程序58的指令集和子程序，该指令集和子程序可以存储在耦合到个人媒体设备38的存储设备60上。例如，存储设备60可以是例如硬盘驱动器、光驱、随机存取存储器(RAM)、只读存储器(ROM)、CF(即紧凑式闪存)卡、SD(即安全数字)卡、SmartMedia卡、记忆棒、以及多媒体卡。
媒体数据处理10可以是设备应用程序58的一部分和/或被结合在设备应用程序58内。可替换地，媒体数据处理10可以是与设备应用程序58相结合地操作的功能(例如插件)。因此，可以由结合到个人媒体设备38中的一个或多个处理器(未示出)和一个或多个存储器体系结构(未示出)来执行可以被存储在耦合到个人媒体设备38的存储设备60上的媒体数据处理10的指令集和子程序。
个人媒体设备38还可以包括用户接口170和显示子系统172。用户接口170可以从包括在个人媒体设备38内的各种输入设备接收数据信号，所述各种输入设备的示例可以包括(但不限于)：例如后跳开关104；前跳开关106；播放/暂停开关108；菜单开关110；选择器开关112；以及滚轮组件114。显示子系统172可以向包括在个人媒体设备38内的显示面板116提供显示信号。显示面板116可以是例如有源矩阵液晶显示面板、无源矩阵液晶显示面板、或发光二极管显示面板。
音频子系统160、用户接口170、以及显示子系统172中的每个可以经由一个或多个数据/系统总线174、176、178(分别)与微处理器150耦合。
如上文所讨论的，个人媒体设备38可以包括用于经由底座100与例如客户端计算机44对接的总线接口180。另外且如上文所讨论的，个人媒体设备38可以经由例如在个人媒体设备38与例如WAP 52之间建立的无线通信信道50无线地耦合到网络28(和/或其它个人媒体设备)。因此，个人媒体设备38可以包括用于将个人媒体设备38无线地耦合到网络28(或网络30)和/或其它个人媒体设备的无线接口182。无线接口182可以耦合到用于与例如WAP 52进行RF通信的天线组件184和/或用于与例如第二个人媒体设备进行红外通信的IR(即红外)通信组件186。此外且如上文所讨论的，个人媒体设备38可以包括用于存储设备应用程序58和/或媒体数据处理10的指令集和子程序的存储设备60。另外，可以使用存储设备60来暂时或永久性地存储从媒体分发系统16下载的媒体数据(例如多个媒体数据文件部分12和/或特定媒体数据流14)。
存储设备60、总线接口180、以及无线接口182中的每个可以经由一个或多个数据/系统总线188、190、192(分别)与微处理器150耦合。如上文所讨论的，媒体分发系统16可以向用户18、20、22、24分发媒体数据，使得所分发的媒体数据可以采取多个特定媒体数据文件部分12和/或特定媒体数据流14的形式。
媒体数据处理
如上文所讨论的，媒体数据处理10可以从媒体分发系统16接收特定媒体数据文件部分(其被包括在多个媒体数据文件部分12内)和特定媒体数据流14。媒体数据处理10可以处理特定媒体数据文件部分(选自多个媒体数据文件部分12)和特定媒体数据流14以生成第一和第二标准化打包流，可以使用丢包容忍拼接算法将所述第一和第二标准化打包流组合，以生成经损失补偿的媒体数据流。
还参照图4，媒体数据处理10可以在客户端电子设备(例如个人媒体设备36)上从远程分发服务器计算机(例如服务器计算机26)下载并接收200多个媒体数据文件部分12。
多个媒体数据文件部分12可以被存储在耦合到个人媒体设备36的存储设备62上。例如，存储设备62可以是例如硬盘驱动器、光驱、随机存取存储器(RAM)、只读存储器(ROM)、CF(即紧凑式闪存)卡、SD(即安全数字)卡、SmartMedia卡、记忆棒、以及多媒体卡。
如上文所讨论的，客户端电子设备的示例可以包括但不限于个人媒体设备36、38、个人数字助理40、以及数据使能蜂窝式电话42。因此，虽然以下公开针对个人媒体设备36，但应理解的是，以下公开可以同样地应用于任何客户端电子设备(包括个人媒体设备38、个人数字助理40、蜂窝式电话42、电视(未示出)；电缆箱(未示出)；因特网收音机(未示出)；以及专用网络设备(未示出))。
多个媒体数据文件部分12中的每一个可以是较大媒体数据文件的初始按时间发生顺序排列的部分。例如，每个媒体数据文件部分12可以是媒体数据文件的前三十秒。各种类型的媒体数据文件的示例可以包括但不限于音乐曲目(例如MP3文件)、音乐视频、磁带书本音轨、故事长片、电视节目、新闻剪辑、新闻广播、个人视频(例如youtubetm视频)、商业演示、动画、幻灯片、体育广播、体育剪辑、训练视频、以及播客。
可以由个人媒体设备36在低带宽使用时间范围期间从远程分发服务器计算机(例如服务器计算机36)接收200多个媒体数据文件部分12。例如，假设个人媒体设备36连续地经由无线通信信道50无线地耦合到网络28。由于网络流量(及因此的带宽使用)趋向于在午夜较低，所以个人媒体设备36可以在午夜从服务器计算机36接收200多个媒体数据文件部分12。因此，如果用户18订阅新闻网站(例如www.foxnews.com；www.cnn.com；www.reuters.com)，则与该网站相关的远程分发服务器计算机可以将十个媒体数据文件部分(即多个媒体数据文件部分12)推到个人媒体设备36。这十个媒体数据文件部分可以表示前十个新情节中的每一个的前三十秒(即最初的按时间顺序排列的部分)，所述每个新情节可以是3:00长。当用户18在例如上午7:00访问个人媒体设备36时，媒体数据处理10可以向用户16展现(在显示屏116上)在个人媒体设备36上从服务器计算机26接收到200的十个媒体数据文件部分中的每一个的图标。
媒体数据处理10可以允许用户18选择202用于在个人媒体设备26上呈现的特定媒体数据文件部分(选自多个媒体数据文件部分12)。例如，用户16可以利用滚轮组件114来查看(即向上和向下)菜单194(即，其分条列举多个媒体数据文件部分12)，且可以使用例如选择器开关112(从多个媒体数据文件部分12中)选择202特定的媒体数据文件部分196。
可以使用联网协议从远程分发服务器计算机(例如服务器计算机26)获得特定的媒体数据文件部分196，所述联网协议选自由以下各项组成的组：多媒体消息服务(MMS)协议；超文本传输协议(HTTP)；FLUTE协议；以及简易信息聚合(RSS)协议。
可以使每个可用媒体数据文件部分(例如表示为在显示面板116内分条列举的“Sports Wrap-up”、“This Week in Politics”、“ThisWeekend′s Weather”、“Fine Dining in NYC”、“Coping with TuitionCosts”、“Five Alarm Blaze Hits SoHo”、“NFL Announces NewRules”、“Campaign Season Opens”、“FDA Bans Additive”、“CheapAirfares Hit JFK”)与特定媒体数据流(例如特定媒体数据流14)相关联。例如，多个媒体数据文件部分12中的每一个可以包括定义相关的特定媒体数据流的位置的元数据。例如，所述元数据可以定义指向特定媒体数据流的统一资源定位器(URL)。
如上文所讨论的，多个媒体数据文件部分12中的每一个可以是较大媒体数据文件的最初的按时间顺序排列的部分。此外，与特定媒体数据文件部分(例如特定媒体数据文件部分196)相关的特定媒体数据流(例如特定媒体数据流14)可以是较大媒体数据文件的一连串的其余按时间顺序排列的部分。例如，如果特定媒体数据文件部分196是题为“Fine Dining in NYC”的三分钟新闻报道的前三十秒，则特定媒体数据流14可以是“Fine Dining in NYC”新闻报道的其余两分半钟。因此，通过将“Fine Dining in NYC”新闻报道的前三十秒(如包括在特定媒体数据文件部分196内)与同一报道的最后两分半钟(如包括在特定媒体数据流14内)组合，可以使个人媒体设备36可获得整个三分钟的报道。
在用户选择202特定媒体数据文件部分时，媒体数据处理10可以从点播媒体服务器计算机(例如服务器计算机26)获得204与该特定媒体数据文件部分相关的特定媒体数据流，且可以呈现特定媒体数据文件部分196的至少一部分。例如，当用户18选择“Fine Dining in NYC”(其描述存储在存储设备62上的特定媒体数据文件部分196)时，媒体数据处理10可以获得204与特定媒体数据文件部分196相关的特定媒体数据流(例如特定媒体数据流14)，且可以呈现特定媒体数据文件部分196的至少一部分。因此且作为上述示例的继续，个人媒体设备36可以访问服务器计算机26(经由例如无线通信信道50、网络28和/或网络30)，并获得204特定媒体数据流14。
可以使用联网协议从服务器计算机26获得204特定媒体数据流14，所述联网协议可以选自由以下各项组成的组：实时流协议(RTSP)；实时传输协议(RTP)；以及用户数据报协议(UDP)。
虽然上述远程分发服务器计算机和上述点播媒体服务器计算机被描述为是单个服务器计算机(例如服务器计算机26)，但这仅仅出于说明性的目的，且并不意图作为对本公开的限制。具体而言且如上文所讨论的，服务器计算机26可以包括但不限于：个人计算机、服务器计算机、以及多个服务器计算机。因此，上述远程分发服务器计算机和上述点播媒体服务器计算机可以是单独的服务器计算机。另外/替换地，上述远程分发服务器计算机和上述点播媒体服务器计算机之一或两者中的每个可以是多个服务器计算机。
可以以第一位速率对特定媒体数据文件部分196采样，且可以以第二位速率对特定媒体数据流14采样。而且，所述第一位速率可以小于所述第二位速率，以允许更高效地从例如服务器计算机26向个人媒体设备36传输多个特定媒体数据文件部分12。例如，特定媒体数据文件部分196可以具有64千位/秒(kps)的位速率，而特定媒体数据流14可以具有128kps的位速率。因此，通过在特定媒体数据文件部分196上使用64kps位速率，特定媒体数据文件部分196的尺寸减小50％(相对于在特定媒体数据流14上使用的128kps比特率。因此，特定媒体数据文件部分196可以被更快地下载到个人媒体设备36上。另外/替换地，特定媒体数据流14可以以多个位速率(从服务器计算机26)获得，因此允许网络带宽适应。
可以按时间顺序确定特定媒体数据文件部分(例如特定媒体数据文件部分196)的尺寸，以便特定媒体数据文件部分的呈现时间可以至少与获得相关特定媒体数据流(例如特定媒体数据流14)所需的预期时间一样长。例如，如果个人媒体设备36访问服务器计算机26(经由无线通信信道50和网络28和/或网络30)所需的平均时间是十秒，其范围是从五秒(即最快时间)至二十秒(即最慢时间)，则按时间顺序排列的长度可以被配置为三十秒。因此，通过配置特定媒体数据文件部分196从而使其长度为三十秒，特定媒体数据文件部分196足够长，从而使得如果在媒体数据处理10开始呈现特定媒体数据文件处理195之后不久，媒体数据处理10启动获得204特定媒体数据流14的处理，则可以在特定媒体数据文件部分196的呈现时间内获得204特定媒体数据流14。
可以由媒体数据处理10将特定媒体数据文件部分196的至少一部分和特定媒体数据流14的至少一部分组合并呈现206。还参照图5，当呈现206特定媒体数据文件部分196和特定媒体数据流14时，媒体数据处理10可以处理208特定媒体数据文件部分196，以生成第一标准化打包流250。媒体数据处理10还可以处理210特定媒体数据流14，以生成第二标准化打包流252。第一标准化打包流250和第二标准化打包流252可以具有尺寸相同的数据分组(例如1千字节)。
当处理208特定媒体数据文件部分196以生成第一标准化打包流250时，媒体数据处理10可以解析特定媒体数据文件部分196，并将特定媒体数据文件部分196拆分成多个数据分组，因此生成第一标准化打包流250。此外，当处理210特定媒体数据流14以生成第二标准化打包流252时，媒体数据处理10可以解析216特定媒体数据流14，以将特定媒体数据流14拆分成多个数据分组，因此生成第二标准化打包流252。
一旦生成第一和第二标准化打包流250、252，媒体数据处理10可以使用丢包容忍的拼接算法将第一标准化打包流250的至少一部分与第二标准化打包流252的至少一部分组合212，以生成经损失补偿的媒体数据流254。经损失补偿的媒体数据流254的示例可以包括但不限于新闻报道“Fine Dining in NYC”的经A/V损失补偿的媒体数据流。
出于本公开的目的，将包丢失容忍算法定义为即使系列内的一个或多个数据分组缺失、也允许连续的一系列数据分组重组和呈现的任何算法。例如，出于说明的目的，假设当(分别)处理208、210新闻报道“Fine Dining in NYC”的特定媒体数据文件部分196和特定媒体数据流14时，结果得到的报道的长度应为2000分组。然而，假设分组P53、P128和P724缺失。因此，使用上述丢包容忍拼接算法，媒体数据处理10可以将来自1997个分组(即分组P1～P52、P54～P127、P129～P723、以及P725～P2000)的新闻报道“Fine Dining in NYC”组合。因此，当由媒体数据处理10在个人媒体设备36上呈现新闻报道“Fine Dining in NYC”时，可以跳过三个分组，且一个或多个伪象(artifacts)可以出现在呈现的新闻报道“Fine Dining in NYC”内。
当呈现206特定媒体数据文件部分196和特定媒体数据流14时，媒体数据处理10可以在客户端电子设备36上呈现218经损失补偿的媒体数据流。
继续其中特定媒体数据文件部分196是“Fine Dining in NYC”新闻报道的前三十秒、且特定媒体数据流14是该报道的最后两分半钟的上述示例，一旦获得204了特定媒体数据流14，可以将特定媒体数据文件部分196与特定媒体数据流14组合，以形成题为“Fine Dining inNYC”的整个三分钟新闻报道。将特定媒体数据文件部分196与特定媒体数据流14组合的点可以根据实现媒体数据处理10的方式而改变。例如且如上文所讨论的，特定媒体数据文件部分196的位速率可以低于特定媒体数据流14的位速率。因此，媒体数据处理10可以被实现为尽快地从特定媒体数据文件部分196切换到特定媒体数据流14，因此提高新闻报道“Fine Dining in NYC”的总体质量。可替换地，媒体数据处理10可以被配置为在切换到特定媒体数据流14之前完全呈现特定媒体数据文件部分196。
已经描述了若干实施方式。然而，应理解的是，可以进行各种修改。因此，其它实施方式在以下权利要求的范围内。

Claims (26)

1.一种方法，包括：
处理本地存储的特定媒体数据文件部分，以生成第一标准化打包流；
处理来自远程源的特定媒体数据流，以生成第二标准化打包流；以及
使用丢包容忍拼接算法将所述第一标准化打包流的至少一部分与所述第二标准化打包流的至少一部分组合，以生成经损失补偿的媒体数据流。
2.权利要求1的方法，还包括：
在客户端电子设备上呈现所述经损失补偿的媒体数据流。
3.权利要求2的方法，其中，所述客户端电子设备选自由以下各项组成的组：个人计算机；膝上型计算机；笔记本计算机；个人媒体设备；个人数字助理；数据使能蜂窝式电话；电视；电缆箱；因特网收音机；以及专用网络设备。
4.权利要求1的方法，其中，以第一位速率对所述本地存储的特定媒体数据文件部分进行采样，并以第二位速率对所述来自远程源的特定媒体数据流进行采样，其中，所述第一位速率小于所述第二位速率。
5.权利要求1的方法，其中，使用联网协议从远程源获得所述本地存储的特定媒体数据文件部分。
6.权利要求5的方法，其中，所述联网协议选自由以下各项组成的组：
多媒体消息服务(MMS)协议；
超文本传输协议(HTTP)；
FLUTE协议；以及
简易信息聚合(RSS)协议。
7.权利要求1的方法，其中，使用联网协议从远程源获得所述来自远程源的特定媒体数据流。
8.权利要求7的方法，其中，所述联网协议选自由以下各项组成的组：
实时流协议(RTSP)；
实时传输协议(RTP)；以及
用户数据报协议(UDP)。
9.权利要求1的方法，其中，处理所述本地存储的特定媒体数据文件部分以生成第一标准化打包流包括：
解析所述本地存储的特定媒体数据文件部分，以生成第一标准化打包流。
10.权利要求1的方法，其中，处理所述来自远程源的特定媒体数据流以生成第二标准化打包流包括：
解析所述来自远程源的特定媒体数据流，以生成第二标准化打包流。
11.权利要求1的方法，其中，所述本地存储的特定媒体数据文件部分包括元数据。
12.权利要求11的方法，其中，所述元数据定义所述来自远程源的特定媒体数据流的位置。
13.权利要求1的方法，其中，所述经损失补偿的媒体数据流包括经A/V损失补偿的媒体数据流。
14.一种存在于具有存储在其上的多个指令的计算机可读介质上的计算机程序产品，所述指令在被处理器执行时促使该处理器执行包括以下各项的操作：
处理本地存储的特定媒体数据文件部分，以生成第一标准化打包流；
处理来自远程源的特定媒体数据流，以生成第二标准化打包流；以及
使用丢包容忍拼接算法将所述第一标准化打包流的至少一部分与所述第二标准化打包流的至少一部分组合，以生成经损失补偿的媒体数据流。
15.权利要求14的计算机程序产品，还包括指令以用于：
在客户端电子设备上呈现所述经损失补偿的媒体数据流。
16.权利要求15的计算机程序产品，其中，所述客户端电子设备选自由以下各项组成的组：个人计算机；膝上型计算机；笔记本计算机；个人媒体设备；个人数字助理；数据使能蜂窝式电话；电视；电缆箱；因特网收音机；以及专用网络设备。
17.权利要求14的计算机程序产品，其中，以第一位速率对所述本地存储的特定媒体数据文件部分采样，并以第二位速率对所述来自远程源的特定媒体数据流采样，其中，所述第一位速率小于所述第二位速率。
18.权利要求14的计算机程序产品，其中，使用联网协议从远程源获得所述本地存储的特定媒体数据文件部分。
19.权利要求18的计算机程序产品，其中，所述联网协议选自由以下各项组成的组：
多媒体消息服务(MMS)协议；
超文本传输协议(HTTP)；
FLUTE协议；以及
简易信息聚合(RSS)协议。
20.权利要求14的计算机程序产品，其中，使用联网协议从远程源获得所述来自远程源的特定媒体数据流。
21.权利要求20的计算机程序产品，其中，所述联网协议选自由以下各项组成的组：
实时流协议(RTSP)；
实时传输协议(RTP)；以及
用户数据报协议(UDP)。
22.权利要求14的计算机程序产品，其中，用于处理所述本地存储的特定媒体数据文件部分以生成第一标准化打包流的指令包括：用于解析所述本地存储的特定媒体数据文件部分以生成第一标准化打包流的指令。
23.权利要求14的计算机程序产品，其中，用于处理所述来自远程源的特定媒体数据流以生成第二标准化打包流的指令包括：用于解析所述来自远程源的特定媒体数据流以生成第二标准化打包流的指令。
24.权利要求14的计算机程序产品，其中，所述本地存储的特定媒体数据文件部分包括元数据。
25.权利要求24的计算机程序产品，其中，所述元数据定义所述来自远程源的特定媒体数据流的位置。
26.权利要求14的计算机程序产品，其中，所述经损失补偿的媒体数据流包括经A/V损失补偿的媒体数据流。
CN2008801074429A 2007-07-27 2008-07-23 用于组合媒体数据的系统和方法 Expired - Fee Related CN101803335B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US11/829,672 2007-07-27
US11/829672 2007-07-27
US11/829,672 US8027365B2 (en) 2007-07-27 2007-07-27 System and method for combining media data
PCT/US2008/070861 WO2009018048A1 (en) 2007-07-27 2008-07-23 System and method for combining media data

Publications (2)

Publication Number Publication Date
CN101803335A true CN101803335A (zh) 2010-08-11
CN101803335B CN101803335B (zh) 2013-11-20

Family

ID=40295299

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2008801074429A Expired - Fee Related CN101803335B (zh) 2007-07-27 2008-07-23 用于组合媒体数据的系统和方法

Country Status (7)

Country Link
US (1) US8027365B2 (zh)
EP (1) EP2177058A4 (zh)
JP (1) JP5114563B2 (zh)
KR (1) KR101239357B1 (zh)
CN (1) CN101803335B (zh)
BR (1) BRPI0814131A2 (zh)
WO (1) WO2009018048A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103888783A (zh) * 2013-06-03 2014-06-25 北京朝歌软件有限公司 多媒体数据传输控制方法、处理装置、服务器及播放系统
CN104365109A (zh) * 2012-04-12 2015-02-18 谷歌公司 促进实时视频流送的系统、设备和方法
CN113094564A (zh) * 2020-01-09 2021-07-09 浙江吉利汽车研究院有限公司 一种数据处理方法和装置

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8180029B2 (en) * 2007-06-28 2012-05-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8706907B2 (en) * 2007-10-19 2014-04-22 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8111713B2 (en) 2007-10-19 2012-02-07 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8321581B2 (en) * 2007-10-19 2012-11-27 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8090867B2 (en) * 2007-10-19 2012-01-03 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8391312B2 (en) * 2007-10-19 2013-03-05 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8682336B2 (en) * 2007-10-19 2014-03-25 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8699678B2 (en) * 2007-10-19 2014-04-15 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8145780B2 (en) * 2007-10-19 2012-03-27 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8001261B2 (en) * 2007-10-19 2011-08-16 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
US8380874B2 (en) * 2007-10-19 2013-02-19 Voxer Ip Llc Telecommunication and multimedia management method and apparatus
WO2010138776A2 (en) * 2009-05-27 2010-12-02 Spot411 Technologies, Inc. Audio-based synchronization to media
US8489774B2 (en) * 2009-05-27 2013-07-16 Spot411 Technologies, Inc. Synchronized delivery of interactive content
US8560726B2 (en) * 2011-06-03 2013-10-15 International Business Machines Corporation Overloading processing units in a distributed environment
US20140351871A1 (en) * 2013-05-22 2014-11-27 Microsoft Corporation Live media processing and streaming service
US10423132B2 (en) * 2013-09-27 2019-09-24 Siemens Industry, Inc. Gaming approach for energy efficient building control

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5694546A (en) * 1994-05-31 1997-12-02 Reisman; Richard R. System for automatic unattended electronic information transport between a server and a client by a vendor provided transport software with a manifest list
US5940776A (en) * 1996-04-12 1999-08-17 Baron Services, Inc. Automated real-time weather graphics generating systems and methods
US6480541B1 (en) 1996-11-27 2002-11-12 Realnetworks, Inc. Method and apparatus for providing scalable pre-compressed digital video with reduced quantization based artifacts
US6792449B2 (en) * 2001-06-28 2004-09-14 Microsoft Corporation Startup methods and apparatuses for use in streaming content
JP2003087766A (ja) * 2001-09-12 2003-03-20 Pioneer Electronic Corp 加入者端末への視聴情報提供装置
US20060075070A1 (en) * 2002-04-02 2006-04-06 Patrick Merissert-Coffinieres Development and deployment of mobile and desktop applications within a flexible markup-based distributed architecture
AU2003230868A1 (en) * 2002-04-10 2003-10-27 Akamai Technologies, Inc. Method and system for enhancing live stream delivery quality using prebursting
CN1509104A (zh) * 2002-12-17 2004-06-30 �ʼҷ����ֵ��ӹɷ����޹�˾ 多媒体信息服务的方法与系统
FR2851112B1 (fr) * 2003-02-07 2005-06-03 Medialive Dispositif securise pour la diffusion, l'enregistrement et la visualisation a la demande des oeuvres audiovisuelles au format de type mpeg-2ts
CN1324840C (zh) * 2003-06-18 2007-07-04 中兴通讯股份有限公司 一种网络处理器对数据流量进行限速的方法
JP4193669B2 (ja) * 2003-10-14 2008-12-10 ソニー株式会社 通話システム及び画像情報送受信方法
WO2006050751A1 (en) * 2004-11-13 2006-05-18 Telefonaktiebolaget Lm Ericsson (Publ) Provision of a multimedia message
EP1705842B1 (en) * 2005-03-24 2015-10-21 Fujitsu Mobile Communications Limited Apparatus for receiving packet stream
US7907212B2 (en) * 2006-03-20 2011-03-15 Vixs Systems, Inc. Multiple path audio video synchronization
US9386327B2 (en) * 2006-05-24 2016-07-05 Time Warner Cable Enterprises Llc Secondary content insertion apparatus and methods

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104365109A (zh) * 2012-04-12 2015-02-18 谷歌公司 促进实时视频流送的系统、设备和方法
US10205970B2 (en) 2012-04-12 2019-02-12 Google Llc System, apparatus and method to facilitate live video streaming
CN103888783A (zh) * 2013-06-03 2014-06-25 北京朝歌软件有限公司 多媒体数据传输控制方法、处理装置、服务器及播放系统
CN113094564A (zh) * 2020-01-09 2021-07-09 浙江吉利汽车研究院有限公司 一种数据处理方法和装置

Also Published As

Publication number Publication date
EP2177058A4 (en) 2013-07-24
JP5114563B2 (ja) 2013-01-09
EP2177058A1 (en) 2010-04-21
KR20100053575A (ko) 2010-05-20
WO2009018048A1 (en) 2009-02-05
BRPI0814131A2 (pt) 2015-02-03
US20090028188A1 (en) 2009-01-29
JP2010534887A (ja) 2010-11-11
KR101239357B1 (ko) 2013-03-25
US8027365B2 (en) 2011-09-27
CN101803335B (zh) 2013-11-20

Similar Documents

Publication Publication Date Title
CN101802777B (zh) 用于分发媒体数据的系统和方法
CN101803335B (zh) 用于组合媒体数据的系统和方法
CN103916679B (zh) 一种用于提供视频信息的方法、设备与系统
Kesavan et al. An investigation on adaptive HTTP media streaming Quality-of-Experience (QoE) and agility using cloud media services
CN102075528B (zh) 一种播放多种封装格式的网络多媒体文件的方法与设备
EP2957103B1 (en) Cloud-based video delivery
US20160366198A1 (en) Http live streaming (hls) video client synchronization
US9356985B2 (en) Streaming video to cellular phones
KR20100025517A (ko) 클라이언트 전자 장치를 구성하기 위한 시스템 및 방법
CN105025391A (zh) 视频播放方法和装置
CN103826139A (zh) Cdn系统、观看服务器以及流媒体数据传输方法
CN117596232A (zh) 流媒体快速启动方法、装置和系统
CN102404616A (zh) 基于数字电视网络进行数据云推送的方法及系统
CN112243158B (zh) 媒体文件处理方法、装置、计算机可读介质及电子设备
US11196646B2 (en) Unique user session tracking in adaptive bitrate video delivery
CN101184210A (zh) 家庭网络中流媒体数据的传输方法
Pathan Cloud‐Based Content Delivery and Streaming
KR102079339B1 (ko) 클라우드 시스템상의 컨텐츠를 디엘엔에이로 연결된 디바이스로 전달하는 전자 장치 및 방법
US11057669B2 (en) Device and method for managing priorities for the downloading of multimedia contents
Park et al. Quality of experience provisioned mobile streaming protocol for the hyper-connected Internet of Things devices over the heterogeneous wireless access networks
EP3292698A1 (en) Http live streaming (hls) video client synchronization
Yousefi et al. Evaluation ofthe CDN architecture for Live Streaming through the improvement of QOS Case study: Islamic Republic of Iran Broadcasting

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: INTEL CORP .

Free format text: FORMER OWNER: REALNETWORKS INC.

Effective date: 20130506

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20130506

Address after: American California

Applicant after: Intel Corporation

Address before: Washington State

Applicant before: Realnetworks Inc.

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20131120

Termination date: 20200723