CN102687518A - 用于流媒体文件内表示的描述和定时的装置及方法 - Google Patents

用于流媒体文件内表示的描述和定时的装置及方法 Download PDF

Info

Publication number
CN102687518A
CN102687518A CN2010800560770A CN201080056077A CN102687518A CN 102687518 A CN102687518 A CN 102687518A CN 2010800560770 A CN2010800560770 A CN 2010800560770A CN 201080056077 A CN201080056077 A CN 201080056077A CN 102687518 A CN102687518 A CN 102687518A
Authority
CN
China
Prior art keywords
media segment
time
client device
media
expectation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2010800560770A
Other languages
English (en)
Other versions
CN102687518B (zh
Inventor
I·布阿兹兹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nokia Technologies Oy
Original Assignee
Nokia Oyj
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nokia Oyj filed Critical Nokia Oyj
Publication of CN102687518A publication Critical patent/CN102687518A/zh
Application granted granted Critical
Publication of CN102687518B publication Critical patent/CN102687518B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

提供了用于接收和呈现或播放媒体内容表示以及用于使能跨多个表示进行时间同步和随机查找的装置、方法和计算机程序产品。客户端设备可以访问将所述多个表示的媒体内容的播放时间间隔与对应媒体段相关联的适当时间映射片段,以识别与当前表示或另一选定表示内的期望时点对应的适当媒体段。可以创建所述时间映射片段并将其预加载到媒体内容服务器上,并且所述媒体内容服务器可以在接收到来自客户端设备的请求时或作为媒体段的一部分而将时间映射片段(多个)发送到所述客户端设备。在其他情况下,所述媒体内容服务器可以例如在接收到来自客户端设备的请求时动态地创建时间映射片段。

Description

用于流媒体文件内表示的描述和定时的装置及方法
技术领域
本发明的实施例一般地涉及通信技术,更具体地说,涉及用于媒体文件成流的系统、方法和装置。
背景技术
随着通信技术的发展,流媒体对于普通客户而言变得越来越实际,并且其收费也为普通客户所能承受。同时,网络带宽变大,网络访问量增加,标准协议和格式的使用以及因特网商业化也导致了对多媒体内容需求的增加。网络的扩展和联网计算设备的演进提供了充足的处理能力、存储空间和网络带宽,从而能够传输和播放日益复杂的数字媒体文件。因此,因特网电视和视频共享受到普遍欢迎。
发明内容
因此,根据本发明的各实施例,提供了用于接收和呈现或播放媒体内容表示(representation)以及用于使能跨多个表示进行时间同步和随机查找的装置、方法和计算机程序产品。具体而言,可以定义将多个表示所关联的内容的播放或呈现时间间隔映射到对应媒体段(segment)的分段表。当查找或在表示之间切换时,客户端设备可以因此访问适当的时间映射片段(fragment),以识别与当前表示或另一选定表示内的期望时点对应的适当媒体段。
在一个示例性实施例中,提供一种用于接收和呈现或播放媒体内容表示以及用于使能跨多个表示进行时间同步和随机查找的方法和计算机程序产品。根据所述方法和计算机程序产品,客户端设备呈现选定媒体内容文件的第一表示的第一媒体段。所述客户端设备确定期望时点和待呈现的期望第二表示。识别和取回第二媒体段,其中所述第二媒体段包含呈现时间等于所述第一表示或所述期望第二表示中的期望呈现时点或等于期望表示中的当前时点的一个或多个媒体样本。
在另一示例性实施例中,提供一种用于声明和发信号通知媒体内容表示以及用于使能跨多个表示进行时间同步和随机查找的方法和计算机程序产品。根据所述方法和计算机程序产品,诸如媒体内容服务器之类的装置响应于对媒体内容的请求而将多媒体呈现描述发送到客户端设备。第一表示的第一媒体段被发送到所述客户端设备,并创建与至少一个媒体段相关的时间映射信息。所述时间映射信息被所述装置发送给所述客户端设备。所述时间映射信息可以随对应媒体段一起发送到所述客户端设备,也可以响应于所述客户端设备的至少一个请求而发送到所述客户端设备。所述多媒体呈现描述可以包括所述客户端设备用于取回或请求所述时间映射信息的统一资源定位器(URL)模式。
在另一示例性实施例中,提供一种包括处理器和存储计算机代码指令的存储器的装置,所述计算机代码指令当被所述处理器执行时,使所述装置呈现选定媒体内容文件的第一表示的第一段。所述存储器和计算机代码指令与所述处理器一起还使所述装置确定期望时点或待呈现的期望第二表示。使所述装置识别第二媒体段,其中所述第二媒体段包含呈现时间等于所述第一表示或所述期望第二表示中的期望呈现时点或等于期望表示中的当前时点的一个或多个媒体样本。所述存储器和计算机代码指令与所述处理器一起还使所述装置取回所述第二媒体段。
在另一示例性实施例中,提供一种包括处理器和存储计算机代码指令的存储器的装置,所述计算机代码指令当被所述处理器执行时,使所述装置响应于对媒体内容的请求而将多媒体呈现描述发送到客户端设备。所述存储器和计算机代码指令与所述处理器一起还使所述装置将第一表示的第一媒体段发送到所述客户端设备,并创建与至少一个媒体段相关的时间映射信息。还使所述装置将所述时间映射信息发送到所述客户端设备。所述时间映射信息可以作为时间映射片段随对应媒体段一起发送到所述客户端设备,也可以响应于所述客户端设备的至少一个请求而发送到所述客户端设备。所述多媒体呈现描述可以包括所述客户端设备用于取回或请求所述时间映射信息的统一资源定位器(URL)模式。
在另一示例性实施例中,提供一种包括被配置为呈现至少一个媒体段的客户端设备和被配置为通过网络将时间映射信息传送到所述客户端设备的媒体内容服务器的系统。所述客户端设备可以呈现选定媒体内容文件的第一表示的第一媒体段。所述客户端设备然后确定期望时点或待呈现的期望第二表示。所述媒体内容服务器可以将时间映射信息随对应媒体段一起发送到所述客户端设备,也可以响应于所述客户端设备的至少一个请求而发送到所述客户端设备。所述客户端设备然后可以根据所述时间映射信息识别第二媒体段,并可以从所述媒体内容服务器请求所述第二媒体段。所述客户端设备可以使用所述媒体内容服务器发送到所述客户端设备的统一资源定位器(URL)模式来请求所述时间映射信息或所述第二媒体段。
根据本发明的实施例的将所述时间映射信息分段为时间映射片段具有多种好处。它允许更快地开始呈现媒体段,因为在开始播放之前,不需要预下载大型索引文件。此外,所述客户端设备能够访问所需的数据部分而不必下载和存储数据的大型片段。
附图说明
概述本发明的实施例之后,现在参考附图,所述附图不一定按比例绘制,这些附图是:
图1示出根据本发明的一个示例性实施例的一种使用传输协议促进媒体文件成流的系统;
图2是根据本发明的一个示例性实施例的移动终端的示意性方块图;
图3是根据本发明的一个示例性实施例的包括多个媒体轨道和内容表示的媒体内容文件的一部分;
图4示出根据本发明的一个示例性实施例的描述元素的表示;
图5示出均包括媒体段的第一表示和第二表示以及时间映射片段,所述时间映射片段包括将来自所述第一表示的媒体段映射到所述第二表示中的媒体段的信息;
图6示出根据本发明的一个示例性实施例的寻址时间映射片段的元素的表示;
图7示出根据本发明的一个示例性实施例的如何定义“stif”盒;
图8示出根据本发明的示例性实施例的与用于访问时间映射信息以及跨多个表示取回对应媒体段的示例性方法一致的流程图;
图9示出根据本发明的示例性实施例的与用于访问时间映射信息以及取回特定表示内的对应媒体段的示例性方法一致的流程图;以及
图10示出时间映射片段的XML架构(Schema)的表示。
具体实施方式
现在参考附图更全面地描述本发明的某些实施例,在所述附图中示出本发明的部分而非全部实施例。实际上,应该理解,除了在此示出和描述的实施例之外,还可通过多种不同的形式体现本发明的其他许多可能的实施例。本发明的实施例不应被视为限于在此描述的实施例;相反,提供在此列出的实施例是为了使本披露满足适应的法律要求。在所有附图中,相同的标号指示相同的元素。
如在此使用的,“示例性”仅表示一个实例,因此表示本发明的一个实例实施例并且不应被视为在任何方面缩小本发明实施例的范围或精神。此外,应该理解,使用超文本传输协议(HTTP)作为应用层传输协议的一个实例。本发明的实例实施例包括使用其他应用层传输协议来使媒体文件成流。
如在此使用的,术语“电路”指(a)仅硬件电路实现(例如,模拟电路和/或数字电路实现);(b)电路和包括存储在一个或多个计算机可读存储器上的软件和/或固件指令的计算机程序产品(多个)的组合,所述电路和计算机程序产品协同工作以使装置执行在此描述的一种或多种功能;以及(c)诸如微处理器(多个)或微处理器(多个)的一部分之类的电路,所述电路需要软件或固件才能执行操作,即使所述软件或固件物理上不存在。此“电路”定义适用于在此对该术语的所有使用,其中包括任何权利要求中对该术语的所有使用。作为进一步的实例,如在此使用的,术语“电路”还包括含有一个或多个处理器和/或处理器的一部分(多部分)以及附属软件和/或固件的实现。作为另一实例,如在此使用的,术语“电路”还例如包括用于移动电话的基带集成电路或应用处理器集成电路,或者服务器、蜂窝网络设备、其他网络设备和/或其他计算设备中的类似集成电路。
媒体内容一般可通过成流或通过HTTP成流从服务器流向客户端。在成流中,内容通常直接发送到计算机或其他客户端设备,无需将媒体文件保存到客户端设备的硬盘或其他存储器中。在HTTP成流中,内容文件通常被逐步下载并保存到客户端设备的硬盘或其他存储器中,然后从此位置播放内容。因此,客户端可以在下载完成之前开始播放媒体。
实时成流协议(RTSP)是娱乐和通信系统中用于控制实时应用中的流媒体服务器的网络控制协议。RTSP用于建立和控制端点间的媒体会话。例如,媒体服务器的客户端可以发出类似VCR的命令(例如“播放”和“暂停”)以促进实时控制来自服务器的媒体文件的播放。许多RTSP服务器使用实时传输协议(RTP)递送媒体流。
但是,在若干需要多媒体递送的应用中,HTTP成流正在取代常规基于RTSP/RTP的成流。尽管HTTP并非旨在用于递送实时媒体,但是HTTP提供的明显优势使其对于实时应用具有很大吸引力。除了其他优势之外,HTTP还非常易于设置和部署、能够穿越防火墙和其他网络节点,并且通过允许高效数据分布的非常健壮的基础结构(例如,HTTP高速缓存)广泛部署。
HTTP通常与传输控制协议(TCP)结合使用,TCP是通常在通信节点之间提供可靠、有序的字节流递送的传输层协议。除其他管理任务外,TCP控制媒体段大小、流量控制、数据交换速率和网络业务拥塞,以通过有保证的有序递送来传送字节流,从一个节点到另一节点不会出现任何字节丢失。TCP通过使用重传防止错误,即多次重传丢失的TCP数据报(跨网络传递的数据分组),直到该报文被正确地递送或者整个连接中止。使用TCP数据报的序列号检验是否按正确顺序递送。因此,TCP工作在面向连接的模式中并依赖于对发现数据报丢失的确认。此外,TCP利用拥塞控制和流量控制算法,该算法允许发送方使其传输速率自动适应可用带宽和接收方的能力。
HTTP是最初为了递送超链接文本文档而开发的应用层协议;但是随着时间的推移,已开始使用HTTP递送其他类型的文件。HTTP使用请求/应答模型从Web服务器取回远程资源。根据此模型,客户端设备通常在端口80上建立到服务器的TCP连接,并且与服务器交换HTTP消息。HTTP消息通常包括标头部分和可选的正文部分。标头部分是一系列HTTP标头字段,每个字段以回车符/换行符结束。HTTP消息标头与HTTP消息正文以空行分隔。以人类可读文本格式提供HTTP标头字段。统一资源定位器(URL)用于识别和定位将由HTTP客户端取回的资源。URL包括协议标识符、完全限定域名、所请求资源的路径以及(可选的)查询字符串。
当使用HTTP递送实时媒体(例如,音频/视频内容)时,通过逐步成流(例如,以逐步下载模式递送内容)取回内容。使用此方法,客户端设备通过常规文件下载取回媒体文件。客户端设备然后在短暂的启动延迟之后开始播放所接收的文件。HTTP逐步成流对于HTTP服务器可以是透明的并且由客户端设备控制。
能够逐步下载播放内容的设备在从Web服务器下载数字媒体文件时,依赖于位于文件标头中的元数据和文件的本地缓冲器来确定如何播放内容。在指定数据量变得可用于客户端设备时开始播放媒体。该指定缓冲量由内容制作者通过编码器设置嵌入文件,并且由媒体播放器设定的其他缓冲设置增强。
因此,为了实现逐步下载,有必要执行媒体准备步骤。一般而言,媒体文件需要转换为可使客户端尽快开始播放的格式。基于ISO的媒体文件格式(ISOFF)适合于逐步下载,它允许内容提供商将元数据信息放在文件开头。这允许接收方首先接收所有元数据,然后开始接收媒体数据。接着使用先前接收的元数据立即播放所接收的媒体数据;但是由于元数据信息量很大,这通常会导致初始播放时间很长。
自适应HTTP成流使得客户端能够根据用户偏好和带宽可用性改变流内容。在自适应HTTP成流中,内容编码在多个表示中,并且客户端能够在媒体段边界处在不同的表示之间切换。但这会产生一个问题,即,一个表示中的媒体段一般与另一表示中的媒体段并不时间对齐。因此,当从一个表示切换到另一表示时,客户端设备可能无法确定在何处定位新表示中的包含对应于先前表示中同一时点的媒体内容的媒体段。此外,由于缺乏媒体段的时间映射信息,在同一表示内查找特定内容部分变得异常复杂,并且客户端设备需要执行搜索来定位包含期望媒体内容的特定媒体段。
根据本发明的一个示例性实施例,提供了用于声明和发信号通知表示以及用于使能跨多个表示进行时间同步和随机查找的方法和装置。具体而言,可以定义提供将一个表示的媒体段与其他表示的对应媒体段进行关联的时间映射信息的分段表。当查找或在表示之间切换时,客户端设备可以因此访问时间映射片段以识别与当前表示或新表示中的期望时点对应的适当媒体段,如下面更详细的描述。
图1示出根据本发明的一个实例实施例的使用诸如超文本传输协议(HTTP)之类的应用层传输协议使媒体文件成流的系统100的方块图。在一个实例实施例中,系统100包括客户端设备102和媒体内容服务器104。客户端设备102和媒体内容服务器104被配置为通过网络108进行通信。网络108例如包括一个或多个有线网络、一个或多个无线网络或它们的某些组合。网络108可以包括网络运营商运营的公共陆地移动网络(PLMN)。在此方面,网络108例如包括如根据3GPP标准提供蜂窝网络接入的运营商网络。网络108可以补充地或备选地包括因特网。
客户端设备102可以包括任何被配置为通过网络108从媒体内容服务器104访问媒体文件的设备。例如,客户端设备102可以包括服务器、桌面计算机、膝上型计算机、移动终端、移动计算机、移动电话、移动通信设备、游戏设备、数码相机/摄像机、音频/视频播放器、电视装置、无电线接收机、数字视频录像机、定位设备,它们的任意组合和/或类似装置。
在一个实例实施例中,客户端设备102体现为如图2所示的移动终端。在此方面,图2示出根据本发明的实施例的代表客户端设备102的一个实施例的移动终端10的方块图。但是应该理解,下文描述和示出的移动终端10只是例示可以实现本发明的实施例和/或从中获益的一种类型的客户端设备102,因此不应被视为限制本发明的范围。虽然示出电子设备的若干实施例并作为实例在下文中进行描述,但是诸如移动电话、移动计算机、便携式数字助理(PDA)、寻呼机、膝上型计算机、桌面计算机、游戏设备、电视及其他类型的电子系统之类的其他类型电子设备也可以常用本发明的实施例。
如图所示,移动终端10可以包括与发射机14和接收机16进行通信的天线12(或多个天线12)。所述移动终端还可以包括分别将信号提供给发射机和从接收机接收信号的处理器20。这些信号可以包括依照适用的蜂窝系统的空中接口标准和/或任意数量的不同有线或无线网络技术(包括但不限于无线保真(Wi-Fi)、诸如电气电子工程师学会(IEEE)802.11之类的无线局域网(WLAN)技术和/或其他技术)的信令信息。此外,这些信号可以包括语音数据、用户生成的数据、用户请求的数据和/或类似数据。在此方面,所述移动终端能够与一种或多种空中接口标准、通信协议、调制类型、访问类型等一起工作。更具体地说,所述移动终端能够根据各种第一代(1G)、第二代(2G)、2.5G和第三代(3G)通信协议、第四代(4G)通信协议和/或类似协议工作。例如,所述移动终端能够根据2G无线通信协议IS-136(时分多址(TDMA))、全球移动通信系统(GSM)、IS-95(码分多址(CDMA))和/或类似协议工作。此外,例如,所述移动终端能够根据2.5G无线通信协议通用分组无线服务(GPRS)、增强型数据速率GSM演进(EDGE)和/或类似协议工作。此外,例如,所述移动终端能够根据诸如通用移动电信系统(UMTS)、码分多址2000(CDMA2000)、宽带码分多址(WCDMA)、时分同步码分多址(TD-SCDMA)和/或类似协议之类的3G无线通信协议工作。所述移动终端另外能够根据诸如长期演进(LTE)或演进型通用陆地无线接入网络(EUTRAN)和/或类似协议之类的3.9G无线通信协议工作。此外,例如,所述移动终端能够根据第四代(4G)无线通信协议和/或类似协议以及将来可能开发的类似无线通信协议工作。
某些窄带高级移动电话系统(NAMPS)以及全接入通信系统(TACS)移动终端也可以从本发明的实施例获益,例如双模或更高模式的电话(例如,数字/模拟或TDMA/CDMA/模拟电话)。此外,移动终端10能够根据无线保真(Wi-Fi)或全球互通微波接入(WiMAX)协议工作。
将理解,处理器20可以包括用于实现移动终端10的音频/视频和逻辑功能的电路。例如,处理器20可以包括数字信号处理器器件、微处理器器件和模拟-数字转换器、数字-模拟转换器和/或其他处理电路。所述移动终端的控制和信号处理功能可以根据这些器件各自的功能在这些器件之间分配。所述处理器另外可以包括内置语音编码器(VC)20a、内置数据调制解调器(DM)20b和/或类似装置。此外,所述处理器可以包括运行一个或多个软件程序的功能,所述软件程序可存储在存储器中。例如,处理器20能够运行诸如Web浏览器之类的连接性程序。所述连接性程序可以允许移动终端10根据诸如无线应用协议(WAP)、超文本传输协议(HTTP)和/或类似协议之类的协议发送和接收Web内容(例如,基于位置的内容)。移动终端10能够使用传输控制协议/网际协议(TCP/IP)跨互联网或其他网络发送和接收Web内容。
移动终端10还可以包括用户接口,其中包括例如耳机或扬声器34、铃声装置22、麦克风26、显示器28、用户输入接口和/或类似元件,这些元件可在操作上与处理器20耦合。尽管未示出,但是所述移动终端可以包括为移动终端的各种相关电路(例如,提供机械振动作为可检测输出的电路)供电的电池。所述用户输入接口可以包括允许所述移动终端接收数据的设备,例如小键盘30、触摸屏(未示出)、游戏杆(未示出)和/或其他输入设备。在包括小键盘的实施例中,小键盘可以包括数字键(0-9)及相关键(#、*)和/或其他用于操作所述移动终端的键。
如图2所示,移动终端10还可以包括一个或多个用于共享和/或获取数据的装置。例如,所述移动终端可以包括短距离射频(RF)收发机和/或询问器64,以便可以根据RF技术与电子设备共享数据和/或从电子设备获取数据。所述移动终端可以包括其他短距离收发机,例如红外线(IR)收发机66、使用BluetoothTM技术联盟开发的BluetoothTM无线技术工作的BluetoothTM(BT)收发机68、无线通用串行总线(USB)收发机70和/或类似收发机。BluetoothTM收发机68能够根据超低功耗BluetoothTM技术(例如,WibreeTM)无线标准工作。在此方面,移动终端10(具体而言,短距离收发机)能够将数据发送到该移动终端附近(例如,10米内)的电子设备和/或从其接收数据。尽管未示出,但是所述移动终端能够根据各种无线联网技术(包括无线保真(Wi-Fi)、诸如IEEE 802.11技术之类的WLAN技术和/或类似技术)向电子设备发送数据和/或从电子设备接收数据。
移动终端10可以包括存储器,例如用户身份模块(SIM)38、可移除用户身份模块(R-URIM)和/或类似存储器,这些存储器可以存储移动用户的相关信息元素。除了SIM之外,所述移动终端还可以包括其他可移除和/或固定存储器。移动终端10可以包括易失性存储器40和/或非易失性存储器42。例如,易失性存储器40可以包括分为动态和/或静态RAM的随机存取存储器(RAM)、片上或片外高速缓冲存储器和/或类似存储器。可以是嵌入式和/或可移除的非易失性存储器42例如可以包括只读存储器、闪存、磁存储设备(例如,硬盘、软盘驱动器、磁带等)、光盘驱动器和/或介质、非易失性随机存取存储器(NVRAM)和/或类似存储器。与易失性存储器40类似,非易失性存储器42可以包括用于临时存储数据的缓存区域。所述存储器可以存储所述移动终端用于执行所述移动终端的功能的一个或多个软件程序、指令、信息片段、数据等。例如,所述存储器可以包括诸如国际移动设备标识(IMEI)码之类的能够唯一地识别移动终端10的标识符。
再次参考图1,在一个实例实施例中,客户端设备102包括用于执行在此描述的各种功能的各种装置,例如,处理器110、存储器112、通信接口114、用户接口116和媒体播放单元118。在此描述的客户端设备102的各种装置例如包括硬件元素(例如,适当编程的处理器、组合逻辑电路和/或类似元素)、包括存储在计算机可读介质(例如,存储器112)上的计算机可读程序指令(例如,软件和/或固件)的计算机程序产品。所述程序指令由诸如处理器110之类的处理设备执行。
处理器110例如可以体现为各种装置,其中包括一个或多个带有附属数字信号处理器(多个)的微处理器、一个或多个不带数字信号处理器的处理器、一个或多个协处理器、一个或多个控制器、处理电路、一个或多个计算机、包括集成电路(例如,专用集成电路(ASIC)或现场可编程门阵列(FPGA))的其他各种处理元件,或它们的某种组合。因此,尽管在图1中示为单个处理器,但是在某些实施例中,处理器110可以包括多个处理器。所述多个处理器可以在操作上相互通信并且可以被共同配置为执行在此描述的媒体客户端设备102的一种或多种功能。在客户端设备102体现为移动终端10的实施例中,处理器110可以体现为处理器20或者包括处理器20。在一个实例实施例中,处理器110被配置为执行存储器112中存储的指令或者可以由处理器110访问所述指令。所述指令当被处理器110执行时,使客户端设备102执行在此描述的客户端设备102的一种或多种功能。因此,无论单独通过硬件操作或软件操作配置,还是通过软件和硬件组合配置,处理器110在经过相应配置之后,均可表示能够执行根据本发明的各实施例的操作的实体。例如,当处理器110体现为ASIC、FPGA或类似元素时,处理器110可以包括用于执行在此描述的一个或多个操作的专门配置的硬件。备选地,作为另一实例,当处理器110体现为指令执行器时,所述指令可以专门配置处理器110以执行在此描述的一个或多个操作。
存储器112可以例如包括易失性存储器和/或非易失性存储器。尽管在图1中示为单个存储器,但是存储器112可以包括多个存储器。存储器112可以包括易失性存储器、非易失性存储器或它们的某种组合。在此方面,存储器112例如可以包括硬盘、随机存取存储器、高速缓冲存储器、闪存、光盘只读存储器(CD-ROM)、数字多功能盘只读存储器(DVD-ROM)、光盘、被配置为存储信息的电路或它们的某种组合。存储器112可以被配置为存储信息、数据、应用、指令或类似元素以使客户端设备102能够执行根据本发明的实施例的各种功能。例如,在至少某些实施例中,存储器112被配置为缓冲输入数据以供处理器110处理。附加地或备选地,在至少某些实施例中,存储器112被配置为存储处理器110执行的程序指令。存储器112可以存储采取静态信息和/或动态信息形式的信息。此存储信息可以被媒体播放单元118在执行其功能时存储和/或使用。
通信接口114可以体现为任何设备或装置,所述设备或装置体现为硬件、包括存储在计算机可读介质(例如,存储器112)上并由处理设备(例如,处理器110)执行的计算机可读程序指令的计算机程序产品,或它们的组合,所述组合被配置为通过网络108从远程设备接收数据和/或将数据发送到远程设备。在至少一个实施例中,通信接口114至少部分地体现为处理器110或者由处理器110控制。在此方面,通信接口114例如可以通过总线与处理器110进行通信。通信接口114例如可以包括天线、发射机、接收机、收发机和/或实现与系统100中的其他实体的通信的支持硬件或软件。通信接口114可以被配置为使用任何可用于系统100中的计算设备之间的通信的协议来接收和/或发送数据。通信接口114例如还可以通过总线与存储器112、用户接口116和/或媒体播放单元118进行通信。
用户接口116可以与处理器110进行通信以接收用户输入指示和/或向用户提供音频、视频、机械或其他输出。因此,用户接口116例如可以包括键盘、鼠标、游戏杆、显示器、触摸屏显示器、麦克风、扬声器和/或其他输入/输出机制。用户接口116可以提供一个接口,其允许用户选择从媒体内容服务器104流向客户端设备102以便在客户端设备102上播放的媒体文件和/或媒体文件表示。在此方面,来自媒体文件的视频可在用户接口116的显示器上显示,并且来自媒体文件的音频可通过用户接口116的扬声器播放。用户接口116例如可以通过总线与存储器112、通信接口114和/或媒体播放单元118进行通信。
媒体播放单元118可以体现为各种装置,例如硬件、包括存储在计算机可读介质(例如,存储器112)上并由处理设备(例如,处理器110)执行的计算机可读程序指令的计算机程序产品,或它们的某种组合,在一个实施例中,媒体播放单元118体现为处理器110或者由处理器110控制。在媒体播放单元118与处理器110分离的实施例中,媒体播放单元118可以与处理器110进行通信。媒体播放单元118还可以通过总线与存储器112、通信接口114和/或用户接口116进行通信。
媒体内容服务器104可以包括一个或多个被配置为将媒体文件提供给客户端设备102的计算设备。在某些实施例中,所述媒体内容服务器可以包括流服务器、内容提供商服务器、因特网服务器或任何其他网络服务器或服务器组合。在一个示例性实施例中,媒体内容服务器104包括用于执行在此描述的各种功能的各种装置,例如处理器120、存储器122、通信接口124、用户接口126和媒体成流单元128。在此描述的媒体内容服务器104的这些装置例如可以实现为硬件元素(例如,适当编程的处理器、组合逻辑电路和/或类似元素)、包括存储在计算机可读介质(例如,存储器122)上的可由适当配置的处理器设备(例如,处理器120)执行的计算机可读程序指令(例如,软件和/或固件)的计算机程序产品,或它们的某种组合。
处理器120例如可以体现为各种装置,其中包括一个或多个带有附属数字信号处理器(多个)的微处理器、一个或多个不带数字信号处理器的处理器、一个或多个协处理器、一个或多个控制器、处理电路、一个或多个计算机、包括集成电路(例如,ASIC(专用集成电路)或FPGA(现场可编程门阵列))的其他各种处理元件,或它们的某种组合。因此,尽管在图1中示为单个处理器,但是在某些实施例中,处理器120还可以包括多个处理器。所述多个处理器可以体现在单个计算设备上或跨多个计算设备分布。所述多个处理器可以在操作上相互通信并且可以被共同配置为执行在此描述的媒体内容服务器104的一种或多种功能。在一个示例性实施例中,处理器120被配置为执行存储器122中存储的指令或者可以由处理器120访问所述指令。这些指令当被处理器120执行时,可使网络实体103执行在此描述的媒体内容服务器104的一种或多种功能。因此,无论单独通过硬件方法或软件方法配置,还是通过软件和硬件组合配置,处理器120在经过相应配置之后,均可表示能够执行根据本发明的各实施例的操作的实体。因此,例如,当处理器120体现为ASIC、FPGA或类似元素时,处理器120可以包括用于执行在此描述的一个或多个操作的专门配置硬件。备选地,作为另一实例,当处理器120体现为指令执行器时,所述指令可以专门配置处理器120以执行在此描述的一个或多个算法和操作。
存储器122可以例如包括易失性存储器和/或非易失性存储器。尽管在图1中示为单个存储器,但是存储器122可以包括多个存储器,所述存储器可以体现在单个计算设备上或跨多个计算设备分布。存储器122可以包括易失性存储器、非易失性存储器或它们的某种组合。在此方面,存储器122例如可以包括硬盘、随机存取存储器、高速缓冲存储器、闪存、光盘只读存储器(CD-ROM)、数字多功能盘只读存储器(DVD-ROM)、光盘、被配置为存储信息的电路或它们的某种组合。存储器122可以被配置为存储信息、数据、应用、指令或类似元素以使媒体内容服务器104能够执行根据本发明的各实施例的各种功能。例如,在至少某些实施例中,存储器122被配置为缓冲输入数据以供处理器120执行。附加地或备选地,在至少某些实施例中,存储器122被配置为存储处理器120执行的程序指令。存储器122可以存储采取静态信息和/或动态信息形式的信息。此存储信息可以被媒体成流单元128在执行其功能期间存储和/或使用。
通信接口124可以体现为任何设备或装置,所述设备或装置体现为硬件、包括存储在计算机可读介质(例如,存储器122)上并由处理设备(例如,处理器120)执行的计算机可读程序指令的计算机程序产品,或它们的组合,所述设备或装置被配置为通过网络108从远程设备接收数据和/或将数据发送到远程设备。在至少一个实施例中,通信接口124至少部分地体现为处理器120或者由处理器120控制。在此方面,通信接口124例如可以通过总线与处理器120进行通信。通信接口124例如可以包括天线、发射机、接收机、收发机和/或实现与系统100中的其他实体的通信的支持硬件或软件。通信接口124可以被配置为使用任何可用于系统100的计算设备之间的通信的协议来接收和/或发送数据。通信接口124例如还可以通过总线与存储器122、用户接口126和/或媒体成流单元128进行通信。
用户接口126可以与处理器120进行通信以接收用户输入的指示和/或向用户提供音频、视频、机械或其他输出。因此,用户接口126例如可以包括键盘、鼠标、游戏杆、显示器、触摸屏显示器、麦克风、扬声器和/或其他输入/输出机制。在媒体内容服务器104体现为一个或多个服务器的实施例中,可以限制或甚至去除用户接口126。用户接口126例如可以通过总线与存储器122、通信接口124和/或媒体成流单元128进行通信。
媒体成流单元128可以体现为各种装置,例如硬件、包括存储在计算机可读介质(例如,存储器122)上并由处理设备(例如,处理器120)执行的计算机可读程序指令的计算机程序产品,或它们的某种组合,在一个实施例中,媒体成流单元128体现为处理器120或者由处理器120控制。在媒体成流单元128与处理器120分离的实施例中,媒体成流单元128可以与处理器120进行通信。媒体成流单元128还可以通过总线与存储器122、通信接口124和/或用户接口126进行通信。
在一个实例实施例中,媒体播放单元118被配置为将对媒体文件的传输协议请求发送到媒体内容服务器104。在一个实例实施例中,所请求的媒体文件包括含有与媒体文件中的媒体数据关联的元数据的媒体文件。在另一实例实施例中,所请求的媒体文件包括符合ISOFF的媒体文件。ISOFF的实例包括3GP媒体文件和运动图像专家组4(MPEG-4)Part 14(MP4)文件。例如,可以响应于经由用户接口116接收的用户输入或请求而发送所述请求。
在某些实施例中,与特定媒体文件关联的元数据例如可以根据下表中列出的ISOFF来构造:
Figure BDA00001749299700161
Figure BDA00001749299700171
表1
在此方面,媒体数据可以包括多个元数据级别的层次结构。每个级别可以包括一个或多个子级,所述子级包括与父级相关的更多具体元数据。例如,表1中的第一级“L0”包括元数据种类ftyp、moov、moof、mfra和mdat。ftyp和madt可以不包括任何子级。moov的第二级“L1”例如可以包括mvhd和trak。trak的第三级“L2”例如包括tkhd、tref和mdia。mdia的第四级“L3”例如可以包括mdhd、hdlr和minf。minf的第五级“L4”可以包括vmhd、smhd和stbl。stbl的第六级“L5”例如可以包括stsd、stts、ctts、stsc、stsz、stco和stss。因此,上表表示元数据块的嵌套式层次结构,其中元数据块的子级通过包括相应父级元数据块的行下面的各行以及包括相应父级元数据块的列右侧的各列示出。因此,moov块的所有子级元数据块在表的包括moov块的行和包括“moof”块(例如,另一父级元数据块,它与moov块位于同一级别上)的行之间的各行中示出。类似地,stbl块的所有子级元数据块在表的包括stbl块的行和包括moof块(它是与stbl块级别相同或级别高于stbl块的第一个块)的行之间的各行中示出。
HTTP成流表示包括一个或多个表示。使用表示允许客户端设备及其用户根据用户偏好和当前连接特性选择适当的内容子集。表示是呈现内容的媒体轨道子集。表示不应包含可相互替代的轨道,因为这会导致不必要的冗余。
可以作为一组媒体段独立访问表示。每个媒体段可通过唯一的统一资源定位器(URL)来寻址。媒体段可以包含一个或多个电影片段,其中电影片段是“moof”和“mdat”盒(box)对,如上面的表1所示。
可以使用递增索引或时间索引为表示的媒体段编制索引。在前一种情况下,为每个媒体段分配一个从1开始的整数索引,1表示第一媒体段,并且对于每个相继媒体段,索引递增1。在时间索引的情况下,可以使用时间索引来为每个媒体段编制索引,所述时间索引指示与媒体段开头中的媒体样本的呈现时间对应的时点。
对于特定表示的每个媒体段,可给出可以包括呈现时间边界的信息集合。呈现时间边界例如可以允许客户端设备定位媒体段内的特定播放时间。还可给出媒体段内电影片段的偏移以允许更准确地访问期望电影片段(例如,使用字节范围)。
在某些实施例中,特定表示的媒体段可具有近似恒定的持续时间,由媒体内容服务器在多媒体呈现描述(下文说明)中将媒体段的平均持续时间通知客户端设备。这种配置有利于在不同表示之间切换以及在一个表示内执行查找,因为客户端设备能够定位包含具有所请求呈现时间的媒体样本的媒体段。一旦位于适当的媒体段内,客户端设备随即能够通过检查表1所示的“mfra”盒来定位准确的媒体样本。
在其他实施例中,内容准备并不维持近似恒定的媒体段持续时间。因此,当媒体段持续时间不恒定或相对较长时,时间映射信息可使能在表示之间进行查找和切换。
记住表1中示出的元数据实例并参考图3,媒体内容表示200可以被定义为来自特定内容文件205的媒体轨道子集。换言之,表示可以被视为客户端可独立使用的最小内容部分,例如,不包含任何可相互替代的轨道的部分。作为一个实例,内容文件205可以包含7个媒体轨道210,其中包括5个视频轨道215和2个音频轨道220。视频轨道215可以是相同视频内容(例如,同一电影)的备选编码。音频轨道220同样可以包括相同内容,例如同一电影的不同语言。表示200然后可以包括一个视频轨道215a和一个音频轨道220b。表示200的其他实例可以包括单个音频轨道、单个视频轨道、单个字幕轨道或音频轨道、视频轨道和/或字幕轨道的组合。备选轨道可以包括不同分辨率的视频(例如,高清或标准)、不同的比特率(定义呈现质量),不同语言的音频、不同语言的字幕等。
如上所述,旨在经由自适应HTTP成流分发的内容通常存在于多个表示中。所述表示允许客户端设备改变内容。例如,对于电影内容,客户端设备能够选择以高清英文音轨方式呈现电影,也可以选择以标清法文音轨方式呈现同一电影。客户端设备通常在播放之初选择适当的表示,但可以在递送和播放期间从一种表示切换到另一表示。此外,客户端设备可以在同一表示内查找特定时点。
表示可以包括指示哪些媒体轨道构成该表示的表示描述。例如,可以为每个媒体轨道210分配在表示描述中使用的媒体轨道ID。媒体轨道ID还可以定义用于构建URL的参数或用于访问特定表示200的媒体段的其他地址。此外,表示描述可以包括表示200的特性指示,例如产生的带宽和/或音频语言和/或字幕语言。图4示出以可扩展标记语言(XML)格式提供的表示描述元素250的一个实例。此外,每个表示200可以通过唯一的表示标识符值来识别。表示标识符可以在URL中使用以允许客户端设备请求特定表示的媒体段,如下面所述。
因此,表示描述可以允许客户端设备102根据用户偏好选择适当的表示。当没有表示描述时,客户端将选择不包含任何备选轨道(指相互替代且不应一起使用的轨道)的轨道子集。例如,如上所述,可为客户端设备提供多个作为替代轨道的音频轨道以便客户端设备仅选择其中一个轨道播放。当媒体内容服务器不推荐或不提供表示时,媒体内容服务器可以允许客户端设备通过选择表示的媒体轨道来创建适当的表示。
转到图5,每个表示200可以被分为由客户端设备102从媒体内容服务器104逐步下载并呈现给用户的媒体段261。通过这种方式,客户端设备不必等待给定表示的所有媒体段261下载完毕便可开始播放,否则会增加用户体验媒体内容的等待时间。例如,将第一表示(图5中的表示1)呈现给用户的客户端设备可以在继续下载媒体段2(1)、3(1)等的同时开始播放媒体段1(1)。
如上所述以及如图5中示意性所示,特定表示200内的不同媒体段261的持续时间可能不同(即,一个媒体段的持续时间长于另一媒体段的持续时间),并且媒体段在不同表示之间也可能未时间对齐。因此,当前位于表示1的时点6秒处的用户例如可能位于媒体段2(1)中,而表示R中的相同时点可能对应于段1(R)。在这种情况下,如果客户端设备要根据向前索引的媒体段从表示1切换到表示R,则客户端设备可能呈现位于时间线上不同时点处的内容,这是因为将访问错误的(即,不对应的)媒体段。这会导致用户错过内容或看到重复的内容,具体取决于当前表示的当前媒体段的持续时间与期望表示的媒体段的持续时间。
因此,除了表示描述(例如,媒体轨道ID、产生的带宽以及表示的其他特性)之外,在某些实施例中,还可以针对每个媒体段261提供时间映射信息。所述时间映射信息可以根据时间线上的时点将一个表示的媒体段与其他表示的对应媒体段进行关联。换言之,所述时间映射信息例如描述表示R的哪个媒体段对应于特定时点处的给定媒体段。换言之,所述时间映射信息提供显示每个表示的时间与媒体段索引之间的关系的映射。
所述时间映射信息可以分为多个时间映射片段265,使得客户端设备无需一次下载全部时间映射信息,而是可以选择性地访问与期望的特定表示和/或特定时点关联的时间映射信息。在某些实施例中,所述时间映射片段包括与给定媒体内容文件的所有表示相关的时间映射信息,如图5所示。在这种情况下,当做出切换表示的决策时,客户端设备可以根据期望表示和期望时点请求相关的时间映射片段。可以创建时间映射片段并将其预加载到媒体内容服务器上,或者媒体内容服务器可以在收到来自客户端设备的请求时创建适当的片段。
例如,一旦从媒体内容服务器或网络上可由客户端设备访问的另一位置取回相关的时间映射片段,客户端设备随即可识别期望表示中在期望时点处的媒体段并定义从媒体内容服务器取回该特定媒体段的请求。因此,使用图5所示的实例,响应于在播放媒体段2(1)期间在时点6处从表示1切换到表示R的决策,客户端设备将取回时间映射片段2、识别表示R中对应于时点6的媒体段(例如,媒体段1(R)),并取回该识别的媒体段。
在其他实施例中,至少一个媒体段可以包括有关该特定媒体段的时间映射片段,例如,可以作为媒体内容本身的一部分递送时间映射信息。例如,如表2所示,可以引入携带时间映射信息的新“盒(box)”。在表2中,对应于时间映射信息的盒标记为“stif”(媒体段定时信息)。“stif”盒可以插入文件中的任意位置,例如,在每个Mth电影片段之前,如表2所示。图7提供如何定义“stif”盒的一个实例280。参考表2和图7,“time_point”因而可以对应于以下电影片段的媒体内容。通过这种方式,客户端设备无需从网络位置取回相关时间映射片段,因为时间映射片段已随下载的媒体段一起提供。参考图5,例如,媒体段1(1)可以包括时间映射片段1,因为持续时间不超过时间映射片段1的持续时间,而媒体段1(R)可以包括时间映射片段1和时间映射片段2。
Figure BDA00001749299700211
Figure BDA00001749299700221
表2
此外,每个时间映射片段可以包括与给定媒体文件的所有表示相关的时间映射信息,或者每个时间映射片段可以只包括特定表示的时间映射信息,在这种情况下,客户端设备的请求将根据期望表示和期望时点访问不同的时间映射片段。
客户端设备可以被配置为通过创建适当的URL来访问相关时间映射片段。在此方面,媒体内容服务器104可以将URL模式提供给客户端设备102以描述可能和有效的URL来访问不同媒体段和不同时间映射片段。URL模式包括一组参数,客户端设备102可通过将适当的参数值插入URL模式来修改这些参数。
媒体内容服务器可以将URL模式作为多媒体呈现描述的一部分提供给客户端。所述多媒体呈现描述可被视为客户端设备使用媒体内容的入口点并且可以包含描述媒体内容及媒体内容访问方式的信息。所述多媒体呈现描述可以携带有关如何访问时间映射片段以及这些时间映射片段的持续时间的描述。可以定义新的参数来建立时间映射片段的索引,并且可以在URL模式中使用新的参数以构建正确的URL来访问期望时间映射片段。因此可以仅根据需要访问时间映射片段。
再次参考图5,每个时间映射片段265可以包含对于所有时间映射片段均相等的时间间隔T。持续时间T可以在多媒体呈现描述中指示为时间映射信息的参数。图6示出寻址时间映射片段265的XML元素270的一个实例。
URL模式因此可以提供每个特定表示201、202或媒体轨道的时间映射片段的位置。更具体地说,URL模式可以包括可变参数,所述可变参数例如通过给出URL前缀和特定时间映射片段的索引来描述如何访问该时间映射片段。在一个实施例中,例如,第一时间映射片段被索引为1并对应于时间间隔[0-interval];第二时间映射片段被索引为“2”并对应于时间间隔[interval-2*interval];以此类推。作为参数在URL模式中通知时间间隔并可作为时间单位(例如,秒)来提供时间间隔。时间间隔的值例如可以通过多媒体呈现描述通知给客户端设备。因此,时间间隔指示时间索引的粒度。
指向时间映射片段的URL模式一个实例可以是http://www.company.com/streamig/content/RepresentationTimingParameter。在该实例中,客户端设备可以使用时间间隔值的倍数替换RepresentationTimingParameter。例如,参考图5,如果指定时间间隔值为5秒并提示客户端设备102取回包含有关时点为27秒的信息的时间映射片段,则客户端设备将使用URLhttp://www.company/streamig/content/25,“25”是时间间隔5之前紧接时间间隔5的倍数。因此,客户端设备将使用“25”替换RepresentationTimingParameter,因此将创建描述时间间隔[25-30]并访问相关时间映射片段的URL。如果媒体段包含属于两个或更多个时间间隔的媒体样本,则可以在所有对应的时间映射片段中描述该媒体段。
可以使用XML或另一语言给出时间映射片段的语法。例如,时间映射片段可以包含以下参数:(1)子时间间隔的开始时间;(2)呈现ID和媒体段ID。换言之,在该实例中,每个时点将包含一系列呈现ID-媒体段ID对。通过这种方式,客户端设备将能够确定在何处查找每个给定表示中对应于该时点的媒体样本。例如,播放第一表示(表示1)并且当前正在播放该表示内的特定媒体段(媒体段2(1))的用户可以决定切换到第二表示(表示R)。客户端设备可以访问对应于当前媒体段(媒体段2(1))的时间映射片段265并使用URL模式中的Start Time(开始时间)信息定位期望第二表示(表示R)中的对应时间(从而定位对应媒体段)。图10中示出描述时间映射片段的一个实例XML架构。
一种类似的方法也适用于在特定表示中执行查找。在此情况下,客户端设备可以访问对应于当前媒体段的时间映射片段并使用URL模式中的Start Time信息(在此情况下,将是期望时点而非当前时点)来定位对应媒体段。
在媒体内容被实时成流(相对于“按需”成流)的情况下,可以使用保留的媒体段标识符(例如“Now”)指向包含当前媒体数据的媒体段。该媒体段可由媒体内容服务器104创建,也可以通过每个表示的内容准备在客户端设备102处创建,并且可以在包含不超过媒体段数据持续时间的“max-age”参数的标头字段中标记以“Cache-control”。
客户端设备可以定期请求媒体段“Now”以获取当前实时媒体段。为了避免取回过期的“Now”媒体段,客户端设备可以包括HTTP条件请求标头,例如HTTP标头“if-Modified-Since”。作为“if-Modified-Since”标头的值,客户端设备可以给出先前取回的“Now”媒体段的“Date”值。
在另一实例中,在使用“Now”调整到实时流的第一媒体段请求之后,后续请求可以开始使用正常媒体段标识符,例如对应于segment_id的媒体段数字标识符,如上以及图7中所述。
图8是示出根据本发明的示例性实施例的用于访问时间映射信息以及跨多个表示取回对应媒体段的方法的流程图。如上所述,结合图8使用HTTP作为传输协议仅作为实例,并非用于限制,也可以类似的方式使用其他传输协议。无论使用的传输协议为何,图8示出在客户端设备102处执行的操作。在300,从选定表示取回当前媒体段。在305,用户此时可决定切换表示。如果决定不切换表示,则继续在300取回当前媒体段。但是,如果决定切换表示,则在310根据当前媒体段访问切换播放时间的时间映射信息。然后在315识别对应于在310处使用的切换播放时间的新表示的媒体段。通过使用位置信息,可以识别新表示中对应媒体段的媒体段ID,并且在320可以取回新表示的媒体段,从而保持旧表示与新表示的时间对齐。
图9示出根据本发明的示例性实施例的访问时间映射信息以及取回特定表示内的对应媒体段的方法的流程图。例如,客户端可以在400下载媒体呈现描述及内容元数据。然后,客户端可以在405选择开始播放的表示以及开始时点(例如,时间0或内容开头)。在410、415,如果从时间0处开始播放,则客户端设备将取回媒体段ID为1的媒体段,在该实例中,该媒体段对应于选定时间0。备选地,如果从时间0以外的时间开始播放,则客户端可以在420取回给定表示中包含选定时点的时间映射信息的时间映射片段。本实施例中的客户端设备然后将在425根据时间映射信息定位对应媒体段并确定当前表示中位于期望时点的对应媒体段的媒体段ID。最后,本实施例中的客户端将在430根据媒体段ID取回新媒体段。
需要指出,所述时间映射信息不一定限于映射时间与媒体段ID之间的关系。在某些实施例中,例如,可以将时间映射到字节偏移(即,特定文件中的媒体段偏移)。在这种情况下,使用字节偏移识别特定媒体段,从而允许客户端定位和取回对应于特定时间的特定媒体段,如上所述。
图8和9是根据本发明的示例性实施例的系统、方法和计算机程序产品的流程图。将理解,所述流程图中的每个方块,以及所述流程图中方块的组合可以通过各种手段实现,例如硬件和/或包括一个或多个其上存储计算机可读程序指令的计算机可读介质的计算机程序产品。例如,在此描述的一个或多个过程可以通过计算机程序产品的计算机程序指令体现。在此方面,体现在此描述的过程的计算机程序产品(多个)可以由移动终端、服务器或其他计算设备的一个或多个存储设备存储并由所述计算设备中的处理器执行。在某些实施例中,包括体现上述过程的计算机程序产品(多个)的计算机程序指令可以由多个计算设备的存储设备存储。可以理解,任何此类计算机程序产品均可加载到计算机或其他可编程装置上以产生机器,以便包括所述计算机或其他可编程装置上执行的指令的计算机程序产品创建用于实现流程图方块(多个)中指定的功能的装置。此外,所述计算机程序产品可以包括一个或多个计算机可读存储器,其上可以存储计算机程序指令,以便所述一个或多个计算机可读存储器可以引导计算机或其他可编程装置以特定方式执行功能,从而使所述计算机程序产品包括实现流程图方块(多个)中指定的功能的制品。一个或多个计算机程序产品的计算机程序指令还可以加载到计算机或其他可编程装置中以在所述计算机或其他可编程装置上执行一系列操作来产生计算机实现的过程,从而使所述计算机或其他可编程装置上执行的指令实现流程图方块(多个)中指定的功能。
因此,所述流程图中的方块支持用于执行指定功能的装置的组合。还应该理解,所述流程图中的一个或多个方块,以及所述流程图中方块的组合可以通过执行指定功能的基于专用硬件的计算机系统,或者专用硬件和计算机程序产品(多个)的组合来实现。
上述功能可以通过许多方式实现。例如,可使用用于执行上述每个功能的任何适当装置执行本发明的实施例。在一个实施例中,适当配置的处理器可以提供本发明的全部或部分元素。在另一实施例中,本发明的全部或部分元素可以由计算机程序产品配置以及在计算机程序产品的控制下运行。用于执行本发明的实施例的方法的计算机程序产品包括计算机可读存储介质(例如非易失性存储介质)和计算机可读程序代码部分(例如体现在计算机可读存储介质中的一系列计算机指令)。
因此,根据本发明的实施例,为计算设备、计算设备用户和网络运营商提供多种优势。例如,可以例如使用HTTP上的TCP(TCP over HTTP)提供媒体内容自适应成流,同时允许用户在不中断播放媒体段定时的情况下切换表示。在此方面,可以促进按照基于国际标准化组织(ISO)基础媒体文件格式的任何媒体文件格式设置媒体内容格式的媒体内容的成流。还可以例如使用HTTP上的TCP提供用于媒体内容成流的协议,该协议可以与各种网络类型(例如,局域网、因特网、无线网络、有线网络、蜂窝网络等)互通。
根据本发明的各实施例,还可以降低接收和播放流媒体的计算设备的网络带宽消耗和处理要求。在此方面,通过选择性地提取并逐步递送接收器播放流媒体所需的数据而降低针对媒体文件传输的元数据量,从而更有效地使用网络带宽。根据本发明的各实施例播放流媒体的设备还可以通过不必接收和处理如先前那么多的数据而受益。
在一个示例性实施例中,提供一种用于接收和呈现或播放媒体内容表示以及用于使能跨多个表示进行时间同步和随机查找的方法和计算机程序产品。根据所述方法和计算机程序产品,客户端设备呈现选定媒体内容文件的第一表示的第一媒体段。所述客户端设备确定期望时点和待呈现的期望第二表示。识别和取回第二媒体段,其中所述第二媒体段包含呈现时间等于所述第一表示或所述期望第二表示中的期望呈现时点或等于期望表示中的当前时点的一个或多个媒体样本。
在某些情况下,通过访问所述期望时点的时间映射信息而识别所述第二媒体段。访问所述时间映射信息可以包括请求和取回与所述第一媒体段或所述第二媒体段相关的至少一个特定时间映射片段。备选地,访问所述时间映射信息可以包括访问被包括为所述第一媒体段的一部分的特定时间映射片段。
确定期望时点或待呈现的期望第二表示可以包括接收指示所述期望时点或所述期望第二表示的用户输入。在所述用户输入指示期望时点的情况下,所取回的第二媒体段在时间上对应于该期望时点。在所述用户输入指示期望第二表示的情况下,所取回的第二媒体段在时间上对应于所述第一表示的第一段。
在某些实施例中,识别所述第二媒体段包括根据所述时间映射信息识别与所述第二媒体段关联的段标识符。此外,取回所述第二表示的所述第二媒体段可以包括创建包含所述段标识符的统一资源定位器(URL)。创建所述URL可以包括修改从媒体内容服务器接收的URL模式。在某些情况下,识别所述第二媒体段包括访问与所述第二表示关联的表示描述。
在另一示例性实施例中,提供了一种用于声明和通知媒体内容表示以及用于使能跨多个表示进行时间同步和随机查找的方法和计算机程序产品。根据所述方法和计算机程序产品,一种诸如媒体内容服务器之类的装置响应于对媒体内容的请求而将多媒体呈现描述发送到客户端设备。第一表示的第一媒体段被发送到所述客户端设备,并创建与至少一个媒体段相关的时间映射信息。所述时间映射信息由所述装置发送到所述客户端设备。所述时间映射信息可以随对应媒体段一起发送到所述客户端设备,也可以响应于所述客户端设备的至少一个请求而发送到所述客户端设备。所述多媒体呈现描述可以包括所述客户端设备用于取回或请求所述时间映射信息的统一资源定位器(URL)模式。
在某些情况下,所述时间映射信息包括多个时间映射片段,其中每个时间映射片段将至少一个媒体段与呈现时间间隔进行关联。第一时间映射片段可以响应于对所述第一时间映射片段的请求而被发送到所述客户端设备,其中所述请求基于所述URL模式和所述第一媒体段的呈现时间间隔。备选地,所述第一时间映射片段可以结合所述第一媒体段的发送而发送到所述客户端设备。在某些情况下,可以创建所述第一时间映射片段并响应于来自所述客户端设备的请求而将其发送到所述客户端设备。可以根据来自所述客户端设备的请求而将第二媒体段发送到所述客户端设备,其中所述请求包括从所述URL模式和所述第一时间映射片段得出的内容。
在另一示例性实施例中,提供一种包括处理器和存储计算机代码指令的存储器的装置,所述计算机代码指令当被所述处理器执行时,使所述装置呈现选定媒体内容文件的第一表示的第一段。所述存储器和计算机代码指令与所述处理器一起还使所述装置确定期望时点或待呈现的期望第二表示。使所述装置识别第二媒体段,其中所述第二媒体段包含呈现时间等于所述第一表示或所述期望第二表示中的期望呈现时点或等于期望表示中的当前时点的一个或多个媒体样本。所述存储器和计算机代码指令与所述处理器一起还使所述装置取回所述第二媒体段。
在某些情况下,所述装置被配置为通过访问所述第一媒体段或所述第一表示的时间映射信息来识别所述第二媒体段。可以使所述装置发送取回特定时间映射片段的请求,其中所述时间映射片段将至少一个媒体段与呈现时间间隔进行关联。备选地,所述装置可以访问包括为所述第一媒体段的一部分的特定时间映射片段。
所述装置可以通过接收指示期望时点或期望第二表示的用户输入来确定所述期望时点或待呈现的期望第二表示。在所述用户输入指示期望时点的情况下,所取回的第二媒体段在时间上对应于所述期望时点。在所述用户输入指示期望第二表示的情况下,所取回的第二媒体段在时间上对应于所述第一表示的第一段。
在另一示例性实施例中,提供一种包括处理器和存储计算机代码指令的存储器的装置,所述计算机代码指令当被所述处理器执行时,使所述装置响应于对媒体内容的请求而将多媒体呈现描述发送到客户端设备。所述存储器和计算机代码指令与所述处理器一起还使所述装置将第一表示的第一媒体段发送到所述客户端设备,并创建与至少一个媒体段相关的时间映射信息。还使所述装置将所述时间映射信息发送到所述客户端设备。所述时间映射信息可以作为时间映射片段随对应媒体段一起发送到所述客户端设备,也可以响应于所述客户端设备的至少一个请求而发送到所述客户端设备。所述多媒体呈现描述可以包括所述客户端设备用于取回或请求所述时间映射信息的统一资源定位器(URL)模式。
在某些情况下,所述装置可以创建多个时间映射片段,其中每个时间映射片段将至少一个媒体段与呈现时间间隔进行关联。可以使所述装置响应于对第一时间映射片段的请求而将所述第一时间映射片段发送到所述客户端设备,其中所述请求基于所述URL模式。备选地,可以使所述装置结合所述第一媒体段的发送而将所述第一时间映射片段发送到所述客户端设备。在某些情况下,所述装置可以创建所述第一时间映射片段并响应于来自所述客户端设备的请求而将所述第一时间映射片段发送到所述客户端设备。可使所述装置根据来自所述客户端设备的请求而将第二媒体段发送到所述客户端设备,其中所述请求包括从所述URL模式和所述第一时间映射片段得出的内容。
在另一示例性实施例中,提供一种包括被配置为呈现至少一个媒体段的客户端设备和被配置为通过网络将时间映射信息传送到所述客户端设备的媒体内容服务器的系统。所述客户端设备可以呈现选定媒体内容文件的第一表示的第一媒体段。所述客户端设备然后可以确定期望时点或待呈现的期望第二表示。所述媒体内容服务器可以将时间映射信息随对应媒体段一起发送到所述客户端设备,也可以响应于所述客户端设备的至少一个请求而将时间映射信息发送到所述客户端设备。所述客户端设备然后可以根据所述时间映射信息识别第二媒体段,并可以从所述媒体内容服务器请求所述第二媒体段。所述客户端设备可以使用由所述媒体内容服务器发送到所述客户端设备的统一资源定位器(URL)模式来请求所述时间映射信息或所述第二媒体段。
在某些实施例中,媒体段持续时间不会跨单个表示而更改,并且可以在多媒体呈现描述内部通知媒体段的必要时间值。在其他实施例中,允许媒体段持续时间在表示内更改,使用时间映射片段,其中所述时间映射片段可以与所述多媒体呈现描述分开存储并且根据需要访问所述时间映射片段。可使用URL模式寻址时间映射片段。
受益于以上说明及相关附图中给出的教导,本发明相关领域中的技术人员将想到在此阐述的本发明的许多修改和其他实施例。因此,应该理解,本发明的实施例并不限于所公开的特定实施例,并且所述修改和其他实施例旨在被包括在所附权利要求的范围内。此外,尽管以上说明及相关附图在特定示例性元素和/或功能组合的上下文中描述示例性实施例,但是应该理解,备选实施例可以在不偏离所附权利要求的范围的情况下,提供不同的元素和/或功能组合。例如,在此方面,还可以构想不同于上面明确描述的元素和/或功能组合的其他元素和/或功能组合并且可以在某些所附权利要求中阐述。尽管在此使用特定术语,但是它们仅作一般描述之用,并非用于限制。

Claims (20)

1.一种方法,包括:
由客户端设备呈现选定媒体内容文件的第一表示的第一媒体段;
确定期望时点和期望第二表示中的至少一个;
识别与所述期望时点和所述期望第二表示中的所确定的至少一个关联的第二媒体段;以及
由所述客户端设备从网络服务器取回所述第二媒体段以便呈现。
2.如权利要求1中所述的方法,其中所述识别包括:
访问将媒体段映射到对应呈现时间的时间映射信息;以及
至少部分地根据所访问的时间映射信息来识别所述第二媒体段。
3.如权利要求2中所述的方法,其中所述时间映射信息包括一个或多个时间映射片段,并且其中访问时间映射信息包括取回与所述第一媒体段、所述期望时点和所述第二媒体段中的至少一个相关的至少一个特定时间映射片段。
4.如权利要求3中所述的方法,其中所述至少一个特定时间映射片段被包括为所述第一媒体段的一部分。
5.如权利要求1至3中的任一权利要求中所述的方法,其中所述确定期望时点和期望第二表示中的至少一个包括以下步骤中的至少一个:
接收指示所述期望时点和所述期望第二呈现中的至少一个的用户输入;
确定所述第一表示中的期望时点;以及
确定所述期望第二呈现中的期望时点。
6.如权利要求1至5中的任一权利要求中所述的方法,其中识别第二媒体段包括识别与所述第二媒体段关联的段标识符,并且其中取回所述第二媒体段包括至少部分地根据所识别的段标识符创建统一资源定位器。
7.一种包括计算机可执行程序代码的计算机可读存储器,所述计算机可执行程序代码当被执行时,使装置执行如权利要求1至6中的任一权利要求中所述的方法。
8.一种方法,包括:
由网络服务器响应于客户端设备对媒体内容的请求而将多媒体呈现描述发送到所述客户端设备;
将第一表示的第一媒体段发送到所述客户端设备;
将映射至少一个媒体段至对应呈现时间的时间映射信息发送到所述客户端设备;以及
将第二媒体段发送到所述客户端设备。
9.如权利要求8中所述的方法,其中发送时间映射信息包括以下步骤中的至少一个:
响应于所述客户端设备的请求而发送所述时间映射信息;以及
结合所述第一媒体段的发送而发送所述时间映射信息。
10.如权利要求8或9中的任一权利要求中所述的方法,其中所述时间映射信息包括多个时间映射片段,每个时间映射片段将至少一个媒体段与呈现时间间隔关联。
11.一种包括计算机可执行程序代码的计算机可读存储器,所述计算机可执行程序代码当被执行时,使装置执行如权利要求8至10中的任一权利要求中所述的方法。
12.一种装置,包括:
用于呈现选定媒体内容文件的第一表示的第一媒体段的部件;
用于确定期望时点和期望第二表示中的至少一个的部件;
用于识别与所述期望时点和所述期望第二表示中的所确定的至少一个关联的第二媒体段的部件;以及
用于从网络服务器取回所述第二媒体段以便呈现的部件。
13.如权利要求12中所述的装置,其中用于识别所述第二媒体段的部件包括:
用于访问将媒体段映射到对应呈现时间的时间映射信息的部件;以及
用于至少部分地根据所访问的时间映射信息来识别所述第二媒体段的部件。
14.如权利要求13中所述的装置,其中所述时间映射信息包括一个或多个时间映射片段,并且其中用于访问时间映射信息的部件包括用于取回与所述第一媒体段、所述期望时点和所述第二媒体段中的至少一个相关的至少一个特定时间映射片段的部件。
15.如权利要求14中所述的装置,其中结合取回所述第一媒体段而取回所述至少一个特定时间映射片段。
16.如权利要求12至15中的任一权利要求中所述的装置,其中所述用于确定期望时点和期望第二表示中的至少一个的部件包括以下部件中的至少一个:
用于接收指示所述期望时点和所述期望第二呈现中的至少一个的用户输入的部件;
用于确定所述第一表示中的期望时点的部件;以及
用于确定所述期望第二呈现中的期望时点的部件。
17.如权利要求12至16中的任一权利要求中所述的装置,其中用于识别所述第二媒体段的部件包括用于识别与所述第二媒体段关联的段标识符的部件,并且其中用于取回所述第二媒体段的部件包括用于至少部分地根据所识别的段标识符创建统一资源定位器的部件。
18.一种装置,包括:
用于响应于客户端设备对媒体内容的请求而将多媒体呈现描述发送到所述客户端设备的部件;
用于将第一表示的第一媒体段发送到所述客户端设备的部件;
用于将映射至少一个媒体段至对应呈现时间的时间映射信息发送到所述客户端设备的部件;以及
用于将第二媒体段发送到所述客户端设备的部件。
19.如权利要求18中所述的装置,其中用于发送时间映射信息的部件包括以下部件中的至少一个:
用于响应于所述客户端设备的请求而发送所述时间映射信息的部件;以及
用于结合所述第一媒体段的发送而发送所述时间映射信息的部件。
20.如权利要求18或19中的任一权利要求中所述的装置,其中所述时间映射信息包括多个时间映射片段,每个时间映射片段将至少一个媒体段与呈现时间间隔关联。
CN201080056077.0A 2009-12-11 2010-12-10 用于流媒体文件内表示的描述和定时的装置及方法 Expired - Fee Related CN102687518B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US28590409P 2009-12-11 2009-12-11
US61/285,904 2009-12-11
PCT/IB2010/055761 WO2011070552A1 (en) 2009-12-11 2010-12-10 Apparatus and methods for describing and timing representations in streaming media files

Publications (2)

Publication Number Publication Date
CN102687518A true CN102687518A (zh) 2012-09-19
CN102687518B CN102687518B (zh) 2016-06-01

Family

ID=44145165

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080056077.0A Expired - Fee Related CN102687518B (zh) 2009-12-11 2010-12-10 用于流媒体文件内表示的描述和定时的装置及方法

Country Status (7)

Country Link
US (1) US8510375B2 (zh)
EP (1) EP2510669A4 (zh)
KR (1) KR101401183B1 (zh)
CN (1) CN102687518B (zh)
CA (1) CA2783592A1 (zh)
WO (1) WO2011070552A1 (zh)
ZA (1) ZA201205088B (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103873883A (zh) * 2014-03-06 2014-06-18 小米科技有限责任公司 一种视频播放的方法、装置及终端设备
CN105230024A (zh) * 2013-07-19 2016-01-06 华为技术有限公司 基于超文本传输协议的动态自适应流媒体中的元数据信息的指示及携带
CN105307027A (zh) * 2014-06-03 2016-02-03 诺基亚技术有限公司 用于调整内容的方法和装置
CN105981036A (zh) * 2013-12-17 2016-09-28 瑞典爱立信有限公司 安全在线图片
US10284612B2 (en) 2013-04-19 2019-05-07 Futurewei Technologies, Inc. Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol
CN110087093A (zh) * 2013-04-19 2019-08-02 索尼公司 信息处理装置和方法以及非暂态计算机可读介质
CN110383845A (zh) * 2016-12-22 2019-10-25 弗劳恩霍夫应用研究促进协会 允许有效支持快速调入和任何时间切换的媒体流传输构思
CN110546932A (zh) * 2017-04-06 2019-12-06 构造数据有限责任公司 使用媒体查看数据提高设备映射图准确度的系统和方法
CN110708577A (zh) * 2014-07-01 2020-01-17 佳能株式会社 用于跨时间段识别对象的方法和相应装置
CN110832475A (zh) * 2017-06-19 2020-02-21 胡露有限责任公司 使用数据库中的分发区域对媒体内容进行地理围栏
CN112398807A (zh) * 2020-09-28 2021-02-23 重庆锐云科技有限公司 网络会议提前准备系统、方法、计算机设备及存储介质
CN112765377A (zh) * 2019-11-01 2021-05-07 微软技术许可有限责任公司 媒体流中的时段定位
CN113424553A (zh) * 2019-02-11 2021-09-21 奈飞公司 用于响应于用户选择而推进交互式媒体项目的重放的技术
CN114073100A (zh) * 2019-02-18 2022-02-18 索尼互动娱乐有限责任公司 数字内容的映射视图
CN114402572A (zh) * 2019-09-13 2022-04-26 六科股份有限公司 使用带内元数据作为访问参考指纹的基础,以促进与内容相关的动作
CN114760281A (zh) * 2015-03-02 2022-07-15 高通股份有限公司 对于部分段的指示

Families Citing this family (93)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7068729B2 (en) 2001-12-21 2006-06-27 Digital Fountain, Inc. Multi-stage code generator and decoder for communication systems
US6307487B1 (en) 1998-09-23 2001-10-23 Digital Fountain, Inc. Information additive code generator and decoder for communication systems
DE10150384B4 (de) 2001-10-11 2013-04-04 Patentportfolio S. à. r. l. Verfahren zur Gewährleistung eines sicheren Reifennotlaufbetriebs bei einem Kraftfahrzeug
US9240810B2 (en) 2002-06-11 2016-01-19 Digital Fountain, Inc. Systems and processes for decoding chain reaction codes through inactivation
EP2348640B1 (en) 2002-10-05 2020-07-15 QUALCOMM Incorporated Systematic encoding of chain reaction codes
CN1954501B (zh) 2003-10-06 2010-06-16 数字方敦股份有限公司 通过通信信道接收从源发射的数据的方法
US7818444B2 (en) 2004-04-30 2010-10-19 Move Networks, Inc. Apparatus, system, and method for multi-bitrate content streaming
US8868772B2 (en) 2004-04-30 2014-10-21 Echostar Technologies L.L.C. Apparatus, system, and method for adaptive-rate shifting of streaming content
US7418651B2 (en) 2004-05-07 2008-08-26 Digital Fountain, Inc. File download and streaming system
US8370514B2 (en) * 2005-04-28 2013-02-05 DISH Digital L.L.C. System and method of minimizing network bandwidth retrieved from an external network
US8683066B2 (en) 2007-08-06 2014-03-25 DISH Digital L.L.C. Apparatus, system, and method for multi-bitrate content streaming
JP5550834B2 (ja) 2006-02-13 2014-07-16 デジタル ファウンテン, インコーポレイテッド 可変fecオーバヘッド及び保護期間を利用したストリーミング及びバッファリング
US9270414B2 (en) 2006-02-21 2016-02-23 Digital Fountain, Inc. Multiple-field based code generator and decoder for communications systems
WO2007134196A2 (en) 2006-05-10 2007-11-22 Digital Fountain, Inc. Code generator and decoder using hybrid codes
US9419749B2 (en) 2009-08-19 2016-08-16 Qualcomm Incorporated Methods and apparatus employing FEC codes with permanent inactivation of symbols for encoding and decoding processes
US9432433B2 (en) 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US9380096B2 (en) 2006-06-09 2016-06-28 Qualcomm Incorporated Enhanced block-request streaming system for handling low-latency streaming
US9386064B2 (en) 2006-06-09 2016-07-05 Qualcomm Incorporated Enhanced block-request streaming using URL templates and construction rules
US9209934B2 (en) 2006-06-09 2015-12-08 Qualcomm Incorporated Enhanced block-request streaming using cooperative parallel HTTP and forward error correction
US9178535B2 (en) 2006-06-09 2015-11-03 Digital Fountain, Inc. Dynamic stream interleaving and sub-stream based delivery
AU2008298602A1 (en) 2007-09-12 2009-03-19 Digital Fountain, Inc. Generating and communicating source identification information to enable reliable communications
US9281847B2 (en) 2009-02-27 2016-03-08 Qualcomm Incorporated Mobile reception of digital video broadcasting—terrestrial services
US9288010B2 (en) 2009-08-19 2016-03-15 Qualcomm Incorporated Universal file delivery methods for providing unequal error protection and bundled file delivery services
US9917874B2 (en) 2009-09-22 2018-03-13 Qualcomm Incorporated Enhanced block-request streaming using block partitioning or request controls for improved client-side handling
US8516063B2 (en) 2010-02-12 2013-08-20 Mary Anne Fletcher Mobile device streaming media application
WO2011132883A2 (ko) * 2010-04-19 2011-10-27 엘지전자 주식회사 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
KR101790526B1 (ko) * 2010-04-19 2017-10-27 엘지전자 주식회사 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
WO2011132882A2 (ko) * 2010-04-19 2011-10-27 엘지전자 주식회사 인터넷 기반 컨텐츠 송수신 방법 및 그를 이용한 송수신 장치
US20110276662A1 (en) * 2010-05-07 2011-11-10 Samsung Electronics Co., Ltd. Method of constructing multimedia streaming file format, and method and apparatus for servicing multimedia streaming using the multimedia streaming file format
US9253548B2 (en) * 2010-05-27 2016-02-02 Adobe Systems Incorporated Optimizing caches for media streaming
KR101702562B1 (ko) * 2010-06-18 2017-02-03 삼성전자 주식회사 멀티미디어 스트림 파일의 저장 파일 포맷, 저장 방법 및 이를 이용한 클라이언트 장치
US9049497B2 (en) 2010-06-29 2015-06-02 Qualcomm Incorporated Signaling random access points for streaming video data
US8918533B2 (en) 2010-07-13 2014-12-23 Qualcomm Incorporated Video switching for streaming video data
US9185439B2 (en) 2010-07-15 2015-11-10 Qualcomm Incorporated Signaling data for multiplexing video components
KR20120008432A (ko) * 2010-07-16 2012-01-30 한국전자통신연구원 스트리밍 서비스 송/수신 장치 및 방법
KR20120034550A (ko) 2010-07-20 2012-04-12 한국전자통신연구원 스트리밍 컨텐츠 제공 장치 및 방법
KR20120010089A (ko) 2010-07-20 2012-02-02 삼성전자주식회사 Http 기반의 멀티미디어 스트리밍 서비스의 품질 향상을 위한 방법 및 장치
US9596447B2 (en) 2010-07-21 2017-03-14 Qualcomm Incorporated Providing frame packing type information for video coding
US8806050B2 (en) 2010-08-10 2014-08-12 Qualcomm Incorporated Manifest file updates for network streaming of coded multimedia data
US9467493B2 (en) 2010-09-06 2016-10-11 Electronics And Telecommunication Research Institute Apparatus and method for providing streaming content
US20120078703A1 (en) * 2010-09-08 2012-03-29 Sony Pictures Technologies Inc. Access to media bites
EP2614653A4 (en) * 2010-09-10 2015-04-15 Nokia Corp METHOD AND APPARATUS FOR ADAPTIVE CONTINUOUS DIFFUSION
US9986009B2 (en) * 2010-10-06 2018-05-29 Electronics And Telecommunications Research Institute Apparatus and method for providing streaming content
KR101206698B1 (ko) * 2010-10-06 2012-11-30 한국항공대학교산학협력단 스트리밍 콘텐츠 제공 장치 및 방법
US20120166667A1 (en) * 2010-12-22 2012-06-28 Edward Hall Streaming media
US9661104B2 (en) * 2011-02-07 2017-05-23 Blackberry Limited Method and apparatus for receiving presentation metadata
US9270299B2 (en) 2011-02-11 2016-02-23 Qualcomm Incorporated Encoding and decoding using elastic codes with flexible source block mapping
US8958375B2 (en) 2011-02-11 2015-02-17 Qualcomm Incorporated Framing for an improved radio link protocol including FEC
US11025962B2 (en) 2011-02-28 2021-06-01 Adobe Inc. System and method for low-latency content streaming
EP2924990A1 (en) 2011-03-16 2015-09-30 Electronics and Telecommunications Research Institute Apparatus and method for providing streaming content using representations
US20120278495A1 (en) * 2011-04-26 2012-11-01 Research In Motion Limited Representation grouping for http streaming
FR2975555A1 (fr) * 2011-05-18 2012-11-23 Thomson Licensing Methode d'adaptation dynamique du debit de reception et recepteur associe
US9615126B2 (en) 2011-06-24 2017-04-04 Google Technology Holdings LLC Intelligent buffering of media streams delivered over internet
US9590814B2 (en) * 2011-08-01 2017-03-07 Qualcomm Incorporated Method and apparatus for transport of dynamic adaptive streaming over HTTP (DASH) initialization segment description fragments as user service description fragments
US9253233B2 (en) * 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
IN2014KN00809A (zh) 2011-09-30 2015-10-02 Huawei Tech Co Ltd
US9521439B1 (en) 2011-10-04 2016-12-13 Cisco Technology, Inc. Systems and methods for correlating multiple TCP sessions for a video transfer
US9843844B2 (en) * 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
US9712891B2 (en) 2011-11-01 2017-07-18 Nokia Technologies Oy Method and apparatus for selecting an access method for delivery of media
US8977704B2 (en) 2011-12-29 2015-03-10 Nokia Corporation Method and apparatus for flexible caching of delivered media
US9401968B2 (en) 2012-01-20 2016-07-26 Nokia Techologies Oy Method and apparatus for enabling pre-fetching of media
US9294226B2 (en) 2012-03-26 2016-03-22 Qualcomm Incorporated Universal object delivery and template-based file delivery
US9282366B2 (en) 2012-08-13 2016-03-08 The Nielsen Company (Us), Llc Methods and apparatus to communicate audience measurement information
US20140089467A1 (en) * 2012-09-27 2014-03-27 Andre Beck Content stream delivery using pre-loaded segments
US8923880B2 (en) * 2012-09-28 2014-12-30 Intel Corporation Selective joinder of user equipment with wireless cell
KR102020363B1 (ko) 2012-10-31 2019-09-10 삼성전자 주식회사 적응형 스트리밍을 이용한 미디어 세그먼트 송수신 방법 및 장치
US8984569B2 (en) * 2013-03-15 2015-03-17 Echostar Technologies L.L.C. Chunking of multiple track audio for adaptive bit rate streaming
US9270721B2 (en) * 2013-10-08 2016-02-23 Qualcomm Incorporated Switching between adaptation sets during media streaming
WO2015061794A1 (en) * 2013-10-25 2015-04-30 Futurewei Technologies, Inc. Associating representations in adaptive streaming
US9325617B2 (en) * 2013-12-09 2016-04-26 International Business Machines Corporation Overlay capabilities exchange using DCBX
US9210207B2 (en) * 2014-02-13 2015-12-08 Ericsson Ab Time-sensitive content manipulation in adaptive streaming buffer
US10504200B2 (en) 2014-03-13 2019-12-10 Verance Corporation Metadata acquisition using embedded watermarks
US20150261753A1 (en) * 2014-03-13 2015-09-17 Verance Corporation Metadata acquisition using embedded codes
CN106170988A (zh) 2014-03-13 2016-11-30 凡瑞斯公司 使用嵌入式代码的交互式内容获取
WO2015140082A1 (en) * 2014-03-18 2015-09-24 Koninklijke Philips N.V. Audiovisual content item data streams
FR3019428A1 (fr) * 2014-03-31 2015-10-02 Orange Dispositif et procede de commande a distance de la restitution de contenus multimedia
US20150286623A1 (en) * 2014-04-02 2015-10-08 Samsung Electronics Co., Ltd. Method and apparatus for marking relevant updates to html 5
US9699499B2 (en) 2014-04-30 2017-07-04 The Nielsen Company (Us), Llc Methods and apparatus to measure exposure to streaming media
WO2016028936A1 (en) 2014-08-20 2016-02-25 Verance Corporation Watermark detection using a multiplicity of predicted patterns
US9870800B2 (en) 2014-08-27 2018-01-16 International Business Machines Corporation Multi-source video input
US10102285B2 (en) 2014-08-27 2018-10-16 International Business Machines Corporation Consolidating video search for an event
US9942602B2 (en) 2014-11-25 2018-04-10 Verance Corporation Watermark detection and metadata delivery associated with a primary content
EP3225034A4 (en) 2014-11-25 2018-05-02 Verance Corporation Enhanced metadata and content delivery using watermarks
WO2016100916A1 (en) 2014-12-18 2016-06-23 Verance Corporation Service signaling recovery for multimedia content using embedded watermarks
CN108140047B (zh) * 2016-01-05 2021-06-29 华为技术有限公司 数据处理装置和方法以及数据容器结构
TWI559753B (zh) * 2016-03-16 2016-11-21 晶睿通訊股份有限公司 傳輸隨選影音檔案的方法
US11038938B2 (en) * 2016-04-25 2021-06-15 Time Warner Cable Enterprises Llc Methods and apparatus for providing alternative content
US20170344523A1 (en) * 2016-05-25 2017-11-30 Samsung Electronics Co., Ltd Method and apparatus for presentation customization and interactivity
US11316568B2 (en) 2017-01-09 2022-04-26 Telefonaktiebolaget Lm Ericsson (Publ) Controllable beam management accuracy
US11647251B2 (en) * 2017-07-12 2023-05-09 Telefonaktiebolaget Lm Ericsson (Publ) Fast tune-in for low latency streaming
US10945005B2 (en) * 2018-12-07 2021-03-09 Arris Enterprises Llc Multiple parental rating content and method of presentation
CN111859028A (zh) * 2019-04-30 2020-10-30 伊姆西Ip控股有限责任公司 创建用于流式存储的索引的方法、设备和计算机程序产品
US11197052B2 (en) * 2019-07-12 2021-12-07 Apple Inc. Low latency streaming media

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080022320A1 (en) * 2006-06-30 2008-01-24 Scientific-Atlanta, Inc. Systems and Methods of Synchronizing Media Streams
US20080034276A1 (en) * 2006-08-04 2008-02-07 The Directv Group, Inc. Distributed media-aggregation systems and methods to operate the same
US7373413B1 (en) * 2000-06-28 2008-05-13 Cisco Technology, Inc. Devices and methods for minimizing start up delay in transmission of streaming media
US20080267213A1 (en) * 2007-04-30 2008-10-30 Sachin Govind Deshpande Client-Side Bandwidth Allocation for Continuous and Discrete Media
US20080310814A1 (en) * 2007-06-13 2008-12-18 Microsoft Corporation Multi-location buffering of streaming media data
US20090110368A1 (en) * 2007-10-26 2009-04-30 Steve Nelson Videoconference Recording, Post-Processing, and Playback

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2234012C (en) 1998-04-06 2004-02-24 Leitch Technology Corporation Method and apparatus for synchronized multiple format data storage
US7302490B1 (en) 2000-05-03 2007-11-27 Microsoft Corporation Media file format to support switching between multiple timeline-altered media streams
US8090761B2 (en) * 2002-07-12 2012-01-03 Hewlett-Packard Development Company, L.P. Storage and distribution of segmented media data
US8200747B2 (en) * 2002-07-12 2012-06-12 Hewlett-Packard Development Company, L.P. Session handoff of segmented media data
US8103546B1 (en) * 2004-08-16 2012-01-24 Lightningcast Llc Advertising content delivery
US20070186005A1 (en) 2005-09-01 2007-08-09 Nokia Corporation Method to embedding SVG content into ISO base media file format for progressive downloading and streaming of rich media content
CN105024852B (zh) 2006-01-11 2020-01-03 核心无线许可有限公司 针对移动广播/多播流式服务器的使用而扩展富媒体容器格式的方法和装置
RU2435235C2 (ru) 2006-08-24 2011-11-27 Нокиа Корпорейшн Система и способ указания взаимосвязей треков в мультимедийном файле
US20080104267A1 (en) 2006-11-01 2008-05-01 Sony Corporation Systems and methods for reducing display latency between streaming digital media
KR101366803B1 (ko) 2007-04-16 2014-02-24 삼성전자주식회사 Http를 이용한 통신 방법 및 장치
US7694006B2 (en) 2007-07-27 2010-04-06 Realnetworks, Inc. System and method for distributing media data
WO2009024926A1 (en) 2007-08-20 2009-02-26 Nokia Corporation Segmented metadata and indexes for streamed multimedia data
CN101127989A (zh) 2007-09-11 2008-02-20 中兴通讯股份有限公司 一种支持手机超文本传输流媒体业务的方法
US8990848B2 (en) * 2008-07-22 2015-03-24 At&T Intellectual Property I, L.P. System and method for temporally adaptive media playback
WO2011009205A1 (en) * 2009-07-22 2011-01-27 Jigsee Inc. Method of streaming media to heterogeneous client devices
CN102473159A (zh) * 2009-11-04 2012-05-23 华为技术有限公司 媒体内容流播的系统和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7373413B1 (en) * 2000-06-28 2008-05-13 Cisco Technology, Inc. Devices and methods for minimizing start up delay in transmission of streaming media
US20080022320A1 (en) * 2006-06-30 2008-01-24 Scientific-Atlanta, Inc. Systems and Methods of Synchronizing Media Streams
US20080034276A1 (en) * 2006-08-04 2008-02-07 The Directv Group, Inc. Distributed media-aggregation systems and methods to operate the same
US20080267213A1 (en) * 2007-04-30 2008-10-30 Sachin Govind Deshpande Client-Side Bandwidth Allocation for Continuous and Discrete Media
US20080310814A1 (en) * 2007-06-13 2008-12-18 Microsoft Corporation Multi-location buffering of streaming media data
US20090110368A1 (en) * 2007-10-26 2009-04-30 Steve Nelson Videoconference Recording, Post-Processing, and Playback

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
QUALCOMM EUROPE S.A.R.L.: "Qualcomm Europe S.A.R.L.", 《3GPP TDOC S4-090814, 3GPP TSG-SA4 #56》, 13 November 2009 (2009-11-13), pages 2 - 5 *

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10284612B2 (en) 2013-04-19 2019-05-07 Futurewei Technologies, Inc. Media quality information signaling in dynamic adaptive video streaming over hypertext transfer protocol
CN110087093A (zh) * 2013-04-19 2019-08-02 索尼公司 信息处理装置和方法以及非暂态计算机可读介质
CN105230024A (zh) * 2013-07-19 2016-01-06 华为技术有限公司 基于超文本传输协议的动态自适应流媒体中的元数据信息的指示及携带
CN105230024B (zh) * 2013-07-19 2019-05-24 华为技术有限公司 一种媒体表示自适应方法、装置及计算机存储介质
CN105981036A (zh) * 2013-12-17 2016-09-28 瑞典爱立信有限公司 安全在线图片
CN103873883B (zh) * 2014-03-06 2017-05-03 小米科技有限责任公司 一种视频播放的方法、装置及终端设备
CN103873883A (zh) * 2014-03-06 2014-06-18 小米科技有限责任公司 一种视频播放的方法、装置及终端设备
CN105307027A (zh) * 2014-06-03 2016-02-03 诺基亚技术有限公司 用于调整内容的方法和装置
CN110708577B (zh) * 2014-07-01 2022-02-22 佳能株式会社 用于跨时间段识别对象的方法和相应装置
CN110708577A (zh) * 2014-07-01 2020-01-17 佳能株式会社 用于跨时间段识别对象的方法和相应装置
CN114760281A (zh) * 2015-03-02 2022-07-15 高通股份有限公司 对于部分段的指示
CN110383845A (zh) * 2016-12-22 2019-10-25 弗劳恩霍夫应用研究促进协会 允许有效支持快速调入和任何时间切换的媒体流传输构思
CN110546932B (zh) * 2017-04-06 2022-06-10 构造数据有限责任公司 使用媒体查看数据提高设备映射图准确度的系统和方法
CN110546932A (zh) * 2017-04-06 2019-12-06 构造数据有限责任公司 使用媒体查看数据提高设备映射图准确度的系统和方法
CN110832475A (zh) * 2017-06-19 2020-02-21 胡露有限责任公司 使用数据库中的分发区域对媒体内容进行地理围栏
CN110832475B (zh) * 2017-06-19 2023-08-01 葫芦有限责任公司 使用数据库中的分发区域对媒体内容进行地理围栏
CN113424553A (zh) * 2019-02-11 2021-09-21 奈飞公司 用于响应于用户选择而推进交互式媒体项目的重放的技术
CN113424553B (zh) * 2019-02-11 2023-08-04 奈飞公司 用于重放媒体项目的方法和系统
US11917271B2 (en) 2019-02-11 2024-02-27 Netflix, Inc. Techniques for advancing playback of interactive media titles in response to user selections
CN114073100A (zh) * 2019-02-18 2022-02-18 索尼互动娱乐有限责任公司 数字内容的映射视图
CN114073100B (zh) * 2019-02-18 2024-03-19 索尼互动娱乐有限责任公司 数字内容的映射视图
CN114402572A (zh) * 2019-09-13 2022-04-26 六科股份有限公司 使用带内元数据作为访问参考指纹的基础,以促进与内容相关的动作
CN114402572B (zh) * 2019-09-13 2022-11-22 六科股份有限公司 使用带内元数据作为访问参考指纹的基础,以促进与内容相关的动作
CN112765377A (zh) * 2019-11-01 2021-05-07 微软技术许可有限责任公司 媒体流中的时段定位
CN112398807A (zh) * 2020-09-28 2021-02-23 重庆锐云科技有限公司 网络会议提前准备系统、方法、计算机设备及存储介质

Also Published As

Publication number Publication date
US8510375B2 (en) 2013-08-13
WO2011070552A1 (en) 2011-06-16
US20110307545A1 (en) 2011-12-15
KR101401183B1 (ko) 2014-05-29
KR20120103698A (ko) 2012-09-19
EP2510669A1 (en) 2012-10-17
CA2783592A1 (en) 2011-06-16
ZA201205088B (en) 2013-12-23
EP2510669A4 (en) 2013-09-18
CN102687518B (zh) 2016-06-01

Similar Documents

Publication Publication Date Title
CN102687518A (zh) 用于流媒体文件内表示的描述和定时的装置及方法
JP6490778B2 (ja) ビデオ方位に基づくマルチメディア適応
JP6425720B2 (ja) コンテンツ配信のための方法及び装置
CN102577309A (zh) 用于动态媒体文件流送的系统、方法和装置
CN102882845B (zh) 实时或准实时流传输
CN103858440B (zh) 在针对自适应http流的表示之间提供改进切换的切换信令方法
CN104704844B (zh) 用于具有视频定向协调(cvo)的流送的设备、方法以及系统
CN104270406B (zh) 用于上载内容的系统和关联终端、方法及计算机程序产品
US8468262B2 (en) Method and apparatus for updating http content descriptions
EP2437465A1 (en) Method, system and network equipment for implementing http-based streaming media service
US20070186005A1 (en) Method to embedding SVG content into ISO base media file format for progressive downloading and streaming of rich media content
CN102449975A (zh) 用于媒体文件流式传输的系统、方法和装置
KR20080083299A (ko) 미디어 컨테이너 파일 관리
KR20170141677A (ko) 수신 장치, 송신 장치 및 데이터 처리 방법
CN107431700A (zh) 对于部分段的指示
CN107113325A (zh) 用于选择性传输加速器操作的系统和方法
CN106105239B (zh) 发送设备、发送方法、接收设备、接收方法和程序
CN107431699A (zh) 对于部分段的指示
CN101802818A (zh) 用于提供待被存储的元数据的方法和设备
CN107409130A (zh) 对于部分段的指示
CN101984619A (zh) 一种流媒体业务的实现方法及系统
CN104539606B (zh) 基于Upnp的音频文件管理方法、装置和系统
CN117280700A (zh) 用于自适应流参数化的可扩展请求信令

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160204

Address after: Espoo, Finland

Applicant after: Technology Co., Ltd. of Nokia

Address before: Espoo, Finland

Applicant before: Nokia Oyj

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160601

Termination date: 20181210