CN105830451B - 用于内容分发的方法和装置 - Google Patents

用于内容分发的方法和装置 Download PDF

Info

Publication number
CN105830451B
CN105830451B CN201480066992.6A CN201480066992A CN105830451B CN 105830451 B CN105830451 B CN 105830451B CN 201480066992 A CN201480066992 A CN 201480066992A CN 105830451 B CN105830451 B CN 105830451B
Authority
CN
China
Prior art keywords
dash
segmentation
buffer
url
client device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480066992.6A
Other languages
English (en)
Other versions
CN105830451A (zh
Inventor
M.弗里曼
W.富特
林荣权
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105830451A publication Critical patent/CN105830451A/zh
Application granted granted Critical
Publication of CN105830451B publication Critical patent/CN105830451B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4385Multiplex stream processing, e.g. multiplex stream decrypting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331Caching operations, e.g. of an advertisement for later insertion during playback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4381Recovering the multiplex stream from a specific network, e.g. recovering MPEG packets from ATM cells
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8455Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/85406Content authoring involving a specific file format, e.g. MP4 format

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

一种用于由客户端设备进行内容分发的方法。该方法包括接收媒体呈现描述(MPD)文件和一个或多个动态适应性超文本传输协议(HTTP)流化传输(DASH)分段。使用MPD文件中的信息过滤一个或多个DASH分段。将经过滤的DASH分段存储在分段缓冲器中。基于该信息从分段缓冲器请求特定DASH分段。

Description

用于内容分发的方法和装置
技术领域
一个或多个实施例总体上涉及获取内容,并且更具体地,涉及在广播网络中使用动态适应性超文本传输协议(HTTP)流式传输(dynamic adaptive HTTP streaming,DASH)而不使用HTTP的视频内容的分发。
背景技术
传输控制协议(TCP)已经被认为对于比如音频和视频内容的实时媒体的分发来说并不合适。这主要归因于TCP实现的激进式拥塞控制算法和重传过程。在TCP中,发送器在检测到拥塞事件后极大地(例如,达50%)减小传输速率,所述拥塞事件一般通过分组丢失或过度的传输延迟来识别。
超文本传输协议(HTTP)是通过互联网分发多媒体内容的优选协议。HTTP运行在TCP之上并且是文本协议。
发明内容
技术问题
动态适应性HTTP流式传输(DASH)已经被第三代合作伙伴项目(3GPP)和运动图像专家组(MPEG)进行了标准化。用于适应性HTTP流式传输的若干其他专有解决方案,例如苹果(APPLE)的HTTP直播流式传输(HTTP live streaming,HLS)和微软(MICROSOFT)的平滑流式传输正在商业上部署。然而,不同于这些,DASH是一种完全开放且标准化的媒体流式传输解决方案,其驱动不同实现方式之间的互操作性。
技术解决方案
在一个实施例中,一种方法提供由客户端设备进行的内容分发。一个实施例包括接收媒体呈现描述(media presentation description,MPD)文件和一个或多个动态适应性超文本传输协议(HTTP)流式传输(DASH)分段(segment)。在一个实施例中,使用MPD文件中的信息对一个或多个DASH分段进行过滤。将经过滤的一个或多个DASH分段存储在分段缓冲器中。在一个实施例中,基于信息从分段缓冲器中请求一个或多个特定DASH分段。
一个实施例提供一种用于内容分发的客户端设备。该客户端设备包括分段缓冲器以及接收MPD文件和一个或多个DASH分段的DASH处理部件。DASH处理部件进一步使用来自MPD文件的信息过滤一个或多个DASH分段、将经过滤的一个或多个DASH分段存储在分段缓冲器中并基于该信息从分段缓冲器请求一个或多个特定DASH分段以用于呈现内容。
另一实施例提供一种具有指令的非暂态计算机可读介质,所述指令在计算机上被执行时执行用于内容分发的方法。在一个实施例中,该方法包括由客户端设备接收MPD文件和一个或多个DASH分段。在一个实施例中,MPD文件中的信息被用于过滤一个或多个DASH分段。在一个实施例中,将经过滤的一个或多个DASH分段存储在分段缓冲器中。在一个实施例中,由客户端设备基于该信息从分段缓冲器请求一个或多个特定DASH分段。
根据下面的详细描述,实施例的这些和其他方面以及优点将变得明了,所述详细描述在与附图结合考虑时,通过举例的方式示意了实施例的原理。
附图说明
为了更全面地理解实施例的性质和优点以及使用的优选方式,将对结合附图阅读的下列详细描述进行参考,在附图中:
图1示意了根据一个实施例的示例客户端设备。
图2示意了根据一个实施例的用于流式传输多媒体内容的示例联网系统。
图3示意了通过多媒体多路复用传输协议(multimedia multiplexing transportprotocol,MMTP)接收DASH分段的动态适应性HTTP流式传输(DASH)系统,其示出了带有HTTP高速缓存的客户端。
图4示意了媒体呈现描述(MPD)文件的示例结构。
图5示意了片段化的基于国际标准组织(International StandardsOrganization,ISO)的文件格式(ISO-base file format,ISBOFF)的媒体文件的示例结构。
图6示意了根据一个实施例的DASH系统,其示出了不带有HTTP高速缓存、利用(广播)DASH分段缓冲器的客户端设备。
图7示意了根据一个实施例的带有一个或多个DASH分段的示例(广播)DASH分段缓冲器,每个DASH分段包括统一资源定位符(URL)信息。
图8示意了根据一个实施例的在图6中示出的客户端设备的示例架构。
图9a示意了根据一个实施例的流程图,其示出了URL信息的提取和将提取的信息与分段一起存储在(广播)分段缓冲器中。
图9b示意了根据一个实施例的示出了基于URL信息的DASH分段处理的流程图。
图10示意了根据一个实施例的通信系统的示意图。
图11示意了根据一个实施例的不带有HTTP高速缓存、利用(广播)DASH分段缓冲器的DASH客户端设备。
图12示意了根据一个实施例的用于客户端过程的流程图,所述客户端过程包括广播DASH缓冲器通过MMTP接收DASH分段。
具体实施方式
下面的描述是为了示意实施例的总体原理而进行的并且没有打算限制本文要求保护的创造性构思。另外,本文描述的特定特征可以以各种可能的组合和排列中的每一种与其他描述的特征组合使用。除非本文另外具体限定,否则要给予所有术语其最宽泛的可能的解释,包括根据说明书暗含的意义以及本领域技术人员所理解的和/或词典、论文等中限定的意义。
一个或多个实施例总体上涉及在广播网络中使用动态适应性超文本传输协议(HTTP)流式传输(DASH)借助通过MMTP而不是HTTP分发的内容分段来分发视频内容。在一个实施例中,一种方法包括由客户端设备接收媒体呈现描述(MPD)文件和一个或多个DASH分段。在一个实施例中,使用MPD文件中的信息过滤所一个或多个DASH分段。将经过滤的DASH分段存储在分段缓冲器中。在一个实施例中,由客户端设备基于该信息从分段缓冲器请求特定DASH分段。
一个实施例提供使用DASH而不使用HTTP用于内容分发的客户端设备。该客户端设备包括分段缓冲器以及接收MPD文件和一个或多个DASH分段的DASH处理部件。DASH处理部件进一步使用来自MPD文件的信息过滤一个或多个DASH分段、将经过滤的一个或多个DASH分段存储在分段缓冲器中并基于该信息从分段缓冲器请求一个或多个特定DASH分段以用于呈现内容。
一个或多个实施例在没有HTTP的情况下利用DASH用于广播。在一个实施例中,客户端设备不是HTTP客户端设备并且广播系统不利用HTTP服务器。在一个实施例中,广播服务器向广播客户端分发MPD文件MPD和DASH分段。广播客户端向广播DASH缓冲器分发DASH分段。在一个实施例中,MPD文件被用于过滤DASH分段(例如,基于统一资源定位符(URL))。在一个实施例中,广播DASH缓冲器将DASH分段与关联的URL存储在一起。广播DASH客户端设备基于在广播DASH缓冲器中的URL找到分段。在一个实施例中,如果没有发现在期望质量等级的DASH分段,则可以通过依据DASH规范修改URL来发现(如果可用的话)在下一较低质量等级的DASH分段。
DASH指的是一种适应性流式传输的典型方案,其将服务器控制的(server-controlled)适应性流式传输改变为客户端控制的适应性流式传输。在服务器控制的适应性流式传输中,服务器设备具有关于其到所有连接的客户端设备的连接的信息并且生成对于每个网络情况每个客户端为了传输最优内容所要求的东西。然而,随着客户端设备数量增加,服务器设备可能变得过载。在DASH中,服务器预先针对若干可能的情形生成媒体分段和元数据,并且客户端设备依据情况请求并播放内容。这使得可以依据网络状况下载和播放最优内容并同时减少置于服务器设备上的负载。
内容的例子可以包括音频信息、视频信息、音视频信息和数据。内容项目可以包括多个分量,比如音频信息、视频信息和字幕信息。例如,分量可以是以特定语言构成的字幕流或以某一相机视角获取的视频流。取决于其容器,分量可以包括轨道、基本流(ES)等。内容资源指的是在多个表示(representation)中提供以使能对于内容项目的适应性流式传输的内容项目(比如各种质量、比特率和角度)。服务发现过程可以被称为内容资源。内容资源可以包括一个或多个连续的时间时段,其包括内容资源的时间部段。
表示指的是在一时段中的内容资源的版本(对于所有或一些分量)。表示在分量的子集中或者在用于分量的编码参数(比如比特率)中可以不同。尽管表示被称为媒体数据,但其也可以被称为指示数据的任何这样的术语,包括一个或多个分量,但不限于此。分段或DASH分段指代表示的时间部段,其由特定系统层类型(比如传输流(TS)或运动图像专家组(MPEG)-4(MP4)第14部分)中唯一的URL来命名。
图1示意了根据一个实施例的示例客户端设备100。在一个实施例中,客户端设备100可以是用于生成和/或接收关于通过网络流式传输的多媒体内容的锚定位置信息的设备。在一个实施例中,客户端设备100代表用于接收内容的任何合适的固定、移动或便携式设备。在一个实施例中,客户端设备100可以包括电子设备,所述电子设备可以包括电视设备、智能电视设备、移动电视设备、能够通过比如无线通信链路的通信链路进行数据通信的设备、移动计算设备、电子计算平板设备等。在一个实施例中,移动设备包括移动电话或智能电话设备、移动平板设备、可穿戴设备、移动计算设备、媒体播放器、音频播放器(比如MP3播放器或收音机)或合适用于接收流式传输的内容的任何其他设备等。
在一个实施例中,客户端设备100包括处理器105、通信单元110、一个或多个扬声器115、总线系统120、输入/输出(I/O)单元125、显示器130和存储器135。客户端设备100还可以包括一个或多个麦克风140。在一个实施例中,通信单元110可以包括无线通信单元145。存储器135包括操作系统(OS)程序150和至少一个多媒体程序155。在一个实施例中,客户端设备可以包括一个或多个传感器,例如光照传感器、温度传感器、位置传感器(例如,全球定位系统(GPS))、一个或多个相机等。
在一个实施例中,通信单元110支持通过网络与其他系统或设备通信。例如,通信单元110可以包括网络接口卡或无线收发器。通信单元110可以通过到网络的有线、光学、无线或其他通信链路提供通信。
在一个或多个实施例中,客户端设备100能够通过无线网络接收信息。例如,通信单元110可以包括无线通信单元145。无线通信单元145可以包括天线、射频(RF)收发器和处理电路。RF收发器可以经由天线接收由基站、eNodeB或无线网络的接入点发送的到来的RF信号。RF收发器下变频到来的RF信号以产生中间频率(IF)或基带信号。将IF或基带信号发送到接收器(RX)处理电路,RX处理电路通过过滤、数字化、解调和/或解码操作产生经处理的基带信号。RX处理电路将经处理的基带信号发送到(一个或多个)扬声器115(例如,对于音频数据来说)或发送到处理器105用于进一步处理(例如,对于视频数据和音频数据处理来说)。
无线通信单元145还可以包括接收来自(一个或多个)麦克风140的模拟或数字语音数据或来自处理器105的其他外出基带数据(例如,web数据、电子邮件或生成的位置信息)的发送器(TX)处理电路。发送器处理电路可以编码、调制、多路复用和/或数字化外出的基带数据以产生经处理的基带或IF信号。RF收发器可以从发送器处理电路接收外出的基带或中间频率(IF)信号并且将基带或IF信号上变频成经由天线发送的RF信号。
处理器105处理可以被加载到存储器135中的指令。取决于特定实现方式,处理器105包括数个处理器、多处理器核或其他一种或多种类型的一个或多个处理设备。在一些实施例中,处理器105可以是或者包括一个或多个图形处理器,用于处理或渲染图形和/或视频数据供显示器130呈现。在一个或多个实施例中,处理器105可以包括微处理器或微控制器。在一个实施例中,存储器135连接到处理器105。存储器135的一部分可以包括随机存取存储器(RAM),而存储器135的另一部分可以包括非易失性存储器,例如闪存、光盘、可重写磁带或任何其他类型的永久性存储装置。
在一个实施例中,处理器105执行存储在存储器135中的OS程序150以便控制客户端设备100的整体操作。在一个或多个实施例中,处理器105控制无线通信单元145对前向信道信号的接收以及对反向信道信号的发送。
在一个实施例中,处理器105能够执行驻存在存储器135中的其他进程和程序,比如多媒体程序155。处理器105可以按照执行进程所要求的将数据移入或移出存储器135。处理器105还连接到I/O接口125。I/O接口125支持使用可以连接到客户端设备100的其他设备输入和输出数据。例如,I/O单元125可以提供连接以用于通过键盘、鼠标、语音控制、遥控器或其他合适的输入设备的用户输入。I/O单元125还可以将输出发送到显示器、打印机或其他合适的输出设备。
显示器130提供了一种在视觉上向用户呈现信息的机制。在一个实施例中,显示器130可以是液晶显示器(LCD)、发光二极管(LED)、有机LED(OLED)或能够渲染文本和/或图形的其他显示器。显示器130还可以是向用户指示信息的一个或多个显示光。在一个或多个实施例中,显示器130是允许用户输入被客户端设备100接收和解释的触摸屏。多媒体程序155被存储在存储器135中并且可以由处理器105执行。
图2示意了根据一个实施例的用于流式传输多媒体内容的示例联网系统200。在一个实施例中,系统200包括网络205,其提供各种计算机和其他设备之间的通信链路。网络205可以包括任何合适的连接,比如有线、无线或光纤链路。在一个或多个实施例中,网络205代表互联网的至少一部分并且可以包括世界范围内的一批网络和使用协议中的传输控制协议/互联网协议(TCP/IP)套件来彼此通信的网关。然而,可以在系统200中使用(一个或多个)任何其他的公共和/或私人网络。在一个实施例中,系统200可以使用数个不同类型的网络来实现,例如内联网(intranet)、局域网(LAN)、广域网(WAN)、云计算网络等。
服务器计算机210-215和客户端设备220-235连接到网络205。客户端设备220-235中的每一个可以例如代表图1中的客户端设备100。在该例子中,客户端设备220-235是服务器计算机210-215的客户端。在一个实施例中,系统200可以包括附加的服务器计算机、客户端设备或其他设备。在一个实施例中,服务器210代表多媒体流式传输服务器,而服务器215代表能够播放比如广告的内容的内容服务器。
在一个或多个实施例中,网络205包括在无线覆盖区域内的基站、eNodeB、接入点或提供到网络205的无线宽带接入的其他部件以及客户端设备220-235的无线网络。在一个或多个实施例中,网络205中的基站或eNodeB可以使用正交频分多路复用(OFDM)或OFDM接入(OFDMA)技术彼此以及与客户端设备220-235通信。
在一个实施例中,客户端设备220-235从多媒体流式传输服务器210接收被流式传输的多媒体内容。在一个或多个实施例中,客户端设备220-235使用通过MMTP分发的DASH分段接收多媒体内容。在其他实施例中,客户端设备220-235可以通过网络使用实时流式传输协议(real-time streaming protocol,RTSP)、实时传输协议(real-time transportprotocol,RTP)、HTTP适应性流式传输(HTTP adaptive streaming,HAS)协议、HTTP直播流式传输(HLS)协议、平滑流式传输和/或用于流式传输内容的其他类型的标准接收多媒体内容。
应当注意,对图1中客户端设备100和图1中联网系统200的示意并不意味暗含对实施例可以被实施的方式加以物理或架构限制。每个图中的各种部件可以被组合、进一步细分或省略并且可以根据特定需要添加附加部件。另外,客户端设备和网络可以呈多种多样的形式和配置,并且图1和图2没有将实施例的范围限制于任何特定的实现方式。
图3示意了示例DASH架构300。如在图3中示出的,架构300包括(例如,从广播网络)接收MMTP分组310、将DASH分段325转发/发送到HTTP高速缓存330的DASH分段重建实体310以及DASH流式传输客户端340。DASH客户端340将HTTP请求335提供到HTTP高速缓存330并接收HTTP响应336。如果通过MMTP接收DASH分段325的DASH流式传输客户端340具有HTTP/1.1高速缓存(例如,HTTP高速缓存330),则由DASH流式传输客户端340通过HTTP高速缓存330消耗(consume)经重建的DASH分段325。完整的DASH分段325一经DASH分段重建实体320重建,它们就被移至HTTP高速缓存330,然后DASH流式传输客户端340通过正常的HTTP/1.1请求335/响应336操作接收DASH分段325。
当例如通过广播信道流式传输DASH呈现时,可以不再使用HTTP协议。MTTP提供必要的工具来支持DASH呈现的分发。DASH呈现包括作为MPD和数据分段(初始化和媒体分段)的呈现信息。MPD构成呈现的呈现信息的核心部分。MPD被指派用于识别呈现的类型的其自己的多用途互联网邮件扩展(MIME)类型:“application/dash+xml”。MPD被内嵌在消息传递接口(message passing interface,MPI)表中,MPI表转而使用MPI消息来分发。所述消息的格式可以是二进制或者XML。在XML格式的情形下,使用<![CDATA[]]>(例如,被标记以让解析器解释为仅字符数据,而非标记数据)封装来内嵌MPD。使用相同机制分发MPD更新。通过在该特定分组的信令消息中对表识别符进行检查来发现所述更新。然后,由客户端(DASH客户端)使用MPD来驱动呈现。要求由MPD寻址的所有分段应当在接收器侧容易地可用,即,在其分段可用性开始时间之前被分发和复原。这可以通过适当地设置分发调度和假想接收器缓冲器模型(hypothetical receiver buffer model,HRBM)参数来确保。
图4示意了由实施例实现的MPD文件400的示例结构。MPD文件400包括媒体呈现(media presentation)402、时段(period)404、适应集(adaptation set)406、表示(representation)408、初始分段410和媒体分段41a-412b。在一个或多个实施例中,MPD文件400可以在联网系统200中实施。
参考图3和图4,在DASH协议中,可以执行内容准备步骤,在其中内容被分段成多个分段。可以创建初始化分段以携带用于配置媒体播放器的信息。所述信息允许媒体分段被客户端设备(例如,DASH客户端340)消耗。所述内容可以被编码成多个变体,例如若干比特率。每个变体对应于内容的表示408。表示408可以彼此替代或者可以彼此补充。在前一种情形下,客户端设备从可替代表示408的群组当中仅选择一个可替代者。可替代表示408被分组在一起作为适应集406。媒体呈现限定具有一个或多个连续时段404的视频序列,所述一个或多个连续时段404从开始到结束将视频分解。每个时段404包含多个适应集406,所述多个适应集406包含包括音频/视频体验的内容。该内容可以是多路复用的(muxed),例如,包括在基于国际标准组织(ISO)媒体文件格式(ISOBMFF)的媒体文件(MPU)级别(参见例如“Information technology-High efficiency coding and media delivery inheterogeneous environments-Part 1:MPEG media transport(MMT)(信息技术——异构环境下的高效率编码和媒体分发——第一部分:MPEG媒体传输(MMT))”,ISO/IEC JTC 1/SC29,2013,2013年4月26日,“Part 11:MPEG Composition Information(第二部分:MPEG组成信息)”,ISO/IEC JTC 1/SC 29 N14361,2014年4月4日)的视频和音频内容但不在ISOBMFF容器内的内容。每个内容分量被实现为ISOBMFF容器的序列。在一个例子中,可以存在一个适应集406或表示在MPU的基本流中的内容。
适应集406可以使能像对于音频的多语言支持那样的特征。每个适应集406包含多个表示408,每个表示是适应性流式传输体验中的单个流。在一个例子中,第一表示408可以提供640x480@500Kbps,而第二表示408可以提供640x480@250Kbps。每个表示408被分成媒体分段,实质上是所有基于HTTP的适应性流式传输技术使用的数据块。数据块可以呈现于离散文件中,像在HTTP直播流式传输(HLS)中那样,或者像在单个媒体文件中的字节范围。与对于单个音频/视频事件可能创建数百上千的文件的块化技术相比,以单个文件的呈现帮助提高文件管理和高速缓存效率。
客户端设备可以继续添加包含附加媒体分量的互补表示408。可以将提供用于DASH流式传输的内容描述给客户端设备。这可以使用MPD文件400来完成。MPD文件400是一种可扩展标记语言(extensible markup language,XML)文件,其包含对内容的描述、内容的时段404,适应集406、内容的表示408以及如何存取每则内容。MPD元素是MPD文件400中的主要元素,原因是其包含关于内容的一般信息,比如其类型以及内容可用的时间窗。
一个或多个时段404每一个描述内容的时间分段。每个时段404可以包含被分组成一个或多个适应集406的内容的一个或多个表示408。每个表示408是借助特定配置对一个或多个内容分量的编码。表示408的不同之处主要在于其带宽要求、其包含的媒体分量、使用的编解码器、语言等。MPD文件400识别各种内容分量以及所有可替代流的位置。这使得DASH播放器(例如,图1中的客户端设备100、图2中的客户端设备220、230、225、235)能够识别并开始初始分段的回放、如有需要则在表示408之间切换以适应改变的CPU和缓冲器状态并改变适应集406以响应用户输入。
当使用乐器数字接口(musical instruments digital interface,MIDI)处理单元(MIDI processing unit,MPU)模式分发DASH内容时,每个表示408被视为MPU。重要的是要注意:表示408的所有分段的串接产生片段化的ISOBMFF可兼容文件,其等价于用MMTP术语来说的MPU。表示408的初始化分段是MPU元数据并且在分发期间被适当地标记以确保其被客户端设备/接收器复原。须重复分发MPU元数据以确保所有客户端设备将最终能够将其复原,而不管其加入会话的时间。MPU模式提供了一种通过将格式表(format table,FT)字段设置到MPU元数据来标记这些重要分组的手段。类似地,片段元数据对于每个片段来说是重要的并且也应当被重复分发以增加复原的概率。
然后,通过使用相同的分组id(packet_id)和MPU序列号标记表示408的所有分段以将它们标记为属于相同的MPU。由在媒体呈现(MP)表中提供的识别符映射(Identifier_mapping)语法元素来提供表示408与packet_id和MPU序列号之间的映射。Identifier_mapping的一个用法是提供如在MPD中提供的表示id(representation_id)。可以代替地使用其他方法,例如,使用用于该表示的所有分段的URL模板。
在发送器侧,数据在电影片段的基础上被分发。在接收器侧(例如,客户端设备),每个媒体分段需要被适当地和及时地复原。然后,需要让接收器能够识别分段边界和分段信息。例如,通过使用分段索引盒(“sidx”)的存在从当前和之后的分段识别分段的边界来复原分段;通过检查电影片段中的第一样本(例如,从“tfdt”盒或“sidx”盒中提取出)的时戳并使用MPD以识别具有相同开始时间的媒体分段来复原分段;或者可以通过按用于表示408的媒体分段的持续时间划分片段开始时间来从分段持续时间确定分段边界。
图5示意了由一个或多个实施例实施的片段化的基于国际标准组织(ISO)媒体文件格式(ISOBMFF)的媒体文件500的示例结构。在一个或多个实施例中,ISOBMFF媒体文件500可以在联网系统200(图2)中实施。在DASH的一种部署场景中,使用了ISOBMFF格式及其衍生格式(例如,MP4和3GP文件格式)。内容被存储在电影片段中。每个电影片段包含媒体数据和对应的元数据。媒体数据可以包括来自表现408(图4)的所有媒体分量的一批媒体样本。每个媒体分量被描述为文件的轨道。
在DASH中,客户端设备完全负责媒体会话并通过在任何特定时间决定要消耗哪个表示408(图4)来控制速率适应。DASH因此是一种客户端驱动的媒体流式传输解决方案。
当在DASH中使用通用文件分发(generic file delivery,GFD)模式时,DASH表示408(图4)的每个分段被作为常规文件分发。可以使用packet_id建立这些分段之间的连接。所述文件(传输对象)和分段信息之间的连接使用MP表中的identifier_mapping信息来建立。在这种情形下最适当的映射可以是URL模板或URL列表。基于该映射,可以确定分段号和分段URL。
图6示意了根据一个实施例的DASH系统600,其示出了不带有HTTP高速缓存、利用(广播)DASH分段缓冲器610的DASH客户端设备605。对于使用MMTP来用于DASH服务的分发的DASH使用应用,MPD可以被接收为其中MIME类型被设置为application/dash+xml的MPI_table()。MMTP提供用于任何类型的通用文件的分发的GFD模式。任何DASH分段可以被使用MMTP的GFD模式(例如,通过单向广播网络)作为通用文件分发。在一个实施例中,MMTP分组310被DASH分段重建实体320(图3)重建为DASH分段325。MMTP的MPU模式被用于分发MPU。因此,当一DASH分段325也具有‘mpuf’作为可兼容印记(brand)时,可以使用MPU模式来分发该DASH分段325。在一个实施例中,通过MMTP接收DASH分段325的DASH客户端设备605不具有HTTP/1.1高速缓存。在一个实施例中,由DASH客户端设备605通过DASH分段缓冲器610消耗经重建的DASH分段325。完整的DASH分段325一经重建,它们就被移至DASH分段缓冲器610,所述DASH分段缓冲器610将DASH分段325与关联的URL存储在一起。DASH客户端处理620进而作出请求并从DASH分段缓冲器610接收响应。在一个实施例中,DASH客户端处理包括下面描述的架构800(图8)的部件/元素。
图7示意了根据一个实施例的带有一个或多个DASH分段705的示例(广播)DASH分段缓冲器610,每个DASH分段705包括统一资源定位符(URL)710信息连同关联的分段720。当使用GFD模式时可以从GFD表找到DASH分段705的关联URL 710,或者,当使用MPU模式时,可以从mmpu盒找到DASH分段705的关联URL 710。DASH客户端设备605在这个情形下通过使用URL 710作为用于搜索的索引查找DASH分段缓冲器610以找到适当的分段720。可以存在多于一个的被分发到DASH分段缓冲器610中的表示408(图4),每个表示408包括不同数据速率、视频质量和稳健性等级。在一个实施例中,如果没有找到期望质量等级的分段720,则可以发现(如果可用的话)下一较低质量等级的分段720。
在一个实施例中,提供不同的比特率来用于处理网络拥塞,例如,随着分段缓冲器610变满,比特率被减小。在一个例子中,网络拥塞可能不是遭遇的问题,但是信号强度和减损可能造成问题。在这种情形下,可以利用更多的前向纠错(FEC)比特和更少的数据比特来选择更加稳健的信号。在使用实施例的一个例子中,两个服务是同时播出的:一个服务用于固定TV而另一服务用于移动TV。固定TV服务的数据速率比移动TV服务的数据速率高,其通过发送附加FEC比特而实现更高等级的稳健性。
图8示意了根据一个实施例的用于在图6中示出的客户端设备605的DASH客户端处理620的示例架构800。在一个实施例中,架构800示出了被用于使用DASH分段缓冲器610的DASH客户端处理620的元素的一部分。在一个实施例中,架构800包括MMTP分组过滤器805、MMTP信号消息解析器810、FEC解码缓冲器820、去抖动缓冲器825、MMTP解封装缓冲器830、HTTP引擎850、MPEG-H CI解析器835、(DASH)MPD解析器840、DASH分段缓冲器610、媒体引擎860和呈现引擎870。
在一个实施例中,MMTP分组过滤器805从广播网络(例如,单向广播网络)接收MMTP分组并将它们分发到适当的处理块:MMTP信号消息解析器810或FEC解码缓冲器820。在一个实施例中,MMTP分组过滤器805根据每个MMTP分组的packet_id执行下面的检查。当DASH客户端设备605被调谐到具体服务时,则由处理块(未示出)仅将MMTP信令消息的packet_id给予MMTP分组过滤器805。在MPT消息(MPT_message)被MMTP信号消息解析器810处理之后,MMTP分组过滤器805被给予媒体分量的packet_id并且MMTP分组过滤器805开始利用媒体分量过滤MMTP分组。
在一个实施例中,MMTP信号消息解析器810从MMTP分组过滤器805接收MMTP分组并解析分组中携带的MMTP信令消息。将从MMTP信令消息取回的信息分发到适当的处理块。在一个实施例中,当DASH客户端设备605被调谐到具体服务时,MMTP信号消息解析器810首先寻找MPT_message并对其进行处理以获取MMT资源和其packet_id的列表。每当接收到MPI消息(MPI_message)时,MMTP消息解析器810就处理MPI_table()的PI_content_type_byte字段,然后将携带为MPI_table()的PI_content_byte的数据分发到MPEG-H CI解析器835、MPD解析器840或者呈现引擎870。在一个实施例中,如果PI_content_type_byte的值为HTML5,则将所包含的数据分发到呈现引擎870。如果PI_content_type_byte的值为MPEG-H CI,则将所包含的数据分发到MPEG-H CI解析器835。如果PI_content_type_byte的值为DASHMPD,则将所包含的数据分发到(DASH)MPD解析器840。
在一个实施例中,每当接收到AL_FEC消息时,就将在所述消息中的信息发信(signal)到FEC解码缓冲器820。每当接收到HRBM消息时,就将在所述消息中的信息发信到去抖动缓冲器825。在一个实施例中,MPEG-H CI解析器835从MMTP信号消息解析器810接收MPEG-H CI并对其进行处理。MPU的第一接入单元的呈现时间从参考这样的MPU的‘MediaSync’元素得知并且被分发到呈现引擎870。被DASH MPD描述的第一分段的第一接入单元的呈现时间也从参考相关的DASH MPD文件的‘MediaSync’元素得知并且被分发到呈现引擎870。
在一个实施例中,(DASH)MPD解析器840通过MMTP信号消息解析器810接收DASHMPD并且对其进行处理。(DASH)MPD解析器840将每个DASH分段的相对呈现时间提供给呈现引擎870。在一个实施例中,FEC解码缓冲器820接收带有专用packet_id的MMTP分组并立刻将分组复制到去抖动缓冲器825。如果存在任何直到由MMTP信号消息解析器810发信的AL_FEC消息的保护窗时间才接收到的分组,则将修复操作应用到接收到的分组。如果分组被复原,则它们也被立刻复制到去抖动缓冲器825。
在一个实施例中,去抖动缓冲器825从FEC解码缓冲器820接收MMTP分组。去抖动缓冲器825存储这些分组,直到自从在每个MMTP分组的time_stamp字段中指定的时间开始已经经过了由HRBM消息提供的fixed_end_to_end_delay为止并且将它们复制到MMTP解封装缓冲器830。在一个实施例中,MMTP解封装缓冲器830对从去抖动缓冲器825接收的MMTP分组解分组并重建MPU。经重建的MPU被分发到媒体引擎860。
在一个实施例中,HTTP引擎850通过宽带网络利用从MPD解析器840接收的URL作出GET请求并接收作为响应的DASH分段。接收的DASH分段被分发到DASH分段缓冲器610。
在一个实施例中,DASH分段缓冲器610从HTTP引擎850接收DASH分段,并且一经完成对先前分发的DASH分段的处理就将它们分发给媒体引擎860。在一个实施例中,媒体引擎860接收MPU和DASH分段并利用适当的解码器将它们解码。媒体引擎860将解码的结果分发到呈现引擎870。在一个实施例中,呈现引擎870从MMTP信号消息解析器810接收HTML 5文档。呈现引擎870在由HTML 5文档指定的位置中并且在由MPEG-H CI解析器835和MPD解析器840提供的时间渲染来自媒体引擎860的媒体数据。
图9a示意了根据一个实施例的流程图900,其示出了URL信息的提取和将提取的信息与分段一起存储在(广播)分段缓冲器中。在一个实施例中,流程图900在过程的开始901处开始。在框902中接收MMTP分组。在一个实施例中,在框903中,确定是否接收了完整的分段。如果还没有接收到完整的分段,则过程在框902处继续并且进行直到接收了完整的分段为止。在一个实施例中,在框904中,确定模式是MPU模式或者是GFD模式。如果模式被确定为是MPU模式,则流程进行到框905。如果模式被确定为是GFD模式,则流程进行到框906。
在一个实施例中,在框905中,从MPU中提取URL和DASH分段。在框906中,使用GFD传输(GFD transmission,GFDT)提取URL和DASH分段。在一个实施例中,在框907中,被提取的分段和关联URL被一起存储在(DASH)分段缓冲器中。在框908中,确定是否到达会话的结尾。如果到达会话的结尾,则过程900进行到框909,在框909处过程结束。如果确定没有到达会话的结尾,则过程900进行到框902。
图9b示意了根据一个实施例的示出了基于URL信息的DASH分段处理的流程图950。在一个实施例中,基于接收到MPD和一个或多个分段,流程图950在过程的开始951处开始。在框952中,对MPD进行解析以用于获取关于分段的信息。在一个实施例中,在框953中,基于来自客户端设备的请求,确定所要求的分段。在框954中,选择DASH分段缓冲器中的第一分段。在一个实施例中,在框955中,确定所选择的分段的关联URL是否匹配所要求的分段的URL。如果在框955中出现匹配,则过程950进行到框957。如果在框955中不出现匹配,则过程950进行到框956。在框956中,选择下一分段并且过程950进行到框955。
在一个实施例中,在框957中,对DASH分段进行处理以用于在客户端设备上呈现。在框958中,确定过程900是否处于MPU中要处理的分段的列表的结尾。如果过程900处于列表的结尾,则过程950进行到框959并且过程900结束。如果过程900还没有处于列表的结尾,则过程950进行到框953以继续过程950。
图10是根据一个实施例的通信系统的示意图。通信系统1000可以包括发起外出的通信操作的通信设备(发送/发起者设备1012)和通信网络1010,发送设备1012可以使用通信网络1010来发起并进行与通信网络1010内的其他通信设备的通信操作。例如,通信系统1000可以包括从发送设备1012接收通信操作的通信设备(接收设备/收听者1011)。尽管通信系统1000可以包括若干发送设备1012和接收设备1011,但是在图10中仅示出了每一者中的一个以简化图。
可以使用操作成创建通信网络的任何合适的电路、设备、系统或者电路、设备、系统的组合(例如,包括通信塔和电信服务器的无线通信基础设施)来创建通信网络1010。通信网络1010可能够使用任何合适的通信协议提供通信。在一些实施例中,通信网络1010可以支持例如传统的电话线路、有线电视、Wi-Fi(例如,802.11协议)、高频率系统(例如,900MHz、2.4GHz和5.6GHz通信系统)、红外、其他相对局部化的无线通信协议或其任意组合。在一些实施例中,通信网络1010可以支持由无线和蜂窝电话及个人电子邮件设备(例如,)使用的协议。这样的协议可以包括例如GSM、GSM加EDGE、CDMA、四频(quadband)和其他蜂窝协议。在另一例子中,远程通信协议可以包括Wi-Fi和用于使用VOIP或LAN拨打或接听呼叫的协议。发送设备1012和接收设备1011在位于通信网络1010内时可以通过比如路径1013的双向通信路径通信。发送设备1012和接收设备1011二者都可能够发起通信操作并接收被发起的通信操作。
发送设备1012和接收设备1011可以包括用于发送和接收通信操作的任何合适的设备。例如,发送设备1012和接收设备1011可以包括智能电视设备、媒体播放器、蜂窝电话或固定电话、具有音频和/或视频能力的个人电子邮件或消息设备、比如iPAQ之类的口袋大小的个人计算机、个人数字助理(PDA)、桌面计算机、膝上计算机以及能够无线地(有或没有无线使能的附件系统的辅助)或经由有线路径(例如,使用传统的电话线)进行通信的任何其他设备,比如图1中的客户端设备100,图2中的客户端设备220、230、225、235,图6中的DASH客户端设备605。通信操作可以包括任何合适形式的通信,例如包括语音通信(例如,电话呼叫)、数据通信(例如,电子邮件、文本消息、媒体消息)或语音通信和数据通信的组合(例如,视频会议)。
图11示意了根据一个实施例的不带有HTTP高速缓存、利用(广播)DASH分段缓冲器610的DASH客户端设备1120。在一个实施例中,系统1100包括客户端设备1120(例如,智能TV、数字TV、移动计算机、平板等)、可选的云或服务器设备1130和网络连接设备1110。在一个实施例中,客户端设备1120包括显示器1121、相机或成像设备1122(与TV 1120集成或者与TV 1120分离)、(一个或多个)麦克风1123、传感器1124(例如,光、温度、振动、位置/GPS、面部识别、无线设备传感器等)、用于管理应用(比如,应用1 1126、应用2 1127直到应用N1128,N为正整数)的应用管理器模块1125、DASH客户端处理620和DASH分段缓冲器610。在一个实施例中,DASH客户端处理620如上面所述地执行DASH分段和MPD处理。
在一个实施例中,显示器1121可以是与电视设备1120分离的设备或者与电视设备1120集成。在一个实施例中,相机1122可以是与电视设备1120分离的设备或者与电视设备1120集成。在一个实施例中,网络连接设备1110可以包括网络接口,比如网络调制解调器、路由器等,用于处理客户端设备1120和服务器设备1130之间的通信并用于形成客户端设备1120可以与之连接的本地网络(例如,图2中的网络205)。
在一个实施例中,客户端设备1120可以包括输入机构(例如,触摸屏、语音识别、键盘、遥控器等)、通信电路、控制电路、音频输出和任意其他合适部件。
在一个实施例中,由显示器1121、输入机构、音频输出和通信电路利用的所有应用可以互连并由控制电路管理。在一个例子中,能够将包括视频、音乐等的内容发送到其他设备的手持音乐播放器可以被结合到客户端设备1120中。
在一个实施例中,音频输出可以包括用于将音频提供给客户端设备1120的用户的任何合适的音频部件。例如,音频输出可以包括内置到客户端设备1120中的一个或多个扬声器(例如,单声道或立体声扬声器)。在一些实施例中,音频输出可以包括远程地耦合到客户端设备1120的音频部件。例如,音频输出可以包括可以借助线缆(例如,耦合到带有插孔的客户端设备1120)或无线地(例如,头戴式受话器或耳机)耦合到通信设备的耳机、头戴式受话器或耳塞。
在一个实施例中,显示器1121可以包括用于提供用户可视的显示的任何合适的屏幕或投影系统。例如,显示器1121可以包括结合在客户端设备1120中的屏幕(例如,LCD屏幕)。作为另一例子,显示器1121可以包括用于在远离客户端设备1120的表面上提供内容的显示的可移动显示器或投影系统(例如,视频投影仪)。显示器1121可以操作成在控制电路的指示下显示内容(例如,关于通信操作的信息或关于可用的媒体选择的信息)。
在一些实施例中,客户端设备1120的通信电路可以操作成使用合适的通信协议创建通信网络。例如,所述通信电路可以使用短程通信协议创建短程通信网络以连接到其他通信设备。例如,所述通信电路可以操作成使用协议创建与其他电子设备的本地通信网络。
在一个实施例中,客户端设备1120的控制电路可以操作成执行在客户端设备1120上实施的一个或多个应用1 1126到N 1128的操作。可以实施任何合适数量或类型的应用。尽管下面的描述将枚举不同的应用,但是将可以理解,所述应用中的一些或全部可以组合成一个或多个应用。示例应用可以包括应用连接应用、对话应用、地图应用、媒体应用(例如,QuickTime、MobileMusic.app(应用)、或MobileVideo.app)、社交网络应用等。在一些实施例中,客户端设备1120可以包括操作成执行通信操作的一个或若干个应用。例如,客户端设备1120可以包括消息应用、邮件应用、电话应用、语音邮件应用、即时消息应用(例如,用于聊天)、视频会议应用、传真应用或用于执行任何合适的通信操作的任何其他合适的应用。
在一个实施例中,用户可以指示客户端设备1120使用任何合适的方法执行通信操作。作为一个例子,用户可以从另一设备接收通信请求(例如,呼入的电话呼叫、电子邮件或文本消息、即时消息)并且可以通过接受所述通信请求来发起通信操作。作为另一个例子,用户可以通过识别另一通信设备并发送发起通信操作的请求(例如,拨打电话号码、发送电子邮件、打出文本消息或选择聊天网名(screen name)并发送聊天请求)来发起通信操作。
图12示出了根据一个实施例的使用DASH而不使用HTTP的内容分发的过程1200。在一个实施例中,过程1200中的框1210包括由客户端设备(例如,图1中的客户端设备100,图2中的客户端设备220、225、230、235,客户端设备605)接收MPD文件(例如,图4中的MPD文件400)和一个或多个DASH分段。在一个实施例中,在框1220中,MPD文件中的信息被用于过滤一个或多个DASH分段。在一个实施例中,在框1230中,经过滤的一个或多个DASH分段被存储在分段缓冲器中。在框1240中,由客户端设备基于所述信息从分段缓冲器请求一个或多个特定DASH分段。
在一个实施例中,来自MPD文件的信息是URL信息。在一个实施例中,一个或多个DASH分段和关联的URL信息被一起存储在分段缓冲器中。在一个实施例中,过程1200可以包括由客户端设备调谐到一服务以用于通过MMTP而不使用HTTP接收一个或多个DASH分段。
在一个实施例中,客户端设备包括不带有HTTP高速缓存的分段缓冲器。在一个实施例中,过程1200可以使得(provide that)一个或多个DASH分段包括经重建的DASH分段,并且经重建的DASH分段在重建之后立即被存储在分段缓冲器中。
在一个实施例中,一个或多个经重建的DASH分段包括多个表示。在一个实现方式中,多个表示每个均包括不同数据速率(例如,250Kbps、500Kbps、1000Kbps等)和不同视频质量等级(例如,超高清晰度(UHD)、高清晰度(HD)、标准清晰度(SD)、640x480、1024x768等)中的一个或多个。在一个实施例中,过程1200可以包括:如果在分段缓冲器中没有发现具有期望视频质量等级的用于特定表示的所请求的DASH分段,则修改URL并搜索具有下一较低视频质量等级的所请求的DASH分段的另一表示。
在一个实施例中,过程1200可以包括:URL信息被用作用于针对一个或多个特定DASH分段搜索分段缓冲器的索引。
本领域技术人员将知晓,上面描述的前述示例架构根据所述架构可以以许多方式来实施,例如被实施为供处理器执行的程序指令,实施为软件模块、微代码,实施为计算机可读介质上的计算机程序产品,实施为模拟/逻辑电路、实施为专用集成电路,实施为固件,实施为消费类电子设备、AV设备、无线/有线发送器、无线/有线接收器、网络、多媒体设备等。另外,所述架构的实施例可以采取整体硬件的实施例、整体软件的实施例或包含硬件和软件元素两者的实施例。
已经参考根据一个或多个实施例的方法的流程图示意和/或框图、装置(系统)和计算机程序产品描述了各实施例。可以由计算机程序指令实施这样的示意/图中的每一个框或其组合。计算机程序指令在被提供给处理器时产生一机器,使得经由处理器执行的指令创建用于实施流程图和/或框图中指定的功能/操作的手段。流程图/框图中的每一个框可以代表硬件和/或软件模块或逻辑,从而实施一个或多个实施例。在可选的实施方式中,框中指明的功能可以不按在图中指明的顺序发生、同时地发生等。
术语“计算机程序介质”、“计算机可用介质”、“计算机可读介质”和“计算机程序产品”一般用于指代比如主要存储器(main memory)、辅助存储器(secondary memory)、可移除存储驱动器、安装在硬盘驱动器中的硬盘之类的介质。这些计算机程序产品是用于将软件提供给计算机系统的手段。计算机可读介质允许计算机系统从计算机可读介质读取数据、指令、消息或消息分组和其他计算机可读信息。计算机可读介质例如可以包括非易失性存储器,例如软盘、ROM、闪存、盘驱动器存储器(disk drive memory)、CD-ROM和其他永久性存储装置。其对于例如在计算机系统之间传输比如数据和计算机指令之类的信息来说是有用的。计算机程序指令可以被存储在计算机可读介质中,计算机可读介质可以指示计算机、其他可编程数据处理装置或其他设备以特定方式发挥功能,以使得存储在计算机可读介质中的指令产生一种制造品,其包括实施在流程图中和/或框图的一个或多个框中指定的功能/动作的指令。
代表本文的框图和/或流程图的计算机程序指令可以被加载到计算机、可编程数据处理装置或处理设备上,以使得在其上执行的一系列操作产生计算机实施的过程。计算机程序(即,计算机控制逻辑)被存储在主要存储器和/或辅助存储器中。计算机程序也可以经由通信接口来接收。这样的计算机程序在被执行时使得计算机系统执行本文讨论的一个或多个实施例的特征。具体地,计算机程序在被执行时使得处理器和/或多核处理器执行计算机系统的特征。这样的计算机程序代表计算机系统的控制器。计算机程序产品包括可以由计算机系统读取并存储用于由计算机系统执行以执行一个或多个实施例的方法的指令的有形存储介质。
尽管已经参考实施例的某些版本描述了实施例,然而其他版本也是可能的。因此,随附的权利要求的精神和范围不应当受限于本文包含的优选版本的描述。

Claims (10)

1.一种用于由设备接收内容的方法,包括:
接收多媒体复用传输协议MMTP分组;
将所述MMTP分组重建成通过超文本传输协议的动态适应性流化传输DASH分段;以及
将DASH分段和DASH分段的关联的统一资源定位符URL存储在分段缓冲器中,
其中,在关联的URL中包含的URL被用作在分段缓冲器中寻找DASH分段的索引。
2.根据权利要求1所述的方法,其中,如果使用通用文件分发GFD模式,则从通用文件分发表GFDT寻找关联的URL。
3.根据权利要求1所述的方法,其中,如果使用媒体处理单元MPU模式,则从mmpu盒寻找关联的URL。
4.根据权利要求1所述的方法,其中,经重建的DASH分段包括一个或多个表示,所述一个或多个表示中的每一个包含不同数据速率、不同视频质量等级和不同稳健性中的至少一个。
5.根据权利要求1所述的方法,进一步包括:
如果在分段缓冲器中未找到期望质量等级的DASH分段,则在分段缓冲器中寻找下一较低质量等级的DASH分段。
6.一种设备,包括:
接收器,被配置成接收多媒体复用传输协议MMTP分组;
处理器,被配置成将所述MMTP分组重建成通过超文本传输协议的动态适应性流化传输DASH分段;以及
分段缓冲器,被配置成将DASH分段和DASH分段的关联的统一资源定位符URL存储在分段缓冲器中,
其中,在关联的URL中包含的URL被用作在分段缓冲器中寻找DASH分段的索引。
7.根据权利要求6所述的设备,其中,如果使用通用文件分发GFD模式,则从通用文件分发表GFDT寻找关联的URL。
8.根据权利要求6所述的设备,其中,如果使用媒体处理单元MPU模式,则从mmpu盒寻找关联的URL。
9.根据权利要求6所述的设备,其中,经重建的DASH分段包括一个或多个表示,所述一个或多个表示中的每一个包含不同数据速率、不同视频质量等级和不同稳健性中的至少一个。
10.根据权利要求6所述的设备,其中,如果在分段缓冲器中未找到期望质量等级的DASH分段,则在分段缓冲器中寻找下一较低质量等级的DASH分段。
CN201480066992.6A 2013-10-07 2014-10-07 用于内容分发的方法和装置 Active CN105830451B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361887846P 2013-10-07 2013-10-07
US61/887,846 2013-10-07
PCT/KR2014/009422 WO2015053530A1 (en) 2013-10-07 2014-10-07 Method and apparatus for content delivery

Publications (2)

Publication Number Publication Date
CN105830451A CN105830451A (zh) 2016-08-03
CN105830451B true CN105830451B (zh) 2019-07-26

Family

ID=52778047

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480066992.6A Active CN105830451B (zh) 2013-10-07 2014-10-07 用于内容分发的方法和装置

Country Status (6)

Country Link
US (1) US9807452B2 (zh)
EP (1) EP3056014B1 (zh)
JP (1) JP6425720B2 (zh)
KR (1) KR102228062B1 (zh)
CN (1) CN105830451B (zh)
WO (1) WO2015053530A1 (zh)

Families Citing this family (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9807452B2 (en) * 2013-10-07 2017-10-31 Samsung Electronics Co., Ltd. Practical delivery of high quality video using dynamic adaptive hypertext transport protocol (HTTP) streaming (DASH) without using HTTP in a broadcast network
US10097294B2 (en) * 2014-01-03 2018-10-09 Lg Electronics Inc. Apparatus for transmitting broadcast signals, apparatus for receiving broadcast signals, method for transmitting broadcast signals and method for receiving broadcast signals
WO2015105391A1 (en) * 2014-01-13 2015-07-16 Lg Electronics Inc. Apparatuses and methods for transmitting or receiving a broadcast content via one or more networks
JP6054324B2 (ja) * 2014-03-06 2016-12-27 株式会社東芝 Mmt送信システム、暗号化処理装置
US9560421B2 (en) * 2014-03-27 2017-01-31 Samsung Electronics Co., Ltd. Broadcast and broadband hybrid service with MMT and DASH
KR101877154B1 (ko) * 2014-04-09 2018-08-07 엘지전자 주식회사 방송 전송 장치, 방송 수신 장치, 방송 전송 장치의 동작 방법 및 방송 수신 장치의 동작 방법
US9635407B2 (en) * 2014-10-16 2017-04-25 Samsung Electronics Co., Ltd. Method and apparatus for bottleneck coordination to achieve QoE multiplexing gains
US10412132B2 (en) * 2015-02-16 2019-09-10 Lg Electronics Inc. Broadcasting signal transmission device, broadcast signal reception device, broadcast signal transmission method, and broadcast signal reception method
WO2016194563A1 (ja) * 2015-06-02 2016-12-08 ソニー株式会社 送信装置、送信方法、メディア処理装置、メディア処理方法および受信装置
CN107710768A (zh) * 2015-06-12 2018-02-16 索尼公司 信息处理设备和信息处理方法
WO2016204815A1 (en) 2015-06-16 2016-12-22 Intel IP Corporation Adaptive video streaming using dynamic radio access network information
WO2017061299A1 (ja) * 2015-10-09 2017-04-13 ソニー株式会社 情報処理装置および情報処理方法
US10771843B2 (en) 2015-12-15 2020-09-08 Telefonaktiebolaget Lm Ericsson (Publ) Media distribution with sample variants for normalized encryption
US10917477B2 (en) 2016-05-25 2021-02-09 Samsung Electronics Co., Ltd. Method and apparatus for MMT integration in CDN
US20170344523A1 (en) * 2016-05-25 2017-11-30 Samsung Electronics Co., Ltd Method and apparatus for presentation customization and interactivity
JP6178893B1 (ja) * 2016-06-03 2017-08-09 日本電信電話株式会社 ユニキャスト配信装置、再生同期システム、ユニキャスト配信方法、およびユニキャスト配信プログラム
CN108235144B (zh) * 2016-12-22 2021-02-19 阿里巴巴(中国)有限公司 播放内容获取方法、装置及计算设备
CN108271068B (zh) * 2016-12-30 2020-04-03 华为技术有限公司 一种基于流媒体技术的视频数据的处理方法及装置
US11606528B2 (en) 2018-01-03 2023-03-14 Saturn Licensing Llc Advanced television systems committee (ATSC) 3.0 latency-free display of content attribute
US11044294B2 (en) * 2018-01-03 2021-06-22 Sony Group Corporation ATSC 3.0 playback using MPEG media transport protocol (MMTP)
US10743069B2 (en) 2018-12-10 2020-08-11 Sony Corporation Delivery of information related to digital rights management (DRM) in a terrestrial broadcast system
US11706465B2 (en) 2019-01-15 2023-07-18 Sony Group Corporation ATSC 3.0 advertising notification using event streams
US11991402B2 (en) 2019-03-26 2024-05-21 Interdigital Vc Holdings, Inc. System and method for multiplexed rendering of light fields
US11290514B2 (en) * 2020-05-18 2022-03-29 Tencent America LLC Method for content preparation templates for 5G common media application format based media streaming
CN111901694B (zh) * 2020-08-06 2022-08-26 海信电子科技(深圳)有限公司 一种mmtp节目的播放方法及装置
CN112601131B (zh) * 2020-12-10 2023-03-21 杭州当虹科技股份有限公司 一种hls视频切片文件存储优化方法
US11533346B2 (en) * 2021-01-05 2022-12-20 Tencent America LLC Methods and apparatuses for dynamic adaptive streaming over HTTP
CN113691880B (zh) * 2021-08-25 2024-04-16 三星电子(中国)研发中心 一种应用于dash低延迟直播流的带宽测量方法和设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102232298A (zh) * 2011-04-07 2011-11-02 华为技术有限公司 媒体内容的传输处理方法、装置与系统
WO2012099399A2 (ko) * 2011-01-18 2012-07-26 삼성전자주식회사 방송통신 융합형 서비스를 위한 전송 방법 및 장치
CN103181186A (zh) * 2010-10-06 2013-06-26 韩国电子通信研究院 提供串流内容的装置及方法

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060179468A1 (en) * 2005-02-04 2006-08-10 Sbc Knowledge Ventures, L.P. System and method of providing a television content guide
US8914835B2 (en) * 2009-10-28 2014-12-16 Qualcomm Incorporated Streaming encoded video data
KR20120010089A (ko) 2010-07-20 2012-02-02 삼성전자주식회사 Http 기반의 멀티미디어 스트리밍 서비스의 품질 향상을 위한 방법 및 장치
WO2012065186A2 (en) 2010-11-12 2012-05-18 Realnetworks, Inc. Traffic management in adaptive streaming protocols
KR20120083820A (ko) * 2011-01-18 2012-07-26 삼성전자주식회사 컨텐츠 전송 시스템에서 컨텐츠 전송 방법 및 장치
TWI575948B (zh) 2011-02-11 2017-03-21 內數位專利控股公司 內容分配及接收方法及裝置
US10433239B2 (en) 2011-04-01 2019-10-01 Intel Corporation Cross-layer optimized adaptive HTTP streaming
US9026671B2 (en) * 2011-04-05 2015-05-05 Qualcomm Incorporated IP broadcast streaming services distribution using file delivery methods
TWI584662B (zh) * 2011-06-01 2017-05-21 內數位專利控股公司 內容傳遞網路互連(cdni)機制
US9386125B2 (en) * 2011-06-13 2016-07-05 Electronic And Telecommunications Research Institute Method for transmitting packet-based media data having header in which overhead is minimized
US9160779B2 (en) 2011-06-30 2015-10-13 Qualcomm Incorporated Dynamic adaptive streaming proxy for unicast or broadcast/multicast services
US9590814B2 (en) 2011-08-01 2017-03-07 Qualcomm Incorporated Method and apparatus for transport of dynamic adaptive streaming over HTTP (DASH) initialization segment description fragments as user service description fragments
US9843844B2 (en) 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
US9055136B2 (en) * 2011-10-13 2015-06-09 Qualcomm Incorporated Controlling streaming delay in networks
KR102003925B1 (ko) * 2011-11-23 2019-10-02 한국전자통신연구원 스케일러빌리티 및 뷰 정보를 제공하는 스트리밍 서비스를 위한 방법 및 장치
KR20130058647A (ko) * 2011-11-25 2013-06-04 (주)휴맥스 Mmt 패키지화 컨텐츠의하이브리드 전송 방법 및 컨텐츠 수신 방법
US9043849B2 (en) * 2011-11-25 2015-05-26 Humax Holdings Co., Ltd. Method for linking MMT media and DASH media
US9712874B2 (en) * 2011-12-12 2017-07-18 Lg Electronics Inc. Device and method for receiving media content
US20130182643A1 (en) 2012-01-16 2013-07-18 Qualcomm Incorporated Method and system for transitions of broadcast dash service receptions between unicast and broadcast
CN109905728A (zh) * 2012-01-19 2019-06-18 Vid拓展公司 使用移动设备接收多媒体内容的方法及该移动设备
US9015477B2 (en) 2012-04-05 2015-04-21 Futurewei Technologies, Inc. System and method for secure asynchronous event notification for adaptive streaming based on ISO base media file format
US9438883B2 (en) * 2012-04-09 2016-09-06 Intel Corporation Quality of experience reporting for combined unicast-multicast/broadcast streaming of media content
US9009764B2 (en) 2012-04-12 2015-04-14 Qualcomm Incorporated Broadcast content via over the top delivery
JP6153298B2 (ja) * 2012-04-24 2017-06-28 シャープ株式会社 配信装置、再生装置、データ構造、配信方法、制御プログラム、および記録媒体
EP2859707B1 (en) * 2012-07-13 2018-01-03 Huawei Technologies Co., Ltd. Signaling and handling content encryption and rights management in content transport and delivery
WO2014012015A2 (en) * 2012-07-13 2014-01-16 Vid Scale, Inc. Operation and architecture for dash streaming clients
JP6348251B2 (ja) * 2012-09-13 2018-06-27 サターン ライセンシング エルエルシーSaturn Licensing LLC 端末装置、受信方法、およびプログラム
WO2014063730A1 (en) * 2012-10-24 2014-05-01 Huawei Technologies Co., Ltd. Communication receiver
JP6254188B2 (ja) * 2013-01-17 2017-12-27 インテル アイピー コーポレーション Imsベースのdashサービスにおいて、プレゼンスサーバによりプレゼンス情報を供給する方法、および、プレゼンスサーバを介してプレゼンス情報を受信するユーザ機器(ue)
US20140282792A1 (en) * 2013-03-15 2014-09-18 Cygnus Broadband, Inc. Video streaming with buffer occupancy prediction based quality adaptation
KR102127685B1 (ko) * 2013-04-17 2020-06-29 삼성전자주식회사 순방향 오류 정정 패킷 송수신 장치 및 방법
KR101484843B1 (ko) * 2013-04-19 2015-01-20 삼성전자주식회사 멀티미디어 전송 시스템에서 미디어 전송 패킷 전송 방법 및 장치
KR101995314B1 (ko) * 2013-04-22 2019-07-02 삼성전자주식회사 Dvb 지상파 방송 시스템에서 mpeg mmt를 위한 시그널링 정보를 송수신하는 장치 및 방법
KR20140126827A (ko) * 2013-04-22 2014-11-03 삼성전자주식회사 Dvb 시스템에서 mmt를 이용하여 방송 서비스를 송수신하는 방법 및 장치
US20150032845A1 (en) * 2013-07-26 2015-01-29 Samsung Electronics Co., Ltd. Packet transmission protocol supporting downloading and streaming
US9807452B2 (en) * 2013-10-07 2017-10-31 Samsung Electronics Co., Ltd. Practical delivery of high quality video using dynamic adaptive hypertext transport protocol (HTTP) streaming (DASH) without using HTTP in a broadcast network
US9729903B2 (en) * 2013-12-31 2017-08-08 Samsung Electronics Co., Ltd. Data transmitting device and method
US9560421B2 (en) * 2014-03-27 2017-01-31 Samsung Electronics Co., Ltd. Broadcast and broadband hybrid service with MMT and DASH
US9614936B2 (en) * 2014-07-04 2017-04-04 Electronics And Telecommunications Research Institute Method and apparatus for processing MPEG media transport protocol packets
WO2016129868A1 (ko) * 2015-02-10 2016-08-18 엘지전자 주식회사 방송 신호 송신 장치, 방송 신호 수신 장치, 방송 신호 송신 방법, 및 방송 신호 수신 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103181186A (zh) * 2010-10-06 2013-06-26 韩国电子通信研究院 提供串流内容的装置及方法
WO2012099399A2 (ko) * 2011-01-18 2012-07-26 삼성전자주식회사 방송통신 융합형 서비스를 위한 전송 방법 및 장치
CN102232298A (zh) * 2011-04-07 2011-11-02 华为技术有限公司 媒体内容的传输处理方法、装置与系统

Also Published As

Publication number Publication date
KR102228062B1 (ko) 2021-03-17
JP2016538754A (ja) 2016-12-08
US9807452B2 (en) 2017-10-31
EP3056014B1 (en) 2020-12-16
US20150100996A1 (en) 2015-04-09
CN105830451A (zh) 2016-08-03
JP6425720B2 (ja) 2018-11-21
WO2015053530A1 (en) 2015-04-16
EP3056014A4 (en) 2017-05-31
EP3056014A1 (en) 2016-08-17
KR20160067126A (ko) 2016-06-13

Similar Documents

Publication Publication Date Title
CN105830451B (zh) 用于内容分发的方法和装置
CN106412621B (zh) 网络直播间的视频显示方法及装置、控制方法与相关设备
JP6612249B2 (ja) メディアデータをストリーミングするためのターゲット広告挿入
JP6106775B2 (ja) ダウンローディング及びストリーミングをサポートするパケット受信方法
KR102249788B1 (ko) Mmt 및 dash를 이용한 브로드캐스트 및 브로드밴드 하이브리드 서비스
ES2731948T3 (es) Método y aparato para almacenamiento en caché flexible de medios distribuidos
AU2014230438B2 (en) Distribution control system, distribution control method, and computer-readable storage medium
CN104904233B (zh) 用于封装国际标准化组织基媒体文件中的运动图像专家组媒体传输资源的方法和装置
EP2437465A1 (en) Method, system and network equipment for implementing http-based streaming media service
WO2007047036A3 (en) System and method of delivering notifications
EP2790375A2 (en) Distribution control system, distribution control method, and computer-readable storage medium
CN106134145A (zh) 自适应媒体流传送
US9781193B2 (en) Distribution control system, distribution system, distribution control method, and computer-readable storage medium
WO2009006192A3 (en) Embedding user equipment information within third party registration messages
EP2779571B1 (en) Distribution control system, distribution system, distribution control method, and computer-readable storage medium
EP2974317B1 (en) Computer system, distribution control system, distribution control method, and computer-readable storage medium
AU2014230422A1 (en) Distribution control system, distribution control method, and computer-readable storage medium
CN104053069A (zh) 分发控制系统、分发系统和分发控制方法
WO2014142343A1 (en) Distribution control system and distribution system
JP2014199648A (ja) 配信制御システム、配信システム、配信制御方法、及びプログラム
CA2953310A1 (en) Reception device, reception method, transmission device, and transmission method
WO2014010444A1 (ja) コンテンツ送信装置、コンテンツ再生装置、コンテンツ配信システム、コンテンツ送信装置の制御方法、コンテンツ再生装置の制御方法、データ構造、制御プログラムおよび記録媒体
US9986010B2 (en) System and method for controlling video and/or audio streams in a web browser
JPWO2014196335A1 (ja) 送信装置、送信方法、受信装置および受信方法
CN112019482B (zh) 基于Web的通信方法及计算机可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant