CN105359536B - 内容供给装置及方法、终端装置、以及内容供给系统 - Google Patents

内容供给装置及方法、终端装置、以及内容供给系统 Download PDF

Info

Publication number
CN105359536B
CN105359536B CN201480038957.3A CN201480038957A CN105359536B CN 105359536 B CN105359536 B CN 105359536B CN 201480038957 A CN201480038957 A CN 201480038957A CN 105359536 B CN105359536 B CN 105359536B
Authority
CN
China
Prior art keywords
units
unit
data
ute
gop
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480038957.3A
Other languages
English (en)
Other versions
CN105359536A (zh
Inventor
山岸靖明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105359536A publication Critical patent/CN105359536A/zh
Application granted granted Critical
Publication of CN105359536B publication Critical patent/CN105359536B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00—Packet switching elements
    • H04L49/20—Support for services
    • H04L49/201—Multicast operation; Broadcast operation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64—Addressing
    • H04N21/6405—Multicasting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/85406—Content authoring involving a specific file format, e.g. MP4 format

Abstract

本公开涉及一种能够在没有延迟的情况下传输片段流的文件传输单位的内容供给装置及方法、终端装置、以及内容供给系统。根据本公开，提供了一种对内容的片段流进行多播传送的内容供给装置，该内容供给装置包括：片段流生成单元，配置为基于内容的源数据生成片段流；以及传送单元，配置为通过将所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE‑多播传送。本公开可以应用于对内容进行FLUTE‑多播传送的系统。

Description

内容供给装置及方法、终端装置、以及内容供给系统
技术领域
本公开涉及内容供给装置、内容供给方法、程序、终端装置、以及内容供给系统，更特别地，涉及在内容的流数据根据单向传输的文件传送而被(FLUTE)传送时适当地使用的内容供给装置、内容供给方法、程序、终端装置、以及内容供给系统。
背景技术
已经知道了运动图片专家组-HTTP动态自适应流(以下，称为“DASH”)(MPEG-DASH)(例如，见非专利文献1)，其使用与网站的浏览相同的HTTP作为可用于经由互联网的运动图像传送的国际标准化运动图像传输协议。
在DASH中，采用了自适应流技术。换句话说，内容供给侧被配置为准备包括同一主题的内容且根据图像质量的差异、视图大小的角度等比特率不同的多个流。另一方面，接收侧可以根据互联网的通信环境、接收侧的解码能力等从供给侧准备的多个流中选择最佳流，并且获取和再生所选择的最佳流。
此外，从供给侧向接收侧供给称为媒体演示说明(MPD)的图元文件，使得接收侧可以适当地选择和获取流。
在MPD中描述了把被分成块的内容的流数据(诸如音频/视频/字幕等的媒体数据)向接收侧供给的服务器(供给源)的地址(url信息)。接收侧可以基于url信息访问充当内容供给源的服务器，请求流数据，以及根据请求接收和再生从服务器HTTP-单播传送(HTTP-unicast-delivered)的流数据。
图1示出了基于DASH以流方式传送内容的内容供给系统的配置实例。
内容供给系统10包括供给内容的多个内容供给装置20以及接收和再生内容的多个DASH客户端30。DASH客户端30可以经由使用互联网11的内容传送网络(CDN)12连接至内容供给装置20。
内容供给装置20传送包括同一主题的内容且比特率不同的多个流。内容供给装置20包括信道流光21、DASH片段流光22、以及DASH MPD服务器23。
信道流光21管理待传送到DASH客户端30的内容的源数据，从源数据生成具有不同比特率的多条流数据，并将多条流数据输出到DASH片段流光22。
DASH片段流光22通过临时地将每条流数据分成段而生成诸如片段化MP4(fragmented MP4)的片段流，并且保持所生成的片段流作为文件。此外，响应于作为web服务器的DASH客户端30的请求(HTTP请求)，DASH片段流光22将所保持的片段流文件HTTP单播传送到请求源。DASH片段流光22将包括指示片段流文件的供给源的地址的元数据通知DASHMPD服务器23。
DASH MPD服务器23生成MPD，其中，例如，描述了指示片段流文件的供给源(即，DASH片段流光22)的地址。DASH MPD服务器23根据来自作为web服务器的DASH客户端30的请求(HTTP请求)，将所生成的MPD HTTP-单播传送到请求源。
DASH客户端30请求DASH MPD服务器23传输MPD，并且接收响应于请求而被HTTP-单播传送的MPD。DASH客户端30基于接收的MPD请求DASH片段流光22传输片段流文件，并且接收和再生响应于请求而被HTTP-单播传送的片段流文件。
CDN 12包括缓存服务器(未示出)，并且缓存服务器缓存MPD或者经由CDN 12被HTTP-单播传送的片段流文件。缓存服务器可以向请求源的DASH客户端30，而不是向充当web服务器的DASH MPD服务器23或者DASH片段流光22，HTTP-单播传送所缓存的MPD或者片段流文件。
引用列表
非专利文献
非专利文献1：Mitsuhiro Hirabayashi,“Achieving Uninterrupted VideoStreaming Using Existing Web Servers,”NIKKEI ELECTRONICS,2012年3月19日。
发明内容
发明要解决的课题
如上所述，在DASH中，实施了使用HTTP-单播传送的自适应流技术。
如果接收侧可以接收例如FLUTE-多播传送的或者RTP-多播传送的流以及HTTP-单播传送的流，则理想的是，使用传送路径传送流，并且使得接收侧能够适应性地选择流。
换句话说，由于FLUTE-多播传送和RTP-多播传送保证了QoS(例如，保证了的频带/延迟)，因此当传送诸如实时视频的其中实时属性很有必要的内容时，预计接收侧可以比HTTP-单播传送中更稳定地接收和再生流。
这里，将考虑如下的情况：其中，从实时捕获的内容的源数据生成诸如片段化MP4的片段流，然后顺序FLUTE-多播传送。
图2示出了当FLUTE-传送(FLUTE-delivered)片段化MP4时，根据相关技术的文件传输单位生成方法的概述。
换句话说，当FLUTE-传送片段化MP4时，以GOP为单位生成文件传输单位，GOP用作可随机访问并FLUTE-多播传送的片段化MP4的最小单位。实际上，还存在其中以整数倍的GOP单位生成文件传输单位的情况，但是在该说明书中，假设以GOP为单位生成文件传输单位。
在图2的实例中，假设片段化MP4的GOP范围的数据按时间顺序包括样本(s)(1)、样本(s)(2)、以及样本(s)(3)。在生成了样本(s)(1)至样本(s)(3)之后生成文件传输单位并FLUTE-多播传送。
图3示出了当FLUTE-传送片段化MP4时根据相关技术的文件传输单位的数据结构。
文件传输单位(媒体片段)包括styp、moof、和mdat。Moof包括mfhd和traf，traf包括tfhd、tfdt、trun、和sdtp。顺序传输的文件传输单位的sequence_number(序列_号)存储在mfhd中，并且GOP单位的头部的样本(s)(1)的BaseMediaDecodeTime-1(基本媒体解码定时-1)存储在traf的tfdt中。计算属于GOP单位的样本(s)(1)至样本(s)(3)的呈现时间所必须的信息存储在traf的trun中。mdat的头和样本(s)(1)至样本(s)(3)存储在mdat中。
图4示出了用于传输文件传输单位的时序。图4A示出了如下的实例，其中，例如，相比于文件传输单位的数据量，其中传输了文件传输单位的广播网络的频带足够大，并且在该情况下，可以在没有延迟的情况下为每个GOP将文件传输单位批量传输到接收侧。
然而，实际上，广播网络等的频带并不一定是足够大以一次性批量传输文件传输单位，并且，预计将来内容的图像质量和碎片MP的比特率会增大。在该情况下，如图4B所示，文件传输单位的供给可能会延迟，该延迟可能会引起接收侧的缓冲开始时间的延迟，因此，不利地影响了具有实时属性的内容的再生。
图5示出了解决上述问题的方法的概述。换句话说，为了解决上述问题，不是在生成了每个GOP的样本(s)(1)至样本(s)(3)之后生成并传输文件传输单位，理想的是减小文件传输单位的大小，并且顺序传输所得到的文件传输单位。然而，过去还没有建立该方法。
鉴于上述内容而作出本发明，理想的是，在没有延迟的情况下传输片段流文件传输单位。
解决课题的手段
根据本公开的第一方面，提供了一种对内容的片段流进行多播传送的内容供给装置，该内容供给装置包括：片段流生成单元，配置为基于内容的源数据生成片段流；以及传送单元，配置为把所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，从而以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。
传送单元可以生成如下的文件传输单位，其包括：moof，其中，版本属性添加到了片段流的第一数据单位的第二数据单位；mdat，其中，存储了第二数据单位的数据。
传送单元可以生成如下的文件传输单位，其包括：moof，其中，styp、版本属性、和ntpt添加到片段流的第一数据单位的头部的第二数据单位；mdat，其中，存储了第二数据单位的数据；并且可以生成如下的文件传输单位，其包括用于与第一数据单位的头部的第二数据单位不同的另一第二数据单位的moof和mdat。
传送单元可以在版本属性中存储指示moof的版本的多个值，并且在ntpt中存储与第一数据单位的头部的第二数据单位的BaseMediaDecodeTime-1对应的NTP Time-1(NTP定时-1)。
传送单元可以通过拷贝和更新先前生成的文件传输单位的包括版本属性和ntpt的moof，生成与不同于头部的第二数据单位的另一第二数据单位对应的文件传输单位的moof。
根据本公开的第一方面，提供了一种对内容的片段流进行多播传送的内容供给装置的内容供给方法，该内容供给方法包括：片段流生成步骤，通过内容供给装置基于内容的源数据生成片段流；以及传送步骤，通过内容供给装置把所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，从而以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。
根据本公开的第一方面，提供了一种程序，其使得对内容的片段流进行多播传送的计算机有如下功能：片段流生成单元，配置为基于内容的源数据生成片段流；以及传送单元，配置为通过将所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。
在本公开的第一方面，基于内容的源数据生成片段流，通过将所生成的片段流细分成可随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。
根据本公开的第二方面，提供了一种终端装置，其接收并再生从对内容的片段流进行多播传送的内容供给装置传送的内容，上述内容供给装置包括：片段流生成单元，配置为基于内容的源数据生成片段流；以及传送单元，配置为把所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。终端装置接收FLUTE-多播传送的文件传输单位，执行缓冲，直到接收到了对应于第一数据单位的多个文件传输单位，并且以对应于第一数据单位的多个文件传输单位为单位再生文件传输单位。
在本公开的第二方面，接收FLUTE-多播传送的文件传输单位，执行缓冲，直到接收到了对应于第一数据单位的多个文件传输单位，并且以对应于第一数据单位的多个文件传输单位为单位再生文件传输单位。
根据本公开的第三方面，提供了一种内容供给系统，包括：内容供给装置；以及终端装置，接收并再生从内容供给装置传送的内容。内容供给装置包括：片段流生成单元，配置为基于内容的源数据生成片段流；以及传送单元，配置为把所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。终端装置接收FLUTE-多播传送的文件传输单位，执行缓冲，直到接收到了对应于第一数据单位的多个文件传输单位，并且以对应于第一数据单位的多个文件传输单位为单位再生文件传输单位。
在本公开的第三方面，通过内容供给装置，基于内容的源数据生成片段流，通过将所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。通过终端装置，接收FLUTE-多播传送的文件传输单位，执行缓冲，直到接收到了对应于第一数据单位的多个文件传输单位，并且以对应于第一数据单位的多个文件传输单位为单位再生文件传输单位。
本发明的有益效果
根据本公开的第一方面，可以在没有延迟的情况下传输片段流的文件传输单位。
根据本公开的第二方面，可以接收并再生FLUTE-多播传送的片段流。
根据本公开的第三方面，可以在没有延迟的情况下传输片段流文件传输单位，并且通过终端装置接收和再生。
附图说明
图1是示出相关技术的内容供给系统的配置实例的框图。
图2是示出当对片段化MP4进行FLUTE-传送时相关技术的文件传输单位的生成方法的概述的示意图。
图3是示出当对片段化MP4进行FLUTE-传送时相关技术的文件传输单位的数据结构的示意图。
图4是示出文件传输单位的传输时序的示意图。
图5是示出文件传输单位的传输时序的示意图。
图6是示出应用本公开的内容供给系统的示例性配置的框图。
图7是示出当内容供给装置对片段化MP4进行FLUTE-传送时文件传输单位的生成方法的概述的示意图。
图8是示出当内容供给装置对片段化MP4进行FLUTE-传送时的数据结构的示意图。
图9是示出片段化MP4文件格式规范的扩展的示意图。
图10是示出片段化MP4文件格式规范的扩展的示意图。
图11是用于描述FLUTE流传送过程的流程图。
图12是用于描述图11的步骤S4的过程的流程图。
图13是示出计算机的示例性配置的框图。
具体实施方式
以下，将详细描述用于执行本公开的优选模式(以下称为实施方式)。
[内容供给系统的示例性配置]
图6示出了根据本公开实施方式的内容供给系统的示例性配置。
内容供给系统50包括多个内容供给装置60和多个终端装置70。内容供给装置60可以经由网络51与终端装置70连接。
除了通过互联网呈现的双向通信网络和使用互联网的CDN，网络51还包括使用地面广播波、卫星广播波、移动广播(e)MBMS等的各种广播网络。
根据UTC时间格式提供系统时间信息的NTP服务器52连接至网络51。NTP服务器52可以向每个内容供给装置60、每个终端装置70等提供系统时间信息，并且每个内容供给装置60和每个终端装置70在如下状态下运行：其中，系统时间根据从NTP服务器52提供的系统时间信息与NTP时间轴同步。
内容供给装置60对内容进行HTTP-单播传送和FLUTE-多播传送。内容供给装置60包括信道流光61、DASH分段器62、FLUTE流光63、MPD发生器64、web服务器65、多播服务器66。
安装在内容供给装置60中的信道流光61至多播服务器66可以集中布置在一个位置，或者可以经由互联网等分散布置。
信道流光61从实时捕获的内容的源数据生成传送到终端装置70的具有不同比特率的多条流数据，并且将多条流数据输出到DASH分段器62。
DASH分段器62通过临时将每条流数据分成片段而生成诸如片段化MP4的片段流，并且将所生成的片段流输出到FLUTE流光63和web服务器65。DASH分段器62将包括指示片段流的供给源的地址的元数据通知给MPD发生器64。
FLUTE流光63将从DASH分段器62顺序输入的片段流转换成FLUTE流，并将FLUTE流输出到多播服务器66(细节将在后面描述)。FLUTE流光63在FLUTE包中存储MPD发生器64生成的MPD，并且将得到的FLUTE包输出到多播服务器66。
MPD发生器64生成MPD，其中，例如，基于从DASH分段器62报告的元数据描述指示片段流的文件的供给源(web服务器65)的地址，并将生成的MPD输出到FLUTE流光63和web服务器65。
根据来自终端装置70的MPD请求(HTTP请求)，Web服务器65将从MPD发生器64输入的MPD HTTP-单播传送到请求源。根据来自终端装置70的片段流请求(HTTP请求)，web服务器65将片段流的文件HTTP-单播传送到请求源。
多播服务器66对MPD进行FLUTE-多播传送。多播服务器66对FLUTE流进行FLUTE-多播传送。
终端装置70经由网络51从内容供给装置60获取MPD。具体地，终端装置70传输HTTP请求，并且响应于请求接收被HTTP-单播传送或者FLUTE-多播传送的MPD。终端装置70基于获取的MPD请求web服务器65传输片段流，并且响应于请求接收和再生被HTTP-多播传送的片段流文件。终端装置70接收并再生FLUTE-多播传送的FLUTE流。当接收被FLUTE-多播传送的MPD或FLUTE流时，终端装置70参照公告信息，在该公告信息中，描述了执行FLUTE-多播传送的多播服务器66的门户信道。
通过交互信道(interaction channel)或广播/多播信道知道上述公告信息，例如，当通过网络51中包括的移动广播(e)MBMS执行FLUTE-多播传送时，通过MBMS中的用户服务说明(USD)知道上述公告信息。此外，当通过网络51中包括的地面广播波或卫星广播执行FLUTE-多播传送时，通过交互信道或广播/多播信道知道该公告信息，例如，通过DVB-H(IPDC)的电子服务指南(ESG)知道。
[基于片段化MP4生成FLUTE流]
如上所述，过去，当FLUTE-传送片段化MP4时，为每个GOP生成文件传输末端(end)并传输。在本实施方式中，即使在GOP的中间，也顺序生成并传输文件传输单位。
图7示出了其中FLUTE流光63从顺序输入的片段化MP4的片段流生成FLUTE流的文件传输单位的概述。在图7的实例中，假设片段化MP4的GOP范围的数据按时间顺序包括样本(s)(1)、样本(s)(2)、和样本(s)(3)。
首先，在输入了样本(s)(1)的阶段，生成对应于样本(s)(1)的文件传输单位并FLUTE-传送，然后，在输入了样本(s)(2)的阶段，生成对应于样本(s)(2)的文件传输单位并FLUTE-传送。
在输入了样本(s)(3)的阶段，生成对应于样本(s)(3)的文件传输单位并FLUTE-传送。假设终端装置70在接收到对应于构成GOP的样本(s)(1)至样本(s)(3)的三个文件传输单位的阶段执行解码。
图8示出了根据本实施方式生成的文件传输单位的数据结构。文件传输单位(媒体片段)包括styp、moof、和mdat。moof包括mfhd和traf，traf包括tfhd、tfdt、ntpt、trun、和sdtp。
从图8和图3之间的比较可以看出，在根据本实施方式生成的文件传输单位中，相比于图3的文件传输单位，指示moof的版本的版本属性添加到了mfhd。NTP Time Box(NTP定时盒，ntpt)添加到了moof的traf。NTP Time-1存储在ntpt中，该NTP Time-1对应于tfdt中存储的GOP单位的头部的样本(s)(1)的BaseMediaDecodeTime-1。
对应于样本(s)(1)的文件传输单位包括styp、moof、和mdat，sequence_number和version＝1存储在moof/mfhd中，样本(s)(1)的BaseMediaDecodeTime-1存储在moof/traf/tfdt中，并且对应于BaseMediaDecodeTime-1的NTP Time-1存储在moof/traf/ntpt中。此外，计算样本(s)(1)的呈现时间所必须的信息存储在moof/traf/trun中。mdat的头和样本(s)(1)存储在mdat中。
在对应于样本(s)(2)的文件传输单位中，省略了styp，对应于样本(s)(1)的文件传输单位的moof被复制到moof，moof/mfhd的版本更新到2，并且计算样本(s)(2)的呈现时间所必须的信息添加到了moof/traf/trun。样本(s)(2)存储在mdat中。
在对应于样本(s)(3)的文件传输单位中，省略了styp，对应于样本(s)(2)的文件传输单位的moof被复制到moof，moof/mfhd的版本更新到3，并且计算样本(s)(3)的呈现时间所必须的信息添加到了moof/traf/trun。样本(s)(3)存储在mdat中。
当比较对应于样本(s)(1)、样本(s)(2)、和样本(s)(3)的文件传输单位的数据时，moof的数据量逐渐增大，但是mdat的数据量基本上相同。此外，当与相关技术的GOP单位的文件传输单位的数据量相比较时，数据量可以减小至几乎1/3，因此可以进一步减小文件传输单位的大小，并且如图5所示顺序传输所得到的文件传输单位。
[片段化MP4文件格式规范的扩展]
图9示出了用于将版本属性添加到moof/mfhd的片段化MP4文件格式规范的扩展。
换句话说，在本实施方式中，如图9的B所示执行扩展，使得版本属性被添加到syntax，syntax与图9的A中示出的相关技术的moof/mfhd的sequence_number属性有关。由于设置了版本属性，因此包括在终端装置70接收的文件传输单位中的moof的sequence_number相同，并且可以确定moof是只对应于头部的样本(s)(1)还是moof对应于样本(s)(1)至样本(s)(3)，即，整个GOP。此外，可以通过将图9的A与图9的B组合来如图9的C所示对片段化MP4文件格式规范进行扩展。
图10示出了用于将NTP Time Box(ntpt)添加到moof/traf的片段化MP4文件格式规范的扩展。由于设置了ntpt，因此可以确保内容的实时属性并且FLUTE-多播传送片段化MP4。
[内容供给系统50的操作]
下面，将描述内容供给系统50的操作。
图11是用于描述通过内容供给装置60传送FLUTE流的处理(以下称为“FLUTE流传送处理”)的流程图。
在步骤S1，信道流光61从实时捕获的内容的源数据生成传送到终端装置70的具有不同比特率的多条流数据，并且将多条流数据输出到DASH分段器62。DASH分段器62基于每条流数据生成片段化MP4(片段流)，并且将片段化MP4(片段流)输出到FLUTE流光63。
在步骤S2，FLUTE流光63生成与从DASH分段器62顺序输入的片段化MP4的GOP的头部的样本(s)(1)对应的文件传输单位。
具体地，将styp、moof、和mdat设置为对应于样本(s)(1)的文件传输单位，sequence_number和version＝1(版本＝1)存储在moof/mfhd中，样本(s)(1)的BaseMediaDecodeTime-1存储在moof/traf/tfdt中，并且对应于BaseMediaDecodeTime-1的NTP Time-1存储在moof/traf/ntpt中。此外，计算样本(s)(1)的呈现时间所必须的信息存储在moof/traf/trun中。mdat的头和样本(s)(1)存储在mdat中。
在步骤S3，多播服务器66经由网络51FLUTE-多播传送对应于在步骤S2的处理中生成的样本(s)(1)的文件传输单位。
然后，在步骤S4，FLUTE流光63生成与从DASH分段器62顺序输入的片段化MP4的GOP的下一样本(s)(样本(s)(2)或样本(s)(3))对应的文件传输单位。
将详细描述步骤S4的处理。图12是用于详细描述步骤S4的处理的流程图。
当下一样本(s)是样本(s)(2)时，在步骤S11，FLUTE流光63省略styp，并且从前一文件传输单位(在该情况下，对应于样本(s)(1)的文件传输单位)拷贝moof。在步骤S12，FLUTE流光63将moof/mfhd的版本更新到2。此外，将用于计算样本(s)(2)的呈现时间所必须的信息添加到moof/traf/trun。在步骤S13，FLUTE流光63在mdat中存储样本(s)(2)。
当下一样本(s)是样本(s)(3)时，在步骤S11，FLUTE流光63省略styp，并且从前一文件传输单位(在该情况下，对应于样本(s)(2)的文件传输单位)拷贝moof。在步骤S12，FLUTE流光63将moof/mfhd的版本更新到3。此外，将用于计算样本(s)(3)的呈现时间所必须的信息添加到moof/traf/trun。在步骤S13，FLUTE流光63在mdat中存储样本(s)(3)。
往回参照图11，在步骤S5，多播服务器66经由网络51FLUTE-多播传送在步骤S4生成的文件传输单位。在步骤S6，FLUTE流光63确定在步骤S4生成的文件传输单位是否对应于GOP的末端。当确认结果为负时，处理返回到步骤S4，并且重复步骤S4和后续处理。当步骤S6的确认结果为正时，处理进行到步骤S7。
在步骤S7，FLUTE流光63确定片段化MP4(片段流)从DASH分段器62的输入是否已经完成。当确认结果为负时，处理返回到步骤S2，并且重复步骤S2和后续处理。当步骤S7的确认结果为正时，FLUTE流传送处理结束。
根据上述FLUTE流传送处理，当FLUTE-多播传送了片段化MP4(片段流)时，可以顺序地传输较小的文件传输单位。因此，当内容的图像质量和片段化MP4的比特率在将来增大时，可以抑制文件传输单位的供给延迟。此外，可以防止如下的情形：其中，延迟使得终端装置70的缓冲开始时间延迟，因此不利地影响了具有实时属性的内容的再生。
顺便说一下，执行上述一系列操作的内容供给装置60和终端装置70中的每个都可以配置有硬件或者可以通过用计算机执行软件来实现。计算机的实例包括内嵌有专用硬件的计算机和能够安装各种程序并执行各种功能的通用个人计算机。
图13是示出计算机的示例性硬件配置的框图。
在计算机100中，中央处理单元(CPU)101、只读存储器(ROM)102、以及随机存取存储器(RAM)103经由总线104彼此连接。
输入/输出接口105连接至总线104。输入单元106、输出单元107、存储单元108、通信单元109、以及驱动110连接至输入/输出接口105。
输入单元106包括键盘、鼠标、麦克风等等。输出单元107包括显示器、扬声器等等。存储单元108包括硬盘、非易失存储器等等。通信单元109包括网络接口。驱动110驱动诸如磁盘、光盘、磁光盘、或半导体存储器的可移除介质111。
在具有上述配置的计算机100中，例如，通过输入/输出接口105和总线104将存储单元108中存储的程序加载到RAM 103上并且通过CPU101执行所加载的程序，来执行上述一系列处理。
例如，计算机100(CPU 101)执行的程序可以记录在用作包介质等等的可移除介质111中并被提供。程序可以经由诸如局域网、互联网、或数字卫星广播的有线或无线传输介质提供。
在计算机100中，可移除介质111可以安装在驱动110上，并且程序可以通过输入/输出接口105安装在存储单元108中。程序可以由通信单元109经由有线或无线传输介质接收并安装在存储单元108中。此外，程序可以提前安装在ROM 102或存储单元108中。
此外，计算机100执行的程序可以是其中根据本说明书中描述的顺序按时间顺序执行处理的程序或者是其中并行或者以必要的定时(例如，当执行调度时)执行处理的程序。
本公开的实施方式不限于上述实施方式，并且在不背离本公开的主旨的情况下，可以进行各种修改。
另外，本技术还可以如下配置。
(1)一种对内容的片段流进行多播传送的内容供给装置，内容供给装置包括：片段流生成单元，配置为基于内容的源数据生成片段流；以及传送单元，配置为把所生成的片段流划分成能够随机接入的第一数据单位并且将第一数据单位细分成第二数据单位，以第二数据单位为单位生成文件传输单位，并且对文件传输单位进行FLUTE-多播传送。
(2)根据(1)的内容供给装置，其中，传送单元生成的文件传输单位包括：moof，其中，版本属性添加到了片段流的第一数据单位的第二数据单位；mdat，其中，存储了第二数据单位的数据。
(3)根据(1)或(2)的内容供给装置，其中，传送单元生成的文件传输单位包括：moof，其中，styp、版本属性、和ntpt添加到片段流的第一数据单位的头部的第二数据单位；mdat，其中，存储了第二数据单位的数据；以及其中，传送单元生成的文件传输单位包括：用于与第一数据单位的头部的第二数据单位不同的另一第二数据单位的moof和mdat。
(4)根据(3)的内容供给装置，其中，传送单元在版本属性中存储指示moof的版本的多个值，并且在ntpt中存储与第一数据单位的头部的第二数据单位的BaseMediaDecodeTime-1对应的NTP Time-1。
(5)根据(4)的内容供给装置，其中，传送单元通过拷贝和更新先前生成的文件传输单位的包括ntpt和版本属性的moof，生成与不同于头部的第二数据单位的另一第二数据单位对应的文件传输单位的moof。
参考标号列表
50、内容供给系统 51、网络
52、NTP服务器 60、内容供给装置
61、信道流光 62、DASH分段器
63、FLUTE流光 64、MPD发生器
65、web服务器 66、多播服务器
70、终端装置 100、计算机
101、CPU。

Claims (7)

1.一种内容供给装置，使用单向传输文件FLUTE协议对内容的片段流进行多播传送，所述内容供给装置包括：
片段流生成单元，其被配置为基于实时捕获的所述内容的源数据顺序生成包括能够随机接入的图片组GOP单位的所述片段流，每个所述GOP是能够随机接入的；以及
传送单元，其被配置为把顺序生成的所述片段流细分成具有比所述GOP单位短的时段的第二数据单位，从而以所述第二数据单位为单位顺序生成按照FLUTE传送的文件传输单位，GOP被细分成多个按照FLUTE传送的所述文件传输单位，并且经由FLUTE对顺序生成的所述文件传输单位进行顺序传送，
其中，所述文件传输单位包含用于所述文件传输单位中的第一样本的解码定时，
其中，所述传送单元生成包括moof和mdat的所述文件传输单位，在所述moof中，版本属性添加到了所述片段流的所述GOP单位的所述第二数据单位，在所述mdat中，存储了所述第二数据单位的数据。
2.根据权利要求1所述的内容供给装置，
其中，所述传送单元生成包括moof和mdat的所述文件传输单位，在所述moof中，styp、版本属性、和ntpt添加到所述片段流的所述GOP单位的头部的所述第二数据单位，在所述mdat中，存储了所述第二数据单位的数据；以及
其中，所述传送单元生成包括用于不同于所述GOP单位的所述头部的所述第二数据单位的另一第二数据单位的moof和mdat的所述文件传输单位。
3.根据权利要求2所述的内容供给装置，
其中，所述传送单元在所述版本属性中存储指示moof的版本的数值，并且在所述ntpt中存储与所述GOP单位的头部的所述第二数据单位的BaseMediaDecodeTime-1对应的NTPTime-1。
4.根据权利要求3所述的内容供给装置，
其中，所述传送单元通过拷贝和更新先前生成的所述文件传输单位的包括所述ntpt和所述版本属性的所述moof，生成与不同于所述头部的所述第二数据单位的另一第二数据单位对应的所述文件传输单位的moof。
5.一种内容供给方法，其是使用单向传输文件FLUTE协议对内容的片段流进行多播传送的内容供给装置的内容供给方法，所述内容供给方法包括：
片段流生成步骤，通过所述内容供给装置基于实时捕获的所述内容的源数据顺序生成包括能够随机接入的图片组GOP单位的所述片段流，每个所述GOP是能够随机接入的；以及
传送步骤，通过所述内容供给装置把顺序生成的所述片段流细分成具有比所述GOP单位短的时段的第二数据单位，从而以所述第二数据单位为单位顺序生成按照FLUTE传送的文件传输单位，GOP被细分成多个按照FLUTE传送的文件传输单位，并且经由FLUTE对顺序生成的所述文件传输单位进行传送，
其中，所述文件传输单位包含用于所述文件传输单位中的第一样本的解码定时，
其中，所述文件传输单位包括moof和mdat，在所述moof中，版本属性添加到了所述片段流的所述GOP单位的所述第二数据单位，在所述mdat中，存储了所述第二数据单位的数据。
6.一种终端装置，接收并再生从使用单向传输文件FLUTE协议对内容的片段流进行多播传送的内容供给装置传送的内容，
基于所述内容的源数据的所述片段流包括能够随机接入的图片组GOP单位，每个所述GOP是能够随机接入的；以及
把顺序生成的所述片段流细分成具有比所述GOP短的时段的第二数据单位以所述第二数据单位为单位生成按照FLUTE传送的文件传输单位，GOP被细分成多个按照FLUTE传送的文件传输单位，并且
所述终端装置被配置为经由FLUTE接收所述文件传输单位，执行缓冲，直到接收到了对应于所述GOP的多个所述文件传输单位，并且以对应于所述GOP的多个所述文件传输单位为单位再生所述文件传输单位，
其中，所述文件传输单位包含用于所述文件传输单位中的第一样本的解码定时，
其中，所述文件传输单位包括moof和mdat，在所述moof中，版本属性添加到了所述片段流的所述GOP单位的所述第二数据单位，在所述mdat中，存储了所述第二数据单位的数据。
7.一种内容供给系统，包括：
内容供给装置，使用单向传输文件FLUTE协议对内容的片段流进行多播传送；以及
终端装置，接收并再生从所述内容供给装置传送的内容，
其中，所述内容供给装置包括：
片段流生成单元，其被配置为基于实时捕获的所述内容的源数据顺序生成包括能够随机接入的图片组GOP单位的所述片段流，每个所述GOP是能够随机接入的；以及
传送单元，其被配置为把顺序生成的所述片段流细分成具有比所述GOP单位短的时段的第二数据单位，从而以所述第二数据单位为单位顺序生成按照FLUTE传送的文件传输单位，GOP被细分成多个按照FLUTE传送的文件传输单位，并且经由FLUTE对顺序生成的所述文件传输单位进行顺序传送，
其中，所述终端装置经由FLUTE接收传送的所述文件传输单位，执行缓冲，直到接收到了对应于所述GOP单位的多个所述文件传输单位，并且以对应于所述GOP单位的多个所述文件传输单位为单位再生所述文件传输单位，
其中，所述文件传输单位包含用于所述文件传输单位中的第一样本的解码定时，
其中，所述传送单元生成包括moof和mdat的所述文件传输单位，在所述moof中，版本属性添加到了所述片段流的所述GOP单位的所述第二数据单位，在所述mdat中，存储了所述第二数据单位的数据。
CN201480038957.3A 2013-07-17 2014-07-08 内容供给装置及方法、终端装置、以及内容供给系统 Active CN105359536B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-148212 2013-07-17
JP2013148212 2013-07-17
PCT/JP2014/068125 WO2015008653A1 (ja) 2013-07-17 2014-07-08 コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム

Publications (2)

Publication Number Publication Date
CN105359536A CN105359536A (zh) 2016-02-24
CN105359536B true CN105359536B (zh) 2020-07-24

Family

ID=52346121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480038957.3A Active CN105359536B (zh) 2013-07-17 2014-07-08 内容供给装置及方法、终端装置、以及内容供给系统

Country Status (10)

Country Link
US (2) US10530710B2 (zh)
EP (1) EP3024245A4 (zh)
JP (1) JP6653575B2 (zh)
KR (1) KR102272876B1 (zh)
CN (1) CN105359536B (zh)
BR (1) BR112016000427B1 (zh)
CA (1) CA2916655C (zh)
MX (1) MX358670B (zh)
RU (1) RU2655744C2 (zh)
WO (1) WO2015008653A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102272876B1 (ko) * 2013-07-17 2021-07-05 소니그룹주식회사 콘텐츠 공급 장치, 콘텐츠 공급 방법, 프로그램, 단말 장치 및 콘텐츠 공급 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102232298A (zh) * 2011-04-07 2011-11-02 华为技术有限公司 媒体内容的传输处理方法、装置与系统
CN102577272A (zh) * 2009-10-06 2012-07-11 微软公司 低等待时间的可高速缓存的媒体流式传输

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI265697B (en) * 2002-06-06 2006-11-01 Ibm Digital contents distribution system, digital contents distribution method, computer readable recording medium storing the program therein, and server and client therefor
JP4299836B2 (ja) 2002-07-12 2009-07-22 パナソニック株式会社 データ処理装置
CN1765130A (zh) 2003-03-25 2006-04-26 松下电器产业株式会社 数据发送装置
BRPI0406609A (pt) * 2003-10-24 2005-12-06 Microsoft Corp Incorporação de uma mensagem de decodificação de sessão em uma mensagem de protocolo de controle em tempo real (rtcp)
US9432433B2 (en) * 2006-06-09 2016-08-30 Qualcomm Incorporated Enhanced block-request streaming system using signaling or block creation
US8973036B2 (en) 2007-12-04 2015-03-03 Qualcomm Incorporated Mapping mobile device electronic program guide to content
CN101771662B (zh) * 2008-12-30 2012-11-07 华为技术有限公司 网络电视架构中下载业务信息的获取方法、装置及系统
JP2011087103A (ja) * 2009-10-15 2011-04-28 Sony Corp コンテンツ再生システム、コンテンツ再生装置、プログラム、コンテンツ再生方法、およびコンテンツサーバを提供
US9596522B2 (en) * 2010-06-04 2017-03-14 Mobitv, Inc. Fragmented file structure for live media stream delivery
WO2012010928A1 (en) 2010-07-20 2012-01-26 Nokia Corporation A media streaming apparatus
CN102572708B (zh) * 2010-12-08 2015-04-01 中国电信股份有限公司 多播广播业务处理方法与系统、广播多播业务平台
US9485108B2 (en) * 2011-03-14 2016-11-01 Qualcomm Incorporated System and apparatus for using multichannel file delivery over unidirectional transport (“FLUTE”) protocol for delivering different classes of files in a broadcast network
US9026671B2 (en) * 2011-04-05 2015-05-05 Qualcomm Incorporated IP broadcast streaming services distribution using file delivery methods
US9571893B2 (en) * 2011-06-20 2017-02-14 Lg Electronics Inc. Media content transceiving method and transceiving apparatus using same
US9253233B2 (en) * 2011-08-31 2016-02-02 Qualcomm Incorporated Switch signaling methods providing improved switching between representations for adaptive HTTP streaming
US9357275B2 (en) * 2011-09-06 2016-05-31 Qualcomm Incorporated Network streaming of coded video data
US9843844B2 (en) * 2011-10-05 2017-12-12 Qualcomm Incorporated Network streaming of media data
US20150172348A1 (en) * 2012-01-17 2015-06-18 Telefonaktiebolaget L M Ericsson (Publ) Method for sending respectively receiving a media stream
US8953478B2 (en) * 2012-01-27 2015-02-10 Intel Corporation Evolved node B and method for coherent coordinated multipoint transmission with per CSI-RS feedback
US9386058B2 (en) * 2012-02-27 2016-07-05 Qualcomm Incorporated DASH client and receiver with playback rate selection
US9820259B2 (en) * 2012-05-04 2017-11-14 Qualcomm Incorporated Smooth transition between multimedia broadcast multicast service (MBMS) and unicast service by demand
US8923880B2 (en) * 2012-09-28 2014-12-30 Intel Corporation Selective joinder of user equipment with wireless cell
KR102272876B1 (ko) * 2013-07-17 2021-07-05 소니그룹주식회사 콘텐츠 공급 장치, 콘텐츠 공급 방법, 프로그램, 단말 장치 및 콘텐츠 공급 시스템
JP2015061307A (ja) * 2013-09-20 2015-03-30 ソニー株式会社 コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102577272A (zh) * 2009-10-06 2012-07-11 微软公司 低等待时间的可高速缓存的媒体流式传输
CN102232298A (zh) * 2011-04-07 2011-11-02 华为技术有限公司 媒体内容的传输处理方法、装置与系统

Also Published As

Publication number Publication date
US20200067850A1 (en) 2020-02-27
KR102272876B1 (ko) 2021-07-05
JP6653575B2 (ja) 2020-02-26
US11075855B2 (en) 2021-07-27
MX2016000341A (es) 2016-05-05
WO2015008653A1 (ja) 2015-01-22
CN105359536A (zh) 2016-02-24
KR20160032085A (ko) 2016-03-23
EP3024245A1 (en) 2016-05-25
RU2655744C2 (ru) 2018-05-30
BR112016000427B1 (pt) 2023-05-09
BR112016000427A2 (pt) 2017-07-25
EP3024245A4 (en) 2017-01-11
RU2016100308A (ru) 2017-07-17
JPWO2015008653A1 (ja) 2017-03-02
CA2916655C (en) 2022-05-03
MX358670B (es) 2018-08-31
US20160142339A1 (en) 2016-05-19
CA2916655A1 (en) 2015-01-22
US10530710B2 (en) 2020-01-07
BR112016000427A8 (pt) 2020-01-07

Similar Documents

Publication Publication Date Title
EP2897369B1 (en) Content supply device, content supply method, program, and content supply system
US10440427B2 (en) Content supply device, content supply method, program, terminal device, and content supply system
JP2019071680A (ja) 端末装置および受信方法
US10306272B2 (en) Content supply device, content supply method, program, terminal device, and content supply system
US11075855B2 (en) Content supply device, content supply method, program, terminal device, and content supply system
US20170155968A1 (en) Content supply apparatus, content supply method, program terminal apparatus, and content supply system
KR102123208B1 (ko) 콘텐츠 공급 장치, 콘텐츠 공급 방법, 프로그램, 단말 장치, 및 콘텐츠 공급 시스템
RU2658672C2 (ru) Устройство предоставления контента, программа, оконечное устройство и система предоставления контента
WO2015012140A1 (ja) コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant