CN105706453B - 发送装置、发送方法、接收装置和接收方法 - Google Patents

发送装置、发送方法、接收装置和接收方法 Download PDF

Info

Publication number
CN105706453B
CN105706453B CN201480058434.5A CN201480058434A CN105706453B CN 105706453 B CN105706453 B CN 105706453B CN 201480058434 A CN201480058434 A CN 201480058434A CN 105706453 B CN105706453 B CN 105706453B
Authority
CN
China
Prior art keywords
mpd
content
metadata
attribute
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480058434.5A
Other languages
English (en)
Other versions
CN105706453A (zh
Inventor
山岸靖明
森正仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN105706453A publication Critical patent/CN105706453A/zh
Application granted granted Critical
Publication of CN105706453B publication Critical patent/CN105706453B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4314Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for fitting data in a restricted space on the screen, e.g. EPG data in a rectangular grid
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44004Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61Network physical structure; Signal processing
    • H04N21/6106Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6131Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via a mobile phone network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64Addressing
    • H04N21/6405Multicasting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/64Addressing
    • H04N21/6408Unicasting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本技术涉及一种能够容易地获得马赛克画面的发送装置、发送方法、接收装置和接收方法。传送通过使用属性和属性值来描述的元数据,内容的所述元数据包括:指示视频是适合形成所述马赛克画面的缩略图视频的信令信息;以及指示在开始回放所述内容之前所需要的最小缓冲时间的所述属性。例如,可以在传送所述内容时应用本技术。

Description

发送装置、发送方法、接收装置和接收方法
技术领域
例如,本技术涉及一种发送装置、发送方法、接收装置和接收方法,并且具体地,涉及一种能够容易地获得马赛克画面的发送装置、发送方法、接收装置和接收方法。
背景技术
近年来,过顶视频(OTT-V)是互联网上的流服务的主流。例如,运动图像专家组-基于超文本传输协议(HTTP)的动态自适应流媒体技术(MPEG-DASH)(在本文中,也称为DASH)作为OTT-V的基础技术开始变得流行。
在DASH中,例如,传送流的服务器通知客户端,该客户端接收媒体表示描述(MPD)的流作为元数据,该元数据包括用于从相同的源优选具有不同特性的流的属性信息,并且客户端使用MPD,从而实现网络环境自适应流媒体技术(例如,参见非专利文件1)。
即,在DASH中,服务器根据传送路径的通信环境以及客户端的能力和状态,来准备内容(包括相同的内容)的图像质量和图像大小不同的多个流。
另一方面,客户端自适应地选择适合客户端的能力(解码能力等)的流并且接收流进行回放,该客户端可以接收服务器所准备的多个流。
在DASH中,将用于内容(称为MPD)的回放控制的元数据从服务器传送到客户端,从而可以使客户端自适应地选择接收流。
在MPD中描述了作为通过划分内容而获得的段(媒体数据,诸如,Audio/Video/Subtitle)的地址的统一资源定位符(URL)等。客户端基于在MPD中描述的URL等来将HTTP请求发送给传送内容的网页服务器,并且根据对回放的HTTP请求来接收网页服务器单播传送的段。
引用列表
非专利文件
非专利文件1:“Realization of Continuous Moving Image Delivery UsingExisting Web Server”,Mitsuhiro Hirabayashi,NIKKEI ELECTRONICS,2012年3月19日
发明内容
本发明所要解决的问题
方便的是,当查看现场直播内容时,客户端显示马赛克画面,多个内容的视频以格子的形式设置在该马赛克画面上,例如,并且在观看马赛克画面上显示的多个内容的视频的同时,用户可以选择待查看的频道(内容)。
然而,在当前的DASH中,并未将用于生成马赛克画面的有用信息传送给客户端,从而很难容易地获得马赛克画面。
鉴于这种情况,达成了本技术,并且其目的是容易地获得马赛克画面。
问题的解决方案
本技术的发送装置是包括传送单元的发送装置,该传送单元传送通过使用属性和属性值来描述的元数据,内容的元数据包括:指示视频是适合形成马赛克画面的缩略图视频的信令信息;以及指示在开始回放内容之前所需要的最小缓冲时间的属性。
本技术的发送方法是包括如下步骤的发送方法:传送通过使用属性和属性值来描述的元数据,内容的元数据包括:指示视频是适合形成马赛克画面的缩略图视频的信令信息;以及指示在开始回放内容之前所需要的最小缓冲时间的属性。
在本技术的上述发送装置和发送方法中,传送通过使用属性和属性值来描述的元数据,内容的元数据包括:指示视频是适合形成马赛克画面的缩略图视频的信令信息;以及指示在开始回放内容之前所需要的最小缓冲时间的属性。
本技术的接收装置是包括接收单元的接收装置,该接收单元接收通过使用属性和属性值来描述的元数据,内容的元数据包括:指示视频是适合形成马赛克画面的缩略图视频的信令信息;以及指示在开始回放内容之前所需要的最小缓冲时间的属性。
本技术的接收方法是包括如下步骤的接收方法:接收通过使用属性和属性值来描述的元数据,内容的元数据包括:指示视频是适合形成马赛克画面的缩略图视频的信令信息;以及指示在开始回放内容之前所需要的最小缓冲时间的属性。
在本技术的上述接收装置和接收方法中,接收通过使用属性和属性值来描述的元数据,内容的元数据包括:指示视频是适合形成马赛克画面的缩略图视频的信令信息;以及指示在开始回放内容之前所需要的最小缓冲时间的属性。
同时,发送装置和接收装置可以是独立的装置或者可以是形成一个装置的内部块。
本发明的有益效果如下:
根据本技术,可以容易地获得马赛克画面。
同时,效果并不一定限于本文所描述的效果,并且可以是本公开所描述的任何效果。
附图说明
图1是图示了应用了本技术的内容提供系统的一个实施例的配置示例的框图。
图2是图示了频道服务器11的配置示例的框图。
图3是图示了聚合服务器12的配置示例的框图。
图4是图示了客户端13的配置示例的框图。
图5是图示了通过内容提供系统来提供缩略图视频的过程的视图。
图6是图示了在内容提供系统中通过网络10而传送的数据的示例的视图。
图7是图示了MPD、SDP、USD和OMA-ESG的视图。
图8是图示了MBMS的协议栈的视图。
图9是图示了作为缩略图元数据的USD的数据模型的示例的视图。
图10是图示了构成作为在XML中描述的缩略图元数据的USD的XML的要素和属性的示例的视图。
图11是图示了作为在XML中描述的缩略图元数据的USD的示例的视图。
图12是图示了作为缩略图元数据的MPD的概述的视图。
图13是图示了构成作为在XML中描述的缩略图元数据的MPD的XML的要素和属性的示例的视图。
图14是图示了作为在XML中描述的缩略图元数据的MPD的示例的视图。
图15是图示了作为缩略图元数据的OMA-ESG的数据模型的示例的视图。
图16是图示了构成作为在XML中描述的缩略图元数据的OMA-ESG的XML的要素和属性的示例的视图。
图17A和图17B是图示了作为在XML中描述的缩略图元数据的OMA-ESG的示例的视图。
图18是图示了作为缩略图元数据的OMA-ESG的视图。
图19是图示了传送包括缩略图视频的内容的方法的第一示例的视图。
图20是图示了传送包括缩略图视频的内容的方法的第二示例的视图。
图21是图示了传送包括缩略图视频的内容的方法的第三示例的视图。
图22A和图22B是图示了客户端13中的马赛克画面的显示示例的视图。
图23是图示了作为引入了内容描述元数据的缩略图元数据的MPD的第一示例的视图。
图24是示意地图示了在一个FLUTE会话中多播传送的多个缩略图视频(的流)的示例的视图。
图25是图示了作为引入了内容描述元数据的缩略图元数据的MPD的第二示例的视图。
图26是图示了作为引入了内容描述元数据的缩略图元数据的MPD的第三示例的视图。
图27是图示了传送包括缩略图视频的内容的方法的第四示例的视图。
图28是图示了传送包括缩略图视频的内容的方法的第五示例的视图。
图29是图示了传送包括缩略图视频的内容的方法的第六示例的视图。
图30是图示了在客户端13中显示马赛克画面的过程的示例的流程图。
图31是图示了应用了本技术的计算机的一个实施例的配置示例的框图。
具体实施方式
<应用了本技术的内容提供系统的一个实施例>
图1是图示了应用了本技术的内容提供系统的一个实施例的配置示例的框图。
在图1中,内容提供系统配置为将多个频道服务器11、一个或者多个聚合服务器12、一个或者多个客户端13、以及网络时间协议(NTP)服务器14连接至网络10。
在图1中的内容提供系统中,通过使用DASH,经由网络10将内容从频道服务器11和聚合服务器12提供给客户端13。
在本文中,虽然假设在当前的DASH中,流媒体技术本身是通过在过顶/内容传送网络(OTT/CDN)上进行单播而进行的,但是还是通过质量在便携式网络上(例如,在图1中的内容提供系统中)得到认证的能够广播的多播网络(eMBMS等)来传送形成马赛克画面的视频。据此,将通过使用性能良好的马赛克画面来选择频道的运行感觉提供给大量用户。
即,图1中的内容提供系统使客户端13可以通过将形成马赛克画面的多个视频分组(聚合)并且在一个FLUTE多播会话等中传送这些视频来容易地并且有效地生成(获得)马赛克画面。
网络10包括点对点网络,诸如,能够单播和多播的互联网以及能够广播和多播的广播网络。例如,可以采用第三代合作伙伴计划(3GPP)的多媒体广播多播服务(EBMS)(包括eMBMS(演进MBMS))等作为网络10。
与广播站对应的频道服务器11,例如,通过网络10传送具有不同比特率和图像大小的相同内容的多个流,作为广播站的频道(服务)的节目。
在本文中,频道服务器11所传送的多个流包括主要视频、音频和待查看字幕的流以及适合形成马赛克画面的缩略图视频的流。
在本文中,例如,适合形成马赛克画面的缩略图视频意谓与主视频的内容相同的内容的视频,该视频具有比主视频的图像大小更小的预定图像大小;以格子的形式等将多个视频平铺在特定大小的显示屏上以形成马赛克画面。
例如,与广播作为节目的马赛克画面的广播站对应的聚合服务器12将多个频道服务器11所传送的多个缩略图视频(缩略图视频流)分组(聚合),并且通过网络10传送该缩略图视频,作为广播站的频道(屏幕)的节目。
客户端13接收频道服务器11所传送的主视频等以及聚合服务器12所传送的缩略图视频进行回放。
NTP服务器14通过网络10提供NTP时间,该NTP时间是根据协调通用时间(UTC)时间格式的时间信息。
频道服务器11、聚合服务器12和客户端13可以与NTP服务器14所提供的NTP时间同步运行。
同时,频道服务器11所传送的节目(最终地,也是聚合服务器12所传送的节目)可以是实时节目(现场节目)或者预先录好的节目。
<频道服务器11的配置示例>
图2是图示了图1中的频道服务器11的配置示例的框图。
在图2中,频道服务器11包括内容管理服务器21、段串流器22和MPD服务器23。
在本文中,内容管理服务器21、段串流器22和MPD服务器23可以设置在网络10上的一个地方或者可以分布式地设置在网络10上。当内容管理服务器21、段串流器22和MPD服务器23分布式地设置在网络10上时,除了网络10之外,它们可以通过专用线和任何其它通信线彼此通信。
内容管理服务器21管理作为待传送内容的源数据的视频、音频、字幕等,作为频道服务器11的频道的节目,并且,这生成了比特率与作为内容的源数据的视频等不同的多个流数据,以提供给段串流器22。
在本文中,有关视频的多个流数据包括主视频和缩略图视频。
段串流器22生成通过在时间方向上划分来自内容管理服务器21的每个流数据而获得的段的段流。
即,段串流器22将流数据划分为fragmentedMP4的片段(moof和mdat),并且收集片段中的一个或者多个来生成段的文件。
段串流器22将生成MPD所需的段的元数据,诸如,段的URL(提供段的服务器(例如,频道服务器11)的URL)),提供给MPD服务器23。
此外,段串流器22通过作为网页服务器的网络10,根据来自客户端13的作为对段的请求的HTTP请求,进行将HTTP请求所请求的段(的文件)的HTTP单播传送到客户端13。
段串流器22通过网络10将缩略图视频的段传送到聚合服务器12(通过单播或者多播)。
MPD服务器23生成客户端13所需的描述了段的URL等的MPD,以接收段并且通过使用段串流器22所提供的段的元数据来进行回放控制。
MPD服务器23根据来自作为网页服务器的客户端13的作为对MPD的请求的HTTP请求,通过网络10进行将MPD HTTP单播传送到客户端13。
MPD服务器23通过网络10将缩略图视频的MPD传送到聚合服务器12(通过单播或者多播)。
在本文中,客户端13可以向MPD服务器23请求MPD,从而根据该请求接收MPD服务器23通过HTTP单播传送而传送的MPD。
客户端13可以基于来自MPD服务器23的MPD向段串流器22请求段,从而根据该请求接收段串流器22通过HTTP单播传送而传送的段,并且此外,基于MPD对段进行回放。
<聚合服务器12的配置示例>
图3是图示了图1中的聚合服务器12的配置示例的框图。
在图3中,聚合服务器12包括流聚合器31、元数据生成器32、单向文件传输(FLUTE)串流器33、多播服务器34和网页服务器35。
在本文中,从流聚合器31到网页服务器35的单元可以设置在网络10上的一个地方或者分布式地设置在网络10上,正如图2中的频道服务器11。当从流聚合器31到网页服务器35的单元分布式地设置在网络10上时,除了网络10之外,它们可以通过专用线和任何其它通信线彼此通信。
流聚合器31从多个频道服务器11所传送的多个缩略图视频(的段)中选择(聚合)形成马赛克画面的特定频道(下文也称为马赛克频道)的两个或者多个缩略图视频,作为用于马赛克频道的缩略图视频,并且将该缩略图视频提供给FLUTE串流器33。
在本文中,流聚合器31从多个频道服务器11所传送的多个缩略图视频中选择适合形成一个马赛克画面的两个或者多个缩略图视频,作为用于马赛克频道的缩略图视频。
例如,适合形成一个马赛克画面的两个或者多个缩略图视频是至少具有相同图像大小的两个或者多个缩略图视频。
另外,流聚合器31可以创造如下条件:例如,图像大小适合以格子的形式等平铺在特定大小的显示屏上并且视频是相同的类型,诸如,棒球比赛的现场直播,并且选择满足一个或者多个条件的两个或者多个缩略图视频,作为用于马赛克频道的缩略图视频。
元数据生成器32从多个频道服务器11所传送的多个缩略图视频的MPD中选择针对流聚合器31所选择的两个或者多个缩略图视频中的每个缩略图视频的MPD,并且通过使用MPD来生成缩略图元数据,该元数据是用于马赛克频道的元数据。
元数据生成器32将缩略图元数据提供给FLUTE串流器33和网页服务器35。
在本文中,例如,可以利用MBMS的用户服务描述(USD)、DASH的MPD和互联网工程任务组(IETF)的会话描述协议(SDP)文件的组合、或者移动联盟-电子服务指南(OMA-ESG)、USD、MPD和SDP的组合,作为缩略图元数据。
通过使用属性(名称)和在属性中设置的属性值来描述OMA-ESG、USD、MPD和SDP。例如,属性和属性值有时也称为键和值。
FLUTE串流器33将流聚合器31所提供的缩略图视频(的段)存储在FLUTE包中,即,分层编码传输(LCT)包(异步分层编码(ALC)包),并且将其提供给多播服务器34。
FLUTE串流器33还将元数据生成器32所提供的缩略图元数据存储在LCT包中以提供给多播服务器34。
多播服务器34通过网络10进行来自FLUTE串流器33的LCT包的FLUTE多播传送。
在本文中,由于缩略图视频(的段)和缩略图元数据如上所述存储在来自FLUTE串流器33的LCT包中,所以缩略图视频和缩略图元数据由多播服务器34多播传送。
网页服务器35根据来自客户端13的请求(HTTP请求)通过网络10将来自元数据生成器32的缩略图元数据HTTP单播传送到客户端13。
在本文中,如上所描述的,多播服务器34和网页服务器35用作传送缩略图元数据的传送单元。
同时,尽管缩略图视频由图3中的聚合服务器12如上所述地多播传送,但是聚合服务器12还可以获得有关来自频道服务器11的缩略图视频的内容的主视频、音频和字幕(的段)以进行多播传送,如同缩略图视频的情况一样。
当聚合服务器12多播传送缩略图视频时,频道服务器11可以多播传送主视频等。
此外,在聚合服务器12中,多播服务器34可以多播传送缩略图视频,并且网页服务器35可以单播传送该缩略图视频。
<客户端13的配置示例>
图4是图示了图1中的客户端13的配置示例的框图。
在图4中,客户端13包括接收单元40和回放单元43。
例如,接收单元40用作,通过用户,根据客户端13的运行等,来接收从频道服务器11传送的MPD和从聚合服务器12传送的缩略图元数据的接收单元。
例如,接收单元40通过用户,根据客户端13的运行等,基于从频道服务器11接收到的MPD和从聚合服务器12接收到的缩略图元数据,接收从频道服务器11传送的(主视频等的)段和从聚合服务器12多播传送的(缩略图视频等的)段。
此外,接收单元40将从频道服务器11和聚合服务器12接收到的段提供给回放单元43,并且,基于从频道服务器11接收到的MPD和从聚合服务器12接收到的缩略图元数据,通过回放单元43,来控制段的回放。
回放单元43根据接收单元40的控制来回放接收单元40所提供的段,即,由缩略图视频、主视频、音频、字幕等形成的马赛克画面。
在本文中,接收单元40包括中间件41和DASH客户端42。
DASH客户端42按照需要将请求MPD和缩略图视频、主视频等的段的HTTP请求输出至中间件41。
中间件41接收按照需要多播传送的MPD、缩略图元数据和段,并且当DASH客户端42输出HTTP请求时,这决定了是否基于缩略图元数据等来多播传送HTTP请求所请求的MPD和段。
当多播传送DASH客户端42所输出的HTTP请求所请求的MPD和段时,中间件41接收多播传送的MPD和段以提供给DASH客户端42。
同时,当已经接收到DASH客户端42所输出的HTTP请求所请求的MPD和段时,中间件41将接收到的MPD和段提供给DASH客户端42。
另一方面,当未多播传送DASH客户端42所输出的HTTP请求所请求的MPD和段时,中间件41将DASH客户端42所输出的HTTP请求原封不动地发送到网络10。然后,中间件41根据HTTP请求接收单播传送的MPD和段以提供给DASH客户端42。
因此,DASH客户端42作为通用的DASH客户端输出请求必要的MPD和段的HTTP请求,并且根据HTTP请求接收中间件41所提供的MPD和段进行处理。
<内容提供系统的处理>
图5是图示了通过图1中的内容提供系统来提供缩略图视频的过程的视图。
在步骤S11中,频道服务器11将缩略图视频传送到聚合服务器12(图3)的流聚合器31。
此外,在步骤S12中,频道服务器11将缩略图视频的MPD传送到聚合服务器12的元数据生成器32。
在步骤S13中,当从客户端13发送了请求缩略图视频的HTTP请求时,频道服务器11接收HTTP请求。
在步骤S14中,频道服务器11将来自客户端13的HTTP请求所请求的缩略图视频(的段)单播传送到客户端13。
在步骤S21中,聚合服务器12(图3)的流聚合器31接收在步骤S11中由多个频道服务器11传送的缩略图视频。
在步骤S23中,流聚合器31在步骤S22中从多个频道服务器11接收到的多个缩略图视频中选择形成马赛克频道的两个或者多个缩略图视频,并且,在步骤23中,将该缩略图视频提供给FLUTE串流器33。
在步骤S31中,聚合服务器12的元数据生成器32接收在步骤S12中由多个频道服务器11传送的缩略图视频的MPD。
在步骤S32中,元数据生成器32从多个频道服务器11接收到的多个缩略图视频的MPD中选择针对流聚合器31所选择的两个或者多个缩略图视频中的每个缩略图视频的MPD,并且通过使用MPD来生成缩略图元数据。此外,在步骤S33中,元数据生成器32将缩略图元数据提供给FLUTE串流器33和网页服务器35。
在步骤S41中,聚合服务器12的FLUTE串流器33接收在步骤S33中由元数据生成器32提供的缩略图元数据。
此外,在步骤S42中,FLUTE串流器33接收在步骤S23中由流聚合器31提供的缩略图视频(的段)。
FLUTE串流器33将来自元数据生成器32的缩略图元数据和来自流聚合器31的缩略图视频存储在LCT包中,以在步骤S43中对它们进行分包,并且,在步骤S44中,将它们提供给多播服务器34。
在步骤S51中,聚合服务器12的网页服务器35接收在步骤S33中由元数据生成器32提供的缩略图元数据。
在步骤S52中,当从客户端13发送了请求缩略图元数据的HTTP请求时,网页服务器35接收HTTP请求。
在步骤S53中,网页服务器35将来自客户端13的HTTP请求所请求的缩略图元数据单播传送到客户端13。
在步骤S61中,聚合服务器12的多播服务器34接收在步骤S44中由FLUTE串流器33提供的LCT包。
在步骤S62中,多播服务器34多播传送来自FLUTE串流器33的存储有缩略图元数据的LCT包。
此外,在步骤S63中,多播服务器34多播传送来自FLUTE串流器33的设置有缩略图视频的LCT包。
在步骤S71中,在客户端13(图4)中,接收单元40接收在步骤S62中由多播服务器34多播传送的缩略图元数据(的LCT包)。
可替代地,在步骤S72中,在客户端13中,接收单元40发送请求缩略图元数据的HTTP请求。
网页服务器35在步骤S52中接收在步骤S72中由客户端13发送的HTTP请求,并且在上述步骤53中将HTTP请求所请求的缩略图元数据单播传送到客户端13。
在步骤S73中,客户端13的接收单元40接收以上述方式单播传送的缩略图元数据。
在步骤S74中,客户端13的接收单元40基于缩略图元数据来接收在步骤S63中由多播服务器34多播传送的缩略图视频(的LCT包)。
可替代地,在步骤S75中,在客户端13中,接收单元40发送请求缩略图视频的HTTP请求。
频道服务器11在步骤S13中接收在步骤S75中由客户端13发送的HTTP请求,并且在上述步骤S14中将HTTP请求所请求的缩略图视频单播传送到客户端13。
在步骤S76中,客户端13的接收单元40接收以上述方式单播传送的缩略图视频。
在步骤S77中,客户端13的回放单元43回放在步骤S74或者S76中由接收单元40接收到的(多个)缩略图视频,并且显示马赛克画面,缩略图视频以格子的形式设置在该马赛克画面上。
客户端13的用户可以观看马赛克画面以容易地选择与形成马赛克画面的缩略图视频对应的频道,作为查看目标。
<通过网络10传送的数据的描述>
图6是图示了在图1中的内容提供系统中通过网络10传送的数据的示例的视图。
在内容提供系统中,将元数据(诸如,MPD、SDP、USD和OMA-ESG)以及缩略图视频、主视频等的段传送到客户端13。
可以多播传送或者单播传送元数据和段。
将MPD、SDP和USD的组合、以及通过将OMA-ESG添加到其而获得的组合用作缩略图元数据。
图7是图示了MPD、SDP、USD和OMA-ESG的视图。
如果将特定节目设置为感兴趣的节目,那么在感兴趣的节目的OMA-ESG中,描述了感兴趣的节目的详细信息、访问感兴趣的节目的USD的方法等。
因此,当获得感兴趣的节目的OMA-ESG时,可以通过参照在OMA-ESG中描述的访问USD的方法来获得感兴趣的节目的USD。
在感兴趣的节目的USD中描述了感兴趣的节目的SDP的统一资源标识符(URI)、感兴趣的节目的MPD的URI等。
因此,当获得感兴趣的节目的的USD时,可以通过参照在USD中描述的SDP和MPD的URI来获得感兴趣的节目的SDP和MPD。
在感兴趣的节目的SDP中,描述了传输属性等,诸如,IP地址和端口号,将感兴趣的节目的段多播传送到该IP地址和该端口号。
因此,可以通过获得感兴趣的节目的SDP来接收基于在SDP中描述的IP地址和端口号而多播传送的感兴趣的节目的段。
在感兴趣的节目的MPD中,描述了感兴趣的节目的段的URL、段的回放控制所需的信息等。
因此,可以通过获得感兴趣的节目的MPD,基于在MPD中描述的URL,通过单播来接收感兴趣的节目的段。还可以基于感兴趣的节目的MPD来回放感兴趣的节目的段。
即,由于在MPD中包括段的回放控制所需的信息,需要MPD来通过单播接收段并且回放段。
<缩略图视频的公告>
客户端13有必要获知(辨识)哪一个视频是缩略图视频以供客户端13(图1)接收缩略图视频并且形成由多个缩略图视频形成的马赛克画面。
因此,在图1中的内容提供系统中,聚合服务器12公告缩略图视频以使客户端13获知哪一个视频是缩略图视频。
通过传送缩略图元数据来公告缩略图视频,该缩略图元数据包括指示视频是缩略图视频的缩略图信令信息。
在本文中,可以在USD、MPD和OMA-ESG中包括缩略图信令信息,作为缩略图元数据。
例如,聚合服务器12可以通过MBMS的互动频道(在ptp(点对点)承载上的单播)和广播多播频道((在点对多点(ptm)承载上的广播/多播)来传送包括缩略图信令信息的缩略图元数据。
即,聚合服务器12可以通过图3所示的FLUTE多播(通过广播网络(还包括在点对点网络上的多播网络))和HTTP单播(通过点对多点网络)来传送缩略图元数据。
下文描述了通过使用MBMS来传送缩略图元数据的情况,该MBMS是便携式网络上的移动广播系统。
图8是图示了MBMS的协议栈的视图。
MBMS包括点对点通信的互动频道和点对多点通信的广播多播频道。
MBMS的互动频道用于HTTP单播传送段和元数据,诸如,MPD(包括作为缩略图元数据的MPD等)。MBMS的广播多播频道用于FLUTE多播传送段和元数据,诸如,MPD。
可以传送作为缩略图元数据的MPD、USD、MPD和OMA-ESG中的任何一个,作为互动频道的Service Announcement&Metadata 51和广播多播频道的Service Announcement&Metadata 52。
同时,当多播传送段时,通过FLUTE多播传送来传送段,作为广播多播频道的Download 3GPP file format,Binary data,Still images,Text等53。
<作为缩略图元数据的USD>
图9是图示了作为缩略图元数据的USD的数据模型的示例的视图。
在图9中的缩略图元数据的数据模型中,r12:appServiceDescription(要素)66是新引入MBMS的USD的数据模型中的。
在图9中,User Service Bundle Description 61是根要素,并且User ServiceDescription 62是有关服务的信息。作为有关传送段的方法的信息的传送方法63包括指示SDP等的URI of Session Description 64。session Description 64指示SDP,并且mediaPresentation Description 65指示MPD。
r12:appServiceDescription 66是用于标志是否将服务(广播站)(频道)所提供的内容多播传送(或者广播传送)或者单播传送到客户端13的信息。
在本文中,在图9中,例如,在连接User Service Bundle Description 61和UserService Description 62的链路(线)L的User Service Description 62的一侧的描述“1......N”指示在与链路L的描述“1......N”相对的一侧上的User Service BundleDescription 61包括(或者参照)1个到N个User Service Descriptions 62。
在链路L的User Service Bundle Description 61的一侧上的描述“1”指示在链路L的描述“1”的相对侧上的the User Service Description 62包括在1个User ServiceBundle Description 61中(或者由1个User Service Bundle Description 61参照)。
这也适用于稍后描述的图15。
图10是图示了构成作为用可扩展标记语言(XML)描述的缩略图元数据的USD的XML的要素和属性的示例的视图。
USD包括bundleDescription(要素)、bundleDescription/UserServiceDescription(要素)、bundleDescription/userServiceDescription/@serviceId(属性)、bundleDescription/userServiceDescription/DeliveryMethod(要素)和bundleDescription/userServiceDescription/DeliveryMethod/@sessionDescriptionURI(属性)。
在本文中,bundleDescription/UserServiceDescription指示UserServiceDescription(要素)是包括在bundleDescription(要素)中的要素,例如,并且在下文中也称为UserServiceDescription or/UserServiceDescription。
例如,bundleDescription/userServiceDescription/@serviceId指示serviceId是属于/userServiceDescription的属性,并且在下文中也称为serviceId或者/@serviceId。
bundleDescription要素是一种或者多种服务的集合的信息,并且UserServiceDescription要素是单种服务的信息。serviceId属性是用于识别服务的服务标识符,并且DeliveryMethod要素是传送服务所提供的内容的方法的信息。
sessionDescriptionURI属性指示用于参照文件的信息,该文件包括用于接收服务所提供的内容的信息。
例如,采用SDP(文件)作为包括用于接收服务所提供的内容的信息的文件。
当采用SDP作为包括用于接收服务所提供的内容的信息的文件时,采用包括在通过多播传送内容时多播的IP地址和端口号的信息作为用于接收服务所提供的内容的信息。此外,将SDP等的URI设置为在sessionDescriptionURI属性中的属性值,该sessionDescriptionURI属性指示用于参照SDP的信息。
除了上述bundleDescription要素、UserServiceDescription要素、serviceId属性、DeliveryMethod要素和sessionDescriptionURI属性之外,作为缩略图元数据的USD还包括缩略图信令信息。
同时,可以在上述USD的适当的位置,可以采用包括等效于bundleDescription要素、UserServiceDescription要素、serviceId属性、DeliveryMethod要素和sessionDescriptionURI属性中的一个或者多个的信息、以及缩略图信令信息的任何元数据,作为缩略图元数据,来替代包括bundleDescription要素、UserServiceDescription要素、serviceId属性、DeliveryMethod要素、sessionDescriptionURI属性和缩略图信令信息的上述USD。
图11是图示了作为在XML中描述的缩略图元数据的USD的示例的视图。
与图9中的User Service Bundle Description 61对应的bundleDescription要素71是USD的根要素。
UserServiceDescription要素72与图9中的UserServiceDescription 62对应。在bundleDescription要素71中包括的UserServiceDescription要素72与单种服务对应。
/@r7:serviceClass属性73属于UserServiceDescription要素72。在本文中,/@r7:serviceClass属性73中的“r7”指示3GPP规范的版本7引入了/@r7:serviceClass属性73。
至于作为缩略图元数据的USD,新采用“urn:MosaicableComponents”作为方案标识符(serviceClass的类名称),该方案标识符(serviceClass的类名称)作为/@r7:serviceClass属性73的属性值。
新的属性值“urn:MosaicableComponents”指示传送与USD对应的视频的服务(频道)是传送适合形成马赛克画面的缩略图视频(包括适合形成马赛克画面的缩略图视频的视频)的服务,在该USD中,描述了设置有属性值“urn:MosaicableComponents”(在USD中描述了其视频信息)的/@r7:serviceClass属性73。
因此,设置有属性值“urn:MosaicableComponents”的/@r7:serviceClass属性73用作指示视频是缩略图视频的缩略图信令信息(起到缩略图信令信息的作用)。
同时,在图11中的USD中,除了/@r7:serviceClass属性73之外,稍后将描述的/@thumbnailVideo属性还用作缩略图信令信息。因此,可以省略作为缩略图信令信息的/@r7:serviceClass属性73。
与图9中的Delivery Method 63对应的/DeliveryMethod要素74包括/@sessionDescriptionURI属性75。
在/@sessionDescriptionURI属性75中设置SDP 121的URI(用于参照SDP121的信息),在该URI中,将多播的IP地址和端口号描述为用于接收由服务提供的内容,在包括/@sessionDescriptionURI属性75的USD中描述了该服务的信息。
每个描述80、90和100,作为包括/r12:appServiceDescription要素作为最高(层)要素的描述,是由可以形成一个马赛克画面MZ的多种不同服务(频道)(广播站)中的每种服务提供的内容的信息。
因此,USD包括针对可以形成一个马赛克画面的多个内容中的每个内容的/r12:appServiceDescription要素。
在本文中,描述80、90和100分别是服务ch#1、ch#2和ch#3所提供的内容的信息。
描述80包括在/UserServiceDescription要素72中包括的/r12:appServiceDescription要素81。/r12:appServiceDescription要素81是用于标志是否将服务ch#1所提供的内容(的段)多播传送(或者广播传送)或者单播传送到客户端13的信息。
/r12:appServiceDescription要素81包括/@mpdURI属性,并且进一步包括一个或者多个/broadcast要素和一个或者多个/unicast要素中的任何一个或者两个。
在本文中,将用于进行内容的回放控制的MPD的URI设置在/@mpdURI属性中,该内容的传送方法由包括/@mpdURI属性的/r12:appServiceDescription要素指示。
/broadcast要素指示其URL由baseURL属性指示的内容是通过多播来传送的,该/broadcast要素包括指示内容的URL的baseURL属性,该内容的传送方法由包括/broadcast要素的/r12:appServiceDescription要素指示。
/unicast要素指示其URL由baseURL属性指示的内容是通过单播来传送的,该/unicast要素包括指示内容的URL的baseURL属性,该内容的传送方法由包括/unicast要素的/r12:appServiceDescription要素指示。
在图11中,描述80中的/r12:appServiceDescription要素81包括/@mpdURI属性82,并且进一步包括一个/broadcast要素83以及两个/unicast要素86和87。
由于/r12:appServiceDescription要素81包括一个/broadcast要素83以及两个/unicast要素86和87,所以可以辨识出,存在多播传送的一个流、以及作为服务ch#1的内容的(流)而单播的两个流,该服务ch#1的内容的传送方法由/r12:appServiceDescription要素81指示。
服务ch#1所提供的内容的MPD 111的URI设置在/@mpdURI属性82中。
/broadcast要素83指示服务ch#1所提供的内容的特定流1311是多播传送的,并且包括图11中的/@baseURL属性和/@thumbnailVideo属性。
将由/broadcast要素83指示为多播传送的内容的流1311的URL,即,在由/broadcast要素83指示为多播传送的服务ch#1所提供的内容的MPD 111中所描述的流1311的AdaptasionSet/baseURL 111A,设置在包括在/broadcast要素83中的/@baseURL属性中。
在作为boolean型属性的/broadcast要素83中包括的/@thumbnailVideo属性用作缩略图信令信息,该缩略图信令信息指示由/broadcast要素83指示为多播传送的内容的流1311是否是缩略图视频(的流)。
在图11中,流1311是缩略图视频TS#1的流。
/broadcast要素83进一步包括/association要素84,并且/association要素84包括/sessionDescription要素85。
/sessionDescription要素85指示SDP 121的URI,在该SDP 121的URI中,描述了IP地址和端口号,将由/broadcast要素83指示为多播传送的内容的流1311多播传送到该IP地址和该端口号。即,/sessionDescription要素85指示与/@sessionDescription URI属性75所指示的SDP 121(的URI)相同的SDP 121。
/unicast要素86指示服务ch#1所提供的内容的另一个流(例如,主视频MS#1的流)是单播传送的并且包括/@baseURL属性。
将由/unicast要素86指示为单播传送的内容的另一个流的URL,即,在由/unicast要素86指示为单播传送的内容的MPD 111中所描述的另一个流的AdaptasionSet/baseURL111B设置在包括在/unicast要素86中的/@baseURL属性中。
/unicast要素87指示服务ch#1所提供的内容的另一个流(例如,音频流)是单播传送的并且包括/@baseURL属性。
将由/unicast要素87指示为单播传送的内容的又一个流的URL,即,在由/unicast要素87指示为单播传送的内容的MPD 111中所描述的又一个流的AdaptasionSet/baseURL111C设置在包括在/unicast要素87中的/@baseURL属性中。
还分别在针对服务ch#1和ch#2的描述90和100中包括与描述80的信息相似的信息。
在本文中,在图11中,/r12:appServiceDescription要素91至/unicast要素97是与/r12:appServiceDescription要素81至/unicast要素87相似的信息。
MPD 112和113分别是服务ch#2和ch#3所提供的内容的MPD。
在服务ch#2中(还在服务ch#1和ch#3中),多播传送缩略图视频TS#2(的流),并且单播传送主视频MS#2和音频(的流),并且在MPD 112中,描述了其AdaptasionSet/baseURL(和segmentURL),即,缩略图视频TS#2的AdaptasionSet/base URL 112A、主视频MS#2的AdaptasionSet/baseURL 112B、以及音频的AdaptasionSet/baseURL 112C。
此外,例如,在图11中,服务ch#1所提供的缩略图视频TS#1、服务ch#2所提供的缩略图视频TS#2、以及服务ch#3所提供的缩略图视频是具有480×270(宽度×高度)像素等的相同图像大小的视频,例如,以四排和四列设置在,例如,1920×1080像素的显示屏上的视频。
例如,在MBMS承载上的一个FLUTE会话中,选择性地多播传送服务ch#1所提供的缩略图视频TS#1的流1311、服务ch#2所提供的缩略图视频TS#2的流1312、以及服务ch#3所提供的缩略图视频TS#3的流1313
在SDP 121中,描述了IP地址和端口号,如上所描述的,在一个FLUTE会话中,将服务ch#1所提供的缩略图视频TS#1的流1311、服务ch#2所提供的缩略图视频TS#2的流1312、以及服务ch#3所提供的缩略图视频TS#3的流1313多播传送到该IP地址和该端口号。
客户端13可以接收图11中的USD,从而辨识出,缩略图视频是通过设置有属性值“urn:MosaicableComponents”的/@r7:serviceClass属性73以及作为缩略图信令信息的/@thumbnailVideo属性而传送的。
此外,客户端13可以通过包括/@thumbnailVideo属性等的/broadcast要素83辨识出,存在多播传送的流,并且多播传送的流是缩略图视频(的流)。
客户端13可以通过/broadcast要素83,/association要素84、/sessionDescription要素85等所指示的SDP 121的URI来接收描述了IP地址和端口号的SDP121,将缩略图视频多播传送到该IP地址和该端口号,并且可以基于在SDP 121中所描述的IP地址和端口号来接收服务ch#1所提供的缩略图视频TS#1的流1311、服务ch#2所提供的缩略图视频TS#2的流1312、和服务ch#3所提供的缩略图视频TS#3的流1313,在一个FLUTE会话中多播传送该流1311、1312和1313
因此,客户端13可以接收服务频道ch#1的缩略图视频TS#1、服务频道ch#2的缩略图视频TS#2和服务频道ch#3的缩略图视频TS#3作为形成一个马赛克画面MZ的多个服务所提供的内容,并且通过使用缩略图视频来容易地生成马赛克画面MZ。
同时,虽然在图11中的USD中描述了指示是否多播传送(广播传送)或者单播传送内容的三个/r12:appServiceDescription要素(/r12:appServiceDescription要素81、91等),但是在一个USD中所描述的/r12:appServiceDescription要素的数量并不限于三个。
即,例如,在一个USD中,可以描述与提供能够形成一个马赛克画面MZ的缩略图视频的服务一样多的/r12:appServiceDescription要素。
例如,可以采用相同的类型(诸如,棒球比赛的回放)的缩略图视频,作为能够形成一个马赛克画面MZ的缩略图视频。然而,能够形成一个马赛克画面MZ的缩略图视频并不限于相同类型的缩略图视频。
在客户端13中,当观看其上设置有服务频道ch#1的缩略图视频TS#1、服务频道ch#2的缩略图视频TS#2和服务频道ch#3的缩略图视频的马赛克画面MZ的用户选择马赛克画面MZ上的特定缩略图视频时,用户可以选择频道以将显示屏从马赛克画面MZ切换到服务所提供的主视频(和音频),该服务提供用户所选择的缩略图视频。
例如,当用户选择服务ch#1的缩略图视频TS#1时,客户端13可以基于在有关服务ch#1的/r12:appServiceDescription要素81(包括指示多播传送服务ch#1的缩略图视频TS#1的/broadcast要素83的/r12:appServiceDescription要素81)中包括的/@mpdURI属性82,来获得(接收、认识)服务ch#1的内容的MPD111。
客户端13可以辨识出,服务ch#1的主视频MS#1和音频是基于在有关服务ch#1的/r12:appServiceDescription要素81中包括的/unicast要素86和87而单播传送的。
客户端13可以基于MPD 111发送请求服务ch#1的主视频MS#1和音频的HTTP请求,并且根据回放的HTTP请求来接收单播传送的服务ch#1的主视频MS#1和音频。
同时,服务ch#1的主视频MS#1和音频可以单播传送,并且可以作为服务ch#1的缩略图视频TS#1多播发送。
可以在相同的FLUTE会话中与服务ch#1的缩略图视频TS#1(此外,能够形成一个马赛克画面MZ的另一频道的缩略图视频)一起,多播传送服务ch#1的主视频MS#1和音频(此外,提供能够形成一个马赛克画面MZ的缩略图视频的服务的主视频和音频)。
在这种情况下,可以显著改善客户端13中的频道选择性能,即,可以极快地从马赛克画面MZ切换到服务的主视频和音频,该服务提供用户所选择的缩略图视频。
<作为缩略图元数据的MPD>
图12是图示了作为缩略图元数据的MPD的概述的视图。
作为缩略图元数据的MPD形成为与DASH的MPD相似。
即,特定内容C的MPD包括一个或者两个Period。
Period指示通过在时间方向上划分内容C而获得的部分,并且在Period中,描述了Period所指示的部分的start时间等。
Period包括所需数量的AdaptationSet。例如,AdaptationSet是为了每个媒体(诸如,视频、音频、字幕等)准备的,并且在AdaptationSet中,描述了语言和编解码的信息等。
AdaptationSet包括所需数量的Representation。例如,Representation是针对每个比特率等准备的,并且在Representation中,描述了比特率、图像大小等。
Representation包括所需数量的SegmentInfo片,并且在SegmentInfo中,描述了段的信息。
图13是图示了构成作为在XML中描述的缩略图元数据的MPD的XML的要素和属性的示例的视图。
MPD包括MPD(要素)、MPD/@profile(属性)、MPD/Period(要素)和MPD/@minBufferTime(属性)。
作为根要素的MPD要素包括/@profile属性和/@minBufferTime属性。
作为部分的信息的/Period要素用于收集部分中的段,该部分是通过在时间方向上划分与描述了/Period要素的MPD对应的内容(回放控制由MPD进行的内容)而获得的。
/@profile属性指示MPD遵循的运行简档,在该MPD中,描述了/@profile属性,并且/@minBufferTime属性指示在开始回放与MPD对应的内容之前所需要的最小缓冲时间(数据缓冲量),在该MPD中,描述了/@minBufferTime属性。
除了上述MPD要素、/@profile属性、/Period要素和/@minBufferTime属性之外,作为缩略图元数据的MPD还包括缩略图信令信息。
例如,可以采用MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性作为在MPD中包括的缩略图信令信息,在该MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性中,将指示回放控制由MPD进行的内容是缩略图视频的信息描述为属性值。
同时,可以采用包括等效于MPD要素、/@profile属性、/Period要素、/@minBufferTime属性和缩略图信令信息中的一个或者多个的信息的任何元数据,来替代包括MPD要素、/@profile属性、/Period要素、/@minBufferTime属性和缩略图信令信息的上述MPD,作为缩略图元数据。
图14是图示了作为在XML中描述的缩略图元数据的MPD的示例的视图。
即,图14图示了包括视频缩略图(例如,作为服务ch#1所提供的内容的缩略图视频TS#1、主视频MS#1和音频)的内容的MPD的示例。
在图14中的MPD中,MPD要素是根要素,并且描述了属于MPD要素的Period要素、属于Period要素的AdaptationSet要素、以及属于AdaptationSet要素的ViewPoint要素。
在图14中,在描述141中的AdaptationSet要素,作为缩略图视频的AdaptationSet(要素),包括width属性和height属性。
在描述141中,width=′480′height=′270′指示缩略图的图像大小是480×270像素。
将有关缩略图视频的显示的信息(诸如,图像大小)描述为属于AdaptationSet要素或者在描述141中AdaptationSet要素中包括的要素的属性。
描述142中的ViewPoint要素包括schemeIdURI属性,并且在图14中的schemeIdURI属性中设置了属性值“urn:thumbnailVideo”。
属性值“urn:thumbnailVideo”是新的方案标识符,该新的方案标识符指示包括属性值“urn:thumbnailVideo”的内容是缩略图视频,该内容的回放控制由MPD(MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI)进行。
属于设置有属性值“urn:thumbnailVideo”的ViewPoint要素的schemeIdURI属性用作缩略图信令信息。
同时,当将不同比特率的多个流准备为缩略图(的流)时,可以在描述141中的AdaptationSet要素中的缩略图的多个比特率中的每个比特率中包括Representation要素。
根据上述MPD,客户端13可以指定缩略图视频(的段)并且获得缩略图视频以容易地生成由缩略图视频形成的马赛克画面。
<作为缩略图元数据的OMA-ESG>
图15是图示了作为缩略图元数据的OMA-ESG的数据模型的示例的视图。
图15中的缩略图元数据的数据模型形成为与OMA-ESG的数据模型相似。
然而,在作为缩略图元数据的OMA-ESG中,在服务151中包括指示服务所提供的内容的视频是缩略图视频的缩略图信令信息,在OMA-ESG中,描述了该服务的信息。
此外,在作为缩略图元数据的OMA-ESG中,例如,Access 152包括USD的URI,作为对描述了缩略图视频的信息的USD(图11)的参照。
图16是图示了作为构成在XML中描述的缩略图元数据的OMA-ESG的XML的要素和属性的示例的视图。
OMA-ESG包括Access(要素)、Access/@id(属性)、Access/@version(属性)、Access/AccessType(要素)、Access/AccessType/BroadcastServiceDelivery(要素)、Access/AccessType/BroadcastServiceDelivery/SessionDescription(要素)、Access/AccessType/UnicastServiceDelivery(要素)、Access/ServiceClass(要素)和Access/AccessType/BroadcastServiceDelivery/SessionDescription/USBDRef(要素).
与图15中的Access 152对应的Access要素是访问信息,该访问信息用于访问参照有关服务的服务信息的服务。
/@id属性是识别访问信息(Access要素)的访问信息标识符,并且/@version属性是指示访问信息的所描述内容的版本的版本信息。
/AccessType要素是指示服务是否是广播服务或者点对点服务的信息,并且/BroadcastServiceDelivery要素是指示服务是广播服务的信息。
/SessionDescription要素是指示会话描述的信息,并且UnicastServiceDelivery要素是指示服务是点对点服务的信息。
/ServiceClass要素是指示服务的类的信息,并且/USBDRef要素是包括USD的URI的信息,例如,用于参照描述了缩略图视频的信息的USD(图11)。
除了上述Access要素、Access/@id属性、Access/@version属性、Access/AccessType要素、Access/AccessType/BroadcastServiceDelivery要素、Access/AccessType/BroadcastServiceDelivery/SessionDescription要素、Access/AccessType/UnicastServiceDelivery要素、Access/ServiceClass要素和USBDRef要素之外,作为缩略图元数据的OMA-ESG还包括缩略图信令信息。
例如,可以采用/ServiceType要素作为在OMA-ESG中包括的缩略图信令信息,在该/ServiceType要素中,描述了指示与OMA-ESG对应的服务(其信息在OMA-ESG中描述了的服务)所提供的内容是缩略图视频的信息。
/ServiceType要素是在Service要素中包括的信息。与图15中的Service 151对应的Service要素是有关服务的服务信息。作为服务标识符的globalServiceID属性属于Service要素(包括在Service要素中),该服务标识符识别Service要素(服务信息)。
同时,可以采用任意元数据和缩略图信令信息作为缩略图元数据,该任意元数据包括等效于Access要素、Access/@id属性、Access/@version属性、Access/AccessType要素、Access/AccessType/BroadcastServiceDelivery要素、Access/AccessType/BroadcastServiceDelivery/SessionDescription要素、Access/AccessType/UnicastServiceDelivery要素、Access/ServiceClass要素和/USBDRef要素中的一种或者多种的信息,来替代包括Access要素、Access/@id属性、Access/@version属性、Access/AccessType要素、Access/AccessType/BroadcastServiceDelivery element要素、Access/AccessType/BroadcastServiceDelivery/SessionDescription element要素、Access/AccessType/UnicastServiceDelivery element要素、Access/ServiceClass element要素、/USBDRef要素和缩略图信息的上述OMA-ESG。
图17A和图17B是图示了作为在XML中描述的缩略图元数据的OMA-ESG的示例的视图。
图17A图示了作为缩略图元数据的OMA-ESG的Service要素的示例,并且图17B图示了作为缩略图元数据的OMA-ESG的Access要素的示例。
在图17A的Service要素中,例如,引入作为指示与OMA-ESG对应的服务所提供的视频是缩略图视频的值的12,作为/ServiceType要素的新值,在该OMA-ESG中,描述了Service要素。
在/ServiceType要素中,设置了作为新值12的12。
图17A中的Service要素包括作为服务标识符的Service/globalServiceID属性,并且在globalServiceID属性中,设置了作为图17A中的Service要素的服务标识符的身份证明(ID)。
在本文中,当在/ServiceType要素中设置了新值12时,至少在内容中包括适合形成马赛克画面的缩略图视频,在包括/ServiceType要素的Service要素中,描述了该内容的信息。
在图17B中的Access要素中,在/USBDRef要素中描述了,例如,包括USD的URI的信息,作为对USD(的作为根要素的bundleDescription要素(图11))的参照,在该USD中,描述了与OMA-ESG对应的服务所提供的缩略图视频的信息,在该OMA-ESG中,描述了/USBDRef要素。
图17B中的Access要素包括Access/ServiceReference要素,并且/ServiceReference要素包括Access/ServiceReference/@idRef属性。
将在图17A的Service要素的globalServiceID属性中所设置的值设置为Service要素的ID,在/@idRef属性中,应该参照了描述了/@idRef属性的Access要素。
图18是图示了作为图17A和图17B中的缩略图元数据的OMA-ESG的视图。
当客户端13接收到作为17A和图17B中的缩略图元数据的OMA-ESG时,这可以基于图17B中的Access要素的/@idRef属性来参照图17A中的Service要素。
客户端13可以通过参照Service要素的描述了新值12的/ServiceTypeelement来辨识出,与OMA-ESG对应的服务所提供的视频是缩略图视频,在该OMA-ESG中,描述了Service要素。
当客户端13需要与图17A中的描述了Service要素的OMA-ESG对应的服务所提供的缩略图视频时,这可以参照图17B中的Access要素的/USBDRef要素以辨识出URI,作为对USD(的作为根要素的bundleDescription要素(图11))的参照,在该USD中,描述了与OMA-ESG对应的服务所提供的缩略图视频的信息,在该OMA-ESG中,描述了/USBDRef要素,从而基于URI获得(接收)USD(图11),在该USD中,描述了缩略图视频的信息。
此后,客户端13可以在接收到图11中的USD时接收缩略图视频,并且通过使用缩略图视频来容易地生成马赛克画面。
同时,当使用MPD、SDP、USD和OMA-ESG的组合作为缩略图元数据时,可以辨识出视频是否是来自OMA-ESG的Service/ServiceType要素的缩略图视频,从而可以省略USD(图11)的/@r7:serviceClass属性73。
<传送内容的方法>
图19是图示了传送包括缩略图视频的内容的方法的第一示例的视图。
同时,在图19中,例如,通过三个广播站(服务)的频道ch#1、ch#2和ch#3来传送主视频、音频和缩略图视频的三个流。
分别将频道ch#1所传送的主视频、音频和缩略图视频称为主视频MS#i、音频AS#i和缩略图视频TM#i。
这也适用于稍后所描述的图20、图21和图27至图29。
在图19中,可以多播传送(例如,多播FLUTE会话中的多播传送)或者单播传送(例如,单播HTTP会话中的单播传送)主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3。
当多播传送主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3时,在一个FLUTE会话FS-T中多播传送缩略图视频TM#1至TM#3。
分别在一个FLUTE会话FS-M#1、一个FLUTE会话FS-M#2和一个FLUTE会话FS-M#3中多播传送主视频MS#1、主视频MS#2和主视频MS#3。
此外,分别在一个FLUTE会话FS-A#1、一个FLUTE会话FS-A#2和一个FLUTE会话FS-A#3中多播传送音频AS#1、音频AS#2和音频AS#3。
同时,在频道ch#1的内容的MPD#1中包括主视频MS#1、音频AS#1和缩略图视频TM#1中的每一个的AdaptationSet(要素)。此外,MPD#1的缩略图视频TM#1的AdaptationSet包括ViewPoint/@schemeIdURI属性,在该ViewPoint/@schemeIdURI属性中,将属性值“urn:thumbnailVideo”设置为用于指示AdaptationSet(的视频)是缩略图视频的缩略图信令信息。同时,除了ViewPoint要素之外,可以采用,例如,具有与ViewPoint要素的结构类似的结构的元素,诸如,Role元素、EssentialProperty要素和SupplementalProperty要素,作为设置有属性值“urn:thumbnailVideo”等的/@schemeIdURI属性所属的元素。
这也适用于频道ch#2和ch#3的内容的MPD。
图20是图示了传送包括缩略图视频的内容的方法的第二示例的视图。
在图20中,正如在图19中一样,可以多播传送或者单播传送主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3。
正如在图19中一样,当多播传送主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3时,在一个FLUTE会话FS-T中多播传送缩略图视频TM#1至TM#3。
分别在一个FLUTE会话FS-M#1、一个FLUTE会话FS-M#2和一个FLUTE会话FS-M#3中多播传送主视频MS#1和音频AS#1、主视频MS#2和音频AS#2以及主视频MS#3和音频AS#3。
同时,将频道ch#1的内容的MPD#1、频道ch#2的内容的MPD以及频道ch#3的内容的MPD配置为图19中的MPD。
图21是图示了传送包括缩略图视频的内容的方法的第三示例的视图。
在图21中,正如在图19中一样,可以多播传送或者单播传送主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3。
当多播传送主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3时,在一个FLUTE会话FS中多播传送所有主视频MS#1至MS#3、音频AS#1至AS#3和缩略图视频TM#1至TM#3。
同时,将频道ch#1的内容的MPD#1、频道ch#2的内容的MPD以及频道ch#3的内容的MPD配置为图19中的MPD。
<马赛克画面的显示示例>
图22A和图22B是图示了客户端13中的马赛克画面的显示示例的视图。
如上面描述的,客户端13可以基于作为缩略图元数据的MPD、SDP和USD的组合以及通过将OMA-ESG添加到其而获得的组合,来接收缩略图视频,并且显示马赛克画面,缩略图视频以格子的形式设置在该马赛克画面上。
图22A图示了其上以四排和四列设置有16个缩略图视频的马赛克画面的示例,并且图22B图示了其上以两排和两列设置有四个缩略图视频的马赛克画面。
当客户端13接收到16个缩略图视频时,如果,例如,每个缩略图视频的图像大小是480×270像素,并且,例如,客户端13的显示屏的大小是1920×1080像素,那么可以显示马赛克画面,客户端13所接收到的16个缩略图视频像图22A所示的那样以四排和四列设置在该马赛克画面上。
然而,当客户端13的显示屏的大小小于1920×1080像素时,例如,960×540像素,甚至当客户端13接收到16个缩略图视频时,显示为马赛克画面的缩略图视频的数量限于图22B中所示的四个。
如上面所描述的,例如,当客户端13的显示屏的大小很小并且显示为马赛克画面的缩略图视频的数量限于比客户端13所接收到的缩略图视频的数量小的数量时,可以根据客户端13的显示屏的大小,通过使缩略图视频的图像大小更小来在马赛克画面上显示客户端13所接收到的所有缩略图视频。
即,可以通过使480×270像素的缩略图视频成为240×135像素的缩略图视频来将16个缩略图视频全部显示在960×540像素的显示屏上,作为马赛克画面。
然而,在这种情况下,客户端13必须改变缩略图视频的图像大小,并且客户端13的处理负担也会变大。此外,当缩略图视频的图像大小变得更小以形成(生成)马赛克画面时,可能难以观看每个缩略图视频。
当显示为马赛克画面的缩略图视频的数量受到如上所描述的限制时,并且当这并不受到限制时,如果可以基于用户偏好、特定优先权等来选择形成马赛克画面的缩略图视频(显示为马赛克画面的缩略图视频),那么可以提供适合用户(对用户而言最佳)的马赛克画面。
因此,在本技术中,引入内容描述元数据,该内容描述元数据是描述了内容(缩略图视频)的内容的属性,并且客户端13通过使用内容描述元数据来选择形成马赛克画面的缩略图视频,以提供适合用户的马赛克画面。
<引入了内容描述元数据的MPD的第一示例>
图23是图示了作为引入了内容描述元数据的缩略图元数据的MPD的第一示例的视图。
除了提供描述201来替代在图14中的描述142之外,图23中的MPD如图14中的MPD一样配置。
描述201中的ViewPoint要素包括作为图14中的描述142的schemeIdURI属性,并且在图23中的schemeIdURI属性中设置了属性值“urn:thumbnailVideo:dic”。
在属性值“urn:thumbnailVideo:dic”中的冒号(:)之前的描述“urn:thumbnailVideo”是新的方案标识符,该新的方案标识符指示内容是图14中所示的缩略图视频,并且根据方案标识符“urn:thumbnailVideo”,客户端13可以辨识出内容(的视频)是缩略图视频。
在属性值“urn:thumbnailVideo:dic”中的冒号之后的描述“dic”是指定词典的信息,该词典定义稍后将描述的value属性的构成要素(词典定义)。
除了上述schemeIdURI属性之外,描述201中的ViewPoint要素还包括value属性,该value属性是新的属性。
将作为内容描述元数据的value属性设置为value属性中的属性值,该内容描述元数据描述了回放控制由MPD(MPD/Period/AdaptationSet/ViewPoint)进行的内容的内容,该MPD包括value属性和指示内容的内容的项。
在图23中,在value属性中描述了属性值“X,Y,Z……”。
可以描述作为value属性中的属性值的一个或者多个项;例如,当将多个项设置为value属性中的属性值时,利用图23中所示的逗号(,)来描述多个项X,Y,Z,……。
作为构成在value属性中设置的属性值的构成要素的项由在如上面所描述的属性值“urn:thumbnailVideo:dic”中的冒号之后的描述“dic”所指定的词典定义。
因此,客户端13可以基于在属性值“urn:thumbnailVideo:dic”中的冒号之后的描述“dic”所指定的词典,辨识出在value属性中设置的属性值的每个项的定义(语义内容)。
例如,假设通过在属性值“urn:thumbnailVideo:dic”中的冒号之后的描述“dic”所指定的词典,分别将在value属性中设置的属性值的第一项、第二项和第三项定义为指示类型的类型识别信息、指示国家的国家识别信息、以及指示地区的地区识别信息。
在这种情况下,例如,当内容(的缩略图视频)的类型是回放棒球比赛的“棒球(棒球回放)”,棒球比赛发生的国家是“US(美国)”,并且棒球比赛发生的地区是“CA(加利福尼亚)”时,通过聚合服务器12(的元数据生成器(图3))在value属性中设置(编码)属性值“棒球、US、CA”。
客户端13基于在属性值“urn:thumbnailVideo:dic”中的冒号之后的描述“dic”所指定的词典,通过在value属性中设置的属性值“棒球、US、CA”,可以辨识出内容的类型是棒球回放,并且棒球比赛发生在美国的加利福尼亚。
图24是示意地图示了在一个FLUTE会话中多播传送的多个缩略图视频(的流)的示例的视图。
例如,假设在一个FLUTE会话中多播传送具有480×270像素的相同的大小的16个缩略图视频,并且将与图23中的属性值相似的属性值“urn:thumbnailVideo:dic”设置在schemeIdURI属性中,该属性属于在16个缩略图视频的MPD(其中描述了AdaptationSet)中的缩略图视频的AdaptationSet要素中包括的ViewPoint要素。
此外,假设将图24中所示的属性值设置在针对每个缩略图视频的value属性中。
在这种情况下,例如,当客户端13的显示屏的大小是1920×1080像素(或者更大)时,在客户端13中像图22A所示的一样显示马赛克画面,在一个FLUTE会话中所传送的具有480×270的相同图像大小的16个缩略图视频全部以四排和四列设置在该马赛克画面上。
另一方面,当客户端13的显示屏的大小小于1920×1080像素时,例如,960×540像素,在客户端13中,显示为马赛克画面的缩略图视频的数量限于图22B所示的16个缩略图视频中的设置为两排和两列的四个。
因此,在这种情况下,需要选择16个缩略图视频中的四个缩略图视频显示在马赛克画面上。
因此,客户端13通过使用有关缩略图视频的value属性(在value属性中设置的属性值)来进行过滤(下文也称为缩略图过滤),以选择在马赛克画面上显示的四个缩略图视频(形成马赛克画面)。
例如,可以基于指示客户端13的用户的偏好的偏好信息等来进行缩略图过滤。
即,例如,如果用户经常观看在美国(US)的加利福利亚发生的比赛的回放或者如果用户所在的地区(客户端13的位置)是美国的加利福尼亚,那么通过缩略图过滤来选择16个缩略图视频中的具有在value属性中设置的属性值中的指示美国的“US”的国家识别信息和指示加利福尼亚的“CA”的地区识别信息的缩略图视频,作为待显示在马赛克画面上的缩略图视频。
同时,例如,当通过缩略图过滤而选择的缩略图视频的数量比可以在马赛克画面上显示的缩略图视频的数量大时,客户端13可以随机选择,例如,通过缩略图过滤而选择的缩略图视频中的与可以在马赛克画面上显示的缩略图视频一样多的缩略图视频。可替代地,可以生成比客户端13的显示屏大的马赛克画面,并且根据用户的操作等来滚动马赛克画面。
如上面所描述的,当通过将作为动态变化指数的value属性添加到MPD来限制客户端13的装置呈现环境时,可以通过使用适合显示屏的大小的马赛克画面来实现有效的服务选择过程(频道选择),该动态变化指数用于通过客户端13对缩略图视频进行缩略图过滤。
<引入了内容描述元数据的MPD的第二示例>
图25是图示了引入了作为内容描述元数据的缩略图元数据的MPD的第二示例的视图。
除了提供描述211和212来替代在图23中的描述201之外,图25中的MPD如图23中的MPD一样配置。
描述211和212中的ViewPoint要素包括作为内容描述元数据的schemeIdURI属性和value属性,作为图23中的描述201中的ViewPoint要素。
在描述211中,将属性值“urn:thumbnailVideo:dic”设置在schemeIdURI属性中,并且在描述212中,将属性值“urn:thumbnailVideo:JapaneseParameters”设置在schemeIdURI属性中。
如图23所示,在属于ViewPoint要素的schemeIdURI属性中设置的属性“urn:thumbnailVideo:dic”和“urn:thumbnailVideo:JapaneseParameters”中的冒号之前的描述“urn:thumbnailVideo”是指示内容是缩略图视频的方案标识符,并且客户端13可以根据方案标识符“urn:thumbnailVideo”辨识出内容(的视频)是缩略图视频。
此外,如图23所示,在属性值“urn:thumbnailVideo:dic”和“urn:thumbnailVideo:JapaneseParameters”中的冒号之后的描述“dic”和“JapaneseParameters”是指定定义value属性的构成要素的词典的信息(词典定义)。
假设,例如,在描述“dic”和“JapaneseParameters”所指定的词典中,分别将在value属性中设置的属性值的第一项、第二项和第三项定义为指示类型的类型识别信息、指示国家的国家识别信息、以及指示地区的地区识别信息。
例如,在描述“dic”所指定的词典(本文也称为“dic”词典)中,指定(定义)类型识别信息、国家识别信息和地区识别信息的语言是英语,并且,在描述“JapaneseParameters”所指定的词典(下文也称为“JapaneseParameters”词典)中,指定类型识别信息、国家识别信息和地区识别信息的语言是与英语不同的语言,例如,日语。
因此,在指定了“dic”词典的描述211中,用英语描述作为类型识别信息、国家识别信息和地区识别信息的属性值,作为value属性中的“棒球、US、CA”。
另一方面,在指定了“JapaneseParameters”词典的描述212中,用日语描述作为类型识别信息、国家识别信息和地区识别信息的属性值,作为value属性中的“棒球、美国、加利福尼亚”。
如上面所描述的,可以在MPD(的AdaptationSet要素)中设置多个ViewPoint要素,并且用不同的语言描述了value属性(在value属性中设置的属性值)。
<引入了内容描述元数据的MPD的第三示例>
图26是图示了作为引入了内容描述元数据的缩略图元数据的MPD的第三示例的视图。
除了提供描述221来替代在图23中的描述201之外,图26中的MPD如图23中的MPD一样配置。
描述221中的ViewPoint要素包括作为内容描述元数据的schemeIdURI属性和value属性,作为图23中的描述201中的ViewPoint要素。
在描述211中,将属性值“http://baseballAuthority.com/thumbnailVideoGenre”设置在schemeIdURI属性中。
属性值“http://baseballAuthority.com/thumbnailVideoGenre”用作指示内容是缩略图视频的方案标识符和指定定义value属性的构成要素的词典(词典定义)的信息两者。
因此,客户端13可以通过属性值“http://baseballAuthority.com/thumbnailVideoGenre”辨识出内容(的视频)是缩略图视频。
此外,属性值“http://baseballAuthority.com/thumbnailVideoGenre”是httpURL,并且http URL指示定义value属性的构成要素(项)的词典的地址。
如上面所描述的,当通过http URL指定定义value属性的构成要素的词典时,可以将定义value属性的构成要素的词典设置在网络(诸如,互联网)上的(网页)服务器上,并且在与传送了缩略图视频的FLUTE会话相同的FLUTE会话中(在客户端13不能使用点对点承载的情况下)传送该词典。
在这种情况下,可以容易地改变定义value属性的构成要素的词典,从而通过词典来灵活地并且容易地改变(或者添加或者删除)value属性的构成要素的定义。
<传送内容的方法>
图27、图28和图29是图示了在将作为内容描述元数据的value属性引入MPD时传送包括缩略图视频的内容的方法的示例。
即,图27、图28和图29分别图示了传送包括缩略图视频的内容的方法的第四示例、第五示例和第六示例。
在图27至图29中,如在图19至图21中一样,分别传送三个广播站(服务)的频道ch#1至ch#3的主视频MS#1至MS#3、音频AS#1至AS#3、以及缩略图视频TM#1至TM#3
在图27至图29中,如在图19至图21中一样,例如,当在MPD#1的缩略图视频TM#1的AdaptationSet中包括用于指示AdaptationSet(的视频)是缩略图视频的缩略图信令信息时,分别在频道ch#1的内容的MPD#1和设置有属性值“urn:thumbnailVideo”的ViewPoint/@schemeIdURI属性中包括主视频MS#1、音频AS#1和缩略图视频TM#1中的每一个的AdaptationSet(要素)。
此外,在图27至图29中,在MPD#1的缩略图视频TM#1的AdaptationSet中包括作为内容描述元数据的value属性(和指定定义value属性的构成要素的词典的信息),并且这与图19至图21中的情况不同。
如上面所描述的,除了在MPD#1的缩略图视频TM#1的AdaptationSet中包括作为内容描述元数据的value属性(这还应用于频道ch#2和ch#3中的每个频道的内容的MPD)之外,图27至图29分别与图19至图21相似,从而省略对其的描述。
<在客户端13中显示马赛克画面>
图30是图示了在客户端13中显示马赛克画面的过程的示例的流程图。
在步骤S101中,中间件41(图4)接收USD,或者接收OMA-ESG以基于OMA-ESG来接收USD,从而收集缩略图视频的USD,然后过程转到步骤S102。
在步骤S102中,中间件41基于缩略图视频的USD来接收缩略图视频的MPD,并且将该MPD提供(传递)给DASH客户端(图4),然后过程转到步骤S103。
在步骤S103中,DASH客户端42基于来自中间件41的缩略图视频的MPD来将请求缩略图视频(的段)的HTTP请求发给中间件41,然后过程转到步骤S104。
在步骤S104中,中间件41确定是否基于USD和OMA-ESG来多播传送DASH客户端42通过HTTP请求而请求的缩略图视频。
当在步骤S104中确定了多播传送缩略图视频时,过程转到步骤S105,并且中间件41接收多播传送的缩略图视频以提供给DASH客户端42,然后过程转到步骤S107。
另一方面,当在步骤S104中确定了未多播传送缩略图视频时,过程转到步骤S106,并且中间件41在网络10上发布来自DASH客户端42的HTTP请求。此外,中间件41根据HTTP请求接收来自频道服务器11(或者聚合服务器12)的单播传送的缩略图视频,然后过程转到步骤S107。
在步骤S107中,接收单元40(图4)确定是否发起缩略图过滤。
在本文中,例如,可以设置是否发起或者停止缩略图过滤,即,是否通过操作客户端13来进行缩略图过滤。
当在步骤S107中确定发起缩略图过滤时,过程转到步骤S108,并且DASH客户端42通过使用作为内容描述元数据的value属性来进行缩略图过滤,在中间件41所提供的缩略图视频上的缩略图视频的MPD中描述了该内容描述元数据,并且选择中间件41所提供的缩略图视频中的形成马赛克画面的缩略图视频以提供给回放单元43(图4)。
在本文中,例如,当通过缩略图过滤而选择的缩略图视频的数量比可以在马赛克画面上显示的缩略图视频的数量大时,客户端13可以随机选择,例如,通过缩略图过滤而选择的缩略图视频中的与可以在马赛克画面上显示的缩略图视频一样多(或者比可以在马赛克画面上显示的缩略图视频少)的缩略图视频。
另一方面,当在步骤S107中确定了并没有发起缩略图过滤时,过程转到步骤S109,并且DASH客户端42随机地选择,例如,中间件41所提供的缩略图视频中的与可以在马赛克画面上显示的缩略图视频一样多的缩略图视频,以提供给回放单元43。
在步骤S108和步骤S109之后,过程转到步骤S110,并且回放单元43形成其上设置有来自DASH客户端42的缩略图视频的马赛克画面进行显示,并且显示马赛克画面的过程结束。
<描述应用了本技术的计算机>
上述一系列过程可以由硬件或者软件进行。当这一系列过程由软件进行时,将形成软件的程序安装在通用计算机等上。
图31图示了安装有执行上述一系列过程的程序的计算机的一个示例的配置示例。
可以提前将程序记录在硬盘405和用作嵌入计算机中的记录介质中的ROM 403中。
可替代地,可以将程序存储(记录)在可移动记录介质411中。可以提供这种可移动记录介质411作为所谓的封装软件。在本文中,例如,可移动记录介质411包括软盘、光盘只读存储器(CD-ROM)、磁光(MO)盘、数字多功能光盘(DVD)、磁盘、半导体存储器等。
同时,可以通过上述可移动记录介质411将程序安装在计算机上或者可以通过待安装在嵌入式硬盘405上的通信网络和广播网络来将程序下载至计算机。即,例如,可以通过用于数字化卫星广播的卫星来将程序从下载站点无线发送到计算机或者可以通过网络(诸如,局域网(LAN))和互联网将程序有线发送到计算机。
中央处理器(CPU)402嵌入计算机中,并且输入/输出接口410通过总线401连接至CPU 402。
当指令通过输入/输出接口410由用户通过输入单元407的操作等提供时,CPU 402根据此点执行存储在只读存储器(ROM)中的程序。可替代地,CPU402下载在随机存取存储器(RAM)404上的硬盘405中存储的程序以执行。
据此,CPU 402进行根据上述流程图的过程或者上述框图的配置所执行的过程。然后,若需要,例如,CPU 402通过输入/输出接口410输出来自输出单元406的处理结果或者发送来自通信单元408的处理结果或者将处理结果存储在硬盘405中。
同时,输入单元407由键盘、鼠标、麦克风等形成。进一步地,输出部分406包括液晶显示器(LCD)、扬声器等。
在本文中,在本说明书中,不一定按照沿流程图所描述的顺序的时间顺序来进行计算机根据程序所进行的过程。即,计算机根据程序所进行的过程还包括并行执行的过程或者单独执行的过程(例如,并行过程和对象的过程)。
程序可以由一个计算机(处理器)处理或者由多个计算机处理。进一步地,可以将程序发送到远程计算机进行执行。
此外,在本说明书中,系统意谓多个部件(装置、模块(部分)等)的组件,并且部件是否全部在相同的机壳中无关紧要。因此,在通过网络连接的不同机壳中存储的多个装置以及通过将多个模块存储在一个机壳中而获得的一个装置是系统。
同时,本技术的实施例并不限于上述实施例,并且在没有脱离本技术的范围的情况下,可以进行各种修改。
例如,本技术可以配置为云计算,在该云计算中,多个装置通过网络共享功能以共同处理。
上述流程图中所描述的每个步骤可以由一个装置执行或者可以由多个装置按照共享的方式来执行。
此外,当在一个步骤中包括多个过程时,在一个步骤中包括的多个过程可以由一个装置执行或者可以由多个装置按照共享的方式来执行。
本技术可以应用于传送除了DASH之外的内容。
本说明书中所描述的效果仅仅是说明性的,而不是限制性的;可能还存在另一种效果。
同时,本技术还可以具有以下配置。
<1>
一种发送装置,该发送装置包括:
传送单元,该传送单元传送通过使用属性和属性值来描述的元数据,内容的元数据包括:
信令信息,指示视频是适合形成马赛克画面的缩略图视频;以及
属性,指示在开始回放内容之前所需要的最小缓冲时间。
<2>
根据<1>的发送装置,其中,
元数据进一步包括根元素、指示元数据遵循的运行简档的属性、以及通过在时间方向上划分内容而获得的段的信息中的一个或者多个。
<3>
根据<2>的发送装置,其中,
元数据是运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD),并且包括:
MPD要素,其是根要素,
MPD/@profile属性,其是指示MPD遵循的运行简档的属性,
MPD/Period要素,其是通过在时间方向上划分内容而获得的段的信息,以及
MPD/@minBufferTime属性,其是指示在开始回放内容之前所需要的最小缓冲时间的属性。
<4>
根据<3>的发送装置,其中,
MPD包括MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性、MPD/Period/AdaptationSet/Role/@schemeIdURI属性、MPD/Period/AdaptationSet/EssentialProperty/@schemeIdURI属性、或者MPD/Period/AdaptationSet/SupplementalProperty/@schemeIdURI属性,其中,将指示由MPD进行回放控制的内容是缩略图视频的信息描述为属性值,作为信令信息。
<5>
根据<1>的发送装置,其中,
元数据进一步包括内容描述元数据,该内容描述元数据是描述了内容的内容的属性。
<6>
根据<5>的发送装置,其中,
元数据进一步包括词典的规范,该词典的规范定义了内容描述元数据的构成要素。
<7>
根据<5>或者<6>的发送装置,其中,
内容描述元数据用于过滤以选择用于形成马赛克画面的缩略图视频。
<8>
根据<5>至<7>中任一项的发送装置,其中,
元数据是运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD),并且
内容描述元数据是MPD/Period/AdaptationSet/ViewPoint要素的属性。
<9>
一种发送方法,该发送方法包括以下步骤:
传送通过使用属性和属性值来描述的元数据,内容的元数据包括:
信令信息,指示视频是适合形成马赛克画面的缩略图视频;以及
属性,指示在开始回放内容之前所需要的最小缓冲时间。
<10>
一种接收装置,该接收装置包括:
接收单元,接收单元接收通过使用属性和属性值来描述的元数据,内容的元数据包括:
信令信息,指示视频是适合形成马赛克画面的缩略图视频;以及
属性,指示在开始回放内容之前所需要的最小缓冲时间。
<11>
根据<10>的接收装置,其中,
元数据进一步包括根元素、指示元数据遵循的运行简档的属性、以及通过在时间方向上划分内容而获得的段的信息中的一个或者多个。
<12>
根据<11>的接收装置,其中,
元数据是运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD),并且包括:
MPD要素,其是根要素,
MPD/@profile属性,其是指示MPD遵循的运行简档的属性,
MPD/Period要素,其是通过在时间方向上划分内容而获得的段的信息,以及
MPD/@minBufferTime属性,其是指示在开始回放内容之前所需要的最小缓冲时间的属性。
<13>
根据<12>的接收装置,其中,
MPD包括MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性、MPD/Period/AdaptationSet/Role/@schemeIdURI属性、MPD/Period/AdaptationSet/EssentialProperty/@schemeIdURI属性、或者MPD/Period/AdaptationSet/SupplementalProperty/@schemeIdURI属性,其中,将指示回由MPD进行放控制的内容是缩略图视频的信息描述为属性值,作为信令信息。
<14>
根据<10>的接收装置,其中,
元数据进一步包括内容描述元数据,该内容描述元数据是描述了内容的内容的属性。
<15>
根据<14>的接收装置,其中,元数据进一步包括词典的规范,该词典的规范定义了内容描述元数据的构成要素。
<16>
根据<14>或者<15>的接收装置,其中,
内容描述元数据用于过滤以选择用于形成马赛克画面的缩略图视频。
<17>
根据<14>至<16>中任一项的接收装置,其中,
元数据是运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD),并且
内容描述元数据是MPD/Period/AdaptationSet/ViewPoint要素的属性。
<18>
一种接收方法,该接收方法包括:
接收通过使用属性和属性值来描述的元数据的步骤,内容的元数据包括:信令信息,指示视频是适合形成马赛克画面的缩略图视频;以及属性,指示在开始回放内容之前所需要的最小缓冲时间。
元件符号列表
11 频道服务器
12 聚合服务器
13 客户端
14 NTP服务器
21 内容管理服务器
22 段串流器
23 MPD服务器
31 流聚合器
32 元数据生成器
33 FLUTE串流器
34 多播服务器
35 网页服务器
410 接收单元
41 中间件
42 DASH客户端
43 回放单元
401 总线
402 中央处理单元
403 只读存储器
404 随机存取存储器
405 硬盘
406 输出单元
407 输入单元
408 通信单元
409 驱动器
140 输入/输出接口
411 可移动记录介质

Claims (16)

1.一种发送装置,所述发送装置包括:
元数据生成器,被配置为生成内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,并且所述元数据包括指示视频是适合形成马赛克画面的缩略图视频的信令信息,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中;
存储器,被配置为存储所述元数据;和
传送单元,所述传送单元传送所述元数据,
其中,所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
2.根据权利要求1所述的发送装置,其中,
所述MPD包括MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性。
3.一种发送方法,所述发送方法包括:
生成内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,所述元数据包括指示视频是适合形成马赛克画面的缩略图视频的信令信息,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中,以及
传送所述元数据,
其中,所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
4.一种发送装置,所述发送装置包括:
元数据生成器,被配置为生成内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,并且所述元数据包括指示视频是适合形成马赛克画面的缩略图视频的信令信息,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中;
存储器,被配置为存储所述元数据;和
传送单元,所述传送单元传送所述元数据,其中
所述元数据包括内容描述元数据,所述内容描述元数据是描述了所述内容的内容的属性,以及
所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
5.根据权利要求4所述的发送装置,其中,
所述元数据进一步包括词典的规范,所述词典的规范定义了所述内容描述元数据的构成要素。
6.根据权利要求5所述的发送装置,其中,
所述内容描述元数据用于过滤以选择用于形成所述马赛克画面的所述缩略图视频。
7.根据权利要求6所述的发送装置,其中,
所述内容描述元数据是MPD/Period/AdaptationSet/ViewPoint要素的属性。
8.一种发送方法,所述发送方法包括:
生成内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,所述元数据包括指示视频是适合形成马赛克画面的缩略图视频的信令信息,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中,以及
传送所述元数据,其中
所述元数据包括内容描述元数据,所述内容描述元数据是描述了所述内容的内容的属性,以及
所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
9.一种接收装置,所述接收装置包括:
存储器,被配置为存储内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,
接收单元,所述接收单元接收包括信令信息的所述元数据,所述信令信息指示视频是适合形成马赛克画面的缩略图视频,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中,以及
回放单元,所述回放单元基于所述元数据来回放所述马赛克画面,其中,所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,包括通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
10.根据权利要求9所述的接收装置,其中,
所述MPD包括MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性。
11.一种接收方法,所述接收方法包括:
接收内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,所述元数据包括指示视频是适合形成马赛克画面的缩略图视频的信令信息,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中,以及
基于所述元数据来回放所述马赛克画面,其中,所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
12.一种接收装置,所述接收装置包括:
存储器,被配置为存储内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,
接收单元,所述接收单元接收包括信令信息的所述元数据,所述信令信息指示视频是适合形成马赛克画面的缩略图视频,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中,以及
回放单元,所述回放单元基于所述元数据来回放所述马赛克画面,其中
所述元数据包括内容描述元数据,所述内容描述元数据是描述了所述内容的内容的属性,以及
所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
13.根据权利要求12所述的接收装置,其中,
所述元数据进一步包括词典的规范,所述词典的规范定义了所述内容描述元数据的构成要素。
14.根据权利要求13所述的接收装置,其中,
所述内容描述元数据用于过滤以选择用于形成所述马赛克画面的所述缩略图视频。
15.根据权利要求14所述的接收装置,其中,
所述内容描述元数据是MPD/Period/AdaptationSet/ViewPoint要素的属性。
16.一种接收方法,所述接收方法包括:
接收内容的元数据,其中,利用运动图像专家组-基于HTTP的动态自适应流媒体技术(MPEG-DASH)的媒体表示描述(MPD)和多媒体广播多播服务(MBMS)的用户服务描述(USD)作为所述元数据,所述元数据包括指示视频是适合形成马赛克画面的缩略图视频的信令信息,所述信令信息被包括在MPD的MPD/Period/AdaptationSet/ViewPoint/@schemeIdURI属性或者USD中的/@r7:serviceClass属性中,以及
基于所述元数据来回放所述马赛克画面,其中
所述元数据包括内容描述元数据,所述内容描述元数据是描述了所述内容的内容的属性,以及
所述MPD包括:
MPD要素作为根要素,
MPD/@profile属性,指示所述MPD遵循的运行简档,
MPD/Period要素,其是通过在时间方向上划分所述内容而获得的段的信息,以及
MPD/@minBufferTime属性,指示在开始回放所述内容之前所需要的最小缓冲时间。
CN201480058434.5A 2013-10-30 2014-09-04 发送装置、发送方法、接收装置和接收方法 Expired - Fee Related CN105706453B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2013-224902 2013-10-30
JP2013224902 2013-10-30
PCT/JP2014/073353 WO2015064212A1 (ja) 2013-10-30 2014-09-04 送信装置、送信方法、受信装置、及び、受信方法

Publications (2)

Publication Number Publication Date
CN105706453A CN105706453A (zh) 2016-06-22
CN105706453B true CN105706453B (zh) 2019-10-08

Family

ID=53003825

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480058434.5A Expired - Fee Related CN105706453B (zh) 2013-10-30 2014-09-04 发送装置、发送方法、接收装置和接收方法

Country Status (7)

Country Link
US (1) US10110972B2 (zh)
EP (1) EP3065408A4 (zh)
JP (1) JPWO2015064212A1 (zh)
KR (1) KR20160077067A (zh)
CN (1) CN105706453B (zh)
MX (1) MX364963B (zh)
WO (1) WO2015064212A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160019707A1 (en) * 2014-07-18 2016-01-21 Roovy, Inc. Mixed media file system
EP3249873B1 (en) * 2015-02-15 2018-09-12 Huawei Technologies Co., Ltd. Media presentation guide method based on hyper text transport protocol media stream and related device
JP6446347B2 (ja) * 2015-09-14 2018-12-26 エヌ・ティ・ティ・コミュニケーションズ株式会社 サムネイル提供装置、表示装置、サムネイル映像表示システム、サムネイル映像表示方法、及びプログラム
US10511828B2 (en) * 2017-03-29 2019-12-17 Intel Corporation Camera platforms with rolling light projection
US11228796B2 (en) * 2020-01-07 2022-01-18 Tencent America LLC Pattern addressing for session-based dash operations

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013043918A1 (en) * 2011-09-21 2013-03-28 General Instrument Corporation Adaptive streaming to multicast and constrained-fidelity constant bit rate encoding

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060017061A (ko) 2004-08-19 2006-02-23 삼성전자주식회사 디스플레이장치
CN200994166Y (zh) 2006-12-29 2007-12-19 柯玉荣 附有天线单元的电视器
WO2011065654A1 (en) * 2009-11-25 2011-06-03 Lg Electronics Inc. Method of processing epg metadata in network device and network device for controlling the same
US7833028B1 (en) 2010-02-24 2010-11-16 Azurewave Technologies, Inc. Wireless receiving and transmitting device having an exposed projection structure for user to hold
US20110273632A1 (en) 2010-05-04 2011-11-10 Casey Michael B Video display with detachable input/output console
US9380079B2 (en) * 2011-06-29 2016-06-28 Cable Television Laboratories, Inc. Content multicasting
US9641906B2 (en) * 2012-10-09 2017-05-02 Sharp Kabushiki Kaisha Content transmission device, content playback device, content distribution system, method for controlling content transmission device, method for controlling content playback device, control program, and recording medium
KR101459557B1 (ko) * 2013-07-15 2014-11-17 주식회사 케이티 실시간 시청률에 기반한 모자이크 채널 가이드를 제공하는 서버 및 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013043918A1 (en) * 2011-09-21 2013-03-28 General Instrument Corporation Adaptive streaming to multicast and constrained-fidelity constant bit rate encoding

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
"TR 26.848 V0.5.1 (2013-09)";3GPP;《3rd Generation Partnership Project;Technical Specification Group Services and System Aspects;Multimedia Broadcast/Multicast Service (MBMS);Enhanced MBMS Operation (Release 12)》;20130927;第4.2.5.3.2、4.2.9.1.1节 *
"TR 26.848 V0.5.1(2013-09)";3GPP;《3rd Generation Partnership Project;Technical Specification Group Services and System Aspects;Multimedia Broadcast/Multicast Service (MBMS);Enhanced MBMS Operation (Release 12)》;20130927;第4.2.5.3.2、4.2.9.1.1节 *
"TS 26.247 V12.0.0 (2013-09)";3GPP;《3rd Generation Partnership Project;Technical Specification Group Services and System Aspects;Transparent end-to-end Packet-switched Streaming Service (PSS);Progressive Download and Dynamic Adaptive Streaming over HTTP (3GP-DASH) (Release 12)》;20130919;第7.3节、8.4.2节、8.4.3.4、8.6.3节、表8-5 *

Also Published As

Publication number Publication date
MX2016005250A (es) 2016-08-18
US20160255417A1 (en) 2016-09-01
WO2015064212A1 (ja) 2015-05-07
MX364963B (es) 2019-05-15
EP3065408A1 (en) 2016-09-07
EP3065408A4 (en) 2017-09-13
KR20160077067A (ko) 2016-07-01
US10110972B2 (en) 2018-10-23
JPWO2015064212A1 (ja) 2017-03-09
CN105706453A (zh) 2016-06-22

Similar Documents

Publication Publication Date Title
CN105765984B (zh) 发射设备、发射方法、接收设备和接收方法
CN105706453B (zh) 发送装置、发送方法、接收装置和接收方法
CN105210372B (zh) 内容供应装置、内容供应方法、程序以及内容供应系统
CN105659623B (zh) 发送装置、发送方法、接收装置以及接收方法
CN105325005B (zh) 内容供应装置、内容供应方法、存储介质、终端装置以及内容供应系统
CN106105239B (zh) 发送设备、发送方法、接收设备、接收方法和程序
CN108989833A (zh) 一种视频封面图像的生成方法及装置
JP6597604B2 (ja) 受信装置、送信装置、データ通信方法、およびデータ処理方法
WO2015041071A1 (ja) コンテンツ供給装置、コンテンツ供給方法、プログラム、端末装置、およびコンテンツ供給システム
KR102123208B1 (ko) 콘텐츠 공급 장치, 콘텐츠 공급 방법, 프로그램, 단말 장치, 및 콘텐츠 공급 시스템
RU2658672C2 (ru) Устройство предоставления контента, программа, оконечное устройство и система предоставления контента
WO2015064384A1 (ja) 送信装置、送信方法、受信装置、及び、受信方法
WO2015151487A1 (en) Reception apparatus, reception method, transmission apparatus, and transmission method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Tokyo, Japan

Applicant after: Sony Corp

Address before: Japan's Tokyo port harbor 1-7-1

Applicant before: Sony Corp

COR Change of bibliographic data
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20191008

Termination date: 20200904