CN111670579A - 内容分发控制装置、内容分发控制方法、程序和内容分发控制系统 - Google Patents

内容分发控制装置、内容分发控制方法、程序和内容分发控制系统 Download PDF

Info

Publication number
CN111670579A
CN111670579A CN201980010723.0A CN201980010723A CN111670579A CN 111670579 A CN111670579 A CN 111670579A CN 201980010723 A CN201980010723 A CN 201980010723A CN 111670579 A CN111670579 A CN 111670579A
Authority
CN
China
Prior art keywords
content
transcoding
definition information
content distribution
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201980010723.0A
Other languages
English (en)
Inventor
山岸靖明
高林和彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN111670579A publication Critical patent/CN111670579A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • H04N21/2225Local VOD servers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/141Setup of application sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/142Managing session states for stateless protocols; Signalling session states; State transitions; Keeping-state mechanisms
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/146Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/218Source of audio or video content, e.g. local disk arrays
    • H04N21/2187Live feed
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21Server components or server architectures
    • H04N21/222Secondary servers, e.g. proxy server, cable television Head-end
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234363Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the spatial resolution, e.g. for clients with a lower screen resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/23439Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25825Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25833Management of client data involving client hardware characteristics, e.g. manufacturer, processing or storage capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/262Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
    • H04N21/26258Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440218Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643Communication protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Abstract

本发明涉及能够在利用不同CDN分发内容时实现与代码转换相关联的条件的共通性并且支持标准上传接口的内容分发控制装置;本发明还涉及内容分发控制方法、程序和内容分发系统。在限定信息被存储在元数据文件中的情况下,基于该限定信息来控制原始数据流。同时,如果用于访问限定信息的访问信息被存储在元数据文件中,则基于该访问信息来请求限定信息,并且基于响应于请求而接收到的限定信息来控制原始流的代码转换。这可以应用于使用SDP分发内容的内容分发系统。

Description

内容分发控制装置、内容分发控制方法、程序和内容分发控制 系统
技术领域
本公开内容涉及内容分发控制装置、内容分发控制方法、程序和内容分发系统,并且具体涉及能够在不同CDN(内容分发网络)中分发内容时实现与代码转换相关联的条件的共通性并且支持标准上传接口的内容分发控制装置、内容分发控制方法、程序和内容分发系统。
背景技术
作为诸如IPTV(互联网协议电视)之类的互联网流媒体的标准化的趋势,已经开始对应用于VOD(视频点播)流媒体和基于HTTP(超文本传输协议)流媒体的实时流媒体的方法进行标准化。
特别关注了在ISO/IEC/MPEG中被标准化的MPEG-DASH(HTTP上的动态自适应流)(例如,参见非专利文献1)。
MPEG-DASH是用于根据称为MPD(媒体表示描述)的元数据文件以及元数据文件中描述的分块音频、视频、字幕等的媒体数据的地址(URL:统一资源定位符)来获取和再现流数据的技术。
此外,作为从流捕获装置到云的上传接口,在3GPP(第三代合作伙伴计划)中正在进行关于FLUS(实时上行流的框架)的框架的研究(例如,参见非专利文献2和非专利文献3)。
[引用列表]
[专利文献]
[非专利文献1]
ISO/IEC 23009-1:2012 Information technology Dynamic adaptivestreaming over HTTP(DASH)
[非专利文献2]
3GPP TS 26.238 V15.0.0(2017-12)3rd Generation Partnership Project;Technical Specification Group Services and System Aspects;Uplink Streaming(版本15)
[非专利文献3]
3GPP TS 26.114 V15.1.0(2017-12)3rd Generation Partnership Project;Technical Specification Group Services and System Aspects;IP MultimediaSubsystem(IMS);Multimedia Telephony;Media handling and interaction(版本15)。
发明内容
[技术问题]
同时,有可能通过使例如接近最终用户的边缘服务器(CDN的构成元素)根据最终用户的流再现环境条件对流送内容进行代码转换来提供转换到分发阶段的流送内容。例如,在进行代码转换时,原始流被临时解码为基带流,并且进一步被编码为适合于用户的再现环境的流。在转换为该基带时,具有剩余功率的边缘服务器有可能根据最终用户的环境条件执行各种类型的放大(上转换)处理。
例如,有可能在考虑最终用户的装置的显示器的纵横比或空间分辨率、再现乐器的特性等的同时,最优的音频和图片被创建并且被编码为根据解码器的处理能力的流。在创建最佳音频和图片时,在本文中假设不仅使用简单的线性外推方式的上转换而且还使用例如AI(人工智能)等来添加复杂的图像或音频。然而,需要根据内容提供者(内容所有者)或服务提供者(分发服务提供者等)的意图来控制是否允许进行这种放大处理、音频和图片的创建等。换言之,有必要能够根据所有者、服务者的意图等来执行分发控制,直到分发平台中的边缘服务器。
同时,在当前情况下,尚未准备好能够在由各种供应商提供的CDN服务之间共享并且与流再现控制相关联的标准元数据。因此,需要通过在诸如DASH-MPD(或HLS m3u8)的流清单文件中描述与上述代码转换相关联的各种条件,来在内容分发时实现与代码转换相关联的条件的共通性。
换言之,CDN通常由多个供应商提供,并且与使用不同CDN中的公共清单的内容的分发相关联的各种类型的控制、策略等未被标准化。因此,有必要确定目的地等,以例如报告(收集其日志)与代码转换相关联的约束、条件等。
此外,随着分发例如UGC(用户生成的内容)内容的流的用例数目的增加,即使在诸如视频生态系统的分发平台中,也有可能支持标准内容上传接口(实时流送上行链路)。
因此,需要以下述方式提供支持:能够声明对边缘服务器是否可以对转换到分发阶段的流送内容进行代码转换的控制;以及能够收集日志(例如要执行的代码转换的类型和频率),并且根据这种协议利用所收集的日志来进行有效操作。此外,假设代码转换包括涉及内容修改的情况,并且有必要定义与这种情况对应的上传接口。
鉴于这样的情况实现了本公开内容,并且本公开内容的目的是能够提供与在不同CDN中的内容分发时的代码转换相关联的条件的共通性并且支持标准上传接口。
[问题的解决方案]
根据本公开内容的一个方面的内容分发控制装置包括:接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,内容分发服务器具有存储部,存储部被配置成存储内容以及对内容进行代码转换所需的限定信息,元数据文件中存储有限定信息或者用于访问限定信息的第一访问信息以及用于访问原始流的第二访问信息,原始流是根据内容生成的原始数据并且使用SDP被分发;以及控制部,其执行与基于第二访问信息获取的原始流的代码转换相关联的控制。在限定信息被存储在元数据文件中的情况下,控制部基于限定信息来控制原始流的代码转换,并且在第一访问信息被存储在元数据文件中的情况下,控制部基于第一访问信息来请求限定信息,并且基于响应于请求由接收部接收的限定信息来控制原始流的代码转换。
根据本公开内容的一个方面的内容分发控制方法包括:由内容分发控制装置执行处理,该内容分发控制装置包括:接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,内容分发服务器具有存储部,存储部被配置成存储内容以及对内容进行代码转换所需的限定信息,元数据文件中存储有限定信息或者用于访问限定信息的第一访问信息以及用于访问原始流的第二访问信息,原始流是根据内容生成的原始数据并且使用SDP被分发;以及控制部,其执行与基于第二访问信息获取的原始流的代码转换相关联的控制。所述处理包括:在限定信息被存储在元数据文件中的情况下,使控制部基于限定信息来控制原始流的代码转换,并且在第一访问信息被存储在元数据文件中的情况下,使控制部基于第一访问信息来请求限定信息,并且基于响应于请求由接收部接收的限定信息来控制原始流的代码转换。
根据本公开内容的一个方面的程序使包括内容分发控制装置执行处理,该内容分发控制装置包括:接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,内容分发服务器具有存储部,存储部被配置成存储内容以及对内容进行代码转换所需的限定信息,元数据文件中存储有限定信息或者用于访问限定信息的第一访问信息以及用于访问原始流的第二访问信息,原始流是根据内容生成的原始数据并且使用SDP被分发;以及控制部,其执行与基于第二访问信息获取的原始流的代码转换相关联的控制。该处理包括:在限定信息被存储在元数据文件中的情况下,使控制部基于限定信息来控制原始流的代码转换,并且在第一访问信息被存储在元数据文件中的情况下,使控制部基于第一访问信息来请求限定信息,并且基于响应于请求由接收部接收的限定信息来控制原始流的代码转换。
根据本公开内容的一个方面的内容分发系统包括:第一服务器,其具有存储部,存储部被配置成存储内容以及对内容进行代码转换所需的限定信息;第二服务器,其执行内容分发控制;以及客户端,其获取并再现根据内容分发控制分发的内容。第二服务器包括接收部,其在经由预定上传接口从第一服务器分发内容时接收元数据文件,元数据文件中存储有限定信息或者用于访问限定信息的第一访问信息以及用于访问原始流的第二访问信息,原始流是根据内容生成的原始数据并且使用SDP被分发;以及控制部,其执行与基于第二访问信息获取的原始流的代码转换相关联的控制。在限定信息被存储在元数据文件中的情况下,控制部基于限定信息来控制原始流的代码转换。在第一访问信息被存储在元数据文件中的情况下,控制部基于第一访问信息来请求限定信息,并且基于响应于请求由接收部接收的限定信息来控制原始流的代码转换。
在本公开内容的一个方面中,在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,内容分发服务器具有存储部,存储部被配置成存储内容以及对内容进行代码转换所需的限定信息,元数据文件中存储有限定信息或者用于访问限定信息的第一访问信息以及用于访问原始流的第二访问信息,原始流是根据内容生成的原始数据并且使用SDP被分发,以及执行与基于第二访问信息获取的原始流的代码转换相关联的控制。此外,在限定信息被存储在元数据文件中的情况下,基于限定信息来控制原始流的代码转换。同时,在第一访问信息被存储在元数据文件中的情况下,基于第一访问信息来请求限定信息,并且基于响应于请求由接收部接收的限定信息来控制原始流的代码转换。
[本发明的有益效果]
根据本公开内容的一个方面,可以提供与在不同CDN中的内容分发时的代码转换相关联的条件的共通性并且支持标准上传接口。
注意,优点并不总是限于本文中描述的优点,而是可以是本公开内容中描述的任何优点。
附图说明
[图1]
图1是描绘应用了本技术的内容分发系统的第一实施方式的配置的示例的框图。
[图2]
图2是描绘应用了本技术的内容分发系统的第二实施方式的配置的示例的框图。
[图3]
图3是图1的配置的示例中的FLUS接口的系统配置的说明图。
[图4]
图4是图2的配置的示例中的FLUS接口的系统配置的说明图。
[图5]
图5是在内容分发处理中使用的协议的详情的说明图。
[图6]
图6是描绘服务资源(ServiceResource)的示例的图。
[图7]
图7是描绘会话资源(SessionResource)的示例的图。
[图8]
图8是描绘『“用于FLUS宿从FLUS源(通过推送/拉取)获取流的信息”』的示例的图。
[图9]
图9是描描绘『“有关会话流的SDP的URL”』中的SDP的示例的图。
[图10]
图10是描绘『“有关会话流的SDP的URL”』中的SDP的另一示例的图。
[图11]
图11是在内容分发处理中使用的协议的详情的说明图。
[图12]
图12是描绘内容分发系统的详细配置的示例的框图。
[图13]
图13是描绘流源服务器的配置的示例的框图。
[图14]
图14是描绘流分发管理器的配置的示例的框图。
[图15]
图15是描绘DASH分发服务器的配置的示例的框图。
[图16]
图16是描绘CDN服务器的配置的示例的框图。
[图17]
图17是描绘DASH播放器的配置的示例的框图。
[图18]
图18是图12的内容分发系统中的内容分发处理的说明图。
[图19]
图19是描绘在经由FLUS接口将代码转换指令(TranscodeDirective)的内容作为元数据(SDP)来传送的情况下的对应关系的图。
[图20]
图20是描绘其中在云上提供流分发管理器的内容分发系统的变型的配置的示例的框图。
[图21]
图21是图20的内容分发系统中的内容分发处理的说明图。
[图22]
图22是用于向客户端通知经代码转换的片段的MPD并且使该客户端获取该片段的内容分发处理的说明图。
[图23]
图23是用于将未经代码转换的片段的URL应用于经代码转换的片段的URL并且使客户端获取该片段的内容分发处理的说明图。
[图24]
图24是描绘在DASH-MPD中布置代码转换指令元素的示例的图。
[图25]
图25是描绘在DASH-MPD中布置代码转换指令元素的示例的变型的图。
[图26]
图26是可变码(transcodable)属性、方法(upScalable)属性、处理限制(processingLimit)属性、许可(Allowed)元素、禁止(Prohibited)元素和条件(Condition)元素的说明图。
[图27]
图27是描绘在条件元素的内容部分的CDATA部分中存储条件描述的示例的图。
[图28]
图28是描绘ODRL描述的示例的图。
[图29]
图29是TranscodeEventNotification元素、dateTime属性、MPDUrl属性、适配组Id属性和notificationUrl属性的说明图。
[图30]
图30是描绘代码转换指令元素的示例的图。
[图31]
图31是参数/视频(Parameters/Video)元素、配置文件(profile)属性、分辨率(resolution)属性、帧速率(frameRate)属性、位深度(bitDepth)属性、色彩空间(colorSpace)属性、gamma属性和upScalingPatternList属性的说明图。
[图32]
图32是partialTransformability属性、偏差极限(deviationLimit元素、参数/音频(Parameters/Audio)元素、配置文件列表(profileList)属性、采样率(sampleRate)属性、位深度属性和偏差极限元素的说明图。
[图33]
图33是描绘在值(value)属性中存储值的示例的图。
[图34]
图34是描绘代码转换指令的配置的示例的图。
[图35]
图35是描绘放大(FullHeight)的示例的图。
[图36]
图36是描绘放大(FullWidth-TopBottomCrop-BlowUp)的示例的图。
[图37]
图37是描述放大(FullSize-Anamorphic)的示例的图。
[图38]
图38是描绘放大(Artificial-FullSize-Anamorphic)的示例的图。
[图39]
图39是用于使用PartialTransformability分发内容的内容分发处理的说明图。
[图40]
图40是视口通知的说明图。
[图41]
图41是描绘视口通知的示例的图。
[图42]
图42是描绘装置属性的示例的图。
[图43]
图43是描绘FLUS的功能块的图。
[图44]
图44是描绘FLUS会话的示例的图。
[图45]
图45是描绘SAND的ViewportViews消息的附加扩展的示例的图。
[图46]
图46是描绘应用了本技术的计算机的一个实施方式的配置的示例的框图。
具体实施方式
在下文中将参照附图详细描述应用了本技术的具体实施方式。
<内容分发系统的配置的第一示例和第二示例>
图1是描绘应用了本技术的内容分发系统的第一实施方式的配置的示例的框图,并且图2是描绘应用了本技术的内容分发系统的第二实施方式的配置的示例的框图。
例如,图1所示的内容分发系统11A被配置成使得内容提供装置13A和DASH播放器14经由因特网连接到提供各种服务的云计算(在下文中称为“云”)12。另外,在内容分发系统11A中,从设置在内容提供装置13A中的流源服务器21分发的内容通过云12上的DASH分发服务器22、经由由云12上的多个CDN服务器构造的CDN 23而被提供给DASH播放器14。
与内容分发系统11A相似,图2中所示的内容分发系统11B被配置成使得内容提供装置13B和DASH播放器14连接到云12。另外,在内容分发系统11B中,通过DASH分发服务器22将从设置在内容提供系统13B中的流源服务器21分发的内容、经由由云12上的多个CDN服务器构造的CDN 23而被提供给DASH播放器14。
换言之,图1的内容分发系统11A被配置成使得DASH分发服务器22与配置有流源服务器21的内容提供装置13A分开地被设置在云12上。另一方面,图2的系统11B被配置成使得配置有流源服务器21的内容提供装置13A也配置有DASH分发服务器22。
内容提供装置13A和13B均为输入装置(流捕获装置),该输入装置例如是向其输入内容的所谓的智能电话和数码相机。
DASH播放器14是输出装置,该输出装置例如是再现并输出内容的所谓的智能电话、平板、个人计算机、电视接收器、游戏仪器和头戴式显示器。
流源服务器21具有将分发到内容分发系统11A或11B中的内容进行存储的存储部,并且读取例如由DASH播放器14请求的从存储部分发内容的内容,并且分发该内容。
DASH分发服务器22具有至少编码器、DASH分段器和MPD生成器,并且可以对分发到内容分发系统11A或11B中的内容进行编码,并且根据MPEG-DASH生成片段并生成MPD。
CDN 23由多个CDN服务器(例如,稍后将描述的CDN初始服务器41a、CDN中继服务器和CDN边缘服务器41b)以多级方式配置,并且构造用于内容分发的优化网络。
注意,作为FLUS的框架(参照上述非专利文献2和非专利文献3)用于从内容提供装置13A或13B到云12的上传接口。换言之,如图1所示,在内容分发系统11A中的流源服务器21与DASH分发服务器22之间使用FLUS接口,并且DASH分发服务器22例如经由FLUS接口获取片段和MPD。另外,如图2所示,在内容分发系统11B中的DASH分发服务器22与CDN 23之间使用FLUS接口,并且CDN 23例如经由FLUS接口获取片段和MPD。
<经由FLUS接口进行内容分发处理>
将参照图3描述图1的内容提供装置13A中的FLUS接口的系统配置。
在内容提供装置13A中,配置有流源服务器21的内容提供装置13A用作FLUS源,并且在配置有DASH分发服务器22的云12上提供FLUS宿。在本文中,将在下述假设的基础上进行描述:流源服务器21和DASH分发服务器22执行与FLUS媒体相关联的处理,并且由内容提供装置13A和云12提供的FLUS控制器执行与FLUS控制相关联的处理。
在步骤S11中,内容提供装置13A的FLUS控制器请求认证(Authentication)或授权(Authorization),并且从内容提供装置13A将认证或授权参数发送到云12。
在接收到在步骤S11中发送的认证或授权参数时,云12的FLUS控制器返回认证或授权。由此,将指示赋予了访问服务的权限的访问令牌(AccessToken)从云12发送到内容提供装置13A。
在接收到在步骤S12中发送的访问令牌时,内容提供装置13A的FLUS控制器在步骤S13中请求服务(Service)建立,并且将访问令牌从内容提供装置13A发送至云12。注意,在本文中,以这种方式发送访问令牌的目的是证明访问令牌已被分配了请求服务建立的消息并且赋予了访问服务的权限。注意,在每个后续步骤中要发送的访问令牌在每个处理中用于相似的目的。
在接收到在步骤S13中发送的访问令牌时,云12的FLUS控制器在步骤S14中返回服务建立。由此,将在云12中建立的服务的服务ID(ServiceID)从云12发送到内容提供装置13A。
在接收到在步骤S14中发送的服务ID时,内容提供装置13A的FLUS控制器在步骤S15中请求服务资源。由此,将访问令牌和服务ID从内容提供装置13A发送到云12。
在接收到在步骤S15中发送的访问令牌和服务ID时,云12的FLUS控制器在步骤S16中返回服务资源。由此,将服务资源从云12发送到内容提供装置13A。
在接收到在步骤S16中发送的服务资源时,在随后需要改变服务本身的属性的情况下,内容提供装置13A的FLUS控制器在步骤S17中将服务资源更新为接收到的服务资源。另外,将访问令牌、服务ID和服务资源从内容提供装置13A发送到云12。
在接收到在步骤S17中发送的访问令牌、服务ID和服务资源时,云12的FLUS控制器在步骤S18中返回指示成功接收访问令牌、服务ID和服务资源的确认(ACK)。
在步骤S18中接收到确认时,内容提供装置13A的FLUS控制器在步骤S19中请求会话(Session)建立。由此,将访问令牌从内容提供装置13A发送到云12。
在接收到在步骤S19中发送的访问令牌时,云12的FLUS控制器在步骤S20中返回会话建立。由此,将在云12上建立的会话的会话ID(SessionID)从云12发送到内容提供装置13A。
在步骤S20中接收到所发送的会话ID时,内容提供装置13A的FLUS控制器在步骤S21中请求会话资源。由此,将访问令牌和服务ID从内容提供装置13A发送到云12。
在在步骤S21中接收到所发送的AccessToken和服务ID之后,云12的FLUS控制器在步骤S22中返回会话资源。由此,将会话资源从云12发送到内容提供装置13A。
在接收到在步骤S22中发送的会话资源时,内容提供装置13A的FLUS控制器在步骤S23中将会话资源更新为接收到的会话资源。另外,将AccessToken、服务ID和会话资源从内容提供装置13A发送到云12。
在接收到在步骤S23中发送的访问令牌、服务ID和会话资源时,云12的FLUS控制器在步骤S24中返回指示成功接收AccessToken、服务ID和会话资源的确认。
然后,在步骤S25中,流源服务器21开始传送流和元数据,并且将流和元数据与访问令牌和会话ID一起发送。此时,流源服务器21还可以通过将与通过存储在步骤S23中更新的会话资源中的内容通知的内容相似的内容存储在元数据中,来将相关流的代码转换指令通知给DASH分发服务器22。
在接收到在步骤S25中与访问令牌和会话ID一起发送的流和元数据时,DASH分发服务器22在步骤S26中返回指示成功接收流、元数据等的确认。
随后,在流源服务器21与DASH分发服务器22之间重复执行与步骤S25和S26类似的处理,直到流的分发结束。
此外,在流的分发结束之后,内容提供装置13A的FLUS控制器在步骤S27中请求会话释放。由此,将访问令牌和会话ID从内容提供装置13A发送到云12。
在接收到在步骤S27中发送的访问令牌和会话ID之后,云12的FLUS控制器在步骤S18中返回指示成功接收访问令牌和会话ID的确认。云12的FLUS控制器响应于该请求来执行用于释放会话的处理。
在步骤S28中接收到确认后,内容提供装置13A的FLUS控制器在步骤S29中请求服务释放。由此,将访问令牌和服务ID从内容提供装置13A发送到云12。
在接收到在步骤S29中发送的访问令牌和服务ID之后,云12的FLUS控制器在步骤S30中返回指示成功接收访问令牌和服务ID的确认。云12的FLUS控制器响应于该请求来执行用于释放服务的处理,并且在内容提供服务器13A的FLUS控制器接收到确认时结束处理。
如目前为止所述,内容提供装置13A的FLUS控制器更新从云12的FLUS控制器发送的会话资源的内容,并且将更新后的内容发送到云12的FLUS控制器,或者流源服务器21将元数据发送到云12的DASH分发服务器22,使得FLUS源可以将有关流的代码转换指令通知给FLUS宿。
将参照图4描述图2的内容提供装置13B中的FLUS接口的系统配置。
在内容提供装置13B中,配置有DASH分发服务器22的内容提供装置13B用作FLUS源,并且在配置有DASH分发服务器22的CDN 23上设置FLUS宿。在本文中,将在下述假设的基础上进行描述:DASH分发服务器22和CDN 23执行与FLUS媒体相关联的处理,并且由内容提供装置13B和云12提供的FLUS控制器执行与FLUS控制相关联的处理。
在步骤S51至S64中,在内容提供装置13B的FLUS控制器与云12之间执行与图3的步骤S11至S24类似的处理。
然后在步骤S65中,DASH分发服务器22开始传送DASH片段和MPD。
随后,在步骤S65中,DASH分发服务器22开始传送DASH片段和MPD,并且将DASH片段组和MPD与访问令牌和会话ID一起发送。此时,流源服务器21还可以通过将与通过存储在步骤S63中更新的会话资源中的内容通知的内容相似的内容存储在MPD中,来将相关流的代码转换指令通知给DASH分发服务器22。
在接收到在步骤S65中发送的访问令牌、会话ID、DASH-Segment组和MPD时,CDN 23在步骤S66中返回指示成功接收访问令牌等的确认。
在下文中,在DASH分发服务器22与CDN 23之间重复执行与步骤S65和S66类似的处理,直到流的分发结束。
此外,在流的分发结束之后,在步骤S67至S70中,在内容提供装置13B的FLUS控制器与云12之间执行与图3的步骤S27至S30类似的处理。
如目前为止所述,内容提供装置13B的FLUS控制器更新从云12的FLUS控制器发送的会话资源的内容,并且将更新后的内容发送给云12的FLUS控制器,或者DASH分发服务器22将MPD发送到云12的CDN 23,使得FLUS源可以将有关DASH片段的代码转换指令通知给FLUS宿。
<协议的详细示例>
将参照图5至图11描述在图3和图4的内容分发处理中使用的协议的详情。例如,API由RESTful API(用于构造成符合REST原理的Web系统的HTTP的调用接口)实现。
如图5的(a)所示,在服务建立的请求中(图3的步骤S13和图4的步骤S53),FLUS源向FLUS宿发送HTTP方法(例如,用于从FLUS源发送数据的HTTP POST)。此时,例如,服务资源被存储在主体部分中。
另外,响应于该请求(图3的步骤S14和图4的步骤S54),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示创建新源的HTTP 201CREATED)作为成功请求服务建立的结果。此时,例如,在FLUS宿中更新的服务资源的url被存储在位置首部中。此外,如在图6中描绘的服务资源的示例中,在成功建立服务的情况下,分配给在FLUS宿中生成的服务资源的service-id(服务ID)的值被存储在其中。
如图5的(b)所示,在服务资源的请求(图3的步骤S15和图4的步骤S55)中,FLUS源将HTTP方法(例如,用于请求由url指定的信息的HTTP GET)发送到FLUS宿。此时,通过HTTPGET,指定了作为对服务建立的响应而返回并且由FLUS宿更新的服务资源的url。
另外,响应于该请求(图3的步骤S16和图4的步骤S56),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功请求了服务资源的HTTP 200 OK)。此时,相关的服务资源被存储在主体部分中。
如图5的(c)所示,在服务资源的更新(图3的步骤S17和图4的步骤S57)中,FLUS源向FLUS宿发送HTTP方法(例如用于替换由url指定的服务器上的文件的HTTP PUT)。此时,在FLUS源中更新的服务资源被存储在主体部分中。
另外,响应于更新(图3的步骤S18和图4的步骤S58),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功更新服务资源的HTTP 200 OK)。此时,在成功更新服务资源的情况下,在FLUS宿中更新的服务资源的url被存储在位置首部中。
如图5的(d)所示,在会话建立的请求中(图3的步骤S19和图4的步骤S59),FLUS源向FLUS宿发送HTTP方法,例如(用于从FLUS源发送数据的HTTP POST)。此时,例如,会话资源被存储在主体部分中。
另外,响应于该请求(图3的步骤S20和图4的步骤S60),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功创建新源的HTTP 201 CREATED)作为成功请求服务建立的结果。此时,例如,在FLUS宿中更新的服务资源的url存储在位置首部中。此外,如在图7中描绘的会话资源的示例中,在会话建立成功的情况下,将分配给在FLUS宿中生成的会话资源的Sessione-id(会话ID)的值存储在其中。
如图7中所示,在本文中,在会话资源中描述了『“用于FLUS宿从FLUS源(通过推送/拉取)获取流的信息”』,并且图8描绘了该信息的示例。
如图8所示,作为该信息,在拉取(Pull)获取的情况下描述了『“有关会话流的MPD的URL”』,而在推送(Push)获取的情况下描述了『“有关会话流的SDP(会话描述协议)的URL”』。
此外,图9描绘了图8所示的『“有关会话流的SDP(会话描述协议)的UR”』中的SDP的示例。例如,在使用SDP分发流时,引入新的会话属性a=代码转换指令,使得可以将代码转换指令布置在视频的会话属性描述的一部分中。
另外,在存储图9中描绘的作为『a=代码转换指令:"代码转换指令的内容(经base64编码的以XML描述的代码转换指令的字符串)"』的变量的代码转换指令信息结构(文件)的URL的情况下,描述了『a=代码转换指令:"代码转换指令的URL(以XML描述的代码转换指令文件的URL)"』
尽管图9描绘了使用在IETF(互联网工程任务组)中标准化和定义的SDP文件作为元数据文件并且将代码转换指令存储在与SDP的有关媒体会话的媒体描述部分中的示例,但是可以如图10所示将代码转换指令作为该示例的变型存储在FLUS的相关的会话资源中。此外,作为其变型,有时将文件的url存储在其中。
如图11的(a)所示,在请求会话资源(图3的步骤S21和图4的步骤S61)时,FLUS源向FLUS宿发送HTTP方法(例如,用于请求由url指定的信息的HTTP GET)。此时,通过HTTP GET,指定了作为对会话建立的响应而返回并且在FLUS宿中更新的会话资源的url。
另外,响应于请求(图3的步骤S22和图4的步骤S62),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功请求会话资源的HTTP 200 OK)。此时,相关的会话资源被存储在主体部分中。
如图11的(b)所示,在会话资源的更新(图3的步骤S23和图4的步骤S63)中,FLUS源发送HTTP方法,例如用于替换服务器上的文件的HTTP PUT。由URL指定的FLUS宿。此时,在FLUS源中更新的会话资源被存储在主体部分中。
另外,响应于该请求(图3的步骤S24和图4的步骤S64),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功更新会话资源的HTTP 200 OK)。此时,在成功更新服务的情况下,在FLUS宿中更新的会话资源的url被存储在位置首部中。
如图11的(c)所示,在释放会话(图3的步骤S27和图4的步骤S67)时,FLUS源向FLUS宿发送HTTP方法(例如,用于删除由url指定的服务器上的文件的HTTP DELETE)。此时,会话资源的url由HTTP DELETE指定。
另外,响应于释放(图3的步骤S28和图4的步骤S68),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功释放会话的HTTP 200 OK)。此时,在成功释放会话的情况下,已释放的会话资源的url被存储在位置首部中。
如图11的(d)所示,在释放服务(图3的步骤S29和图4的步骤S69)时,FLUS源向FLUS宿发送HTTP方法(例如,用于删除由url指定的服务器上的文件的HTTP DELETE)。这时,服务资源的url由HTTP DELETE指定。
另外,响应于释放(图3的步骤S30和图4的步骤S70),FLUS宿向FLUS源发送HTTP状态码(例如,用于指示成功释放服务的HTTP 200 OK)。此时,在成功释放服务的情况下,已释放服务资源的url被存储在位置首部中。
<内容分发系统中的每个块的配置的示例>
将参照图12至图17描述配置内容分发系统11的块的配置的示例。注意,图12中描绘的内容分发系统11对应于图1的任何内容分发系统11A的配置以及图2的内容分发系统11B的配置。换言之,利用内容分发系统11A的配置,在流源服务器21与DASH分发服务器22之间使用FLUS接口,并且利用内容分发系统11B的配置,在DASH分发服务器22与CDN 23-1和23-2之间使用FLUS接口。
如图12所示,在内容分发系统11中,DASH分发服务器22连接到流源服务器21,并且流分发管理器31连接到DASH分发服务器22。例如,DASH分发服务器22将原始MPD提供给流分发管理器31,并且流分发管理器31将添加了代码转换指令的MPD返回到DASH分发服务器22。
此外,在图12所示的内容分发系统11中,描绘了使用由两个供应商提供的CDN 23-1和23-2来分发内容的示例,并且CDN 23-1和23-2中的每一个配置有多级CDN服务器41。另外,DASH分发服务器22将MPD和片段发送到CDN 23-1的CDN初始服务器41a-1和CDN 23-2的CDN初始服务器41a-2中的每一个。
CDN 23-1配置有CDN初始服务器41a-1、未示出的多级CDN中继服务器和CDN边缘服务器41b-1。从DASH分发服务器22提供给CDN初始服务器41a-1的MPD和片段经由未示出的多级CDN中继服务器到达CDN边缘服务器41b-1。此外,CDN边缘服务器41b-1将MPD和片段发送到DASH播放器14-1和14-2中的每一个,在DASH播放器14-1和14-2中再现内容。
CDN 23-2配置有CDN初始服务器41a-2、未示出的多级CDN中继服务器和CDN边缘服务器41b-2,并且CDN边缘服务器41b-2具有代码转换器42和代码转换管理器43。从DASH分发服务器22提供给CDN初始服务器41a-2的MPD和片段经由未示出的多级CDN中继服务器到达CDN边缘服务器41b-2。
在CDN边缘服务器41b-2中,添加了代码转换指令的MPD和未经代码转换的片段被输入到代码转换器42。此外,在CDN边缘服务器41b-2中,从代码转换器42输出经代码转换的片段以及改为参考经代码转换的片段的MPD。此外,CDN边缘服务器41b-2将经代码转换的片段以及改为参考经代码转换的片段的MPD发送到DASH播放器14-3。因此,DASH播放器14-3获取以这种方式分发的内容并且再现该内容。
图13是描绘流源服务器21的配置的示例的框图。
如图13所示,流源服务器21配置有视频输入部51、音频输入部52、流生成/存储部53、流分发部54、元数据生成/存储部55和元数据分发部56。
由例如未示出的成像装置捕获的视频数据被输入到视频输入部51,并且由例如未示出的声音拾取装置收集的音频数据被输入到音频输入部52。
流生成/存储部53基于从视频输入部51提供的视频数据和从音频输入部52提供的音频数据来生成流,并且存储该流。
流分发部54从流生成/存储部53读取流,并且将该流分发到DASH分发服务器22。
元数据生成/存储部55生成关于存储在流生成/存储部53中的流的元数据并且存储该元数据。
元数据分发部56从元数据生成/存储部55读取元数据,并且将元数据分发到DASH分发服务器22。
图14是描绘流分发管理器31的配置的示例的框图。
如图14所示,流分发管理器31配置有代码转换指令生成部61。
代码转换指令生成部61例如在由代码转换器42进行代码转换时,生成描述控制、条件等的代码转换指令(限定信息)。另外,代码转换指令生成部61将生成的代码转换指令添加到从DASH分发服务器22提供的原始MPD,并且将添加了代码转换指令的MPD提供给DASH分发服务器22。
图15是描绘DASH分发服务器22的配置的示例的框图。
如图15所示,DASH分发服务器22配置有元数据获取/存储部71、流获取/存储部72、片段生成部73、MPD生成部74、片段分发部75和MPD分发部76。
元数据获取/存储部71获取从流源服务器21的元数据分发部56提供的元数据并且存储该元数据。另外,元数据获取/存储部71将元数据提供给流获取/存储部72和MPD生成部74。
流获取/存储部72获取从流源服务器21的流发送部54提供的流,并且存储该流。另外,流获取/存储部72基于从元数据获取/存储部71提供的元数据对流进行编码,并且将由流分发的内容提供给片段生成部73。
片段生成部73根据流获取/存储部72提供的内容生成符合MPEG-DASH的片段,将该片段提供给片段分发部75,并且请求MPD生成部74生成该片段的MPD。
MPD生成部74基于从元数据获取/存储部71提供的元数据,生成用于由片段生成部73生成的片段原始的MPD(存储媒体数据的URL),并且将该MPD提供给流分发管理器31。另外,MPD生成部74接收由流分发管理器31添加了代码转换指令的MPD,并且将添加了代码转换指令的MPD提供给MPD分发部76。
片段分发部75将从片段产生部73提供的片段分发到CDN 23。
MPD分发部76将从MPD生成部74提供的MPD分发到CDN 23。
图16是描绘配置CDN 23的CDN服务器41的配置的示例的框图。注意,图12的CDN初始服务器41a、未示出的CDN中继服务器和CDN边缘服务器41b在配置上与CDN服务器41类似。
如图16所示,CDN服务器41配置有MPD获取部81、片段获取部82、MPD存储部83、代码转换控制部84、代码转换处理部85、片段存储部86、MPD分发部87和片段分发部88。
MPD获取部81获取从DASH分发服务器22的MPD分发部76分发的添加了代码转换指令的MPD,并且将添加了代码转换指令的MPD提供给片段获取部82和MPD存储部83。
片段获取部82获取从DASH分发服务器22的片段分发部75分发的片段,并且将该片段提供给片段存储部86。
MPD存储部83存储由MPD获取部81获取的添加了代码转换指令的MPD以及由代码转换控制部84更新的添加了代码转换指令的MPD。
代码转换控制部84从MPD存储部83读取添加了代码转换指令的MPD,分析添加了代码转换指令的MPD,并且分析代码转换指令。然后,代码转换控制部84根据分析结果更新MPD,将MPD返回到添加了代码转换指令的MPD,并且基于更新后的MPD控制代码转换处理部85中的片段的代码转换。例如,在其中将代码转换指令元素存储在MPD中的情况下(参照稍后描述的图24),代码转换控制部84基于代码转换指令元素来控制代码转换。替选地,在MPD中存储有代码转换指令文件的URL的情况下(参照稍后描述的图25),代码转换控制部84基于代码转换指令文件的URL,基于响应于对代码转换指令的请求而接收到的代码转换指令元素来控制代码转换。
代码转换处理部85从片段存储部86读取片段,在代码转换控制部84的控制下对该片段进行代码转换,并且将经代码转换的片段返回到片段存储部86。
片段存储部86存储由片段获取部82获取的片段以及由代码转换处理部85进行代码转换的片段。
MPD分发部87从MPD存储部83中读取由代码转换控制部84更新的添加了代码转换指令的MPD,并且将更新后的添加了代码转换指令的MPD分发给DASH播放器14。
片段分发部88从片段存储部86中读取经代码转换的片段,并且将经代码转换的片段分发到DASH播放器14。
图17是示出DASH播放器14的配置的示例的框图。
如图17所示,DASH播放器14配置有MPD获取部91、播放器控制部92、交互处理部93、片段获取部94、片段处理部95和渲染处理部96。
MPD获取部91获取从CDN服务器41的MPD分发部87分发的MPD,并且将该MPD提供给播放器控制部92。
播放器控制部92根据从MPD获取部91提供的MPD(由CDN服务器41更新的添加了代码转换指令的MPD)来控制片段获取部94、片段处理部95和渲染处理部96。此时,播放器控制部92响应于由交互处理部93获取的用户的交互(例如,在DASH播放器14是头戴式显示器的情况下,用户的交互为用户脸部的方向)来控制内容的再现。
交互处理部93对输入到未示出的输入部的各种类型的信息(例如,在DASH播放器14是头戴式显示器的情况下,该信息为指示方向的信息)执行处理,以获取用户相对于DASH播放器14的交互信息,并且将用户的交互提供给播放器控制部92。
片段获取部94获取从CDN服务器41的片段分发部88分发的片段,并且在播放器控制部92的控制下,将DASH播放器14再现内容所必需的片段提供给片段处理部95。
片段处理部95在从播放器控制部92的控制下,对从片段获取部94提供的片段执行处理,再现内容,并且将内容提供给渲染处理部96。
渲染处理部96在播放器控制部92的控制下对从片段处理部95提供的内容进行渲染,并且将所得到的内容输出到未示出的输出部以显示内容。
现在将详细描述在配置有上述流源服务器21、流分发管理器31、DASH分发服务器22、CDN服务器41和DASH播放器14的内容分发系统11中的内容分发处理。
在例如通过内容分发系统11分发广播流的情况下,节目、商业广告等被累积在流源服务器21中。此外,如图12所示,从流源服务器21分发的流经由多级CDN中继服务器从以DASH分发服务器22的方式配置由分发服务提供商提供的每个CDN 23的多个CDN服务器41中的CDN初始服务器41a到达CDN边缘服务器41b,并且最终由每个DASH播放器14再现。
此时,在DASH分发服务器22中,MPD生成部74(图15)将所生成的原始MPD临时传送给流分发管理器31。然后,在流分发管理器31中,代码转换指令生成部61(图14)基于流的分发策略来适当地修改MPD,并且将修改后的MPD返回给MPD生成部74。
此时,代码转换指令生成部61通过将用于描述与CDN 23中的代码转换相关的流的例如控制、条件等的代码转换指令元素添加到适配组(AdaptationSet)元素来修改MPD。其中使用了用于简单地表示服务商或作者侧允许的变换后的配置文件的候选者等的格式。此外,当存在要由图16的CDN服务器41执行的解码、渲染或再编码处理中受约束的内容时,该格式需要准确地表示那些内容。
换言之,期望在CDN服务器41中的代码转换处理的过程中,在将经编码的原始流暂时返回到基带流并且对基带流进行重新编码时,可以执行以下声明。
首先,进行用于放大的各种图像校正的情况越来越多,并且期望能够声明是否可以执行这种处理。此外,其次,期望能够声明是否不仅允许空间分辨率或时间分辨率的简单整数倍变换,而且还允许作为放大处理方法的各种放大处理模式(参照稍后描述的图35至图38)。
此外,第三,认为执行视口相关的缩放和编码的情况增加了,并且期望能够声明是否可以执行这种部分代码转换处理。此外,第四,期望能够在控制中声明关于是否执行代码转换处理的条件描述,例如,作为执行代码转换时的上限的最大延迟时间以及质量差的上限(例如,与原始基带数据解除关联)。
此外,第五,有必要提供一种功能,以将这种处理的反馈报告(如果执行的话)分发给作者侧,并且期望能够在那时声明诸如通知消息的结构和URL之类的内容。例如,在本文中假设分发关于在用户附近的CDN边缘服务器41b等处于哪一级、在CDN 23内或者在多个CDN 23上执行什么处理的反馈报告。
通过添加描述此类内容的代码转换指令元素修改的MPD和DASH片段被传送到图12的CDN 23-1和23-2,并且经由多级CDN服务器41传送到CDN边缘服务器41b。然后,在获取了期望的MPD之后,每个DASH播放器14使用HTTP在CDN边缘服务器41b上获取片段。注意,分段器有时将除HTTP和DASH片段之外的协议和格式的片段分发给CDN 23内的CDN边缘服务器41b。此外,CDN边缘服务器41b有时通过例如来自上级CDN服务器41的HTTP获取(PULL获取)期望的片段。
在本文中,在每个DASH播放器14通过CDN边缘服务器41b获取MPD的情况下,有时基于CDN边缘服务器41b与DASH播放器14之间的网络状态、单个DASH播放器14的最终用户的观看喜好来改变段编码方案。在适当地响应于负荷状态来分配负荷的同时,在每个CDN 23内的CDN边缘服务器41b上执行这种代码转换。
例如,在普通的VoD(视频点播)流中,在CDN初始服务器41a开始分发之前,可以生成特定内容的多个比特率的流,并且可以响应于用户的请求来分发流。替选地,为了提高响应性能,在来自客户端的请求之前,可以将流预先分发(预先获取或推送分发)到CDN边缘服务器41b(或用作分发路径上的中间节点的CDN中继服务器)。
在本文中,在CDN边缘服务器41b(在下文中将使用包括CDN中继服务器作为分发路径上的中间节点的表达“CDN边缘服务器41b”)能够预先掌握(假设)客户端的请求的趋势的情况下,基于原始流考虑客户端的再现或观看喜好,CDN边缘服务器41b能够预先改进流送的质量(包括图像质量和音频质量以及响应性能)。例如,CDN边缘服务器41b基于来自访问CDN边缘服务器41b的客户组的请求的过去统计预测的DASH播放器14的再现能力、编解码器类型等来改进流送的质量。
此外,在作者提供ROI(关注区域)元数据等并且可以识别客户端可能预先请求的图像上的区域(同时还假设在同一图像上存在多个ROI)的情况下,CDN边缘服务器41b有时专注于那些ROI区域来执行放大,然后对流进行重新编码。在这种情况下,假设来自客户端的请求分散了例如前几个片段(在客户端之间ROI区域不同),因此准备了多个版本的经代码转换的片段。此外,在将来自客户端的请求稳定为静止状态之后,可以通过对后续片段(第一变型中的子集,即主要是同一图像上的多个ROI中的子集)进行代码转换,来大大节省CDN边缘服务器41b的缓存区域。
为了控制这种灵活的代码转换,代码转换管理器43安装在CDN边缘服务器41b中。代码转换管理器43指示CDN边缘服务器41b中安装的代码转换器42使用传送到DASH播放器14的MPD以及关于基于该MPD的请求的知识来执行片段的代码转换,同时掌握CDN 23和DASH播放器14之间的网络负荷状态,并且考虑CDN边缘服务器41b的负荷状态。
此外,代码转换管理器43解析在MPD中描述的代码转换指令的内容,并且基于与在代码转换指令中描述的代码转换处理相关联的各种约束或条件来指示代码转换器42对有关片段进行代码转换。当代码转换器42执行代码转换处理时,代码转换管理器43然后将报告消息发送到在代码转换指令中描述的报告返回URL。
此外,代码转换管理器43更新MPD的内容,并且将参考原始片段的MPD改为参考经代码转换的片段的MPD。在本文中,在考虑到稍后描述的视口而使得该更新不涉及MPD的内容的更新(诸如片段的部分改变)的情况下,即,在由放大引起的参数修改被关闭到文件格式级别(例如,不影响MPD)的情况下,代码转换管理器43有时仅改变片段的内容,而使MPD保持参考原始片段。在这种情况下,无需敦促每个客户端获取更新的MPD。
DASH播放器14以这种方式获取被改为参考经代码转换的片段的MPD,并且基于MPD获取并再现该片段。
参照图18,将描述在图12的内容分发系统11中执行的内容分发处理中由DASH分发服务器22、流分发管理器31、CDN服务器41(主要是CDN边缘服务器41b上的代码转换器42和代码转换管理器43)和DASH播放器14执行的处理。
在步骤S101中,在DASH分发服务器22中,流获取/存储部72接收从流源服务器21分发的流并且对该流进行编码,并且片段生成部73生成片段。然后,流分发管理器31生成添加了代码转换指令的MPD。此时,例如在经由FLUS接口从上游提供代码转换指令的内容作为元数据的情况下,流分发管理器31将上述图9所示的代码转换指令的内容插入MPD。替选地,流分发管理器31可以如上所述地将代码转换指令文件的URL插入MPD中作为代码转换指令的替选。
在步骤S102中,CDN服务器41向DASH分发服务器22请求MPD获取和片段获取。
在获取了在步骤S102中的来自CDN服务器41的请求之后,DASH分发服务器22在步骤S103中开始传送添加了代码转换指令的MPD和片段。
在步骤S104中,代码转换管理器43测量请求处理状态。
当CDN服务器41接收到在步骤S103中添加了代码转换指令的MPD以及从DASH分发服务器22传送的片段时,代码转换管理器43在步骤S105中解析添加了代码转换指令的MPD。然后,代码转换管理器43分析代码转换指令,并且指示代码转换器42根据分析结果执行代码转换。
代码转换器42在步骤S106中对该片段进行解码,在步骤S107中执行放大,并且在步骤S108中根据代码转换管理器43的代码转换指令对该片段进行编码。在步骤S109中,代码转换器42然后生成参考经代码转换的片段的MPD。
在步骤S110中,DASH播放器14向CDN服务器41请求MPD获取。
在接收到步骤S110中的来自DASH播放器14请求之后,CDN服务器41在步骤S111中将参考经代码转换的片段的MPD传送到DASH播放器14。
当获取了步骤S111中的参考经代码转换并传送的片段的MPD时,DASH播放器14在步骤S112中解析MPD。然后,DASH播放器14向CDN服务器41请求该片段。
在获取了步骤S112中的来自DASH播放器14的请求之后,CDN服务器41在步骤S113中传送由DASH播放器14请求的经代码转换的片段。
在接收到在步骤S113中传送的经代码转换的片段时,DASH播放器14在步骤S114中再现接收到的经代码转换的片段。
随后,直到内容分发结束,连续地传送和再现经代码转换的片段。
如目前为止所述,流分发管理器31生成添加了代码转换指令的MPD,使得代码转换管理器43可以解析MPD,分析代码转换指令,并且指示代码转换。
尽管在本文中描述了CDN服务器41请求DASH分发服务器22获取MPD和片段的示例,但是DASH分发服务器22可以以推送的方式将MPD和片段传送给CDN服务器41。替选地,可以以如下方式从下而上地开始流程:DASH播放器14首先请求MPD,并且CDN服务器41根据该请求来传送MPD和片段。稍后将描述的图21至图23描绘了在包括可能在实时流送时发生MPD的动态更新的模式的情况下的处理的示例。
图19在本文中描绘了在图18的步骤S101中经由FLUS接口将代码转换指令的内容作为元数据(SDP)传送的情况下的对应关系。换言之,图19所示的对应关系被保持在SDP中描述的代码转换指令与插入MPD中的代码转换指令之间。同样地,在DASH分发服务器22的后续阶段中,图19所示的对应关系被保存在来自流源服务器21的流与云12上的流之间。
图20是描绘作为在云12上设置流分发管理器31的变型的内容分发系统11B的配置的示例的框图。
如图20所示,以如下方式配置内容分发系统11B:即,将把代码转换指令的内容添加到MPD的流分发管理器31布置在内容提供装置13的DASH分发服务器22与云12上的CDN 23之间。因此,在内容分发系统11B中,在内容提供装置13B与流分发管理器31和CDN 23之间使用FLUS接口。以这种方式配置的内容分发系统11B具有如下模式:MPD中未描述代码转换指令,并且在MPD中中已经描述了代码转换指令的模式。
将参照图21描述如图20所示配置的内容分发系统11B中的内容分发处理。
在步骤S131中,类似于图18的步骤S101,DASH分发服务器22对从流源服务器21提供的流进行编码并生成片段。
在步骤S132中,CDN服务器41请求DASH分发服务器22获取MPD和片段。
当获取了步骤S132中的来自CDN服务器41请求时,DASH分发服务器22开始将MPD和片段传送到流分发管理器31。
当接收到步骤S133中传送的MPD和片段时,流分发管理器31在步骤S134中将代码转换指令插入MPD中。然后,流分发管理器31开始将添加了代码转换指令的MPD和片段传送到CDN服务器41。
随后,通过与图18的步骤S105和后续步骤类似的处理来分发内容。
以这种方式,利用在云12上设置流分发管理器31的配置,DASH分发服务器22经由流分发管理器31将添加了代码转换指令的MPD和片段分发到CDN服务器41。
将参照图22描述用于通知参考经代码转换的片段的MPD的客户端并且使该客户端获取图12的内容分发系统11中的片段的内容分发处理。
在步骤S151中,类似于图18的步骤S101,DASH分发服务器22对从流源服务器21提供的流进行编码并生成片段。此外,DASH分发服务器22中的MPD生成部74生成原始MPD。
在步骤S152中,DASH分发服务器22传送在步骤S151中生成的MPD和片段,并且CDN服务器41获取MPD和片段。
在步骤S153中,DASH播放器14向CDN服务器41请求MPD获取。
在接收到步骤S153中的来自DASH播放器14的请求之后,CDN服务器41在步骤S154中将在步骤S152中获取的MPD传送到DASH播放器14。
当获取了在步骤S154中传送的MPD之后,DASH播放器14在步骤S155中解析MPD。然后,DASH播放器14向CDN服务器41请求该片段。
当获取了步骤S155中的来自DASH播放器14请求时,CDN服务器41在步骤S156中传送由DASH播放器14请求的片段。
在接收到在步骤S156中传送的片段时,DASH播放器14在步骤S157中再现接收到的片段。
在步骤S158中,代码转换管理器43测量请求处理状态。
在步骤S159中,DASH分发服务器22更新并传送MPD,即,由流分发分发管理器31将添加了代码转换指令的MPD传送到CDN服务器41。
当CDN服务器41接收到在步骤S159从DASH分发服务器22传送的添加了代码转换指令的MPD和片段时,代码转换管理器43在步骤S160中解析添加了代码转换指令的MPD。然后,代码转换管理器43分析代码转换指令,并且指示代码转换器42根据分析结果执行代码转换。
代码转换器42在步骤S161中对该片段进行解码,在步骤S162中执行放大,并且在步骤S163中根据代码转换管理器43的代码转换指令对该片段进行编码。此外,在步骤S164中,代码转换器42生成参考经代码转换的片段的MPD。
在步骤S165中,CDN服务器41将MPD的更新通知给DASH播放器14。
在步骤S166中,DASH播放器14响应于在步骤S165中来自CDN服务器41的通知,向CDN服务器41请求MPD获取。
当接收到步骤S166中的来自DASH播放器14的请求时,CDN服务器41在步骤S167中将参考经代码转换的片段的MPD传送到DASH播放器14。
当获取了步骤S167中的参考经代码转换片段并传送的MPD时,DASH播放器14在步骤S168中解析MPD。然后,DASH播放器14向CDN服务器41请求经代码转换的片段作为下一个片段。
当获取了步骤S168中的来自DASH播放器14请求时,CDN服务器41在步骤S169中传送由DASH播放器14请求的经代码转换的片段。
当接收到在步骤S169中传送的经代码转换的片段时,DASH播放器14在步骤S170中再现接收到的经代码转换的片段。
随后,直到内容分发结束,连续地传送和再现经代码转换的片段。
如目前为止所述,CDN服务器41可以将MPD的更新通知给DASH播放器14,并且DASH播放器14可以响应于该通知来获取参考经代码转换的片段的MPD,并且再现经代码转换的片段。
将参照图23描述在图12的内容分发系统11中的用于将未经代码转换的片段的URL应用于经代码转换的片段的URL并且使客户端获取该片段的内容分发处理。
在步骤S201至S213中,执行与图22的步骤S151至S163类似的处理。
此外,在步骤S214中,DASH播放器14请求下一片段。
此时,将未经代码转换的片段的URL应用于经代码转换的片段的URL,并且在步骤S214中由DASH播放器14请求的片段的URL被经代码转换的片段的URL替换。
因此,在步骤S215中,CDN服务器41响应于来自DASH播放器14的请求来传送经代码转换的片段。
当接收到在步骤S215中传送的经代码转换的片段时,DASH播放器14在步骤S216中再现接收到的经代码转换的片段。
如目前为止所述,将未经代码转换的片段的URL应用于经代码转换的片段的URL使得DASH播放器14能够获取经代码转换的片段,而无需例如将改为参考经代码转换的片段的MPD传送给DASH播放器14。
<代码转换指令的结构>
将参照图24至图33描述作为在CDN服务器41(主要是CDN边缘服务器41b)进行分析或针对确定时使用的元数据的代码转换指令的结构。
例如,在使用DASH-MPD作为流服务的清单的情况下,该元数据被添加到要进行代码转换的适配组元素(或表示元素或子表示元素)。注意,当可以描述多个元素或值时,代码转换管理器43可以选择最佳元素或值。
图24描绘了在DASH-MPD中布置代码转换指令元素的示例。例如,代码转换指令元素被存储为独立文件,并且代码转换指令元素可以以将代码转换指令元素添加到适配组元素的方式被布置在<代码转换指令...>与</代码转换指令>之间。
此外,图25描绘了在DASH-MPD中布置代码转换指令元素的变型的示例。如图25所示,可以以将代码转换指令文件添加到适配组元素的方式来布置代码转换指令文件的URL。
在下文中将描述代码转换指令元素的详情。
如图26(a)所示,可变码属性指定是否可以执行代码转换为真或假。例如,在代码转换指令元素中仅存在可变码属性并且可变码属性为真指示可以执行任意模式的代码转换。相反,可变码属性被指定为假的情况指示完全禁止代码转换处理。
此外,当可变码属性指示可以执行代码转换时,可以存在以下属性。
如图26的(b)所示,可放大属性指定在代码转换时是否可以执行放大为真或假。例如,在仅存在可放大属性而可变码属性指定为真并且可放大属性指定为真的情况指示可以在重新编码后执行任意模式的放大。相反,仅存在可放大属性并且可放大属性指定为假的情况指示完全禁止在重新编码之前进行放大。
如图26的(c)所示,processingLimit属性指定作为代码转换处理所需的时间的上限值的最大延迟时间。
如图26的(d)所示,许可元素将参数/视频或参数/音频中的至少一个(或多个)指定为在重新编码时可以选择的编解码器参数。注意,例如,在许可元素中指定『/参数/“其他媒体类型”』使得能够包含扩展,使得可选择其他媒体类型。
如图26的(e)所示,禁止元素将参数/视频或参数/音频中的至少一个(或多个)指定为在重新编码时禁止选择的编解码器参数。注意,在禁止元素中指定例如『/参数/“其他媒体类型”』使得能够包含扩展,使得可选择其他媒体类型。
如图26的(f)所示,条件元素在schemeIdUri属性中指定用于标识条件描述的格式的URI(条件描述语言)。例如,在用ODRL描述条件描述的情况下,条件元素指定urn:ODRL。此外,条件描述被存储在作为条件元素内容部分的CDATA部分中(以字符串“<![CDATA[”开始,以字符串“]]>”结束)。
例如,如图27所示,条件描述被存储在条件元素的内容部分的CDATA部分中。
此外,图28描绘了ODRL中条件描述的示例。在图28中,描述了下述示例:指示服务所有者的“a.com”允许将有关代码转换为“cdn.com”,直到2017/12/31。
如图29的(a)所示,TranscodeEventNotification元素指定事件通知,该事件通知应用了有关代码转换指令中描述的各种约束、策略等。
如图29的(b)所示,dateTime属性指定事件发生的时钟时间。
如图29的(c)所示,MPDUr1属性指定有关MPD的URL。
如图29的(d)所示,适配组Id属性指定要被代码转换的适配组的Id。
如图29的(e)所示,notificationUrl属性指定通知目的地的URL。
在本文中,在例如在将代码转换应用于所涉及的代码转换指令所应用到的流(片段)的情况下,将包括上述dateTime属性、MPDUrl属性和适配组Id属性的代码转换指令元素本身通知给由HTTP POST通过notificationUrl属性指定的URL。从而报告实际应用的代码转换处理的内容。此时,假设根据所应用的代码转换的模式来适当地填充元素、属性或值。
具体而言,在将原始视频流上转换为4K分辨率和120帧速率的流然后对上转换结果重新编码的情况下,将诸如图30中描绘的代码转换指令元素通知给由notifyUrl属性指定的URL。
如图31的(a)所示,参数/视频元素指定视频的各种属性。
如图31的(b)所示,配置文件(profile)属性指定用逗号分隔的“配置文件名称”列表。
如图31的(c)中所示,分辨率属性指定由逗号分隔的“竖直×水平”像素计数的列表。注意,作为表达分辨率属性的另一示例,分辨率属性可以指定竖直像素计数的上限或下限以及水平像素计数的上限或下限。
如图31的(d)所示,帧速率属性指定用逗号分隔的“帧速率(以fps为单位)”的列表。注意,作为帧速率属性的表达的另一示例,帧速率属性可以指定帧速率的上限或下限。
如图31的(e)所示,位深度属性指定用逗号分隔的“位计数(深度)”的列表。注意,作为位深度属性的表达的另一示例,位深度属性可以指定位计数的上限或下限。
如图31的(f)所示,色彩空间属性指定用逗号分隔的“色彩空间名称”列表。
如图31的(g)所示,伽玛属性指定用逗号分隔的“伽玛值”列表。
如图31的(h)所示,upScalingPatternList属性指定用逗号分隔的“放大模式”的列表。
如图32的(a)所示,partialTransformability属性指定是否可以执行涉及部分放大的渲染和代码转换为真或假。
如图32的(b)中所示,偏差极限元素指定差异格式标识符以及由方案表达的值。
如图32的(c)所示,参数/音频元素指定音频的各种属性,并且列出将被指定为真或假的音频属性。
如图32的(d)所示,配置文件列表属性指定用逗号分隔的“配置文件名称”列表。
如图32的(e)所示,samplerateRate属性指定用逗号分隔的“采样率(以Hz为单位)”的列表。注意,作为表达采样率属性的另一示例,采样率属性可以指定采样率的上限或下限。
如图32的(f)所示,位深度属性指定用逗号分隔的“位计数(深度)”的列表。注意,作为表达位深度属性的另一示例,位深度属性可以指定位计数的上限或下限。
如图32的(g)所示,偏差极限元素指定差异格式标识符以及由方案表示的值。如例如在图33中所描绘的,在偏差极限元素的schemeIdUri属性中指定了标识偏差表达方案的URI(例如,对于PSNR,该URI被指定为urn:PSNR),并且该URI的值(在图33的示例中为35)被存储在值属性中。
图34描绘了TrasncodeDirective的配置的示例。
如图34所示,在将代码转换指令布置在视频适配组中的情况下,在参数元素下仅存在视频元素。另外,在将代码转换指令布置在音频适配组中的情况下,在参数元素下仅存在音频元素。
<放大类型>
将参照图35至图38描述包括部分图像校正处理的放大类型。
图35描绘了通过在SDTV的左侧和右侧添加黑色色调来将SDTV(4:3)转换为HDTV(16:9)的放大(FullHeight)示例。注意,可以通过将黑色色调添加到例如SDTV的顶侧和底侧来执行用于将SDTV转换为HDTV的放大(FullHeight),并且可以改变视角,或者可以添加除黑色以外的色调。
图36描绘了通过调整SDTV的水平宽度以与HDTV(16:9)匹配并且裁剪SDTV的顶部和底部来将SDTV(4:3)转换为HDTV(16:9)的放大示例(FullWidth-TopBottomCrop-BlowUp)。注意,可以通过调整SDTV的竖直宽度以与HDTV匹配并且裁剪SDTV的左侧和右侧来执行将SDTV转换为HDTV的放大(FullHeight-SideCrop-BlowUp),并且可以改变视角。
图37描绘了通过水平拉伸SDTV来将SDTV(4:3)转换为HDTV(16:9)的放大(FullSize-Anamorphic)的示例。注意,可以通过竖直拉伸SDTV来执行用于将SDTV转换为HDTV的放大(FullSize-Anamorphic),并且可以转换视角。
图38描绘了通过补充SDTV的左侧和右侧来将SDTV(4:3)转换为HDTV(16:9)的放大(Artificial-FullSize-Anamorphic)的示例。此时,例如,可以通过使用智能图像处理技术等来模拟地生成图像,并以图像中的对象的纵横比保持不变的方式对图像进行补充来改变视角。换言之,如图38所示,以将图像人工地补充(模拟、推断或想象)到左侧和右侧的方式添加图像。
<使用PartialTransformability的处理>
将参照图39描述用于使用PartialTransformability分发内容的内容分发处理。例如,将上述图32的(a)中描绘的partialTransformability属性设置为真或假使得可以基于关于客户端装置上的用户视口的信息来优化包括原始流的部分放大的代码转换。换言之,可以基于客户的环境信息(例如,视口)对内容进行代码转换。
在步骤S251中,DASH播放器14向CDN服务器41(主要是CDN边缘服务器41b)请求MPD获取。
在接收到步骤S251中的来自DASH播放器14请求之后,CDN服务器41在步骤S252中将MPD传送到DASH播放器14。
当获取了在步骤S252中传送的MPD时,DASH播放器14在步骤S253中解析MPD。然后,DASH播放器14向CDN服务器41请求片段。
当获取了步骤S253中的来自DASH播放器14的请求时,CDN服务器41在步骤S254中通过SAND等使用例如属于当前正在考虑的ImmersiveMedia的DASH度量等来传送添加了传送请求的片段。
在步骤S255中,代码转换管理器43测量请求处理状态。
当获取了在步骤S254中传送的添加了SAND传送请求的片段时,DASH播放器14在步骤S256中通过SAND通知关于DASH播放器14的用户的视口元数据。此外,DASH播放器14在步骤S257中再现所获取的片段。
在获取了在步骤S256中通过SAND从DASH播放器14发送的视口通知后,在步骤S258中,代码转换管理器43解析添加了代码转换指令的MPD。然后,代码转换管理器43分析代码转换指令,并且指示代码转换器42根据分析结果执行代码转换。
此时,代码转换管理器43基于MPD的内容(例如,扩展为与将来计划扩展的OMAF兼容的版本)或者MP4文件(例如,使用OMAF的MPF文件)识别与相关视口对应的流或者该流的一部分。代码转换器42可以对包含有关视口的整个流或部分流执行代码转换指令中约束或允许的放大,然后根据该识别对其进行代码转换处理。
换言之,代码转换器42在步骤S259中对片段进行解码时,根据视口执行处理,并且在步骤S260中执行放大。然后,代码转换器42在步骤S261中对该片段进行编码。
在步骤S262中,DASH播放器14请求下一片段。
在获取了步骤S262中的来自DASH播放器14的请求之后,CDN服务器41在步骤S263中传送由DASH播放器14请求的经代码转换的片段。
在接收到在步骤S263中传送的经代码转换的片段后,DASH播放器14在步骤S264中再现接收到的经代码转换的片段。
随后,直到内容分发结束,连续地传送和再现经代码转换的片段。
如目前为止所述,DASH播放器14将视口通知发送到CDN服务器41,从而CDN服务器41可以识别与视口对应的流,并且以适当地进行放大的方式控制代码转换。
<客户端装置的视口通知>
将参照图40和41描述作为充当流再现侧来服务的客户端装置的DASH播放器14的视口通知。
例如,如图40所示,在回放装置上的视口由X轴、Y轴、X轴以及围绕这些轴的角度(俯仰、偏航和横滚)标识并且本体不可移动的情况下,角度是由头部的运动确定的。还设置为:各个角度在X轴、Y轴和X轴的正方向上顺时针增大。进一步定义为:X-Z平面与地面平行,并且当人面对Z轴的正方向时,所有角度均为零。
此外,视口坐标从该视口元数据的坐标系被映射到流源的坐标系。
例如,在以下假设中进行描述:源的坐标系使用下述表示方法,该表示方法使用方位角/仰角,并且客户端侧通过俯仰、偏航和横滚的表示使用坐标系。在这种情况下,视口以下述方式来映射:在源坐标系中方位角和仰角(centerAzimuth/centerElevation)二者都为零的方向与DASH播放器14的俯仰、偏航和横滚都为零的方向匹配。
此外,已变换的坐标系上的视口坐标值被存储在当前正在考虑的沉浸式媒体度量的ViewportViews参数中,如图41所示,以符合OMAF中指定的SphereRegionStruct结构,并且新定义并使用了包含此度量的SANDMessage。
<来自客户端装置的装置属性通知>
图42描绘了从作为充当流再现侧的客户端装置的DASH播放器14通知的装置属性的示例。
例如,客户端装置的能力属性被存储在当前正在考虑的沉浸式媒体度量的VRDeviceInfo参数中,如图42所示,并且新定义并使用了包含该度量的SANDMessage。
<FLUS的架构>
将参照图43和图44描述FLU的架构。
如图43所示,FLUS源从一个或多个捕获装置接收媒体内容。此外,FLUS宿对媒体内容进行解码,然后将经解码的媒体内容转发给渲染功能。替选地,通过使得FLUS宿在网络中被实现的配置,媒体内容被转发到处理子功能或分发子功能。
此外,FLUS源通过参考点连接到FLUS源,并且FLUS源建立并控制单个FLUS会话和多个媒体会话。
FLUS控制平面功能(F-C)控制与上传和后续的下游分发相关联的FLUS宿的媒体处理。FLUS用户平面功能(F-U)建立媒体会话,在例如基于MTSI的FLUS会话建立中执行IMS会话设置,并包括一个或多个媒体流会话。
此外,FLUS控制平面功能(F-C)是建立和控制FLUS会话的功能。通过FLUS控制平面功能,FLUS源执行一个或多个媒体会话的开启,关于一个或多个媒体会话的静态元数据的提供以及处理/分发子功能的选择和配置。
此外,媒体会话开启被定义为FLUS会话的一部分。FLUS用户平面功能(F-U)包含媒体会话建立过程。假设在一个FLUS会话中建立了多个不同的媒体会话。
此外,媒体会话包含一个或多个媒体流。在某些情况下,媒体流包含单个媒体组件(例如,仅音频),而在其他情况下,媒体流包含多个不同的媒体组件(例如,音频和视频)。媒体会话有时包含一个或更多个相同的媒体流(例如,多个视频流)。此外,假设FLUS宿开启媒体会话。
图44描绘了FLUS中的媒体会话和媒体流的示例。
如图44所示,在FLUS会话中传送一个或多个媒体流,并且该媒体流是FLUS会话的时间相关的媒体。例如,当媒体流处于活动状态时,FLUS源将媒体内容传送到FLUS宿。
此外,FLUS会话包括零个或一个或更多个媒体会话,每个媒体会话包括一个或更多个媒体流。在媒体流中使用HTTP的情况下,未明确建立媒体会话。
<SAND的ViewportViews消息的附加扩展>
图45描绘了SAND的ViewportViews消息的附加扩展的示例。
在图45中,由双点划线包围的ViewportViewsType是新定义的部分。
<计算机的配置的示例>
参照上述流程图描述的一系列处理不必按照流程图中描述的顺序按时间顺序执行,并且参照上述流程图描述的一系列处理还包括并行或单独执行的处理(例如,并行处理或者按对象进行的处理)。此外,程序可以由一个CPU处理,或者可以由多个CPU以分散的方式处理。
此外,上述一系列处理(内容分发控制方法)既可以由硬件执行,也可以由软件执行。在通过软件执行一系列处理的情况下,配置软件的程序被安装在结合到专用硬件中的计算机中,或者例如被安装在通用个人计算机等中,该通用个人计算机能够通过从记录有一个或更多个程序的程序记录介质安装各种程序来执行各种功能。
图46是描绘通过程序执行上述一系列处理的计算机的硬件的配置的示例的框图。
在计算机中,CPU(中央处理单元)101、ROM(只读存储器)102和RAM(随机存取存储器)103通过总线104相互连接。
输入/输出接口105也连接到总线104。配置有键盘、鼠标、麦克风等的输入部106,配置有显示器、扬声器等的输出部107,配置有硬盘、非易失性存储器等的存储部108,配置有网络接口等的通信部109以及驱动诸如磁盘、光盘、磁光盘或半导体存储器等可移动介质111的驱动器110连接到输入/输出接口105。
在如上所述配置的计算机中,CPU 101经由输入/输出接口105和总线104将例如存储在存储部108中的程序加载到RAM 103,并且执行该程序,从而执行上述一系列处理。
由计算机(CPU 101)执行的程序被记录在例如可移动介质111中,该可移动介质111是配置有磁盘(包括软盘)、光盘(CD-ROM(压缩盘-只读存储器)、DVD(数字多功能光盘)等、磁光盘或半导体存储器的封装介质,或者该程序经由有线或无线传输介质(如局域网、因特网或数字卫星服务)提供。
此外,通过将可移动介质111附接到驱动器110,可以经由输入/输出接口105将程序安装在存储部108中。此外,可以由通信部109经由有线或无线传输介质来接收程序,并且将程序安装在存储部108中。另外,还可以将程序预先安装在ROM 102或存储部108中。
<配置的组合的示例>
注意,本技术还可以如下配置。
(1)
一种内容分发控制装置,包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
控制部,其执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,其中,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
(2)
根据(1)所述的内容分发控制装置,其中,
所述元数据文件包括由ISO BM FF23009标准化和定义的MPD(媒体渲染描述)文件。
(3)
根据(1)或(2)所述的内容分发控制装置,其中,
所述原始数据是符合MPEG-DASH(HTTP上的动态自适应流)的原始片段。
(4)
根据(3)所述的内容分发控制装置,其中
所述访问信息被存储在所述MPD的适配组中。
(5)
根据(3)所述的内容分发控制装置,其中,
所述访问信息被存储在所述MPD的表示中。
(6)
根据(3)所述的内容分发控制装置,其中,
所述访问信息被存储在所述MPD的子表示中。
(7)
根据(1)至(6)中任一项所述的内容分发控制装置,其中,
所述原始数据包括使用SDP(会话描述协议)分发的原始流。
(8)
根据(7)所述的内容分发控制装置,其中
所述元数据文件包括在IETF中标准化和定义的SDP文件,并且
所述限定信息和所述访问信息被存储在所述SDP的媒体描述部分中。
(9)
根据(1)至(8)中任一项所述的内容分发控制装置,其中,
所述限定信息作为独立文件被存储在所述内容分发服务器的存储部中。
(10)
根据(1)至(9)中任一项所述的内容分发控制装置,其中,
所述限定信息指定所述内容是否是可变码的。
(11)
根据(1)至(10)中任一项所述的内容分发控制装置,其中,
在所述限定信息中限定了包括部分图像校正处理的放大方案。
(12)
根据(1)至(11)中任一项所述的内容分发控制装置,其中,
在所述限定信息中限定了基于用于控制是否能够执行代码转换的条件描述语言的条件描述。
(13)
根据(1)至(12)中任一项所述的内容分发控制装置,其中,
在所述限定信息中限定了用于报告实际应用的代码转换处理的内容的信息结构。
(14)
根据(1)至(12)中任一项所述的内容分发控制装置,其中,
基于与获取并再现所述内容的客户端相关联的环境信息对所述内容进行代码转换,所述环境信息是从所述客户端获取的。
(15)
根据(14)所述的内容分发控制装置,其中,
响应于来自所述客户端的视口的通知,控制用于执行放大以包含所述视口的代码转换。
(16)
根据(1)至(15)中任一项所述的内容分发控制装置,其中,
所述内容分发服务器被布置在所述预定上传接口的源侧上,并且
所述内容分发控制装置被布置在所述预定上传接口的宿侧的网络上。
(17)
根据(16)所述的内容分发控制装置,其中,
所述接收部经由所述预定上传接口接收所述元数据文件。
(18)
一种内容分发控制方法,包括:
由内容分发控制装置执行处理,所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
控制部,其执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
(19)
一种用于使内容分发控制装置的计算机执行处理的程序,
所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
控制部,其执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
(20)
一种内容分发系统,包括:
第一服务器,其具有存储部,所述存储部被配置成存储内容以及对所述内容进行代码转换所需的限定信息;
第二服务器,其执行内容分发控制,所述第二服务器包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
控制部,其执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换;以及
客户端,其获取并再现根据所述内容分发控制分发的内容。
(21)
一种内容分发控制装置,包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
生成部,其生成与由所述接收部接收的元数据文件不同的新的元数据文件;以及
控制部,其执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,其中,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
(22)
根据(21)所述的内容分发控制装置,其中
所述元数据文件包括由ISO IEC 23009标准化和定义的MPD(媒体表示描述)文件。
(23)
根据(21)或(22)所述的内容分发控制装置,其中,
所述原始数据是符合MPEG-DASH(HTTP上的动态自适应流)的原始片段。
(24)
根据(23)所述的内容分发控制装置,其中
所述访问信息被存储在所述MPD的适配组中。
(25)
根据(23)所述的内容分发控制装置,其中,
所述访问信息被存储在所述MPD的表示中。
(26)
根据(23)所述的内容分发控制装置,其中,
所述访问信息被存储在所述MPD的子表示中。
(27)
根据(21)至(26)中任一项所述的内容分发控制装置,其中,
所述原始数据包括使用SDP(会话描述协议)分发的原始流。
(28)
根据(27)所述的内容分发控制装置,其中
所述元数据文件包括在IETF中标准化和定义的SDP文件,并且
所述限定信息和所述访问信息被存储在所述SDP的媒体描述部分中。
(29)
根据(21)至(28)中任一项所述的内容分发控制装置,其中,
所述限定信息作为独立文件被存储在所述内容分发服务器的存储部中。
(30)
根据(21)至(29)中任一项所述的内容分发控制装置,其中,
所述限定信息指定所述内容是否是可变码的。
(31)
根据(21)至(30)中任一项所述的内容分发控制装置,其中,
在所述限定信息中定义了包括部分图像校正处理的放大方案。
(32)
根据(21)至(31)中任一项所述的内容分发控制装置,其中,
在所述限定信息中定义了基于用于控制是否能够执行代码转换的条件描述语言的条件描述。
(33)
根据(21)至(32)中任一项所述的内容分发控制装置,其中,
在所述限定信息中定义了用于报告实际应用的代码转换处理的内容的信息结构。
(34)
根据(21)至(32)中任一项所述的内容分发控制装置,其中,
基于与获取并再现所述内容的客户端相关联的环境信息对所述内容进行代码转换,所述环境信息是从所述客户端获取的。
(35)
根据(34)所述的内容分发控制装置,其中,
响应于来自所述客户端的视口的通知,控制用于执行放大以包含所述视口的代码转换。
(36)
根据(21)至(35)中任一项所述的内容分发控制装置,其中,
所述内容分发服务器被布置在所述预定上传接口的源侧上,并且
所述内容分发控制装置被布置在所述预定上传接口的宿侧的网络上。
(37)
根据(36)所述的内容分发控制装置,其中,
所述接收部经由所述预定上传接口接收所述元数据文件。
(38)
一种内容分发控制方法,包括:
由内容分发控制装置执行处理,所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
生成部,其生成与由所述接收部接收的元数据文件不同的新的元数据文件;以及
控制部,执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
(39)
一种用于使内容分发控制装置的计算机执行处理的程序,
所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
生成部,其生成与由所述接收部接收的元数据文件不同的新的元数据文件;以及
控制部,其执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始数据的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
(40)
一种内容分发系统,包括:
第一服务器,其具有存储部,所述存储部被配置成存储内容以及对所述内容进行代码转换所需的限定信息;
第二服务器,包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问根据所述内容生成的原始数据的第二访问信息;以及
生成部,其生成与由所述接收部接收的元数据文件不同的新的元数据文件;
第三服务器,其具有控制部,所述控制部被配置成执行与基于所述第二访问信息获取的所述原始数据的代码转换相关联的控制;以及
客户端,其获取并再现根据所述内容分发控制分发的内容,其中,
所述内容分发控制被执行为使得
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始数据的代码转换,以及
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始数据的代码转换。
<配置的组合的示例>
注意,本技术还可以如下配置。
(1)
一种内容分发控制装置,包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是根据所述内容生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,其中,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始流的代码转换。
(2)
根据(1)所述的内容分发控制装置,其中,
所述元数据文件包括在IETF(互联网工程任务组)中标准化和定义的SDP文件,并且
所述限定信息和所述访问信息被存储在所述SDP的媒体描述部分中。
(3)
根据(1)或(2)所述的内容分发控制装置,其中,
所述限定信息作为独立文件被存储在所述内容分发服务器的存储部中。
(4)
根据(1)至(3)中任一项所述的内容分发控制装置,其中,
所述限定信息指定所述内容是否是可变码的。
(5)
根据(1)至(4)中任一项所述的内容分发控制装置,其中,
在所述限定信息中定义了包括部分图像校正处理的放大方案。
(6)
根据(1)至(5)中任一项所述的内容分发控制装置,其中,
在所述限定信息中定义了基于用于控制是否能够执行代码转换的条件描述语言的条件描述。
(7)
根据(1)至(6)中任一项所述的内容分发控制装置,其中,
在所述限定信息中定义了用于报告实际应用的代码转换处理的内容的信息结构。
(8)
根据(1)至(7)中任一项所述的内容分发控制装置,其中,
基于与获取并再现所述内容的客户端相关联的环境信息对所述内容进行代码转换,所述环境信息是从所述客户端获取的。
(9)
根据(8)所述的内容分发控制装置,其中,
响应于来自所述客户端的视口的通知,控制用于执行放大以包含所述视口的代码转换。
(10)
根据(1)至(9)中任一项所述的内容分发控制装置,其中,
所述内容分发服务器被布置在所述预定上传接口的源侧上,并且
所述内容分发控制装置被布置在所述预定上传接口的宿侧的网络上。
(11)
根据(10)所述的内容分发控制装置,其中,
所述接收部经由所述预定上传接口接收所述元数据文件。
(12)
一种内容分发控制方法,包括:
由内容分发控制装置执行处理,所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是根据所述内容生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始流的代码转换。
(13)
一种用于使内容分发控制装置的计算机执行处理的程序,
所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是根据所述内容生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始流的代码转换。
(14)
一种内容分发系统,包括:
第一服务器,其具有存储部,所述存储部被配置成存储内容以及对所述内容进行代码转换所需的限定信息;
第二服务器,其执行内容分发控制,所述第二服务器包括:
接收部,其在经由预定上传接口从所述第一服务器分发所述内容时接收元数据文件,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是根据所述内容生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于响应于所述请求由所述接收部接收的所述限定信息来控制所述原始流的代码转换;以及
客户端,其获取并再现根据所述内容分发控制分发的内容。
本公开内容的实施方式不限于上述实施方式,并且可以在不脱离本公开内容的精神的情况下进行各种改变。此外,在本说明书中描述的优点仅作为示例给出,并且所述优点不限于在本说明书中描述的优点,并且可以包含其他优点。
[附图标记列表]
11:内容分发系统
12:云
13:内容提供装置
14:DASH播放器
21:流源服务器
22:DASH分发服务器
23:CDN
31:流分发管理器
41:CDN服务器
41a:CDN初始服务器
41b:CDN边缘服务器
42:代码转换器
43:代码转换管理器

Claims (14)

1.一种内容分发控制装置,包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是从所述内容中被生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,其中,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于由所述接收部接收的、响应于所述请求的所述限定信息来控制所述原始流的代码转换。
2.根据权利要求1所述的内容分发控制装置,其中,
所述元数据文件包括在IETF(互联网工程任务组)中被定义和标准化的SDP文件,并且
所述限定信息和所述访问信息被存储在所述SDP的媒体描述部分中。
3.根据权利要求1所述的内容分发控制装置,其中,
所述限定信息作为独立文件被存储在所述内容分发服务器的存储部中。
4.根据权利要求1所述的内容分发控制装置,其中,
所述限定信息指定所述内容是否是可变码的。
5.根据权利要求1所述的内容分发控制装置,其中,
在所述限定信息中限定了包括部分图像校正处理的放大方案。
6.根据权利要求1所述的内容分发控制装置,其中,
在所述限定信息中限定了基于用于控制是否能够执行代码转换的条件描述语言的条件描述。
7.根据权利要求1所述的内容分发控制装置,其中,
在所述限定信息中限定了用于报告实际实施的代码转换处理的内容的信息结构。
8.根据权利要求1所述的内容分发控制装置,其中,
基于与获取并再现所述内容的客户端相关联的环境信息对所述内容进行代码转换,所述环境信息是从所述客户端获取的。
9.根据权利要求8所述的内容分发控制装置,其中,
响应于来自所述客户端的视口的通知,控制用于执行放大以包含所述视口的代码转换。
10.根据权利要求1所述的内容分发控制装置,其中,
所述内容分发服务器被布置在所述预定上传接口的源侧上,并且
所述内容分发控制装置被布置在所述预定上传接口的宿侧的网络上。
11.根据权利要求10所述的内容分发控制装置,其中,
所述接收部经由所述预定上传接口接收所述元数据文件。
12.一种内容分发控制方法,包括:
由内容分发控制装置执行处理,所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是从所述内容中被生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于由所述接收部接收的、响应于所述请求的所述限定信息来控制所述原始流的代码转换。
13.一种用于使内容分发控制装置的计算机执行处理的程序,
所述内容分发控制装置包括:
接收部,其在经由预定上传接口从内容分发服务器分发内容时接收元数据文件,所述内容分发服务器具有存储部,所述存储部被配置成存储所述内容以及对所述内容进行代码转换所需的限定信息,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是从所述内容中被生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,
所述处理包括:
在所述限定信息被存储在所述元数据文件中的情况下,使所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,使所述控制部基于所述第一访问信息来请求所述限定信息,并且基于由所述接收部接收的、响应于所述请求所述限定信息来控制所述原始流的代码转换。
14.一种内容分发系统,包括:
第一服务器,其具有存储部,所述存储部被配置成存储内容以及对所述内容进行代码转换所需的限定信息;
第二服务器,其执行内容分发控制,所述第二服务器包括:
接收部,其在经由预定上传接口从所述第一服务器分发所述内容时接收元数据文件,所述元数据文件中存储有所述限定信息或者用于访问所述限定信息的第一访问信息以及用于访问原始流的第二访问信息,所述原始流是从所述内容中被生成的原始数据并且使用SDP(会话描述协议)被分发;以及
控制部,其执行与基于所述第二访问信息获取的所述原始流的代码转换相关联的控制,
在所述限定信息被存储在所述元数据文件中的情况下,所述控制部基于所述限定信息来控制所述原始流的代码转换,并且
在所述第一访问信息被存储在所述元数据文件中的情况下,所述控制部基于所述第一访问信息来请求所述限定信息,并且基于由所述接收部接收的、响应于所述请求的所述限定信息来控制所述原始流的代码转换;以及
客户端,其获取并再现根据所述内容分发控制所分发的内容。
CN201980010723.0A 2018-02-28 2019-02-14 内容分发控制装置、内容分发控制方法、程序和内容分发控制系统 Withdrawn CN111670579A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018035082 2018-02-28
JP2018-035082 2018-02-28
PCT/JP2019/005189 WO2019167634A1 (ja) 2018-02-28 2019-02-14 コンテンツ配信制御装置、コンテンツ配信制御方法、プログラム、およびコンテンツ配信システム

Publications (1)

Publication Number Publication Date
CN111670579A true CN111670579A (zh) 2020-09-15

Family

ID=67805326

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980010723.0A Withdrawn CN111670579A (zh) 2018-02-28 2019-02-14 内容分发控制装置、内容分发控制方法、程序和内容分发控制系统

Country Status (7)

Country Link
US (1) US11425433B2 (zh)
EP (1) EP3761650A4 (zh)
JP (1) JPWO2019167634A1 (zh)
KR (1) KR20200124665A (zh)
CN (1) CN111670579A (zh)
TW (1) TW201944249A (zh)
WO (1) WO2019167634A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11349936B2 (en) * 2020-05-28 2022-05-31 Citrix Systems, Inc. System and related methods providing channel switching between appliances

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9584793B2 (en) * 2012-04-09 2017-02-28 Intel Corporation Signaling three-dimensional video information in communication networks
US9357272B2 (en) * 2012-08-03 2016-05-31 Intel Corporation Device orientation capability exchange signaling and server adaptation of multimedia content in response to device orientation
AU2013334019B2 (en) * 2012-10-26 2015-11-12 Apple Inc. Streaming with coordination of video orientation (CVO)
US9762938B2 (en) * 2012-10-26 2017-09-12 Intel Corporation Multimedia adaptation based on video orientation
KR102062764B1 (ko) 2013-07-19 2020-02-21 삼성전자주식회사 모바일 단말 화면을 위한 3k해상도를 갖는 디스플레이 영상 생성 방법 및 장치
US10165028B2 (en) * 2014-03-25 2018-12-25 Intel Corporation Context-aware streaming of digital content
US10924781B2 (en) 2014-06-27 2021-02-16 Satellite Investors, Llc Method and system for real-time transcoding of MPEG-DASH on-demand media segments while in transit from content host to dash client

Also Published As

Publication number Publication date
EP3761650A1 (en) 2021-01-06
WO2019167634A1 (ja) 2019-09-06
US11425433B2 (en) 2022-08-23
EP3761650A4 (en) 2021-01-27
TW201944249A (zh) 2019-11-16
JPWO2019167634A1 (ja) 2021-03-11
KR20200124665A (ko) 2020-11-03
US20200396491A1 (en) 2020-12-17

Similar Documents

Publication Publication Date Title
US9351020B2 (en) On the fly transcoding of video on demand content for adaptive streaming
US10951930B2 (en) Adaptive content delivery network
US9578352B2 (en) Multi-format distribution of content
US20140297804A1 (en) Control of multimedia content streaming through client-server interactions
US20110029606A1 (en) Server apparatus, content distribution method, and program
US11451864B2 (en) Dynamically adaptive bitrate streaming
EP2271097A1 (en) Gateway device, method, and program
WO2017138387A1 (ja) 情報処理装置および情報処理方法
US11405445B2 (en) Content delivery control including selecting type of upscaling scheme, apparatus, method, program, and system therefor
CN112738644A (zh) 一种基于WebRTC的视频流传输方法和装置
US10390069B2 (en) Adaptive broadcasting of multimedia content
US11425433B2 (en) Content delivery control apparatus, content delivery control method, program, and content delivery control system
WO2019193991A1 (ja) 配信装置、配信方法、およびプログラム
KR100502186B1 (ko) 고화질 인터넷 방송 서비스 시스템
KR101568317B1 (ko) Ip 카메라에서 hls 프로토콜을 지원하는 시스템 및 그 방법
KR20160036924A (ko) 사용기기에 독립적인 라이브 스트리밍 시스템
Sterca et al. Evaluating Dynamic Client-Driven Adaptation Decision Support in Multimedia Proxy-Caches

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20200915