CN105103565B - 服务器设备、客户端设备、内容分发方法以及计算机程序 - Google Patents
服务器设备、客户端设备、内容分发方法以及计算机程序 Download PDFInfo
- Publication number
- CN105103565B CN105103565B CN201480020476.XA CN201480020476A CN105103565B CN 105103565 B CN105103565 B CN 105103565B CN 201480020476 A CN201480020476 A CN 201480020476A CN 105103565 B CN105103565 B CN 105103565B
- Authority
- CN
- China
- Prior art keywords
- data
- parameter
- content
- client device
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 47
- 238000009826 distribution Methods 0.000 title claims description 29
- 238000004590 computer program Methods 0.000 title description 8
- 238000003860 storage Methods 0.000 claims abstract description 85
- 238000004891 communication Methods 0.000 abstract description 80
- 230000005540 biological transmission Effects 0.000 abstract description 39
- 238000005516 engineering process Methods 0.000 abstract description 10
- 238000003780 insertion Methods 0.000 abstract description 6
- 230000037431 insertion Effects 0.000 abstract description 6
- 238000012545 processing Methods 0.000 description 91
- 230000006870 function Effects 0.000 description 38
- 238000010586 diagram Methods 0.000 description 24
- 238000003384 imaging method Methods 0.000 description 24
- 230000008569 process Effects 0.000 description 20
- 238000006243 chemical reaction Methods 0.000 description 17
- 230000003321 amplification Effects 0.000 description 14
- 238000013500 data storage Methods 0.000 description 14
- 238000003199 nucleic acid amplification method Methods 0.000 description 14
- 230000005236 sound signal Effects 0.000 description 13
- 230000000007 visual effect Effects 0.000 description 13
- 230000004044 response Effects 0.000 description 11
- 238000013507 mapping Methods 0.000 description 9
- 239000000284 extract Substances 0.000 description 8
- 241001269238 Data Species 0.000 description 7
- 230000015556 catabolic process Effects 0.000 description 7
- 238000006731 degradation reaction Methods 0.000 description 7
- 239000004065 semiconductor Substances 0.000 description 7
- 239000000203 mixture Substances 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 210000004027 cell Anatomy 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 210000000352 storage cell Anatomy 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 241000208340 Araliaceae Species 0.000 description 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 2
- 235000003140 Panax quinquefolius Nutrition 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000005314 correlation function Methods 0.000 description 2
- 235000008434 ginseng Nutrition 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 238000011946 reduction process Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 239000003990 capacitor Substances 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000003111 delayed effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 244000144992 flock Species 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000002401 inhibitory effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- AWSBQWZZLBPUQH-UHFFFAOYSA-N mdat Chemical compound C1=C2CC(N)CCC2=CC2=C1OCO2 AWSBQWZZLBPUQH-UHFFFAOYSA-N 0.000 description 1
- 230000001404 mediated effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000004886 process control Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 230000036299 sexual function Effects 0.000 description 1
- 230000035939 shock Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000007480 spreading Effects 0.000 description 1
- 238000003892 spreading Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
- H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/254—Management at additional data server, e.g. shopping server, rights management server
- H04N21/2541—Rights Management
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/23439—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements for generating different versions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
- H04N21/262—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists
- H04N21/26258—Content or additional data distribution scheduling, e.g. sending additional data at off-peak times, updating software modules, calculating the carousel transmission frequency, delaying a video stream transmission, generating play-lists for generating a list of items to be played back in a given order, e.g. playlist, or scheduling item distribution according to such list
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4627—Rights management associated to the content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Computer Graphics (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
[问题]为了提供如下服务器设备,该服务器设备能够在不修改网络服务提供商端的播放列表文件的情况下支持动态参数的插入,其中动态参数依赖于在使用ABS技术向客户端分发内容时的客户端状态。[解决方案]提供了如下服务器设备,该服务器设备包括:存储单元,其存储指定定义,该指定定义用于对构成每组编码数据的多个子段中的每个子段进行访问,所述每组编码数据通过以不同比特率对相同内容进行编码来获得,或者该指定定义用于向在MPD中描述并且用访问信息定义的地址添加参数,该访问信息用于访问通过向服务器的请求而获取的任何要素;以及通信单元,该通信单元传输指令,该指令基于存储在存储单元中的指定定义来向在访问信息中定义的地址添加参数。
Description
技术领域
本公开内容涉及服务器设备、客户端设备、内容分发方法以及计算机 程序。
背景技术
在最近几年,存在有广泛应用的用于传输内容的超文本传输协议 (HTTP)以及与内容压缩编码相关的MP4。HTTP不仅能够在因特网上 下载内容而且还能够对该内容进行流传输。在网络媒体标准如“DLNA指 南”(2006)和“开放IPTV论坛”(2009)中也采用了HTTP流传输。此 外,MP4(ISO/IEC-14496-12,14)不仅可以用作存储格式而且还可以用 作例如用于下载和流传输的传输格式。
关于流传输,已知如在以下非专利文献中所描述的自适应比特率流传 输(ABS)技术。ABS技术是如下技术:其中,具有以不同比特率表示 的相同内容的多条编码数据被存储在内容服务器中,使得客户端按照网络 频带来选择所述多条编码数据中的任一条编码数据并且再现该编码数据。
在正常流传输的情况下,当网络频带变得低于比特率时,数据供给变 得赶不上消耗,并且在客户端缓存的数据被耗尽。作为结果,客户端无法 继续再现。与此相反,在ABS技术中,在频带变窄时再现数据被切换到 低比特率的编码数据。因此,可以在再现期间抑制中断。
此外,考虑到ABS技术的领域,还提出了如在非专利文献2中所描 述的执行重定向的技术,该技术适当改变作为分发目的地的服务器同时在 服务器端添加参数并且由客户端存储参数。
引文列表
非专利文献
非专利文献1:MPEG-DASH(通过HTTP的动态自适应流传输) (URL: http://mpeg.chiariglione.org/standards/mpeg-dash/media-presentation-des cription-and-segment-formats/text-isoiec-23009-12012-dam-1)
非专利文献2:m28354Core Experiment on Parameters Insertion in MediaSegment URL,MPEG#103,Geneva,2013
发明内容
技术问题
在如上所述的非专利文献2所提出的技术中,网络服务提供商更改播 放列表文件(MPD),该播放列表文件包括各条编码数据的比特率信息和 访问信息。然而,在如上所述的非专利文献2所提出的技术中,服务器指 定参数,并且因此无法支持取决于客户端状态的动态参数的插入。
因此,本公开内容提供了新型改进的服务器设备、客户端设备、内容 分发方法以及计算机程序,其能够在不改变网络服务提供商端的播放列表 文件的情况下支持动态参数的插入,其中动态参数依赖于在使用ABS技 术向客户端分发内容时的客户端状态。
问题的解决方案
根据本公开内容,提供了如下服务器设备,该服务器设备包括:存储 单元,该存储单元被配置成存储用于向在下述访问信息中定义的地址添加 参数的预定定义,该访问信息用于对构成每条编码数据的多个子段中的每 个子段进行访问,每条编码数据通过以不同比特率对相同内容进行编码来 获得,或者该访问信息用于访问MPD中描述的要通过向服务器的请求来 获取的每个要素;以及通信单元,该通信单元被配置成传输指令,所述指 令用于基于存储在存储单元中的预定定义来向在访问信息中定义的地址 添加参数。
根据本公开内容,提供了如下客户端设备,该客户端设备包括:存储 单元,该存储单元被配置成存储用于向下述访问信息添加参数的预定定 义,该访问信息用于对构成每条编码数据的多个子段中的每个子段进行访 问,每条编码数据通过以不同比特率对相同内容进行编码而获得,或者该 访问信息用于访问MPD中描述的要通过向服务器的请求来获取的每个要 素;以及通信单元,该通信单元被配置成通过基于存储在存储单元中的预 定定义向地址添加参数来访问访问信息中定义的地址。
根据本公开内容,提供了如下内容分发方法,该内容分发方法包括以 下步骤:存储用于向在下述访问信息中定义的地址添加参数的预定定义, 该访问信息用于对构成每条编码数据的多个子段中的每个子段进行访问, 每条编码数据通过以不同比特率对相同内容进行编码而获得,或者所述访 问信息用于访问MPD中描述的要通过向服务器的请求来获取的每个要 素;以及传输指令,所述指令用于基于存储在存储单元中的预定定义来向在访问信息中定义的地址添加参数。
根据本公开内容,提供了使计算机执行以下步骤的计算机程序:存储 用于向在下述访问信息中定义的地址添加参数的预定定义,该访问信息用 于对构成每条编码数据的多个子段中的每个子段进行访问,每条编码数据 通过以不同比特率对相同内容进行编码而获得,或者所述访问信息用于访 问访问MPD中描述的要通过向服务器的请求来获取的每个要素;以及传 输指令,所述指令用于基于存储在存储单元中的预定定义来向在访问信息中定义的地址添加参数。
本发明的效果
根据以上所述的本公开内容,可以提供新型改进的服务器设备、客户 端设备、内容分发方法以及计算机程序,其能够在不改变网络服务提供商 端的播放列表文件的情况下支持动态参数的插入,其中动态参数依赖于在 使用ABS技术向客户端分发内容时的客户端状态。
附图说明
图1是说明根据本公开内容的实施方式的内容再现系统的配置的说 明图。
图2是说明根据本实施方式的内容再现系统中的数据流的说明图。
图3是说明MPD的具体示例的说明图。
图4是说明根据本实施方式的内容服务器10的配置的原理框图。
图5是说明根据本实施方式的内容再现设备20的配置的原理框图。
图6是说明根据本实施方式的内容服务器11的配置的原理框图。
图7是示出参数描述的内容的说明图。
图8是示出参数描述的内容的说明图。
图9是示出引用参数描述的MPD的示例的说明图。
图10A是示出根据本公开内容的实施方式的内容再现系统的操作示 例的顺序图。
图10B是示出根据本公开内容的实施方式的内容再现系统的操作示 例的顺序图。
图11是示出引用参数描述的MPD的示例的说明图。
图12是说明计算机的硬件配置的示例的框图。
图13是说明多视角图像编码方案的示例的图。
图14是说明应用了本公开内容的多视角图像编码设备的配置的示例 的图。
图15示出应用了本公开内容的多视角图像解码设备的配置的示例的 图。
图16是说明分层图像编码方案的示例的图。
图17是用于描述空间可扩展编码的示例的图。
图18是用于描述时间可扩展编码的示例的图。
图19是用于描述信噪比的可扩展编码的示例的图。
图20是说明应用了本公开内容的分层图像编码设备的配置的示例的 图。
图21是说明应用了本公开内容的分层图像解码设备的配置的示例的 图。
图22是说明应用了本公开内容的电视设备的示意性配置的示例的 图。
图23是说明应用了本公开内容的移动电话的示意性配置的示例的 图。
图24是说明应用了本公开内容的记录和再现设备的示意性配置的示 例的图。
图25是说明应用了本公开内容的成像设备的示意性配置的示例的 图。
图26是说明使用可扩展编码的示例的框图。
图27是说明使用可扩展编码的另一示例的框图。
图28是说明使用可扩展编码的又一示例的框图。
图29示出应用了本公开内容的视频集的示意性配置的示例。
图30示出应用了本公开内容的视频处理器的示意性配置的示例。
具体实施方式
在下文中,将参照附图来详细描述本公开内容的优选实施方式。注意, 在本说明书和附图中,具有基本相同的功能和结构的要素用相同的附图标 记进行表示,并且省略重复说明。
此外,在本说明书和附图中,具有基本相同功能和结构的多个要素可 以通过在相同的附图标记之后提供不同的字母来进行区分。例如,如果有 必要,则将具有基本相同的功能和结构或逻辑意义的多个要素区分为内容 再现设备20A、20B和20C。然而,当不需要对具有基本相同功能和结构 的多个要素中的各个要素进行区分时,提供仅相同的附图标记。例如,当 不需要特别区分内容再现设备20A、20B和20C时,将内容再现设备简称 为内容再现设备20。
此外,将按照以下描述的项目顺序来描述本公开内容。
<1.内容再现系统的概要>
<2.内容服务器10的配置>
<3.内容再现设备20的配置>
<4.内容服务器11的配置>
<5. MPD的URL的信息>
<6.结论>
<1.内容再现系统的概要>
首先,将参照图1至图3来示意性地描述根据本公开内容的实施方式 的内容再现系统。
在下文中,首先将参照图1和图2来描述在每个实施方式中公用的基 本配置。
图1是说明根据本公开内容的实施方式的内容再现系统的配置的示 意性图。如图1中所示,根据本公开内容的实施方式的内容再现系统包括 内容服务器10和11、网络12以及内容再现设备20(客户端设备)。
内容服务器10和11以及内容再现设备20通过网络12进行连接。网 络12是从连接至网络12的设备传输信息的有线或无线传输路径。
例如,网络12可以包括公共网络如因特网、电话网络和卫星通信网 络、包括例如以太网(注册商标)的各种局域网(LAN)、以及广域网 (WAN)。此外,网络12可以包括专用网络,例如因特网协议-虚拟专用 网络(IP-VPN)。
内容服务器10对内容数据进行编码,并且产生并存储包括编码数据 和编码数据的元信息在内的数据文件。注意,当内容服务器10产生MP4 格式数据文件时,编码数据对应于“mdat”,并且元信息对应于“moov”。
此外,内容数据可以例如是:音乐数据,例如音乐、演讲和广播节目; 图像数据,例如电影、电视节目、视频节目、图片、文件、图纸、图表、 游戏以及软件。
这里,根据本实施方式的内容服务器10产生针对相同内容具有不同 比特率的多个数据文件。此外,响应于来自内容再现设备20的进行内容 再现的请求,根据本实施方式的内容服务器11向内容再现设备20传输内 容服务器10的URL的信息,该信息包括由内容再现设备20要向URL 添加的参数的信息。在下文中,将参照图2来具体描述该问题。
图2是说明在根据本实施方式的内容再现系统中的数据流的示意性 图。内容服务器10以不同比特率对相同内容数据进行编码,并且产生例 如如图2中所示的2Mbps的文件A、1.5Mbps的文件B以及1Mbps的 文件C。相对来讲,文件A为高比特率,文件B为标准比特率,而文件 C为低比特率。
此外,如图2中所示,每个文件的编码数据被划分成多个段。例如, 文件A的编码数据被划分成段“A1”、“A2”、“A3”、......、以及“An”。 文件B的编码数据被划分成段“B1”、“B2”、“B3”、......、以及“Bn”。 文件C的编码数据被划分成段“C1”、“C2”、“C3”、......、以及“Cn”。
注意,每个段可以由以MP4同步样本(以AVC/H.264视频编码的IDR 图像)开头的一条或两条或更多条视频编码数据和声音编码数据的配置样 本来构成,并且每个段可以独立地被再现。例如,当在具有15帧固定长 度的图片组(GOP)中对每秒30帧的视频数据进行编码时,每个段可以 是对应于4GOP的两秒视频编码数据和两秒声音编码数据或者对应于20 GOP的10秒视频编码数据和10秒声音编码数据。
此外,在各文件中具有相同布置顺序的段的再现范围(从内容的报头 起的时间位置的范围)是相同的。例如,段“A2”、段“B2”和段“C2” 的再现范围相同,并且当每个段均为两秒编码数据时,段“A2”、段“B2 和段“C2”中的任一个的再现范围为两秒至四秒的内容。
内容服务器10产生由这样的多个段构成的文件A至文件C,并且存 储文件A至文件C。然后,内容服务器10如图2中所示将构成不同文件 的段按顺序传输至内容再现设备20,并且内容再现设备20以流的方式再 现(streaming-reproduce)所接收到的段。
这里,根据本实施方式的内容服务器10向内容再现设备20传输包括 每个编码数据的比特率信息和访问信息在内的播放列表文件(在下文中, 其被称为媒体呈现描述(MPD)。基于MPD,内容再现设备20选择多个 比特率中的任意比特率,并且请求内容服务器10传输与所选择的比特率 相对应的段。
虽然图1中示出了仅一个内容服务器10,但是不用说的是,本公开 内容不限于此。
图3是说明MPD的具体示例的说明图。如图3中所示,MPD包括 与具有不同比特率(带宽)的多个编码数据相关的访问信息。例如,如图 3中所示的MPD指示存在有256Kbps、1.024Mbps、1.384Mbps、1.536 Mbps以及2.048Mbps的编码数据,并且该MPD包括与每个编码数据相 关的访问信息。内容再现设备20可以基于这样的MPD来动态地改变要 以流方式再现的编码数据的比特率。
注意,虽然图1说明了移动终端作为内容再现设备20的示例,但是 内容再现设备20不限于这样的示例。例如,内容再现设备20可以是如下 信息处理设备,例如个人计算机(PC)、家用图像处理器(DVD记录器、 视频录放器等)、个人数字助理(PDA)、家用游戏机以及家用电器。此外, 内容再现设备20可以是如下信息处理设备,例如手机、个人手持电话系统(PHS)、便携式音乐再现设备、便携式图像处理器以及便携式游戏机。
<2.内容服务器10的配置>
在上述中,参照图1至图3描述了根据本公开内容的实施方式的内容 再现系统的概要。随后,将参照图4来描述根据本实施方式的内容服务器 10的配置。
图4是说明根据本实施方式的内容服务器10的配置的原理框图。如 图4中所示,根据本实施方式的内容服务器10包括文件产生单元120、 存储单元130以及通信单元140。
文件产生单元120包括编码器122,该编码器122对内容数据进行编 码并且产生具有相同内容和不同比特率的多条编码数据以及上述MPD。 例如,当产生256Kbps、1.024Mbps、1.384Mbps、1.536Mbps以及 2.048Mbps的编码数据时,文件产生单元120产生图3中所示的MPD。
存储单元130存储由文件产生单元120产生的具有不同比特率的多个 编码数据和MPD。存储单元130可以是存储介质,例如非易失性存储器、 磁盘、光盘以及磁光(MO)盘。非易失性存储器例如为电可擦除可编程 只读存储器(EEPROM)和可擦除可编程只读存储器(EPROM)。而且, 通过例如硬盘和盘形磁体盘来例举磁盘。此外,通过例如压缩光盘(CD)、可记录的数字多功能盘(DVD-R)、以及蓝光光盘(BD)(注册商标)来 例举光盘。
通信单元140是与内容再现设备20连接的接口,并且通过网络12 与内容再现设备20进行通信。更具体地,通信单元140具有作为HTTP 服务器的功能,该HTTP服务器根据HTTP与内容再现设备20进行通信。 例如,通信单元140向内容再现设备20传输MPD,根据HTTP从存储 单元130中提取由内容再现设备20基于MPD而请求的编码数据,并且 将编码数据传输至内容再现设备20作为HTTP响应。
<3.内容再现设备20的配置>
在上述中,描述了根据本实施方式的内容服务器10的配置。随后, 将参照图5来描述根据本实施方式的内容再现设备20的配置。
图5是根据本实施方式的内容再现设备20的配置的原理框图。如图 5所示,根据本实施方式的内容再现设备20包括通信单元220、存储单元 230、再现单元240、选择单元250以及当前位置获取单元260。
通信单元220(通信单元)是与内容服务器10连接的接口,并且从 内容服务器10请求数据以及从内容服务器10获取数据。更具体地,通信 单元220具有作为HTTP客户端的功能,该HTTP客户端按照HTTP与 内容再现设备20进行通信。例如,通信单元220使用HTTP范围,并且 因此可以从内容服务器10选择性地获取MPD或编码数据的段。
存储单元230存储有关内容再现的各种类型的信息。例如,存储单元 230按顺序缓存由通信单元220从内容服务器10获取的段。由存储单元 230缓存的编码数据的段以先入先出(FIFO)的方式按顺序被提供给再 现单元240。
此外,基于在从内容服务器11(以下将要描述)请求的MPD中描述 的向内容的URL添加参数的指令,存储单元230存储如下定义,该定义 用于通过使用通信单元220向URL添加参数来访问URL。
再现单元240按顺序再现从存储单元230提供的段。具体地,例如, 再现单元240对段进行解码、DA转换和呈现。
选择单元250在相同内容中按顺序选择与在要获取的MPD中所包括 的特定比特率相对应的编码数据的段。例如,当选择单元250按照网络 12的频带来按顺序选择段“A1”、“B2”和“A3”时,通信单元220从内 容服务器10按顺序获取段“A1”、“B2”和“A3”,如图2中所示。
当前位置获取单元260获取内容再现设备20的当前位置,并且可以 被配置成例如用于获取当前位置的模块,如全球定位系统(GPS)接收器 等。此外,当前位置获取单元260可以使用无线网络来获取内容再现设备 20的当前位置。
<4.内容服务器11的配置>
图6是示出内容服务器11的配置的示例的说明图。如图6中所示, 根据本实施方式的内容服务器11具有存储单元310和通信单元320。
存储单元310存储MPD的URL的信息。响应于来自内容再现设备 20的进行内容再现的请求,MPD的URL的信息从内容服务器11被传输 至内容再现设备20。此外,当将MPD的URL的信息提供给内容再现设 备20时,存储单元310存储用于由内容再现设备20向MPD中所描述的 URL添加参数的定义信息。
通信单元320是经由网络12与内容再现设备20连接以与内容再现设 备20进行通信的接口。也就是说,通信单元320从请求内容再现的内容 再现设备20接收对MPD的URL的信息的请求,并且将MPD的URL 的信息传输至内容再现设备20。从通信单元320传输的MPD的URL包 括用于由内容再现设备20添加参数的信息。
可以利用由内容服务器11和内容再现设备20共享的定义信息来对由 内容再现设备20添加至MPD的URL的参数进行各种设置。作为示例, 可以由内容再现设备20将例如以下信息添加至MPD的URL:内容再现 设备20的当前位置、使用内容再现设备20的用户的用户ID、内容再现 设备20的存储器大小、内容再现设备20的存储能力等。
<5.MPD的URL的信息>
接下来,将描述MPD的URL的信息。在本实施方式中,当MPD 的URL的信息从内容服务器11被传输至内容再现设备20时,以查询参 数的形式来添加定义信息的位置,以用于使内容再现设备20向URL添加 参数。在本实施方式中,将定义信息称为“参数描述”。内容服务器11以 例如下面的形式将MPD的URL的信息从通信单元320传输至内容再现 设备20。
hppt://a.com/x.mpd?pd=URI-1,URI-2,URI-3
“a.com”是对内容再现设备20期望再现的内容进行存储的服务器, 以及“x.mpd”是该内容的MPD。此外,在查询参数“pd”中,列出了 定义信息的统一资源标识符(URI)。可以如上图所示的那样在定义信息 的URI之间使用逗号来列出定义信息的URI。上述示例是当由内容再现 设备20基于三条定义信息来添加参数时从内容服务器11向内容再现设备 20传输的MPD的URL的信息。
参数描述被存储在存储单元310中,并且参数描述可以用如下描述语 言来描述:Web应用程序描述语言(WADL, http://www.w3.org/Submission/wadl)、Web服务描述语言(WSDL, http://www.ibm.com/developerworks/webservices/library/ws-restwsdl/),或者另外的网络API描述语言。注意,参数描述不仅可以存储在存储单 元310中,而且还可以存储在内容再现设备20的存储单元230中。当将 参数描述被存储在所述两个存储单元中时,应当假定存储单元的内容是同 步的,即两个存储单元的内容被保持为相同。
将描述具体示例。响应于来自内容再现设备20的用于再现内容的请 求,内容服务器11向内容再现设备20传输以下所示的MPD的URL的 信息。
http://a.com/x.mpd?pd=urn:prmDef-1
图7是示出“urn:prmDef-1”的内容的说明图,该“urn:prmDef-1” 是由上述URL的查询参数“pd”指定的参数描述。
在由标签<param>包围的部分中,描述了参数描述的定义的内容。
要素“name”给出了由内容再现设备20要向MPD中描述的内容的 URL添加的参数(URL参数)的名称。在图7的示例中,在要素“name” 中指定了“位置”。
要素“required”规定在内容再现设备20中查询参数的描述是否是 必需的。在图7的示例中,在要素“required”中指定了“true”,其指示 该参数的描述是必要的。
要素“style”给出了由内容再现设备20要向MPD中描述的内容的 URL添加的参数的形式。参数的形式包括查询参数、模板等。在图7所 示的示例中,在要素“style”中指定了“query”,其指示由内容再现设备 20以查询参数的形式来描述参数。
在由标签<doc>包围的部分中,描述了有关参数描述的信息。在图7 中,参数描述是参数“location”的详情,其指示例如使内容再现设备20 描述由内容再现设备20获取的当前位置,所述用户内容再现设备20已经 使用GPS等作出了请求。
当内容再现设备20接收到上述MPD的URL的信息并且获取到MPD 时,内容再现设备基于图7中所示的内容来向MPD中描述的内容的URL 添加参数。例如,如果在上述MPD(x.mpd)中包括内容的段的URL “http://a.com/s.mp4”,则内容再现设备20向“http://a.com/s.mp4”添加 查询参数,如下所示。
http://a.com/s.mp4?location=areaA
换句话说,内容再现设备20指定由当前位置获取单元260在参数 “location”中获取的当前位置的信息;使用通信单元220来访问以上描 述的URL;以及由此请求内容。
通过如上所述的那样限定参数描述,内容服务器11可以使内容再现 设备20向内容再现设备20的执行环境添加适当的参数20。例如,通过 如上所述的那样设置内容再现设备20的当前位置,可以根据内容再现设 备20的位置来对内容服务器10进行适当的重定向。此外,利用来自内容 服务器11的以查询参数的形式来描述内容再现设备20的用户的用户ID 的指令,可以从内容服务器10向内容再现设备20提供依据用户ID的信 息,例如广告等。
此外,通过如上所述的那样定义参数描述,当期望由内容再现设备 20添加参数或者期望改变要添加的参数时,可以在不更改MPD的情况下 由内容再现设备20根据内容再现设备20的运行环境来添加适当的参数。
将介绍参数描述的另一示例。内容服务器11根据来自内容再现设备 20的进行内容再现的请求来向内容再现设备20传输以下所示的MPD的 URL的信息。
http://a.com/x.mpd?pd=urn:prmDef
图8是示出“urn:prmDef”的内容的说明图,该“urn:prmDef”是 由以上所述的URL的查询参数“pd”指定的参数描述。在作为上述URL 中指定的MPD的x.mpd中,假定内容的段的URL“http://a.com/seg”被 包括在内。
标签<resource>是在“http://a.com/seg”情况下用于指定内容的位置 的标签,并且要素“path”是用于指定内容的位置的要素。图8的示例指 示内容在“path{v1}/p-{v2}.mp4”的位置中。此外,波形括号内的“v1” 和“v2”表示由内容再现设备20将参数要插入到的点。
当内容再现设备20针对在图8中所示的参数描述中规定的参数“v1”、 “v2”、“qp1”和“qp2”分别指定“vov1”、“vov2”、“voqp1”和“voqp2” 时,内容再现设备20使用通信单元220来访问以下URL以获取内容。
http://a.com/seg/pathvovl/p-vov2.mp4?qpl=voqp1&qp2=voqp2
如果假定例如在“v1”中指定国家的信息、在“v2”中指定辖区或州 的信息、在“qp1”中指定城市的信息、以及在“qp2”中指定小镇的信 息,则可以基于图8中所示的参数描述根据内容再现设备20的位置来改 变由内容再现设备20再现的内容。
图9是示出被构成为引用上述参数描述的MPD的示例的说明图。上 述非专利文献2提出了引入要素“parameter”,其针对要素“parameter” 的id属性指定了要用作模板的参数名称(在图9的示例中为“locationP”) 并且针对属性“descriptorId”引用了“EssentialProperty”(指定在目标 MPD中要支持的描述符的要素)。然而,非专利文献2没有提出下一个定 义。
这里,使用上述参数描述的下一个定义是图9中所示的MPD。要素 “schemeIdUri”中指定的“urn:prmDef-1”是图7中所示的参数描述。 通过如上所述的那样定义MPD,内容再现设备20可以向MPD中描述的 URL添加参数、访问地址“http://a.com/s.mp4?location=areaA”以及获 取内容。通过在参数描述中使用标准描述方案,可以使用现有标准框架, 并且因此功能例如URL签名的添加变得容易。
将更详细描述上述一系列处理。图10A和图10B是详细示出上述一 系列处理的顺序图。图10A和图10B中的顺序图示出了如下操作:其中, 将MPD的URL的信息从内容服务器11传输至内容再现设备20,并且内 容再现设备20基于MPD的URL来从内容服务器10获取内容以再现所 获取的内容。
当内容再现设备20尝试使用再现单元240来再现内容时,内容再现 设备20首先从内容服务器11获取MPD的URL(步骤S101)。例如由再 现单元240通过通信单元220来执行步骤S101的获取。一旦从内容服务 器11获取MPD的URL,内容再现设备20则确定在URL中是否存在 URL参数(步骤S102)。可以通过再现单元240来执行步骤S102的确定。
当在步骤S102确定出在步骤S101中获取的MPD的URL中没有 URL参数时,内容再现设备20按照来自内容服务器11的http来请求 MPD的URL(步骤S103)。例如由再现单元240使用通信单元220来执 行步骤S103的请求。当例如在上述示例中内容再现设备20获取到仅URL “http://a.com/x.mpd”时,内容再现设备20以http请求的形式从内容服 务器11中请求“http://a.com/x.mpd”。
从内容再现设备20中接收到对MPD的URL的请求的内容服务器11 判定如下状态信息:服务器期望从内容再现设备20获取例如在上述示例 中的位置信息,并且内容服务器11使用存储单元310来查询相应的参数 描述(步骤S104)。存储单元310以相应参数描述的URI来响应内容服 务器11(步骤S105)。将该处理应用于上述示例,存储单元310根据来自 内容服务器11的查询向内容服务器11答复URI“urn:prmDef-1”。
接收到来自存储单元310的响应的内容服务器11根据http响应重定 向将存储有参数描述的URI的URL参数添加至MPD的URL并且以其 中添加了URL参数的MPD的URL来响应内容再现设备20(步骤S106)。 将该处理应用于上述示例,内容服务器11以MPD的URL“http://a.com/x.mpd?pd=urn:prmDef-1”来响应内容再现设备20,其中 URL“http://a.com/x.mpd?pd=urn:prmDef-1”通过将URL参数 “?pd=urn:prmDef-1”添加至URL“http://a.com/x.mpd”来获得。
当从内容服务器11获取到MPD的URL的信息时(或者作为步骤 S102的确定结果,当URL参数处于步骤S101中所获取的MPD的URL 中时),内容再现设备20将URL参数中所指定的URI存储在存储单元 230中(步骤S107)。在上述示例中,内容再现设备20将例如URI “urn:prmDef-1”存储在存储单元230中。
然后,内容再现设备20按照来自内容服务器10的http来请求其中 添加了URL参数的MPD的URL(步骤S108)。将该处理应用于上述示 例,内容再现设备20以http请求的形式从内容服务器10请求MPD的 URL“http://a.com/x.mpd?pd=urn:prmDef-1”。
接收到来自内容再现设备20的请求的内容服务器10以MPD的主体 来响应内容再现设备20(步骤S109)。
从内容服务器10中接收到所传输的MPD的主体的内容再现设备20 解释所传输的MPD(步骤S110)。可以通过例如再现单元240来执行步 骤S110的对MPD的解释。内容再现设备20解释从内容服务器10传输 的MPD并且判定将“AdaptationSet”或 “Representation/SubRepresentation”作为再现目标。
当通过对MPD的解释判定了将“AdaptationSet”或 “Representation/SubRepresentation”作为再现目标时,则内容再现设备 20针对再现目标执行检测处理(步骤S111)。通过例如再现单元240来执 行步骤S111的检测处理。具体地,内容再现设备20检测:“AdaptationSet” 或“Representation/SubRepresentation”是否具有“EssentialProperty”; “EssentialProperty”是否被指定为属性“schemeIdUri”的值(例如, urn:prmDef-1);以及针对在属性“schemeIdUri”中指定的URI所要引 用的参数描述的解释对于再现处理是否是必需的。此外,内容再现设备 20检测URI是否已成为URL参数的表示插入的URI。
在对再现目标执行检测处理之后,内容再现设备20使用由URL参 数指定的URI(例如,urn:prmDef-1)来查询存储单元310中的参数描述 (步骤S112)。例如由再现单元240通过通信单元220来执行步骤S112 的查询处理。存储单元310以在例如WADL中所描述的相应参数描述的 主体来响应内容再现设备20(步骤S113)。
一旦从存储单元310中获取到参数描述的主体,内容再现设备20则 判定URL参数配置方法,并且获取要被存储在URL参数中的内容(步 骤S114)。可以通过例如再现单元240来执行步骤S114的处理。当例如 在URL参数中存储位置信息时,内容再现设备20将由当前位置获取单元 260获取的当前位置信息存储在URL参数中。
一旦获取到在URL参数中所存储的内容,内容再现设备20则产生 其中添加了URL参数的段的URL,并且按照来自内容服务器10的http 来请求段(步骤S115)。具体地,内容再现设备20根据在要素 “SegmentTemplate”的属性“media”中所描述的规则来产生其中添加了URL参数的段的URL。例如,如果例如存在将URL参数插入到部分“SubstitutionParameter”(即在图11中由附图标记400所标示的、符号 “$”所包围的“locationP”)中的规则,则内容再现设备20根据该规则 来产生其中添加了URL参数的段的URL。根据步骤S115的处理,内容 再现设备20产生段的URL“http://a.com/s.mp4?location=areaA”。
接收到来自内容再现设备20的请求的内容服务器10解释URL参数 并且以最佳段的主体来响应内容再现设备20(步骤S116)。内容再现设备 20再现从内容服务器10接收到的段(步骤S117)。
通过利用内容服务器10和11执行上述一系列处理,内容再现设备 20向MPD中所描述的URL添加参数,访问根据步骤S115的处理所产生 的地址“http://a.com/s.mp4?location=areaA”,并且由此可以获取内容。
<第一实施方式>
(应用了本公开内容的计算机的描述)
上述一系列处理可以通过硬件或软件来执行。当通过软件来执行所述 一系列处理时,将构成软件的程序安装在计算机中。这里,计算机包括: 并入了专用硬件的计算机、例如可以通过安装各种程序来执行各种功能的 通用个人计算机等。
图12是示出使用程序来执行上述一系列处理的计算机的硬件配置的 示例的框图。
在计算机中,中央处理单元(CPU)201、只读存储器(ROM)202 和随机存取存储器(RAM)203通过总线204彼此连接。
总线204还与输入和输出接口205相连接。输入和输出接口205与输 入单元206、输出单元207、存储单元208、通信单元209和驱动器210 相连接。
输入单元206包括键盘、鼠标、麦克风等。输出单元207包括显示器、 扬声器等。存储单元208包括硬盘、非易失性存储器等。通信单元209 包括网络接口等。驱动器210驱动可移除介质211,例如磁盘、光盘、磁 光盘或半导体存储器。
当CPU 201通过输入和输出接口205以及总线204将例如存储在存 储单元208中的程序加载到RAM 203中运行时,在如上述配置的计算机 中执行上述一系列处理。
由计算机(CPU 201)执行的程序可以通过被记录在用作例如封装介 质等的可移除介质211中来提供。此外,可以经由有线或无线传输介质例 如局域网、因特网或数字卫星广播来提供程序。
可以通过将可移除介质211加载到驱动器210中并且使用输入和输出 接口205来将该程序安装在计算机的存储单元208中。此外,该程序可以 经由有线或无线传输介质由通信单元209接收并且被安装在存储单元208 中。此外,可以在ROM 202或存储单元208中预先安装该程序。
注意,由计算机执行的程序可以是以时间顺序的方式按照本说明书中 所描述的顺序来执行处理的程序,或者可以是当被调用时并行地或者在必 要时刻执行处理的程序等。
<第二实施方式>
(多视角图像编码/多视角图像解码的应用)
可以将上述一系列处理应用于多视角图像编码/多视角图像解码。图 13示出了多视角图像编码方案的示例。
如图13所示,多视角图像包括具有多个视角的图像。多视角图像的 多个视角包括:基本视角,对于该基本视角,仅使用其自身视角的图像而 不使用其他视角的图像来进行编码/解码;以及非基本视角,对于该非基 本视角,使用其他视角的图像来进行编码/解码。在非基本视角中,可以 使用基本视角的图像,并且可以使用其他非基本视角的图像。
利用上述配置,可以抑制冗余信息的传输,并且可以减少要传输的信 息量(编码量)(也就是说,可以抑制编码效率的降级)。
(多视角图像编码设备)
图14是示出执行上述多视角图像编码的多视角图像编码设备的图。 如图14所示,多视角图像编码设备600具有编码单元601、另一编码单 元602、以及复用单元603。
编码单元601对基本视角图像进行编码,以产生基本视角图像编码 流。编码单元602对非基本视角图像进行编码,以产生非基本视角图像编 码流。复用单元603对由编码单元601产生的基本视角图像编码流和由编 码单元602产生的非基本视角图像编码流进行复用,以产生多视角图像编 码流。
可以将编码设备10(图20的编码设备)应用于多视角图像编码设备 600的编码单元601和编码单元602。也就是说,在以每个视角进行的编 码中,分辨率信息和增强层的默认映射可以得到改善。此外,通过共同使 用相同的标志或参数(例如,与处理图像等相关的语法要素),编码单元 601和编码单元602可以进行编码(即,可以共享标志或参数),并且因此可以抑制编码效率的降级。
(多视角图像解码设备)
图15示出了执行上述多视角图像解码的多视角图像解码设备的图。 如图15所示,多视角图像解码设备610具有逆复用单元611、解码单元 612以及另一解码单元613。
逆复用单元611对通过复用基本视角图像编码流和非基本视角图像 编码流而获得的多视角图像编码流进行逆复用以提取基本视角图像编码 流和非基本视角图像编码流。解码单元612对由逆复用单元611提取的基 本视角图像编码流进行解码,以获得基本视角图像。解码单元613对由逆 复用单元611提取的非基本视角图像进行编码流进行解码,以获得非基本 视角图像。
可以将解码设备110(图26的解码设备)应用于多视角图像解码设 备610的解码单元612和解码单元613。也就是说,分辨率信息和增强层 的默认映射可以得到改善。此外,通过共同使用相同的标志或参数(例如, 与处理图像等相关的语法要素),解码单元612和解码单元613可以进行 解码(即,可以共享标志或参数),并且因此可以抑制编码效率的降级。
<第三实施方式>
(分层图像编码/分层图像解码的应用)
可以将上述一系列处理应用于分层图像编码/分层图像解码(可扩展 编码/可扩展解码)。图16示出了分层图像编码方案的示例。
分层图像编码(可扩展性编码)涉及将图像划分成多个层(层级化) 并且针对每一层进行编码,使得图像数据可以相对于预定参数具有可扩展 性。分层图像解码(可扩展解码)是对应于分层图像编码的解码。
如图16所示,在将图像层级化时,针对带来可扩展性的预定参数将 一个图像划分成多个图像(层)。也就是说,层级化的图像(分层图像) 包括具有多个层级(层)的图像,所述多个层级具有不同的预定参数值。 分层图像的多个层是由以下构成:基本层,针对该基本层,仅使用其自己 层的图像而不使用其他层的图像来进行编码/解码;以及非基本层(其中 的每一个还被称为增强层),针对该非基本层,使用其他层的图像进行编 码/解码。非基本层可以使用基本层的图像,或者使用其他非基本层的图 像。
在一般情况下,非基本层包括其自己图像与另一层图像的差分图像的 数据(差分数据),使得冗余降低。当将图像划分成例如基本层和非基本 层(还被称为增强层)这两个层级时,仅利用基本层的数据获得了具有比 原始图像较低品质的图像,并且通过组合基本层的数据和非基本层的数 据,获得了原始图像(即高品质图像)。
通过如上所述的那样将图像层级化,可以容易地获得根据情况而具有 不同品质水平的图像。例如,当仅基本层的图像压缩信息被传输至具有低 处理能力的终端(例如移动电话)以再现具有低空间和时间分辨率或低图 像品质的动态图像时或者当除了基本层之外的增强层的图像压缩信息被 传输至具有高处理能力的终(端例如电视机或个人计算机)以再现具有高 空间和时间分辨率或高图像质量的动态图像时,可以在不进行转化代码处 理的情况下从服务器传输根据终端或网络的能力的图像压缩信息。
利用上述配置,可以抑制冗余信息的传输,并且可以减少要传输的信 息量(编码量)(也就是说,可以抑制编码效率的降级)。
(可扩展参数)
在分层图像编码/分层图像解码(可扩展编码/可扩展解码)中带来可 扩展性的参数是任意的。例如,可以将图17中所示的空间分辨率设置为 参数(空间可扩展性)。在空间可扩展性方面,每一层具有不同的图像分 辨率。也就是说,在该情况下,每个图片被划分成如下两个层级,所述两 个层级包括:基本层,其具有比原始图像的空间分辨率低的空间分辨率; 以及增强层,当如图17中所示的那样将增强层与基本层合并时从增强层 获得原始空间分辨率。层级的数目当然是示例,并且可以将图像划分成任 何数目的层级。
此外,作为如上述的带来可扩展性的参数,还可以采用例如时间分辨 率(时间可扩展性),如图18中所示。在时间可扩展性方面,每一层具有 不同的帧速率。也就是说,在该情况下,每个图片被划分成如下两个层级, 所述两个层级包括:基本层,其具有比原始动态图像的帧速率低的帧速率; 以及增强层,当如图18中所示的那样将增强层与基本层合并时从增强层 获得原始帧速率。层级的数目当然是示例,并且可以将图像划分成任何数 目的层级。
此外,作为如上述的带来可扩展性的另一参数,还可以采用例如信噪 比(SNR)(SNR可扩展性)。在SNR可扩展性中,每一层具有不同的SN 比。也就是说,在该情况下,每个图片被划分成如下两个层级,所述两个 层级包括:基本层,其具有比原始图像的信噪比低的信噪比;以及增强层, 当如图19中所示的那样将该层与基本层合并时从该层获得原始信噪比。 层级的数目当然是示例,并且可以将图像划分成任何数目的层级。
除了上述实施方式之外,还可以采用带来可扩展性的任何参数。例如, 作为带来可扩展性的参数,还可以使用比特深度(比特深度可扩展性)。 在该比特深度可扩展性中,每一层具有不同的比特深度。在该情况下,例 如,基本层由8比特图像构成,并且通过向其添加增强层,可以获得10 比特图像。
此外,作为带来可扩展性的参数,还可以使用色度格式(色度可扩展 性)。在该色度可扩展性中,每一层具有不同的色度格式。在该情况下, 例如,基本层由4:2:0格式的分量图像构成,并且通过向其添加增强层, 可以获得4:2:2格式的分量图像。
(分层图像编码设备)
图20是示出执行上述分层图像编码的分层图像编码设备的图。分层 图像编码设备620具有编码单元621、另一编码单元622以及复用单元 623,如图20所示。
编码单元621对基本层图像进行编码,以产生基本层图像编码流。编 码单元622对非基本层图像进行编码,以产生非基本层图像编码流。复用 单元623对由编码单元621产生的基本层图像编码流和由编码单元622产 生的非基本层图像编码流进行复用,以产生分层图像编码流。
可以将编码设备10(图20的编码设备)应用于分层图像编码设备620 的编码单元621和编码单元622。也就是说,分辨率信息和增强层的默认 映射可以得到改善。此外,共同使用相同的标志或参数(例如,与处理图 像等相关的语法要素),编码单元621和编码单元622可以对帧内预测的 滤波处理进行控制(即,可以共享标志或参数),并且因此可以抑制编码 效率的降级。
(分层图像解码设备)
图21是示出执行上述分层图像解码的分层图像解码设备的图。分层 图像解码设备630具有逆复用单元631、解码单元632以及另一解码单元 633,如图21所示。
逆复用单元631对通过复用基本层图像编码流和非基本层图像编码 流而获得的分层图像编码流进行逆复用以提取基本层图像编码流和非基 本层图像编码流。解码单元632对由逆复用单元631提取的基本层图像编 码流进行解码,以获得基本层图像。解码单元633对由逆复用单元631 提取的非基本层图像编码流进行解码,以获得非基本层图像。
可以将解码设备110(图26的解码设备)可以应用于分层图像解码 设备630的解码单元632和解码单元633。也就是说,分辨率信息和增强 层的默认映射可以得到改善。此外,共同使用相同的标志或参数(例如, 与处理图像等相关的语法要素),解码单元612和解码单元613可以进行 解码(即,可以共享标志或参数),并且因此可以抑制编码效率的降级。
<第四实施方式>
(电视设备的配置的示例)
图22示出应用了本公开内容的电视设备的示意性配置。电视设备900 具有天线901、调谐器902、解复用器903、解码器904、视频信号处理单 元905、显示单元906、音频信号处理单元907、扬声器908以及外部接 口单元909。此外,电视设备900具有控制单元910、用户接口单元911 等。
调谐器902将由天线901接收到的广播信号调谐至期望的信道以进行 解调,并且将所获得的编码比特流输出至解复用器903。
解复用器903从编码比特流提取要观看的节目的视频和音频包,并且 将所提取数据包输出至解码器904。此外,解复用器90将电子节目指南 (EPG)的数据包供应至控制单元910。注意,当执行加扰时,通过解复 用器等来取消该加扰。
解码器904对包进行解码处理,并且将从解码处理产生的视频数据和 音频数据分别输出至视频信号处理单元905和音频信号处理单元907。
视频信号处理单元905根据用户设置等对视频数据进行噪声去除、视 频处理。视频信号处理单元905产生要在显示单元906上显示的节目的视 频数据、从基于通过网络提供的应用的处理而得到的图像数据。此外,视 频信号处理单元905产生用于显示菜单画面(如选择项目的菜单画面)的 视频数据,并且将数据叠加到节目的视频数据上。视频信号处理单元905 基于如上所述产生的视频数据来产生驱动信号以驱动显示单元906。
显示单元906基于来自视频信号处理单元905的驱动信号来驱动显示 设备(例如液晶显示元件)以显示节目等的视频。
音频信号处理单元907通过以下来进行音频输出:对音频数据进行预 定处理(例如噪声去除)、对经处理的音频数据进行DA转换处理或放大 处理以及将数据提供给扬声器908。
外部接口单元909是用于将外部设备与网络连接的接口,并且执行数 据例如视频数据和音频数据的发送和接收。
控制单元910与用户接口单元911相连接。用户接口单元911被配置 成操纵开关或远程控制信号接收单元,并且根据用户操作来将操作信号提 供给控制单元910。
控制单元910使用中央处理单元(CPU)、存储器等来进行配置。存 储器存储由CPU执行的程序,CPU进行处理所需的各种数据、EPG数 据、通过网络获取的数据等。在预定时刻例如当电视设备900被接通时, 存储在存储器中的程序由CPU读出并执行。通过执行程序,CPU控制各 个单元,使得电视设备900根据用户操作来进行操作。
注意,在电视设备900中,提供了总线912,用以将调谐器902、解 复用器903、视频信号处理单元905、音频信号处理单元907、外部接口 单元909等与控制单元910连接。
如上述那样配置的电视设备的解码器904设置有本申请的解码设备 (解码方法)的功能。出于该原因,在对编码流的解码处理中,分辨率信 息和增强层的默认映射可以得到改善。
<第五实施方式>
(移动电话的配置的示例)
图23示出应用了本公开内容的移动电话的示意性配置。移动电话920 具有通信单元922、音频编解码器923、相机单元926、图像处理单元927、 解复用单元928、记录和再现单元929、显示单元930以及控制单元931。 所述构成要素通过总线933彼此连接。
此外,天线921连接至通信单元922,而扬声器924和麦克风925连 接至音频编解码器923。此外,操作单元932连接至控制单元931。
移动电话920在各种模式例如语音呼叫模式、数据通信模式等下执行 各种操作,例如发送和接收音频信号、发送和接收电子邮件和图像数据、 捕获图像、记录数据等。
在语音呼叫模式下,通过音频编解码器923将从麦克风925产生的音 频信号转换成音频数据或压缩成数据,并且将数据提供给通信单元922。 通信单元922对音频数据执行调制处理、频率转换处理等以产生传输信 号。此外,通信单元922将传输信号提供给天线921以将信号传输至未示 出的基站。此外,通信单元922对用天线921接收到的接收信号进行放大 或频率转换处理和解调处理,并且将所获得的音频数据提供给音频编解码 器923。音频编解码器923对音频数据进行解压缩或者将音频数据转换成 模拟音频信号,并且将数据输出至扬声器924。
此外,当在数据通信模式下进行邮件传输时,控制单元931通过操作 单元932的操作来接收字符数据输入,并且将输入字符显示在显示单元 930上。此外,控制单元931基于来自操作单元932的用户指令等来产生 邮件数据,并且将数据提供给通信单元922。通信单元922对邮件数据进 行调制处理或频率转换处理,并且从天线传输921传输所获得的传输信 号。此外,通信单元922对用天线921接收到的接收信号进行放大或频率 转换处理和解调处理,以恢复邮件数据。该邮件数据被提供给显示单元 930并且电子邮件的内容被显示。
注意,移动电话920还可以使用记录和再现单元929使所接收到的邮 件数据被存储在存储介质中。存储介质是任意的可重写存储介质。例如, 存储介质是半导体存储器如RAM或内置闪存存储器、或可移除介质如硬 盘、磁盘、磁光盘、光盘、通用串行总线(USB)存储器、或存储卡。
当在数据通信模式下传输图像数据时,由相机单元926产生的图像数 据被提供给图像处理单元927。图像处理单元927对图像数据进行编码处 理以产生编码数据。
解复用单元928以预定方案对由图像处理单元927产生的编码数据和 从音频编解码器923提供的音频数据进行复用,并且将该数据提供给通信 单元922。通信单元922对复用数据进行调制处理、频率转换处理等,并 且从天线921传输所获得的传输信号。此外,通信单元922对用天线921 接收到的接收信号进行放大或频率转换处理和解调处理以恢复复用数据。 该复用数据被提供给解复用单元928。解复用单元928对复用数据进行解 复用,并且将编码数据提供给图像处理单元927以及将音频数据提供给音 频编解码器923。图像处理单元927对编码数据进行解码处理以产生图像 数据。将该图像数据提供给显示单元930,并且对接收到的图像进行显示。 音频编解码器923将音频数据转换成模拟音频信号,并且将该信号提供给 扬声器924以输出所接收到的声音。
如上述那样配置的移动电话设备的图像处理单元927用作本申请的 编码设备和解码设备(使用编码方法和解码方法)。出于该原因,分辨率 信息和增强层的默认映射可以得到改善。
<第六实施方式>
(记录和再现设备的配置的示例)
图24示出应用了本公开内容的记录和再现设备的示意性配置。记录 和再现设备940将例如所接收到的广播节目的音频数据和视频数据记录 在记录介质上,并且在由用户指示的时刻将所记录的数据提供给用户。此 外,记录和再现设备940还可以从例如另一设备获取音频数据和视频数 据,并且将数据记录在记录介质上。此外,通过对记录介质上所记录的音 频数据和视频数据进行解码和输出,记录和再现设备940可以显示图像, 并且从监视器设备等输出声音。
记录和再现设备940具有调谐器941、外部接口单元942、编码器943、 硬盘驱动器(HDD)单元944、磁盘驱动器945、选择器946、解码器947、 屏上显示(OSD)单元948、控制单元949以及用户接口单元950。
调谐器941将用未图示的天线接收到的广播信号调谐至期望的信道。 调谐器941将通过对期望信道的接收信号进行解调所获得的编码比特流 输出至选择器946。
外部接口单元942被配置成IEEE 1394接口、网络接口单元、USB 接口、闪速存储器接口等中的至少一个。外部接口单元942是用于连接外 部设备、网络、存储卡等以接收要记录的数据例如视频数据或音频数据的 接口。
编码器943在数据未被编码时以预定方案对从外部接口单元942提供 的视频数据或音频数据进行编码,并且将编码比特流输出给选择器946。
HDD单元944将视频和声音的内容数据、各种程序、其他类型的数 据等记录在内置硬盘中,并且在再现时从硬盘中读出这些数据。
盘驱动器945对用于加载光盘的信号进行记录和再现。光盘包括例如 DVD盘(DVD-视频、DVD-RAM、DVD-R、DVD-RW、DVD+R、DVD +RW等)、蓝光(注册商标)盘等。
在记录视频或声音时,选择器946从调谐器941或编码器943中选择 任何编码比特流,并且将该编码比特流提供给HDD单元944和盘驱动器 945中的任一个。此外,在再现视频或声音时,选择器946将从HDD单 元944或盘驱动器945输出的编码比特流提供给解码器947。
解码器947对编码比特流进行解码处理。解码器947将通过执行解码 处理而产生的视频数据提供给OSD单元948。此外,解码器947输出通 过执行解码处理而产生的音频数据。
OSD单元948产生用于显示菜单画面以选择项目等的视频数据,并 且将该视频数据叠加到从解码器947输出的视频数据,以供输出。
控制单元949连接至用户接口单元950。用户接口单元950被配置成 操纵开关、远程控制信号接收单元等,并且根据用户操作将操作信号输出 至控制单元949。
控制单元949使用CPU、存储器等来进行配置。存储器存储由CPU 执行的程序或CPU执行处理所需的各种数据。在预定时刻例如在记录和 再现设备940被接通时等,存储在存储器中的程序由CPU读出并执行。 通过执行程序,CPU控制各个单元,使得记录和再现设备940根据用户 操作进行操作。
如上述那样配置的记录和再现设备的编码器943用作本申请的编码 设备(使用编码方法)。出于该原因,在编码流的编码过程中,分辨率信 息和增强层的默认映射可以得到改善。此外,解码器947用作本申请的解 码设备(使用解码方法)。出于该原因,在编码流的解码过程中,分辨率 信息和增强层的默认映射可以得到改善。
<第七实施方式>
(成像设备的配置的示例)
图25示出应用了本公开内容的成像设备的示意性配置。成像设备960 捕获对象的图像、使得对象的图像显示在显示单元上、或者以图像数据的 形式将图像记录在记录介质上。
成像设备960具有光学块961、成像单元962、相机信号处理单元963、 图像数据处理单元964、显示单元965、外部接口单元966、存储器单元 967、介质驱动器968、OSD单元969以及控制单元970。此外,用户接 口单元971连接至控制单元970。此外,图像数据处理单元964、外部接 口单元966、存储器单元967、介质驱动器968、OSD单元969、控制单 元970等经由总线972彼此连接。
光学块961使用聚焦透镜、光圈机构等来进行配置。光学块961使对 象的光学图像被形成在成像单元962的成像平面上。成像单元962使用 CCD或CMOS图像传感器来进行配置,并且成像单元962根据通过光电 转换的光学图像来产生电信号,并且将信号提供给相机信号处理单元 963。
相机信号处理单元963对从成像单元962提供的电信号进行各种相机 信号处理,例如拐点校正、伽马校正或色彩校正。相机信号处理单元963 将已经经过相机信号处理的图像数据提供给图像数据处理单元964。
图像数据处理单元964对从相机信号处理单元963提供的图像数据进 行编码处理。图像数据处理单元964将通过执行编码处理所产生的编码数 据提供给外部接口单元966或者介质驱动器968。此外,图像数据处理单 元964对从外部接口单元966或者介质驱动器968提供的编码数据进行解 码处理。图像数据处理单元964将通过执行解码处理所产生的图像数据提 供给显示单元965。此外,图像数据处理单元964执行将从相机信号处理 单元963提供的图像数据提供给显示单元965的处理,或者图像数据处理 单元964将从OSD单元969获取的用于显示的数据叠加到图像数据上并 且将数据提供给显示单元965。
OSD单元969产生用于显示例如由符号、字符或数字构成的菜单画 面或图标的数据,并且将该数据输出至图像数据处理单元964。
外部接口单元966被配置成例如USB输入和输出终端等,并且当要 打印图像时,将外部接口单元966连接至打印机。此外,当需要适当地加 载可移除介质例如磁盘或光盘时将外部接口单元966连接至驱动器,或者 当需要时安装从可移除介质中读出的计算机程序。此外,外部接口单元 966具有与预定网络(例如LAN或因特网)连接的网络接口。控制单元 970可以根据来自用户接口单元971的指令从介质驱动器968中读出编码 数据,并且将该数据提供给经由网络与外部接口单元966连接的其他设 备。此外,控制单元970可以获取经由网络通过外部接口单元966从另一 设备提供的编码数据或图像数据,或者可以将该数据提供给图像数据处理 单元964。
作为在介质驱动器968中驱动的记录介质,例如可以使用任何可读写 的可移除介质,如磁盘、磁光盘、光盘或半导体存储器。此外,用作可移 除介质的记录介质的类型是任意的,并且记录介质可以是磁带设备、光盘 或存储卡。记录介质当然可以是非接触型集成电路(IC)卡等。
此外,可以对介质驱动器968和记录介质进行集成以配置非便携式记 录介质等,例如内置硬盘驱动器、固态驱动器(SSD)等。
控制单元970使用CPU来进行配置。存储器单元967存储由控制单 元970执行的程序或控制单元970执行处理所需的各种数据等。在预定时 刻例如在成像设备960被接通时,存储在存储器单元967中的程序由控制 单元970读出并执行。通过执行程序,控制单元970控制各个单元,使得 成像设备960根据用户操作进行操作。
如上述那样配置的成像设备的图像数据处理单元964作为本申请的 编码设备和解码设备(使用编码方法和解码方法)。出于该原因,在编码 流的编码或解码过程中,分辨率信息和增强层的默认映射可以得到改善。
<可扩展编码的应用示例>
(第一系统)
接下来,将描述经历可扩展编码(分层编码)的可扩展编码数据的具 体用途的示例。在例如图26中所示的示例中,将可扩展编码用于选择要 传输的数据。
在图26中所示的数据传输系统1000中,分发服务器1002读出在可 扩展编码数据存储单元1001中存储的可扩展编码数据,并且经由网络 1003将该数据分发给终端设备,例如个人计算机1004、AV设备1005、 平板设备1006、移动电话1007等。
在该情况下,分发服务器1002选择并传输针对终端设备的能力、通 信环境具有合适品质的编码数据。即使分发服务器1002传输具有不必要 的高品质的数据,终端设备仍然可能无法获得高品质的图像,并且因此存 在以下问题:该传输引起延迟或溢出。此外,占据不必要的通信频带或在 终端设备上的负载的不必要的增加也是问题。相反,如果分发服务器1002 传输具有不必要的低品质的数据,则存在以下问题:终端设备无法获得具 有合适品质的图像。出于该原因,当编码数据针对在终端设备的能力、通 信环境等方面具有合适品质时,分发服务器1002适当地读出并传输在可 扩展编码数据存储单元1001中所存储的可扩展编码数据。
例如,可扩展编码数据存储单元1001存储已经经过可扩展编码的可 扩展编码数据(BL+EL)1011。可扩展编码数据(BL+EL)1011是: 包括基本层和增强层二者的编码数据;以及如下数据,可以通过解码从该 数据获得基本层图像和增强层图像二者。
分发服务器1002针对数据所传输至的终端设备的性能、通信环境等 来选择合适的层,并且读出该层的数据。例如,分发服务器1002从可扩 展编码数据存储单元1001读出高品质的可扩展编码数据(BL+EL)1011, 并且在不作改变的情形下数据传输至具有高处理性能的个人计算机1004 或平板设备1006。另一方面,分发服务器1002从可扩展编码数据(BL+ EL)1011提取例如基本层的数据,并且将该数据作为与可扩展编码数据 (BL+EL)1011以及可扩展编码数据(BL)1012具有内容相同的数据 传输至具有低处理性能的AV设备1005或移动电话1007,其中,可扩展 编码数据(BL)1012的品质低于可扩展编码数据(BL+EL)1011的品 质。
由于可以通过使用如上所述的可扩展编码数据来容易地调节数据量, 所以能够抑制延迟或溢出的发生,并且能够抑制在终端设备或通信介质上 的负载的不必要的增加。此外,由于在可扩展编码数据(BL+EL)1011 中层之间的冗余度减少,所以与当将每一层的编码数据设置成单独的数据 时相比,数据量可以降低较多。因此,可以更有效地利用可扩展编码数据 存储单元1001的存储区域。
注意,由于可以应用各种设备作为终端设备如个人计算机1004、AV 设备1005、平板设备1006以及移动电话1007,所以每个设备具有不同的 硬件性能。此外,由于由终端设备执行的应用也各不相同,所以软件性能 也不同。此外,对于用作通信介质的网络1003,可以应用有线或无线通 信介质如因特网或局域网(LAN)或者包括有线或无线这两种通信类型在 内的所有通信电路线,并且其数据传输性能不同。此外,存在以下问题: 性能根据其他通信类型而发生改变。
因此,分发服务器1002可以被设置成在开始数据传输之前与用作数 据传输目的地的终端设备进行通信,以获得与终端设备的能力(例如在终 端设备的硬件性能或由终端设备要执行应用(软件)性能)相关的信息和 与通信环境(例如网络1003的可用带宽等)相关的信息。因此,可以将 分发服务器1002设置成基于所获得的信息来选择合适的层。
注意,可以对终端设备进行设置以提取层。例如,个人计算机1004 可以被设置成对传输的可扩展编码数据(BL+EL)1011进行解码,以显 示基本层的图像或者显示增强层的图像。此外,例如,个人计算机1004 可以被设置成从传输的可扩展编码数据(BL+EL)1011提取基本层的可 扩展编码数据(BL)1012,以存储数据、将数据传输至另一设备或对基 本层的图像进行解码和显示。
可扩展编码数据存储单元1001、分发服务器1002、网络1003和终端 设备的数目当然都是任意的。此外,虽然描述了分发服务器1002将数据 传输至终端设备的示例,但是使用示例不限于此。可以将任何系统应用于 数据传输系统1000,只要该系统是如下系统即可:在已经过可扩展编码 的编码数据被传输至终端设备时,根据终端设备的能力、通信环境等来选 择和传输合适的层。
(第二系统)
此外,如在例如图27中所示的示例中的那样,可扩展编码被用于通 过多个通信介质进行传输。
在图27中所示的数据传输系统1100中,广播站1101通过地面广播 1111来传输基本层的可扩展编码数据(BL)1121。此外,广播站1101通 过包括有线或无线通信网络或这两种通信网络在内的任意网络1112来传 输(例如打包和传输)增强层的可扩展编码数据(EL)1122。
终端设备1102具有接收由广播站1101广播的地面广播1111的功能, 并且因此终端设备1102接收通过地面广播1111传输的基本层的可扩展编 码数据(BL)1121。此外,终端设备1102还具有经由网络1112进行通信 的通信功能,并且因此终端设备1102接收通过网络1112传输的增强层的 可扩展编码数据(EL)1122。
终端设备1102对从地面广播1111获取的基本层的可扩展编码数据 (BL)1121进行解码,以获得、存储基本层的图像、或将基本层的图像 传输至另一设备。
此外,根据用户指示等,例如终端设备1102将通过地面广播1111获 取的基本层的可扩展编码数据(BL)1121与通过网络1112获取的增强层 的可扩展编码数据(EL)1122进行合并以获得可扩展编码数据(BL+EL), 并且对经合并的数据进行解码,以获得、储存增强层的图像、或将增强层 的图像传输至另一设备。
如上所述,可以例如针对每一层经由不同通信介质来传输可扩展编码 数据。因此,能够分配负载,并且能够抑制延迟或溢出的发生。
此外,可以根据情况针对每一层选择在传输中所使用的通信介质。例 如,可以通过具有宽带宽的通信介质来传输相对较大数据量的可扩展编码 数据(BL)1121,以及可以通过具有窄带宽的通信介质来传输相对较小 数据量的增强层的可扩展编码数据(EL)1122。此外,对增强层的可扩 展编码数据(EL)1122进行传输的通信介质可以被设置成根据网络1112 的可用带宽而切换至网络1112或地面广播1111。当然,这同样适用于任 一层的数据。
通过如上所述的那样执行控制,能够进一步抑制数据传输负载的增 加。
当然,层的数目是任意的,并且在传输中使用的通信介质的数目也是 任意的。此外,用作数据分发目的地的终端设备1102的数目是任意的。 此外,虽然上面描述了从广播站1101广播的示例,但是使用示例不限于 此。任何系统都可以应用于数据传输系统1100,只要该系统是如下系统 即可:在该系统中,已经过可扩展编码的编码数据被划分成以层为单位的 多个块并且经由多条线被传输。
(第三系统)
此外,在例如图28所示的示例中,将可扩展编码用于编码数据的存 储中。
在图28所示的成像系统1200中,成像设备1201对通过捕获对象1211 的图像所获得的图像数据进行可扩展编码,并且将数据提供给可扩展编码 数据存储设备1202作为可扩展编码数据(BL+EL)1221。
可扩展编码数据存储设备1202以根据情况所决定的品质的方式来存 储从成像设备1201提供的可扩展编码数据(BL+EL)1221。例如,在 正常情况下,可扩展编码数据存储设备1202从可扩展编码数据(BL+EL) 1221提取基本层的数据,并且以低品质和较少信息量的方式存储该数据 作为基本层的可扩展编码数据(BL)1222。另一方面,例如,在特殊情 况下,可扩展编码数据存储设备1202以高品质和较大数据量的方式来存 储可扩展编码数据(BL+EL)1221。
由于在上述设置情况下可扩展编码数据存储设备1202可以仅在必要 时保存高品质的图像,所以能够抑制数据量的增加,并且能够提高存储区 域的使用效率,同时能够抑制由图像品质的降级引起的图像值的降低。
假定成像设备1201为例如监视相机。当监视目标(例如闯入者)没 有被包括在捕获图像中时(在正常情况下),捕获图像的内容很可能并不 重要,因此优先考虑数据量的减少,并且将图像数据(可扩展编码数据) 以低品质进行存储。另一方面,当在捕获图像中包括作为对象1211的监 视目标时(在特殊情况下),捕获图像的内容很可能是重要的,因此优先 考虑图像品质,并且将图像数据(可扩展编码数据)以高品质的方式进行 存储。
注意,可以由例如可扩展编码数据存储设备1202通过分析图像来确 定正常情况和特殊情况。此外,可以由成像设备1201来确定正常情况和 特殊情况,并且可以将确定的结果传输至可扩展编码数据存储设备1202。
注意,用于确定正常情况和特殊情况的标准是任意的,并且用作确定 标准的图像的内容是任意的。当然,可以将除了图像的内容之外的条件设 置成用于确定的标准。例如,可以根据大小、波形等、或记录的声音来切 换状态,或者可以以预定间隔来切换状态,或者可以根据来自外部的指令 (例如用户的指令)来切换状态。
此外,虽然以上描述了其中对正常情况和特殊情况这两种状态进行切 换的示例,但是状态的数目是任意的,并且可以对三个或更多个状态(例 如正常情况、略特殊情况、特殊情况、特别特殊情况等)进行切换。然而, 要切换的状态的数目的上限取决于可扩展编码数据的层的数目。
此外,成像设备1201可以根据状态来判定可扩展编码数据的层的数 目。例如,在正常情况下,成像设备1201可以产生具有低品质和小数据 量的基本层的可扩展编码数据(BL)1222,并且将该数据提供给可扩展 编码数据存储设备1202。此外,在特殊情况下,例如,成像设备1201可 以产生具有高品质和大数据量的基本层的可扩展编码数据(BL+EL)1221,并且将该数据提供给可扩展编码数据存储设备1202。
虽然在上述说明中例举了监视相机,但是成像系统1200的应用是任 意的并且不限于监视相机。
<第八实施方式>
(其他示例)
虽然以上描述了应用了本公开内容的设备、系统等的示例,但是本公 开内容不限于此,并且本公开内容可以被实现为在设备或构成系统的设备 中所安装的任何配置,所述设备或构成系统的设备例如以下形式的处理 器:系统大规模集成电路(LSI)、使用多个处理器的模块、使用多个模块 的单元、通过向该单元进一步添加其他功能所获得的集(即设备的部分配 置)等。
(视频集的配置的示例)
将参照图29来描述其中本公开内容被实现为集的示例。图29示出应 用了本公开内容的视频集的示意性配置的示例。
随着近年来电子装置逐渐变得具有多功能,当在开发和制造阶段中制 备每个装置的某些配置以供出售、供应等时,不仅存在将这样的装置配置 成具有一个功能的情况,而且还存在将具有相关功能的多个配置与多个功 能相结合并且实现为一个集的许多情况。
将图29中示出的视频集1300通过将具有图像编码功能和图像解码功 能的设备(其可以具有功能中之一或二者)与具有与前述功能相关的其他 功能进行结合而被配置成如上所述具有多功能。
如图29中所示,视频集1300具有如下模块组,所述模块组包括:视 频模块1311、外部存储器1312、电源管理模块1313、前端模块1314等、 以及具有相关功能例如连接装置(connectivity)1321、相机1322、传感 器1323等的设备。
模块是将若干相关的部件化功能聚集在一起以提供凝聚性功能的部 件的形式。具体物理配置是任意的;然而,其被认为是如下集成:例如各 自具有功能的多个处理器、电子电路元件(例如电阻和电容)、以及其他 设备被设置在电路板上。此外,还考虑通过将模块与另一模块、处理器等 相结合来制成新的模块。
在图29的示例中,视频模块1311是具有与图像处理相关的功能的配 置的组合,并且具有应用处理器、视频处理器、宽带调制解调器1333以 及RF模块1334。
处理器是使用系统级芯片(SoC)与具有预定功能的配置相集成的半 导体芯片,并且处理器还被称为例如系统大规模集成电路(LSI)等。具 有预定功能的配置还可以是逻辑电路(硬件配置);可以是通过使用要素 (软件配置)连同CPU、ROM和RAM一起执行的程序;或者可以是这 两种配置的组合。例如,处理器可以具有逻辑电路、CPU、ROM以及 RAM等,并且可以利用逻辑电路(硬件配置)来实现某些功能,或者可 以利用由CPU执行的程序(软件配置)实现其他功能。
图29的应用处理器1331是执行与图像处理相关的应用的处理器。由 应用处理器1331执行的应用不仅可以进行运算处理,而且在必要时还可 以控制视频模块1311例如视频处理器1332内部和外部的配置,以实现预 定功能。
视频处理器1332是具有与图像编码和图像解码(中的一个或二者) 相关的功能的处理器。
宽带调制解调器1333是如下处理器(或模块),该处理器(或模块) 执行与通过宽带线(例如因特网或公共电话线网络)进行的有线或无线(或 二者)宽带通信相关的处理。例如,宽带调制解调器1333通过执行数字 调制等来将要传输的数据(数字信号)转换成模拟信号,或者通过执行解 调来将接收到的模拟信号转换成数据(数字信号)。例如,宽带调制解调 器1333可以数字地调制/解调任意信息,例如要由视频处理器1332处理 的图像数据、通过对图像数据进行编码所获得的流、应用程序、或设定数 据。
RF模块1334是对经由天线发送和接收的射频(RF)信号执行频率 转换、调制和解调、放大、滤波处理等的模块。例如,RF模块1334通过 对由宽带调制解调器1333产生的基带信号进行频率转换等来产生RF信 号。此外,RF模块1334例如通过对经由前端模块1314接收的RF信号 进行频率转换来产生基带信号。
注意,如图29中用虚线1341所示的,应用处理器1331和视频处理 器1332可以被集成以构成一个处理器。
外部存储器1312是设置于视频模块1311外部的模块,该外部存储器 1312具有由视频模块1311使用的存储设备。外部存储器1312的存储设 备可以被实现为任何物理配置,但是通常在存储大量数据(例如以帧为单 位的图像数据)时使用,因此期望实现具有相对廉价且高容量的半导体存 储器(例如动态随机存取存储器(DRAM))的存储设备。
电力管理模块1313管理和控制向视频模块1311(视频模块1311内 的各构成元件)的电力供给。
前端模块1314是向RF模块1334提供前端功能的模块(在天线侧用 作发送和接收端的电路)。前端模块1314具有例如天线单元1351、滤波 器1352以及放大单元1353,如图21中所示。
天线单元1351被配置有用于发送和接收无线信号的天线及其外围装 置。天线单元1351传输从放大单元1353提供的信号作为无线电信号,并 且将接收到的无线电信号提供给滤波器1352作为电信号(RF信号)。滤 波器1352对经由天线单元1351所接收到的RF信号执行滤波处理等,并 且将经处理的RF信号提供给RF模块1334。放大单元1353对从RF模块1334提供的RF信号进行放大,并且将该信号提供给天线单元1351。
连接装置1321是具有与外部进行连接的功能的模块。连接装置1321 的物理配置是任意的。连接装置1321例如配置有除了宽带调制解调器 1333所对应的通信标准的通信功能之外的通信功能、外部输入和输出端 子等。
例如,连接装置1321可以具有通信功能和天线,该通信功能基于无 线通信标准例如蓝牙(注册商标)、IEEE 802.11(例如无线保真(Wi-Fi; 注册商标)、近场通信(NFC)、或红外数据协会(IrDA),所述天线基于 该标准来发送和接收信号。此外,连接装置1321可以具有例如如下模块, 该模块具有基于有线通信标准(例如通用串行总线(USB)、或高清晰度多媒体接口(HDMI;注册商标))的通信功能或基于上述标准的终端。 此外,连接装置1321可以具有例如模拟输入和输出终端等的其他数据(信 号)传输功能。
注意,连接装置1321可以被设置成包括用作数据(信号)传输目的 地的设备。例如,连接装置1321可以被设置成具有驱动器(其不仅包括 可移除介质的驱动器而且还包括硬盘的驱动器、固态驱动器(SSD)、网 络连接存储装置(NAS)等),该驱动器针对记录介质例如磁盘、光盘、 磁光盘或半导体存储器来读出并写入数据。此外,连接装置1321可以被 设置成具有图像或音频输出设备(监视器、扬声器等)。
相机1322是具有捕获对象并获得对象的图像数据的功能的模块。例 如,由相机1322进行捕获而获得的图像数据被提供给视频处理器1332并 且由视频处理器1332进行编码。
传感器1323是具有例如声音传感器、超声传感器、光传感器、照度 传感器、红外传感器、图像传感器、旋转传感器、角度传感器、角速度传 感器、速度传感器、加速度传感器、倾斜传感器、磁识别传感器、震动传 感器、温度传感器等的任意感测功能的模块。例如,由传感器1323检测 到的数据被提供给应用处理器1331并且由应用程序使用等。
以上描述为模块的配置可以被实现为处理器,或者相反地描述为处理 器的配置可以被实现为模块。
在具有上述配置的视频集1300中,可以如下面将要描述的那样将本 公开内容应用于视频处理器1332。因此,视频集1300可以被实现为本公 开内容所应用的集。
(视频处理器的配置的示例)
图30示出应用了本公开内容的视频处理器1332(图29的视频处理 器)的示意性配置的示例。
在图30的示例中,视频处理器1332具有:接收视频信号和音频信号 的输入以及以预定方案对信号进行编码的功能;以及对经编码的视频数据 和音频数据进行解码并且输出视频信号和音频信号以用于再现的功能。
如图30中所示,视频处理器1332具有视频输入处理单元1401、第 一图像放大和缩小单元1402、第二图像放大和缩小单元1403、视频输出 处理单元1404、帧存储器1405、以及存储器控制单元1406。此外,视频 处理器1332具有编码/解码引擎1407、视频基本流(ES)缓存器1408A 和1408B、以及音频ES缓存器1409A和1409B。此外,视频处理器1332 具有音频编码器1410、音频解码器1411、复用器(MUX)1412、解复用 器(DMUX)1413、以及流缓存器1414。
视频输入处理单元1401获取从例如连接装置1321(图29)输入的视 频信号,并且将该信号转换成数字图像数据。第一图像放大和缩小单元 1402对图像数据进行格式转换、图像放大或缩小处理等。第二图像放大 和缩小单元1403根据经由视频输出处理单元1404将数据输出至的目的地 的格式来对图像数据进行图像放大或缩小处理,或者第二图像放大和缩小 单元1403以与第一图像放大和缩小单元1402相同的方式执行格式转换、 图像放大或缩小处理等。视频输出处理单元1404对图像数据进行格式转 换、向模拟信号的转换等,并且将数据输出至例如的连接装置1321(图 29)作为再现视频信号。
帧存储器1405是用于被视频输入处理单元1401、第一图像放大和缩 小单元1402、第二图像放大和缩小单元1403、视频输出处理单元1404、 以及编码/解码引擎1407共享的图像数据的存储器。帧存储器1405被实 现为半导体存储器例如DRAM等。
存储器控制单元1406接收来自编码/解码引擎1407的同步信号,并 且根据被写入访问管理表1406A中的对帧存储器1405的访问调度来控制 对帧存储器1405的访问以便写入和读出。由存储器控制单元1406根据在 编码/解码引擎1407、第一图像放大和缩小单元1402、第二图像放大和缩 小单元1403等中被执行的处理来更新访问管理表1406A。
编码/解码引擎1407执行图像数据的编码处理和视频流的解码处理, 该视频流是通过对图像数据进行编码而获得的数据。例如,编码/解码引 擎1407对从帧存储器1405读出的图像数据进行编码,并且将数据按顺序 写入视频ES缓存器1408A中作为视频流。此外,例如,编码/解码引擎 1407从视频ES缓存器1408B中按顺序读出视频流,并且将数据按顺序写入帧存储器1405中作为图像数据。编码/解码引擎1407将帧存储器1405 用作进行这样的编码和解码的工作区域。此外,编码/解码引擎1407在例 如对每个微块的处理开始时向存储器控制单元1406输出同步信号。
视频ES缓存器1408A缓存由编码/解码引擎1407产生的视频流,并 且将该流提供给复用器(MUX)1412。视频ES缓存器1408B缓存从解 复用器(DMUX)1413提供的视频流,并且将该流提供给编码/解码引擎 1407。
音频ES缓存器1409A缓存由音频编码器1410产生的音频流,并且 将该流提供给复用器(MUX)1412。音频ES缓存器1409B缓存从解复 用器(DMUX)1413提供的音频流,并且将该流提供给音频解码器1411。
音频编码器1410例如对从例如连接装置1321(图29)等输入的音频 信号进行数字转换,并且以预定方案(例如MPEG音频方案、AudioCode 3号(AC3)方案等)对该信号进行编码。音频编码器1410按顺序写入 音频流,该音频流是通过对音频ES缓存器1409A中的音频信号进行编码 而获得的数据。音频解码器1411对从音频ES缓存器1409B提供的音频 流进行解码、进行例如向模拟信号的转换,并且将该信号提供给例如连接 装置1321(图29)等作为再现音频信号。
复用器(MUX)1412对视频流和音频流进行复用。一种用于此复用 的方法(即,由复用所产生的比特流的格式)是任意的。此外,在复用期 间,复用器(MUX)1412还可以向比特流添加预定报头信息等。也就是 说,复用器(MUX)1412可以通过复用来转换流的格式。通过例如对视 频流和音频流进行复用,复用器(MUX)1412将所述流转换成传输流, 该传输流是具有传输格式的比特流。此外,通过对视频流和音频流进行复 用,例如,复用器(MUX)1412将所述流转换成具有用于记录的文件格 式的数据(文件数据)。
解复用器(DMUX)1413对通过使用下述方法复用视频流和音频流 而获得的比特流进行解复用:所述方法对应于由复用器(MUX)1412执 行的复用。也就是说,解复用器(DMUX)1413从所述比特流中提取视 频流和音频流,所述比特流是从流缓存器1414(其将比特流分成视频流 和音频流)读出。解复用器(DMUX)1413可以通过解复用(对复用器 (MUX)1412执行的转换进行逆转换)来转换流的格式。例如,解复用 器(DMUX)1413可以获取从例如连接装置1321、宽带调制解调器1333 等(所述二者均在图29中)经由流缓存器1414提供的传输流,并且通过 解复用将该流转换成视频流和音频流。此外,例如,解复用器(DMUX) 1413可以通过例如连接装置1321(图29)经由流缓存器1414获取从各 种记录介质读出的文件数据,并且通过解复用将该数据转换成视频流和音 频流。
流缓存器1414缓存比特流。例如,流缓存器1414缓存从复用器 (MUX)1412提供的传输流,并且在预定时刻或基于来自外部的请求等 将该流提供给例如连接装置1321、宽带调制解调器1333(所述二者都在 图29中)等。
此外,例如,流缓存器1414缓存从复用器(MUX)1412提供的文 件数据,并且在预定时刻或者基于来自外部的请求等将该数据提供给例如 连接装置1321(图29)等,以使数据被记录在任意的各种记录介质上。
此外,流缓存器1414缓存经由例如连接装置1321、宽带调制解调器 1333(所述二者都在图29中)等而获得的传输流,并且在预定时刻或基 于来自外部的请求等将该流提供给解复用器(DMUX)1413。
此外,流缓存器1414缓存经由例如(图29的)连接装置1321等从 任何各种记录介质读出的文件数据,并且在预定时刻或基于来自外部的请 求等将该数据提供给解复用器(DMUX)1413。
接下来,将描述具有此配置的视频处理器1332的操作的示例。例如, 在视频输入处理单元1401中以预定格式(例如YCbCr格式4:2:2)将从 连接装置1321(图29)等输入至视频处理器1332的视频信号被转换成数 字图像数据,并且按顺序写入帧存储器1405中。该数字图像数据由第一 图像放大和缩小单元1402或第二图像放大和缩小单元1403读出,以预定 格式(例如YCbCr格式4:2:0)进行格式转换和放大或缩小处理,然后再 次被写入帧存储器1405中。该图像数据由编码/解码引擎1407进行编码, 并且被写入视频ES缓存器1408A中作为视频流。
此外,从连接装置1321(图29)输入至视频处理器1332的音频信号 由音频编码器1410进行编码,然后被写入音频ES缓存器1409A中,作 为音频流。
视频ES缓存器1408A的视频流和音频ES缓存器1409A的音频流由 复用器(MUX)1412读出和复用从而被转换成传输流、文件数据等。由 复用器(MUX)1412产生的传输流被缓存在流缓存器1414中,然后经 由例如连接装置1321、宽带调制解调器1333(所述二者都在图29中)等 被输出至外部网络。此外,由复用器(MUX)1412产生的文件数据被缓 存在流缓存器1414中,并且被输出至例如连接装置1321(图29)从而被 记录在任意的各种记录介质上。
此外,从外部网络经由例如连接装置1321、宽带调制解调器1333(所 述二者都在图29中)等输入至视频处理器1332的传输流被缓存在流缓存 器1414中,然后由解复用器(DMUX)1413进行解复用。此外,例如, 经由连接装置1321(图29)从任意的各种记录介质读出并且被输入至视 频处理器1332的文件数据被缓存在流缓存器1414中,然后由解复用器(DMUX)1413进行解复用。也就是说,输入至视频处理器1332的传输 流或文件数据由解复用器(DMUX)1413分离成视频流和音频流。
经由音频ES缓存器1409B将音频流提供给音频解码器1411以进行 解码,从而使音频信号再现。此外,视频数据流被写入视频ES缓存器 1408B中,然后由编码/解码引擎1407按顺序读出以进行解码,并且被写 入帧存储器1405中。解码图像数据经过由第二图像放大和缩小单元1403 执行的放大和缩小处理,并且被写入帧存储器1405中。然后,解码图像 数据由视频输出处理单元1404读出,以预定格式(例如YCbCr格式4:2:2) 进行格式转换,并且进一步被转换成模拟信号,从而使视频信号再现,以 供输出。
注意,本公开内容的编码/解码引擎1407(即,根据上述各实施方式 的图像编码设备和图像解码设备的功能)可以以硬件的形式(例如逻辑电 路)、以软件的形式(例如嵌入式程序)或以这两种形式来实现。
<6.结论>
根据以上描述的本公开内容的实施方式的内容服务器11向已请求内 容再现的内容再现设备20传输MPD的URL的信息。在那时,内容服务 器11通过添加如下查询参数来向内容再现设备20传输MPD的URL的 信息,在该查询参数中用于使内容再现设备20添加参数的定义信息被指 定到MPD的URL的末端。
一旦获取到MPD,内容再现设备20可以引用由内容服务器11指定 的定义信息,并且向MPD中所指定的内容的段的URL添加参数。然后, 由于被致使添加参数的内容再现设备20,内容服务器10可以根据内容再 现设备20的环境来提供内容或重定向。
当期望由内容再现设备20添加参数或者期望改变要添加的参数时, 根据以上描述的本公开内容的实施方式的内容服务器11可以在不改变 MPD的情况下根据内容再现设备20的执行环境来使内容再现设备20添 加合适的参数。
还可以产生如下计算机程序,该计算机程序在设置于对内容服务器 10和内容再现设备20中的硬件——例如中央处理单元(CPU)、ROM和 随机存取存储器(RAM)——上实施与内容服务器10和内容再现设备 20的上述要素等同的功能。此外,还提供了存储计算机程序的存储介质。
以上参照附图描述了本公开内容的优选实施方式,而本公开内容当然 不限于上述示例。本领域技术人员可以发现在所附权利要求的范围内的各 种变化和修改,并且应当理解所述各种变化和修改自然落入本公开内容的 技术范围内。
此外,本技术还可以如下进行配置。
(1)一种服务器设备,包括:
存储单元,所述存储单元被配置成存储用于向在下述访问信息中定义 的地址添加参数的预定定义,所述访问信息用于对构成每条编码数据的多 个子段中的每个子段进行访问,所述每条编码数据通过以不同比特率对相 同内容进行编码来获得,或者所述访问信息用于访问在MPD中描述的要 通过向服务器的请求来获取的每个要素;以及
通信单元,所述通信单元被配置成传输指令,所述指令用于基于存储 在所述存储单元中的预定定义来向在所述访问信息中定义的地址添加参 数。
(2)一种客户端设备,包括:
存储单元,所述存储单元被配置成存储用于向下述访问信息添加参数 的预定定义,所述访问信息用于对构成每条编码数据的多个子段中的每个 子段进行访问,所述每条编码数据通过以不同比特率对相同内容进行编码 而获得,或者所述访问信息用于访问在MPD中描述的要通过向服务器的 请求来获取的每个要素;以及
通信单元,所述通信单元被配置成通过基于存储在所述存储单元中的 所述预定定义向在所述访问信息中定义的地址添加参数来访问所述地址。
(3)一种内容分发方法,包括:
存储用于向在下述访问信息中定义的地址添加参数的预定定义的步 骤,所述访问信息用于对构成每条编码数据的多个子段中的每个子段进行 访问,所述每条编码数据通过以不同比特率对相同内容进行编码而获得, 或者所述访问信息用于访问在MPD中描述的要通过向服务器的请求来获 取的每个要素;以及
传输指令的步骤,所述指令用于基于存储在所述存储单元中的预定定 义来向在所述访问信息中定义的地址添加参数。
(4)一种计算机程序,使计算机执行:
存储用于向在下述访问信息中定义的地址添加参数的预定定义的步 骤,所述访问信息用于对构成每条编码数据的多个子段中的每个子段进行 访问,所述每条编码数据通过以不同比特率对相同内容进行编码而获得, 或者所述访问信息用于访问在MPD中描述的要通过向服务器的请求来获 取的每个要素;以及
传输指令的步骤,所述指令用于基于存储在所述存储单元中的所述预 定定义来向在所述访问信息中定义的地址添加参数。
(5)一种将第(3)项所述的内容分发方法用于下述中之一的用途: 多视角图像编码、多视角图像解码、分层图像编码、分层图像解码和空间 可扩展编码。
附图标记列表
10、11 内容服务器
12 网络
20 内容再现设备
120 文件产生单元
122 编码器
130 存储单元
140 通信单元
220 通信单元
230 存储单元
240 再现单元
250 选择单元
260 当前位置获取单元
310 存储单元
Claims (10)
1.一种服务器设备,包括配置成执行以下操作的电路:
通过向媒体呈现描述MPD的统一资源定位符URL添加参数来生成新URL,其中所述参数是对参数描述的访问信息,所述参数描述指示使客户端设备描述要从所述客户端设备获取的信息;
向所述客户端设备传送所述新URL;
从所述客户端设备接收包括所述客户端设备的信息的请求,其中所述请求由所述客户端设备基于所述参数描述来生成;以及
基于所接收的请求,向所述客户端设备发送段。
2.根据权利要求1所述的服务器设备,其中,所述MPD包括用于访问内容的多个段中的每个段的访问信息,并且所述内容是通过以不同比特率对相同内容进行编码而获得的编码数据。
3.根据权利要求1所述的服务器设备,其中,所述参数描述用于在所述URL中添加地址信息。
4.根据权利要求1所述的服务器设备,其中,要从所述客户端设备获取的信息包括所述客户端设备的位置,并且从所述客户端设备发送的请求被重定向至与具有所述MPD的服务器设备不同的服务器设备。
5.一种内容分发方法,包括:
通过向媒体呈现描述MPD的统一资源定位符URL添加参数来生成新URL,其中所述参数是对参数描述的访问信息,所述参数描述指示使客户端设备描述要从所述客户端设备获取的信息;
向所述客户端设备传送所述新URL;
从所述客户端设备接收包括所述客户端设备的信息的请求,其中所述请求由所述客户端设备基于所述参数描述来生成;以及
基于所接收的请求,向所述客户端设备发送段。
6.根据权利要求5所述的内容分发方法,其中,所述MPD包括用于访问内容的多个段中的每个段的访问信息,并且所述内容是通过以不同比特率对相同内容进行编码而获得的编码数据。
7.根据权利要求5所述的内容分发方法,其中,所述参数描述用于在所述URL中添加地址信息。
8.根据权利要求5所述的内容分发方法,其中,要从所述客户端设备获取的信息包括所述客户端设备的位置,并且从所述客户端设备发送的请求被重定向至与具有所述MPD的服务器设备不同的服务器设备。
9.一种计算机可读存储介质,所述计算机可读存储介质存储有能够由处理器运行来执行以下操作的程序:
通过向媒体呈现描述MPD的统一资源定位符URL添加参数来生成新URL,其中所述参数是对参数描述的访问信息,所述参数描述指示使客户端设备描述要从所述客户端设备获取的信息;
向所述客户端设备传送所述新URL;
从所述客户端设备接收包括所述客户端设备的信息的请求,其中所述请求由所述客户端设备基于所述参数描述来生成;以及
基于所接收的请求,向所述客户端设备发送段。
10.一种将权利要求5所述的内容分发方法用于下述中之一的用途:多视角图像编码、多视角图像解码、分层图像编码、分层图像解码和空间可扩展编码。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910506108.0A CN110225421B (zh) | 2013-04-19 | 2014-04-16 | 客户端设备、内容分发方法及计算机可读存储介质 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2013-088874 | 2013-04-19 | ||
JP2013088874 | 2013-04-19 | ||
PCT/JP2014/060803 WO2014171473A1 (ja) | 2013-04-19 | 2014-04-16 | サーバ装置、クライアント装置、コンテンツ配信方法およびコンピュータプログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910506108.0A Division CN110225421B (zh) | 2013-04-19 | 2014-04-16 | 客户端设备、内容分发方法及计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105103565A CN105103565A (zh) | 2015-11-25 |
CN105103565B true CN105103565B (zh) | 2019-08-20 |
Family
ID=51731410
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480020476.XA Expired - Fee Related CN105103565B (zh) | 2013-04-19 | 2014-04-16 | 服务器设备、客户端设备、内容分发方法以及计算机程序 |
CN201910506108.0A Expired - Fee Related CN110225421B (zh) | 2013-04-19 | 2014-04-16 | 客户端设备、内容分发方法及计算机可读存储介质 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910506108.0A Expired - Fee Related CN110225421B (zh) | 2013-04-19 | 2014-04-16 | 客户端设备、内容分发方法及计算机可读存储介质 |
Country Status (12)
Country | Link |
---|---|
US (1) | US20160057467A1 (zh) |
EP (2) | EP2988516B1 (zh) |
JP (2) | JP6481205B2 (zh) |
KR (1) | KR102151297B1 (zh) |
CN (2) | CN105103565B (zh) |
AU (1) | AU2014254808B2 (zh) |
BR (1) | BR112015025871A8 (zh) |
CA (1) | CA2908242A1 (zh) |
MX (1) | MX353122B (zh) |
RU (1) | RU2668549C2 (zh) |
SG (1) | SG11201508357TA (zh) |
WO (1) | WO2014171473A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
AU2014354766B2 (en) * | 2013-11-27 | 2018-03-08 | Interdigital Patent Holdings, Inc. | Media presentation description |
MX2017015534A (es) * | 2015-06-09 | 2018-02-21 | Sony Corp | Aparato de recepcion, aparato de transmision, y metodo de procesamiento de datos. |
GB2548789B (en) * | 2016-02-15 | 2021-10-13 | V Nova Int Ltd | Dynamically adaptive bitrate streaming |
CN107241571B (zh) * | 2016-03-29 | 2019-11-22 | 杭州海康威视数字技术股份有限公司 | 一种多媒体文件封装、播放方法及装置 |
US10148989B2 (en) | 2016-06-15 | 2018-12-04 | Divx, Llc | Systems and methods for encoding video content |
US10924786B2 (en) * | 2019-05-08 | 2021-02-16 | Nanning Fugui Precision Industrial Co., Ltd. | Method for shaping video streams and set-up box using the method |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102082760A (zh) * | 2009-11-27 | 2011-06-01 | Tcl集团股份有限公司 | 一种网络书签及访问网络文件的方法 |
WO2012093877A2 (en) * | 2011-01-06 | 2012-07-12 | Samsung Electronics Co., Ltd. | Apparatus and method for generating bookmark in streaming service system |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7343422B2 (en) * | 2000-04-28 | 2008-03-11 | Adara Networks, Inc. | System and method for using uniform resource locators to map application layer content names to network layer anycast addresses |
TW200408227A (en) * | 2002-10-15 | 2004-05-16 | Matsushita Electric Ind Co Ltd | Digital item adaptation system via URL |
US7941554B2 (en) * | 2003-08-01 | 2011-05-10 | Microsoft Corporation | Sparse caching for streaming media |
US20070283274A1 (en) * | 2006-05-30 | 2007-12-06 | Microsoft Corporation | Strategies for Providing a Customized Media Presentation Based on a Markup Page Definition (MPD) |
US9380096B2 (en) * | 2006-06-09 | 2016-06-28 | Qualcomm Incorporated | Enhanced block-request streaming system for handling low-latency streaming |
US20110096828A1 (en) * | 2009-09-22 | 2011-04-28 | Qualcomm Incorporated | Enhanced block-request streaming using scalable encoding |
US8914835B2 (en) * | 2009-10-28 | 2014-12-16 | Qualcomm Incorporated | Streaming encoded video data |
CN102055718B (zh) * | 2009-11-09 | 2014-12-31 | 华为技术有限公司 | 一种在http streaming系统中实现分层请求内容的方法,装置和系统 |
KR101786050B1 (ko) * | 2009-11-13 | 2017-10-16 | 삼성전자 주식회사 | 데이터 전송 방법 및 장치 |
KR101777348B1 (ko) * | 2010-02-23 | 2017-09-11 | 삼성전자주식회사 | 데이터 전송 방법 및 장치와 데이터 수신 방법 및 장치 |
US9615119B2 (en) * | 2010-04-02 | 2017-04-04 | Samsung Electronics Co., Ltd. | Method and apparatus for providing timeshift service in digital broadcasting system and system thereof |
KR101768219B1 (ko) * | 2010-04-05 | 2017-08-14 | 삼성전자주식회사 | 방송시스템에서의 광고 삽입장치 및 방법 |
US20110307918A1 (en) * | 2010-06-11 | 2011-12-15 | Brian Shuster | Method and apparatus for interactive mobile coupon/offer delivery storage and redemption system using a receiving device and a second interactive device |
US8918533B2 (en) * | 2010-07-13 | 2014-12-23 | Qualcomm Incorporated | Video switching for streaming video data |
KR20120034550A (ko) * | 2010-07-20 | 2012-04-12 | 한국전자통신연구원 | 스트리밍 컨텐츠 제공 장치 및 방법 |
EP2613543B1 (en) * | 2010-09-01 | 2017-01-11 | Electronics And Telecommunications Research Institute | Method and device for providing content using http adaptive streaming |
US8849950B2 (en) * | 2011-04-07 | 2014-09-30 | Qualcomm Incorporated | Network streaming of video data using byte range requests |
JP2013021574A (ja) * | 2011-07-12 | 2013-01-31 | Sharp Corp | 生成装置、配信サーバ、生成方法、再生装置、再生方法、再生システム、生成プログラム、再生プログラム、記録媒体およびデータ構造 |
JP2013038766A (ja) * | 2011-07-12 | 2013-02-21 | Sharp Corp | 送信装置、送信装置の制御方法、制御プログラム、及び記録媒体 |
US20130263182A1 (en) * | 2012-03-30 | 2013-10-03 | Hulu Llc | Customizing additional content provided with video advertisements |
US20150172353A1 (en) * | 2012-07-11 | 2015-06-18 | Miska Hannuksela | Method and apparatus for interacting with a media presentation description that describes a summary media presentation and an original media presentation |
US8949206B2 (en) * | 2012-10-04 | 2015-02-03 | Ericsson Television Inc. | System and method for creating multiple versions of a descriptor file |
US9143543B2 (en) * | 2012-11-30 | 2015-09-22 | Google Technology Holdings LLC | Method and system for multi-streaming multimedia data |
US9396126B2 (en) * | 2013-01-30 | 2016-07-19 | Google Inc. | Clearing an application cache |
US8869218B2 (en) * | 2013-03-15 | 2014-10-21 | Wowza Media Systems, LLC | On the fly transcoding of video on demand content for adaptive streaming |
-
2014
- 2014-04-16 CN CN201480020476.XA patent/CN105103565B/zh not_active Expired - Fee Related
- 2014-04-16 SG SG11201508357TA patent/SG11201508357TA/en unknown
- 2014-04-16 CA CA2908242A patent/CA2908242A1/en not_active Abandoned
- 2014-04-16 EP EP14785824.5A patent/EP2988516B1/en active Active
- 2014-04-16 MX MX2015014187A patent/MX353122B/es active IP Right Grant
- 2014-04-16 JP JP2015512497A patent/JP6481205B2/ja not_active Expired - Fee Related
- 2014-04-16 EP EP19190068.7A patent/EP3591979B1/en active Active
- 2014-04-16 BR BR112015025871A patent/BR112015025871A8/pt active Search and Examination
- 2014-04-16 CN CN201910506108.0A patent/CN110225421B/zh not_active Expired - Fee Related
- 2014-04-16 US US14/783,461 patent/US20160057467A1/en not_active Abandoned
- 2014-04-16 WO PCT/JP2014/060803 patent/WO2014171473A1/ja active Application Filing
- 2014-04-16 RU RU2015143186A patent/RU2668549C2/ru active
- 2014-04-16 AU AU2014254808A patent/AU2014254808B2/en not_active Ceased
- 2014-04-16 KR KR1020157027227A patent/KR102151297B1/ko active IP Right Grant
-
2019
- 2019-01-25 JP JP2019010982A patent/JP2019110542A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102082760A (zh) * | 2009-11-27 | 2011-06-01 | Tcl集团股份有限公司 | 一种网络书签及访问网络文件的方法 |
WO2012093877A2 (en) * | 2011-01-06 | 2012-07-12 | Samsung Electronics Co., Ltd. | Apparatus and method for generating bookmark in streaming service system |
Also Published As
Publication number | Publication date |
---|---|
KR102151297B1 (ko) | 2020-09-02 |
BR112015025871A8 (pt) | 2019-12-31 |
US20160057467A1 (en) | 2016-02-25 |
JP6481205B2 (ja) | 2019-03-13 |
AU2014254808B2 (en) | 2018-04-12 |
MX2015014187A (es) | 2015-12-11 |
AU2014254808A1 (en) | 2015-09-24 |
EP3591979B1 (en) | 2021-06-02 |
EP2988516A4 (en) | 2016-12-07 |
CN110225421A (zh) | 2019-09-10 |
SG11201508357TA (en) | 2015-11-27 |
RU2015143186A (ru) | 2017-04-13 |
CN110225421B (zh) | 2021-07-06 |
BR112015025871A2 (pt) | 2017-07-25 |
EP2988516A1 (en) | 2016-02-24 |
MX353122B (es) | 2017-12-20 |
KR20150143462A (ko) | 2015-12-23 |
EP2988516B1 (en) | 2019-09-25 |
JP2019110542A (ja) | 2019-07-04 |
CA2908242A1 (en) | 2014-10-23 |
WO2014171473A1 (ja) | 2014-10-23 |
RU2668549C2 (ru) | 2018-10-02 |
EP3591979A1 (en) | 2020-01-08 |
JPWO2014171473A1 (ja) | 2017-02-23 |
CN105103565A (zh) | 2015-11-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
AU2018241185B2 (en) | Information processing device and method | |
CN105103565B (zh) | 服务器设备、客户端设备、内容分发方法以及计算机程序 | |
CN105122828B (zh) | 信息处理装置、内容请求方法以及计算机程序 | |
RU2645284C2 (ru) | Устройство для обработки изображений и способ | |
EP2984848A1 (en) | Associating representations in adaptive streaming | |
RU2007132740A (ru) | Способ и система обеспечения трансляции видеопрограммы |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20190820 |
|
CF01 | Termination of patent right due to non-payment of annual fee |