CN111344787B - 信息处理装置和方法、存储介质、回放装置、及回放方法 - Google Patents

信息处理装置和方法、存储介质、回放装置、及回放方法 Download PDF

Info

Publication number
CN111344787B
CN111344787B CN201880072003.2A CN201880072003A CN111344787B CN 111344787 B CN111344787 B CN 111344787B CN 201880072003 A CN201880072003 A CN 201880072003A CN 111344787 B CN111344787 B CN 111344787B
Authority
CN
China
Prior art keywords
playback
random access
picture
information
access point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880072003.2A
Other languages
English (en)
Other versions
CN111344787A (zh
Inventor
内村幸一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN111344787A publication Critical patent/CN111344787A/zh
Application granted granted Critical
Publication of CN111344787B publication Critical patent/CN111344787B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/309Table of contents
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/426Internal components of the client ; Characteristics thereof
    • H04N21/42646Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/84Television signal recording using optical recording
    • H04N5/85Television signal recording using optical recording on discs or drums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8233Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a character code signal

Abstract

本技术涉及一种信息处理装置、信息处理方法、存储介质、再现装置、再现方法、以及程序,其中,能够防止亮度在随机访问过程中出现不自然的变化。根据本技术的一方面的信息处理设备生成包括关于图片的亮度信息的动态元数据,并且对HDR视频的数据进行编码,以将动态元数据添加至用作随机访问点的每个图片。例如,能够将动态元数据添加至GOP的前置图片,以用作快进再现/倒带再现或提示再现的随机访问点。本技术可应用于蓝光(注册商标)光盘播放器。

Description

信息处理装置和方法、存储介质、回放装置、及回放方法
技术领域
本技术涉及一种信息处理装置、信息处理方法、记录介质、回放装置、回放方法、以及程序,并且具体地,涉及一种被设计成防止亮度在随机访问期间发生不自然的变化的信息处理装置、信息处理方法、记录介质、回放装置、回放方法、以及程序。
背景技术
超HD蓝光(注册商标)盘(UHD BD)是支持记录高动态范围(HDR)视频(即,具有可扩展动态范围的视频)的BD标准。尽管标准动态范围(SDR)的最大亮度是100尼特(100cd/m2),然而,HDR视频的最大亮度高于此值,诸如,10000尼特等。
作为HD视频流的元数据,在SMPTE ST 2094中对动态元数据进行了定义,动态元数据是包括基于图片(帧)的亮度信息的元数据。在添加了动态元数据的HDR视频流的回放过程中,将每个图片与动态元数据一起从播放器端发送至TV端。
在TV端,如果显示器的最大亮度低于HDR视频的亮度,则基于从BD播放器发送的动态元数据执行用于对HDR视频的亮度进行压缩的过程。
引用列表
专利文献
专利文献1:日本专利申请特开公开号2017-139052
发明内容
发明要解决的问题
在HDR视频的回放过程中可能出现随机访问。随机访问指涉及跳过一部分的回放,诸如特殊回放(恶意播放)(即,x倍速度的快进/倒带回放)或章节跳跃(提示回放)等。当用户给出执行该特殊回放或章节跳跃的指令时,发生随机访问。
根据针对随机访问进行的跳跃的目的地图片的状态,诸如其中不添加任何动态元数据的状态等,亮度可能出现不自然的变化。
鉴于该情形而展开本技术,并且本技术旨在防止亮度在随机访问期间出现不自然的变化。
问题的解决方案
根据本技术的第一方面的信息处理装置包括:生成单元,生成包括关于图片的亮度的信息的动态元数据;和编码单元,对HDR视频数据进行编码,使得将动态元数据添加至用作随机访问点的每个图片。
根据本技术的第二方面的回放装置包括:回放单元,执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;和输出控制单元,在将指示执行随机访问回放的预定信息叠加在图片上并且进行显示的情况下,将用于对随机访问回放期间进行亮度调整的随机访问回放期间所使用的元数据添加至用作随机访问点的图片;并且将添加了随机访问回放期间所使用的元数据的图片输出至显示装置。
在本技术的第一方面,生成包括关于图片的亮度的信息的动态元数据;并且对HDR视频数据进行编码,使得将动态元数据添加至用作随机访问点的每个图片。
在本技术的第二方面,执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;在将指示执行随机访问回放的预定信息叠加在图片上并且进行显示的情况下,将用于对随机访问回放期间进行亮度调整的随机访问回放期间所使用的元数据添加至用作随机访问点的图片;并且将添加了随机访问回放期间所使用的元数据的图片输出至显示装置。
发明效果
根据本技术,能够防止亮度在随机访问期间出现不自然的变化。
应注意,上述所述效果并非限制性并且可以包括本公开中描述的任意效果。
附图说明
[图1]是示出HDR内容回放系统的示例性配置的示图。
[图2]是示出HDR视频的亮度压缩所使用的色调曲线的示例的示图。
[图3]是示出在SMPTE ST 2094-40中定义的动态元数据的示图。
[图4]是示出BD文件结构的示图。
[图5]是示出AV流结构的示例的示图。
[图6]是示出动态元数据的传输的示例的示图。
[图7]是示出随机访问回放的示例的示图。
[图8]是示出在随机访问回放期间提供显示的示例的示图。
[图9]是示出HDR视频流中包括的GOP的示例的示图。
[图10]是示出根据BD-ROM格式的AV流管理结构的示例的示图。
[图11]是示出主路径和子路径的结构的示图。
[图12]是示出文件管理结构的示例的示图。
[图13]是示出记录装置的示例性配置的框图。
[图14]是示出图13中的控制器的示例性功能配置的框图。
[图15]是示出回放装置的示例性配置的框图。
[图16]是示出TV的示例性配置的框图。
[图17]是对记录装置的记录过程进行说明的流程图。
[图18]是对回放装置的回放过程进行说明的流程图。
[图19]是示出HDR视频流的示例的示图。
[图20]是示出剪辑信息的语法的示图。
[图21]是示出CPI()的语法的示图。
[图22]是示出EP_map()的语法的示图。
[图23]是示出EP_map_for_one_stream_PID的语法的示图。
[图24]是对记录装置的记录过程进行说明的流程图。
[图25]是示出在随机访问回放期间进行元数据传输的示例的示图。
[图26]是示出继亮度压缩之后进行显示的示图。
[图27]是示出图15中的控制器的示例性功能配置的框图。
[图28]是对回放装置的另一回放过程进行说明的流程图。
[图29]是对TV的显示过程进行说明的流程图。
[图30]是示出随机访问回放的示例的示图。
[图31]是对回放装置的又一回放过程进行说明的流程图。
[图32]是示出HDR内容回放系统的示例性配置的示图。
[图33]是示出回放装置的另一示例性配置的示图。
[图34]是示出另一HDR内容回放系统的示例性配置的示图。
[图35]是示出计算机的示例性配置的框图。
具体实施方式
现对用于完成本技术的方式进行描述。按照下面提及的顺序展开描述。
1.HDR视频的元数据
2.随机访问回放期间的亮度变化
3.第一实施方式(编码的限制性示例)
4.第二实施方式(其中使用默认元数据的示例)
5.回放系统的示例性配置
6.其他示例
<<针对HDR视频的元数据>>
图1是示出HDR内容回放系统的示例性配置的示图。
图1中的回放系统包括通过与诸如高清多媒体接口(HDMI)(注册商标)2.0a或HDMI2.1的预定标准兼容的电缆而连接至彼此的回放装置1和TV(电视接收器)2。回放装置1与TV2还可以经由无线接口连接至彼此。
回放装置1是支持HDR内容的回放的装置(诸如UHD BD播放器)。将记录了HDR内容的BD加载到回放装置1的驱动中。通过回放装置1进行回放的内容包括音频数据以及HDR视频数据。
TV 2具有显示从外面输入的视频的功能以及接收并且显示通过包括广播波和网络的传输线发送的广播节目的功能。TV 2包括支持显示具有大于100尼特的亮度的HDR视频的显示设备。
例如,在开始传输HDR视频之前,回放装置1与TV 2通过将关于其相应性能能力的信息传送至彼此并且从彼此接收关于其相应性能能力的信息而设置HDMI传输配置。例如,回放装置1通知TV 2将发送HDR视频。进一步地,TV 2将TV 2上的显示器的最大亮度通知给回放装置1。
在传输配置之后,回放装置1对从BD读取的HDR视频流进行解码并且将HDR视频中的各个图片输出至TV 2。TV 2接收并且显示从回放装置1发送的各个图片。
在操作期间,在TV 2中,根据显示器的性能能力适当地执行调整(压缩)从回放装置1发送的HDR视频的亮度的过程。在通过回放装置1输出的HDR视频的亮度高于TV 2的显示器的最大亮度的情况下,执行亮度压缩。
图1中的示例假设了通过回放装置1输出的HDR视频的亮度是1000尼特并且TV 2的显示器的最大亮度是500尼特。
图2是示出HDR视频的亮度压缩所使用的色调曲线的示例的示图。
在图2中,水平轴表示输入信号的亮度,而垂直轴表示输出(显示器)的亮度。例如,在TV 2端上执行利用如SMPTE ST 2084中定义的感知量化(PQ)曲线进行处理的电光传递函数(EOTF),并且对HDR视频的亮度进行压缩,以落在其最大亮度是500尼特的显示器的亮度范围内。
应注意,其浅色和深色表示法不再是由图2中的箭头指示的线性的点被称为拐点。
由此,在图1的回放系统中,在TV 2的显示器相对于通过回放装置1输出的HDR视频的亮度不具有足够的亮度的情况下,在TV 2端上执行亮度压缩。
作为亮度压缩的补充信息,将包括关于内容的亮度的信息的元数据从回放装置1发送至TV 2。例如,将动态元数据从回放装置1发送至TV 2。
在SMPTE ST 2094中对动态元数据进行了标准化,即,基于图片动态地表示关于内容的亮度的信息的元数据。
图3是示出在SMPTE ST 2094-40中定义的动态元数据的示图。
如图3中的第一行所示,在动态元数据中描述了关于在帧中设置的窗口的信息。窗口是在帧中设置的矩形区域。在单个帧中能够设置多至三个窗口。
对于在帧中设置的每个窗口,描述了在第2行至第14行中示出的各个参数。
窗口大小和窗口位置表示窗口的大小和位置。
内部椭圆形大小和内部椭圆形位置表示内部椭圆形的大小和位置,即,在窗口中设置两个椭圆形中的一个椭圆形。允许在窗口中设置椭圆形,以使得能够指定椭圆形中的亮度。
外部椭圆形大小和外部椭圆形位置表示外部椭圆形的大小和位置,即,在窗口中设置两个椭圆形中的一个椭圆形。
旋转角表示在窗口中设置的两个椭圆形的倾斜度。
重叠过程选项表示用于对椭圆形中的像素进行处理的方法。
maxscl表示窗口中的最亮像素的RGB值。
平均max rgb表示窗口中的各个像素的最大R、G、以及B值的平均值。
分配max rgb百分比将窗口中的最高亮度的排名表示为百分比。
分配max rgb百分位将窗口中的最高亮度的排名表示为排名顺序(百分位)。
部分亮像素表示在什么范围内输出情景中具有最大亮度值的图像。
拐点表示上述所述拐点处的亮度值。
贝塞尔(Bezier)曲线锚点表示具有超过拐点的明亮度的采样x、y。
色彩饱和度权重表示对在目标显示器进行亮度压缩期间改变的RGB值进行校正所使用的值。
目标系统显示器最大亮度表示目标显示器的亮度。利用目标系统显示器最大亮度,确定在该显示器上显示内容的假设下而创建的内容。
局部显示器亮度表示对显示器进行划分的2×2区域至25×25区域中的每个区域的最大亮度值。
局部主显示器亮度表示对主显示器进行划分的2×2区域至25×25区域中的每个区域的最大亮度值。
从上面看出,动态元数据中的第1行至第15行中的参数表示帧的属性(帧中的窗口)。进一步地,第16行和第17行中的参数表示目标显示器的属性,并且第18行中的参数表示创建内容所使用的显示器的属性。
图4是示出BD文件结构的示图。
图4中的光盘11是以BD格式记录HDR视频的内容的记录介质。
如后面详细描述的,将具有m2ts扩展的AV流文件存储在设置在BDMV目录下方的STREAM目录中。
AV流文件是通过根据MPEG-2对HDR视频流、音频流、字幕流等进行多路复用而获得的MPEG-2TS文件。在图4的示例中,将AV流文件“01000.m2ts”、“02000.m2ts”、以及“03000.m2ts”存储在STREAM目录中。
HDR视频流是根据例如高效视频编码(HEVC)的编码流。根据HEVC,将动态元数据作为补充增强信息(SEI)消息包括在HDR视频流中。
图5是示出被封装在图4的帧F1中的AV流“03000.m2ts”的示例性结构的示图。
如图5中的最上面一行所示,AV流“03000.m2ts”包括各自存储视频数据、音频数据、字幕数据等的TS包。将视频TS包一起放置于视频基本流中。
视频基本流包括访问单元阵列,其中,每个访问单元表示HDR视频中的单个图片的数据。每个访问单元包括伴随诸如SPS和PPS的参数的AU分界符并且还包括由帧F11封装和指示的SEI消息。
SEI消息包括上述所述动态元数据。应注意,在SEI消息之后,包括被指定为图片数据的HDR视频数据。
以这种方式,在BD上,以这样一种方式将动态元数据包括在HDR视频流中,即,将动态元数据添加至每个图片,并且利用音频流及其他对动态元数据进行多路复用。
应注意,HDR视频流中所包括的图片可以包括不添加动态元数据的图片。
图6是示出动态元数据的传输的示例的示图。
如图6中示出的,动态元数据与通过对HDR视频流进行解码而获得的每个图片相关联并且从回放装置1被发送至TV 2。在TV 2中,基于与每个图片一起发送的动态元数据而对每个图片执行亮度压缩。
<<随机访问回放过程中的亮度变化>>
回放装置1具有执行随机访问回放的功能,即,涉及随机访问的回放方法。
随机访问指沿着HDR视频流中包括的图片序列进行跳跃,针对从一个图片至另一图片进行回放的图片、而非邻近于一个图片的图片进行跳跃。
随机访问回放包括特殊回放和提示回放。特殊回放指x倍速度的快进回放/倒带回放,其中,x是预定数量,诸如5x或8x速度等。此外,提示回放指包括跳跃至包含章节设置的图片或与之前特定时间对应的图片并且从跳跃目的地图片开始回放的回放方法。
图7是示出随机访问回放的示例的示图。
作为示例,下面描述在即将对图片P1进行回放的时间给出执行提示回放的指令并且进行从由图7中的箭头A1指示的图片P1至图片P2的跳跃的情况。
在给出执行提示回放的指令之前,将位于图片P1之前(左侧)的各个图片与被添加至相应图片的动态元数据一起输出至TV 2。进一步地,将图片P1与被添加至图片P1的动态元数据一起输出至TV 2。
进一步地,当给出执行提示回放的指令时,在TV 2端上与针对图片P2的亮度压缩所使用的元数据一起输出图片P2。此处,如由双箭头指示的,在图片P2位于其中不添加动态元数据的部分内的情况下,可能与图片P2一起输出各种类型的任意元数据。
例如,可能使将图片P1(从其进行跳跃)的动态元数据与图片P2一起从回放装置1输出至TV 2。在这种情况下,基于图片P1的动态元数据,在TV 2中执行对图片P2的亮度压缩。
进一步地,可能使将添加了动态元数据并且仅位于图片P2之前的图片(即,图片P3)的动态元数据与图片P2一起从回放装置1输出至TV 2。在这种情况下,基于图片P3的动态元数据,在TV 2中执行对图片P2的亮度压缩。
在任意情况下,图片P2(即,跳跃目的地图片)可能进行HDR内容的制作者所不期望的亮度压缩。因此,图片P2的外观与HDR内容的制作者所预期的外观不同。
图8是示出在随机访问回放期间提供显示的示例的示图。
图8中的水平轴表示时间。图片P11、P12、以及P13按照所提及的顺序从回放装置1被发送至TV 2并且在TV 2中进行亮度压缩。
例如,响应由用户给出的指令,在回放装置1中分别对图片P11、P12、以及P13与OSD图像p11、p12、以及p13进行组合,以8x的速度执行快进回放。在图8的示例中,作为OSD图像,显示通过对表示快进回放的两个三角形的图像与具有表示8x速度的特性的水平长带图像进行组合而获得的图像。
当给出执行倒带回放的指令时,显示类似的OSD图像。同样,当给出执行提示回放的指令时,显示包括跳跃目的地章节编号等的OSD图像。
例如,假设图片P12包括具有比图片P11和P13更高亮度的情景。
基于由与图片P11一起发送的动态元数据表示的色调曲线C1对与OSD图像p11相结合的图片P11执行亮度压缩。基于由与图片P12一起发送的动态元数据表示的色调曲线C2而对与OSD图像p12相结合的图片P12执行亮度压缩。基于由与图片P13一起发送的动态元数据表示的色调曲线C3而对与OSD图像p13相结合的图片P13执行亮度压缩。
包括高亮情景的图片P12的亮度压缩所使用的色调曲线C2表示比图片P11的亮度压缩所使用的色调曲线C1和图片P13的亮度压缩所使用的色调曲线C3进行更为密集地压缩。OSD图像p12的亮度也比图片P11和P13各自上的OSD图像的亮度进行更为密集地压缩。
因此,如图8中示出的,当在外观方面比较进行亮度压缩之后的各个图片上的OSD图像时,显示图片P12上的OSD图像p12具有比图片P11和P13上的OSD图像更低的亮度。在图8中,以浅色示出的OSD图像p12表示OSD图像具有比图片P11和P13上的OSD图像更低的亮度。
当依次显示图片P11至P13时,在显示图片P12的时间,OSD图像的亮度下降一个等级,并且相应地,外观可能根据亮度压缩的程度而不自然。例如,在涉及更大亮度变化的连续情景的情况下,OSD图像看上去可能是闪动的。
从上面看出,当对包括动态元数据的HDR视频流执行随机访问回放时,如果不将动态元数据添加至跳跃目的地图片,则HDR视频看上去可能是不自然的。进一步地,被叠加在HDR视频上的OSD图像看上去可能也是不自然的。
<<第一实施方式(编码的限制性示例)>>
<其中将动态元数据强制添加至GOP的第一图片的示例>
图9是示出HDR视频流中包括的GOP的示例的示图。
例如,光盘11上记录的HDR视频流是根据高效视频编码(HEVC)的编码流并且由以GOP为单位的图片构成。图9中的示例示出了GOP 1和GOP 2。
在HDR视频流包括的图片之中,将动态元数据至少分别添加至图片P1和图片P2,即,GOP 1的第一图片和GOP 2的第一图片。图片P1和图片P2(就显示顺序而言,其各自是GOP的第一图片)是用作随机访问点的图片。
换言之,光盘11上记录的HDR视频流是在将动态元数据强制添加至用作随机访问点的图片的约束条件下而生成的流。
执行快进回放和倒带回放,以使得例如仅依次对其相应GOP的第一图片进行回放。回放装置1将每个GOP的第一图片与被添加至每个GOP的第一图片的动态元数据一起输出至TV 2,第一图片用作随机访问点。
进一步地,执行提示回放,以使得从特定GOP的第一图片开始回放。回放装置1将特定GOP的第一图片与被添加至图片的动态元数据一起输出至TV 2,第一图片用作随机访问点。
在TV 2中,基于与GOP的第一图片一起发送的动态元数据,对GOP的第一图片执行亮度压缩,第一图片用作随机访问点。显示进行亮度压缩的图片,由此完成快进回放/倒带回放或提示回放。
由此,将动态元数据强制添加至用作随机访问点的图片,这使得可以防止跳跃目的地图片以HDR内容的制作者所不期望的方式进行亮度压缩。
应注意,尽管假设光盘11上记录的HDR视频流是根据HEVC的编码流,然而,根据诸如AVC(H.264/MPEG-4高级视频编码(AVC))等另一方法,通过编码可以生成HDR视频流。
AVC视频流包括构成诸如译码视频序列(CVS)等编码单元的单元。在将动态元数据强制添加至CVS的第一图片的约束条件下,通过执行编码而生成AVC视频流,第一图片用作随机访问点。
进一步地,代替被记录在光盘11上,经由诸如互联网的网络可以分配在将动态元数据强制添加至用作随机访问点的图片的约束条件下而生成的HDR视频流。后面将描述对在该约束条件下生成的HDR视频流进行分配的系统的配置。
<BD格式>
此处,对BD-ROM格式进行描述。
-数据管理结构
图10是示出根据BD-ROM格式的AV流管理结构的示例的示图。
通过使用两层:播放列表和剪辑(PlayList and Clip),管理AV流。AV流不仅可以被记录在光盘11上,而且还可以被记录在回放装置1的本地存储器上。
将成对的一个AV流及被称为剪辑信息的其关联信息作为一个对象进行管理。成对的AV流与剪辑信息被称为剪辑。
AV流沿着时间轴延伸,并且主要通过播放列表中的时间戳而指定每个剪辑的访问点。例如,剪辑信息用于包括查找地址(在AV流中,从其开始解码)之目的。
播放列表是AV流中的一组回放部分。将AV流中的单个回放部分称为播放项。播放项由回放部分在时间轴上的入点和出点表示。如图10中示出的,播放列表包括一个或多个播放项。
图10中的左侧的第一播放列表包括两个播放项,并且这两个播放项分别指左侧剪辑中包括的AV流的第一半AV流和第二半AV流。
左侧的第二播放列表包括一个播放项,并且一个播放项指右侧的剪辑中所包括的整个AV流。
左侧的第三播放列表包括两个播放项,并且这两个播放项分别指左侧剪辑中所包括的AV流的特定部分和右侧剪辑中所包括的AV流的特定部分。
例如,当光盘导航程序指定左侧的第一播放列表中所包括的左侧播放项作为回放目标时,对播放项所指的左侧剪辑中包括的AV流的第一半AV流进行回放。
在播放列表中,将利用一个或多个播放项的阵列创建的回放路径称为主路径。进一步地,在播放列表中,将利用一个或多个子播放项的阵列创建、与主路径并行的回放路径称为子路径。
图11是示出主路径和子路径的结构的示图。
播放列表具有一个主路径和一个或多个子路径。图11中的播放列表具有一个主路径和三个子路径,并且利用三个播放项的阵列创建主路径。
从开始将序列ID赋予给主路径中包括的各个播放项。同样,从开始将序列ID,即,Subpath_id=0、Subpath_id=1、以及Subpath_id=2,赋予给子路径。
在图11的示例中,Subpath_id=0的子路径包括一个子播放项,并且Subpath_id=1的子路径包括两个子播放项。进一步地,Subpath_id=2的子路径包括一个子播放项。
单个播放项所指的AV流至少包括视频流。AV流可以包括或可以不包括与AV流中包括的视频流在同一时刻(同步)进行回放的一个或多个音频流。
AV流可以包括或可以不包括与AV流中包括的视频流同步进行回放的一个或多个位图字幕(显示图形(PG))流。
AV流可以包括或可以不包括与AV流中包括的视频流同步进行回放的一个或多个交互图形(IG)流。IG流用于显示诸如由用户操作的按钮的图形。
在单个播放项所指的AV流中,将视频流与音频流、PG流、以及IG流进行多路复用而与其进行同步回放。
进一步地,单个子播放项指与播放项所指的AV流不同的流中的视频流、音频流、PG流等。
以这种方式,通过使用播放列表和剪辑信息对AV流进行回放。根据需要,将用于管理AV流的回放的回放控制信息,即,索引表、播放列表、以及剪辑信息,称为数据库信息。
-目录结构
图12是示出光盘11上所记录的文件的示例性管理结构的示图。
在目录结构中对光盘11上所记录的各个文件进行分级管理。在光盘11上创建一个根目录。
在根目录下放置BDMV目录。
在BDMV目录下,存储被命名为“Index.bdmv”的索引表文件和被命名为“MovieObject.bdmv”的电影对象文件。在索引表文件中对索引表进行了描述。
在BDMV目录下,设置了播放列表(PLAYLIST)目录、剪辑信息(CLIPINF)目录、流(STREAM)目录、以及其他。
播放列表(PLAYLIST)目录包含其中描述播放列表的播放列表文件。每个播放列表文件被赋予通过将五位数与扩展名“.mpls”组合而创建的名称。图12中所示的三个播放列表文件被赋予文件名称“00000.mpls”、“00001.mpls”、以及“00002.mpls”。
剪辑信息(CLIPINF)目录包含剪辑信息文件。每个剪辑信息文件被赋予通过将五位数与扩展名“.clpi”组合而创建的名称。图12中的三个剪辑信息文件分别被赋予文件名称“01000.clpi”、“02000.clpi”、以及“03000.clpi”。
流(STREAM)目录包含上述所述AV流的文件。每个AV流文件被赋予通过将五位数与扩展名“.m2ts”组合而创建的名称。图12中的三个AV流文件分别被赋予文件名称“01000.m2ts”、“02000.m2ts”、以及“03000.m2ts”。
与文件名称被赋予相同五位数的剪辑信息文件和AV流文件构成单个剪辑。当对AV流文件“01000.m2ts”进行回放时,使用剪辑信息文件“01000.clpi”。当对AV流文件“02000.m2ts”进行回放时,使用剪辑信息文件“02000.clpi”。
<各个装置的配置>
-记录装置的配置>
图13是示出记录装置3的示例性配置的框图。
在图13的记录装置3上创建光盘11,即,上述所述BD。记录装置3是用于对HDR内容进行授权而使用的装置。
记录装置3包括控制器21、编码处理单元22、以及光盘驱动23。将主视频输入至编码处理单元22。
控制器21包括中央处理单元(CPU)、只读存储器(ROM)、随机访问存储器(RAM)、以及其他。控制器21运行预定程序并且控制记录装置3的全部操作。
编码处理单元22对主视频进行编码而生成HDR视频流。控制器21供应在HDR流的生成过程中被添加至每个图片并且被编码成SEI消息的动态元数据。
编码处理单元22在将动态元数据强制添加至用作随机访问点的图片的约束条件下执行编码。
进一步地,如果需要,编码处理单元22则通过对菜单图像进行编码而生成IG流并且通过对字幕数据进行编码而生成PG流。还将包括菜单图像、字幕数据等的信息输入至编码处理单元22。
编码处理单元22通过对HDR视频流、IG流、以及PG流(通过编码而获得)与视频流及其他进行多路复用而生成AV流,即,构成剪辑的一部分。编码处理单元22将所生成的AV流输出至光盘驱动23。
根据图12中的目录结构,光盘驱动23将从控制器21供应的各个数据库信息文件和从编码处理单元22供应的AV流文件记录在光盘11上。
图14是示出控制器21的示例性功能配置的框图。
在控制器21中,实现动态元数据生成单元31、编码控制单元32、数据库信息生成单元33、以及记录控制单元34。通过预定程序的运行实现图14中示出的功能单元的至少一部分,通过控制器21中的CPU执行该运行。
动态元数据生成单元31根据由内容制作者提供的输入而将各个参数设置为指定的值并且生成动态元数据。动态元数据生成单元31将所生成的动态元数据输出至编码控制单元32。
编码控制单元32将通过动态元数据生成单元31生成的动态元数据输出至编码处理单元22并且使编码处理单元22对HDR视频中的各个图片进行编码。进一步地,编码控制单元32使编码处理单元22对菜单数据和字幕数据进行编码。
数据库信息生成单元33根据由内容制作者提供的输入而生成包括索引表、播放列表、剪辑信息等的数据库信息。数据库信息生成单元33将包含所生成的数据库信息的文件输出至记录控制单元34。根据需要,将通过数据库信息生成单元33生成的数据库信息供应至编码控制单元32,以使得使用数据库信息控制编码。
记录控制单元34将包含通过数据库信息生成单元33生成的数据库信息的文件输出至光盘驱动23并且使光盘驱动23将文件记录在光盘11上。
以这种方式,记录装置3通过生成动态元数据并且在将动态元数据强制添加至用作随机访问点的图片的约束条件下执行编码而用作生成HDR视频流的信息处理装置。
-回放装置的配置
图15是示出回放装置1的示例性配置的框图。
回放装置1包括控制器51、光盘驱动52、存储器53、本地存储器54、通信单元55、解码处理单元56、操作输入单元57、以及外部输出单元58。
控制器51包括CPU、ROM、RAM等。控制器51运行预定的程序并且控制回放装置1的全部操作。
光盘驱动52读取光盘11上所记录的数据并且将数据输出至控制器51、存储器53、或解码处理单元56。例如,在将AV流输出至解码处理单元56的同时,光盘驱动52将从光盘11中读取的数据库信息输出至控制器51。
存储器53存储控制器51所需的数据,以运行诸如由控制器51运行的程序的各个过程。
本地存储器54包括诸如硬盘驱动(HDD)或固态驱动(SSD)的记录介质。将从服务器下载的流及其他数据记录在本地存储器54中。
通信单元55是用于无线LAN、有线LAN等的接口。例如,通信单元55经由诸如互联网的网络与服务器通信并且将从服务器下载的数据供应至本地存储器54。
解码处理单元56对被多路复用至从光盘驱动52供应的AV流中的HDR视频流进行解码并且将通过解码而获得的HDR视频流输出至外部输出单元58。
进一步地,解码处理单元56对被多路复用至AV流中的音频流进行解码并且将通过解码而获得的音频数据输出至外部输出单元58。尽管描述集中于视频回放,然而,通过回放装置1进行回放的HDR内容也包括音频数据。
操作输入单元57包括诸如按钮或触摸面板的输入设备、和接收诸如从远程控制器发送的红外线信号的信号的接收单元。操作输入单元57对用户操作进行检测并且将表示所检测操作的细节的信号供应至控制器51。
外部输出单元58是用于诸如HDMI的外部输出的接口。外部输出单元58经由HDMI电缆与TV 2通信、并且获取关于TV 2中包括的显示器的性能能力的信息并且将信息输出至控制器51。进一步地,外部输出单元58接收从解码处理单元56供应的HDR视频数据并且将数据输出至TV 2。
-TV配置
图16是示出TV 2的示例性配置的框图。
TV 2包括控制器71、外部输入单元72、信号处理单元73、显示器74、广播接收单元75、解码处理单元76、以及通信单元77。
控制器71包括CPU、ROM、RAM等。控制器71运行预定的程序并且控制TV 2的全部操作。
例如,控制器71管理指示显示器74的性能能力的信息。在HDMI传输配置中,控制器71将指示显示器74的性能能力的信息输出至外部输入单元72,以将信息传送至回放装置1。
进一步地,控制器71对信号处理单元73进行控制,以执行HDR视频的处理。例如,在HDR内容的回放过程中,控制器71使信号处理单元73基于从回放装置1发送的动态元数据对HDR视频执行亮度压缩。
外部输入单元72是用于诸如HDMI的外部输入的接口。外部输入单元72经由HDMI电缆与回放装置1通信、并且接收表示从回放装置1发送的HDR视频中的各个图片的数据并且将数据输出至信号处理单元73。进一步地,外部输入单元72接收与HDR视频中的每个图片一起发送的动态元数据并且将动态元数据输出至控制器71。
信号处理单元73执行从外部输入单元72供应的HDR视频的处理,以使得在显示器74上显示视频图像。信号处理单元73根据需要在控制器71的控制下对HDR视频执行亮度压缩,以使得亮度落在显示器74的显示能力范围内。
例如,信号处理单元73还执行使显示器74基于从解码处理单元76供应的数据显示广播节目的视频图像的过程。
显示器74是诸如有机电致发光(EL)显示器或液晶显示器(LCD)的显示设备。显示器74基于从信号处理单元73供应的视频信号显示HDR内容的视频图像、广播节目的视频图像等。
广播接收单元75从天线供应的信号中提取预定信道的广播信号并且将广播信号输出至解码处理单元76。广播接收单元75在控制器71的控制下提取广播信号。
解码处理单元76执行诸如从广播接收单元75供应的广播信号的解码的处理并且将广播节目的视频数据输出至信号处理单元73。
通信单元77是用于无线LAN、有线LAN等的接口。通信单元77经由互联网与服务器通信。
<各个装置的操作>
-记录装置的操作
参考图17中的流程图,下面描述记录装置3的记录过程。
例如,当输入用作主要数据(master)的视频数据时,开始图17中的过程。
在步骤S1中,控制器21中的动态元数据生成单元31根据由内容制作者提供的输入将各个参数设置为指定的值并且生成动态元数据。
在步骤S2中,数据库信息生成单元33生成诸如播放列表的数据库信息。
在步骤S3中,编码处理单元22在编码控制单元32的控制下并且在将动态元数据强制添加至GOP的第一图片(第一图片用作随机访问点)的约束条件下对主视频进行编码并且生成HDR视频流。
进一步地,编码处理单元22对菜单数据和字幕数据进行编码,以生成IG流和PG流。编码处理单元22通过对所生成的流进行多路复用而生成AV流。
在步骤S4中,光盘驱动23通过记录从控制器21供应的数据库信息的文件和从编码处理单元22供应的AV流的文件而生成光盘11。之后,退出过程。
上述过程允许记录装置3生成其中将动态元数据添加至GOP的第一图片的HDR视频流(第一图片用作随机访问点)并且提供包括该HDR视频流的HDR内容。
-回放装置的操作
接着,参考图18中的流程图,下面描述了回放装置1对HDR内容进行回放的过程。
例如,当将光盘11装载到回放装置1的光盘驱动52中并且给出对HDR内容进行回放的指令时,开始图18中的过程。
在步骤S11中,光盘驱动52从光盘11中读取包括播放列表文件的数据库信息文件。
在步骤S12中,例如,控制器51对播放列表文件进行分析,以识别待回放的AV流。
在步骤S13中,光盘驱动52从光盘11中读取包括待回放的HDR视频流的AV流文件。
在步骤S14中,解码处理单元56对从光盘驱动52供应的AV流中包括的HDR视频流进行解码并且将每个图片数据片段输出至外部输出单元58。将被添加至每个图片的动态元数据从解码处理单元56供应至控制器51。
在步骤S15中,外部输出单元58将从控制器51供应的动态元数据添加至从解码处理单元56供应的HDR视频中的各个单个图片并且将合成图片输出至TV 2。在TV 2中,基于动态元数据对每个图片执行亮度压缩,并且显示已经进行亮度压缩的图片。
在步骤S16中,控制器51判断是否执行随机访问回放。如果在步骤S16中判断不执行随机访问回放,处理则返回至步骤S15,以继续其中对图片进行连续回放的正常回放。
另一方面,如果在步骤S16中判断执行随机访问回放,处理则进行至步骤S17。例如,如果用户给出执行快进回放/倒带回放的指令,或如果用户给出执行提示回放的指令,则在步骤S16中判断执行随机访问回放。
在步骤S17中,解码处理单元56对用作随机访问点的跳跃目的地图片进行解码。在该步骤中,被解码的图片是GOP的第一图片并且将动态元数据添加至第一图片。将解码图片的SEI中所包括的动态元数据供应至控制器51。
在步骤S18中,外部输出单元58将从控制器51供应的动态元数据添加至用作随机访问点的图片并且将合成图片输出至TV 2。
之后,处理返回至步骤S16,以重复上述过程步骤。例如,在用户指示的随机访问回放是快进回放/倒带回放的情况下,依次对其相应GOP中的第一图片进行回放并且与动态元数据一起输出其相应GOP中的第一图片。例如,当HDR内容的回放结束时,退出图18中的过程。
如上所述,将动态元数据强制添加至用作随机访问点的图片。因此,即使执行随机访问回放,使得也可以防止跳跃目的地图片以HDR内容制作者所不期望的方式进行亮度压缩。
<其中将动态元数据强制添加至由EP_map指定的图片的示例>
数据库信息中所包括的剪辑信息包括被称为EP_map、指定了随机访问点的信息。
可以通过将动态元数据强制添加至与由EP_map指定的随机访问点对应的图片的方式对HDR视频数据进行编码。
图19是示出包括由EP_map指定为随机访问点的图片的示例性HDR视频流的示图。
在图19的上半部分中示出的EP_map包含关于有关入口点(随机访问点):EP入口1和EP入口2的信息的描述。EP入口1和EP入口2中的每个是指示入口点的显示时间戳(PTS)和由HDR视频流上的源包编号(SPN)表示的入口点的位置的信息。
在图19的示例中,由EP入口1指定图片P21并且由EP入口2指定图片P22。在HDR视频流包括的图片中,将动态元数据至少添加至分别由EP入口1和EP入口2指定的图片P21和图片P22。
例如,当给出执行从特定入口点开始的提示回放的指令时,回放装置1将由RP入口指定的图片与被添加至图片的动态元数据一起输出至TV 2。
在TV 2中,基于与图片一起发送的动态元数据对由EP入口指定的图片执行亮度压缩。显示已经进行亮度压缩的图片,由此完成提示回放。
以这种方式,可以将动态元数据强制添加至由剪辑信息(即,与HDR视频流分离的文件中的信息)中包括的EP_map所指定的图片。因此,使得可以防止跳跃目的地图片以HDR内容制作者所不期望的方式进行亮度压缩。
应注意,通过回放装置1可以对根据MP4进行多路复用而创建的HDR内容进行回放。
通过根据MP4进行多路复用而创建的HDR内容包括通过根据诸如AVC或HEVC的特定编码方法对HDR视频数据进行编码而获得的HDR视频流,并且还包括电影片段随机访问框(mfra),即,用于HDR视频流的回放控制信息。
mfra中包括指示随机访问点的信息,在MP4 HDR内容包括的HDR视频流图片中,将动态元数据至少添加至由mfra中包括的信息指定的图片。因此,使得还可以防止跳跃目的地图片以HDR内容制作者所不期望的方式进行亮度压缩。
还通过具有与图13和图14示出的配置相似的配置的信息处理装置生成该MP4格式的HDR内容。例如,根据MP4格式将通过编码处理单元22生成的HDR视频流与通过数据库信息生成单元33生成的mfra进行多路复用,由此生成HDR内容。
<关于剪辑信息中的EP_map>
图20是示出剪辑信息的语法的示图。下面描述了剪辑信息中所包括的主要描述。
如图20所示,剪辑信息分别包括ClipInfo()、SequenceInfo()、ProgramInfo()、CPI()、ClipMark()、以及ExtensionData()的描述。
ClipInfo()是其中描述使用剪辑信息对关于AV流的属性的信息进行回放的字段。
SequenceInfo()是其中描述关于AV流中包括的源包的序列的信息的字段。
ProgramInfo()是其中描述关于程序中包括的源包的序列的信息的字段。
CPI()是其中描述指示AV流的时间与位置之间的对应关系的信息的字段。CPI()中还包括EP_map的描述。
图21是示出CPI()的语法的示图。
如图21所示,CPI()包括CPI_type和EP_map()的描述。
如果CPI_type的值是1,CPI()则包括关于EP_map的信息。
图22是示出EP_map()的语法的示图。
stream_PID表示存储HDR视频数据的TS包的PID。
number_of_EP_coarse_entries表示EP_map()中包括的EP-coarse-entries的数量。例如。EP-coarse-entry是关于具有以秒为单位的粗略准确度的入口点的信息。
number_of_EP_fine_entries表示EP_map()中包括的EP-fine-entries的数量。EP-fine-entry是关于具有比EP-coarse-entries更高的准确度的入口点的信息。由一组EP-coarse-entry和EP-fine-entry指定入口点。
EP_map_for_one_stream_PID包括关于相应EP-coarse-entries和EP-fine-entries的信息。
图23是示出EP_map_for_one_stream_PID的语法的示图。
PTS_EP_coarse[i]表示EP-coarse-entry的PTS(时间)。
SPN_EP_coarse[i]表示与PTS_EP_coarse[i]对应的HDR视频流上的源包(位置)。
PTS_EP_fine[i]表示EP-fine-entry的PTS。
SPN_EP_fine[i]表示与PTS_EP_fine[i]对应的HDR视频流上的源包。
在基于EP_map执行随机访问回放的情况下,回放装置1对EP_map_for_one_stream_PID进行分析,以执行包括识别源包在HDR视频流上的位置的过程的过程,例如,源包包含用作入口点的图片数据。如上所述,将动态元数据添加至用作入口点的图片。
<记录装置的操作>
参考图24中的流程图,下面描述了记录装置3将动态元数据添加至用作由EP_map指定的入口点的图片而生成HDR视频流的记录过程。
图24中的过程与参考图17描述的过程相似,但对主视频的编码的约束条件是不同的。根据需要省去重复性的描述。
具体地,在步骤S31中,控制器21中的动态元数据生成单元31根据由内容制作者提供的输入将各个参数设置为指定的值并且生成动态元数据。
在步骤S32中,数据库信息生成单元33生成包括播放列表的数据库信息、包含EP_map的描述的剪辑信息等。数据库信息生成单元33将关于EP_map中描述的每个入口点(EP入口)的信息输出至编码控制单元22。
在步骤S33中,编码处理单元22在编码控制单元32的控制下并且在将动态元数据强制添加至用作由EP_map指定的入口点的图片的约束条件下对主视频进行编码、并且生成HDR视频流。
在步骤S34中,光盘驱动23通过记录从控制器21供应的数据库信息的文件和从编码处理单元22供应的AV流的文件而生成光盘11。之后,退出过程。
上述过程允许记录装置3生成其中将动态元数据添加至用作由EP_map指定的随机访问点的图片的HDR视频流、并且提供包括该HDR视频流的HDR内容。
<变形>
上面描述了将动态元数据添加至GOP的第一图片的情况和将动态元数据添加至由EP_map指定的图片的情况,但是,可以组合使用这些约束条件。
换言之,能够通过将动态元数据强制添加至GOP的第一图片和由EP_map指定的图片的方式对HDR视频流进行编码。
在不将动态元数据添加至跳跃目的地图片的情况下,可以将被添加至跳跃目的地图片附近的图片的动态元数据从回放装置1发送至TV 2并且用于对跳跃目的地图片进行亮度压缩。
<<第二实施方式(其中使用默认元数据的示例)>>
<其中在随机访问回放过程中使用默认元数据的示例>
图25是示出在随机访问回放期间进行元数据传输的示例的示图。
例如,在随机访问回放期间,在回放装置1中将表示随机访问回放的细节的OSD图像与跳跃目的地图片进行组合。将与OSD图像进行组合的图片与默认元数据、而非动态元数据一起输出至TV 2,即,在图25所示的随机访问回放过程中使用的元数据。
默认元数据具有与诸如参考图3描述的参数的动态元数据的参数相似的参数。例如,将默认元数据的各个参数设置为用于以适合的亮度显示各种类型的OSD图像的固定值。例如,以存储在回放装置1的存储器53中的方式提前准备回放装置1中的默认元数据。
图26是示出继亮度压缩之后进行显示的示图。
例如,如图26的左侧所示,当显示具有更高亮度的情景时,在给出执行诸如快进回放的随机访问回放的指令的情况下,将默认元数据与和OSD图像组合的跳跃目的地图片一起输出至TV 2。
在TV 2中,基于从回放装置1发送的默认元数据对与OSD图像组合的图片执行亮度压缩,从而导致HDR视频具有由箭头A12指示的降低亮度。换言之,在基于动态元数据执行亮度压缩之后,假设HDR视频具有由箭头A11指示的初始亮度,则实际显示的HDR视频比具有初始亮度的HDR视频更深。
因为在元数据中设置了OSD图像的合适值,所以OSD图像自身由于利用默认元数据执行的亮度压缩而具有由箭头A12指示的合适亮度。
如此,在随机访问回放期间,使用默认元数据对跳跃目的地图片进行亮度压缩,并且由此,各个图片中的OSD图像具有恒定水平的亮度,因此使得可以防止OSD图像看上去是闪动的。
-回放装置的配置和操作
图27是示出应用于在随机访问回放期间发送默认元数据的情况的控制器51的示例性功能配置的框图。回放装置1的配置与图15中的配置相同。
在控制器51中,实现了数据库信息分析单元101、输出控制单元102、以及默认元数据生成单元103。通过运行预定程序实现图27中示出的功能单元的至少一部分,通过控制器51中的CPU执行运行。
数据库信息分析单元101对从光盘驱动52供应的数据库信息进行分析并且将表示分析结果的信息输出至输出控制单元102和默认元数据生成单元103。输出控制单元102和默认元数据生成单元103根据需要通过参考数据库信息的分析结果而执行其相应的过程。
输出控制单元102通过控制解码处理单元56和外部输出单元58而控制HDR视频的输出。
例如,输出控制单元102致使解码处理单元56对HDR视频流进行解码。进一步地,输出控制单元102控制外部输出单元58,以将动态元数据添加至通过对HDR视频流进行解码而获得的每个图片并且输出合成图片。
当给出执行随机访问回放的指令时,输出控制单元102使解码处理单元56对HDR视频流进行解码并且将跳跃目的地图片与OSD图像进行组合。进一步地,输出控制单元102控制外部输出单元58,以将默认元数据添加至与OSD图像组合的图片并且输出合成图片。
默认元数据生成单元103通过将固定值设置为各个参数的值而生成默认元数据。默认元数据生成单元103具有关于针对各个参数设置的固定值的信息。默认元数据生成单元103将所生成的默认元数据输出至存储器53并且将默认元数据存储在存储器53中。
以这种方式,可以在回放装置1中生成默认元数据。可选地,例如,在制造回放装置1的时间,可以将默认元数据存储在存储器53中,以提前在回放装置1中进行准备。
可选地,可以允许用户指定针对默认元数据的各个参数而设置的值。在这种情况下,例如,通过使用回放装置1上的设置屏幕而设置各个参数的值。
进一步地,可以允许用户选择在TV 2端上是否参考或忽略从回放装置1发送的默认元数据。在这种情况下,例如,使用TV 2上的设置屏幕指定是否参考或忽略默认元数据。
可以允许从服务器获得针对默认元数据的各个参数而设置的值。
在这种情况下,例如,以将信息与光盘11上所记录的HDR内容相关联的方式在服务器中准备关于针对默认元数据的各个参数而设置的值的信息。默认元数据生成单元103通过将从服务器获得的值设置为各个参数的值而生成光盘11上所记录的HDR内容的默认元数据。
进一步地,可以允许从服务器下载默认元数据。在通过通信单元55进行下载和接收之后,将默认元数据输出至存储器53并且存储在存储器53中。
接着,参考图28中的流程图,下面描述回放装置1以随机访问回放过程中发送默认元数据的方式对HDR内容进行回放的过程。
图28中的过程基本上与参考图18描述的过程相似,但在给出执行随机访问回放的指令时将不同的元数据添加至各个图片。
具体地,在步骤S101中,光盘驱动52从光盘11中读取包括播放列表文件的数据库信息文件。
在步骤S102中,例如,控制器51中的数据库信息分析单元101对播放列表文件进行分析,以识别待回放的AV流。
在步骤S103中,光盘驱动52从光盘11中读取包括待回放的HDR视频流的AV流文件。
在步骤S104中,解码处理单元56对从光盘驱动52供应的AV流中包括的HDR视频流进行解码并且将每个图片数据片段输出至外部输出单元58。将HDR视频流中包括的动态元数据从解码处理单元56供应至控制器51。
在步骤S105中,在输出控制单元102的控制下,外部输出单元58将从输出控制单元102供应的动态元数据添加至从解码处理单元56供应的HDR视频中的每个单个图片并且将合成图片输出至TV 2。
在步骤S106中,控制器51判断是否执行随机访问回放。如果在步骤S106中判断不执行随机访问回放,即,如果判断执行正常回放,则处理返回至步骤S105,以继续输出HDR视频中的各个图片。
另一方面,如果在步骤S106中判断执行随机访问回放,处理则进行至步骤S107。如果用户给出执行快进回放/倒带回放的指令,或如果用户给出执行提示回放的指令,则在步骤S106中判断执行随机访问回放。
在步骤S107中,解码处理单元56对用作随机访问点的跳跃目的地图片进行解码。
在步骤S108中,解码处理单元56将跳跃目的地图片与OSD图像进行组合。
在步骤S109中,外部输出单元58将默认元数据添加至与OSD图像组合的跳跃目的地图片并且输出合成图片。从控制器51中的输出控制单元102供应与跳跃目的地图片一起输出的默认元数据。
之后,处理返回至步骤S106,以重复上述过程步骤。例如,在用户指示的随机访问回放是快进回放/倒带回放的情况下,依次对GOP中的第一图片进行解码,并且与默认元数据一起输出其相应GOP中的这些第一图片。
-TV操作
接下来,参考图29中的流程图,下面描述TV 2中的显示过程。
当通过对HDR视频流进行解码而获得的图片开始传输时,执行图29中的过程。从回放装置1发送的图片包括动态元数据或所添加的默认元数据。
在步骤S121中,TV 2中的外部输入单元72接收从回放装置1发送的HDR视频中的每个图片数据片段并且还接收动态元数据或被添加并且被发送的默认元数据。
如果未给出执行随机访问回放的指令,则在该步骤中与动态元数据一起接收每个图片。另一方面,如果向回放装置1给出执行随机访问回放的指令,则在该步骤中与默认元数据一起接收和OSD图像组合的图片。
将通过外部输入单元72接收的每个图片数据片段供应至信号处理单元73,并且将元数据(动态元数据或默认元数据)供应至控制器71。
在步骤S122中,信号处理单元73在控制器71的控制下对HDR视频中的每个图片执行亮度压缩。如果与图片一起发送的元数据是动态元数据,则基于动态元数据执行亮度压缩。另一方面,如果与图片一起发送的元数据是默认元数据,则基于默认元数据执行亮度压缩。
在步骤S123中,信号处理单元73使显示器74显示已经进行亮度压缩的图片。继续显示包括该过程步骤序列的HDR视频,直至HDR内容的回放结束。
如上所述,通过在随机访问回放期间基于默认元数据在TV 2中执行亮度压缩,使得可以防止与每个图片组合的OSD图像看上去是闪动的。
<其中当跳跃目的地不具有动态元数据时使用默认元数据的示例>
代替在执行随机访问回放时强制使用默认元数据,如果跳跃目的地图片不具有所添加的动态元数据,则可以使用默认元数据并且将默认元数据发送至TV 2。
图30是示出随机访问回放的示例的示图。
作为示例,下面描述在图片P1即将进行回放的时间给出执行提示回放的指令并且使得从由图30中的箭头A1指示的图片P1跳跃至图片P2的情况。
在这种情况下,回放装置1对图片P2进行分析并且检测是否添加动态元数据。如果图片P2在其中未添加动态元数据的部分内,则使用默认元数据并且与图片P2一起输出默认元数据。
例如,如果将动态元数据添加至图片P2,则与图片P2一起输出动态元数据。
从上面看出,如果将动态元数据添加至跳跃目的地图片,则可以发送动态元数据,而如果不将动态元数据添加至跳跃目的地图片,则可以发送默认元数据。
现在,参考图31中的流程图,下面描述回放装置1对HDR内容进行回放的过程。
图31中的过程与图28中的过程相似,但根据是否将动态元数据添加至跳跃目的地图片而切换为被发送至TV 2的元数据。
具体地,如图28中的步骤S101至S105,在步骤S131至S135中,对HDR内容进行正常回放。
如果在步骤S136中判断执行随机访问回放,解码处理单元56则在步骤S137中对用作随机访问点的跳跃目的地图片进行解码。
在步骤S138中,解码处理单元56将跳跃目的地图片与OSD图像进行组合。
在步骤S139中,解码处理单元56判断是否将动态元数据添加至跳跃目的地图片。
如果在步骤S139中判断不添加动态元数据,外部输出单元58在步骤S140中则将默认元数据添加至与OSD图像组合的跳跃目的地图片并且输出合成图片。
另一方面,如果在步骤S139中判断不添加动态元数据,外部输出单元58在步骤S141中则将动态元数据添加至与OSD图像组合的跳跃目的地图片并且输出合成图片。
在步骤S140或步骤S141中输出图片之后,处理返回至步骤S136,以重复上述过程步骤。
以这种方式,在不将动态元数据添加至跳跃目的地图片的情况下,仅可以使用默认元数据,而如果添加动态元数据,则可以将动态元数据发送至TV 2。因此,能够以HDR内容制作者所期望的方式对跳跃目的地图片执行亮度压缩。
<<回放系统的示例性配置>>
<第一示例性配置>
上面已经提供了关于将HDR内容记录在光盘11上的情况的描述。然而,如上所述,上述过程还能够应用于对经由网络分配的HDR内容进行回放的情况。
图32是示出HDR内容回放系统的示例性配置的示图。
通过经由诸如互联网的网络302将回放装置1连接至内容分配服务器301而配置图32中的回放系统。TV 2经由HDMI电缆等连接至回放装置1。在TV 2上显示通过回放装置1进行回放的HDR内容的视频图像。
内容分配服务器301是由提供HDR内容分配服务的业务操作人员管理的服务器。通过内容分配服务器301分配的内容是HDR内容。
通过将包括动态元数据的HDR视频流文件与回放控制信息文件相关联而制成各个HDR内容片段。
例如,当用户操作回放装置1而访问内容分配服务器301时,在TV 2上显示HDR内容选择屏幕。用户能够选择特定的HDR内容片段并且将请求传送至内容分配服务器301,以使得用户能够开始查看内容。
当选择某些HDR内容时,内容分配服务器301将所选择的HDR内容传送至回放装置1。
回放装置1接收从内容分配服务器301传送的HDR内容并且通过执行与上述所述回放过程相似的过程而对HDR内容进行回放。
换言之,回放装置1将每个单个图片与动态元数据一起发送至TV 2,通过对HDR视频流进行解码而获得各个图片,并且基于动态元数据执行亮度压缩。
进一步地,当给出执行随机访问回放的指令时,将与被添加至跳跃目的地图片的动态元数据一起发送HDR视频中的每个图片,并且在TV 2中,基于动态元数据执行亮度压缩。将动态元数据添加至跳跃目的地图片,即,GOP的第一图片或由EP_map等指定为入口点的图片。
此外,在回放装置1中准备默认元数据的情况下,响应执行随机访问回放的指令,与跳跃目的地图片一起发送默认元数据,并且在TV 2中,基于默认元数据执行亮度压缩。
如上所述,内容分配服务器301可以分配包括HDR视频流的HDR内容,其中,将动态元数据强制添加至GOP的第一图片或被指定为入口点的图片。
进一步地,当执行通过内容分配服务器301分配的HDR内容中所包括的HDR视频流的随机访问回放时,可以将默认元数据从回放装置1输出至TV 2。
图33是示出回放装置1的另一示例性配置的示图。
如图33中示出的,回放装置1可以是所谓的棒式终端。HDMI终端设置在图33示出的回放装置1的外壳上。将设置在外壳上的HDMI终端插入到TV 2上的HDMI终端中,由此连接回放装置1与TV 2。
例如,图33中的回放装置1是图15中示出的不包括光盘驱动52的配置。回放装置1通过执行与上述所述过程相似的过程而对由内容分配服务器301分配的HDR内容进行回放。
如上所述,能够采用各种形式作为回放装置1的形式。例如,回放装置1的功能可以设置在诸如智能手机或平板式终端的便携式终端上,或回放装置1的功能可以设置在诸如PC的终端上。
<第二示例性配置>
回放装置1的功能可以设置在TV 2上。
图34是示出另一HDR内容回放系统的示例性配置的示图。
通过经由网络302连接其上设置了回放装置1的功能的TV 2与内容分配服务器301而配置图34中的回放系统。根据需要省去重复性的描述。
TV 2基于从内容分配服务器301传送的信息而显示HDR内容选择屏幕。
当用户选择特定的HDR内容片段时,内容分配服务器301将所选择的HDR内容传送至TV 2。
TV 2接收从内容分配服务器301传送的HDR内容并且对HDR内容进行回放。
即,TV 2基于动态元数据对HDR视频中的每个图片执行亮度压缩。
进一步地,当给出执行随机访问回放的指令时,基于被添加至跳跃目的地图片的动态元数据对跳跃目的地图片执行亮度压缩。
此外,在TV 2中准备默认元数据的情况下,当给出执行随机访问回放的指令时,基于默认元数据对跳跃目的地图片执行亮度压缩。
从上面看出,回放装置1的功能可以设置在TV 2上,并且可以在TV 2中执行上述所述过程。
<<其他示例>>
上面假设了HDR内容的记录介质是光盘,但是,记录介质可以是诸如闪存存储器的另一记录介质。
上面假设了基于动态元数据或默认元数据对视频执行的过程是亮度压缩,但是,可以在TV 2中执行亮度扩大。在这种情况下,动态元数据或默认元数据包含关于亮度扩大所使用的色调曲线信息的描述。
上面假设了被输入至回放装置1的视频流是通过预定方法而编码的视频流,但是,可以将包括添加了动态元数据的图片并且未被编码的视频流输入至回放装置1。
<计算机的示例性配置>
通过硬件能够运行或通过软件能够运行上述所述系列的过程步骤。在通过软件运行该系列的过程步骤的情况下,将软件中包括的程序从程序记录介质安装到被整合在专用硬件的计算机、通用计算机等中。
图35是示出其中通过程序运行上述所述系列的过程步骤的计算机的示例性硬件配置的框图。
中央处理单元(CPU)1001、只读存储器(ROM)1002、以及随机访问存储器(RAM)1003通过总线1004连接至彼此。
此外,输入/输出接口1005连接至总线1004。包括键盘、鼠标等的输入单元1006和包括显示器、扬声器等的输出单元1007连接至输入/输出接口1005。进一步地,包括硬盘、非易失性存储器等的存储单元1008、包括网络接口等的通信单元1009、以及驱动可移除介质1011的驱动1010连接至输入/输出接口1005。
在上述配置的计算机中,例如,CPU 1001通过经由输入/输出接口105和总线1004将存储在存储单元1008中的程序加载到RAM 1003中并且允许程序而执行上述所述系列的过程步骤。
例如,经由诸如局域网、互联网、或数字广播的有线或无线传输介质将通过CPU1001运行的程序记录在可移除介质1011上或提供通过CPU 1001运行的程序、并且安装在存储单元1008中。
应注意,通过计算机运行的程序可以是按照此处描述的顺序按照时间顺序执行过程步骤的程序、或可以是并行或在例如调用时根据需要执行过程步骤的程序。
本技术的实施方式并不局限于上述所述实施方式,并且在不背离本技术的实质的范围内,能够做出各种变形。
例如,本技术能够为其中由多种装置经由网络而分配并且协作处理一种功能的云计算配置。
进一步地,上面参考流程图描述的各个步骤不仅能够由一种装置、而且还能够由多种装置通过共享方式而运行。
此外,在其中一个步骤包括多个过程的情况下,一个步骤中所包括的多个过程不仅能够由一种装置、而且还能够由多种装置通过共享方式而运行。
本文中,系统指多个部件(装置、模块(零件)等)的集合,无论全部部件是否在同一外壳内。因此,被包含在独立外壳中并且经由网络连接的多种装置中的任一种装置与其中将多个模块包含在一个外壳中的一种装置是一个系统。
本文描述的效果仅是示例、而非限制性,并且可以提供其他效果。
<配置组合的示例>
本技术能够是下列任意配置。
(1)一种信息处理装置,包括:
生成单元,生成包括关于图片的亮度的信息的动态元数据;和
编码单元,对HDR视频数据进行编码,使得将动态元数据添加至用作随机访问点的每个图片。
(2)根据(1)的信息处理装置,其中,
编码单元将动态元数据添加至GOP中用作随机访问点的图片的第一图片。
(3)根据(1)的信息处理装置,还包括:
生成单元,生成包括指定随机访问点的信息的回放控制信息,回放控制信息用于回放通过编码获得的视频流;其中,
编码单元将动态元数据添加至用作由回放控制信息中包括的信息所指定的随机访问点的图片。
(4)根据(3)的信息处理装置,其中,
指定随机访问点的信息是剪辑信息中所包括的EP_map,剪辑信息由蓝光盘格式定义并且用作回放控制信息;并且
编码单元将动态元数据添加至用作EP_map中指定为随机访问点的入口点的每个图片。
(5)根据(3)的信息处理装置,其中,
指定随机访问点的信息是电影片段随机访问框,电影片段随机访问框由MP4格式定义并且用作回放控制信息;并且
编码单元将动态元数据添加至用作由电影片段随机访问框指定的随机访问点的每个图片。
(6)一种信息处理方法,其中,
信息处理装置,
生成包括关于图片的亮度的信息的动态元数据;并且
对HDR视频数据进行编码,使得将动态元数据添加至用作随机访问点的每个图片。
(7)一种被配置为使计算机执行以下处理的程序:
生成包括关于图片的亮度的信息的动态元数据;并且
对HDR视频数据进行编码,使得将动态元数据添加至用作随机访问点的每个图片。
(8)一种记录介质,其中,
记录通过对HDR视频数据进行编码使得将包括亮度信息的动态元数据添加至用作随机访问点的每个图片而生成的视频流。
(9)一种回放装置,包括:
回放单元,执行通过对HDR视频数据进行编码使得将包括亮度信息的动态元数据添加至用作随机访问点的每个图片而生成的视频流的随机访问回放;和
输出控制单元,将用作随机访问点的图片与动态元数据一起输出至显示装置。
(10)一种回放装置,包括:
回放单元,执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;和
输出控制单元,在将指示执行随机访问回放的预定信息叠加在图片上并且进行显示的情况下,将用于在随机访问回放期间进行亮度调整的随机访问回放期间所使用的元数据添加至用作随机访问点的图片,并且将添加了随机访问回放期间所使用的元数据的图片输出至显示装置。
(11)根据(10)的回放装置,其中,
回放单元以x倍速度执行快进回放或倒带回放作为随机访问回放,其中,x是预定数量。
(12)根据(10)或(11)的回放装置,其中,
回放单元执行提示回放作为随机访问回放。
(13)一种回放方法,其中,
回放装置,
执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;
在将指示执行随机访问回放的预定信息叠加在图片上并且进行显示的情况下,将用于对随机访问回放期间进行亮度调整的随机访问回放期间所使用的元数据添加至用作随机访问点的图片;并且
将添加了随机访问回放期间所使用的元数据的图片输出至显示装置。
(14)一种被配置为使计算机执行以下处理的程序:
执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;
在将指示执行随机访问回放的预定信息叠加在图片上并且进行显示的情况下,将用于对随机访问回放期间进行亮度调整的随机访问回放期间所使用的元数据添加至用作随机访问点的图片;并且
将添加了随机访问回放期间所使用的元数据的图片输出至显示装置。
参考标号列表
1 回放装置
2 TV
3 记录装置
21 控制器
22 编码处理单元
23 光盘驱动
31 动态元数据生成单元
32 编码控制单元
33 数据库信息生成单元
34 记录控制单元
51 控制器
52 光盘驱动
53 存储器
54 本地存储器
55 通信单元
56 解码处理单元
57 操作输入单元
58 外部输出单元
101 数据库信息分析单元
102 输出控制单元
103 默认元数据生成单元。

Claims (13)

1.一种信息处理装置,包括:
生成单元,生成包括关于图片的亮度的信息的动态元数据;和
编码单元,对HDR视频数据进行编码,使得将所述动态元数据添加至用作随机访问点的每个图片,
其中,所述生成单元还生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过所述编码获得的视频流;以及
所述编码单元将所述动态元数据添加至用作由所述回放控制信息中包括的信息所指定的所述随机访问点的所述图片。
2.根据权利要求1所述的信息处理装置,其中,
所述编码单元将所述动态元数据添加至GOP中用作所述随机访问点的所述图片的第一图片。
3.根据权利要求1所述的信息处理装置,其中,
指定所述随机访问点的所述信息是剪辑信息中所包括的EP_map,所述剪辑信息由蓝光盘格式定义并且用作所述回放控制信息;并且
所述编码单元将所述动态元数据添加至用作所述EP_map中指定为所述随机访问点的入口点的每个图片。
4.根据权利要求1所述的信息处理装置,其中,
指定所述随机访问点的所述信息是电影片段随机访问框,所述电影片段随机访问框由MP4格式定义并且用作所述回放控制信息;并且
所述编码单元将所述动态元数据添加至用作由所述电影片段随机访问框指定的所述随机访问点的每个图片。
5.一种信息处理方法,其中,
信息处理装置,
生成包括关于图片的亮度的信息的动态元数据;
对HDR视频数据进行编码,使得将所述动态元数据添加至用作随机访问点的每个图片,
还生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过所述编码获得的视频流;并且
将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
6.一种其上存储有程序的计算机可读存储介质,所述程序当被信息处理装置执行时,使所述信息处理装置执行以下步骤:
生成包括关于图片的亮度的信息的动态元数据;
对HDR视频数据进行编码,使得将所述动态元数据添加至用作随机访问点的每个图片;
还生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过所述编码获得的视频流;并且
将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
7.一种其上存储有程序的计算机可读存储介质,所述程序当被信息处理装置执行时,使所述信息处理装置执行以下步骤:
记录通过对HDR视频数据进行编码使得将包括亮度信息的动态元数据添加至用作随机访问点的每个图片而生成的视频流;
生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过所述编码获得的视频流;并且
将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
8.一种回放装置,包括:
回放单元,执行通过对HDR视频数据进行编码使得将包括亮度信息的动态元数据添加至用作随机访问点的每个图片而生成的视频流的随机访问回放;
输出控制单元,将用作所述随机访问点的所述图片与所述动态元数据一起输出至显示装置;
生成单元,生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过所述编码获得的视频流;以及
编码单元,将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
9.一种回放装置,包括:
回放单元,执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;
输出控制单元,在将指示执行所述随机访问回放的预定信息叠加在所述图片上并且进行显示的情况下,将用于在随机访问回放期间进行亮度调整的所述随机访问回放期间所使用的元数据添加至用作随机访问点的所述图片,并且将添加了所述随机访问回放期间所使用的所述元数据的所述图片输出至显示装置;
生成单元,生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过编码获得的视频流;以及
编码单元,将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
10.根据权利要求9所述的回放装置,其中,
所述回放单元以x倍速度执行快进回放或倒带回放作为所述随机访问回放,其中,x是预定数量。
11.根据权利要求9所述的回放装置,其中,
所述回放单元执行提示回放作为所述随机访问回放。
12.一种回放方法,其中,
回放装置,
执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;
在将指示执行随机访问回放的预定信息叠加在所述图片上并且进行显示的情况下,将用于在随机访问回放期间进行亮度调整的所述随机访问回放期间所使用的元数据添加至用作随机访问点的所述图片;
将添加了所述随机访问回放期间所使用的所述元数据的所述图片输出至显示装置;
生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过编码获得的视频流;并且
将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
13.一种其上存储有程序的计算机可读存储介质,所述程序当被信息处理装置执行时,使所述信息处理装置执行以下步骤:
执行添加了包括关于图片的亮度的信息的动态元数据的视频流的随机访问回放;
在将指示执行随机访问回放的预定信息叠加在所述图片上并且进行显示的情况下,将用于在随机访问回放期间进行亮度调整的所述随机访问回放期间所使用的元数据添加至用作随机访问点的所述图片;
将添加了所述随机访问回放期间所使用的所述元数据的所述图片输出至显示装置;
生成包括指定所述随机访问点的信息的回放控制信息,所述回放控制信息用于回放通过编码获得的视频流;并且
将所述动态元数据添加至用作由所述回放控制信息中包括的所述信息所指定的所述随机访问点的所述图片。
CN201880072003.2A 2017-11-17 2018-11-02 信息处理装置和方法、存储介质、回放装置、及回放方法 Active CN111344787B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2017221549 2017-11-17
JP2017-221549 2017-11-17
PCT/JP2018/040789 WO2019098054A1 (ja) 2017-11-17 2018-11-02 情報処理装置、情報処理方法、記録媒体、再生装置、再生方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN111344787A CN111344787A (zh) 2020-06-26
CN111344787B true CN111344787B (zh) 2021-12-17

Family

ID=66540332

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880072003.2A Active CN111344787B (zh) 2017-11-17 2018-11-02 信息处理装置和方法、存储介质、回放装置、及回放方法

Country Status (7)

Country Link
US (1) US11245941B2 (zh)
EP (1) EP3712891B1 (zh)
JP (3) JP7180610B2 (zh)
KR (1) KR102624024B1 (zh)
CN (1) CN111344787B (zh)
TW (1) TWI826400B (zh)
WO (1) WO2019098054A1 (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103583045A (zh) * 2011-06-03 2014-02-12 索尼公司 图像处理装置以及图像处理方法
CN105284106A (zh) * 2013-06-20 2016-01-27 索尼公司 再现装置、再现方法以及记录介质
WO2016027423A1 (ja) * 2014-08-19 2016-02-25 パナソニックIpマネジメント株式会社 伝送方法、再生方法及び再生装置
JP2016081553A (ja) * 2014-10-17 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 記録媒体、再生方法、および再生装置
JP2017103745A (ja) * 2015-11-24 2017-06-08 三菱電機株式会社 映像再生装置及び映像再生方法
CN106981054A (zh) * 2017-03-27 2017-07-25 联想(北京)有限公司 一种图像处理方法及电子设备
EP3240285A1 (en) * 2014-12-22 2017-11-01 Sony Corporation Information processing device, information recording medium, information processing method, and program

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101702562B1 (ko) * 2010-06-18 2017-02-03 삼성전자 주식회사 멀티미디어 스트림 파일의 저장 파일 포맷, 저장 방법 및 이를 이용한 클라이언트 장치
US9210322B2 (en) * 2010-12-27 2015-12-08 Dolby Laboratories Licensing Corporation 3D cameras for HDR
JP6474815B2 (ja) 2013-12-16 2019-02-27 エルジー エレクトロニクス インコーポレイティド トリックプレイサービス提供のための信号送受信装置及び信号送受信方法
CN105493490B (zh) * 2014-06-23 2019-11-29 松下知识产权经营株式会社 变换方法和变换装置
WO2015198553A1 (ja) * 2014-06-26 2015-12-30 パナソニックIpマネジメント株式会社 データ出力装置、データ出力方法及びデータ生成方法
CN111901599A (zh) * 2014-06-27 2020-11-06 松下知识产权经营株式会社 再现装置
JP2017183762A (ja) * 2014-08-19 2017-10-05 パナソニックIpマネジメント株式会社 映像ストリーム生成方法、再生装置及び記録媒体
EP3193333B1 (en) 2014-09-08 2020-12-23 Sony Corporation Information processing device, information recording medium, information processing method, and program
TWI683307B (zh) * 2014-09-08 2020-01-21 日商新力股份有限公司 資訊處理裝置,資訊記錄媒體及資訊處理方法以及程式

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103583045A (zh) * 2011-06-03 2014-02-12 索尼公司 图像处理装置以及图像处理方法
CN105284106A (zh) * 2013-06-20 2016-01-27 索尼公司 再现装置、再现方法以及记录介质
WO2016027423A1 (ja) * 2014-08-19 2016-02-25 パナソニックIpマネジメント株式会社 伝送方法、再生方法及び再生装置
JP2016081553A (ja) * 2014-10-17 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 記録媒体、再生方法、および再生装置
EP3240285A1 (en) * 2014-12-22 2017-11-01 Sony Corporation Information processing device, information recording medium, information processing method, and program
JP2017103745A (ja) * 2015-11-24 2017-06-08 三菱電機株式会社 映像再生装置及び映像再生方法
CN106981054A (zh) * 2017-03-27 2017-07-25 联想(北京)有限公司 一种图像处理方法及电子设备

Also Published As

Publication number Publication date
CN111344787A (zh) 2020-06-26
JPWO2019098054A1 (ja) 2020-11-26
EP3712891A1 (en) 2020-09-23
WO2019098054A1 (ja) 2019-05-23
US11245941B2 (en) 2022-02-08
KR102624024B1 (ko) 2024-01-12
JP7435704B2 (ja) 2024-02-21
JP7180610B2 (ja) 2022-11-30
JP2023018015A (ja) 2023-02-07
JP2024045366A (ja) 2024-04-02
TWI826400B (zh) 2023-12-21
US20210176508A1 (en) 2021-06-10
EP3712891A4 (en) 2020-12-16
EP3712891B1 (en) 2023-10-11
TW201929541A (zh) 2019-07-16
KR20200087754A (ko) 2020-07-21

Similar Documents

Publication Publication Date Title
US10880532B2 (en) Reproduction device, reproduction method, and recording medium
US9832440B2 (en) Reproduction device, reproduction method, and recording medium that display graphics based on tone mapping
US9706184B2 (en) Reproduction device, reproduction method, and recording medium
JP7207314B2 (ja) 再生装置、再生方法、プログラム
CN111344787B (zh) 信息处理装置和方法、存储介质、回放装置、及回放方法
US10554944B2 (en) Playing apparatus, playing method, information processing apparatus, and information processing method
KR102558213B1 (ko) 재생 장치, 재생 방법, 프로그램, 및 기록 매체

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant