CN109891902A - 影像显示系统及影像显示方法 - Google Patents

影像显示系统及影像显示方法 Download PDF

Info

Publication number
CN109891902A
CN109891902A CN201880003491.1A CN201880003491A CN109891902A CN 109891902 A CN109891902 A CN 109891902A CN 201880003491 A CN201880003491 A CN 201880003491A CN 109891902 A CN109891902 A CN 109891902A
Authority
CN
China
Prior art keywords
mentioned
metadata
image
tone mapping
dynamic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880003491.1A
Other languages
English (en)
Other versions
CN109891902B (zh
Inventor
山本雅哉
小塚雅之
柏木吉一郎
西尾岁朗
甲野和彦
矢羽田洋
广田健
森美裕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Publication of CN109891902A publication Critical patent/CN109891902A/zh
Application granted granted Critical
Publication of CN109891902B publication Critical patent/CN109891902B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6027—Correction or control of colour gradation or colour contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/20—Circuitry for controlling amplitude response
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/66—Transforming electric information into light information

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Picture Signal Circuits (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Transforming Electric Information Into Light Information (AREA)

Abstract

影像显示系统(100B)具备色调映射处理部(134)、显示部(135)、以及使用静态元数据生成表示在多个时间区间中相同的最大亮度的第1动态元数据的元数据处理部(122)；对如下动作进行切换：第1动作，(i)元数据处理部(122)使用静态元数据生成第1动态元数据，(ii)色调映射处理部(134)使用第1动态元数据进行色调映射处理；以及第2动作，色调映射处理部(134)使用在多个时间区间中最大亮度发生变化的第2动态元数据，进行色调映射处理。

Description

影像显示系统及影像显示方法
技术领域
本公开涉及显示影像的影像显示系统及影像显示方法。
背景技术
在专利文献1中，记载了用来在HDR(High Dynamic Range：高动态范围)影像中在图像上映射图形的方法及系统。
现有技术文献
专利文献
专利文献1：日本专利第6104411号说明书
非专利文献
非专利文献1：White Paper Blu－ray Disc Read－Only Format(Ultra HDBlu－ray)，Audio Visual Application Format Specifications for BD－ROM Version3.1，August 2016，http：//www.blu-raydisc.com/Assets/Downloadablefile/BD-ROM_Part3_V3.1_WhitePaper_160729_clean.pdf
发明内容
发明要解决的课题
本公开的目的是提供一种能够提高显示的影像的品质的影像显示系统或影像显示方法。
用来解决课题的手段
有关本公开的一技术方案的影像显示系统具备：色调映射处理部，使用表示规定期间中包含的多个时间区间的各自中的影像的最大亮度的动态元数据，进行色调映射处理，该色调映射处理对各时间区间的上述影像的亮度用与该时间区间的上述影像的上述最大亮度对应的变换曲线进行变换；显示部，显示上述色调映射处理后的影像；以及元数据处理部，使用表示上述规定期间中的上述影像的最大亮度的静态元数据，生成表示在上述多个时间区间中相同的上述最大亮度的上述第1动态元数据；该影像显示系统对如下动作切换：第1动作，(i)上述元数据处理部使用上述静态元数据生成上述第1动态元数据，(ii)上述色调映射处理部使用上述第1动态元数据进行上述色调映射处理；和第2动作，上述色调映射处理部使用在上述多个时间区间中上述最大亮度发生变化的第2动态元数据进行上述色调映射处理。
发明效果
本公开能够提供一种能够提高显示的影像的品质的影像显示系统或影像显示方法。
附图说明
图1是用来说明影像技术的进化的图。
图2是用来说明向内容(content)导入新的影像表现时的影像制作、发布方式及显示装置的关系的图。
图3A是表示色调映射(tone mapping)的一例的图。
图3B是表示色调映射的一例的图。
图4A是表示静态色调映射的一例的图。
图4B是表示动态色调映射的一例的图。
图5是表示在运动图像上叠加图形而显示的例子的图。
图6是表示以往的影像显示系统的结构的图。
图7是表示以往的影像显示系统的结构的图。
图8是表示在主影像中叠加有图形时的动态色调映射的影响的图。
图9是表示有关实施方式的影像显示系统的结构的图。
图10是表示有关实施方式的各种标志与影像显示装置的动作的关系的图。
图11是表示有关实施方式的影像显示装置的结构的图。
图12是表示有关实施方式的元数据处理部的结构的图。
图13是表示有关实施方式的影像再现装置的动作的流程图。
图14是表示有关实施方式的影像显示装置的动作的流程图。
具体实施方式
[1－1.背景]
首先，使用图1对影像技术的变迁进行说明。图1是用来对影像技术的进化进行说明的图。
到目前为止，作为影像的高画质化，主要着眼于显示像素数的扩大，从StandardDefinition(SD：标清)的720×480像素开始，High Definition(HD：高清)的1920×1080像素的影像正在普及。
近年来，以进一步的高画质化为目标，开始了Ultra High Definition(UHD：超高清)的3840×1920像素、或4K的4096×2048像素的所谓4K影像的导入。
在4K的导入的同时，也研究了动态范围扩展、色域扩大、或者帧速率的追加或提高等。
其中，关于动态范围，作为用来在维持暗部灰阶的同时、将用现行的电视信号不能表现的镜面反射光等的明亮的光以更接近于现实的明亮度表现的方式，HDR(High DynamicRange)受到关注。具体而言，到目前为止的电视信号被称作SDR(Standard Dynamic Range：标准动态范围)，最高亮度是100nit。相对于此，在HDR中设想了将最高亮度扩大至1000nit以上。HDR正在SMPTE(Society of Motion Picture&Television Engineers：电影与电视工程师协会)及ITU－R(International Telecommunications Union RadiocommunicationsSector：国际电信联盟无线电通信组)等中正在进行母带显示(mastering display)用标准的标准化。
作为HDR的具体的应用目标，与HD及UHD同样，设想了广播、封装介质(Blu－ray(注册商标)Disc等)及因特网发布等。
[1－2.母带(master)生成、发布方式及显示装置的关系]
图2是用来说明向内容导入新的影像表现时的影像制作、发布方式及显示装置的关系的图。
在为了影像的高画质化而导入新的影像表现(像素数的增加等)的情况下，如图2所示，需要(1)对影像制作侧的面向Home Entertainment(家庭娱乐)的母带进行变更。与此对应，需要将(2)广播、通信及封装介质等的发布方式及(3)显示该影像的电视或投影机等的显示装置也更新。
[1－3.色调映射]
色调映射(Tone Mapping)是根据HDR影像的亮度与影像显示装置的最大亮度(Display Peak Luminance：DPL)的关系，在影像的最大亮度(Maximum Content LuminanceLevel：MaxCLL)超过DPL的情况下将影像的亮度变换、使影像的亮度包含在DPL以内的处理。通过该处理，能够不丢失影像的最大亮度附近的信息而显示影像。该变换既依存于影像显示装置的特性，也依存于怎样进行显示的思考方式，因此按照每个影像显示装置而使用不同的变换曲线。
图3A及图3B是表示色调映射的一例的图。图3A表示DPL为500nit的情况，图3B表示DPL是1000nit的情况。此外，图3A及图3B是显示了MaxCLL为1000nit的影像的情况下的色调映射和显示了MaxCLL为4000nit的影像的情况下的色调映射的例子。
如图3A所示，在DPL为500nit的情况下，将亮度变换以使得哪个影像都能够在500nit以下显示到MaxCLL，但越是MaxCLL高的影像，变换的程度越大。
如图3B所示，在DPL为1000nit的情况下，在MaxCLL为1000nit的影像中，不进行色调映射。在MaxCLL为4000nit的影像中，进行色调映射，将4000nit的亮度变换为1000nit并显示。
[1－4.动态元数据和动态色调映射]
图4A是表示使用静态元数据的色调映射的例子的图。图4B是表示使用动态元数据的动态色调映射的例子的图。
如图4A所示，在使用静态元数据(MaxCLL)的情况下，由于MaxCLL在一连串的影像内表示最高的亮度，所以影像显示装置对于一连串的影像仅能够进行固定的色调映射。相对于此，影像显示装置如图4B的(a)所示，通过使用与时间变化的亮度匹配的元数据(这里称作DynamicMaxCLL)，如在亮度较低的情况下不进行色调映射(图4B的(b))、在亮度较高的情况下进行色调映射(图4B的(c))那样，能够实现与时间变化的亮度匹配的最优的色调映射。
[1－5.影像与图形的合成]
图5表示在运动图像上叠加菜单及字幕等的图形、用影像显示装置显示的例子的图。这里，表示Ultra HD Blu－ray的例子。
将叠加图形之前的运动图像表现为主影像。在Ultra HD Blu－ray中，以HD分辨率准备图形。影像再现装置通过对HD的图形进行HD－UHD变换来生成UHD的图形。并且，影像再现装置将得到的UHD的图形与UHD分辨率的主影像合成。并且，影像再现装置将合成后的影像经由HDMI(注册商标)(High－Definition Multimedia Interface)向影像显示装置传送。影像显示装置将传送来的影像作为HDR而显示。
此外，影像再现装置基于主影像的亮度的时间变化决定动态元数据，经由HDMI向影像显示装置传送。影像显示装置基于传送来的动态元数据，对在主影像中叠加了字幕及菜单的影像信号实施动态色调映射。
该状况在显示基于广播或通信的OTT(Over The Top：越过)服务中的HDR影像的情况下，也在主影像中叠加菜单或字幕并将得到的影像用影像显示装置显示的情况下是同样的。
[1－6.以往的影像再现装置]
对以往的HDR对应的(可应对HDR)影像再现装置的结构进行说明。首先，对仅与静态元数据对应的影像再现装置(由HDR10、BDA设定的强制HDR的情况)进行说明。
图6是表示以往的影像显示系统100的结构的图。该影像显示系统100包括影像再现装置101和影像显示装置102。影像再现装置101是HDR对应的影像再现装置，具备盘111、BD－ROM驱动部112、解复用器113、PG解码器(PG Dec)114、影像解码器(Video Dec)115、菜单控制部116、静态元数据提取部117、影像合成部118和影像信息输出部119。
盘111是记录有影像及所需的其他信息的记录介质，例如是BD－ROM介质。BD－ROM驱动部112从盘111读取信息。解复用器113根据从BD－ROM驱动部112输出的信息，提取字幕信息、影像信息及声音信息(未图示)。
PG解码器114根据由解复用器113提取出的字幕信息生成字幕图形。影像解码器115根据由解复用器113提取出的影像信息生成影像信号。
菜单控制部116使用从BD－ROM驱动部112输出的信息进行菜单图形的生成及其控制。静态元数据提取部117根据从BD－ROM驱动部112输出的信息提取静态元数据。
影像合成部118通过将由菜单控制部116生成的菜单图形、由PG解码器114生成的字幕图形、以及由影像解码器115生成的影像信息合成，生成影像信号。影像信息输出部119将由影像合成部118生成的影像信号、由解复用器113提取出的声音信号(未图示)及由静态元数据提取部117提取出的静态元数据经由HDMI等的传送部向影像显示装置102传送。
接着，说明与拥有动态元数据的HDR对应的影像再现装置的结构。图7表示包括与拥有动态元数据的HDR对应的影像再现装置101A的影像显示系统100A的结构的图。该影像显示系统100包括影像再现装置101A和影像显示装置102A。
该影像再现装置101A除了图6所示的影像再现装置101的结构以外，还具备动态元数据提取部120和元数据切换部121。
动态元数据提取部120提取由影像解码器115生成的影像信息中包含的动态元数据。元数据切换部121进行将由动态元数据提取部120提取出的动态元数据和由静态元数据提取部117提取出的静态元数据中的输出的元数据切换或输出两者等的处理。影像信息输出部119将从元数据切换部121输出的元数据与影像信号一起经由HDMI等的传送部向影像显示装置102A传送。
另外，这里假设动态元数据包含在影像信息中，但动态元数据也可以另外地记录在盘111中，与影像信息同步向元数据切换部121传送。通过这样的结构，能够由影像显示装置102实现基于动态元数据的动态色调映射。
另外，Blu－ray，Ultra HD Blu－ray的详细情况例如记载在非专利文献1中。
[1－7.对将图形叠加在运动图像中的影像数据进行动态色调映射的情况下的课题]
在动态元数据方式中，按照每个帧指定HDR影像的亮度分布等的关于亮度的元数据，与影像信号一起将这样的元数据向影像显示装置传送。影像显示装置根据该影像显示装置的最大亮度等的显示能力，以传送来的元数据为参考，进行将亮度变换等的处理。这样的动态元数据方式作为不论影像显示装置的亮度等的显示性能如何都尽可能显示一定的品质的影像的方式受到关注。
但是，动态元数据由于在时间上变化，所以有本来应为一定的影像的显示不稳定的问题。
如果应显示的影像仅是同时被编辑或监修的影像、所谓的运动图像，则能够进行某种程度考虑到影像的状况的处理。如果以这样的运动图像为主影像，同时将本来是一定而完全不变动的字幕或菜单等的图形数据叠加在主影像中而显示，则通过使用动态元数据的处理，出现应是一定的图形的亮度或颜色发生变化的不良影响。主影像的亮度越高、影像显示装置的亮度越低，该不良影响越显著。
图8是表示在主影像中叠加了图形时的动态色调映射的影响的图。这里，如图8的(a)所示，将叠加的图形的亮度假定为350nit。如图8的(b)所示，在主影像的亮度较低的区间中，不进行色调映射，将图形以作为本来的亮度的350nit在影像显示装置上显示。另一方面，如图8的(c)所示，在主影像的亮度较高的区间中，进行色调映射，将图形的亮度以比350nit低的亮度显示在影像显示装置上。这样，本来应是一定的图形的亮度在时间上变动，成为不好的状态。这里设为只有亮度的影响，但在实际的影像显示装置中，因为颜色成分也受到影响，所以也有颜色也受到影响的情况。
[1－8.解决方法]
作为避免上述课题的手段，可以考虑将叠加的图形的位置信息向影像显示装置传送、仅显示有图形的部分不应用动态元数据的方法。但是，该方法在显示画面的全区域中需要是否显示图形的信息的传送，影像显示装置中的处理也需要显示像素单位下的判断等，实现是相当困难的。
此外，如上述那样，影像再现装置将用来在由影像显示装置侧进行正确的处理的追加信息向影像显示装置传送，在影像显示装置侧进行叠加了图形的HDR影像的显示处理的情况下，有可能通过影像显示装置侧的安装而影像的外观变化。作为内容制作者，将其识别为较大的课题。因此，按照蓝光标准等的决定了影像再现装置的动作的规定在影像再现装置侧进行处理，以便总是能够正确地进行处理，对向影像显示装置发送的动态元数据进行加工。由此，能够由影像显示装置显示适当的影像。但是，根据影像显示装置侧的处理，有可能发生画质劣化，所以需要也包括影像显示装置侧的处理的方式。
在本公开中使用以下的解决方法。在HDR影像的再现时，在显示菜单图形时，根据需要而设定表示是否叠加显示了菜单的标志(Graphics_Menu_On_Flag：GMOF)。该设定在蓝光盘的情况下，由HDMV(High Definition Movie Mode)的命令或BD－J(Blu－ray DiscJava(注册商标))的命令进行。
在将记录有HDR影像数据等的盘或HDR数据再现的情况下，在菜单等的图形被叠加显示在HDR影像上的情况下，影像再现装置将GMOF标志设定为ON。此外，影像再现装置在影像再现装置的内部进行色调映射的处理或图形的变换的情况下，不向影像显示装置传送GMOF。
在由影像显示装置进行色调映射的处理的情况下，影像再现装置将相当于静态元数据的值作为动态元数据向影像显示装置传送。由此，影像显示装置由于将色调映射固定，所以能够减小对图形的影响。
影像再现装置当将动态元数据变更为相当于静态元数据的值时，此外，当将相当于静态元数据的值向原来的动态元数据恢复时，为了进行顺畅的变迁，使元数据的值一点点地变化。由此，能够减小因元数据变化造成的色调映射的变化的不适感。
影像再现装置在盘或HDR数据中指定了菜单图形的最大亮度(MaxLLGM)的情况下，取得该MaxLLGM。或者，影像再现装置通过分析菜单图形而生成相当于MaxLLGM的值。此外，影像再现装置从影像显示装置接受显示装置的最大亮度信息(MAXTVLL)。并且，影像再现装置通过将MaxLLGM与MAXTVLL比较，判断在菜单图形中没有动态色调映射的影响。影像再现装置在判断为没有该影响的情况下，即使GMOF标志是ON，也不进行动态元数据的变换处理。由此，能够用影像显示装置尽可能实施动态的色调映射，所以能够实现更好的影像显示。
在GMOF被传送给影像显示装置的情况下，影像显示装置能够识别出在HDR影像中叠加有图形，所以能够进行适当的色调映射处理。即，影像显示装置基于影像显示装置(例如TV)的亮度水平、内容的亮度水平及图形的亮度水平(MaxLLGM)，对于将遵循动态元数据的色调映射原样进行，或将色调映射固定、或进行与静态元数据对应的色调映射、或进行根据亮度水平将这些处理组合的处理等进行切换。由此，影像显示装置能够进行适当的处理。
此时，影像显示装置将由盘或HDR数据指定的菜单图形的最大亮度(MaxLLGM)或在影像再现装置内生成的MaxLLGM用在色调映射处理，能够进行更适当的处理。
此外，在GMOF为ON的情况下，影像再现装置设定TV侧处理优先标志(TVPAF)。在TVPAF为ON的情况下，影像再现装置将Dynamic Metadata Block Mode Flag(动态元数据块模式标志，DMBM)设定为OFF，将DMBM向影像显示装置发送。在此情况下，由影像显示装置许可与自身的亮度对应的适当的处理。
在TVPAF被设定为OFF的情况下，影像再现装置将DMBM设定为ON，将DMBM向影像显示装置发送。在此情况下，影像显示装置被强制进行遵循动态元数据的处理。即，影像显示装置遵循在影像再现装置侧被处理的动态元数据。由此，如果对于影像再现装置中的动态元数据的对应是明确的，则在几乎全部的影像显示装置中显示同样的影像。
根据以上，在对于由广播、Blu－ray等的封装介质或OTT等的因特网发布传送来的HDR影像信号进行动态色调映射的情况下，能够减小对于菜单及字幕等的图形的动态色调映射的影响。由此，能够得到与稳定的图形的显示、影像显示装置的最大亮度(DPL)和运动图像的最大亮度对应的动态色调映射的效果。
通过上述，特别在使比影像的亮度低的最大亮度的影像显示装置中的HDR效果变大，另一方面，能够实现与静态色调映射同样的品质较高的图形的显示。
进而，通过影像再现装置将不取决于TV等的影像显示装置的处理的与静态色调映射相当的动态元数据向影像显示装置送出，能够更好地实现内容制作者的意图。另一方面，如果内容制作者许可，则也能够选择影像显示装置中的处理。由此，通过与图形的状态对应的适当的处理的选择，能够在使动态色调映射的效果成为最大限度的同时抑制对图形的影响。
[2－1.影像显示系统的结构]
图9是表示有关本实施方式的影像显示系统100B的结构的图。影像显示系统100B包括影像再现装置101B和影像显示装置102B。
影像再现装置101B具备盘111、BD－ROM驱动部112、解复用器113、PG解码器(PGDec)114、影像解码器(Video Dec)115、菜单控制部116B、静态元数据提取部117、影像合成部118、影像信息输出部119、动态元数据提取部120和元数据处理部122。
盘111是记录有影像及需要的其他信息的记录介质，例如是BD－ROM介质。BD－ROM驱动部112从盘111读取信息。解复用器113根据从BD－ROM驱动部112输出的信息，提取字幕信息、影像信息及声音信息(未图示)。
PG解码器114根据由解复用器113提取出的字幕信息生成字幕图形。影像解码器115从由解复用器113提取的影像信息生成影像信号。
菜单控制部116B使用从BD－ROM驱动部112输出的信息，进行菜单图形的生成及其控制。此外，菜单控制部116B将菜单图形状态信息(GMOF，TVPAF，MaxLLGM)向元数据处理部122输出。
静态元数据提取部117根据从BD－ROM驱动部112输出的信息提取静态元数据。静态元数据包含表示影像的亮度(例如，最大亮度及平均亮度)的信息。由该静态元数据表示的影像的亮度是规定期间中的影像的亮度(固定值)。
影像合成部118通过将由菜单控制部116B生成的菜单图形、由PG解码器114生成的字幕图形及由影像解码器115生成的影像信息合成而生成影像信号。即，影像合成部118向影像信息叠加菜单图形及字幕图形。
动态元数据提取部120根据由影像解码器115生成的影像信息提取动态元数据。另外，也可以将动态元数据另外记录在盘111中，与影像信息同步地向元数据处理部122发送。此外，动态元数据包含表示影像的亮度(例如，最大亮度及平均亮度)的信息。由该动态元数据表示的影像的亮度在规定期间中以时间序列变化。即，动态元数据表示静态元数据中的上述规定期间中包含的多个时间区间的各自的影像的最大亮度。
元数据处理部122将由动态元数据提取部120提取出的动态元数据和由静态元数据提取部117提取出的静态元数据使用从菜单控制部116B输出的菜单图形状态信息和影像显示装置102B的亮度信息(MAXTVLL)进行处理，进行与菜单图形的状态对应的动态元数据的变更。此外，元数据处理部122例如从影像显示装置102B作为EDID取得MAXTVLL。
影像信息输出部119将由影像合成部118生成的影像信号、由解复用器113提取出的声音信号(未图示)、以及由元数据处理部122处理后的动态元数据及静态元数据经由HDMI等的传送部向影像显示装置102B传送。
菜单控制部116B例如通过处理BD－J的Java命令的BD－J引擎或处理在流中作为IG记载的HDMV命令的HDMV命令解释器实现。
[2－2.标志及状态]
以下，说明各标志及状态的详细情况。Graphics_Menu_On_Flag(图形菜单开启标志，GMOF)是表示在HDR影像的再现时是否将菜单图形叠加而显示的标志。该GMOF由BD－J或HDMV的命令设定。即使显示菜单图形，在菜单图形是透明的情况下、菜单图形的显示区域较窄的情况下、或菜单图形的亮度足够低的情况下等的菜单图形不受动态色调映射的影响的情况下，也将GMOF设定为OFF。
GMOF＝OFF表示在HDR影像的再现时不叠加菜单图形、或显示可以不考虑由动态色调映射带来的影响的范围的菜单图形。
GMOF＝ON表示在HDR影像的再现时叠加了有可能因动态色调映射而受到影响的菜单图形。即，GMOF＝ON表示内容制作者想要通过影像再现装置或影像显示装置中的某个的处理来减小动态色调映射对菜单图形的影响。
Maximum_Luminance_Level_of_Graphics_Menu(图形菜单最大亮度水平，MaxLLGM)表示菜单图形的最大亮度。MaxLLGM被作为GMOF的参数设定。由此，在GMOF为OFF的情况下，不设定MaxLLGM。
MaxLLGM＝0表示菜单图形的最大亮度不清楚，或菜单图形是透明的。
由MaxLLGM＝1～最大值表示菜单图形的最大亮度。另外，将最大值任意地定义。例如，在最大值是作为通常使用的母带监视器(mastering monitor)的最大亮度的1000nit的情况下，如果MaxLLGM是8比特，则将菜单图形的最大亮度用约4nit单位表示。此外，如果MaxLLGM是10比特，则将菜单图形的最大亮度用约1nit单位表示。
Maximum_TV_Luminance_Level(最大电视亮度水平，MAXTVLL)表示影像显示装置能够显示的最大亮度。影像再现装置101B例如从影像显示装置102B取得MAXTVLL作为EDID。或者，用户也可以作为影像再现装置101B的初始设定而设定MAXTVLL。
MAXTVLL既可以将具体的亮度以数值表示，也可以表示影像显示装置的最大亮度属于的亮度范围。即，在MAXTVLL中，可以使用以下所示的多个格式的某个。
MAXTVLL＝0表示影像显示装置的最大亮度不清楚。由MAXTVLL＝1～最大值表示影像再现装置的最大亮度的具体的数值。在此情况下，例如与MAXLLG同样，以最大亮度和比特数决定单位。例如，在最大值是1000nit、用8比特表现的情况下，将影像再现装置的最大亮度用4nit单位表示。
或者，MAXTVLL表示亮度范围。在此情况下，例如MAXTVLL表示亮度范围的中心值。例如在1000nit为最大值的情况下，MAXTVLL表示1000nit、500nit及200nit的某个。在由MAXTVLL表示1000nit的情况下，表示影像显示装置的最大亮度是700nit以上。在由MAXTVLL表示500nit的情况下，表示影像显示装置的最大亮度包含在从300nit到800nit的亮度范围中。在由MAXTVLL表示200nit的情况下，表示影像显示装置的最大亮度是400nit以下。另外，既可以如上述那样将亮度范围交叠而定义，也可以不交叠地定义。此外，MAXTVLL也可以不是表示中心值等的亮度的数值，而表示分配给亮度范围的索引等。例如，由MAXTVLL＝1表示400nit以下的亮度范围，由MAXTVLL＝2表示300～800nit的亮度范围，由MAXTVLL＝3表示700nit以上的亮度范围。
TV Processing Authorized Flag(电视处理许可标志，TVPAF)是表示是否以影像显示装置中的处理为优先的标志，表示是否许可影像显示装置中的元数据的处理。
该TVPAF被设定为GMOF的参数。由此，在GMOF为OFF的情况下不设定TVPAF。
TVPAF＝OFF表示不认可影像显示装置中的处理。即，这意味着由影像再现装置将动态元数据设定为适当的值。
TVPAF＝ON表示以影像显示装置中的处理为优先。即，影像再现装置不将动态元数据及静态元数据变更，而将记录在HDR影像中的原样的动态元数据及静态元数据输出。
Dynamic Metadata Block Mode Flag(DMBM)表示是否可以不由影像显示装置进行动态元数据的处理。DMBM是被从影像再现装置向影像显示装置与元数据一起传送的标志。
DMBM＝OFF表示能够由影像显示装置变更动态元数据。即，在此情况下，影像显示装置在GMOF＝ON的情况下，能够进行不是基于动态元数据而是基于静态元数据的色调映射、或将HDR影像数据解析而进行与影像显示装置的特性对应的处理。
DMBM＝ON表示在影像显示装置中被要求进行遵循从影像再现装置传送来的动态元数据的处理。
图10是表示这些值的组合与影像显示装置中的色调映射处理的关系的图。
Mode0(模式0)是没有叠加菜单图形，按照动态元数据进行动态色调映射的情况。Mode1是叠加了菜单图形，但由影像显示装置选择适当的色调映射的情况。Mode2是叠加了菜单图形，但由影像再现装置判断为不受动态色调映射的影响，在影像显示装置中进行遵循动态元数据的动态色调映射的情况。Mode3是由影像再现装置判断为菜单图形受到动态色调映射的影响，通过将向影像显示装置传送的动态元数据设定为相当于静态元数据而将色调映射固定，进行静态色调映射的情况。
首先，在Java API(应用编程接口)或HDMV IG被调用的情况下，在Mode1下，制作方(studio)(内容制作者)认可由影像显示装置(例如TV)进行的追加处理，设定为TVPAF＝ON(1)。
影像再现装置通过HDMI VSIF(Vendor Specific InfoFrame)，将GMOF＝1(ON)、DMBM)＝0(OFF)、MaxLLGM向影像显示装置传送。在此情况下，影像显示装置(TV)也可以将影像显示装置的色调映射曲线变更以使得不给MaxLLGM带来影响，继续动态元数据模式(动态色调映射)。
在Mode2下，制作方(内容制作者)不认可由影像显示装置(例如TV)进行的追加处理，设定为TVPAF＝OFF(0)。此外，通过HDR10+的算法，判定为MAXTVLL足够高，或MaxLLGM与MAXTVLL相比足够低。在此情况下，进行与Mode1同样的动作。
在Mode3下，是TVPAF＝OFF(0)，并且通过HDR10+算法，判定为MaxLLGM与MAXTVLL相比不足够低。
在此情况下，影像再现装置通过HDMI VSIF，将GMOF＝1(ON)、DMBM＝1(ON)、MaxLLGM向影像显示装置传送。此外，VSIF内的动态元数据被设定为固定静态值。此外，作为影像再现装置的可选，有使元数据的值一点点变化的功能。
[2－3.影像显示装置的结构]
图11是表示有关本实施方式的影像显示装置102B的结构的框图。影像显示装置102B具备亮度信息保持部131、影像接收部132、元数据取得部133、色调映射处理部134和显示部135。
经由HDMI等的影像信息传送部，从影像再现装置101B向影像显示装置102B输入影像信号、动态元数据及静态元数据。此外，影像显示装置102B将表示影像显示装置102B的能力等的信息作为EDID向影像再现装置101B传送。
亮度信息保持部131保持显示图像的情况下的最大亮度信息(MAXTVLL)。影像显示装置102B将该MAXTVLL经由EDID向影像再现装置101B传送。此时，同时地，影像显示装置102B将表示影像显示装置102B对应于规定的动态元数据而能够进行动态色调映射处理等的信息也向影像再现装置101B传送。
影像接收部132接收影像信号及元数据。影像接收部132将影像信号向色调映射处理部134传送，将元数据向元数据取得部133传送。元数据取得部133取得包括GMOF、MaxLLGM及DMBM等的信息的动态元数据的各种参数、以及静态元数据的各种参数，将所取得的参数向色调映射处理部134传送。
色调映射处理部134使用MAXTVLL、显示部135的属性和从元数据取得部133传送的元数据，对被输入的影像信号进行适当的色调映射处理，将处理后的影像信号向显示部135输出。显示部135显示基于处理后的影像信号的影像。
[2－4.元数据处理部的结构]
图12是表示有关本实施方式的影像再现装置101B具备的元数据处理部122的结构的框图。该元数据处理部122具备动态元数据保持部141、静态元数据保持部142、元数据运算部143、元数据判断部144和切换部SW1。
动态元数据保持部141将来自动态元数据提取部120的动态元数据在需要的时机保持，同时向切换部SW1的端子A传送。
静态元数据保持部142将来自静态元数据提取部117的静态元数据在与动态元数据保持部141相同的时机保持，同时向影像信息输出部119传送。将该静态元数据向影像显示装置102B传送。
元数据运算部143通过将由动态元数据保持部141保持的动态元数据、和由静态元数据保持部142保持的静态元数据基于来自元数据判断部144的信息进行处理，生成动态元数据的形式的信息，将所生成的动态元数据向切换部SW1的端子B传送。
元数据判断部144接受来自菜单控制部116B的菜单图形状态信息(GMOF、TVPAF及MaxLLGM等)和来自影像显示装置102B的EDID(对应影像方式的信息及MAXTVLL等)，基于这些信息，为了作为输出的动态元数据而选择来自动态元数据提取部120的动态元数据(由切换部SW1选择端子A)，或选择在元数据运算部143中运算出的动态元数据(由切换部SW1选择端子B)，对切换部SW1进行控制。此外，元数据判断部144将被输入的菜单图形状态信息及MAXTVLL向元数据运算部143传送。此外，元数据判断部144进行是否由动态元数据保持部141和静态元数据保持部142进行元数据的保持的控制。将由切换部SW1选择并输出的动态元数据经由影像信息输出部119向影像显示装置102B传送。
使用图10说明元数据判断部144中的判断基准。在图10中，在VSIF中包含的动态元数据的值是“动态值”的情况下，输出动态地变化的动态元数据。具体而言，将切换部SW1连接到端子A(Case1，情形1)。或者，将切换部SW1连接到端子B。此时，元数据运算部143对于被输入的动态元数据不进行任何运算，将对被输入的动态元数据追加了GMOF、MaxLLGM及DMBM等的值的信息向端子B输出。由此，将包含GMOF、MaxLLGM及DMBM的动态元数据输出(Case2～4、6，情形2～4、6)。
在VSIF中包含的动态元数据的值为固定静态值(Fixed static value)的情况下，将切换部SW1连接到端子B。此外，元数据运算部143通过规定的运算方式运算表示固定的值的动态元数据，向得到的动态元数据追加GMOF、MaxLLGM及DMBM等的值，将追加后的动态元数据输出。
在Case3中，MaxLLGM没有被作为JAVA(注册商标)或HDMV的命令记载在记录介质或HDR数据内。在此情况下，菜单控制部116B根据显示的菜单图形生成MaxLLGM。
在Case6和Case7中，元数据处理部122将MaxLLGM与MAXTVLL比较。元数据处理部122在MaxLLGM相对于MAXTVLL为足够高的亮度的情况下(MAXTVLL为Low)，将动态元数据固定(Case7)。
[2－5.动作]
首先，说明影像再现装置101B的动作。图13是表示有关本实施方式的影像再现装置101B中包含的元数据处理部122的动作的流程图。
影像再现装置101B开始记录在盘111等中的HDR影像的再现。在影像被叠加显示菜单图形之前，GMOF是OFF(S101中OFF)。由此，切换部SW1被连接到端子A，元数据处理部122将由动态元数据提取部120提取出的动态元数据原样向影像信息输出部119输出(S102)。影像信息输出部119将该动态元数据经由HDMI等向影像显示装置102B传送。另外，在不存在有效的GMOF的情况下，也进行与GMOF是OFF的情况同样的动作。
如果在影像中叠加显示菜单图形，则GMOF成为ON(S101中ON)。由此，切换部SW1被连接到端子B，元数据处理部122将从元数据运算部143输出的动态元数据向影像信息输出部119输出。
在GMOF是ON且TVPAF是ON的情况下(S103中ON)，动态元数据保持部141将被输入的动态元数据不保持而原样向元数据运算部143输出。元数据运算部143将追加的元数据(GMOF、MaxLLGM、DMBM)向被输入的动态元数据追加，将追加后的动态元数据输出(S104)。即，元数据处理部122将由动态元数据提取部120提取出的动态元数据大致原样输出。
在GMOF是ON且TVPAF是OFF或无效的情况下(S103中OFF)，元数据处理部122判定为MaxLLGM与MAXTVLL相比足够小(S105)。在MaxLLGM与MAXTVLL相比被看作足够小的情况下(S105中“是”)，与TVPAF是OFF的情况同样，元数据运算部143将追加的元数据(GMOF、MaxLLGM、DMBM)向被输入的动态元数据追加，将追加后的动态元数据输出(S104)。即，元数据处理部122将由动态元数据提取部120提取出的动态元数据大致原样输出。
在MaxLLGM与MAXTVLL相比被看作足够小的情况下，或者在没有MAXTVLL或MaxLLGM(是无效)的情况下(S105中“否”)，动态元数据保持部141将被输入的动态元数据保持，静态元数据保持部142将被输入的静态元数据保持。元数据运算部143使用所保持的静态元数据和所保持的动态元数据，生成固定的动态元数据，将追加的元数据(GMOF、MaxLLGM、DMBM)向所生成的动态元数据追加，将追加后的动态元数据输出(S106)。通过影像显示装置102B使用该固定的动态元数据进行处理，能够得到与使用静态元数据的情况同等的效果。
具体而言，例如元数据运算部143通过将由动态元数据保持部141保持的动态元数据在规定的期间中持续输出，在该期间中将动态元数据固定。另外，在此情况下，不使用静态元数据。
或者，元数据运算部143将保持的动态元数据与保持的静态元数据合成，将得到的元数据作为动态元数据持续地输出。例如，元数据运算部143对由保持的动态元数据表示的影像的最大亮度和由保持的静态元数据表示的影像的最大亮度进行规定的运算(例如，平均或加权相加等)，将表示得到的最大亮度的动态元数据持续地输出。
或者，元数据运算部143也可以计算相当于静态元数据的值作为动态元数据。即，元数据运算部143也可以通过将由在静态元数据保持部142中保持的静态元数据表示的表示最大亮度的动态元数据在规定的期间中持续地输出，在该期间中将动态元数据固定。这样，元数据运算部143使用由动态元数据保持部141保持的动态元数据及由静态元数据保持部142保持的静态元数据的至少一方，在规定的期间中生成表示相同的影像的亮度值(固定值)的动态元数据。
此外，元数据运算部143在使动态元数据向固定值变迁的情况下，也可以使输出的动态元数据的值从当前的值逐渐变化为固定值。此外，元数据运算部143在使输出的动态元数据的值从固定值恢复为由动态元数据提取部120提取的动态元数据的情况下，也可以使输出的动态元数据的值从固定值逐渐变化为当前的值。由此，能够抑制影像显示装置102B中的色调映射的急剧的变化。
另外，所述的逐渐变化，是指在预先设定的期间中，值连续或阶段性地变化。即，在使动态元数据向固定值变迁的情况下，在上述期间中，经过当前的值与固定值之间的1个以上的值，使值从当前的值变更为固定值。此外，所述的预先设定的期间，例如是显示多帧的期间。
所述的将MaxLLGM看作与MAXTVLL相比足够小的条件，例如是MaxLLGM比MAXTVLL的50％小等的条件。即，该条件是MaxLLGM相对于MAXTVLL的比例(MaxLLGM/MAXTVLL)比预先设定的比例(例如0.5)小。
如果使该比例变小，则当将菜单图形叠加在HDR影像中时，能够减小由动态元数据带来的影响，但由于色调映射容易成为固定，所以无法成为高品质的HDR影像的情况增加。由此，通过降低菜单图形的亮度，能够消除动态色调映射对菜单图形的影响，通过尽可能使用动态的色调映射，能够实现高品质的HDR影像的显示。但是，由于对于菜单图形的制作的限制变大，所以需要设为适当的值。
将这一连串的处理反复进行，直到影像的再现结束(S107)。例如，将该处理以1帧单位或多帧单位反复进行。
接着，说明影像显示装置102B的动作。图14是表示有关本实施方式的影像显示装置102B中包含的色调映射处理部134的动作的流程图。
如果开始影像显示，则影像接收部132接收影像信号及元数据。影像信号和元数据被分离，分别被向色调映射处理部134传送。
(1)在元数据包含静态元数据而不包含动态元数据的情况下，(2)在存在动态元数据而GMOF为OFF或GMOF不存在的情况下，色调映射处理部134执行遵循元数据的色调映射(S112)。并且，将色调映射后的影像信号向显示部135传送，显示部135显示基于该影像信号的HDR影像。
具体而言，在元数据包含静态元数据而不包含动态元数据的情况下，色调映射处理部134进行遵循静态元数据的静态的色调映射、或使用将影像信号解析的结果的色调映射。
此外，在元数据中存在动态元数据的情况下，色调映射处理部134进行遵循动态元数据的动态色调映射。在此情况下，色调映射处理部134也可以使用将影像信号解析的结果。
在GMOF是ON、并且DMBM是ON或没有定义的情况下(S111中ON，且S113中ON)，色调映射处理部134进行遵循动态元数据的动态色调映射(S114)。在此情况下，色调映射处理部134也可以使用将影像信号解析的结果。
GMOF是ON，且DMBM是OFF(S111中ON，且S113中ON)，色调映射处理部134将动态元数据中包含的MaxLLGM与MAXTVLL比较(S115)。在MaxLLGM被看作与MAXTVLL相比足够小的情况下(S115中“是”)，色调映射处理部134进行遵循动态元数据的动态色调映射(S114)。另外，MaxLLGM看作与MAXTVLL相比足够小的条件例如与上述步骤S105是同样的。此外，色调映射处理部134也可以在该判定中使用MAXTVLL以外的参数。
在MaxLLGM没有被看作与MAXTVLL相比足够小的情况下，或在没有传送来MaxLLGM的情况下(S115中“否”)，色调映射处理部134进行遵循静态元数据的色调映射(S116)。另外，在传送来MaxLLGM的情况下，色调映射处理部134也可以对MaxLLGM以上的亮度进行遵循动态元数据的动态色调映射，对不到MaxLLGM的亮度进行遵循静态元数据的静态色调映射。
将这一连串的处理反复进行，直到影像的显示结束(S117)。例如，将该处理以1帧单位或多帧单位反复进行。
如以上这样，色调映射处理部134使用表示规定期间中包含的多个时间区间的各自中的影像的最大亮度的动态元数据，进行将各时间区间的影像的亮度使用与该时间区间的影像的最大亮度对应的变换曲线进行变换的色调映射处理(动态色调映射处理)。显示部135显示色调映射处理后的影像。元数据处理部122使用表示上述规定期间中的影像的最大亮度的静态元数据，生成表示在多个时间区间中相同的上述最大亮度的第1动态元数据。影像显示系统100B对(i)元数据处理部122使用静态元数据生成第1动态元数据(S106)、(ii)色调映射处理部134使用第1动态元数据进行色调映射处理(S114)的第1动作，和色调映射处理部134使用在多个时间区间中最大亮度发生变化的第2动态元数据进行色调映射处理(S112)的第2动作进行切换。
由此，能够不变更色调映射处理部的动作，而切换是进行动态色调映射还是将色调映射固定。即，能够实现不将色调映射处理部的结构变更而将色调映射固定的功能。此外，色调映射处理部有可能包含在影像显示装置中。由此，能够不对影像显示装置加以变更，或在减少变更的同时，仅通过对于影像再现装置的变更来实现上述功能。此外，能够抑制因影像显示装置中的处理而画质劣化。这样，通过本实施方式的方法，能够提高显示的影像的品质。
此外，影像显示系统100B还具备通过将图形向主影像合成而生成上述影像的影像合成部118。在主影像中合成有图形的情况下(S101中ON，且S111中ON)，进行上述第1动作(S106且S114)。在主影像中没有合成图形的情况下，进行第2动作，或进行使用静态元数据进行上述色调映射处理的第3动作(S112)。由此，能够抑制图形的亮度的变化。
此外，在主影像中合成有图形(S101中ON)，并且图形的最大亮度(MaxLLGM)相对于显示部135能够显示的最大亮度(MAXTVLL)的比例比预先设定的值高的情况下(S105中“否”)，进行第1动作(S106且S114)。在主影像中合成有图形(S101中ON)，并且上述比例比预先设定的值低的情况下(S105中“是”)，进行第2动作(S104且S114)。
由此，可以在发生图形的亮度的变化的可能性较高的情况下，将色调映射固定，在发生图形的亮度的变化的可能性较低的情况下，继续动态色调映射。由此，能够在抑制图形的亮度的变化的同时，适当地进行动态色调映射。
此外，在主影像中合成有图形(S101中ON)，并且上述比例比预先设定的值高的情况下(S105中“否”，或S115中“否”)，基于附属于影像的信息(例如TVPAF)，进行第1动作(S106且S114)或第3动作(S116)。
由此，内容制作者能够在色调映射处理部(例如影像显示装置)中设定是否许可变更色调映射处理。
此外，元数据处理部122通过运算由静态元数据表示的影像的最大亮度和由第2动态元数据表示的开始第1动作的时间区间中的影像的最大亮度，运算由第1动态元数据表示的上述相同的最大亮度。由此，能够制作出添加了第2动态元数据和静态元数据的第1动态元数据。
此外，在从第2动作向第1动作的切换时，元数据处理部122将由第1动态元数据表示的最大亮度从由第2动态元数据表示的最大亮度向上述相同的最大亮度在多帧中连续地或阶段性地变更。由此，在动作的切换时中，能够平滑地变更色调映射。
此外，影像显示装置102B具备：色调映射处理部134，进行使用表示规定期间中包含的多个时间区间的各自中的影像的最大亮度的动态元数据、将各时间区间的影像的亮度使用与该时间区间的上述影像的上述最大亮度对应的变换曲线进行变换的色调映射处理；以及显示部135，显示色调映射处理后的影像。色调映射处理部134对如下动作切换：第1动作(S114)，利用使用表示规定期间中的影像的最大亮度的静态元数据生成的、表示在多个时间区间中相同的上述最大亮度的第1动态元数据，进行色调映射处理；以及第2动作(S112)，使用在多个时间区间中最大亮度发生变化的第2动态元数据，进行色调映射处理。
由此，能够切换是不变更色调映射处理部的动作而进行动态色调映射，还是将色调映射固定。即，能够不变更色调映射处理部的结构而实现将色调映射固定的功能。此外，能够抑制因影像显示装置中的处理而画质劣化。这样，通过本实施方式的方法，能够提高显示的影像的品质。
此外，色调映射处理部134在影像中包含图形的情况下(S111中ON)，进行第1动作(S114)，在影像中不包含上述图形的情况下(S111中OFF)，进行第2动作，或进行使用静态元数据进行色调映射处理的第3动作(S112)。
此外，色调映射处理部134在影像中包含图形的情况下(S111中ON)，色调映射处理部134根据表示强制进行使用动态元数据的第1色调映射处理和使用静态元数据的第2色调映射处理中的第1色调映射处理的标志(DMBM)，在强制进行第1色调映射处理的情况下(S113中ON)，进行第1色调映射处理，根据标志(DMBM)，在不强制进行第1色调映射处理的情况下(S113中OFF)，进行第1色调映射处理(S114)或第2色调映射处理(S116)。在进行第1动作的情况下(S106且S114)，由标志(DMBM)，强制进行第1色调映射处理。
由此，在影像再现装置中能够强制地进行使用第1动态元数据的处理，所以能够可靠地实现使用第1动态元数据将色调映射固定的处理。
此外，色调映射处理部134在影像中包含图形，并且根据标志(DMBM)，没有强制进行第1色调映射处理的情况下(S111中ON且S113中OFF)，在图形的最大亮度(MaxLLGM)相对于显示部135能够显示的最大亮度(MAXTVLL)的比例比预先设定的值高的情况下(S115中“否”)，进行第2色调映射处理(S116)，在上述比例比预先设定的值低的情况下(S115中“是”)，进行第1色调映射处理(S114)。
由此，可以在发生图形的亮度的变化的可能性较高的情况下，将色调映射固定，在发生图形的亮度的变化的可能性较低的情况下，继续动态色调映射。由此，能够在抑制图形的亮度的变化的同时，适当地进行动态色调映射。
[3.变形例]
影像再现装置再现的HDR影像例如也可以是Blu－ray盘、DVD、Internet的运动图像发布站点、广播或HDD(Hard Disk Drive)内的影像。
上述影像再现装置也可以是盘播放器、盘记录器、机顶盒、电视、个人计算机或智能电话等，将来自记录介质、广播或因特网的压缩的影像信号解码并向影像显示装置传送的装置。此外，也可以是影像再现装置101B的功能的一部分或全部包含在影像显示装置102B中。例如，也可以将影像再现装置101B中包含的处理部中的盘111及BD－ROM驱动部112以外的处理部包含在影像显示装置102B中。此外，也可以是影像显示装置102B中包含的影像接收部132、元数据取得部133及色调映射处理部134包含在影像再现装置101B中。此外，也可以将色调映射处理部134中包含的处理部中的色调映射部133以外的处理部包含在影像再现装置101B中。
将来自影像再现装置的影像信号向影像显示装置传送的影像信号传送机构既可以是将HDMI、DVI或DP等的影像信号以非压缩的状态传送的机构，也可以是如经过网络的传送那样将压缩了影像信号的形式传送的机构。
影像显示装置的最大亮度信息或色调映射信息向影像再现装置的设定也可以通过利用者使用遥控器等向影像再现装置输入来进行，也可以通过利用者使用影像再现装置具备的操作装置输入来进行。或者，利用者也可以使用因特网或其他机构取得这些信息，将所取得的信息向便携存储介质保存，经由便携存储介质将这些信息向影像再现装置传送。此外，也可以将影像再现装置直接连接在因特网上，影像再现装置从服务器的数据库取得这些信息。进而，影像再现装置也可以在影像显示装置上显示测试样式，一边使用所显示的测试样式确认影像显示装置的特性，一边取得及存储这些信息。
影像再现装置也可以通过根据其数据检测图形(字幕或菜单)的亮度来生成图形亮度信息(MaxLLGM)，也可以取得在影像数据制作时预先制作的图形的亮度。例如，既可以将图形的亮度记录到盘中，也可以作为元数据通过广播或Internet发送。影像再现装置将图形的亮度读取，作为动态元数据的一部分向影像显示装置传送。或者，在连接于Internet上的服务器的数据库中作为对于再现的内容的信息而记录图形(字幕或菜单)的亮度信息，影像再现装置从该数据库取得图形的亮度信息(MaxLLGM)，将所取得的亮度信息向影像显示装置发送。
在MaxLLGM与MAXTVLL的比较中使用的上述比例(例如50％)也可以根据显示的影像信号的特征决定并保存在盘中。或者，也可以根据影像显示装置的特征来决定上述比例。此外，该比例也可以从因特网上的数据库取得。
以上，对有关本公开的实施方式的影像显示系统进行了说明，但本公开并不限定于该实施方式。
此外，有关上述实施方式的影像显示系统中包含的各处理部典型地可以作为集成电路即LSI实现。既可以将它们单独地1芯片化，也可以包含一部分或全部而1芯片化。
此外，集成电路化并不限于LSI，也可以由专用电路或通用处理器实现。也可以利用在LSI制造后能够编程的FPGA(Field Programmable Gate Array：现场可编程门阵列)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。
此外，在上述各实施方式中，也可以将各构成要素由专用的硬件构成，或通过执行适合于各构成要素的软件程序来实现。各构成要素也可以通过CPU或处理器等的程序执行部将记录在硬盘或半导体存储器等的记录介质中的软件程序读出并执行而实现。
此外，本公开也可以作为由影像显示系统执行的各种方法实现。
此外，框图中的功能块的划分是一例，也可以将多个功能块作为一个功能块实现，或将一个功能块划分为多个，或将一部分功能转移到其他功能块中。此外，也可以将具有类似的功能的多个功能块的功能由单一的硬件或软件并行或时间划分地进行处理。
此外，流程图中的各步骤被执行的顺序是为了具体地说明本公开而例示的，也可以是上述以外的顺序。此外，也可以将上述步骤的一部分与其他步骤同时(并行)地执行。
以上，基于实施方式对有关一个或多个技术方案的影像显示系统进行了说明，但本公开并不限定于该实施方式。只要不脱离本公开的主旨，对本实施方式实施本领域技术人员想到的各种变形后的形态、或将不同实施方式的构成要素组合而构建的形态也也可以也包含在一个或多个技术方案的范围内。
产业上的可利用性
本公开能够对影像显示系统、影像再现装置或影像显示装置应用。
标号说明
100、100A、100B 影像显示系统
101、101A、101B 影像再现装置
102、102A、102B 影像显示装置
111 盘
112 BD－ROM驱动部
113 解复用器
114 PG解码器
115 影像解码器
116、116B 菜单控制部
117 静态元数据提取部
118 影像合成部
119 影像信息输出部
120 动态元数据提取部
121 元数据切换部
122 元数据处理部
131 亮度信息保持部
132 影像接收部
133 元数据取得部
134 色调映射处理部
135 显示部
141 动态元数据保持部
142 静态元数据保持部
143 元数据运算部
144 元数据判断部

Claims (7)

1.一种影像显示系统，其特征在于，
具备：
色调映射处理部，使用表示规定期间中包含的多个时间区间的各自中的影像的最大亮度的动态元数据，进行色调映射处理，该色调映射处理对各时间区间的上述影像的亮度用与该时间区间的上述影像的上述最大亮度对应的变换曲线进行变换；
显示部，显示上述色调映射处理后的影像；以及
元数据处理部，使用表示上述规定期间中的上述影像的最大亮度的静态元数据，生成表示在上述多个时间区间中相同的上述最大亮度的上述第1动态元数据；
该影像显示系统对如下动作进行切换：
第1动作，(i)上述元数据处理部使用上述静态元数据生成上述第1动态元数据，(ii)上述色调映射处理部使用上述第1动态元数据进行上述色调映射处理；和
第2动作，上述色调映射处理部使用在上述多个时间区间中上述最大亮度发生变化的第2动态元数据进行上述色调映射处理。
2.如权利要求1所述的影像显示系统，其特征在于，
上述影像显示系统还具备通过对主影像合成图形而生成上述影像的合成部；
在上述主影像中合成有上述图形的情况下，进行上述第1动作；
在上述主影像中没有合成上述图形的情况下，进行上述第2动作、或进行使用上述静态元数据进行上述色调映射处理的第3动作。
3.如权利要求2所述的影像显示系统，其特征在于，
在上述主影像中合成有上述图形、并且上述图形的最大亮度相对于上述显示部能够显示的最大亮度的比例比预先设定的值高的情况下，进行上述第1动作；
在上述主影像中合成有上述图形、并且上述比例比上述预先设定的值低的情况下，进行上述第2动作。
4.如权利要求3所述的影像显示系统，其特征在于，
在上述主影像中合成有上述图形、并且上述比例比上述预先设定的值高的情况下，基于附属于上述影像的信息进行上述第1动作或第3动作。
5.如权利要求2所述的影像显示系统，其特征在于，
上述元数据处理部通过运算由上述静态元数据表示的上述影像的最大亮度、和由上述第2动态元数据表示的已开始上述第1动作的时间区间中的上述影像的最大亮度，从而运算由上述第1动态元数据表示的上述相同的最大亮度。
6.如权利要求2所述的影像显示系统，其特征在于，
在从上述第2动作向上述第1动作的切换时，上述元数据处理部将由上述第1动态元数据表示的上述最大亮度从由上述第2动态元数据表示的上述最大亮度向上述相同的最大亮度在多帧中连续地或阶段性地变更。
7.一种影像显示方法，是影像显示系统中的影像显示方法，其特征在于，
包括：
色调映射处理步骤，使用表示规定期间中包含的多个时间区间的各自中的影像的最大亮度的动态元数据，进行色调映射处理，该色调映射处理对各时间区间的上述影像的亮度用与该时间区间的上述影像的上述最大亮度对应的变换曲线进行变换；
显示步骤，显示上述色调映射处理后的影像；以及
元数据处理步骤，使用表示上述规定期间中的上述影像的最大亮度的静态元数据，生成表示在上述多个时间区间中相同的上述最大亮度的上述第1动态元数据；
该影像显示方法对如下动作进行切换：
第1动作，(i)使用上述静态元数据生成上述第1动态元数据，(ii)使用上述第1动态元数据进行上述色调映射处理；和
第2动作，使用在上述多个时间区间中上述最大亮度发生变化的第2动态元数据进行上述色调映射处理。
CN201880003491.1A 2017-10-06 2018-02-26 影像显示系统及影像显示方法 Active CN109891902B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762569301P 2017-10-06 2017-10-06
US62/569,301 2017-10-06
PCT/JP2018/006862 WO2019069482A1 (ja) 2017-10-06 2018-02-26 映像表示システム及び映像表示方法

Publications (2)

Publication Number Publication Date
CN109891902A true CN109891902A (zh) 2019-06-14
CN109891902B CN109891902B (zh) 2022-02-18

Family

ID=65994527

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201880003487.5A Active CN109891901B (zh) 2017-10-06 2018-02-26 影像显示装置及影像显示方法
CN201880003491.1A Active CN109891902B (zh) 2017-10-06 2018-02-26 影像显示系统及影像显示方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201880003487.5A Active CN109891901B (zh) 2017-10-06 2018-02-26 影像显示装置及影像显示方法

Country Status (5)

Country Link
US (2) US10992877B2 (zh)
EP (2) EP3694217A4 (zh)
JP (2) JP7108880B2 (zh)
CN (2) CN109891901B (zh)
WO (2) WO2019069483A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109891901A (zh) * 2017-10-06 2019-06-14 松下知识产权经营株式会社 影像显示系统及影像显示方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109691119B (zh) 2017-06-21 2022-04-19 松下知识产权经营株式会社 影像显示系统及影像显示方法
US10873684B2 (en) 2017-07-14 2020-12-22 Panasonic Intellectual Property Management Co., Ltd. Video display apparatus and video display method
US11153548B2 (en) * 2017-10-31 2021-10-19 Sony Corporation Reproduction apparatus, reproduction method, program, and recording medium
JP7184544B2 (ja) * 2018-06-08 2022-12-06 シャープ株式会社 表示制御装置、表示装置、テレビジョン、及び表示制御方法
KR20210001762A (ko) * 2019-06-28 2021-01-06 삼성전자주식회사 영상을 처리하는 전자 장치 및 그 영상 처리 방법
KR20210045227A (ko) * 2019-10-16 2021-04-26 삼성전자주식회사 디스플레이 장치 및 그 동작방법
CN115361510A (zh) * 2020-05-08 2022-11-18 华为技术有限公司 一种高动态范围hdr视频的处理方法、编码设备和解码设备
US11769234B2 (en) 2020-10-07 2023-09-26 Qualcomm Incorporated Methods and apparatus for histogram based tone mapping
WO2023095718A1 (ja) * 2021-11-29 2023-06-01 パナソニックＩｐマネジメント株式会社 映像処理方法、映像処理装置、及び、プログラム
CN115564659B (zh) * 2022-02-28 2024-04-05 荣耀终端有限公司 视频处理方法和装置
KR20240009810A (ko) * 2022-07-14 2024-01-23 삼성전자주식회사 영상 출력 장치 및 그 제어 방법
CN116320218B (zh) * 2023-05-24 2023-08-29 深圳金智凌轩视讯技术有限公司 基于嵌入式计算机平台的多路视频合成分析处理管理系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102763134A (zh) * 2010-02-19 2012-10-31 汤姆森特许公司 用于高动态范围视频色调映射的参数内插
CN103843032A (zh) * 2012-08-08 2014-06-04 杜比实验室特许公司 用于高动态范围图像的图像处理
WO2016027423A1 (ja) * 2014-08-19 2016-02-25 パナソニックＩｐマネジメント株式会社 伝送方法、再生方法及び再生装置
US20170116963A1 (en) * 2015-10-22 2017-04-27 Dolby Laboratories Licensing Corporation Ambient-Light-Corrected Display Management for High Dynamic Range Images
US20170186141A1 (en) * 2015-12-26 2017-06-29 Hyeong-Seok Victor Ha Video Tone Mapping For Converting High Dynamic Range (HDR) Content To Standard Dynamic Range (SDR) Content

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5438279A (en) 1977-09-02 1979-03-22 Asahi Chem Ind Co Ltd Production of strengthened forous membrabe
EP3467816A1 (en) 2010-02-24 2019-04-10 Dolby Laboratories Licensing Corp. Display management methods and apparatus
RU2643485C2 (ru) 2011-09-27 2018-02-01 Конинклейке Филипс Н.В. Устройство и способ для преобразования динамического диапазона изображений
US10055866B2 (en) 2013-02-21 2018-08-21 Dolby Laboratories Licensing Corporation Systems and methods for appearance mapping for compositing overlay graphics
KR101978935B1 (ko) 2013-02-21 2019-05-16 돌비 레버러토리즈 라이쎈싱 코오포레이션 오버레이 그래픽스를 합성하기 위한 어피어런스 매핑을 위한 시스템들 및 방법들
JP6241683B2 (ja) 2013-08-20 2017-12-06 ソニー株式会社 再生装置、再生方法、および記録媒体
US9230338B2 (en) * 2014-03-05 2016-01-05 Dolby Laboratories Licensing Corporation Graphics blending for high dynamic range video
US9584786B2 (en) 2014-03-05 2017-02-28 Dolby Laboratories Licensing Corporation Graphics blending for high dynamic range video
JP5906504B1 (ja) * 2014-06-26 2016-04-20 パナソニックＩｐマネジメント株式会社 データ出力装置、データ出力方法及びデータ生成方法
KR102190233B1 (ko) * 2014-10-06 2020-12-11 삼성전자주식회사 영상 처리 장치 및 이의 영상 처리 방법
JP2016081553A (ja) 2014-10-17 2016-05-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 記録媒体、再生方法、および再生装置
JP6698081B2 (ja) 2014-11-10 2020-05-27 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 符号化のための方法、ビデオプロセッサ、復号のための方法、ビデオ復号器
JP2016100039A (ja) 2014-11-17 2016-05-30 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 記録媒体、再生方法、および再生装置
WO2016181584A1 (ja) * 2015-05-12 2016-11-17 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 表示方法および表示装置
JP6663214B2 (ja) * 2015-05-26 2020-03-11 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ 表示方法および表示装置
KR102488954B1 (ko) 2016-05-16 2023-01-16 엘지전자 주식회사 영상 처리 장치 및 그의 영상 처리 방법
CN113593499B (zh) * 2016-05-27 2023-12-12 杜比实验室特许公司 在视频优先级与图形优先级之间转换
CN109691119B (zh) * 2017-06-21 2022-04-19 松下知识产权经营株式会社 影像显示系统及影像显示方法
US10939158B2 (en) * 2017-06-23 2021-03-02 Samsung Electronics Co., Ltd. Electronic apparatus, display apparatus and control method thereof
CN109691117B (zh) * 2017-07-07 2022-05-27 松下知识产权经营株式会社 影像处理系统及影像处理方法
US10735688B2 (en) * 2017-07-13 2020-08-04 Samsung Electronics Co., Ltd. Electronics apparatus, display apparatus and control method thereof
US10873684B2 (en) * 2017-07-14 2020-12-22 Panasonic Intellectual Property Management Co., Ltd. Video display apparatus and video display method
US10504263B2 (en) * 2017-08-01 2019-12-10 Samsung Electronics Co., Ltd. Adaptive high dynamic range (HDR) tone mapping with overlay indication
WO2019053916A1 (ja) * 2017-09-13 2019-03-21 パナソニックＩｐマネジメント株式会社 映像表示装置及び映像表示方法
EP3694217A4 (en) * 2017-10-06 2020-12-02 Panasonic Intellectual Property Management Co., Ltd. IMAGE DISPLAY DEVICE AND IMAGE DISPLAY METHOD

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102763134A (zh) * 2010-02-19 2012-10-31 汤姆森特许公司 用于高动态范围视频色调映射的参数内插
CN103843032A (zh) * 2012-08-08 2014-06-04 杜比实验室特许公司 用于高动态范围图像的图像处理
WO2016027423A1 (ja) * 2014-08-19 2016-02-25 パナソニックＩｐマネジメント株式会社 伝送方法、再生方法及び再生装置
US20170116963A1 (en) * 2015-10-22 2017-04-27 Dolby Laboratories Licensing Corporation Ambient-Light-Corrected Display Management for High Dynamic Range Images
US20170186141A1 (en) * 2015-12-26 2017-06-29 Hyeong-Seok Victor Ha Video Tone Mapping For Converting High Dynamic Range (HDR) Content To Standard Dynamic Range (SDR) Content

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
JUI-CHIU CHIANG等: "New tone mapping and tone reproduction techniques-application to bit-depth scalable video coding", 《2011 19TH EUROPEAN SIGNAL PROCESSING CONFERENCE》 *
陆许明等: "一种亮度可控与细节保持的高动态范围图像色调映射方法", 《自动化学报》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109891901A (zh) * 2017-10-06 2019-06-14 松下知识产权经营株式会社 影像显示系统及影像显示方法
CN109891902B (zh) * 2017-10-06 2022-02-18 松下知识产权经营株式会社 影像显示系统及影像显示方法

Also Published As

Publication number Publication date
US10992877B2 (en) 2021-04-27
CN109891902B (zh) 2022-02-18
WO2019069483A1 (ja) 2019-04-11
CN109891901A (zh) 2019-06-14
EP3694217A4 (en) 2020-12-02
JP7133772B2 (ja) 2022-09-09
US20210006689A1 (en) 2021-01-07
CN109891901B (zh) 2022-04-08
JPWO2019069482A1 (ja) 2020-09-10
WO2019069482A1 (ja) 2019-04-11
EP3694216A1 (en) 2020-08-12
EP3694216A4 (en) 2020-12-02
JP7108880B2 (ja) 2022-07-29
US20190394384A1 (en) 2019-12-26
EP3694217A1 (en) 2020-08-12
US11146737B2 (en) 2021-10-12
JPWO2019069483A1 (ja) 2020-09-17

Similar Documents

Publication Publication Date Title
CN109891902A (zh) 影像显示系统及影像显示方法
JP7117626B2 (ja) 映像表示装置及び映像表示方法
JP7117558B2 (ja) 映像表示装置及び映像表示方法
CN106165403A (zh) 数据输出装置、数据输出方法以及数据生成方法
CN106170985A (zh) 再现方法及再现装置
CN109691118B (zh) 影像显示系统及影像显示方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant