CN108141576A - 显示装置及其控制方法 - Google Patents

显示装置及其控制方法 Download PDF

Info

Publication number
CN108141576A
CN108141576A CN201680055996.3A CN201680055996A CN108141576A CN 108141576 A CN108141576 A CN 108141576A CN 201680055996 A CN201680055996 A CN 201680055996A CN 108141576 A CN108141576 A CN 108141576A
Authority
CN
China
Prior art keywords
interest
area
information
view
background
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680055996.3A
Other languages
English (en)
Other versions
CN108141576B (zh
Inventor
林兑奎
姜羽锡
韩升勋
文永秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108141576A publication Critical patent/CN108141576A/zh
Application granted granted Critical
Publication of CN108141576B publication Critical patent/CN108141576B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3179—Video signal processing therefor
    • G06T5/92—
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57—Control of contrast or brightness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H04N5/9305—Regeneration of the television signal or of selected parts thereof involving the mixing of the reproduced video signal with a non-recorded signal, e.g. a text signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/68—Circuits for processing colour signals for controlling the amplitude of colour signals, e.g. automatic chroma control circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing

Abstract

提供了一种处理和显示图像信号的显示装置及其控制方法。用于控制显示装置的所述方法包含：接收图像数据；将接收到的图像数据划分成图像信号和元数据；以及通过使用所述元数据获取与感兴趣区域有关的信息并且通过使用获取的与所述感兴趣区域有关的信息针对所述感兴趣区域执行高动态范围(HDR)处理。

Description

显示装置及其控制方法
技术领域
与示例实施例一致的装置和方法涉及显示装置及其控制方法，并且更具体地，涉及一种通过使用所接收到的图像数据的元数据针对特定区域执行HDR处理的显示装置及其控制方法。
背景技术
在自然环境中，亮度范围非常宽。例如，从诸如夜空的非常黑暗的场景到诸如日光的非常明亮的场景的亮度范围非常宽。特别地，存在场景具有从非常黑暗的部分到非常明亮的部分的宽动态范围的许多情况。
然而，目前，由于可由一般显示装置表达的最大亮度的限制以及发送到显示装置的输入信号的表现力的限制，难以实际地表达人类视觉系统在观测自然环境的同时可感觉到的动态范围或对应的亮度比。可选地，存在诸如相机的图像生成装置的动态范围比显示装置可表达的动态范围窄的情况。
如果图像生成装置和显示装置可表示的动态范围是不同的，则可能发生图像质量失真。为了使图像质量失真最小化，存在需要高成本来执行诸如色调映射、饱和度映射等的各种映射的问题。
因此，需要用于使图像质量失真和实现成本最小化的处理技术以及用于HDR效果的技术。
详细说明
技术问题
一个或多个示例实施例提供一种显示装置及其控制方法，所述显示装置通过分析接收到的图像数据的元数据、通过使用感兴趣区域的前视图和背景信息来执行感兴趣区域的HDR处理。
问题的解决方案
根据示例实施例的一个方面，提供一种对处理和显示图像信号的显示装置进行控制的方法，所述方法包括：接收图像数据；将接收到的图像数据划分成图像信号和元数据；以及通过使用所述元数据来获取与感兴趣区域有关的信息并且通过使用获取的与所述感兴趣区域有关的信息针对所述感兴趣区域执行高动态范围(HDR)处理。
与所述感兴趣区域有关的所述信息可以包括与所述感兴趣区域相对应的坐标以及与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息。
执行所述HDR处理可以包括：通过使用与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息来确定与包括在所述感兴趣区域中的多个像素有关的信息；以及根据与所述多个像素有关的信息来调整包括在所述感兴趣区域中的多个像素值。
与所述像素有关的所述信息可以包括指示所述多个像素属于与背景相对应的第一组、与前视图相对应的第二组以及与前视图和背景的混合相对应的第三组中的哪一个组的信息。
调整所述多个像素值可以包括通过针对所述多个像素执行色调映射和饱和度映射中的至少一种来调整色调或饱和度中的至少一个。
与所述感兴趣区域相对应的所述坐标可以是与包括所述图像数据的主要对象的预定形状有关的坐标。
与所述感兴趣区域相对应的所述坐标可以是有通过将包括所述图像数据的主要对象的预定形状放大预定比率而生成的形状有关的坐标。
所述颜色范围信息可以包括与maxRGB、红色(R)、绿色(G)和蓝色(B)中的至少一种的范围有关的信息。
根据示例实施例的一个方面，提供一种处理和显示图像信号的显示装置，其包含：图像接收器，所述图像接收器被配置为接收图像数据；解码器，所述解码器被配置为将接收到的图像数据划分成图像信号和元数据；以及图像处理器，所述图像处理器被配置为通过使用所述元数据来获取与感兴趣区域有关的信息并且通过使用获取的与所述感兴趣区域有关的信息针对所述感兴趣区域执行高动态范围(HDR)处理。
与所述感兴趣区域有关的所述信息可以包括与所述感兴趣区域相对应的坐标以及与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息。
所述图像处理器可以被进一步配置为：通过使用与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息来确定与包括在所述感兴趣区域中的多个像素有关的信息，并且根据与所述多个像素有关的信息来调整包括在所述感兴趣区域中的多个像素值。
与所述像素有关的所述信息可以包括指示所述多个像素属于与背景相对应的第一组、与前视图相对应的第二组以及与前视图和背景的混合相对应的第三组中的哪一个组的信息。
所述图像处理器可以通过针对所述多个像素执行色调映射和饱和度映射中的至少一种来调整色调和饱和度中的至少一个。
与所述感兴趣区域相对应的所述坐标可以是与包括所述图像数据的主要对象的预定形状有关的坐标。
与所述感兴趣区域相对应的所述坐标可以是与通过将包括所述图像数据的主要对象的预定形状放大预定比率而生成的形状有关的坐标。
所述颜色范围信息可以包括与maxRGB、红色(R)、绿色(G)和蓝色(B)中的至少一种的范围有关的信息。
本发明的效果
如上所述，根据各种示例实施例，能够提供一种用于显示已针对感兴趣区域执行了HDR处理的图像的显示装置及其控制方法。
附图的简要说明
图1是示意性地例示了根据示例实施例的显示装置的配置的框图；
图2是示意性例示了根据示例实施例的包括在显示装置中的图像处理器的配置的框图；
图3是示意性例示了根据示例实施例的用于获取与感兴趣区域有关的信息的一部分的配置的框图；
图4、图5a、图5b、图5c、图5d、图6a、图6b、图7a、图7b、图8和图9是例示了根据各种示例实施例的用于通过使用与显示装置的感兴趣区域有关的信息针对感兴趣区域执行HDR处理的各种示例实施例的图；以及
图10是例示了根据示例实施例的控制显示装置的方法的流程图。
实施本发明的优选实施例
简要地描述在本公开的各种示例实施例的描述中使用的术语，然后将更详细地描述本公开的各种示例实施例。
在本公开的示例实施例中使用的术语是现在广泛地使用并考虑到本公开的功能而选择的一般术语。然而，这些术语可以根据本领域的技术人员的意图、先例或新技术的出现而变化。另外，在指定情况下，可以任意地选择术语。在这种情况下，将在对应描述中说明术语的含义。因此，本公开中使用的术语可以基于本公开中描述的术语和内容的含义来定义，而不是简单地基于术语的名称。
在本公开中，可以使用包括诸如“第一”、“第二”等的序数的术语来描述各种组件，但是组件将不被解释为限于这些术语。这些术语仅用于区分一个组件和其它组件。例如，在不脱离本公开的范围的情况下，可以将“第一”组件命名为“第二”组件，并且反之亦然。术语“和/或”包括多个项目的组合或多个项目中的任何一个。
进一步地，在本公开中，除非上下文另外清楚地指示，否则说明书中使用的单数形式旨在包括复数形式。
进一步地，应进一步理解的是，本公开中使用的术语“包含”或“具有”指定存在说明书中提及的陈述特征、数字、步骤、操作、组件、部分或其组合，而不排除存在或添加一个或多个其它特征、数字、步骤、操作、组件、部分或其组合。
进一步地，在本公开中，“模块”或“单元”执行至少一种功能或操作并且可以通过硬件或软件或者硬件和软件的组合来实现。进一步地，多个“模块”或多个“单元”被集成到除需要由特定硬件实现的“模块”或“单元”之外的至少一个模块中，并且因此可以由至少一个处理器实现。
进一步地，在本公开中，其中任何一个部分与另一部分连接的情况包括这些部分彼此直接地连接的情况和这些部分利用插置在其之间的其它元件而彼此电连接的情况。
进一步地，在本公开中，输入(例如，用户输入)可以包括触摸输入、弯曲输入、语音输入、按钮输入和多模态输入中的至少一种，但是不限于此。
除非另外指示，否则应当理解的是，在本公开中使用的包括技术和科学术语的所有术语具有与由本领域的技术人员所理解的含义相同的含义。在常用词典中定义的术语应当被解释为具有与相关技术的上下文含义相同的含义，而不应当被解释为具有理想或夸大的含义，除非它们在各种示例性实施例中被清楚地定义。
另外，根据示例实施例的图像信号的高动态范围(HDR)可以指代用于在生成图像数据时由用户生动地表达对象的意图、与图像拍摄环境有关的信息以及要表达为与显示装置的规格相对应的图像添加信息。
另外，在示例实施例中，感兴趣区域可以是包括主要对象的区域。另外，前视图可以是与来自感兴趣区域中的主要对象相对应的区域。背景可以是与来自感兴趣区域中的主要对象不相对应的区域。
在下文中，将参考附图更详细地描述本公开。图1是例示了根据本公开的示例实施例的显示装置100的示例配置的框图。如图1所示，显示装置100可以包括图像接收器110、解码器120和图像处理器130。根据示例实施例，显示装置100可以作为诸如智能TV、台式PC、智能电话、平板PC、笔记本PC、机顶盒等的各种电子装置被实现。
图像接收器110可以从外部设备接收图像数据。例如，图像处理器110可以从外部设备接收编码的图像包或者可以接收比特流。另外，图像处理器110可以以无线方式从广播站接收射频(RF)信号，或者可以通过电线接收符合复合视频、分量视频、超级视频、SCART和高清晰度多媒体接口(HDMI)和电影电视工程师协会(SMPTE)标准等的图像信号。可选地，图像处理器110可以通过访问web服务器来接收web内容的数据包。根据情况，图像处理器110可以接收三维图像信号，所述三维图像信号包括包含元数据的二维图像信号和包含元数据的三维图像信号。
解码器120可以对接收到的图像数据进行解码并且使图像信号与元数据分离。例如，响应于经由图像接收器110接收到包括元数据的图像数据，解码器120可以对包括在接收到的图像数据中的消息进行解析并获取元数据。另外，解码器120可以使关于整个区域的元数据和关于感兴趣区域的元数据与获取的元数据分离。从解码器120获取的关于整个区域的元数据和关于感兴趣区域的元数据可以包括HDR信息。就此而言，可以在生成图像数据时接收HDR信息，但是不限于此，并且可以经由有线/无线网络接收HDR信息。另外，感兴趣区域是包括主要对象的区域，并且可以由用户指定。
图像处理器130可以通过使用经由解码器120获取的元数据来获取与感兴趣区域有关的信息。另外，图像处理器130可以通过使用获取的与感兴趣区域有关的信息针对感兴趣区域执行HDR处理。
例如，图像处理器130可以通过使用经由解码器120获取的元数据来获取与感兴趣区域有关的信息。就此而言，与感兴趣区域有关的信息可以包括与感兴趣区域相对应的坐标、与包括在感兴趣区域中的前视图有关的颜色范围信息和与背景有关的颜色范围信息，以表示与感兴趣区域相对应的区域。例如，与感兴趣区域相对应的坐标可以是与包括主要对象的预定形状有关的坐标，或者可以是与通过将包括主要对象的预定形状放大预定比率而生成的形状有关的坐标。例如，与感兴趣区域相对应的坐标可以是用于表示包括主要对象的有界框的[(Xmin,Ymax),(Xmax,Ymin)]，或者可以是与通过在长度和宽度两者上将包括主要对象的有界框放大10％而生成的形状相对应的坐标。另外，与包括在感兴趣区域中的前视图和背景有关的颜色范围信息可以包括与maxRGB、红色(R)、绿色(G)和蓝色(B)中的至少一个范围有关的信息。另外，与包括在感兴趣区域中的前视图和背景有关的颜色范围信息可以是与色调饱和度值(HSV)和Ycbcr范围有关的信息。
另外，图像处理器130可以通过使用与包括在感兴趣区域中的前视图和背景有关的颜色范围信息来确定与包括在感兴趣区域中的多个像素有关的信息。特别地，图像处理器130可以使用与包括在感兴趣区域中的前视图和背景有关的颜色范围信息来确定包括在感兴趣区域中的多个像素是否与背景、前视图或背景和前视图的混合区域相对应。
另外，图像处理器130可以基于与多个像素有关的信息来调整包括在感兴趣区域中的多个像素值。特别地，图像处理器130可以基于与多个像素有关的信息针对包括在感兴趣区域中的多个像素执行色调映射或饱和度映射中的至少一种并且调整所述多个像素的色调或饱和度中的至少一个。色调映射可以是输出像素相对于输入像素的辉度(luma)值到辉度值的非线性映射。饱和度映射可以是输出像素相对于输入像素的锐度值到锐度值的非线性映射。可以执行色调映射和饱和度映射以使接收到的图像数据与显示装置的规格、观察条件和用户偏好特性相匹配，并且全局色调/饱和度映射指的是处理被应用于所有像素。另外，局部色调/饱和度映射指的是处理被应用于一些像素，特别是与感兴趣区域相对应的像素。
图2是简要地例示了根据示例性实施例的包括在显示装置100中的图像处理器130的配置的框图。如图2所示，图像处理器130包括与感兴趣区域有关的信息的获取部131和HDR处理器133。
与感兴趣区域有关的信息的获取部131可以获取与感兴趣区域有关的信息。例如，与感兴趣区域有关的信息的获取部131可以通过使用从解码器120获取的元数据来获取与感兴趣区域相对应的坐标以及与包括在感兴趣区域中的前视图和背景有关的颜色范围信息。
HDR处理器133可以通过使用与感兴趣区域有关的元数据来执行对感兴趣区域的HDR处理。例如，HDR处理器133可以通过使用从解码器120获取的元数据来获取HDR信息并且将它存储在存储器(未例示)中。另外，HDR处理器133通过使用利用关于图像信号的元数据所获得的HDR信息作为渲染信息来生成HDR图像。HDR图像渲染信息可以包括用于每个场景或帧的最小和最大亮度信息、包括图像的色域和色温的颜色规格信息以及包括对比度增强(CE)控制参数的传递参数作为强制HDR信息。另外，HDR图像渲染信息可以选择性地包括以下信息中的至少一种作为可选HDR信息：表示与最低、最高和最频繁像素值有关的信息的直方图信息、表示与图像的边界区域强度有关的信息的锐度信息以及与场景之间或帧之间的相关性有关的信息。
另外，HDR处理器133可以通过使用HDR图像来生成HDR背光信息。另外，HDR处理器133可以通过使用HDR背光信息来调整HDR图像。另外，HDR处理器133可以通过使用图像输出接口(未例示)来显示经调整的HDR图像。
另外，HDR处理器133可以通过使用存储在存储器(未示出)中的或者使用从解码器120获取的元数据获取的HDR信息作为调光信息来调整生成的HDR背光信息。就此而言，背光调光信息可以包括包含用于每个画面或帧的背光单元辉度映射参数的背光峰值信息作为强制HDR信息。另外，背光调光信息可以进一步选择性地包括场景信息和背光特性信息，所述场景信息包括场景或帧的时间线的周围环境信息。
另外，HDR处理器133可以针对HDR图像确定用于表达显示装置100的最佳动态范围的背光辉度。例如，可以调整对应区域的背光辉度，使得使用最大/最小辉度值和直方图信息显示的图像的黑色区域和峰值区域的辉度分别变成最大辉度和最小辉度。换句话说，HDR处理器133可以根据辉度信息生成背光的辉度控制信号(调光信号)。当背光辉度被确定时，HDR处理器133可以计算最终输出图像。
参考图3，HDR处理器133包括像素信息确定部133-1和像素值调整部133-2。
像素信息确定部133-1可以确定与感兴趣区域相对应的区域的像素的信息。例如，像素信息确定部133-1可以使用从与感兴趣区域有关的信息的获取部131获取的与包括在感兴趣区域中的前视图和背景有关的颜色范围信息来确定与感兴趣区域相对应的区域的像素中的每一个对应于前视图、背景以及前视图和背景的混合区域中的哪一个区域。
例如，当前视图的颜色范围信息在0与115之间并且与背景有关的颜色范围信息在80与255之间时，像素信息确定部133-1可以确定与前视图和背景的混合区域有关的颜色范围信息在80和115的范围内。另外，像素信息确定部133-1可以确定包括在感兴趣区域中的像素中的每一个对应于前视图、背景以及前视图和背景的混合区域中的哪一个区域。例如，当包括在感兴趣区域中的第一像素的像素值是25时，像素信息确定部133-1可以确定第一像素是与前视图相对应的像素。另外，当包括在感兴趣区域中的第二像素的像素值是100时，像素信息确定部133-1可以确定第二像素是与前视图和背景的混合区域相对应的像素。另外，当包括在感兴趣区域中的第三像素的像素值是200时，像素信息确定部133-1可以确定第三像素是与背景相对应的像素。同时，颜色范围信息可以是R、G、B和maxRGB中的至少一个的范围信息。
像素值调整部133-2可以基于在像素信息确定部133-1中确定的像素信息来调整每个像素值。例如，像素值调整部133-2可以通过关于与前视图相对应的像素、与背景相对应的像素以及与前视图和背景的混合区域相对应的像素使用不同的参数来执行色调映射和饱和度映射中的至少一种来调整像素值。例如，像素值调整部133-2可以关于与前视图相对应的像素使用特定参数来执行色调映射和饱和度映射中的至少一种，并且可以关于与背景相对应的像素执行全局色调映射和饱和度映射中的至少一种。
根据示例实施例，图4例示了经由图像接收器110从外部设备接收的包或比特流。图像包或比特流可以包括元数据410。另外，元数据410可以包括：全局元数据420，所述全局元数据420包括与整个区域有关的信息；以及感兴趣区域元数据430，所述感兴趣区域元数据430包括与感兴趣区域有关的信息。另外，感兴趣区域元数据430可以包括与表示感兴趣区域的坐标有关的信息431、感兴趣区域的颜色范围信息433和映射信息435。同时，尽管图4未详细地例示全局元数据，但是全局元数据420可以包括颜色范围信息、映射信息等。
根据各种示例实施例，感兴趣区域可以具有如图5a、图5b、图5c和图5d所示的各种形状。感兴趣区域可以是包括主要对象的区域。例如，如图5a所示，感兴趣区域520可以具有包括对象510的矩形形状。另外，表示感兴趣区域的坐标可以是[(Xmin,Ymin),(Xmax,Ymax)}。
可选地，如图5b所示，感兴趣区域540可以具有包括对象530的圆形形状。当感兴趣区域540具有圆形形状时，表示感兴趣区域540的坐标可以是[(x,y),r]。
可选地，如图5c所示，感兴趣区域560可以具有包括对象550的椭圆形形状。当感兴趣区域560具有椭圆形形状时，表示感兴趣区域560的坐标可以是[(x,y),a,b]。
可选地，如图5d所示，感兴趣区域580可以具有包括对象570的菱形形状。当感兴趣区域580具有菱形形状时，表示感兴趣区域580的坐标可以是[(x1,y1),(x2,y2),(x3,y3),(x4,y4)]。
如上所述，感兴趣区域520、540、560和580可以在生成图像数据时由用户根据主要对象510、530、550和570的形状指定为包括主要对象510、530、550和570的最小区域。
将在下面参考图6a和图6b描述获取与像素有关的信息的方法。
HDR处理器133可以基于与感兴趣区域有关的元数据获取与前视图610、背景620以及前视图610和背景620的混合区域有关的颜色范围信息。例如，HDR处理器133可以基于与感兴趣区域有关的元数据信息获取与前视图610的颜色范围630有关的信息和与背景620的颜色范围640有关的信息。另外，HDR处理器133可以获取前视图610的颜色范围630和背景620的颜色范围640彼此重叠的范围650作为前视图和背景的混合区域的范围信息。
例如，在包括在感兴趣区域中的第一像素的像素值与前视图的颜色范围635相对应的情况下，HDR处理器133可以确定第一像素与前视图相对应。另外，在包括在感兴趣区域中的第二像素的像素值与背景的颜色范围645相对应的情况下，HDR处理器133可以确定第二像素与背景相对应。另外，在包括在感兴趣区域中的第三像素的像素值与前视图和背景的混合区域的颜色范围650相对应的情况下，HDR处理器133可以确定第二像素与前视图和背景的混合区域相对应。
当确定了与感兴趣区域相对应的像素属于前视图、背景以及前视图和背景的混合区域中的哪一个区域时，HDR处理器133可以根据确定的区域使用不同的参数来执行色调映射或饱和度映射中的至少一种。
在下文中，将参考图7a、图7b、图8和图9描述针对感兴趣区域执行色调映射和饱和度映射的示例实施例。
首先，HDR处理器133可以基于与像素有关的信息根据每个像素属于前视图、背景以及前视图和背景的混合区域中的哪一个区域来执行色调映射或饱和度映射中的至少一种。例如，如图7a所示，HDR处理器133可以通过使用包括在元数据中的颜色范围信息来计算前视图、背景或前视图和背景的混合区域的参数值。例如，HDR处理器133可以基于包括在元数据中的颜色范围信息将包括在前视图的颜色范围[Lm(in),Um(in)]710和与背景有关的颜色范围[Lm(in),Um(in)]720两者中的区域[Lm(out),Um(in)]730确定为前视图和背景的混合区域。尽管图7a例示了使用包括在元数据中的颜色范围信息来确定前视图、背景或前视图和背景的混合区域，但是可以使用颜色范围信息等来确定前视图、背景或前视图和背景的混合区域。另外，颜色范围信息可以是红色(R)、绿色(G)和蓝色(B)以及maxRGB范围信息中的每一个的范围信息，或者可以基于来自红色(R)、绿色(G)、蓝色(B)和maxRGB中的至少两个的范围信息。
另外，HDR处理器133可以根据与每个像素相对应的区域不同地计算参数值。例如，如图7b所示，与前视图相对应的区域可以具有1的前视图参数值795和0的背景参数值790。另外，与背景相对应的区域780可以具有0的前视图参数值为和1的背景参数值。另外，与前视图和背景的混合区域相对应的区域770的前视图参数值795和背景参数值可以根据辉度值而变化。当色调映射或饱和度映射被执行时，它可以影响前视图参数值795和背景参数值790两者。尽管图7b例示了与前视图和背景的混合区域相对应的区域770的前视图参数值795和背景参数值790根据辉度值线性地变化，但是这仅是示例。值795和790非线性地变化是可能的。
图8是例示了根据示例实施例的用于基于图7a和图7b中计算出的参数执行色调映射的方法的图。例如，HDR处理器133可以通过使用与数学公式1相同的等式来执行色调映射。
(数学公式1)
这里，是像素I的色调映射值，是前视图参数值，是背景参数值。也就是说，当通过用所计算出的前视图参数和所计算出的背景参数值代入来计算色调映射值时，色调映射值等于前视图区域830中的前视图的色调值810并且等于背景区域840中的背景的色调值820。在前视图和背景的混合区域850中，可以理解的是，通过前视图参数值和背景参数值计算新的色调映射值。
图9是例示了根据示例实施例的用于基于图7a和图7b中计算出的参数执行饱和度映射的方法的图。
【数学公式2】
这里，是像素I的色调映射值，是前视图参数值，是背景参数值。也就是说，当通过用计算出的前视图参数和计算出的背景参数值代入来计算色调映射值时，色调映射值等于前视图区域930中的前视图的色调值910并且等于背景区域940中的背景的色调值920。在前视图和背景的混合区域950中，可以理解的是，通过前视图参数值和背景参数值计算新的色调映射值。
HDR处理器133可以通过使用上述方法分类为前视图、背景以及前视图和背景的混合区域并且执行色调映射和饱和度映射来生成更高分辨率的图像。
在下文中，将参考图10描述根据本公开的示例实施例的控制显示装置100的方法。
在操作S1010处，显示装置100从外部源接收图像数据。
另外，在操作S1020处，显示装置100将接收到的图像数据划分成图像信号和元数据。例如，响应于接收到包括元数据的图像数据，显示装置100可以对包括在接收到的图像数据中的消息进行解析并获取元数据。另外，显示装置100可以使关于整个区域的元数据和关于感兴趣区域的元数据与获取的元数据分离。
另外，在操作S1030处，显示装置100可以使用元数据获取与感兴趣区域有关的信息。例如，显示装置100可以使用包括在元数据中的与包括在感兴趣区域中的前视图、背景以及前视图和背景的混合区域有关的颜色范围信息来确定与包括在感兴趣区域中的像素相对应的前视图、背景以及前视图和背景的混合区域中的哪一个区域。
另外，在操作S1040处，显示装置100通过使用获取的与感兴趣区域有关的信息针对感兴趣区域执行HDR处理。例如，显示装置100可以通过基于与包括在感兴趣区域中的像素相对应的前视图、背景以及前视图和背景的混合区域中的哪一个区域使用与前视图相对应的参数、与背景相对应的参数、与前视图和背景的混合区域相对应的参数执行色调映射和饱和度映射中的至少一种来针对感兴趣区域执行HDR处理。
同时，上述方法可以作为程序被实现，所述程序可以由计算机执行并且可以被实现在使用计算机可读记录介质来操作该程序的通用数字计算机中。另外，可以通过各种手段在计算机可读记录介质上记录上述方法中使用的数据的结构。非暂时性计算机可读介质可以包括诸如磁存储介质(例如，ROM、软盘、硬盘等)或光学可读介质(例如，光盘(CD)、数字通用盘(DVD)等)的存储介质。
本公开所属领域的技术人员应了解的是，可以按照修改的形状实现本公开，而不脱离如所附权利要求中限定的本公开的范围和精神。因此，应当在例示性方面而不是限制性方面中考虑本文中所公开的方法。本公开的范围应当由以下权利要求而不是上面提及的描述来限定，并且等同于所附权利要求的所有技术精神应当被解释为被包括在本公开中。

Claims (15)

1.一种对处理和显示图像信号的显示装置进行控制的方法，所述方法包含：
接收图像数据；
将接收到的图像数据划分成图像信号和元数据；以及
通过使用所述元数据获取与感兴趣区域有关的信息并且通过使用获取的与所述感兴趣区域有关的所述信息针对所述感兴趣区域执行HDR(高动态范围)处理。
2.根据权利要求1所述的方法，其中，与所述感兴趣区域有关的所述信息包括与所述感兴趣区域相对应的坐标以及与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息。
3.根据权利要求2所述的方法，其中，执行所述HDR处理包含：
通过使用与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息，确定与包括在所述感兴趣区域中的多个像素有关的信息；以及
根据与所述多个像素相关的信息，调整包括在所述感兴趣区域中的多个像素值。
4.根据权利要求3所述的方法，其中，与所述像素有关的所述信息包括指示所述多个像素属于与背景相对应的第一组、与前视图相对应的第二组以及与前视图和背景的混合相对应的第三组中的哪一个组的信息。
5.根据权利要求3所述的方法，其中，调整所述多个像素值包含通过针对所述多个像素执行色调映射和饱和度映射中的至少一种来调整色调或饱和度中的至少一个。
6.根据权利要求2所述的方法，其中，与所述感兴趣区域相对应的所述坐标是与包括所述图像数据的主要对象的预定形状有关的坐标。
7.根据权利要求2所述的方法，其中，与所述感兴趣区域相对应的所述坐标是与通过将包括所述图像数据的主要对象的预定形状放大预定比率而生成的形状有关的坐标。
8.根据权利要求2所述的方法，其中，所述颜色范围信息包括与maxRGB、红色(R)、绿色(G)和蓝色(B)中的至少一个的范围有关的信息。
9.一种处理和显示图像信号的显示装置，包含：
图像接收器，所述图像接收器被配置为接收图像数据；
解码器，所述解码器被配置为将接收到的所述图像数据划分成图像信号和元数据；以及
图像处理器，所述图像处理器被配置为通过使用所述元数据获取与感兴趣区域有关的信息并且通过使用获取的与所述感兴趣区域有关的所述信息针对所述感兴趣区域执行HDR(高动态范围)处理。
10.根据权利要求9所述的显示装置，其中，与所述感兴趣区域有关的所述信息包括与所述感兴趣区域相对应的坐标以及与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息。
11.根据权利要求10所述的显示装置，其中，所述图像处理器被进一步配置为通过使用与包括在所述感兴趣区域中的前视图和背景有关的颜色范围信息，确定与包括在所述感兴趣区域中的多个像素有关的信息，并且根据与所述多个像素有关的信息，调整包括在所述感兴趣区域中的多个像素值。
12.根据权利要求11所述的显示装置，其中，与所述像素有关的所述信息包括指示所述多个像素属于与背景相对应的第一组、与前视图相对应的第二组以及与前视图和背景的混合相对应的第三组中的哪一个组的信息。
13.根据权利要求11所述的显示装置，其中，所述图像处理器通过针对所述多个像素执行色调映射和饱和度映射中的至少一种来调整色调和饱和度中的至少一个。
14.根据权利要求10所述的显示装置，其中，与所述感兴趣区域相对应的所述坐标是与包括所述图像数据的主要对象的预定形状有关的坐标。
15.根据权利要求10所述的显示装置，其中，与所述感兴趣区域相对应的所述坐标是与通过将包括所述图像数据的主要对象的预定形状放大预定比率而生成的形状有关的坐标。
CN201680055996.3A 2015-09-30 2016-09-29 显示装置及其控制方法 Active CN108141576B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562234955P 2015-09-30 2015-09-30
US62/234,955 2015-09-30
PCT/KR2016/010919 WO2017057926A1 (ko) 2015-09-30 2016-09-29 디스플레이 장치 및 이의 제어 방법

Publications (2)

Publication Number Publication Date
CN108141576A true CN108141576A (zh) 2018-06-08
CN108141576B CN108141576B (zh) 2020-09-04

Family

ID=58427350

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680055996.3A Active CN108141576B (zh) 2015-09-30 2016-09-29 显示装置及其控制方法

Country Status (5)

Country Link
US (1) US10542242B2 (zh)
EP (1) EP3343913B1 (zh)
KR (1) KR101985880B1 (zh)
CN (1) CN108141576B (zh)
WO (1) WO2017057926A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109036334A (zh) * 2018-09-26 2018-12-18 惠科股份有限公司 显示装置的亮度控制方法及装置

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102391480B1 (ko) * 2017-11-06 2022-04-29 삼성디스플레이 주식회사 디스플레이 구동 집적 회로 및 이를 포함하는 디스플레이 장치
EP3853810B1 (en) * 2018-09-19 2023-10-25 Dolby Laboratories Licensing Corporation Automatic display management metadata generation for gaming and/or sdr+ contents
WO2023182973A1 (en) * 2022-03-21 2023-09-28 Hewlett-Packard Development Company, L.P. User selected display panel adjustment
WO2024090599A1 (ko) * 2022-10-25 2024-05-02 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW492255B (en) * 1998-03-30 2002-06-21 Sarnoff Corp Region-based information compaction as for digital images
CN1672402A (zh) * 2001-04-10 2005-09-21 索尼公司 图像处理设备和方法以及图像捕获设备
US20090179998A1 (en) * 2003-06-26 2009-07-16 Fotonation Vision Limited Modification of Post-Viewing Parameters for Digital Images Using Image Region or Feature Information
US20100085361A1 (en) * 2008-10-08 2010-04-08 Korea Advanced Institute Of Science And Technology Apparatus and method for enhancing images in consideration of region characteristics
US20100164976A1 (en) * 2008-12-26 2010-07-01 Won-Hee Choe Image processing apparatus and method
CN103210418A (zh) * 2010-11-23 2013-07-17 杜比实验室特许公司 高动态范围图像的内容元数据增强
CN104471939A (zh) * 2012-07-13 2015-03-25 皇家飞利浦有限公司 改进的hdr图像编码和解码方法和设备
WO2015126144A1 (ko) * 2014-02-18 2015-08-27 엘지전자 주식회사 파노라마 서비스를 위한 방송 신호 송수신 방법 및 장치

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6560285B1 (en) * 1998-03-30 2003-05-06 Sarnoff Corporation Region-based information compaction as for digital images
GB2382940A (en) * 2001-11-27 2003-06-11 Nokia Corp Encoding objects and background blocks
US9692964B2 (en) * 2003-06-26 2017-06-27 Fotonation Limited Modification of post-viewing parameters for digital images using image region or feature information
US7492375B2 (en) 2003-11-14 2009-02-17 Microsoft Corporation High dynamic range image viewing on low dynamic range displays
US8050511B2 (en) * 2004-11-16 2011-11-01 Sharp Laboratories Of America, Inc. High dynamic range images from low dynamic range images
CN101588436B (zh) * 2008-05-20 2013-03-27 株式会社理光 一种压缩原始图像动态范围的方法、装置和数码相机
JP2010252128A (ja) 2009-04-17 2010-11-04 Panasonic Corp メタデータ処理装置、映像処理装置及び映像処理システム
KR20110111251A (ko) 2010-04-02 2011-10-10 한국전자통신연구원 감각 효과를 위한 메타데이터 제공 방법 및 장치, 감각 효과를 위한 메타데이터가 기록된 컴퓨터로 읽을 수 있는 기록 매체, 감각 재생 방법 및 장치
US8947555B2 (en) 2011-04-18 2015-02-03 Qualcomm Incorporated White balance optimization with high dynamic range images
KR20120119173A (ko) 2011-04-20 2012-10-30 삼성전자주식회사 3ｄ 영상처리장치 및 그 입체감 조정방법
US9420302B2 (en) 2012-01-24 2016-08-16 Dolby Laboratories Licensing Corporation Weighted multi-band cross color channel predictor
KR102014127B1 (ko) * 2012-03-26 2019-08-26 코닌클리케 필립스 엔.브이. Ｈｄｒ 이미지 인코딩 및 디코딩을 위한 밝기 영역-기반 장치들 및 방법들
KR102176398B1 (ko) 2013-06-28 2020-11-09 삼성전자주식회사 영상처리장치 및 영상처리방법
US9538155B2 (en) 2013-12-04 2017-01-03 Dolby Laboratories Licensing Corporation Decoding and display of high dynamic range video

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW492255B (en) * 1998-03-30 2002-06-21 Sarnoff Corp Region-based information compaction as for digital images
CN1672402A (zh) * 2001-04-10 2005-09-21 索尼公司 图像处理设备和方法以及图像捕获设备
US20090179998A1 (en) * 2003-06-26 2009-07-16 Fotonation Vision Limited Modification of Post-Viewing Parameters for Digital Images Using Image Region or Feature Information
US20100085361A1 (en) * 2008-10-08 2010-04-08 Korea Advanced Institute Of Science And Technology Apparatus and method for enhancing images in consideration of region characteristics
US20100164976A1 (en) * 2008-12-26 2010-07-01 Won-Hee Choe Image processing apparatus and method
CN103210418A (zh) * 2010-11-23 2013-07-17 杜比实验室特许公司 高动态范围图像的内容元数据增强
CN104471939A (zh) * 2012-07-13 2015-03-25 皇家飞利浦有限公司 改进的hdr图像编码和解码方法和设备
WO2015126144A1 (ko) * 2014-02-18 2015-08-27 엘지전자 주식회사 파노라마 서비스를 위한 방송 신호 송수신 방법 및 장치

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109036334A (zh) * 2018-09-26 2018-12-18 惠科股份有限公司 显示装置的亮度控制方法及装置
WO2020062665A1 (zh) * 2018-09-26 2020-04-02 惠科股份有限公司 显示装置的亮度控制方法、装置及液晶显示器
CN109036334B (zh) * 2018-09-26 2021-05-14 惠科股份有限公司 显示装置的亮度控制方法及装置
US11087702B2 (en) 2018-09-26 2021-08-10 HKC Corporation Limited Method and device for controlling brightness of display device based on area dimming value and saturation degree, and liquid crystal display

Also Published As

Publication number Publication date
KR20180000729A (ko) 2018-01-03
EP3343913A1 (en) 2018-07-04
EP3343913B1 (en) 2022-05-25
EP3343913A4 (en) 2018-09-26
CN108141576B (zh) 2020-09-04
WO2017057926A1 (ko) 2017-04-06
KR101985880B1 (ko) 2019-09-03
US20180262727A1 (en) 2018-09-13
US10542242B2 (en) 2020-01-21

Similar Documents

Publication Publication Date Title
US10891722B2 (en) Display method and display device
JP6700322B2 (ja) 改善されたｈｄｒイメージ符号化及び復号化方法、装置
EP3465673B1 (en) Transitioning between video priority and graphics priority
US9685120B2 (en) Image formats and related methods and apparatuses
CN108141576A (zh) 显示装置及其控制方法
ES2550782T3 (es) Aparato y método para analizar gradaciones de imágenes
RU2707728C2 (ru) Обработка изображения с изменением степени яркости при постоянстве цвета
US8976191B1 (en) Creating a realistic color for a virtual object in an augmented reality environment
US10832636B2 (en) Image processing apparatus, image processing method, and program
WO2017203942A1 (ja) 画像処理装置、および画像処理方法、並びにプログラム
WO2015133117A1 (en) Image processing apparatus, image processing method and image display apparatus
US20180005358A1 (en) A method and apparatus for inverse-tone mapping a picture
WO2021004176A1 (zh) 一种图像处理的方法及装置
US10816802B2 (en) Transparent display apparatus, method for controlling the same, and computer-readable recording medium
Cyriac et al. Vision models fine-tuned by cinema professionals for high dynamic range imaging in movies
JP2020109914A (ja) 情報処理装置および情報処理方法
JP5209713B2 (ja) クロマキープロダクションの方法及び装置
US11388348B2 (en) Systems and methods for dynamic range compression in multi-frame processing
CN112513939A (zh) 用于环境自适应数字内容的色彩转换
JP2018509835A (ja) 適応的カラーグレード補間方法及びデバイス
US10419709B2 (en) Video processing device, transmitting device, control program, and recording medium
Ogura et al. 4K HDR workflow: From capture to display
US11961206B2 (en) Image generation using non-linear scaling and tone-mapping based on cubic spline curves
Kim New display concept for realistic reproduction of high-luminance colors
JP2020195137A (ja) 表示方法および表示装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant