CN108053381B - 动态色调映射方法、移动终端及计算机可读存储介质 - Google Patents

动态色调映射方法、移动终端及计算机可读存储介质 Download PDF

Info

Publication number
CN108053381B
CN108053381B CN201711418472.9A CN201711418472A CN108053381B CN 108053381 B CN108053381 B CN 108053381B CN 201711418472 A CN201711418472 A CN 201711418472A CN 108053381 B CN108053381 B CN 108053381B
Authority
CN
China
Prior art keywords
tone mapping
brightness information
average
information
maximum
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711418472.9A
Other languages
English (en)
Other versions
CN108053381A (zh
Inventor
黄哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Skyworth RGB Electronics Co Ltd
Original Assignee
Shenzhen Skyworth RGB Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Skyworth RGB Electronics Co Ltd filed Critical Shenzhen Skyworth RGB Electronics Co Ltd
Priority to CN201711418472.9A priority Critical patent/CN108053381B/zh
Publication of CN108053381A publication Critical patent/CN108053381A/zh
Priority to PCT/CN2018/102096 priority patent/WO2019119847A1/zh
Priority to EP18891929.4A priority patent/EP3561765B1/en
Priority to US16/550,744 priority patent/US11145039B2/en
Application granted granted Critical
Publication of CN108053381B publication Critical patent/CN108053381B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G06T5/92
    • G06T5/90
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration by the use of local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20021Dividing image into blocks, subimages or windows
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20172Image enhancement details
    • G06T2207/20208High dynamic range [HDR] image processing
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0626Adjustment of display parameters for control of overall brightness
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/02Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed
    • G09G5/06Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the way in which colour is displayed using colour palettes, e.g. look-up tables

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Processing (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种动态色调映射方法、移动终端及计算机可读存储介质,所述动态色调映射方法包括:获取显示终端待显示帧画面的最大亮度信息和平均亮度信息;在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组;调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换。本发明根据实时监测到的帧画面最大亮度信息和平均亮度信息,实时改变进行色调映射变换的色调映射数据组,达到合理利用硬件动态范围、更好地展示HDR效果。

Description

动态色调映射方法、移动终端及计算机可读存储介质
技术领域
本发明涉及高动态范围图像处理技术领域,尤其涉及一种动态色调映射方法、移动终端及计算机可读存储介质。
背景技术
高动态范围(High Dynamic Range,HDR)影像在计算机图形学和图像处理这些领域中正被广泛使用,HDR视频具有与真实场景的亮度相匹配的亮度动态范围。基于HDR视频的制作理念,目前HDR10视频普遍的亮度范围均在0.001~1000尼特左右,而ST.2084本身覆盖了0.000001~10000尼特,这意味着HDR10视频对于硬件要求会非常高。
因此,在硬件亮度范围不能覆盖视频内容时,依照HDR视频的理念,就必须参考硬件本身的条件,设计对亮度进行压缩的方法。然而,视频中各帧画面平均亮度不可能从头到尾保持一致,对亮度进行压缩也不能根据帧画面平均亮度的变化作调整,从而导致硬件的动态范围的浪费,不能很好的展示HDR效果。
发明内容
本发明的主要目的在于提供一种动态色调映射方法、移动终端及计算机可读存储介质,旨在解决HDR10视频画面在HDR显示终端播放时,不能根据帧画面平均亮度的变化作调整,导致硬件的动态范围的浪费,不能很好的展示HDR效果的技术问题。
为实现上述目的,本发明实施例提供一种动态色调映射方法,所述动态色调映射方法包括:
获取显示终端待显示帧画面的最大亮度信息和平均亮度信息;
在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组;
调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换。
可选地,所述获取显示终端待显示帧画面的最大亮度信息和平均亮度信息的步骤包括:
基于显示终端的硬件参数,将显示终端待显示帧画面分隔为多个区块,监测各区块的最大子亮度信息和平均子亮度信息;
统计各区块的最大子亮度信息和平均子亮度信息,计算出显示终端待显示帧画面的最大亮度信息和平均亮度信息。
可选地,所述在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组的步骤之前包括:
基于高动态范围硬件的动态范围规格,调试生成多组不同动态范围、不同平均亮度的色调映射数据组,将生成的色调映射数据组存储并生成色调映射查找表。
可选地,所述在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组的步骤,还包括:
判断所述最大亮度信息和平均亮度信息是否与色调映射查找表中色调映射数据组存在逻辑关系;
若所述最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组存在逻辑关系,则执行调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换步骤。
可选地,所述判断所述最大亮度信息和平均亮度信息是否与色调映射查找表中色调映射数据组存在逻辑关系步骤之后,还包括:
若所述最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组不存在逻辑关系,则确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换。
可选地,所述确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换的步骤之后,还包括:
若所述最大亮度信息和平均亮度信息可被色调映射查找表中相邻区间的最大亮度信息和平均亮度信息替换,则根据替换之后的最大亮度信息和平均亮度信息重新在色调映射查找表中查找对应的色调映射数据组。
可选地,所述确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换的步骤之后,还包括:
若所述最大亮度信息和平均亮度信息不能被色调映射查找表中相邻区间的最大亮度信息和平均亮度信息替换,则根据所述最大亮度信息和平均亮度信息调试生成新的色调映射数据组;
将所述最大亮度信息和平均亮度信息与调试得到的新的色调映射数据组中的动态范围和平均亮度信息对应存储到色调映射查找表中。
可选地,所述获取显示终端待显示帧画面的最大亮度信息和平均亮度信息的步骤,还包括:
基于显示终端的硬件参数,设定获取所述最大亮度信息和平均亮度信息的迟滞时间,间隔所述迟滞时间之后,进行所述最大亮度信息和平均亮度信息的获取。
本发明还提供一种移动终端,所述移动终端包括:存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的动态色调映射程序,所述动态色调映射程序被所述处理器执行时实现上述的动态色调映射方法的步骤。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有动态色调映射程序,所述动态色调映射程序被处理器执行时实现上述的动态色调映射方法的步骤。
本发明通过实时获取显示终端待显示帧画面的最大亮度信息和平均亮度信息,在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组,调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换,从而根据实时监测到的帧画面最大亮度信息和平均亮度信息,实时改变色调映射数据组,达到合理利用硬件动态范围、更好地展示HDR效果。
附图说明
图1为实现本发明各个实施例一个可选的移动终端的硬件结构示意图;
图2为本发明动态色调映射方法一实施例的流程示意图;
图3为本发明动态色调映射方法通过同一色调映射数据组对不同亮度图片进行色调映射变换的效果图;
图4为本发明动态色调映射方法通过不同色调映射数据组对不同亮度图片进行色调映射变换的效果图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身没有特定的意义。因此,“模块”、“部件”或“单元”可以混合地使用。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。
本发明实施例终端可以是PC,也可以是智能手机、平板电脑、电子书阅读器、MP3(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)播放器、MP4(Moving Picture Experts Group Audio Layer IV,动态影像专家压缩标准音频层面3)播放器、便携计算机等具有显示功能的可移动式终端设备。
如图1所示,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地,终端还可以包括摄像头、RF(Radio Frequency,射频)电路,传感器、音频电路、WiFi模块等等。其中,传感器比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示屏的亮度,接近传感器可在移动终端移动到耳边时,关闭显示屏和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;当然,移动终端还可配置陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及动态色调映射程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的动态色调映射程序。
基于上述移动终端硬件结构以及通信网络系统,提出本发明动态色调映射方法和移动终端各个实施例。
本发明提供一种动态色调映射方法,在动态色调映射方法一实施例中,参照图2,该方法包括:
步骤S10,获取显示终端待显示帧画面的最大亮度信息和平均亮度信息;
显示终端待显示帧画面为HDR10视频经HDR Decoder步骤所得到的待进行色调映射的HDR10视频中每一帧的画面,移动终端可根据用户指令,播放待进行色调映射的HDR10视频。亮度是指画面的明亮程度,单位是堪德拉每平米(cd/m2)或称nits,也就是每平方公尺分之烛光。将HDR10视频中的每一帧画面的最大亮度信息和平均亮度信息进行获取。
步骤S20,在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组;
色调映射查找表为基于高动态范围硬件的动态范围规格,调试生成的多组不同动态范围、不同平均亮度的色调映射数据组制成的色调映射查找表。例如,实际获取的帧画面的最大亮度信息和平均亮度信息分别为4000nits和500nits,那么在色调映射查找表中查找根据平均亮度500nits和最大亮度4000nits调试得出的色调映射数据组。
步骤S30,调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换;
调用色调映射查找表中对应的色调映射数据组对待显示帧画面进行色调映射变换。例如,当画面平均亮度500nits,最大亮度4000nits调试得出动态范围为0.001~2000nits、平均亮度为300nits的色调映射查找表中的色调映射数据组,那么当获取的帧画面的最大亮度和平均亮度分别为4000nits和500nits,则调取色调映射查找表中动态范围为0.001~2000nits,平均亮度为300nits这一套色调映射数据组进行色调映射变换。
在本实施例中,通过实时获取帧画面的最大亮度信息和平均亮度信息,在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组,调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换,循环执行上述步骤直至视频播放完毕;从而根据实时监测到的帧画面最大亮度信息和平均亮度信息,实时改变色调映射数据组,达到合理利用硬件动态范围、更好地展示HDR效果。
可选地,在本发明动态色调映射方法另一实施例中,步骤S10所述获取显示终端待显示帧画面的最大亮度信息和平均亮度信息的步骤包括:
步骤S11,基于显示终端的硬件参数,将显示终端待显示帧画面分隔为多个区块,监测各区块的最大子亮度信息和平均子亮度信息;
分隔为多个区块,根据硬件背光分区方式,将整个画面按矩阵式分成m*n个区域。例如,基于显示终端尺寸,发光灯珠数量,将原始帧画面图像对应分割为20*12个子区域,即将帧画面横向分为20个等大的子区块,纵向分为12个等大的子区块,一共240个子区块。具体的,将直下式背光中所有的LED划分为若干个小单元,同时,硬件主控电路内的区域背光亮度控制电路或单独设置的区域背光亮度控制电路将整个图像画面分割成相应数量的小单元,单元数与硬件中的LED单元数相对应,一个单元的LED可以包含几个或十几个LED,同一小单元内的背光LED受同一LED驱动电路控制,发光亮度相等。监测各区块的最大子亮度信息和平均亮度信息,即对每个子区域的各个像素的色坐标点进行计算与统计。基于ST.2084标准的特性,亮度编码值与亮度值一一对应,YUV颜色编码方法;其中“Y”表示明亮度,也就是灰阶值,而“U”和“V”表示的则是色度,作用是描述影像色彩及饱和度,用于指定像素的颜色。由于采用的YUV色彩空间的重要性是它的亮度信号Y和色度信号U、V是分离的,那么只需提取信号各像素YUV编码的Y值,即可得到各区块的最大子亮度信息和平均子亮度信息。
步骤S12,统计各区块的最大子亮度信息和平均子亮度信息,计算出显示终端待显示帧画面的最大亮度信息和平均亮度信息。
据上述步骤S11中得到的各个区块的最大子亮度信息和平均子亮度信息,直接统计平均即可得到帧画面的最大亮度信息和平均亮度信息。
整个色调映射的过程就是首先要根据当前的画面推算出画面的平均亮度,再根据平均亮度选取一个合适的动态范围,再将整个画面映射到这个动态范围得到映射结果。目前常用的是使用log-average亮度作为平均亮度,通过下面公司可以计算得到:
Figure GDA0001577569140000071
其中,Lw(x,y)是像素点(x,y)的亮度,N是画面内像素数,δ为溢出常数,是一个很小的数用来应对像素点纯黑的情况。
在本实施例中,基于提高检测各个待显示帧画面的最大亮度信息和平均亮度信息的效率和准确率,采用将帧画面进行分区块,并且基于使用的硬件的参数分为m*n个区块,每个子区块通过统计各个像素YUV编码的Y值,进行区块亮度的检测,最后,将各个区块检测的结果进行统计平均,从而快速、准确的得到待显示帧画面的最大亮度信息和平均亮度信息。
可选地,在本发明动态色调映射方法另一实施例中,步骤S20所述在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组的步骤之前包括:
步骤S21,基于高动态范围硬件的动态范围规格,调试生成多组不同动态范围、不同平均亮度的色调映射数据组,将生成的色调映射数据组存储并生成色调映射查找表。
由于色调映射数据通常较大,实时计算生成色调映射数据会耗费大量运行资源,从而影响处理器处理效率,理想的做法是采用查找表的形式存储色调映射数据。例如,根据具体的硬件参数的动态范围规格调试生成如下40组色调映射数据,将所述40组色调映射数据租进行存储,即为色调映射查找表。
动态范围为0.001~500nits、平均亮度分别为100、200、300、500nits;
动态范围为0.001~1000nits、平均亮度分别为100、200、300、500、800、1000nits;
动态范围为0.001~1500nits、平均亮度分别为100、200、300、500、800、1000、1200、1500nits;
动态范围为0.001~2000nits、平均亮度分别为100、200、300、500、800、1000、1200、1500、1800、2000nits;
动态范围为0.001~4000nits、平均亮度分别为100、200、300、500、800、1000、1200、1500、1800、2000、3000、4000nits。
例如,上述色调映射查找表中动态范围为0.001~500nits,平均亮度为200nits的这组色调映射数据组是根据最大亮度500nits,平均亮度200nits调试得出的,那么在查找所述色调映射查找表时,最大亮度500nits,平均亮度200nits这组亮度数据即对应色调映射查找表中动态范围为0.001~500nits,平均亮度为200nits的这组色调映射数据组。
在本实施例中,通过预先根据具体硬件参数调试生成色调映射数据组,并将其存储为色调映射查找表,避免在进行色调映射变换过程中需要实时计算生成色调映射数据组,而造成运行资源的大量消耗,影响处理器的处理效率。
可选地,在本发明动态色调映射方法另一实施例中,在步骤S20所述在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组的步骤,还包括:
步骤S22,判断所述最大亮度信息和平均亮度信息是否与色调映射查找表中色调映射数据组存在逻辑关系。
逻辑关系为实际获取的待显示帧画面的最大亮度信息和平均亮度信息与生成的色调映射查找表中色调映射数据组的最大亮度信息和平均亮度信息之间的对应关系。
步骤S23,若所述最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组存在逻辑关系,则执行调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换步骤。
例如,上述40组色调映射数据组中动态范围为0.001~500nits,平均亮度为200nits的这组色调映射数据组是根据最大亮度500nits,平均亮度200nits调试得出的。实际获取的待显示帧画面的最大亮度为500nits,平均亮度为200nits,将上述实际获得的最大亮度信息和平均亮度信息与色调映射查找表中的色调映射数据组寻找逻辑关系,在本实例中,实际获取的最大亮度为500nits,平均亮度为200nits,与调试使用的最大亮度为500nits,平均亮度为200nits一致,则实际获取的最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组存在逻辑关系,则调用动态范围为0.001~500nits,平均亮度为200nits的这组色调映射数据组进行色调映射变换。
在本实施例中,通过判断实际获取的显示终端待显示画面的最大亮度信息和平均亮度信息与色调映射查找表中进行调试色调映射数据组使用的最大亮度信息和平均亮度信息进行比对,从而得到实际获取的最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组的关系,便于通过实际获得的最大亮度信息和平均和平均亮度信息调用进行色调映射变换的色调映射数据组。
可选地,在本发明动态色调映射方法另一实施例中,在步骤S22所述判断所述最大亮度信息和平均亮度信息是否与色调映射查找表中色调映射数据组存在逻辑关系步骤之后,还包括:
步骤S24,若所述最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组不存在逻辑关系,则确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换;
步骤S241,若所述最大亮度信息和平均亮度信息可被色调映射查找表中相邻区间的最大亮度信息和平均亮度信息替换,则根据替换之后的最大亮度信息和平均亮度信息重新在色调映射查找表中查找对应的色调映射数据组。
不存在逻辑关系,即所述最大亮度信息和平均亮度信息与色调映射查找表中所有经调试得到的色调映射数据组使用的最大亮度信息和平均亮度信息均不相同。所述的色调映射数据组的每一组可以对应一个最大亮度和平均亮度的范围。例如,色调映射数据组中的某一组为动态范围0.001~500nits,平均亮度200nits,该色调映射数据组是根据最大亮度500nits,平均亮度200nits调试得到的,根据硬件参数,调试出最大亮度450nits~550nits,平均亮度120nits~220nits,将在其范围内的最大亮度和平均亮度均对应到该组色调映射数据组。例如,在检测到最大亮度为490nits,平均亮度为210nits,与调试使用的最大亮度500nits,平均亮度200nits并不一致,但是检测到的最大亮度490nits,平均亮度210nits在最大亮度500nits,平均亮度200nits范围附近,即用最大亮度500nits,平均亮度200nits替换最大亮度490nits,平均亮度210nits,调用最大亮度500nits,平均亮度200nits调试得到的动态范围0.001~500nits,平均亮度200nits进行色调映射变换。
在本实施例中,通过对在色调映射查找表未找到对应色调映射数据组的最大亮度信息和平均亮度信息进行相邻区间可替代性的判断,就近选取替代的色调映射数据组,从而扩展了色调映射查找表的查找范围,利于实时改变色调映射数据组进行色调映射变换。
可选地,在本发明动态色调映射方法另一实施例中,在步骤S24所述确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换的步骤之后,还包括:
步骤S242,若所述最大亮度信息和平均亮度信息不能被色调映射查找表中相邻区间的最大亮度信息和平均亮度信息替换,则根据所述最大亮度信息和平均亮度信息调试生成新的色调映射数据组;
步骤S243,将所述最大亮度信息和平均亮度信息与调试得到的新的色调映射数据组中的动态范围和平均亮度信息对应存储到色调映射查找表中。
基于实际硬件平台参数,根据所述最大亮度信息和平均亮度信息进行调试,调试得到适合实际硬件平台动态范围的新的色调映射数据组,并将调试得到的色调映射数据组添加到色调映射查找表中。
在本实施例中,将获取的无法在色调映射查找表中匹配到色调映射数据组的最大亮度信息和平均亮度信息,在实际运行的硬件平台中进行重新调试,将调试得到的色调映射数据组添加到色调映射查找表中,从而更新色调映射查找表中数据信息,利于再次对HDR10视频进行色调映射变换,降低色调映射变换过程中运行资源的耗费,提高处理器的处理效率。
进一步地,在本发明动态色调映射方法另一实施例中,在步骤S10所述获取显示终端待显示帧画面的最大亮度信息和平均亮度信息的步骤,还包括:
步骤S13,基于显示终端的硬件参数,设定获取所述最大亮度信息和平均亮度信息的迟滞时间,间隔所述迟滞时间之后,进行所述最大亮度信息和平均亮度信息的获取。
所述迟滞时间为两次获取帧画面的最大亮度信息和平均亮度信息之间的时间。在实时监测帧画面的最大亮度、平均亮度的过程中,本次采集的帧画面的最大亮度信息和平均亮度信息与下一次采集的帧画面的最大亮度信息和平均亮度信息可能一样,那么,此时调用色调映射查找表中相同的一套色调映射数据组,进行色调映射变换。若频繁调用相同一套色调映射数据,会出现同一套色调映射数据计算得出不同的色调映射变换结果,导致画面亮度不稳定。
在本实施例中,设定迟滞时间,将获取到符合色调映射数据到进行色调映射变换之间的时间变大,避免频繁调用同一套色调映射数据进行色调映射变换,从而屏蔽掉用两套相同色调映射数据组计算出调用其它色调映射变换的结果,进而保持画面亮度表现稳定。
为辅助理解本发明动态色调映射方法,现举一实例进行说明,例如,一段HDR10的视频,经过HDR Decoder得到其中一帧画面,将该帧画面划分为m*n个区块,监测帧画面各区块的最大子亮度信息和平均子亮度信息,并统计平均生成当前帧画面的最大亮度信息和平均亮度信息,如最大亮度4000nits,平均亮度500nits,在色调映射查找表中查找到某套色调映射数据组为根据平均亮度500nits,最大亮度4000nits调试得出的,如,该组色调映射数据组为动态范围为0.001~2000nits、平均亮度为300nits,则,根据动态范围为0.001~2000nits、平均亮度为300nits的色调映射数据组对该帧画面进行色调映射变换,循环上述步骤,直至HDR10视频播放完毕。
为辅助理解本发明动态色调映射方法的有益效果,现举一实例进行说明,如图3所示,图3中左边三幅图均根据平均亮度500nits,最大亮度4000nits进行色调映射变换得到右边三幅图,从图中可以看出,三幅亮度不同的图经在同等条件下进行色调映射变换,画面中高亮部分可以正常显示,但画面较低亮度部分则因为超出硬件显示动态范围被压缩,无法充分展开,导致不能正常显示。在图4中,左边同样是图3左边三幅图,此时,将三幅图根据各个图片的最大亮度、平均亮度的情况分别进行色调映射,得到图4中右边三幅图,此时,可以看出三幅不同亮度的图,经过根据不同图片的亮度信息得到的色调映射的最大亮度、平均亮度信息,进行色调映射变换,画面中高亮部分、低亮度部分均能正常显示。因此根据实时监测到的帧画面最大亮度、平均亮度信息,实时改变色调映射数据组,实现动态色调映射,达到合理利用硬件动态范围、更好地展示HDR效果。
本发明还提供一种移动终端,所述移动终端包括:存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的动态色调映射程序,所述动态色调映射程序被所述处理器执行时实现上述动态色调映射方法各实施例的步骤。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有动态色调映射程序,所述动态色调映射程序被处理器执行时实现上述动态色调映射方法各实施例的步骤。
在本发明移动终端和计算机可读存储介质的实施例中,包含了上述动态色调映射方法各实施例的全部技术特征,说明书拓展和解释内容与上述动态色调映射方法各实施例基本相同,在此不做赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台移动终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,这些均属于本发明的保护之内。

Claims (9)

1.一种动态色调映射方法,其特征在于,所述动态色调映射方法包括:
获取显示终端待显示帧画面的最大亮度信息和平均亮度信息;
在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组;
调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换;
所述获取显示终端待显示帧画面的最大亮度信息和平均亮度信息的步骤,还包括:
基于显示终端的硬件参数,设定获取所述最大亮度信息和平均亮度信息的迟滞时间,间隔所述迟滞时间之后,进行所述最大亮度信息和平均亮度信息的获取。
2.如权利要求1所述的动态色调映射方法,其特征在于,所述获取显示终端待显示帧画面的最大亮度信息和平均亮度信息的步骤包括:
基于显示终端的硬件参数,将显示终端待显示帧画面分隔为多个区块,监测各区块的最大子亮度信息和平均子亮度信息;
统计各区块的最大子亮度信息和平均子亮度信息,计算出显示终端待显示帧画面的最大亮度信息和平均亮度信息。
3.如权利要求1所述的动态色调映射方法,其特征在于,所述在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组的步骤之前包括:
基于高动态范围硬件的动态范围规格,调试生成多组不同动态范围、不同平均亮度的色调映射数据组,将生成的色调映射数据组存储并生成色调映射查找表。
4.如权利要求1所述的动态色调映射方法,其特征在于,所述在预设的色调映射查找表中查找与所述最大亮度信息和平均亮度信息对应的色调映射数据组的步骤,还包括:
判断所述最大亮度信息和平均亮度信息是否与色调映射查找表中色调映射数据组存在逻辑关系;
若所述最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组存在逻辑关系,则执行调用所述色调映射数据组,对显示终端待显示帧画面进行色调映射变换步骤。
5.如权利要求4所述的动态色调映射方法,其特征在于,所述判断所述最大亮度信息和平均亮度信息是否与色调映射查找表中色调映射数据组存在逻辑关系步骤之后,还包括:
若所述最大亮度信息和平均亮度信息与色调映射查找表中色调映射数据组不存在逻辑关系,则确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换。
6.如权利要求5所述的动态色调映射方法,其特征在于,所述确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换的步骤之后,还包括:
若所述最大亮度信息和平均亮度信息可被色调映射查找表中相邻区间的最大亮度信息和平均亮度信息替换,则根据替换之后的最大亮度信息和平均亮度信息重新在色调映射查找表中查找对应的色调映射数据组。
7.如权利要求5所述的动态色调映射方法,其特征在于,所述确认所述最大亮度信息和平均亮度信息是否可被相邻区间的最大亮度信息和平均亮度信息替换的步骤之后,还包括:
若所述最大亮度信息和平均亮度信息不能被色调映射查找表中相邻区间的最大亮度信息和平均亮度信息替换,则根据所述最大亮度信息和平均亮度信息调试生成新的色调映射数据组;
将所述最大亮度信息和平均亮度信息与调试得到的新的色调映射数据组中的动态范围和平均亮度信息对应存储到色调映射查找表中。
8.一种移动终端,其特征在于,所述移动终端包括:存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的动态色调映射程序,所述动态色调映射程序被所述处理器执行时实现如权利要求1至7中任一项所述的动态色调映射方法的步骤。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有动态色调映射程序,所述动态色调映射程序被处理器执行时实现如权利要求1至7中任一项所述的动态色调映射方法的步骤。
CN201711418472.9A 2017-12-22 2017-12-22 动态色调映射方法、移动终端及计算机可读存储介质 Active CN108053381B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201711418472.9A CN108053381B (zh) 2017-12-22 2017-12-22 动态色调映射方法、移动终端及计算机可读存储介质
PCT/CN2018/102096 WO2019119847A1 (zh) 2017-12-22 2018-08-24 动态色调映射方法、移动终端及计算机可读存储介质
EP18891929.4A EP3561765B1 (en) 2017-12-22 2018-08-24 Dynamic tone mapping method, mobile terminal, and computer readable storage medium
US16/550,744 US11145039B2 (en) 2017-12-22 2019-08-26 Dynamic tone mapping method, mobile terminal, and computer readable storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711418472.9A CN108053381B (zh) 2017-12-22 2017-12-22 动态色调映射方法、移动终端及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN108053381A CN108053381A (zh) 2018-05-18
CN108053381B true CN108053381B (zh) 2022-04-22

Family

ID=62131736

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711418472.9A Active CN108053381B (zh) 2017-12-22 2017-12-22 动态色调映射方法、移动终端及计算机可读存储介质

Country Status (4)

Country Link
US (1) US11145039B2 (zh)
EP (1) EP3561765B1 (zh)
CN (1) CN108053381B (zh)
WO (1) WO2019119847A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108053381B (zh) 2017-12-22 2022-04-22 深圳创维-Rgb电子有限公司 动态色调映射方法、移动终端及计算机可读存储介质
CN108986053B (zh) * 2018-08-21 2021-03-16 北京小米移动软件有限公司 屏幕显示方法及装置
US11587526B2 (en) * 2018-12-20 2023-02-21 Dolby Laboratories Licensing Corporation Luminance adaption to minimize discomfort and improve visibility
CN109856824B (zh) * 2018-12-21 2022-05-17 惠科股份有限公司 一种显示画面的检测方法及其检测系统
CN109949752B (zh) * 2019-04-03 2020-11-24 深圳康佳电子科技有限公司 一种区域显示亮度调节方法、播放终端及存储介质
CN111341355A (zh) * 2019-12-17 2020-06-26 中原工学院 基于声音的图像、图片、图案的生成方法
KR20210083840A (ko) 2019-12-27 2021-07-07 삼성전자주식회사 다이나믹 톤 메타데이터를 포함하는 영상의 편집을 위한 전자 장치 및 그의 동작 방법
EP3872749A1 (en) * 2020-02-25 2021-09-01 STMicroelectronics (Research & Development) Limited Local tone mapping for hdr video
KR20210142398A (ko) * 2020-05-18 2021-11-25 에스케이하이닉스 주식회사 로컬 톤 맵핑 회로, 이미지 센싱 장치 및 그 동작방법
CN111754946B (zh) * 2020-07-03 2022-05-06 深圳Tcl新技术有限公司 画质优化方法、显示装置及计算机可读存储介质
US11769234B2 (en) * 2020-10-07 2023-09-26 Qualcomm Incorporated Methods and apparatus for histogram based tone mapping
CN114222187B (zh) * 2021-08-12 2023-08-29 荣耀终端有限公司 视频编辑方法和电子设备
CN115620660B (zh) * 2021-09-22 2023-11-03 荣耀终端有限公司 基于帧数据的显示驱动方法、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854557A (zh) * 2008-12-31 2010-10-06 东部高科股份有限公司 实时图像生成器
CN102741883A (zh) * 2010-02-04 2012-10-17 微软公司 高动态范围图像生成和渲染
CN105282452A (zh) * 2014-06-05 2016-01-27 佳能株式会社 图像处理装置及图像处理方法

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9830691B2 (en) * 2007-08-03 2017-11-28 The University Of Akron Method for real-time implementable local tone mapping for high dynamic range images
CN103353982B (zh) * 2013-05-15 2016-03-09 中山大学 一种基于直方图均衡化的色调映射方法
US8958658B1 (en) * 2013-09-10 2015-02-17 Apple Inc. Image tone adjustment using local tone curve computation
CN105850129B (zh) * 2013-12-27 2019-06-14 汤姆逊许可公司 对高动态范围图像进行色调映射的方法及设备
US10165198B2 (en) * 2015-06-02 2018-12-25 Samsung Electronics Co., Ltd. Dual band adaptive tone mapping
CN105139368B (zh) * 2015-08-12 2017-11-03 旗瀚科技有限公司 一种可用于机器视觉的混合型色调映射方法
US10043251B2 (en) * 2015-10-09 2018-08-07 Stmicroelectronics Asia Pacific Pte Ltd Enhanced tone mapper for high dynamic range images and video
EP3220349A1 (en) * 2016-03-16 2017-09-20 Thomson Licensing Methods, apparatus, and systems for extended high dynamic range ("hdr") hdr to hdr tone mapping
CN105869112B (zh) * 2016-04-20 2019-01-11 西安理工大学 一种边缘保持最小化的高动态范围图像色调映射方法
KR102488954B1 (ko) * 2016-05-16 2023-01-16 엘지전자 주식회사 영상 처리 장치 및 그의 영상 처리 방법
US9959604B2 (en) * 2016-06-13 2018-05-01 Gopro, Inc. Dynamic global tone mapping with integrated 3D color look-up table
CN106981054B (zh) * 2017-03-27 2019-12-24 联想(北京)有限公司 一种图像处理方法及电子设备
CN108053381B (zh) * 2017-12-22 2022-04-22 深圳创维-Rgb电子有限公司 动态色调映射方法、移动终端及计算机可读存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854557A (zh) * 2008-12-31 2010-10-06 东部高科股份有限公司 实时图像生成器
CN102741883A (zh) * 2010-02-04 2012-10-17 微软公司 高动态范围图像生成和渲染
CN105282452A (zh) * 2014-06-05 2016-01-27 佳能株式会社 图像处理装置及图像处理方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
《A novel real-time method for high dynamic range image tone mapping》;Qingquan Wu;et al;《 2014 4th IEEE International Conference on Information Science and Technology》;20140428;第433-436页 *
《A Tone-Mapping Technique Based on Histogram Using a Sensitivity Model of the Human Visual System》;Ishtiaq Rasool Khan;et al;《IEEE Transactions on Industrial Electronics》;20171006;第3469-3479页 *
《HDR视频算法优化及硬件实现》;吴安,等;《计算机研究与发展》;20170531;第54卷(第5期);第1077-1085页 *

Also Published As

Publication number Publication date
WO2019119847A1 (zh) 2019-06-27
EP3561765B1 (en) 2023-12-27
US11145039B2 (en) 2021-10-12
US20190378253A1 (en) 2019-12-12
EP3561765A4 (en) 2020-11-18
EP3561765A1 (en) 2019-10-30
CN108053381A (zh) 2018-05-18

Similar Documents

Publication Publication Date Title
CN108053381B (zh) 动态色调映射方法、移动终端及计算机可读存储介质
US10869086B2 (en) Dynamic video overlays
CN107293265B (zh) 显示屏画面调整方法、显示终端及可读存储介质
CN107872662B (zh) 显示设备
CN110084204B (zh) 基于目标对象姿态的图像处理方法、装置和电子设备
CN110070551B (zh) 视频图像的渲染方法、装置和电子设备
US9524701B2 (en) Display apparatus and method for processing image thereof
CN113126862B (zh) 截屏方法、装置、电子设备以及可读存储介质
CN110660365A (zh) 区域背光控制方法、显示器及存储介质
CN113126937A (zh) 一种显示终端调整方法及显示终端
CN110827770B (zh) 显示图像的区域背光亮度调节方法、装置和存储介质
CN114119431A (zh) 图像处理方法、装置、电子设备及存储介质
CN107295255B (zh) 拍摄模式的确定方法、装置及终端
CN113391779B (zh) 类纸屏幕的参数调节方法、装置及设备
CN112805745A (zh) 一种混合图层处理方法及装置
CN113393391B (zh) 图像增强方法、图像增强装置、电子设备和存储介质
CN112788425A (zh) 动态区域显示方法、装置、设备及计算机可读存储介质
CN112449241A (zh) 功耗调节方法、装置及计算机可读存储介质
CN111327948B (zh) 电影图像模式自动匹配方法、装置和计算机可读存储介质
CN108171153B (zh) 场景变换检测方法、设备及计算机可读存储介质
CN115032947A (zh) 基于图纸数据与图像识别的轨迹生成方法及相关设备
CN114822444A (zh) 兼容显示方法、装置、设备及可读存储介质
CN117793510A (zh) 摄像机补光灯控制方法、装置、计算机设备以及存储介质
CN114327715A (zh) 界面显示方法、界面显示装置、电子设备和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant