CN107409223A - 视频编解码方法和视频编解码器 - Google Patents

视频编解码方法和视频编解码器 Download PDF

Info

Publication number
CN107409223A
CN107409223A CN201580077349.8A CN201580077349A CN107409223A CN 107409223 A CN107409223 A CN 107409223A CN 201580077349 A CN201580077349 A CN 201580077349A CN 107409223 A CN107409223 A CN 107409223A
Authority
CN
China
Prior art keywords
image block
photoelectric conversion
image
electro
conversion function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580077349.8A
Other languages
English (en)
Other versions
CN107409223B (zh
Inventor
陈海
李蒙
郑萧桢
郑建铧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN107409223A publication Critical patent/CN107409223A/zh
Application granted granted Critical
Publication of CN107409223B publication Critical patent/CN107409223B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98Adaptive-dynamic-range coding [ADRC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Studio Devices (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

本发明实施例提供一种视频编解码方法和视频编解码器,该方法包括:获取待编码的HDR图像帧,其中,HDR图像帧包括多个图像块;根据多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定每个图像块对应的光电转换函数;根据每个图像块对应的光电转换函数,对每个图像块进行光电转换;对经光电转换后的多个图像块进行编码。本发明实施例为每个图像块设置一个对应的光电转换函数,可以提高视频编码的效果,并更好地与现有的视频编码框架相适应。

Description

视频编解码方法和视频编解码器 技术领域
本发明实施例涉及视频编解码领域,并且更具体地,涉及一种视频编解码方法和视频编解码器。
背景技术
在很多领域中,动态范围(Dynamic Range)用来表示某个变量最大值与最小值的比率。在数字图像领域中,动态范围表示了图像可显示的范围内的最大亮度值和最小亮度值之间的比率。自然界中的亮度的动态范围相当大,星空下的夜景亮度约为0.001cd/m2,太阳本身亮度高达1,000,000,000cd/m2,这样的动态范围达到1,000,000,000/0.001=1013数量级。但是,在自然界的场景中,不会同时得到太阳的亮度和星光的亮度,因此,一般而言,自然界(或真实世界)的亮度的动态范围在10-3到106范围内。
在数字图像中,一般情况下,R、G、B各通道分别使用一个字节(8比特)来存储,也就是说,各通道的亮度表示范围是0~255,这里的0~255就是数字图像的动态范围。
由于自然界的动态范围在10-3到106内,远高于数字图像的动态范围,因此,我们可以称自然界的动态范围为高动态范围(High Dynamic Range,HDR)。相对地,普通的数字图像的动态范围为低动态范围(Low Dynamic Range,LDR)。数码相机的成像过程实际上就是自然界的高动态范围到数字图像的低动态范围的映射。这往往是一个非线性的映射过程。
高动态范围图像(HDR Image,HDRI)是一种可以表示高动态范围变化的图像。由于HDR图像需要表示人眼可见亮度范围,HDR图像的每个颜色通道需要比传统图像更多的数据位。例如,HDR图像的像素经常使用16位“half precision”或者32位浮点数表示。
在HDR图像中存储的信息一般为自然界的真实的光照信息,单位为cd/m2,但显示设备支持的最大照度有限,并不能完全反应自然界的真实的光照。既然人们需要通过显示设备来浏览图像,就需要利用光电转换函数(Optical-Electro Transfer Function,OETF),将HDR图像中存储的光照信息转换成为显示设备可以显示的电信号。光电转换函数最初应用在传统的阴极 射线管(Cathode Ray Tube,CRT)显示设备上,通过光电转换函数可以很好的将光照信息和CRT显示设备的亮度值对应起来,我们这里的光电转换函数可以是从光照信息到显示设备电信号转换函数的一个统称。因此,光电转换函数转换效果的好坏,直接决定了HDR图像在显示设备上的显示效果的好坏。
HDR视频编码一般以HDR图像帧为单位,对HDR视频流中的HDR图像帧依次进行光电转换、色彩空间转换、量化和视频编码等操作。具体而言,首先对输入的HDR图像帧进行光电转换;然后,将转换后的HDR图像帧的RGB信息转换到YCbCr空间;在YCbCr空间对图像的数据信息进行量化;最后基于量化数据进行视频编码。HDR视频解码为上述过程的逆过程,即首先对码流进行解码,得到解码数据,然后将解码数据通过反量化操作,转化为[0,1]的浮点数据;再通过色彩空间转换将YCbCr空间的数据转化到RGB色彩空间;最后通过电光转换函数(Electro-Optical Transfer Function,EOTF)将RGB色彩信息转换到16位或者32位浮点数,以表示真实世界的亮度信息。
ISO标准提出了一种具体的HDR编码方案“ISO/IEC JTC1/SC29/WG11 MPEG2014/N15083”。在该方案中,编码端的光电转换过程,以及使用的光电转换函数PQ_TF的具体形式参见如下公式(1):
其中:
该光电转换函数PQ_TF的曲线图如图1所示。相应地,解码端的电光 转换过程,以及使用的电光转换函数inversePQ_FT(PQ_TF的反函数)的具体形式参见如下公式(2):
其中:
上述方案中的光电转换函数是一个全局的光电转换函数,即整个HDR图像帧的像素均通过上述光电转换函数进行转换,但不同图像区域(例如前景和背景区域)的亮度信息不同,整帧图像均使用同一光电转换函数未考虑图像的空间局部性,导致HDR视频编码的效果差。
发明内容
本发明实施例提供一种视频编解码方法和视频编解码器,以提高HDR视频编码的效果。
第一方面,提供一种视频编码方法,包括:获取待编码的HDR图像帧,其中,所述HDR图像帧包括多个图像块;根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数;根据所述每个图像块对应的光电转换函数,对所述每个图像块进行光电转换;对经光电转换后的所述多个图像块进行编码。
结合第一方面,在第一方面的一种实现方式中,所述根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数,包括:根据所述每个图像块的亮度的统计 值,分别确定所述预设的多个光电转换函数的函数值;从所述多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;将所述目标函数值对应的光电转换函数确定为所述每个图像块对应的光电转换函数。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数,包括:确定所述每个图像块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;根据所述多个数值区间与所述多个光电转换函数的一一对应关系,将所述第一数值区间对应的光电转换函数确定为所述亮度统计值落入所述第一数值区间内的每个图像块对应的光电转换函数。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述对经光电转换后的所述多个图像块进行编码,包括:以8比特为单位,对光电转换后的所述多个图像块进行量化,得到所述多个图像块的量化数据;根据所述多个图像块的量化数据进行编码。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述方法还包括:向码流中写入所述每个图像块的光电转换信息,所述光电转换信息用于解码端确定所述每个图像块对应的解码块的电光转换函数。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:所述每个图像块对应的光电转换函数的索引;所述每个图像块的亮度的统计值;以及所述每个图像块对应的光电转换函数的参数。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述统计值为所述每个图像块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述的多个图像块中的至少两个图像块对应同一个光电转换函数。
结合第一方面或其上述实现方式的任一种,在第一方面的另一种实现方式中,所述根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数包括:根据所 述多个图像块中的任意一个第一图像块的亮度的统计值,确定所述第一图像块对应的光电转换函数;确定除所述第一图像块之外剩余的图像块与所述第一图像块之间的亮度的相关性;根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的光电转换函数;当确定所述剩余的图像块与所述第一图像块共用相同的光电转换函数时,将所述第一图像块对应的光电转换函数确定为所述HDR图像帧对应的全局光电转换函数;当确定所述剩余的图像块中存在与所述第一图像块不能共用相同光电转换函数的图像块时,根据所述剩余的图像的亮度的统计值,确定所述剩余图像块各自对应的光电转换函数。
第二方面,提供一种视频解码方法,包括:解码码流以重建高动态范围HDR图像帧,所述HDR图像帧包括多个图像块;从所述码流中获取多个图像块中的每个图像块的光电转换信息,所述光电转换信息由编码端基于所述每个图像块对应的编码块的亮度的统计值确定,且所述光电转换信息用于解码端确定所述每个图像块对应的电光转换函数;根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数;根据所述每个图像块对应的电光转换函数,对所述每个图像块进行电光转换。
结合第二方面,在第二方面的一种实现方式中,所述光电转换信息包括用于指示所述每个图像块的电光转换函数的索引的索引信息,其中,所述索引信息是所述编码端基于所述每个图像块对应的光电转换函数的索引确定的,所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:根据所述每个图像块的电光转换函数的索引,从所述预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数。
结合第二方面或其上述实现方式的任一种,在第二方面的另一种实现方式中,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:根据所述每个图像块对应的编码块的亮度的统计值,分别确定所述预设的多个电光转换函数的函数值;从所述多个电光转换函数的函数值中选取与预设值差异最小的目标函数值;将所述目标函数值对应的电光转换函数确定为所述每个图像块对应的电光 转换函数。
结合第二方面或其上述实现方式的任一种,在第二方面的另一种实现方式中,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:确定所述每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;根据所述多个数值区间与所述多个电光转换函数的一一对应关系,将所述第一数值区间对应的电光转换函数确定为所述每个图像块对应的电光转换函数。
结合第二方面或其上述实现方式的任一种,在第二方面的另一种实现方式中,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:根据所述多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定所述第一图像块对应的电光转换函数;确定除所述第一图像块之外剩余的图像块对应的编码块与所述第一图像块对应的编码块之间的亮度的相关性;根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的电光转换函数;当确定所述剩余的图像块与所述第一图像块共用相同的电光转换函数时,将所述第一图像块对应的电光转换函数确定为所述HDR图像帧对应的全局电光转换函数;当确定所述剩余的图像块中存在与所述第一图像块不能共用相同电光转换函数的图像块时,根据所述剩余的图像对应的编码块的亮度的统计值,确定所述剩余图像块各自对应的电光转换函数。
结合第二方面或其上述实现方式的任一种,在第二方面的另一种实现方式中,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:用于指示所述每个图像块对应的电光转换函数的索引的索引信息;用于指示所述每个图像块对应的电光转换函数的参数的信息;以及所述每个图像块对应的编码块的亮度的统计值。
结合第二方面或其上述实现方式的任一种,在第二方面的另一种实现方式中,所述统计值为所述每个图像块对应的编码块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
第三方面,提供一种视频编码器,包括:获取单元,用于获取待编码的 HDR图像帧,其中,所述HDR图像帧包括多个图像块;确定单元,用于根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数;光电转换单元,用于根据所述每个图像块对应的光电转换函数,对所述每个图像块进行光电转换;编码单元,用于对经光电转换后的所述多个图像块进行编码。
结合第三方面,在第三方面的一种实现方式中,所述确定单元具体用于根据所述每个图像块的亮度的统计值,分别确定所述预设的多个光电转换函数的函数值;从所述多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;将所述目标函数值对应的光电转换函数确定为所述每个图像块对应的光电转换函数。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述确定单元具体用于确定所述每个图像块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;根据所述多个数值区间与所述多个光电转换函数的一一对应关系,将所述第一数值区间对应的光电转换函数确定为所述亮度统计值落入所述第一数值区间内的每个图像块对应的光电转换函数。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述编码单元具体用于以8比特为单位,对经光电转换后的所述多个图像块进行量化,得到所述多个图像块的量化数据;根据所述多个图像块的量化数据进行编码。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述视频编码器还包括:写入单元,用于向码流中写入所述每个图像块的光电转换信息,所述光电转换信息用于解码端确定所述每个图像块对应的解码块的电光转换函数。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:所述每个图像块对应的光电转换函数的索引;所述每个图像块的亮度的统计值;以及所述每个图像块对应的光电转换函数的参数。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述统计值为所述每个图像块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述的多个图像块中的至少两个图像块对应同一个光电转换函数。
结合第三方面或其上述实现方式的任一种,在第三方面的另一种实现方式中,所述确定单元具体用于根据所述多个图像块中的任意一个第一图像块的亮度的统计值,确定所述第一图像块对应的光电转换函数;确定除所述第一图像块之外剩余的图像块与所述第一图像块之间的亮度的相关性;根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的光电转换函数;当确定所述剩余的图像块与所述第一图像块共用相同的光电转换函数时,将所述第一图像块对应的光电转换函数确定为所述HDR图像帧对应的全局光电转换函数;当确定所述剩余的图像块中存在与所述第一图像块不能共用相同光电转换函数的图像块时,根据所述剩余的图像的亮度的统计值,确定所述剩余图像块各自对应的光电转换函数。
第四方面,提供一种视频解码器,包括:解码单元,用于解码码流以重建高动态范围HDR图像帧,所述HDR图像帧包括多个图像块;获取单元,用于从所述码流中获取多个图像块中的每个图像块的光电转换信息,所述光电转换信息由编码端基于所述每个图像块对应的编码块的亮度的统计值确定,且所述光电转换信息用于解码端确定所述每个图像块对应的电光转换函数;确定单元,用于根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数;电光转换单元,用于根据所述每个图像块对应的电光转换函数,对所述每个图像块进行电光转换。
结合第四方面,在第四方面的一种实现方式中,所述光电转换信息包括用于指示所述每个图像块的电光转换函数的索引的索引信息,其中,所述索引信息是所述编码端基于所述每个图像块对应的光电转换函数的索引确定的,所述确定单元具体用于根据所述每个图像块的电光转换函数的索引,从所述预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数。
结合第四方面或其上述实现方式的任一种,在第四方面的另一种实现方式中,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述确定单元具体用于根据所述每个图像块对应的编码块的亮度的统计值,分别确定所述预设的多个电光转换函数的函数值;从所述多个电光转换函数的函数值中选取与预设值差异最小的目标函数值;将所述目标函数值对应的 电光转换函数确定为所述每个图像块对应的电光转换函数。
结合第四方面或其上述实现方式的任一种,在第四方面的另一种实现方式中,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述确定单元具体用于确定所述每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;根据所述多个数值区间与所述多个电光转换函数的一一对应关系,将所述第一数值区间对应的电光转换函数确定为所述每个图像块对应的电光转换函数。
结合第四方面或其上述实现方式的任一种,在第四方面的另一种实现方式中,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述确定单元具体用于根据所述多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定所述第一图像块对应的电光转换函数;确定除所述第一图像块之外剩余的图像块对应的编码块与所述第一图像块对应的编码块之间的亮度的相关性;根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的电光转换函数;当确定所述剩余的图像块与所述第一图像块共用相同的电光转换函数时,将所述第一图像块对应的电光转换函数确定为所述HDR图像帧对应的全局电光转换函数;当确定所述剩余的图像块中存在与所述第一图像块不能共用相同电光转换函数的图像块时,根据所述剩余的图像对应的编码块的亮度的统计值,确定所述剩余图像块各自对应的电光转换函数。
结合第四方面或其上述实现方式的任一种,在第四方面的另一种实现方式中,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:用于指示所述每个图像块对应的电光转换函数的索引的索引信息;用于指示所述每个图像块对应的电光转换函数的参数的信息;以及所述每个图像块对应的编码块的亮度的统计值。
结合第四方面或其上述实现方式的任一种,在第四方面的另一种实现方式中,所述统计值为所述每个图像块对应的编码块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
本发明实施例将HDR图像帧分为多个图像块,然后根据每个图像块的亮度的统计值从预设的多个光电转换函数中选取每个图像块对应的光电转换函数。这样,一个图像块的光电转换函数就是基于该图像块自身的局部亮 度情况而确定的,不同图像块的光电转换函数可以相同,也可以不同,与现有技术中的整帧图像使用一个全局光电转换函数的方式相比,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是现有的光电转换函数的曲线图。
图2是本发明实施例的视频编码方法的示意性流程图。
图3是本发明实施例的预设的多个光电转换函数的曲线图。
图4是本发明实施例的视频解码方法的示意性流程图。
图5是本发明实施例的预设的多个电光转换函数的曲线图。
图6是本发明实施例的一种视频编码器的示意性框图。
图7是本发明实施例的一种视频解码器的示意性框图。
图8是本发明实施例的一种视频编码器的示意性框图。
图9是本发明实施例的一种视频解码器的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。
图2是本发明实施例的视频编码方法的示意性流程图。图2的方法可以由视频编码器执行。图2的方法包括:
210、获取待编码的HDR图像帧,其中,HDR图像帧包括多个图像块。
应理解,上述HDR图像帧可以是从HDR视频流中获取的任意图像帧。该HDR图像帧中的像素的每个颜色分量(或称通道)可以是16位或者32位的浮点数,以表示真实世界的亮度信息。HDR图像帧中的像素可以用RGB表示,单位可以是cd/m2
220、根据多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定每个图像块对应的光电转换函数。
应理解,上述统计值可以为每个图像块内像素点的亮度均值,每个图像块内像素点的亮度方差,每个图像块内像素点的最大亮度值,每个图像块内像素点的最小亮度值,或者每个图像块内像素点的亮度的直方图统计值。具体地,HDR图像的亮度分量比色度分量更为重要,亮度分量更能反映该场景局部以及整体的照度特性,在编码侧,本发明实施例可以首先对HDR图像帧的每个图像块的亮度进行统计分析,得到每个图像块的亮度的统计值。
应理解,现有技术中存在很多符合人眼特性的光电转换函数,例如上文中的公式(1)就是其中一个。本发明实施例中的预设的多个光电转换函数可以从现有技术中的光电转换函数中选取,也可以通过调节现有技术中的某个光电转换函数的参数的取值而获得。举例说明,可以调节公式(1)中的指数m2的取值,分别给m2赋值48.8,78.8,128.8,168.8,208.8,258.8,得到如图3所示的6个光电转换函数。m2取值越大,曲线的前部就越平缓。
230、根据每个图像块对应的光电转换函数,对每个图像块进行光电转换。
需要说明的是,选定光电转换函数后,具体的光电转换操作就可以按照现有技术的方式进行,如建立查找表,采用分段线性拟合等方式都可以完成光电转换,此处不再赘述。
240、对经光电转换后的多个图像块进行编码。
步骤240可包括:将光电转换后的多个图像块从当前颜色空间(如RGB空间或YUV空间)转换到YCbCr空间;在YCbCr空间,以8比特或10比特为单位对多个图像块的数据信息进行量化,使用量化后的数据进行编码。
本发明实施例中,根据每个图像块的亮度的统计值从预设的多个光电转换函数中选取每个图像块对应的光电转换函数。这样,一个图像块的光电转换函数就是基于该图像块自身的亮度情况而确定的,不同图像块的光电转换函数可以相同,也可以不同,与现有技术中的整帧图像使用一个全局光电转换函数的方式相比,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。此外,现有的视频图像编码框架一般都是将图像划分成块而进行的,本发明实施例为每个图像块设置一个对应的光电转换函数,可以更好地与现有的视频编码框架相适应。
可选地,作为一个实施例,步骤220可包括:根据每个图像块的亮度的统计值,分别确定预设的多个光电转换函数的函数值;从多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;将目标函数值对应的光电转换函数确定为每个图像块对应的光电转换函数。
例如,由于人眼细节的感受与图像的亮度均值成正比,上述亮度的统计值可以选取每个图像块的亮度均值。以图3所示的6个光电转换函数为例,实际计算时,可以先将亮度均值进行归一化,然后将亮度均值代入图3所示的6个光电转换函数中,得到6个函数值。上述预设值可以设定为0.8,即函数值与0.8最接近的光电转换函数可视为最佳的光电转换函数。这样,通过比较6个函数值与0.8的大小关系,可以选出最佳的光电转换函数,作为每个图像块对应的光电转换函数。
可选地,作为一个实施例,步骤220可包括:确定每个图像块的亮度的统计值所落入的第一数值区间,其中,第一数值区间为预设的多个数值区间中的一个;根据多个数值区间与多个光电转换函数的一一对应关系,将第一数值区间对应的光电转换函数确定为亮度统计值落入第一数值区间内的每个图像块对应的光电转换函数。
参见图1,在ISO标准的HDR编码方案“ISO/IEC JTC1/SC29/WG11 MPEG2014/N15083”中,光电转换函数将[0-0.1]区间(相当于亮度在0-1000cd/m2)的数据映射到0-0.7区间,对于(0.1-1]区间的数据仅能映射至0.7-1这样一个小区间,这样会造成较大量的信息丢失,例如亮度范围在2023-2050cd/m2这样的数据均可能被映射至0.8,丢失了图像在这一亮度范围内的细节信息。为了弥补这一损失,该HDR编码方式并未沿用现有框架的以8比特为单位进行量化的方式,而是将量化的比特数扩充至10比特,这样做一定程度上缓解减少了数据的损失,但却增加了编码的复杂度,造成了资源的浪费,而且与现有的编码框架不兼容。
可选地,作为一个实施例,步骤240可包括:以8比特为单位,对经光电转换后的多个图像块进行量化,得到该多个图像块的量化数据;根据该多个图像块的量化数据进行编码。
应理解,以8比特为单位,对光电转换后的多个图像块进行量化可指:将HDR图像帧中的每个像素点的每个颜色分量量化为8比特大小的数据。
本发明实施例中,由于使用图像块而非整幅图像帧进行光电转换,而图 像块的亮度范围小于整幅图像帧的亮度范围,在这样一个小的亮度范围内,8比特的量化方式可以满足要求,即不会丢失大量图像信息,因此可以继续以8比特为单位进行量化,这样可以更好地与现有的编码框架兼容。
可选地,作为一个实施例,图2的方法还可包括:向码流中写入每个图像块的光电转换信息,光电转换信息用于解码端确定每个图像块对应的解码块的电光转换函数。
可选地,作为一个实施例,上述光电转换信息可包括每个图像块的以下信息中的至少一种:每个图像块对应的光电转换函数的索引;每个图像块的亮度的统计值;以及每个图像块对应的光电转换函数的参数。
例如,在编码端设置有N个光电转化函数,在解码端设置有N个电光转换函数,该N个电光转换函数分别为编码端的N个光电转换函数的逆函数。进一步地,编码端中的N个光电转换函数具有索引,解码端中的N个电光转换函数也具有索引,且互为逆函数的光电转换函数和电光转换函数的索引相同。实际编码时,当确定某个图像块对应的光电转换函数之后,就可以将该光电转换函数的索引写入码流,传到解码端。解码端解码到该图像块对应的解码块时,就可以根据该索引找到对应的电光转换函数。
可选地,作为一个实施例,上述多个图像块中的至少两个图像块对应同一个光电转换函数。
可选地,作为一个实施例,步骤220可包括:根据多个图像块中的任意一个第一图像块的亮度的统计值,确定第一图像块对应的光电转换函数;确定除第一图像块之外剩余的图像块与第一图像块之间的亮度的相关性;根据所确定的亮度相关性,确定剩余的图像块是否与第一图像块共用相同的光电转换函数;当确定剩余的图像块与第一图像块共用相同的光电转换函数时,将第一图像块对应的光电转换函数确定为HDR图像帧对应的全局光电转换函数;当确定剩余的图像块中存在与第一图像块不能共用相同光电转换函数的图像块时,根据剩余的图像的亮度的统计值,确定剩余图像块各自对应的光电转换函数。
应理解,上述确定除第一图像块之外剩余的图像块与第一图像块之间的亮度的相关性的方式可以有多种,例如,确定第一图像块与剩余图像块的亮度的统计值的差值,当该差值小于预设阈值时,判定它们相关性强,否则,判定它们相关性弱。上述当确定剩余的图像块与第一图像块共用相同的光电 转换函数时,将第一图像块对应的光电转换函数确定为HDR图像帧对应的全局光电转换函数是指:当剩余图像块均与第一图像块具有较强的相关性时,可以无需为每个图像块指定一个光电转换函数,仅需要像现有技术那样,为整个HDR图像帧指定一个全局光电转换函数即可,这样可以节省编码端的计算量,并降低码流的数据量。上述当确定剩余的图像块中存在与第一图像块不能共用相同光电转换函数的图像块时,根据剩余的图像的亮度的统计值,确定剩余图像块各自对应的光电转换函数是指:当剩余图像块中存在与第一图像块相关性较弱的图像块时,剩余的图像块中的每个图像块就按照与第一图像块相同的方式确定各自对应的光电转换函数。
应理解,相关性强的图像块对应的光电转换函数相同的可能性较高,相关性弱的图像块对应的光电转换函数相同的可能性较低。本发明实施例正是基于这一点,通过判断图像块之间的相关性来选择是使用全局光电转换函数,还是为每个图像块分配各自的光电转换函数,使得编码端的编码方式更加灵活。
可选地,作为一个实施例,步骤220可包括:根据多个图像块中的任意一个第一图像块的亮度的统计值,确定第一图像块对应的光电转换函数;确定除第一图像块之外剩余的图像块与第一图像块之间的亮度的相关性;根据确定出的亮度的相关性,将所述剩余图像块中的目标图像块的光电转换函数确定为所述第一图像块对应的光电转换函数,其中,所述目标图像块与所述第一图像块的相关性大于预设阈值。
本发明实施例中,方便地得到了与第一图像块相关性强的图像块的光电转换函数,降低了编码端的计算复杂度。
上文中结合图2,从编码端的角度详细描述了根据本发明实施例的视频编码方法,下面将结合图3,从解码端的角度描述根据本发明实施例的视频解码方法。
应理解,编码端与解码端的功能、操作以及特性相应,为了简洁,适当省略重复的描述。
图4是本发明实施例的视频解码方法的示意性流程图。图4的方法可以由解码器执行。图4的方法包括:
410、解码码流以重建HDR图像帧,HDR图像帧包括多个图像块。
420、从码流中获取多个图像块中的每个图像块的光电转换信息,光电 转换信息由编码端基于每个图像块对应的编码块的亮度的统计值确定,且光电转换信息用于解码端确定每个图像块对应的电光转换函数。
应理解,在解码端,需要利用编码端传来的光电转换信息确定每个图像块对应的电光转换函数,上述光电转换信息可以是编码端得到的亮度统计信息的部分或全部,也可以是每个图像块对应的电光转换函数的索引,还可以是每个图像块对应的电光转换函数的参数(需要编码端基于光电转换函数反解出该电光转换函数的参数),还可以是每个图像块对应的编码块的光电转换函数的参数(此时解码端需要基于该光电转换函数的参数确定其逆函数的参数)。当然,统计信息还可以是以上信息的组合,例如,一部分图像块的光电转换信息为编码端得到的统计信息,另一部分图像块的光电转换信息为这些图像块对应的电光转换函数的索引。
430、根据每个图像块的光电转换信息,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数。
应理解,解码端的多个电光转换函数可以是编码端的多个光电转换函数的逆函数。以编码端的光电转换函数为图3所示的6个函数为例,解码端的电光转换函数可以是图5所示的6个函数。
440、根据每个图像块对应的电光转换函数,对每个图像块进行电光转换。
本发明实例中,通过确定每个图像块对应的电光转换函数,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。
可选地,作为一个实施例,光电转换信息包括用于指示每个图像块的电光转换函数的索引的索引信息,其中,索引信息是编码端基于每个图像块对应的光电转换函数的索引确定的,根据每个图像块的光电转换信息,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数,包括:根据每个图像块的电光转换函数的索引,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数。
可选地,作为一个实施例,上述光电转换信息可包括每个图像块对应的编码块的亮度的统计值,步骤430可包括:根据每个图像块对应的编码块的亮度的统计值,分别确定预设的多个电光转换函数的函数值;从多个电光转换函数的函数值中选取与预设值差异最小的目标函数值;将目标函数值对应的电光转换函数确定为每个图像块对应的电光转换函数。
可选地,作为一个实施例,上述光电转换信息包括每个图像块对应的编码块的亮度的统计值,步骤430可包括:确定每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,第一数值区间为预设的多个数值区间中的一个;根据多个数值区间与多个电光转换函数的一一对应关系,将第一数值区间对应的电光转换函数确定为每个图像块对应的电光转换函数。
可选地,作为一个实施例,在步骤410之后还可包括:以8比特为单位,对解码数据进行反量化。
可选地,作为一个实施例,上述解码信息包括每个图像块的以下信息中的至少一种:用于指示每个图像块对应的电光转换函数的索引的索引信息;用于指示每个图像块对应的电光转换函数的参数的信息;以及每个图像块对应的编码块的亮度的统计值。
可选地,作为一个实施例,统计值为每个图像块内像素点的亮度均值,每个图像块内像素点的亮度方差,每个图像块内像素点的最大亮度值,每个图像块内像素点的最小亮度值,或者每个图像块内像素点的亮度的直方图统计值。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,步骤430可包括:根据多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定第一图像块对应的电光转换函数;确定除第一图像块之外剩余的图像块对应的编码块与第一图像块对应的编码块之间的亮度的相关性;根据所确定的亮度相关性,确定剩余的图像块是否与第一图像块共用相同的电光转换函数;当确定剩余的图像块与第一图像块共用相同的电光转换函数时,将第一图像块对应的电光转换函数确定为HDR图像帧对应的全局电光转换函数;当确定剩余的图像块中存在与第一图像块不能共用相同电光转换函数的图像块时,根据剩余的图像对应的编码块的亮度的统计值,确定剩余图像块各自对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,步骤430可包括:根据多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定第一图像块对应的电光转换函数;确定除第一图像块之外剩余的图像块对应的编码块与第一图像块对应的编码块之间的亮度的相关性;根据确定出的亮度的相关性,将所述剩余图像块中目标图像块的光电转换函数确定为所述第一图像块对应的电光转换函数,其 中,所述目标图像块对应的编码块的亮度与所述第一图像块对应的编码块的亮度的相关性大于预设阈值。
对于绝大部分场景,直接的光电转换和电光转换都能很好的恢复HDR图像。然而,对于部分极端HDR场景,如动态范围非常大或者特殊测试场景,可能会由于相邻图像块采用不一样的转换函数而出现轻微的块效应。对于此类问题,有效的解决方法是对于块边界的像素(假设为4)采用混合处理:首先,用本图像块的转换函数以及相邻块的转换函数分别通过计算或者查找表的方式得到边界像素的转换值O1及O2。然后,为确保局部的方法在块边界像素不会出现块效应,可以以边界像素的坐标与边界的距离为权重对O1及O2进行简单线性插值得到最终的转换值。对于四角的边界像素,可以类似的采用双线性插值。解决图像块的块效应的方式很多,具体可以参照现有技术,此处不再详述。
上文中结合图1至图5,详细描述了根据本发明实施例的视频编码方法,下面将结合图6至图9,详细描述根据本发明实施例的视频编解码器。
图6是本发明实施例的一种视频编码器的示意性框图。应理解,图6的视频编码器600能够实现图2中的由视频编码器执行的各个步骤,为避免重复,此处不再详述。视频编码器600包括:
获取单元610,用于获取待编码的HDR图像帧,其中,HDR图像帧包括多个图像块;
确定单元620,用于根据多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定每个图像块对应的光电转换函数;
光电转换单元630,用于根据每个图像块对应的光电转换函数,对每个图像块进行光电转换;
编码单元640,用于对经光电转换后的多个图像块进行编码。
本发明实施例将HDR图像帧分为多个图像块,然后根据每个图像块的亮度的统计值从预设的多个光电转换函数中选取每个图像块对应的光电转换函数。这样,一个图像块的光电转换函数就是基于该图像块自身的亮度情况而确定的,不同图像块的光电转换函数可以相同,也可以不同,与现有技术中的整帧图像使用一个全局光电转换函数的方式相比,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。
可选地,作为一个实施例,确定单元620可具体用于根据每个图像块的 亮度的统计值,分别确定预设的多个光电转换函数的函数值;从多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;将目标函数值对应的光电转换函数确定为每个图像块对应的光电转换函数。
可选地,作为一个实施例,确定单元620可具体用于确定每个图像块的亮度的统计值所落入的第一数值区间,其中,第一数值区间为预设的多个数值区间中的一个;根据多个数值区间与多个光电转换函数的一一对应关系,将第一数值区间对应的光电转换函数确定为亮度统计值落入第一数值区间内的每个图像块对应的光电转换函数。
可选地,作为一个实施例,编码单元640可具体用于以8比特为单位,对经光电转换后的多个图像块进行量化,得到多个图像块的量化数据;根据多个图像块的量化数据进行编码。
可选地,作为一个实施例,视频编码器600还可包括:写入单元,用于向码流中写入每个图像块的光电转换信息,光电转换信息用于解码端确定每个图像块对应的解码块的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块的以下信息中的至少一种:每个图像块对应的光电转换函数的索引;每个图像块的亮度的统计值;以及每个图像块对应的光电转换函数的参数。
可选地,作为一个实施例,统计值为每个图像块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
可选地,作为一个实施例,多个图像块中的至少两个图像块对应同一个光电转换函数。
可选地,作为一个实施例,确定单元620具体用于根据多个图像块中的任意一个第一图像块的亮度的统计值,确定第一图像块对应的光电转换函数;确定除第一图像块之外剩余的图像块与第一图像块之间的亮度的相关性;根据所确定的亮度相关性,确定剩余的图像块是否与第一图像块共用相同的光电转换函数;当确定剩余的图像块与第一图像块共用相同的光电转换函数时,将第一图像块对应的光电转换函数确定为HDR图像帧对应的全局光电转换函数;当确定剩余的图像块中存在与第一图像块不能共用相同光电转换函数的图像块时,根据剩余的图像的亮度的统计值,确定剩余图像块各自对应的光电转换函数。
图7是本发明实施例的一种视频解码器的示意性框图。应理解,图7的 视频解码器700能够实现图4中由视频解码器执行的各个步骤,为避免重复,此处不再详述。视频解码器700包括:
解码单元710,用于解码码流以重建HDR图像帧,HDR图像帧包括多个图像块;
获取单元720,用于从码流中获取多个图像块中的每个图像块的光电转换信息,光电转换信息由编码端基于每个图像块对应的编码块的亮度的统计值确定,且光电转换信息用于解码端确定每个图像块对应的电光转换函数;
确定单元730,用于根据每个图像块的光电转换信息,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数;
电光转换单元740,用于根据每个图像块对应的电光转换函数,对每个图像块进行电光转换。
本发明实例中,通过确定每个图像块对应的电光转换函数,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。
可选地,作为一个实施例,光电转换信息包括用于指示每个图像块的电光转换函数的索引的索引信息,其中,索引信息是编码端基于每个图像块对应的光电转换函数的索引确定的,确定单元730可具体用于根据每个图像块的电光转换函数的索引,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,确定单元730可具体用于根据每个图像块对应的编码块的亮度的统计值,分别确定预设的多个电光转换函数的函数值;从多个电光转换函数的函数值中选取与预设值差异最小的目标函数值;将目标函数值对应的电光转换函数确定为每个图像块对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,确定单元730可具体用于确定每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,第一数值区间为预设的多个数值区间中的一个;根据多个数值区间与多个电光转换函数的一一对应关系,将第一数值区间对应的电光转换函数确定为每个图像块对应的电光转换函数。
可选地,作为一个实施例,视频解码器700还可包括反量化单元,用于以8比特为单位,对解码数据进行反量化。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,确定单元具体用于根据多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定第一图像块对应的电光转换函数;确定除第一图像块之外剩余的图像块对应的编码块与第一图像块对应的编码块之间的亮度的相关性;根据所确定的亮度相关性,确定剩余的图像块是否与第一图像块共用相同的电光转换函数;当确定剩余的图像块与第一图像块共用相同的电光转换函数时,将第一图像块对应的电光转换函数确定为HDR图像帧对应的全局电光转换函数;当确定剩余的图像块中存在与第一图像块不能共用相同电光转换函数的图像块时,根据剩余的图像对应的编码块的亮度的统计值,确定剩余图像块各自对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块的以下信息中的至少一种:用于指示每个图像块对应的电光转换函数的索引的索引信息;用于指示每个图像块对应的电光转换函数的参数的信息;以及每个图像块对应的编码块的亮度的统计值。
可选地,作为一个实施例,统计值为每个图像块对应的编码块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
图8是本发明实施例的一种视频编码器的示意性框图。应理解,图8的视频编码器800能够实现图2中的由视频编码器执行的各个步骤,为避免重复,此处不再详述。视频编码器800包括:
存储器810,用于存储程序;
处理器820,用于执行程序,当所述程序被执行时,所述处理器820具体用于获取待编码的HDR图像帧,其中,HDR图像帧包括多个图像块;根据多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定每个图像块对应的光电转换函数;根据每个图像块对应的光电转换函数,对每个图像块进行光电转换;对经光电转换后的多个图像块进行编码。
本发明实施例将HDR图像帧分为多个图像块,然后根据每个图像块的亮度的统计值从预设的多个光电转换函数中选取每个图像块对应的光电转换函数。这样,一个图像块的光电转换函数就是基于该图像块自身的亮度情况而确定的,不同图像块的光电转换函数可以相同,也可以不同,与现有技术中的整帧图像使用一个全局光电转换函数的方式相比,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。
可选地,作为一个实施例,处理器820可具体用于根据每个图像块的亮度的统计值,分别确定预设的多个光电转换函数的函数值;从多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;将目标函数值对应的光电转换函数确定为每个图像块对应的光电转换函数。
可选地,作为一个实施例,处理器820可具体用于确定每个图像块的亮度的统计值所落入的第一数值区间,其中,第一数值区间为预设的多个数值区间中的一个;根据多个数值区间与多个光电转换函数的一一对应关系,将第一数值区间对应的光电转换函数确定为亮度统计值落入所述第一数值区间内的每个图像块对应的光电转换函数。
可选地,作为一个实施例,处理器820可具体用于以8比特为单位,对经光电转换后的多个图像块进行量化,得到多个图像块的量化数据;根据多个图像块的量化数据进行编码。
可选地,作为一个实施例,处理器820还用于向码流中写入每个图像块的光电转换信息,光电转换信息用于解码端确定每个图像块对应的解码块的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块的以下信息中的至少一种:每个图像块对应的光电转换函数的索引;每个图像块的亮度的统计值;以及每个图像块对应的光电转换函数的参数。
可选地,作为一个实施例,统计值为每个图像块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
可选地,作为一个实施例,多个图像块中的至少两个图像块对应同一个光电转换函数。
可选地,作为一个实施例,处理器820具体用于根据多个图像块中的任意一个第一图像块的亮度的统计值,确定第一图像块对应的光电转换函数;确定除第一图像块之外剩余的图像块与第一图像块之间的亮度的相关性;根据所确定的亮度相关性,确定剩余的图像块是否与第一图像块共用相同的光电转换函数;当确定剩余的图像块与第一图像块共用相同的光电转换函数时,将第一图像块对应的光电转换函数确定为HDR图像帧对应的全局光电转换函数;当确定剩余的图像块中存在与第一图像块不能共用相同光电转换函数的图像块时,根据剩余的图像的亮度的统计值,确定剩余图像块各自对应的光电转换函数。
图9是本发明实施例的一种视频解码器的示意性框图。应理解,图9的视频解码器900能够实现图4中由视频解码器执行的各个步骤,为避免重复,此处不再详述。视频解码器900包括:
存储器910,用于存储程序;
处理器920,用于执行程序,当所述程序被执行时,所述处理器920具体用于解码码流以重建高动态范围HDR图像帧,所述HDR图像帧包括多个图像块;从码流中获取多个图像块中的每个图像块的光电转换信息,光电转换信息由编码端基于每个图像块对应的编码块的亮度的统计值确定,且光电转换信息用于解码端确定每个图像块对应的电光转换函数;根据每个图像块的光电转换信息,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数;根据每个图像块对应的电光转换函数,对每个图像块进行电光转换。
本发明实例中,通过确定每个图像块对应的电光转换函数,充分考虑了图像的空间局部性,能够改善HDR视频编码的效果。
可选地,作为一个实施例,光电转换信息包括用于指示每个图像块的电光转换函数的索引的索引信息,其中,索引信息是编码端基于每个图像块对应的光电转换函数的索引确定的,处理器920可具体用于根据每个图像块的电光转换函数的索引,从预设的多个电光转换函数中确定每个图像块对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,处理器920可具体用于根据每个图像块对应的编码块的亮度的统计值,分别确定多个电光转换函数的函数值;从多个电光转换函数的函数值中选取与预设值差异最小的目标函数值;将目标函数值对应的电光转换函数确定为每个图像块对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,处理器920可具体用于确定每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,第一数值区间为预设的多个数值区间中的一个;根据多个数值区间与多个电光转换函数的一一对应关系,将第一数值区间对应的电光转换函数确定为每个图像块对应的电光转换函数。
可选地,作为一个实施例,处理器920可具体用于以8比特为单位,对码流中的数据进行反量化,得到HDR图像帧的反量化数据;根据反量化数 据,确定HDR图像帧。
可选地,作为一个实施例,光电转换信息包括每个图像块对应的编码块的亮度的统计值,处理器920具体用于根据多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定第一图像块对应的电光转换函数;确定除第一图像块之外剩余的图像块对应的编码块与第一图像块对应的编码块之间的亮度的相关性;根据所确定的亮度相关性,确定剩余的图像块是否与第一图像块共用相同的电光转换函数;当确定剩余的图像块与第一图像块共用相同的电光转换函数时,将第一图像块对应的电光转换函数确定为HDR图像帧对应的全局电光转换函数;当确定剩余的图像块中存在与第一图像块不能共用相同电光转换函数的图像块时,根据剩余的图像对应的编码块的亮度的统计值,确定剩余图像块各自对应的电光转换函数。
可选地,作为一个实施例,光电转换信息包括每个图像块的以下信息中的至少一种:用于指示每个图像块对应的电光转换函数的索引的索引信息;用于指示每个图像块对应的电光转换函数的参数的信息;以及每个图像块对应的编码块的亮度的统计值。
可选地,作为一个实施例,统计值为每个图像块对应的编码块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合 或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (32)

  1. 一种视频编码方法,其特征在于,包括:
    获取待编码的高动态范围HDR图像帧,其中,所述HDR图像帧包括多个图像块;
    根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数;
    根据所述每个图像块对应的光电转换函数,对所述每个图像块进行光电转换;
    对经光电转换后的所述多个图像块进行编码。
  2. 如权利要求1所述的方法,其特征在于,所述根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数,包括:
    根据所述每个图像块的亮度的统计值,分别确定所述预设的多个光电转换函数的函数值;
    从所述多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;
    将所述目标函数值对应的光电转换函数确定为所述每个图像块对应的光电转换函数。
  3. 如权利要求1所述的方法,其特征在于,所述根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数,包括:
    确定所述每个图像块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;
    根据所述多个数值区间与所述多个光电转换函数的一一对应关系,将所述第一数值区间对应的光电转换函数确定为所述亮度统计值落入所述第一数值区间内的每个图像块对应的光电转换函数。
  4. 如权利要求1-3中任一项所述的方法,其特征在于,所述对经光电转换后的所述多个图像块进行编码,包括:
    以8比特为单位,对经光电转换后的所述多个图像块进行量化,得到所述多个图像块的量化数据;
    根据所述多个图像块的量化数据进行编码。
  5. 如权利要求1-4中任一项所述的方法,其特征在于,所述方法还包括:
    向码流中写入所述每个图像块的光电转换信息,所述光电转换信息用于解码端确定所述每个图像块对应的解码块的电光转换函数。
  6. 如权利要求5所述的方法,其特征在于,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:
    所述每个图像块对应的光电转换函数的索引;
    所述每个图像块的亮度的统计值;以及
    所述每个图像块对应的光电转换函数的参数。
  7. 如权利要求1-6中任一项所述的方法,其特征在于,所述统计值为所述每个图像块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
  8. 如权利要求1-7中任一项所述的方法,其特征在于,所述的多个图像块中的至少两个图像块对应同一个光电转换函数。
  9. 如权利要求1-8中任一项所述的方法,其特征在于,所述根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数包括:
    根据所述多个图像块中的任意一个第一图像块的亮度的统计值,确定所述第一图像块对应的光电转换函数;
    确定除所述第一图像块之外剩余的图像块与所述第一图像块之间的亮度的相关性;
    根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的光电转换函数;
    当确定所述剩余的图像块与所述第一图像块共用相同的光电转换函数时,将所述第一图像块对应的光电转换函数确定为所述HDR图像帧对应的全局光电转换函数;
    当确定所述剩余的图像块中存在与所述第一图像块不能共用相同光电转换函数的图像块时,根据所述剩余的图像的亮度的统计值,确定所述剩余图像块各自对应的光电转换函数。
  10. 一种视频解码方法,其特征在于,包括:
    解码码流以重建高动态范围HDR图像帧,所述HDR图像帧包括多个图 像块;
    从所述码流中获取多个图像块中的每个图像块的光电转换信息,所述光电转换信息用于解码端确定所述每个图像块对应的电光转换函数;
    根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数;
    根据所述每个图像块对应的电光转换函数,对所述每个图像块进行电光转换。
  11. 如权利要求10所述的方法,其特征在于,所述光电转换信息包括用于指示所述每个图像块的电光转换函数的索引的索引信息,
    所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:
    根据所述每个图像块的电光转换函数的索引,从所述预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数。
  12. 如权利要求10所述的方法,其特征在于,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,
    所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:
    根据所述每个图像块对应的编码块的亮度的统计值,分别确定所述预设的多个电光转换函数的函数值;
    从所述多个电光转换函数的函数值中选取与预设值差异最小的目标函数值;
    将所述目标函数值对应的电光转换函数确定为所述每个图像块对应的电光转换函数。
  13. 如权利要求10所述的方法,其特征在于,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,
    所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:
    确定所述每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;
    根据所述多个数值区间与所述多个电光转换函数的一一对应关系,将所述第一数值区间对应的电光转换函数确定为所述每个图像块对应的电光转 换函数。
  14. 如权利要求10-13中任一项所述的方法,其特征在于,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,
    所述根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数,包括:
    根据所述多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定所述第一图像块对应的电光转换函数;
    确定除所述第一图像块之外剩余的图像块对应的编码块与所述第一图像块对应的编码块之间的亮度的相关性;
    根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的电光转换函数;
    当确定所述剩余的图像块与所述第一图像块共用相同的电光转换函数时,将所述第一图像块对应的电光转换函数确定为所述HDR图像帧对应的全局电光转换函数;
    当确定所述剩余的图像块中存在与所述第一图像块不能共用相同电光转换函数的图像块时,根据所述剩余的图像对应的编码块的亮度的统计值,确定所述剩余图像块各自对应的电光转换函数。
  15. 如权利要求10-14中任一项所述的方法,其特征在于,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:
    用于指示所述每个图像块对应的电光转换函数的索引的索引信息;
    用于指示所述每个图像块对应的电光转换函数的参数的信息;以及
    所述每个图像块对应的编码块的亮度的统计值。
  16. 如权利要求10-15中任一项所述的方法,其特征在于,所述统计值为所述每个图像块对应的编码块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
  17. 一种视频编码器,其特征在于,包括:
    获取单元,用于获取待编码的高动态范围HDR图像帧,其中,所述HDR图像帧包括多个图像块;
    确定单元,用于根据所述多个图像块中的每个图像块的亮度的统计值,从预设的多个光电转换函数中确定所述每个图像块对应的光电转换函数;
    光电转换单元,用于根据所述每个图像块对应的光电转换函数,对所述 每个图像块进行光电转换;
    编码单元,用于对经光电转换后的所述多个图像块进行编码。
  18. 如权利要求17所述的视频编码器,其特征在于,所述确定单元具体用于根据所述每个图像块的亮度的统计值,分别确定所述预设的多个光电转换函数的函数值;从所述多个光电转换函数的函数值中选取与预设值差异最小的目标函数值;将所述目标函数值对应的光电转换函数确定为所述每个图像块对应的光电转换函数。
  19. 如权利要求17所述的视频编码器,其特征在于,所述确定单元具体用于确定所述每个图像块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;根据所述多个数值区间与所述多个光电转换函数的一一对应关系,将所述第一数值区间对应的光电转换函数确定为所述亮度统计值落入所述第一数值区间内的每个图像块对应的光电转换函数。
  20. 如权利要求17-19中任一项所述的视频编码器,其特征在于,所述编码单元具体用于以8比特为单位,对经光电转换后的所述多个图像块进行量化,得到所述多个图像块的量化数据;根据所述多个图像块的量化数据进行编码。
  21. 如权利要求17-20中任一项所述的视频编码器,其特征在于,所述视频编码器还包括:写入单元,用于向码流中写入所述每个图像块的光电转换信息,所述光电转换信息用于解码端确定所述每个图像块对应的解码块的电光转换函数。
  22. 如权利要求21所述的视频编码器,其特征在于,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:
    所述每个图像块对应的光电转换函数的索引;
    所述每个图像块的亮度的统计值;以及
    所述每个图像块对应的光电转换函数的参数。
  23. 如权利要求17-22中任一项所述的视频编码器,其特征在于,所述统计值为所述每个图像块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
  24. 如权利要求17-23中任一项所述的视频编码器,其特征在于,所述的多个图像块中的至少两个图像块对应同一个光电转换函数。
  25. 如权利要求17-24中任一项所述的视频编码器,其特征在于,所述确定单元具体用于根据所述多个图像块中的任意一个第一图像块的亮度的统计值,确定所述第一图像块对应的光电转换函数;确定除所述第一图像块之外剩余的图像块与所述第一图像块之间的亮度的相关性;根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的光电转换函数;当确定所述剩余的图像块与所述第一图像块共用相同的光电转换函数时,将所述第一图像块对应的光电转换函数确定为所述HDR图像帧对应的全局光电转换函数;当确定所述剩余的图像块中存在与所述第一图像块不能共用相同光电转换函数的图像块时,根据所述剩余的图像的亮度的统计值,确定所述剩余图像块各自对应的光电转换函数。
  26. 一种视频解码器,其特征在于,包括:
    解码单元,用于解码码流以重建高动态范围HDR图像帧,所述HDR图像帧包括多个图像块;
    获取单元,用于从所述码流中获取多个图像块中的每个图像块的光电转换信息,所述光电转换信息由编码端基于所述每个图像块对应的编码块的亮度的统计值确定,且所述光电转换信息用于解码端确定所述每个图像块对应的电光转换函数;
    确定单元,用于根据所述每个图像块的光电转换信息,从预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数;
    电光转换单元,用于根据所述每个图像块对应的电光转换函数,对所述每个图像块进行电光转换。
  27. 如权利要求26所述的视频解码器,其特征在于,所述光电转换信息包括用于指示所述每个图像块的电光转换函数的索引的索引信息,其中,所述索引信息是所述编码端基于所述每个图像块对应的光电转换函数的索引确定的,所述确定单元具体用于根据所述每个图像块的电光转换函数的索引,从所述预设的多个电光转换函数中确定所述每个图像块对应的电光转换函数。
  28. 如权利要求26所述的视频解码器,其特征在于,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述确定单元具体用于根据所述每个图像块对应的编码块的亮度的统计值,分别确定所述预设的多个电光转换函数的函数值;从所述多个电光转换函数的函数值中选取与预 设值差异最小的目标函数值;将所述目标函数值对应的电光转换函数确定为所述每个图像块对应的电光转换函数。
  29. 如权利要求26所述的视频解码器,其特征在于,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述确定单元具体用于确定所述每个图像块对应的编码块的亮度的统计值所落入的第一数值区间,其中,所述第一数值区间为预设的多个数值区间中的一个;根据所述多个数值区间与所述多个电光转换函数的一一对应关系,将所述第一数值区间对应的电光转换函数确定为所述每个图像块对应的电光转换函数。
  30. 如权利要求26-29中任一项所述的视频解码器,其特征在于,所述光电转换信息包括所述每个图像块对应的编码块的亮度的统计值,所述确定单元具体用于根据所述多个图像块中的任意一个第一图像块对应的编码块的亮度的统计值,确定所述第一图像块对应的电光转换函数;确定除所述第一图像块之外剩余的图像块对应的编码块与所述第一图像块对应的编码块之间的亮度的相关性;根据所确定的亮度相关性,确定所述剩余的图像块是否与所述第一图像块共用相同的电光转换函数;当确定所述剩余的图像块与所述第一图像块共用相同的电光转换函数时,将所述第一图像块对应的电光转换函数确定为所述HDR图像帧对应的全局电光转换函数;当确定所述剩余的图像块中存在与所述第一图像块不能共用相同电光转换函数的图像块时,根据所述剩余的图像对应的编码块的亮度的统计值,确定所述剩余图像块各自对应的电光转换函数。
  31. 如权利要求26-30中任一项所述的视频解码器,其特征在于,所述光电转换信息包括所述每个图像块的以下信息中的至少一种:
    用于指示所述每个图像块对应的电光转换函数的索引的索引信息;
    用于指示所述每个图像块对应的电光转换函数的参数的信息;以及
    所述每个图像块对应的编码块的亮度的统计值。
  32. 如权利要求26-31中任一项所述的视频解码器,其特征在于,所述统计值为所述每个图像块对应的编码块内像素点的亮度均值、亮度方差、最大亮度值、最小亮度值或亮度的直方图统计值。
CN201580077349.8A 2015-06-09 2015-06-09 视频编解码方法和视频编解码器 Active CN107409223B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2015/081066 WO2016197323A1 (zh) 2015-06-09 2015-06-09 视频编解码方法和视频编解码器

Publications (2)

Publication Number Publication Date
CN107409223A true CN107409223A (zh) 2017-11-28
CN107409223B CN107409223B (zh) 2020-02-14

Family

ID=57504376

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580077349.8A Active CN107409223B (zh) 2015-06-09 2015-06-09 视频编解码方法和视频编解码器

Country Status (6)

Country Link
US (1) US20180103258A1 (zh)
EP (1) EP3300368A4 (zh)
JP (1) JP2018524875A (zh)
KR (1) KR20180015248A (zh)
CN (1) CN107409223B (zh)
WO (1) WO2016197323A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114501023A (zh) * 2022-03-31 2022-05-13 深圳思谋信息科技有限公司 视频处理方法、装置、计算机设备、存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10595099B2 (en) * 2015-04-05 2020-03-17 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal for broadcast service on basis of XML subtitle
KR102594201B1 (ko) * 2016-09-22 2023-10-27 삼성디스플레이 주식회사 영상 처리 방법 및 이를 수행하는 표시 장치
KR20210099865A (ko) 2020-02-05 2021-08-13 삼성전자주식회사 이미지 센서 모듈, 그것의 영상 압축 방법 및 전자 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070269132A1 (en) * 2006-05-17 2007-11-22 Xerox Corporation Histogram adjustment for high dynamic range image mapping
CN101335894A (zh) * 2007-06-26 2008-12-31 三菱电机株式会社 图像逆色调映射的方法和系统以及编解码器
WO2010003692A1 (en) * 2008-07-10 2010-01-14 Visualisation Group Hdr video data compression devices and methods

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5450502A (en) * 1993-10-07 1995-09-12 Xerox Corporation Image-dependent luminance enhancement
US5581370A (en) * 1995-06-05 1996-12-03 Xerox Corporation Image-dependent automatic area of interest enhancement
US6850642B1 (en) * 2000-01-31 2005-02-01 Micron Technology, Inc. Dynamic histogram equalization for high dynamic range images
US6826310B2 (en) * 2001-07-06 2004-11-30 Jasc Software, Inc. Automatic contrast enhancement
JP2004112561A (ja) * 2002-09-20 2004-04-08 Ricoh Co Ltd 画像処理装置
CN101026773B (zh) * 2006-02-20 2010-05-12 华为技术有限公司 一种视频伽玛特性参数传送方法和装置
US8339475B2 (en) * 2008-12-19 2012-12-25 Qualcomm Incorporated High dynamic range image combining
CN101951523B (zh) * 2010-09-21 2012-10-24 北京工业大学 一种自适应彩色图像处理方法及系统
US9628808B2 (en) * 2013-03-26 2017-04-18 Dolby Laboratories Licensing Corporation Encoding perceptually-quantized video content in multi-layer VDR coding
US8958658B1 (en) * 2013-09-10 2015-02-17 Apple Inc. Image tone adjustment using local tone curve computation
WO2015076608A1 (ko) * 2013-11-21 2015-05-28 엘지전자 주식회사 비디오 처리 방법 및 비디오 처리 장치
WO2015128268A1 (en) * 2014-02-25 2015-09-03 Thomson Licensing Method for generating a bitstream relative to image/video signal, bitstream carrying specific information data and method for obtaining such specific information

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070269132A1 (en) * 2006-05-17 2007-11-22 Xerox Corporation Histogram adjustment for high dynamic range image mapping
CN101335894A (zh) * 2007-06-26 2008-12-31 三菱电机株式会社 图像逆色调映射的方法和系统以及编解码器
WO2010003692A1 (en) * 2008-07-10 2010-01-14 Visualisation Group Hdr video data compression devices and methods

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114501023A (zh) * 2022-03-31 2022-05-13 深圳思谋信息科技有限公司 视频处理方法、装置、计算机设备、存储介质
CN114501023B (zh) * 2022-03-31 2022-07-26 深圳思谋信息科技有限公司 视频处理方法、装置、计算机设备、存储介质

Also Published As

Publication number Publication date
KR20180015248A (ko) 2018-02-12
WO2016197323A1 (zh) 2016-12-15
EP3300368A1 (en) 2018-03-28
JP2018524875A (ja) 2018-08-30
CN107409223B (zh) 2020-02-14
US20180103258A1 (en) 2018-04-12
EP3300368A4 (en) 2018-07-04

Similar Documents

Publication Publication Date Title
JP7246542B2 (ja) 異なる表示機能の間で知覚ルミナンス非線形性ベースの画像データ交換を改善する装置および方法
US9501818B2 (en) Local multiscale tone-mapping operator
RU2740034C1 (ru) Линейный кодер для обработки изображений/видео
US10616577B2 (en) Adaptive video deblocking
CN107771392B (zh) 用于高动态范围图像的实时内容自适应感知量化器
CN111275628A (zh) 一种图像信号转换处理方法、装置及终端设备
US8897581B2 (en) Guided post-prediction filtering in layered VDR coding
CN108476325B (zh) 用于高动态范围颜色转换校正的介质、方法和设备
EP3669542B1 (en) Bit-depth efficient image processing
WO2019092463A1 (en) Video image processing
US20200126509A1 (en) Methods and apparatuses for tone mapping and inverse tone mapping
TW201720157A (zh) 用於視訊編碼及解碼中量化之方法及設備
CN107409223B (zh) 视频编解码方法和视频编解码器
KR20180072548A (ko) 이미지 데이터의 인코딩 및 디코딩
CN112686810A (zh) 一种图像处理的方法及装置
WO2019036522A1 (en) EFFICIENT IMAGE PROCESSING IN BIT DEPTH
EP3371975A1 (en) Piecewise-linear inter-layer predictor for high-dynamic range video coding
CN114467298B (zh) 一种图像信号转换处理方法、装置及终端设备
US20180270493A1 (en) Image compression
EP3251351B1 (en) Predictive image encoding and decoding with pixel group based quantization
CN109314787B (zh) 用于高动态范围视频编码的增强层掩蔽
Chiang et al. Rate–distortion optimization of multi-exposure image coding for high dynamic range image coding
CN108370442A (zh) 一种高动态范围图像的处理方法、装置及终端设备
Hatchett Efficient and adaptable high dynamic range compression
WO2019071045A1 (en) HIGH DYNAMIC RANGE COLORING CORRECTION

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant