WO2017114016A1 - 图像解码和编码方法、解码和编码装置、解码器及编码器 - Google Patents

图像解码和编码方法、解码和编码装置、解码器及编码器 Download PDF

Info

Publication number
WO2017114016A1
WO2017114016A1 PCT/CN2016/105926 CN2016105926W WO2017114016A1 WO 2017114016 A1 WO2017114016 A1 WO 2017114016A1 CN 2016105926 W CN2016105926 W CN 2016105926W WO 2017114016 A1 WO2017114016 A1 WO 2017114016A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
shaping
parameter
layer
shaping parameter
Prior art date
Application number
PCT/CN2016/105926
Other languages
English (en)
French (fr)
Inventor
李明
吴平
吴钊
尚国强
Original Assignee
中兴通讯股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中兴通讯股份有限公司 filed Critical 中兴通讯股份有限公司
Priority to EP21203872.3A priority Critical patent/EP3962085A3/en
Priority to KR1020187022134A priority patent/KR102156030B1/ko
Priority to US16/067,420 priority patent/US11006134B2/en
Priority to JP2018534535A priority patent/JP7045317B2/ja
Priority to EP16880806.1A priority patent/EP3399752B1/en
Publication of WO2017114016A1 publication Critical patent/WO2017114016A1/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了一种图像解码和编码方法、解码和编码装置、解码器及编码器，其中，该图像解码方法包括：解析视频码流，从该视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数；使用上述恢复图像使用的整形参数对恢复图像进行整形处理；其中，该恢复图像是在执行整形处理前，解码视频码流获得的图像；上述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，上述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。通过本发明，解决了相关技术中存在的视频观看质量差，整形参数的编码开销大的问题。

Description

图像解码和编码方法、解码和编码装置、解码器及编码器 技术领域
本发明涉及通信领域，具体而言，涉及一种图像解码和编码方法、解码和编码装置、解码器及编码器。
背景技术
目前，国际标准组织正在在H.265/HEVC标准上制定对高动态范围视频(High Dynamic Range，简称为HDR)的扩展标准。HDR扩展标准拟采用“整形器(Reshaper)”的信号处理框架构建测试模型。在头端，整形器将输入HDR视频处理为适用于H.265/HEVC Main 10Profile编码器的输入视频(如标准动态范围图像(Standard Dynamic Range，简称为SDR)视频)；在接收端，整形器使用与头端相逆的操作，将H.265/HEVC Main 10Profile解码器的解码恢复SDR视频处理为HDR视频。同时，如果HDR视频和SDR视频使用不同的颜色空间(Color Gamut)(HDR视频使用更大的颜色空间)，则在头端和接收端的整形器操作中，还将涉及对视频颜色空间的转换。
为支持上述信号处理框架，国际标准组织对H.265/HEVC进行了扩展，在参数集结构中编码和传输用于指导接收端整形器操作的信息。可选地，在序列参数集(Sequence Parameter Set，简称为SPS)扩展中编码和传输HDR视频转换特性的参数，在图像参数集(Picture Parameter Set，简称为PPS)扩展中编码和传输接收端整形器操作所使用的参数。在接收端，解码器完成图像重建后，对重建图像按照参数集中的参数继续执行整型操作，从而将重建图像转换为HDR图像。
上述方法中，在分片(Slice)解码过程中，通过参数集索引序号激活引用的参数集，使用该参数集中的信息参数对分片进行解码。SPS的适用范围是整个编码视频序列(Coded Video Sequence，简称为CVS)，即同一个CVS中的分片解码过程中使用相同的SPS。PPS的使用范围是一帧图像， 即同一帧图像中的分片解码过程中使用相同的PPS。对应于编码过程，同一个CVS中的分片需引用相同的SPS，且该SPS中的信息参数在CVS的编码过程中保持不变；同一帧图像中的分片需引用相同的PPS，且该PPS中的参数信息在该图像编码过程中保持不变。
动态范围和颜色空间的转换过程中均会带来不可逆的信息损失。实测表明，与原始的HDR视频相比，使用前述的信号处理框架，接收端通过使用整形器恢复的HDR视频中可能存在纹理细节损失、颜色失真等可见失真，并且这些可见失真与使用H.265/HEVC编码器对视频的压缩率有关。通常情况下，压缩率越高(即编码码率越低)，解码恢复视频中由于有损压缩带来的失真更大，整形器对解码恢复视频处理后输出的HDR视频中包括更多的纹理、颜色失真。因此，根据HDR视频信源特性、编码器有损压缩特性等因素，在HDR视频编码过程中动态调整整形器参数可以有效提高接收端HDR恢复视频的主观观看质量。
尽管在理论上PPS提供了图像层自适应调整编码参数的机制，可以通过为每帧图像单独设置PPS的方式实现整形器的图像自适应调整，但是由于整形器参数在PPS扩展中进行编码，为每帧图像调整整形器参数的同时就需要重复编码PPS中其他无需调整的编码参数，这些重复编码的参数将带来较大的编码比特开销。
针对相关技术中存在的视频观看质量差，整形参数的编码开销大的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种图像解码和编码方法、解码和编码装置、解码器及编码器，以至少解决相关技术中存在的视频观看质量差，整形参数的编码开销大的问题。
根据本发明实施例的一个方面，提供了一种图像解码处理方法，包括：解析视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数；使用所述 恢复图像使用的整形参数对所述恢复图像进行整形处理；其中，所述恢复图像是在执行整形处理前，解码所述视频码流获得的图像；所述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
可选地，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数之前，还包括：确定所述视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数。
可选地，根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数包括：判断所述PPS的扩展部分和/或所述PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的所述恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的所述恢复图像使用的整形参数为预设值或空缺。
可选地，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：解析所述分片头信息的扩展部分，获得第二整形参数；使用所述第二整形参数，更新或重新确定所述恢复图像使用的整形参数。
可选地，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：解析所述视频码流中AU中包括的参数数据单元，获取第三整形参数，其中，所述参数数据单元为包括在所述AU中的独立于分片码流数据单元的数据单元；使用所述第三整形参数更新或重新确定所述恢复图像使用的整形参数；或者，根据预先配置的整形参数确定方式确定所述恢复图像使用的整形参数为所述第三整形参数。
可选地，使用所述第三整形参数更新或重新确定所述恢复图像使用的 整形参数包括：确定所述视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数；使用所述第三整形参数更新或重新确定获取的所述恢复图像使用的整形参数。
可选地，根据通过所述参数集索引序号引用的所述PPS获取所述恢复图像使用的整形参数包括：判断所述PPS的扩展部分和/或所述PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的所述恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的所述恢复图像使用的整形参数为预设值或空缺。
可选地，所述第三整形参数包括将对所述AU的前一个AU中包括的参数数据单元进行解析后获得的第四整形参数。
可选地，所述预先配置的整形参数确定方式包括以下至少之一：默认的确定方式、利用解析视频参数集VPS获得的用于指示整形参数的第一标识信息进行确定的方式、利用解析序列参数集SPS获得的用于指示整形参数的第二标识信息进行确定的方式。
可选地，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：解析所述AU中包括的所述分片头信息，获取第三标识信息，其中，所述第三标识信息用于指示所述恢复图像使用的整形参数是否根据除所述PPS外其他图像和/或分片层参数集进行确定；当所述第三标识信息指示所述恢复图像使用的整形参数根据除所述PPS外其他图像和/或分片层参数集进行确定时，解析所述AU中包括的所述分片头信息，获取所述其他图像和/或分片层参数集的索引序号，激活索引序号与所述其他图像和/或分片层参数集的索引序号相同的参数集，获取第五整形参数；使用所述第五整形参数，更新或重新确定获取的所述恢复图像使用的整形参数。
可选地，解析所述视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整 形参数包括：从用于承载所述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取第六整形参数；使用所述第六整形参数更新或重新确定所述恢复图像使用的整形参数；或者，确定所述恢复图像使用的整形参数为所述第六整形参数；其中，所述系统层图像参数数据单元包括与所述视频码流中接入单元AU对应的描述信息或辅助信息。
可选地，使用所述第六整形参数更新或重新确定所述恢复图像使用的整形参数，包括：确定所述视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数；使用所述第六整形参数更新或重新确定获取的所述恢复图像使用的整形参数。
可选地，根据通过所述参数集索引序号引用的所述PPS获取所述恢复图像使用的整形参数，包括：判断所述PPS的扩展部分和/或所述PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的所述恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的所述恢复图像使用的整形参数为预设值或空缺。
可选地，从用于承载所述视频码流的传输流或媒体文件中的所述系统层图像参数数据单元中获取所述整形参数包括：根据从所述系统层图像参数数据单元中获取的如下参数至少之一确定所述整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
可选地，所述方法还包括：从用于承载所述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取对所述恢复图像进行二次整形处理的整形参数，其中，所述系统层图像参数数据单元包括与所述视频码流中接入单元AU对应的描述信息或辅助信息；利用获取的对所述恢复图像进行二次整形处理的整形参数对所述恢复图像进行二次整形处理。
可选地，从用于承载所述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取对所述恢复图像进行二次整形处理的整形参数包 括：根据从所述系统层图像参数数据单元中获取的如下参数至少之一确定对所述恢复图像进行二次整形处理的整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
根据本发明实施例的另一方面，提供了一种图像编码处理方法，包括：确定用于将恢复图像转换为高动态范围视频HDR图像的所述恢复图像使用的整形参数，其中，所述恢复图像是编码器执行整形操作前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，所述恢复图像是解码待处理视频码流所获得的SDR图像；将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中，其中，所述图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
可选地，确定用于将所述恢复图像转换为所述高动态范围视频HDR图像的所述恢复图像使用的整形参数包括：确定图像层整形参数和序列层整形参数，其中：所述图像层整形参数包括最小化所述恢复图像与目标HDR图像之间误差的整形处理过程中使用的滤波器系数；所述序列层整形参数包括根据所述目标HDR图像构成的目标HDR视频的动态范围和颜色空间、所述恢复图像构成的恢复视频的动态范围和颜色空间，确定的从所述恢复视频的动态范围扩展至所述目标HDR视频的动态范围的映射参数和/或从所述恢复视频的颜色空间到所述目标HDR视频的颜色空间的转换参数；根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数。
可选地，所述目标HDR图像是输入编码器的原始HDR视频中对应于所述恢复图像的HDR图像。
可选地，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：分别利用所述图像层整形参数和所述序列层 整形参数对所述恢复图像进行整形处理；确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
可选地，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：当所述恢复图像使用的整形参数为所述序列层整形参数时，对所述序列层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像参数集PPS和/或所述PPS引用的参数集中；当所述恢复图像使用的整形参数为所述图像层整形参数时，对所述图像层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中包括的分片头信息中。
可选地，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：从所述图像层整形参数、所述序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定所述恢复图像使用的整形参数。
可选地，从所述图像层整形参数、所述序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定所述恢复图像使用的整形参数包括：分别利用所述图像层整形参数、所述序列层整形参数和所述前一个编码图像所使用的整形参数对所述恢复图像进行整形处理；确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
可选地，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：当所述恢复图像使用的整形参数为所述序列层整形参数时，对所述序列层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像参数集PPS和/或所述 PPS引用的参数集中；当所述恢复图像使用的整形参数为所述图像层整形参数或所述前一个编码图像所使用的整形参数时，对所述图像层整形参数或所述前一个编码图像所使用的整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中包括的参数数据单元中；或者，当所述恢复图像使用的整形参数为所述图像层整形参数时，对所述图像层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中包括的参数数据单元中；当所述恢复图像使用的整形参数为所述前一个编码图像所使用的整形参数时，在所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中编码第四标识信息，其中，所述第四标识信息用于指示所述整形参数为所述前一个编码图像所使用的整形参数；其中，所述参数数据单元为包括在所述AU中的独立于分片码流数据单元的数据单元。
可选地，所述方法还包括：按照如下方式至少之一编码用于指示所述整形参数的标识信息：在视频参数集VPS中编码用于指示所述整形参数的第一标识信息的方式、在序列参数集SPS中编码用于指示所述整形参数的第二标识信息的方式。
可选地，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：从所述图像层整形参数、所述序列层整形参数以及已使用的除所述恢复图像对应的接入单元AU中包括的分片头信息中的图像参数集PPS外图像和/或分片层参数集中编码的一个或多个第一其他整形参数中确定所述恢复图像使用的整形参数。
可选地，从所述图像层整形参数、所述序列层整形参数以及所述第一其他整形参数中确定所述恢复图像使用的整形参数包括：分别利用所述图像层整形参数、所述序列层整形参数和所述第一其他整形参数对所述恢复图像进行整形处理；确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
可选地，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：当所述恢复图像使用的整形参数为所述序列层整形参数时，在分片头信息中，编码标识不使用PPS外图像和/或分片层参数集的信息；当所述恢复图像使用的整形参数为所述第一其他整形参数时，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码所述第一其他整形参数所在参数集的参数集索引序号；当所述恢复图像使用的整形参数为所述图像层整形参数时，对所述图像层整形参数进行编码并将编码比特写入新建的参数集数据单元中，其中，所述新建的参数集数据单元配置有参数集索引序号，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码所述参数集索引序号。
可选地，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：从所述图像层整形参数、所述序列层整形参数以及在传输流或媒体文件的系统层中编码的一个或多个第二其他整形参数中确定所述恢复图像使用的整形参数。
可选地，从所述图像层整形参数、所述序列层整形参数以及所述第二其他整形参数中确定所述恢复图像使用的整形参数包括：分别利用所述图像层整形参数、所述序列层整形参数和所述第二其他整形参数对所述恢复图像进行整形处理；确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
可选地，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：当所述恢复图像使用的整形参数为所述序列层整形参数时，在系统层编码第五标识信息，其中，所述第五标识信息用于指示所述恢复图像使用的整形参数不使用所述系统层中已编码的整形参数；当所述恢复图像使用的整形参数为所述图像层整形参数时，在所述系统层编码所述图像层整形参数；当所述恢复图像使用的整形参数为所述第二其他整形参数时， 在所述系统层编码所述第二其他整形参数，或者，在所述系统层编码第六标识信息，其中，所述第六标识信息用于指示所述恢复图像使用的整形参数使用所述系统层中已编码的整形参数。
可选地，所述系统层中编码用于对所述恢复图像进行二次整形的整形参数和用于指示二次整形操作执行方式的控制信息。
根据本发明实施例的另一方面，提供了一种图像解码处理装置，包括：第一确定模块，设置为解析视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数；处理模块，设置为使用所述恢复图像使用的整形参数对所述恢复图像进行整形处理；其中，所述恢复图像是在执行整形处理前，解码所述视频码流获得的图像；所述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
根据本发明实施例的另一方面，提供了一种图像编码处理装置，包括：第二确定模块，设置为确定用于将恢复图像转换为高动态范围视频HDR图像的所述恢复图像使用的整形参数，其中，所述恢复图像是编码器执行整形操作前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，所述恢复图像是解码待处理视频码流所获得的SDR图像；写入模块，设置为将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中，其中，所述图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
根据本发明实施例的另一方面，提供了一种解码器，包括上述的图像解码处理装置。
根据本发明实施例的另一方面，提供了一种编码器，包括上述的图像 编码处理装置。
本发明另一实施例提供了一种计算机存储介质，所述计算机存储介质存储有执行指令，所述执行指令用于执行上述实施例中的步骤之一或其组合。
通过本发明实施例，采用解析视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数；使用所述恢复图像使用的整形参数对所述恢复图像进行整形处理；其中，所述恢复图像是在执行整形处理前，解码所述视频码流获得的图像；所述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。解决了相关技术中存在的视频观看质量差，整形参数的编码开销大的问题，进而达到了提高视频观看质量，降低整形参数的编码开销的效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据本发明实施例的图像解码处理方法的流程图；
图2是根据本发明实施例的图像编码处理方法的流程图；
图3是根据本发明实施例的图像解码处理装置的结构框图；
图4是根据本发明实施例的图像解码处理装置的可选结构框图；
图5是根据本发明实施例的图像编码处理装置的结构框图；
图6是根据本发明实施例的解码器的结构框图；
图7是根据本发明实施例的编码器的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。
在本实施例中提供了一种图像解码处理方法，图1是根据本发明实施例的图像解码处理方法的流程图，如图1所示，该流程包括如下步骤：
步骤S102，解析视频码流，从该视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数；
步骤S104，使用上述恢复图像使用的整形参数对恢复图像进行整形处理；其中，该恢复图像是在执行整形处理前，解码视频码流获得的图像；上述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，上述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
其中，上述实施例中的动作的执行者可以是解码处理设备，例如，解码器。
从上述实施例可知，用于对恢复图像进行整形处理的整形参数是根据从视频码流的图像和/或分片层数据单元中获取的整形参数确定的，可以有效提高图像的观看质量，进而提高视频的观看质量，并且，还可以降低整形参数的编码开销。通过上述步骤，解决了相关技术中存在的视频观看质量差，整形参数的编码开销大的问题，进而达到了提高视频观看质量，降低整形参数的编码开销的效果。
在一个可选的实施例中，从上述视频码流的图像和/或分片层数据单元中获取上述整形参数，并根据获取的上述整形参数确定恢复图像使用的整形参数之前，还包括：确定上述视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过上述参数集索引序号引用的PPS获取恢复 图像使用的整形参数。
其中，根据通过上述参数集索引序号引用的PPS获取恢复图像使用的整形参数可以有多种获取方式，下面以一种为例进行说明：判断上述PPS的扩展部分和/或PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的上述恢复图像使用的整形参数为该第一整形参数；和/或，在判断结果为否时，确定获取的上述恢复图像使用的整形参数为预设值或空缺。下面以上述视频码流为HDR视频码流为例进行说明：
解码处理设备解析HDR视频码流中各AU中包括的分片头信息中的PPS参数集索引序号，在已收到的PPS中，寻找PPS数据单元中索引序号与解析分片头信息获得的参数集索引序号值相同的PPS。解码处理设备激活该PPS，解析该PPS数据单元中的编码比特。若解析该PPS的扩展部分获得整形参数，则将该整形参数设置为引用该PPS的分片使用的整形参数。反之，若解析该PPS扩展中未获得整形参数，则将引用该PPS的分片所使用的整形参数设置为空缺，或者设置为预设值。
从上述实施例中可知，图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，上述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。下面分别结合不同的图像和/或分片层数据单元对上述的步骤S102中涉及到的操作进行说明：
在一个可选的实施例中，上述的图像和/或分片层数据单元可以为分片头信息，在该实施例中，从上述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数包括：解析上述分片头信息的扩展部分，获得第二整形参数；使用该第二整形参数，更新或重新确定恢复图像使用的整形参数。下面结合一个可选的实施例对图像和/或分片层数据单元可以为分片头信息时的相关操作进行说明：
可选实施例1：
本实施例是一种HDR视频的解码处理方法，用于对HDR视频进行解 码处理的装置。所述装置的输入是HDR视频码流或包括HDR视频码流的传输流或媒体文件，输出是用于播放的恢复HDR视频。该实施例包括如下步骤：
步骤一，解析码流，从图像和/或分片层数据单元中获得整形参数。
解码处理设备解析输入码流。如果输入码流是包括HDR视频码流的传输流或媒体文件，则从所述传输流或媒体文件中提取HDR视频码流。
解码处理设备解析HDR视频码流中各AU中包括的分片头信息中的PPS参数集索引序号，在已收到的PPS中，寻找PPS数据单元中索引序号与解析分片头信息获得的参数集索引序号值相同的PPS。
解码处理设备激活该PPS，解析该PPS数据单元中的编码比特。若解析该PPS的扩展部分获得整形参数，则将该整形参数设置为引用该PPS的分片使用的整形参数(对应于上述的第一整形参数)。反之，若解析该PPS扩展中未获得整形参数，则将引用该PPS的分片所使用的整形参数设置为空缺，或者设置为预设值。
解码处理设备解析分片头信息。若解析分片头信息扩展部分获得整形参数(对应于上述的第二整形参数)，则将该整形参数设置为该分片使用的整形参数，即使用解析分片头信息扩展所获得的整形参数覆盖解析该分片引用的PPS所获得的整形参数或预设值。反之，若解析分片头信息扩展部分未获得整形参数，则使用解析该分片引用的PPS扩展获得的整形参数或预设值。
特别地，当解码处理设备从HDR视频码流中获得的“是否需要对该图像的恢复SDR图像进行整形处理”的标识信息指示“不需要对该图像的恢复SDR图像进行整形处理”，则解码处理设备可以跳过整形参数解析步骤和对该SDR图像的整形处理步骤。尽管如此，解码处理设备仍需要将解码图像转换成适合播放的视频数据格式。
步骤二，解码视频码流，获得恢复图像。
解码处理设备对HDR视频码流进行解码，获得恢复SDR视频。
步骤三，根据恢复图像使用的整形参数，对恢复SDR图像进行整形处理，转换为HDR图像。
使用上述方法，当恢复SDR图像的信源特性(可包括但不限于：动态范围、颜色空间、有损压缩失真等)与序列中大多图像相同或相近时，解码处理设备使用从PPS中获得的整形参数对恢复SDR视频进行整形处理。当恢复SDR图像的信源特性与序列中大多图像差异较大时，解码处理设备能够从分片头信息扩展中获得与恢复图像信源特性相关的整形参数，并根据所述整形参数对恢复SDR图像进行整形处理，提高了整形处理所得HDR图像的观看质量。这样，避免了因图像层整形参数的改变而带来的频繁解码处理设备更新PPS的操作。
在一个可选的实施例中，上述的图像和/或分片层数据单元可以为AU中包括的参数数据单元。在该实施例中，从上述视频码流的图像和/或分片层数据单元中获取上述整形参数，并根据获取的整形参数确定恢复图像使用的整形参数包括：解析上述视频码流中AU中包括的参数数据单元，获取第三整形参数，其中，该参数数据单元为包括在AU中的独立于分片码流数据单元的数据单元；使用上述第三整形参数更新或重新确定恢复图像使用的整形参数；或者，根据预先配置的整形参数确定方式确定上述恢复图像使用的整形参数为第三整形参数。
可选地，使用上述第三整形参数更新或重新确定恢复图像使用的整形参数包括：确定视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过该参数集索引序号引用的PPS获取上述恢复图像使用的整形参数；使用第三整形参数更新或重新确定获取的该恢复图像使用的整形参数。其中，根据通过上述参数集索引序号引用的PPS获取上述恢复图像使用的整形参数可以有多种获取方式，例如，可以通过如下的方式获取恢复图像使用的整形参数：判断上述PPS的扩展部分和/或PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的上述恢复 图像使用的整形参数为第一整形参数；和/或，在判断结果为否时，确定获取的恢复图像使用的整形参数为预设值或空缺。
其中，上述第三整形参数还可以通过如下的方式确定：将对上述AU的前一个AU中包括的参数数据单元进行解析后获得的第四整形参数。该前一个AU可以是按照AU解码顺序确定的当前待解码AU(即，上述的AU)的前一个AU。
上述预先配置的整形参数的确定方式可以包括以下至少之一：默认的确定方式、利用解析视频参数集VPS获得的用于指示整形参数的第一标识信息进行确定的方式、利用解析序列参数集SPS获得的用于指示整形参数的第二标识信息进行确定的方式。其中，上述的默认方式可以是预先已经配置好的一种确定方式。下面结合一个可选的实施例对上述的图像和/或分片层数据单元为AU中包括的参数数据单元时的操作进行说明：
可选实施例2：
本实施例是一种HDR视频的解码处理方法，用于对HDR视频进行解码处理的装置。所述装置的输入是HDR视频码流或包括HDR视频码流的传输流或媒体文件，输出是用于播放的恢复HDR视频。该实施例包括如下步骤：
步骤一，解析码流，从图像和/或分片层数据单元中获得整形参数。
解码处理设备解析输入码流。如果输入码流是包括HDR视频码流的传输流或媒体文件，则从所述传输流或媒体文件中提取HDR视频码流。
解码处理设备解析HDR视频码流中各AU中包括的分片头信息中的PPS参数集索引序号，在已收到的PPS中，寻找PPS数据单元中索引序号与解析分片头信息获得的参数集索引序号值相同的PPS。
解码处理设备激活该PPS，解析该PPS数据单元中的编码比特。若解析该PPS的扩展部分获得整形参数(对应于上述的第一整形参数)，则将该整形参数设置为引用该PPS的分片使用的整形参数。反之，若解析该PPS扩展中未获得整形参数，则将引用该PPS的分片所使用的整形参数设 置为空缺，或者设置为预设值。
若解码处理设备检测到AU中包括参数数据单元，则解析该数据参数数据单元，获得对该AU中包括的分片解码后得到的SDR恢复图像进行整形操作的整形参数(对应于上述的第三整形参数)，并将所述整形参数设置对SDR恢复图像进行整形操作的整形参数。反之，若解码处理设备检测到AU中不包括参数数据单元，则将解析该AU中包括的分片所引用的PPS获得的整形参数设置为对SDR恢复图像进行整形操作的整形参数。这里，所述参数数据单元是包括在AU中的独立于分片码流数据单元的数据单元，例如，参数集和辅助增强信息(Supplemental Enhancement Information，简称为SEI)数据单元，用户定义的数据单元，等。
可选择地，解码处理设备检测到AU中包括参数数据单元时，可以配置为将解析按照AU解码顺序当前待解码AU前一个AU中包括的参数数据单元获得的整形参数(对应于上述的第四整形参数)作为解码当前AU获得的SDR恢复图像的候选整形参数(对应于上述的第三整形参数)。另一组候选整形参数是解析PPS获得的整形参数。解码处理设备解析待解码AU中包括的分片头信息，获得选择使用哪一组候选整形参数的标识信息，根据标识信息使用对应的整形参数对SDR恢复图像进行整形处理。这里，对解码处理设备的配置方法可以是：解码处理设备默认采用上述方法；或者，解码处理设备解析视频参数集(Video Parameter Set，简称为VPS)和/或SPS获得是否使用上述方法的标识信息(其中，从VPS中解析出的标识信息对应于上述的第一标识信息，从SPS中解析出的标识信息对应于上述的第二标识信息)，根据标识信息配置是否使用已解码AU中的参数数据单元包括的整形参数。
特别地，当解码处理设备从HDR视频码流中获得的“是否需要对该图像的恢复SDR图像进行整形处理”的标识信息指示“不需要对该图像的恢复SDR图像进行整形处理”，则解码处理设备可以跳过整形参数解析步骤和对该SDR图像的整形处理步骤。尽管如此，解码处理设备仍需要将解码图像转换成适合播放的视频数据格式。
步骤二，与可选实施例1中的步骤二相同，在此，不再赘述。
步骤三，与可选实施例1中的步骤三相同，在此，不再赘述。
需要说明的是，在该可选实施例中，从HDR视频码流中各AU中包括的分片头信息中的PPS中解析整形参数的操作，可以是在从AU中包括参数数据单元中解析整形参数的操作之后进行的。
与可选实施例1中所述的解码处理设备相比，本实施例中的解码处理设备通过解析AU中的参数数据单元，获得AU中所有分片所使用的整形参数，这样可以进一步降低解析分片头信息的开销。
在一个可选的实施例中，上述的图像和/或分片层数据单元可以是AU中包括的分片头信息，在该实施例中，从上述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数包括：解析AU中包括的分片头信息，获取第三标识信息，其中，该第三标识信息用于指示恢复图像使用的整形参数是否根据除PPS外其他图像和/或分片层参数集进行确定；当上述第三标识信息指示恢复图像使用的整形参数根据除PPS外其他图像和/或分片层参数集进行确定时，解析AU中包括的分片头信息，获取上述其他图像和/或分片层参数集的索引序号；激活索引序号与其他图像和/或分片层参数集的索引序号相同的参数集，获取第五整形参数；使用上述第五整形参数，更新或重新确定获取的恢复图像使用的整形参数。下面结合一个可选实施例对图像和/或分片层数据单元是AU中包括的分片头信息时的相关操作进行说明：
可选实施例3：
本实施例是一种HDR视频的解码处理方法，用于对HDR视频进行解码处理的装置。所述装置的输入是HDR视频码流或包括HDR视频码流的传输流或媒体文件，输出是用于播放的恢复HDR视频。该实施例包括如下步骤：
步骤一，解析码流，从图像和/或分片层数据单元中获得整形参数。
解码处理设备解析输入码流。如果输入码流是包括HDR视频码流的传输流或媒体文件，则从上述传输流或媒体文件中提取HDR视频码流。
解码处理设备解析HDR视频码流中各AU中包括的分片头信息中的PPS参数集索引序号，在已收到的PPS中，寻找PPS数据单元中索引序号与解析分片头信息获得的参数集索引序号值相同的PPS。
解码处理设备激活该PPS，解析该PPS数据单元中的编码比特。若解析该PPS的扩展部分获得整形参数(对应于上述的第一整形参数)，则将该整形参数设置为引用该PPS的分片使用的整形参数。反之，若解析该PPS扩展中未获得整形参数，则将引用该PPS的分片所使用的整形参数设置为空缺，或者设置为预设值。
解码处理设备解析该分片头信息，获得是否使用除PPS外其他图像/分片层参数集的标识信息。如果该标识信息指示“不使用除PPS外其他图像/分片层参数集”，则使用解析PPS扩展所获得的整形参数对恢复SDR图像进行整形处理。
反之，如果该标识信息指示“使用除PPS外其他图像/分片层参数集”，则继续解析分片头信息，获得该图像/分片层参数集的索引序号，在已接收的码流或已解码的参数集数据单元中，寻找与参数集索引序号与解析分片头信息获得索引序号相同的参数集。解码处理设备解析该参数集，获得整形参数(对应于上述的第五整形参数)，使用该整形参数对解码恢复SDR图像进行整形处理。在上述过程中，解码处理设备可以通过搜索已接收的AU、在AU外传输的参数集码流寻找所述图像/分片层参数集。可选择地，由于所处理的HDR视频码流中可能包括较多的、参数集索引序号不同的所述图像/分片层参数集，因此，为降低解码处理设备搜索参数集的处理复杂度，解码处理设备使用一个以参数集索引序号为访问参数的数据结构。例如，一种实现方式可以是以参数集索引序号为访问参数的指针数组，数组中的指针指向存储有该参数集索引序号对应参数集的解析数据。解码处理设备在解析分片头信息获得参数集索引序号后，可以直接以参数集索引 序号为入口参数访问该数据结构，获得对应参数集中包括的整形参数。
特别地，当解码处理设备从HDR视频码流中获得的“是否需要对该图像的恢复SDR图像进行整形处理”的标识信息指示“不需要对该图像的恢复SDR图像进行整形处理”，则解码处理设备可以跳过整形参数解析步骤和对该SDR图像的整形处理步骤。尽管如此，解码处理设备仍需要将解码图像转换成适合播放的视频数据格式。
步骤二，与可选实施例2中的步骤二相同，在此，不再赘述。
步骤三，与可选实施例2中的步骤三相同，在此，不再赘述。
与可选实施例2中的解码处理设备相比，本实施例中的解码处理设备通过解析不同于PPS的图像/分片层参数集，获得分片所使用的整形参数。这使得解码处理设备可以选用不局限于前一个解码AU中的整形参数，提高了已解码信息的利用率。同时，借助于参数集本身的属性，解码处理设备更加易于判断是否存在分组丢失的情况。例如，解码处理设备在解析分片头信息的参数集序号后，未在已接收的参数集中寻找到具有相同参数集序号的参数集，此时，解码处理设备可以启用差错处理机制，进行差错恢复，提高了视频通信的可靠性。
在一个可选的实施例中，上述的图像和/或分片层数据单元可以是系统层图像参数数据单元，在该实施例中，解析视频码流，从视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数包括：从用于承载上述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取第六整形参数；使用该第六整形参数更新或重新确定恢复图像使用的整形参数；或者，确定恢复图像使用的整形参数为该第六整形参数；其中，该系统层图像参数数据单元包括与视频码流中接入单元AU对应的描述信息或辅助信息。
在一个可选的实施例中，使用上述第六整形参数更新或重新确定恢复图像使用的整形参数包括：确定上述视频码流中AU中包括的分片头信息 中的PPS参数集索引序号；根据通过上述参数集索引序号引用的PPS获取恢复图像使用的整形参数；使用上述第六整形参数更新或重新确定获取的恢复图像使用的整形参数。
在一个可选的实施例中，根据通过上述参数集索引序号引用的PPS获取恢复图像使用的整形参数包括：判断上述PPS的扩展部分和/或PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的恢复图像使用的整形参数为第一整形参数；和/或，在判断结果为否时，确定获取的恢复图像使用的整形参数为预设值或空缺。
在一个可选的实施例中，从用于承载上述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取整形参数包括：根据从系统层图像参数数据单元中获取的如下参数至少之一确定上述整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
在一个可选的实施例中，为了保证视频的质量，可以对上述的恢复图像进行多次整形处理(如两次整形处理)。下面对该实施例进行说明：从用于承载视频码流的传输流或媒体文件中的系统层图像参数数据单元(也可以是其他的系统层信息单元)中获取对恢复图像进行二次整形处理的整形参数，其中，该系统层图像参数数据单元包括与视频码流中接入单元AU对应的描述信息或辅助信息；利用获取的对恢复图像进行二次整形处理的整形参数对恢复图像进行二次整形处理。其中，需要说明的是，获取二次整形处理的整形参数的操作可以是在上述各实施例中获取恢复图像使用的整形参数的操作之前进行的。
在一个可选的实施例中，从用于承载上述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取对恢复图像进行二次整形处理的整形参数包括：根据从系统层图像参数数据单元中获取的如下参数至少之一确定对所述恢复图像进行二次整形处理的整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
下面结合一个可选的实施例对上述的图像和/或分片层数据单元是系统层图像参数数据单元时的相关操作进行说明：
可选实施例4：
本实施例是一种HDR视频的解码处理方法，用于对HDR视频进行解码处理的装置。所述装置的输入是包括HDR视频码流的传输流或媒体文件，输出是用于播放的恢复HDR视频。该实施例包括如下步骤：
步骤一，解析码流，从图像和/或分片层数据单元中获得整形参数。
解码处理设备解析输入码流，从所述传输流或媒体文件中提取HDR视频码流。解码处理设备解析HDR视频码流中各AU中包括的分片头信息中的PPS参数集索引序号，在已收到的PPS中，寻找PPS数据单元中索引序号与解析分片头信息获得的参数集索引序号值相同的PPS。
解码处理设备激活该PPS，解析该PPS数据单元中的编码比特。若解析该PPS的扩展部分获得整形参数(对应于上述的第一整形参数)，则将该整形参数设置为引用该PPS的分片使用的整形参数。反之，若解析该PPS扩展中未获得整形参数，则将引用该PPS的分片所使用的整形参数设置为空缺，或者设置为预设值。
解码处理设备解析传输流或媒体文件中的系统层信息单元(例如，系统层图像参数数据单元)，获得对恢复SDR图像进行整形处理的整形参数。这些系统层信息单元可以是与传输流或媒体文件中的HDR视频码流中AU相关的描述信息或辅助信息，例如描述子(Descriptor)。解码处理设备从系统层信息单元中获得如下参数的至少之一：是否执行整形操作的标识参数，动态范围整形参数，颜色空间整形参数，整形参数使用范围。其中，整形参数使用范围用于指示对恢复SDR视频使用的整形参数(候选整形参数可包括但不限于解析PPS获得的整形参数、解析系统层码流获得的整形参数、整形参数默认值或预设值，等)以及使用该整形参数图像范围(例如，从HDR视频码流中的某个指定AU起至另一个指定AU为止)。解码处理设备根据系统层信息单元中的参数，确定对解码AU获得的SDR 图像进行整形操作使用的整形参数。
可选择地，本实施例所述的解码处理设备也可以使用可选实施例1、可选实施例2、或可选实施例3中所述的解析HDR码流获得整形参数的方法。可选地，在使用前述实施例1、2或3确定整形参数后，可以再进一步使用本实施例所述的方法，获得系统层整形参数和整形操作的控制参数。其中，整形操作的控制参数可以指示解码处理设备对SDR恢复图像进行整形操作所选用的整形参数(例如，在解析HDR码流获得的整形参数和解析系统层码流获得的整形参数之间进行选择)，也可以指示整形操作的执行模式，例如，首先使用解析HDR码流获得的整形参数对SDR恢复图像进行整形处理，然后使用解析系统层码流获得的整形参数进行第二次整形处理。通过这种级联的整形处理，可以对SDR恢复图像进行精度逐渐提升的整形处理，提高恢复HDR图像的质量。
特别地，当解码处理设备从传输流或媒体文件中获得的“是否需要对该图像的恢复SDR图像进行整形处理”的标识信息指示“不需要对该图像的恢复SDR图像进行整形处理”，则解码处理设备可以跳过整形参数解析步骤和对该SDR图像的整形处理步骤。尽管如此，解码处理设备仍需要将解码图像转换成适合播放的视频数据格式。
步骤二，与可选实施例3中的步骤二相同，在此，不再赘述。
步骤三，与可选实施例3中的步骤三相同，在此，不再赘述。
与可选实施例3中所述的解码处理设备相比，本实施例中的解码处理设备通过解析传输流或媒体文件中的系统层码流，获得SDR恢复图像的整形参数。借助于系统层对传输流或媒体文件中包括的HDR视频码流的描述信息，解码处理设备更加灵活地选用整形参数对SDR图像进行整形处理。同时，可选择地，解码处理设备可以使用系统层的整形参数对SDR恢复图像进行“二次整形处理”，进一步提升恢复HDR视频的质量。
根据本发明实施例的另一方面，还提供了一种图像编码处理方法，图 2是根据本发明实施例的图像编码处理方法的流程图，如图2所示，该流程包括如下步骤：
步骤S202，确定用于将恢复图像转换为高动态范围视频HDR图像的所述恢复图像使用的整形参数，其中，该恢复图像是编码器执行整形操作前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，该恢复图像是解码待处理视频码流所获得的SDR图像；
步骤S204，将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中，其中，该图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
其中，上述实施例中的动作的执行者可以是编码处理设备，例如，编码器。
由上述实施例可知，可以将恢复图像使用的整形参数写入视频码流的图像和/或分片层数据单元中，可以有效提高图像的观看质量，进而提高视频的观看质量，并且，还可以降低整形参数的编码开销。通过上述步骤，解决了相关技术中存在的视频观看质量差，整形参数的编码开销大的问题，进而达到了提高视频观看质量，降低整形参数的编码开销的效果。
在一个可选的实施例中，确定用于将上述恢复图像转换为高动态范围视频HDR图像的恢复图像使用的整形参数包括：确定图像层整形参数和序列层整形参数，其中：该图像层整形参数包括最小化恢复图像与目标HDR图像之间误差的整形处理过程中使用的滤波器系数；该序列层整形参数包括根据目标HDR图像构成的目标HDR视频的动态范围和颜色空间、恢复图像构成的恢复视频的动态范围和颜色空间，确定的从恢复视频的动态范围扩展至目标HDR视频的动态范围的映射参数和/或从恢复视频的颜色空间到目标HDR视频的颜色空间的转换参数；根据上述图像层整形参数和序列层整形参数确定上述恢复图像使用的整形参数。
在一个可选的实施例中，上述目标HDR图像是输入编码器的原始HDR视频中对应于上述恢复图像的HDR图像。
根据上述图像层整形参数和序列层整形参数确定恢复图像使用的整形参数的确定方式有多种，下面对该确定方式分别进行举例说明：
在一个可选的实施例中，可以通过如下方式确定恢复图像使用的整形参数：分别利用图像层整形参数和序列层整形参数对恢复图像进行整形处理；确定对该恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。可选地，将确定的恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中包括：当上述恢复图像使用的整形参数为序列层整形参数时，对序列层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流的图像参数集PPS和/或PPS引用的参数集中；当上述恢复图像使用的整形参数为图像层整形参数时，对图像层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流中接入单元AU中包括的分片头信息中。下面结合一个可选实施例进行说明：
可选实施例5：
本实施例提供一种与可选实施例1所述的解码方法相对应的HDR视频的编码处理方法，用于对HDR视频进行编码处理的装置。该装置产生的码流可以被可选实施例1中的解码处理装置正确处理。本实施例中的装置输入的是原始HDR视频，输出的是HDR视频码流或包括HDR视频码流的传输流或媒体文件。该实施例包括如下步骤：
步骤一，对输入HDR视频进行整形处理，获得适用于H.265/HEVC Main 10Profile编码器的SDR输入视频。使用该编码器对输入视频进行编码，获得编码器本地恢复SDR视频。
该步骤中的整形处理过程可以应用于HDR视频序列中的图像，降低 HDR图像的动态范围，同时，根据应用设置，选择执行对HDR图像颜色空间的转换操作。可选地，当接收端需要解码恢复的SDR视频与原HDR视频具有相同的颜色空间时，则不执行颜色空间转换操作；反之，执行颜色空间转换操作。这里，所述对输入HDR视频的整形处理可以使用前述国际标准组织测试模型中的现有方法。该整形过程输出的目标SDR视频的动态范围和颜色空间的参数可根据实际应用的需求进行设置。
步骤二，计算将编码器恢复SDR图像转换为HDR图像的整形过程的整形参数。
对于编码器本地解码恢复的SDR视频图像，以对应的原始输入HDR图像为参考，确定对该SDR图像进行整形操作的整形参数。所述整形操作包括增大SDR图像的动态范围，同时，根据应用设置，选择执行对SDR图像颜色空间的转换操作。可选地，当接收端需要的HDR视频与解码恢复的SDR视频具有相同的颜色空间时，则不执行颜色空间转换操作；反之，执行颜色空间转换操作。
通常情况下，HDR图像的动态范围远大于SDR图像，同时，HDR图像使用在色域图上覆盖更大区域的颜色空间。因此，在整形过程中，需要对SDR图像的动态范围和颜色空间进行“扩展”。一种方法是，使用自适应滤波的方法，计算能够最小化SDR图像经整形处理后图像与原HDR输入图像之间误差的整形处理过程中使用的滤波器系数，并将所述系数作为该整形处理过程的整形参数(即“图像层整形参数”)。由于在确定图像层整形参数的过程中，使用了编码器本地解码恢复的SDR图像，因此，所确定的图像层整形参数能够对该SDR恢复图像中的有损压缩失真进行补偿。
另一种确定整形参数的方法是根据原始输入HDR视频的动态范围和颜色空间、本地解码恢复SDR视频的动态范围和颜色空间，计算从SDR视频动态范围扩展至HDR视频动态范围的映射参数，计算从SDR视频的颜色空间到HDR视频颜色空间的转换参数，并将映射参数和转换参数作 为整形处理过程中的整形参数(即“序列层整形参数”)。
可选地，在动态范围的转换过程中，首先确定SDR视频序列和原始HDR序列的平均动态范围，根据不同动态范围下，视频中像素采样点取值与对应光强之间的曲线，计算将SDR视频动态范围内像素采样点取值映射到HDR视频动态范围内的对应关系曲线，并将曲线参数作为映射参数。颜色空间的转换过程中，由于SDR视频的颜色空间在色域图上覆盖区域小于HDR视频的颜色空间，因此，一种简单的方法是直接将SDR视频颜色空间中的颜色点对应取值转换成HDR视频颜色空间中相同颜色点对应的取值，将该转换过程中使用的计算参数作为转换参数。另外一种颜色空间转换方法是沿着SDR颜色空间中同色度线，将SDR视频颜色空间中的点扩展映射至HDR视频颜色空间同色度线上的颜色点，将映射曲线对应的参数作为转换参数。这种方法可以将原SDR视频颜色空间中的颜色点扩展至SDR视频颜色空间覆盖色域外的HDR视频颜色空间覆盖的色域中，提高了HDR视频的色彩饱和度。
在对HDR视频编码过程中，处理设备可首先确定“序列层整形参数”。处理设备可以对输入HDR视频和编码器恢复SDR视频进行分析，确定视频的动态范围和颜色空间；处理设备也可以根据设置参数直接确定HDR视频和SDR视频的动态范围和颜色空间，例如，随HDR视频一起输入的配置参数中用于指示输入HDR视频动态范围和颜色空间的参数，步骤一中使用的用于指示HDR视频转换为目标SDR视频的动态范围和颜色空间的参数。
特别地，编码处理设备可以判断是否需要对编码器恢复SDR图像进行整形处理，并为图像编码是否需要对该图像的恢复SDR图像进行整形处理的标识信息。编码处理设备可以使用的一种判断方法是，编码处理设备检测恢复SDR图像与原始输入HDR图像之间动态范围的差异，当二者动态范围相同、或SDR图像动态范围外对应的输入HDR图像中的像素点较少、或按照选定的HDR视频质量评价准则判断SDR图像动态范围外对应的输入HDR图像中的像素点对HDR恢复视频观看质量影响可忽略时， 则不进行动态范围的整形操作。同样地，编码处理设备检测到原始输入HDR图像中像素采样值对应的色彩均位于SDR图像的颜色空间覆盖的色域内、或者SDR图像颜色空间外对应的输入HDR图像中的像素点较少、或按照选定的HDR视频质量评价准则判断SDR图像颜色空间外对应的输入HDR图像中的像素点对HDR恢复视频观看质量影响可忽略时，则不进行颜色空间的整形操作。其中，所述HDR视频质量评价准则可采用标准组织测试模型和参考软件中已有的、评价HDR视频质量的误差准则。当编码处理设备判断不需要对恢复SDR视频进行整形操作时，则为图像编码“不需要对该图像的恢复SDR图像进行整形处理”的标识信息。编码处理设备不需要执行步骤二及其后续步骤三和步骤四。
步骤三，选择将编码器恢复SDR图像转换为HDR图像的整形过程的整形参数。
编码处理设备从序列层整形参数和图像层整形参数中选择用于编码器恢复SDR图像的整形参数。一种方法是比较分别使用序列层整形参数和图像层整形参数对恢复SDR视频进行整形处理所得HDR视频与原始HDR视频之间的误差，选择误差较低者作为恢复SDR图像的整形参数。这里，计算误差可以使用传统的平均误差准则，如绝对误差和；也可以使用标准组织测试模型和参考软件中已有的、评价HDR视频质量的误差准则。
步骤四，对整形参数进行编码，将编码比特写入视频码流中图像和/或分片层数据单元。
编码处理设备对序列层整形参数进行编码，将编码比特写入PPS中，并且对整个HDR视频编码序列，不重新计算新的序列层整形参数和生成包括新整形参数的PPS。当恢复SDR图像使用序列层整形参数时，不对图像层整形参数进行编码；反之，当恢复SDR图像使用图像层整形参数时，编码图像层整形参数，并将编码比特写入在该图像包括的分片的头信息中。
可选地，编码处理设备在生成的PPS中，可以将用于指示使用分片头信息扩展的标志位slice_segment_header_extension_present_flag置为1。当使用序列层整形参数时，编码处理设备在引用该PPS的分片的分片头信息中，可以将用于指示分片头信息扩展部分比特位数量的参数置为0。当使用图像层参数时，编码处理设备编码图像层整形参数，计算图像层整形参数编码所需比特数量，并将其值设置为分片头信息扩展部分比特位数量的取值，编码处理设备将该取值写入分片头信息扩展部分码流，然后将图像层整形参数的编码比特写入分片头信息扩展部分码流。
需要进一步说明的是，上述编码处理设备的执行流程是一种可能的实施方式，对其可进行进一步的优化。例如，为降低编码处理设备的计算复杂度，可以在编码前根据输入HDR视频和配置的SDR视频参数计算序列层整形参数，并且仅对关键帧图像在步骤302中计算图像层整形参数，对其他图像直接使用序列层整形参数，其中可选择作为关键帧的图像包括：编码视频序列中场景切换图像、随机接入图像、时域标识序号(Temporal Identifier(ID))取值较小的图像等。另一方面，为追求最佳的HDR恢复视频的质量，编码处理设备可以为尽可能多的SDR图像选择使用图像层整形参数，或者为每个SDR图像都选择使用图像层整形参数。当编码处理设备配置为每个SDR图像都选择使用图像层整形参数的模式时，在PPS中不编码序列层整形参数，在图像的分片头信息扩展中编码图像层整形参数，同时，为进一步提升恢复HDR视频的质量，编码处理设备可以为同一个图像中的不同分片分别计算图像层整形参数并在分片头信息扩展中进行编码。编码处理设备可以根据应用需求、设备本身可用计算资源情况，设置编码控制参数，在上述整形参数计算和编码方法中进行选择。例如，对于视频存储、非实时流媒体应用，编码处理设备通常配置有充足的计算资源，可以选用为每个图像都是用图像层整形参数的编码模式；对于实时视频通信或编码处理设备计算资源有限的情况下，可选用对关键帧图像使用图像层整形参数、对非关键帧使用序列层整形参数。
使用上述编码处理方法，在提高整形过程的图像自适应性的同时，避 免频繁生成新的PPS以编码整形参数所带来的重复编码PPS中其他编码控制参数所带来的额外编码开销。
在一个可选的实施例中，根据上述图像层整形参数和序列层整形参数确定恢复图像使用的整形参数可以包括：从图像层整形参数、序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定恢复图像使用的整形参数。可选地，从上述图像层整形参数、序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定上述恢复图像使用的整形参数包括：分别利用图像层整形参数、序列层整形参数和前一个编码图像所使用的整形参数对恢复图像进行整形处理；确定对上述恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。
在一个可选的实施例中，将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中包括：当恢复图像使用的整形参数为序列层整形参数时，对该序列层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流的图像参数集PPS和/或PPS引用的参数集中；当上述恢复图像使用的整形参数为图像层整形参数或前一个编码图像所使用的整形参数时，对上述图像层整形参数或前一个编码图像所使用的整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流中接入单元AU中包括的参数数据单元中；或者，当上述恢复图像使用的整形参数为所述图像层整形参数时，对图像层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流中接入单元AU中包括的参数数据单元中；当上述恢复图像使用的整形参数为前一个编码图像所使用的整形参数时，在上述当前视频编码图像所在视频码流或待处理视频码流中接入单元AU中编码第四标识信息，其中，该第四标识信息用于指示整形参数为前一个编码图像所使用的整形参数；其中，该参数数据单元为包括在上述AU中的独立于 分片码流数据单元的数据单元。可选地，上述实施例中的方法还包括：按照如下方式至少之一编码用于指示整形参数的标识信息：在视频参数集VPS中编码用于指示所述整形参数的第一标识信息的方式、在序列参数集SPS中编码用于指示所述整形参数的第二标识信息的方式。下面结合可选实施例进行说明：
可选实施例6：
本实施例提供一种与可选实施例2中的解码方法相对应的HDR视频的编码处理方法，用于对HDR视频进行编码处理的装置。该装置产生的码流可以被可选实施例2中的解码处理装置正确处理。本实施例中的装置的输入是原始HDR视频，输出是HDR视频码流或包括HDR视频码流的传输流或媒体文件。该实施例包括如下步骤：
步骤一，与可选实施例5中的步骤一相同，在此，不再赘述。
步骤二，与可选实施例5中的步骤二相同，在此，不再赘述。
步骤三，选择将编码器恢复SDR图像转换为HDR图像的整形过程的整形参数。
编码处理设备从序列层整形参数、图像层整形参数以及按照编码顺序前一个编码图像所使用的整形参数中选择用于编码器恢复SDR图像的整形参数。一种方法是比较分别使用各候选整形参数对恢复SDR视频进行整形处理所得HDR视频与原始HDR视频之间的误差，选择误差较低者作为恢复SDR图像的整形参数。这里，计算误差可以使用传统的平均误差准则，如绝对误差和；也可以使用标准组织测试模型和参考软件中已有的、评价HDR视频质量的误差准则。
步骤四，对整形参数进行编码，将编码比特写入视频码流中图像和/或分片层数据单元。
编码处理设备对序列层整形参数进行编码，将编码比特写入PPS中，并且对整个HDR视频编码序列，不重新计算新的序列层整形参数和生成包括新整形参数的PPS。
对应于可选实施例2中的解码处理设备，当恢复SDR图像使用序列层整形参数时，不对步骤三中所述的另两组候选整形参数进行编码；反之，当恢复SDR图像不使用序列层整形参数时，编码处理设备产生参数数据单元，对所使用的非序列层整形参数进行编码，将编码比特写入参数数据单元，将参数数据单元写入编码图像所在AU中。这里，该参数数据单元是包括在AU中的独立于分片码流数据单元的数据单元，例如，SEI数据单元，用户定义的数据单元，等。
对应于可选实施例2中的解码处理设备，可选择地，当编码处理设备使用非序列层整形参数对SDR恢复视频进行整形处理时，编码处理设备可配置为直接使用已编码AU的整形参数的模式。可选地，如果编码处理设备使用图像层整形参数，则编码处理设备产生参数数据单元，对图像层整形参数进行编码，将编码比特写入参数数据单元，将参数数据单元写入编码图像所在AU中；反之，如果编码处理设备使用按编码顺序前一个AU使用的整形参数对当前SDR恢复图像进行整形处理，则编码处理设备不产生参数数据单元，编码处理设备在分片头信息中编码“使用哪一组候选整形参数”的标识信息(对应于上述的第四标识信息)用于指示对SDR恢复视频进行整形处理时采用的是PPS中的整形参数还是按编码顺序前一个AU使用的整形参数。与可选实施例2中所述解码处理设备对应地，这里，对编码处理设备的配置方法可以是：编码处理设备默认采用上述方法；或者，编码处理设备在VPS和/或SPS编码是否使用上述方法的标识信息(其中，编码在VPS中的标识信息对应于上述的第一标识信息，编码在SPS中的标识信息对应于上述的第二标识信息)，用于指示是否使用已解码AU中的参数数据单元包括的整形参数。
需要说明的是，可选实施例5中的编码处理装置相类似的优化方法也可以应用于本实施例所述的编码处理装置中。
与可选实施例5所述的编码处理设备相比，本实施例中的编码处理装置在包括在AU中的参数数据单元中编码整形参数，在图像包括较多分片的情况下(例如要求分片编码比特适配网络最大传输单元大小的情况)， 降低分片头信息中整形参数的编码开销。
在一个可选的实施例中，根据图像层整形参数和序列层整形参数确定恢复图像使用的整形参数包括：从图像层整形参数、序列层整形参数以及已使用的除恢复图像对应的接入单元AU中包括的分片头信息中的图像参数集PPS外图像和/或分片层参数集中编码的一个或多个第一其他整形参数中确定所述恢复图像使用的整形参数。可选地，从上述图像层整形参数、序列层整形参数以及第一其他整形参数中确定上述恢复图像使用的整形参数包括：分别利用上述图像层整形参数、序列层整形参数和第一其他整形参数对恢复图像进行整形处理；确定对恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。
在一个可选的实施例中，将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中包括：当上述恢复图像使用的整形参数为序列层整形参数时，在分片头信息中，编码标识不使用PPS外图像和/或分片层参数集的信息；当恢复图像使用的整形参数为第一其他整形参数时，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码第一其他整形参数所在参数集的参数集索引序号；当恢复图像使用的整形参数为图像层整形参数时，对图像层整形参数进行编码并将编码比特写入新建的参数集数据单元中，其中，该新建的参数集数据单元配置有参数集索引序号，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码上述参数集索引序号。下面结合一个可选实施例进行说明：
可选实施例7：
本实施例提供一种与可选实施例3所述的解码方法相对应的HDR视频的编码处理方法，用于对HDR视频进行编码处理的装置。本实施例中的装置产生的码流可以被可选实施例3中的解码处理装置正确处理。本实 施例中的装置的输入是原始HDR视频，输出是HDR视频码流或包括HDR视频码流的传输流或媒体文件。该实施例包括如下步骤：
步骤一，与可选实施例6中的步骤一相同，在此，不再赘述。
步骤二，与可选实施例6中的步骤二相同，在此，不再赘述。
步骤三，选择将编码器恢复SDR图像转换为HDR图像的整形过程的整形参数。
编码处理设备从序列层整形参数、图像层整形参数以及已使用除PPS外图像/分片层参数集(同上述的图像和/或分片层参数集)编码的一个或多个整形参数(对应于上述的第一其他整形参数)中选择用于编码器恢复SDR图像的整形参数。一种方法是比较分别使用各候选整形参数对恢复SDR视频进行整形处理所得HDR视频与原始HDR视频之间的误差，选择误差较低者作为恢复SDR图像的整形参数。这里，计算误差可以使用传统的平均误差准则，如绝对误差和；也可以使用标准组织测试模型和参考软件中已有的、评价HDR视频质量的误差准则。
步骤四，对整形参数进行编码，将编码比特写入视频码流中图像和/或分片层数据单元。
编码处理设备对序列层整形参数进行编码，将编码比特写入PPS中，并且对整个HDR视频编码序列，不重新计算新的序列层整形参数和生成包括新整形参数的PPS。
对应于可选实施例3中所述的解码处理设备，当恢复SDR图像使用序列层整形参数、或者在除PPS外图像/分片层参数集中已编码的整形参数时，不对步骤三中的图像层候选整形参数进行编码；反之，当恢复SDR图像使用图像层整形参数时，编码处理设备产生新的参数集数据单元为为其分配参数集索引序号，对所使用的图像层整形参数进行编码，将编码比特写入所述参数集数据单元。在上述过程中，当编码处理设备使用序列层整形参数时，编码处理设备在分片头信息中编码“不使用除PPS外其他图像/分片层参数集”的标识信息；反之，编码处理设备在分片头信息中编码 “使用除PPS外其他图像/分片层参数集”的标识信息，然后编码所使用的整形参数所在的图像/分片层索引序号。
需要说明的是，可选实施例5中的编码处理装置相类似的优化方法也可以应用于本实施例所述的编码处理装置中。
与可选实施例6中的编码处理设备相比，本实施例中的编码处理装置将整形参数均在参数集中进行编码，可更加灵活地选用已编码的整形参数，提高了信息利用率，降低额外编码开销。同时，借助参数集的特性，编码处理装置对除PPS外的图像/分片层参数集选用AU内传输和AU外传输两种方式，在兼顾传输效率的同时，提高了整形参数传输的可靠性。例如，编码处理装置所在的发送端，在收到包括有解码处理装置的接收端反馈的参数集丢失时，可根据丢失参数集的索引序号，采用重传相同内容参数集的方式进行差错恢复。
在一个可选的实施例中，根据上述图像层整形参数和序列层整形参数确定恢复图像使用的整形参数包括：从图像层整形参数、序列层整形参数以及在传输流或媒体文件的系统层中编码的一个或多个第二其他整形参数中确定上述恢复图像使用的整形参数。可选地，从上述图像层整形参数、序列层整形参数以及第二其他整形参数中确定恢复图像使用的整形参数包括：分别利用图像层整形参数、序列层整形参数和第二其他整形参数对恢复图像进行整形处理；确定对上述恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。
在一个可选的实施例中，将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中包括：当上述恢复图像使用的整形参数为序列层整形参数时，在系统层编码第五标识信息，其中，该第五标识信息用于指示恢复图像使用的整形参数不使用上述系统层中已编码的整形参数；当恢复图像使用的整 形参数为图像层整形参数时，在上述系统层编码图像层整形参数；当上述恢复图像使用的整形参数为第二其他整形参数时，在系统层编码第二其他整形参数，或者，在系统层编码第六标识信息，其中，所述第六标识信息用于指示所述恢复图像使用的整形参数使用所述系统层中已编码的整形参数。
在一个可选的实施例中，上述系统层中编码用于对恢复图像进行二次整形的整形参数和用于指示二次整形操作执行方式的控制信息。下面结合可选实施例进行说明：
可选实施例8：
本实施例提供一种与可选实施例4中的解码方法相对应的HDR视频的编码处理方法，用于对HDR视频进行编码处理的装置。该实施例中的装置产生的码流可以被可选实施例4中的解码处理装置正确处理。该实施例中的装置的输入是原始HDR视频，输出是包括HDR视频码流的传输流或媒体文件。该实施例包括如下步骤：
步骤一，与可选实施例7中的步骤一相同，在此，不再赘述。
步骤二，与可选实施例7中的步骤二相同，在此，不再赘述。
步骤三，选择将编码器恢复SDR图像转换为HDR图像的整形过程的整形参数。
编码处理设备从序列层整形参数、图像层整形参数以及在传输流或媒体文件的系统层中编码的一个或多个整形参数中选择用于编码器恢复SDR图像的整形参数。一种方法是比较分别使用各候选整形参数对恢复SDR视频进行整形处理所得HDR视频与原始HDR视频之间的误差，选择误差较低者作为恢复SDR图像的整形参数。这里，计算误差可以使用传统的平均误差准则，如绝对误差和；也可以使用标准组织测试模型和参考软件中已有的、评价HDR视频质量的误差准则。
步骤四，对整形参数进行编码，将编码比特写入视频码流中图像和/或分片层数据单元。
编码处理设备对序列层整形参数进行编码，将编码比特写入PPS中，并且对整个HDR视频编码序列，不重新计算新的序列层整形参数和生成包括新整形参数的PPS。
对应于可选实施例4中的解码处理设备，当恢复SDR图像使用序列层整形参数时，可选择地，编码处理设备不在系统层中编码图像层整形参数，同时在系统层编码标识信息(对应于上述的第五标识信息)指示当前AU不使用系统层中已编码的整形参数；可选择地，编码处理设备可以选择对SDR恢复图像使用两次整形操作的处理方法，在系统层码流中编码对使用序列层整形参数处理后的图像进行第二次整形操作的整形参数。编码处理设备在系统层编码用于指示整形操作执行方式的控制信息。
对应于可选实施例4中的解码处理设备，当恢复SDR图像不使用序列层整形参数时，可选择地，编码处理设备在系统层编码用于SDR图像整形处理的整形参数，所编码的整形参数可以是图像层整形参数，也可以是用于指示使用系统层已编码整形参数的标识信息(对应于上述的第六标识信息)；可选择地，编码处理设备可以选择对SDR恢复图像使用两次整形操作的处理方法，在HDR视频码流中编码图像层整形参数(例如使用前述可选实施例5、可选实施例6、或可选实施例7中的方法)，然后进一步计算对使用图像层整形参数或系统层已编码整形参数对SDR恢复图像进行整形处理后的图像再次进行整形操作的整形参数，在系统层编码该整形参数，同时，编码处理设备在系统层编码用于指示整形操作执行方式的控制信息。
需要说明的是，可选实施例5中的编码处理装置相类似的优化方法也可以应用于本实施例中的编码处理装置中。
与可选实施例7中的编码处理设备相比，本实施例中的编码处理设备在传输流或媒体文件中编码整形参数，并且编码整形操作执行方式的控制信息，编码处理设备能够更加灵活地对SDR图像进行整形处理，同时更加有效地利用系统层已编码整形参数。同时，可选择地，编码处理设备可 以选择对SDR恢复图像进行级联整形的操作方式，并在系统层编码对SDR恢复图像进行“二次整形处理”的整形参数，进一步提升SDR恢复图像的整形处理精度，提高恢复HDR视频的质量。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种图像解码处理装置和图像编码处理装置，该装置用于实现上述实施例及可选实施方式，已经进行过说明的不再赘述。如以下所使用的，术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。
图3是根据本发明实施例的图像解码处理装置的结构框图，如图3所示，该装置包括第一确定模块32和处理模块34，下面对该装置进行说明。
第一确定模块32，设置为解析视频码流，从视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数；处理模块34，连接至上述确定模块32，设置为使用上述恢复图像使用的整形参数对恢复图像进行整形处理；其中，该恢复图像是在执行整形处理前，解码视频码流获得的图像；该图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
图4是根据本发明实施例的图像解码处理装置的可选结构框图，如图4所示，该装置除包括图3所示的所有模块外，还包括第三确定模块42和获取模块44，下面对该装置进行说明。
第三确定模块42，设置为在从视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数之前，确定视频码流中AU中包括的分片头信息中的PPS参数集索引序号；获取模块44，连接至上述第三确定模块42，和第一确定模块32，设置为根据通过上述参数集索引序号引用的PPS获取恢复图像使用的整形参数。
在一个可选的实施例中，获取模块44可以通过如下方式根据通过参数集索引序号引用的PPS获取恢复图像使用的整形参数：判断PPS的扩展部分和/或PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的上述恢复图像使用的整形参数为第一整形参数；和/或，在判断结果为否时，确定获取的上述恢复图像使用的整形参数为预设值或空缺。
在一个可选的实施例中，上述第一确定模块32可以通过如下方式从视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数：解析上述分片头信息的扩展部分，获得第二整形参数；使用该第二整形参数，更新或重新确定恢复图像使用的整形参数。
在一个可选的实施例中，上述第一确定模块32还可以通过如下方式从所频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数：解析上述视频码流中AU中包括的参数数据单元，获取第三整形参数，其中，该参数数据单元为包括在AU中的独立于分片码流数据单元的数据单元；使用第三整形参数更新或重新确定上述恢复图像使用的整形参数；或者，根据预先配置的整形参数确定方式确定恢复图像使用的整形参数为第三整形参数。
在一个可选的实施例中，可以通过如下方式使用第三整形参数更新或重新确定恢复图像使用的整形参数：确定视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过该参数集索引序号引用的PPS获取恢复图像使用的整形参数；使用上述第三整形参数更新或重新确定获取的恢复图像使用的整形参数。
在一个可选的实施例中，可以通过如下方式根据通过参数集索引序号引用的PPS获取上述恢复图像使用的整形参数：判断PPS的扩展部分和/或PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的恢复图像使用的整形参数为第一整形参数；和/或，在判断结果为否时，确定获取的恢复图像使用的整形参数为预设值或空缺。
在一个可选的实施例中，上述第三整形参数包括将对AU的前一个AU中包括的参数数据单元进行解析后获得的第四整形参数。
在一个可选的实施例中，上述预先配置的整形参数确定方式包括以下至少之一：默认的确定方式、利用解析视频参数集VPS获得的用于指示整形参数的第一标识信息进行确定的方式、利用解析序列参数集SPS获得的用于指示整形参数的第二标识信息进行确定的方式。
在一个可选的实施例中，上述第一确定模块32还可以通过如下方式从视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数：解析AU中包括的分片头信息，获取第三标识信息，其中，该第三标识信息用于指示恢复图像使用的整形参数是否根据除PPS外其他图像和/或分片层参数集进行确定；当第三标识信息指示恢复图像使用的整形参数根据除PPS外其他图像和/或分片层参数集进行确定时，解析AU中包括的分片头信息，获取上述其他图像和/或分片层参数集的索引序号；激活索引序号与其他图像和/或分片层参数集的索引序号相同的参数集，获取第五整形参数；使用该第五整形参数，更新或重新确定获取的恢复图像使用的整形参数。
在一个可选的实施例中，上述第一确定模块32还可以通过如下方式 解析视频码流，从上述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数：从用于承载上述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取第六整形参数，使用该第六整形参数更新或重新确定恢复图像使用的整形参数；或者，确定恢复图像使用的整形参数为该第六整形参数。其中，上述系统层图像参数数据单元包括与视频码流中接入单元AU对应的描述信息或辅助信息。
在一个可选的实施例中，上述使用第六整形参数更新或重新确定恢复图像使用的整形参数，包括：确定视频码流中AU中包括的分片头信息中的PPS参数集索引序号；根据通过该参数集索引序号引用的PPS获取恢复图像使用的整形参数；使用上述第六整形参数更新或重新确定获取的恢复图像使用的整形参数。
在一个可选的实施例中，上述根据通过参数集索引序号引用的PPS获取恢复图像使用的整形参数，包括：判断PPS的扩展部分和/或PPS引用的参数集中是否携带有第一整形参数；当判断结果为是时，确定获取的恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的恢复图像使用的整形参数为预设值或空缺。
在一个可选的实施例中，可以通过如下方式从用于承载上述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取上述整形参数：根据从上述系统层图像参数数据单元中获取的如下参数至少之一确定整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
在一个可选的实施例中，上述的图像解码处理装置还可以包括二次整形参数获取模块和二次整形处理模块，其中，该二次整形参数获取模块和二次整形处理模块与上述的图像解码处理装置中各模块的连接关系可以不受限，即，该二次整形参数获取模块和二次整形处理模块中执行的动作与上述的图像解码处理装置中包括的模块中执行的动作的先后顺序可以 是不受限的。下面对该二次整形参数获取模块和二次整形处理模块进行说明：
二次整形参数获取模块，设置为从用于承载视频码流的传输流或媒体文件中的系统层图像参数数据单元(也可以是其他的系统层信息单元)中获取对恢复图像进行二次整形处理的整形参数，其中，该系统层信息单元包括与视频码流中接入单元AU对应的描述信息或辅助信息；二次整形处理模块，连接至上述二次整形参数获取模块，设置为利用获取的对恢复图像进行二次整形处理的整形参数对恢复图像进行二次整形处理。
在一个可选的实施例中，上述二次整形参数获取模块，可以根据如下方式从用于承载视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取对恢复图像进行二次整形处理的整形参数：根据从系统层图像参数数据单元中获取的如下参数至少之一确定对恢复图像进行二次整形处理的整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
图5是根据本发明实施例的图像编码处理装置的结构框图，如图5所示，该装置包括确定模块52和写入模块54，下面对该装置进行说明。
确定模块52，设置为确定用于将恢复图像转换为高动态范围视频HDR图像的恢复图像使用的整形参数，其中，该恢复图像是编码器执行整形操作前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，该恢复图像是解码待处理视频码流所获得的SDR图像；写入模块54，连接至上述确定模块52，设置为将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中，其中，该图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，上述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
在一个可选的实施例中，上述的确定模块52可以通过如下方式确定用于将恢复图像转换为高动态范围视频HDR图像的恢复图像使用的整形参数：确定图像层整形参数和序列层整形参数，其中：该图像层整形参数包括最小化所述恢复图像与目标HDR图像之间误差的整形处理过程中使用的滤波器系数；序列层整形参数包括根据目标HDR图像构成的目标HDR视频的动态范围和颜色空间、恢复图像构成的恢复视频的动态范围和颜色空间，确定的从恢复视频的动态范围扩展至所述目标HDR视频的动态范围的映射参数和/或从恢复视频的颜色空间到目标HDR视频的颜色空间的转换参数；根据上述图像层整形参数和序列层整形参数确定恢复图像使用的整形参数。
在一个可选的实施例中，上述目标HDR图像是输入编码器的原始HDR视频中对应于上述恢复图像的HDR图像。
在一个可选的实施例中，可以通过如下方式根据图像层整形参数和序列层整形参数确定恢复图像使用的整形参数：分别利用上述图像层整形参数和序列层整形参数对恢复图像进行整形处理；确定对该恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。
在一个可选的实施例中，上述的写入模块54可以通过如下方式将确定的恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中：当恢复图像使用的整形参数为序列层整形参数时，对该序列层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流的图像参数集PPS和/或PPS引用的参数集中；当上述恢复图像使用的整形参数为图像层整形参数时，对图像层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或上述待处理视频码流中接入单元AU中包括的分片头信息中。
在一个可选的实施例中，可以通过如下方式根据上述图像层整形参数 和序列层整形参数确定恢复图像使用的整形参数：从上述图像层整形参数、序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定上述恢复图像使用的整形参数。
在一个可选的实施例中，可以通过如下方式从图像层整形参数、序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定上述恢复图像使用的整形参数：分别利用图像层整形参数、序列层整形参数和前一个编码图像所使用的整形参数对恢复图像进行整形处理；确定对上述恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。
在一个可选的实施例中，上述的写入模块54可以通过如下方式将确定的恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中：当上述恢复图像使用的整形参数为序列层整形参数时，对序列层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流的图像参数集PPS和/或PPS引用的参数集中；当上述恢复图像使用的整形参数为图像层整形参数或前一个编码图像所使用的整形参数时，对上述图像层整形参数或前一个编码图像所使用的整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或待处理视频码流中接入单元AU中包括的参数数据单元中；或者，当上述恢复图像使用的整形参数为图像层整形参数时，对图像层整形参数进行编码，并将编码后的编码比特写入当前视频编码图像所在视频码流或上述待处理视频码流中接入单元AU中包括的参数数据单元中；当上述恢复图像使用的整形参数为前一个编码图像所使用的整形参数时，在当前视频编码图像所在视频码流或待处理视频码流中接入单元AU中编码第四标识信息，其中，该第四标识信息用于指示整形参数为前一个编码图像所使用的整形参数；其中，该参数数据单元为包括在AU中的独立于分片码流数据单元的数据单元。
在一个可选的实施例中，上述的图像编码处理装置处理包括上述的模块外，还可以包括编码模块，该编码模块与图像编码处理装置中的上述模 块的连接顺序可以是不受限制的，即该编码模块中执行的动作与图像编码处理装置中的上述模块中执行的动作的先后顺序是不受限的。下面对该编码模块进行说明：
编码模块，设置为按照如下方式至少之一编码用于指示整形参数的标识信息：在视频参数集VPS中编码用于指示整形参数的第一标识信息的方式、在序列参数集SPS中编码用于指示整形参数的第二标识信息的方式。
在一个可选的实施例中，可以通过如下方式根据上述图像层整形参数和序列层整形参数确定恢复图像使用的整形参数：从上述图像层整形参数、序列层整形参数以及已使用的除上述恢复图像对应的接入单元AU中包括的分片头信息中的图像参数集PPS外图像和/或分片层参数集中编码的一个或多个第一其他整形参数中确定上述恢复图像使用的整形参数。
在一个可选的实施例中，可以通过如下方式从图像层整形参数、序列层整形参数以及第一其他整形参数中确定上述恢复图像使用的整形参数：分别利用图像层整形参数、序列层整形参数和第一其他整形参数对恢复图像进行整形处理；确定对该恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为上述恢复图像使用的整形参数。
在一个可选的实施例中，上述的写入模块54可以通过如下方式将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中包括：当上述恢复图像使用的整形参数为序列层整形参数时，在分片头信息中，编码标识不使用PPS外图像和/或分片层参数集的信息；当上述恢复图像使用的整形参数为第一其他整形参数时，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码上述第一其他整形参数所在参数集的参数集索引序号；当上述恢复图像使用的整形参数为图像层整形参数时，对上述图像层整形参数进行编码并将编码比特写入新建的参数集数据单元中，其中，该新建的参数集数据单元配置有参数集索引序号，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码上述参数集索引序 号。
在一个可选的实施例中，可以通过如下方式根据上述图像层整形参数和序列层整形参数确定恢复图像使用的整形参数：从图像层整形参数、序列层整形参数以及在传输流或媒体文件的系统层中编码的一个或多个第二其他整形参数中确定上述恢复图像使用的整形参数。
在一个可选的实施例中，可以通过如下方式从上述图像层整形参数、序列层整形参数以及第二其他整形参数中确定恢复图像使用的整形参数：分别利用上述图像层整形参数、序列层整形参数和第二其他整形参数对恢复图像进行整形处理；确定对上述恢复图像进行整形处理后得到的HDR图像与目标HDR图像之间的误差最小的参数作为恢复图像使用的整形参数。
在一个可选的实施例中，上述的写入模块54可以通过如下方式将确定的恢复图像使用的整形参数写入上述当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中：当上述恢复图像使用的整形参数为序列层整形参数时，在系统层编码第五标识信息，其中，上述第五标识信息用于指示恢复图像使用的整形参数不使用上述系统层中已编码的整形参数；当上述恢复图像使用的整形参数为图像层整形参数时，在上述系统层编码图像层整形参数；当上述恢复图像使用的整形参数为第二其他整形参数时，在上述系统层编码第二其他整形参数，或者，在上述系统层编码第六标识信息，其中，该第六标识信息用于指示恢复图像使用的整形参数使用上述系统层中已编码的整形参数。
在一个可选的实施例中，上述系统层中还可以编码有用于对恢复图像进行二次整形的整形参数和用于指示二次整形操作执行方式的控制信息。
图6是根据本发明实施例的解码器的结构框图，如图6所示，该解码器62包括上述任一项的图像解码处理装置64。
图7是根据本发明实施例的编码器的结构框图，如图7所示，该编码器72包括上述任一项的图像编码处理装置74。
在本发明实施例中还提供了一种电子设备，该电子设备包括解码处理设备(如，上述的解码器62)和/或编码处理设备(如，上述的编码器72)。
其中，上述的解码处理设备可以使用例如前述的可选实施例1、可选实施例2、可选实施例3、可选实施例4中任何一种解码处理设备的实施方法，处理HDR视频码流、或包括HDR视频码流的传输流或媒体文件，产生适合播放的HDR恢复视频。
上述编码处理设备可以使用例如前述对应的可选实施例5、可选实施例6、可选实施例7、可选实施例8中任何一种编码处理设备的实施方法，对HDR视频(即，输入的原始HDR视频)进行处理，产生HDR视频码流、或包括HDR视频码流的传输流或媒体文件。
本实施例中的电子设备可以是视频通信应用中相关码流生成设备和接收播放设备，例如，手机、计算机、服务器、机顶盒、便携式移动终端、数字摄像机，电视广播系统设备等。
需要说明的是，上述各个模块是可以通过软件或硬件来实现的，对于后者，可以通过以下方式实现，但不限于此：上述模块均位于同一处理器中；或者，上述模块分别位于多个处理器中。
本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以被设置为存储用于执行以下步骤的程序代码：
S11，解析视频码流，从该视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的整形参数确定恢复图像使用的整形参数；
S12，使用上述恢复图像使用的整形参数对恢复图像进行整形处理；其中，该恢复图像是在执行整形处理前，解码视频码流获得的图像；上述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，上述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
可选地，存储介质还被设置为存储用于执行以下步骤的程序代码：
S21，确定用于将恢复图像转换为高动态范围视频HDR图像的所述恢 复图像使用的整形参数，其中，该恢复图像是编码器执行整形操作前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，该恢复图像是解码待处理视频码流所获得的SDR图像；
S22，将确定的上述恢复图像使用的整形参数写入当前视频编码图像所在视频码流或待处理视频码流的图像和/或分片层数据单元中，其中，该图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(Read-Only Memory，简称为ROM)、随机存取存储器(Random Access Memory，简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
可选地，在本实施例中，处理器根据存储介质中已存储的程序代码执行上述各方法实施例中的步骤。
可选地，本实施例中的具体示例可以参考上述实施例及可选实施方式中所描述的示例，本实施例在此不再赘述。
显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的可选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精 神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
工业实用性
通过上述描述可知，本发明用于对恢复图像进行整形处理的整形参数是根据从视频码流的图像和/或分片层数据单元中获取的整形参数确定的，可以有效提高图像的观看质量，进而提高视频的观看质量，并且，还可以降低整形参数的编码开销。通过上述步骤，解决了相关技术中存在的视频观看质量差，整形参数的编码开销大的问题，进而达到了提高视频观看质量，降低整形参数的编码开销的效果。

Claims (36)

  1. 一种图像解码处理方法，包括：
    解析视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数；
    使用所述恢复图像使用的整形参数对所述恢复图像进行整形处理；
    其中，所述恢复图像是在执行整形处理前，解码所述视频码流获得的图像；所述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
  2. 根据权利要求1所述的方法，其中，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数之前，还包括：
    确定所述视频码流中AU中包括的分片头信息中PPS参数集索引序号；
    根据通过所述PPS参数集索引序号引用的PPS获取所述恢复图像使用的整形参数。
  3. 根据权利要求2所述的方法，其中，根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数包括：
    判断所述PPS的扩展部分和/或所述PPS引用的参数集中是否携带有第一整形参数；
    当判断结果为是时，确定获取的所述恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的所述恢复图像使用的整形参数为预设值或空缺。
  4. 根据权利要求3所述的方法，其中，从所述视频码流的所述 图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：
    解析所述分片头信息的扩展部分，获得第二整形参数；
    使用所述第二整形参数，更新或重新确定所述恢复图像使用的整形参数。
  5. 根据权利要求1所述的方法，其中，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：
    解析所述视频码流中AU中包括的参数数据单元，获取第三整形参数，其中，所述参数数据单元为包括在所述AU中的独立于分片码流数据单元的数据单元；
    使用所述第三整形参数更新或重新确定所述恢复图像使用的整形参数；或者，
    根据预先配置的整形参数确定方式确定所述恢复图像使用的整形参数为所述第三整形参数。
  6. 根据权利要求5所述的方法，其中，使用所述第三整形参数更新或重新确定所述恢复图像使用的整形参数包括：
    确定所述视频码流中AU中包括的分片头信息中的PPS参数集索引序号；
    根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数；
    使用所述第三整形参数更新或重新确定获取的所述恢复图像使用的整形参数。
  7. 根据权利要求6所述的方法，其中，根据通过所述参数集索引序号引用的所述PPS获取所述恢复图像使用的整形参数包括：
    判断所述PPS的扩展部分和/或所述PPS引用的参数集中是否携带有第一整形参数；
    当判断结果为是时，确定获取的所述恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的所述恢复图像使用的整形参数为预设值或空缺。
  8. 根据权利要求5所述的方法，其中，所述第三整形参数包括将对所述AU的前一个AU中包括的参数数据单元进行解析后获得的第四整形参数。
  9. 根据权利要求5所述的方法，其中，所述预先配置的整形参数确定方式包括以下至少之一：
    默认的确定方式、利用解析视频参数集VPS获得的用于指示整形参数的第一标识信息进行确定的方式、利用解析序列参数集SPS获得的用于指示整形参数的第二标识信息进行确定的方式。
  10. 根据权利要求3所述的方法，其中，从所述视频码流的所述图像和/或分片层数据单元中获取所述整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：
    解析所述AU中包括的所述分片头信息，获取第三标识信息，其中，所述第三标识信息用于指示所述恢复图像使用的整形参数是否根据除所述PPS外其他图像和/或分片层参数集进行确定；
    当所述第三标识信息指示所述恢复图像使用的整形参数根据除所述PPS外其他图像和/或分片层参数集进行确定时，解析所述AU中包括的所述分片头信息，获取所述其他图像和/或分片层参数集的索引序号；
    激活索引序号与所述其他图像和/或分片层参数集的索引序号相同的参数集，获取第五整形参数；
    使用所述第五整形参数，更新或重新确定获取的所述恢复图像使用的整形参数。
  11. 根据权利要求1所述的方法，其中，解析所述视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数包括：
    从用于承载所述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取第六整形参数；
    使用所述第六整形参数更新或重新确定所述恢复图像使用的整形参数；或者，确定所述恢复图像使用的整形参数为所述第六整形参数；
    其中，所述系统层图像参数数据单元包括与所述视频码流中接入单元AU对应的描述信息或辅助信息。
  12. 根据权利要求11所述的方法，其中，使用所述第六整形参数更新或重新确定所述恢复图像使用的整形参数包括：
    确定所述视频码流中AU中包括的分片头信息中的PPS参数集索引序号；
    根据通过所述参数集索引序号引用的PPS获取所述恢复图像使用的整形参数；
    使用所述第六整形参数更新或重新确定获取的所述恢复图像使用的整形参数。
  13. 根据权利要求12所述的方法，其中，根据通过所述参数集索引序号引用的所述PPS获取所述恢复图像使用的整形参数包括：
    判断所述PPS的扩展部分和/或所述PPS引用的参数集中是否携带有第一整形参数；
    当判断结果为是时，确定获取的所述恢复图像使用的整形参数为所述第一整形参数；和/或，在判断结果为否时，确定获取的所述恢复 图像使用的整形参数为预设值或空缺。
  14. 根据权利要求11所述的方法，其中，从用于承载所述视频码流的传输流或媒体文件中的所述系统层图像参数数据单元中获取所述整形参数包括：
    根据从所述系统层图像参数数据单元中获取的如下参数至少之一确定所述整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
  15. 根据权利要求4至10中任一项所述的方法，其中，所述方法还包括：
    从用于承载所述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取对所述恢复图像进行二次整形处理的整形参数，其中，所述系统层图像参数数据单元包括与所述视频码流中接入单元AU对应的描述信息或辅助信息；
    利用获取的对所述恢复图像进行二次整形处理的整形参数对所述恢复图像进行二次整形处理。
  16. 根据权利要求15所述的方法，其中，从用于承载所述视频码流的传输流或媒体文件中的系统层图像参数数据单元中获取对所述恢复图像进行二次整形处理的整形参数包括：
    根据从所述系统层图像参数数据单元中获取的如下参数至少之一确定对所述恢复图像进行二次整形处理的整形参数：是否执行整形操作的标识参数、动态范围整形参数、颜色空间整形参数、整形参数使用范围。
  17. 一种图像编码处理方法，包括：
    确定用于将恢复图像转换为高动态范围视频HDR图像的所述恢复图像使用的整形参数，其中，所述恢复图像是编码器执行整形操作 前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，所述恢复图像是解码待处理视频码流所获得的SDR图像；
    将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中，其中，所述图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
  18. 根据权利要求17所述的方法，其中，确定用于将所述恢复图像转换为所述高动态范围视频HDR图像的所述恢复图像使用的整形参数包括：
    确定图像层整形参数和序列层整形参数，其中：
    所述图像层整形参数包括最小化所述恢复图像与目标HDR图像之间误差的整形处理过程中使用的滤波器系数；
    所述序列层整形参数包括根据所述目标HDR图像构成的目标HDR视频的动态范围和颜色空间、所述恢复图像构成的恢复视频的动态范围和颜色空间，确定的从所述恢复视频的动态范围扩展至所述目标HDR视频的动态范围的映射参数和/或从所述恢复视频的颜色空间到所述目标HDR视频的颜色空间的转换参数；
    根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数。
  19. 根据权利要求18所述的方法，其中，所述目标HDR图像是输入编码器的原始HDR视频中对应于所述恢复图像的HDR图像。
  20. 根据权利要求18所述的方法，其中，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：
    分别利用所述图像层整形参数和所述序列层整形参数对所述恢复图像进行整形处理；
    确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
  21. 根据权利要求20所述的方法，其中，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：
    当所述恢复图像使用的整形参数为所述序列层整形参数时，对所述序列层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像参数集PPS和/或所述PPS引用的参数集中；
    当所述恢复图像使用的整形参数为所述图像层整形参数时，对所述图像层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中包括的分片头信息中。
  22. 根据权利要求18所述的方法，其中，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：
    从所述图像层整形参数、所述序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定所述恢复图像使用的整形参数。
  23. 根据权利要求22所述的方法，其中，从所述图像层整形参数、所述序列层整形参数以及当前按照编码顺序的前一个编码图像所使用的整形参数中确定所述恢复图像使用的整形参数包括：
    分别利用所述图像层整形参数、所述序列层整形参数和所述前一个编码图像所使用的整形参数对所述恢复图像进行整形处理；
    确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
  24. 根据权利要求23所述的方法，其中，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：
    当所述恢复图像使用的整形参数为所述序列层整形参数时，对所述序列层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像参数集PPS和/或所述PPS引用的参数集中；
    当所述恢复图像使用的整形参数为所述图像层整形参数或所述前一个编码图像所使用的整形参数时，对所述图像层整形参数或所述前一个编码图像所使用的整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中包括的参数数据单元中；或者，
    当所述恢复图像使用的整形参数为所述图像层整形参数时，对所述图像层整形参数进行编码，并将编码后的编码比特写入所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中包括的参数数据单元中；当所述恢复图像使用的整形参数为所述前一个编码图像所使用的整形参数时，在所述当前视频编码图像所在视频码流或所述待处理视频码流中接入单元AU中编码第四标识信息，其中，所述第四标识信息用于指示所述整形参数为所述前一个编码图像所使用的整形参数；
    其中，所述参数数据单元为包括在所述AU中的独立于分片码流数据单元的数据单元。
  25. 根据权利要求24所述的方法，其中，还包括：
    按照如下方式至少之一编码用于指示所述整形参数的标识信息：在视频参数集VPS中编码用于指示所述整形参数的第一标识信息的方式、在序列参数集SPS中编码用于指示所述整形参数的第二标识信息的方式。
  26. 根据权利要求18所述的方法，其中，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：
    从所述图像层整形参数、所述序列层整形参数以及已使用的除所述恢复图像对应的接入单元AU中包括的分片头信息中的图像参数集PPS外图像和/或分片层参数集中编码的一个或多个第一其他整形参数中确定所述恢复图像使用的整形参数。
  27. 根据权利要求26所述的方法，其中，从所述图像层整形参数、所述序列层整形参数以及所述第一其他整形参数中确定所述恢复图像使用的整形参数包括：
    分别利用所述图像层整形参数、所述序列层整形参数和所述第一其他整形参数对所述恢复图像进行整形处理；
    确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
  28. 根据权利要求27所述的方法，其中，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：
    当所述恢复图像使用的整形参数为所述序列层整形参数时，在分片头信息中，编码标识不使用PPS外图像和/或分片层参数集的信息；
    当所述恢复图像使用的整形参数为所述第一其他整形参数时，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码所述第一其他整形参数所在参数集的参数集索引序号；
    当所述恢复图像使用的整形参数为所述图像层整形参数时，对所述图像层整形参数进行编码并将编码比特写入新建的参数集数据单元中，其中，所述新建的参数集数据单元配置有参数集索引序号，在分片头信息中，编码标识使用PPS外图像和/或分片层参数集的信息，编码所述参数集索引序号。
  29. 根据权利要求18所述的方法，其中，根据所述图像层整形参数和所述序列层整形参数确定所述恢复图像使用的整形参数包括：
    从所述图像层整形参数、所述序列层整形参数以及在传输流或媒体文件的系统层中编码的一个或多个第二其他整形参数中确定所述恢复图像使用的整形参数。
  30. 根据权利要求29所述的方法，其中，从所述图像层整形参数、所述序列层整形参数以及所述第二其他整形参数中确定所述恢复图像使用的整形参数包括：
    分别利用所述图像层整形参数、所述序列层整形参数和所述第二其他整形参数对所述恢复图像进行整形处理；
    确定对所述恢复图像进行整形处理后得到的HDR图像与所述目标HDR图像之间的误差最小的参数作为所述恢复图像使用的整形参数。
  31. 根据权利要求30所述的方法，其中，将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/或分片层数据单元中包括：
    当所述恢复图像使用的整形参数为所述序列层整形参数时，在系统层编码第五标识信息，其中，所述第五标识信息用于指示所述恢复图像使用的整形参数不使用所述系统层中已编码的整形参数；
    当所述恢复图像使用的整形参数为所述图像层整形参数时，在所述系统层编码所述图像层整形参数；
    当所述恢复图像使用的整形参数为所述第二其他整形参数时，在所述系统层编码所述第二其他整形参数，或者，在所述系统层编码第六标识信息，其中，所述第六标识信息用于指示所述恢复图像使用的整形参数使用所述系统层中已编码的整形参数。
  32. 根据权利要求31所述的方法，其中，所述系统层中编码用于对所述恢复图像进行二次整形的整形参数和用于指示二次整形操作执行方式的控制信息。
  33. 一种图像解码处理装置，包括：
    第一确定模块，设置为解析视频码流，从所述视频码流的图像和/或分片层数据单元中获取整形参数，并根据获取的所述整形参数确定恢复图像使用的整形参数；
    处理模块，设置为使用所述恢复图像使用的整形参数对所述恢复图像进行整形处理；
    其中，所述恢复图像是在执行整形处理前，解码所述视频码流获得的图像；所述图像和/或分片层数据单元包括如下数据单元至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
  34. 一种图像编码处理装置，包括：
    第二确定模块，设置为确定用于将恢复图像转换为高动态范围视频HDR图像的所述恢复图像使用的整形参数，其中，所述恢复图像是编码器执行整形操作前对当前视频编码图像的本地恢复标准动态范围SDR图像，或者，所述恢复图像是解码待处理视频码流所获得的SDR图像；
    写入模块，设置为将确定的所述恢复图像使用的整形参数写入所述当前视频编码图像所在视频码流或所述待处理视频码流的图像和/ 或分片层数据单元中，其中，所述图像和/或分片层数据单元包括如下数据单元的至少之一：不同于图像参数集PPS的图像和/或分片层参数集，所述恢复图像对应的接入单元AU中包括的参数数据单元，分片头信息，系统层图像参数数据单元。
  35. 一种解码器，包括权利要求33所述的装置。
  36. 一种编码器，包括权利要求34所述的装置。
PCT/CN2016/105926 2015-12-31 2016-11-15 图像解码和编码方法、解码和编码装置、解码器及编码器 WO2017114016A1 (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
EP21203872.3A EP3962085A3 (en) 2015-12-31 2016-11-15 Image encoding and decoding method, encoding and decoding device, encoder and decoder
KR1020187022134A KR102156030B1 (ko) 2015-12-31 2016-11-15 이미지의 복호화 및 부호화 방법, 복호화 및 부호화 장치, 디코더 및 인코더
US16/067,420 US11006134B2 (en) 2015-12-31 2016-11-15 Picture decoding and encoding methods and apparatuses, decoder, and encoder
JP2018534535A JP7045317B2 (ja) 2015-12-31 2016-11-15 画像復号化・符号化方法、復号化・符号化装置
EP16880806.1A EP3399752B1 (en) 2015-12-31 2016-11-15 Image decoding method and decoding device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201511032566.3A CN106937121B (zh) 2015-12-31 2015-12-31 图像解码和编码方法、解码和编码装置、解码器及编码器
CN201511032566.3 2015-12-31

Publications (1)

Publication Number Publication Date
WO2017114016A1 true WO2017114016A1 (zh) 2017-07-06

Family

ID=59224465

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2016/105926 WO2017114016A1 (zh) 2015-12-31 2016-11-15 图像解码和编码方法、解码和编码装置、解码器及编码器

Country Status (6)

Country Link
US (1) US11006134B2 (zh)
EP (2) EP3399752B1 (zh)
JP (1) JP7045317B2 (zh)
KR (1) KR102156030B1 (zh)
CN (1) CN106937121B (zh)
WO (1) WO2017114016A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018191269A (ja) * 2017-02-24 2018-11-29 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 復号された画像データから画像データを再構成する方法および装置
US11310532B2 (en) 2017-02-24 2022-04-19 Interdigital Vc Holdings, Inc. Method and device for reconstructing image data from decoded image data
US11395009B2 (en) 2018-02-14 2022-07-19 Dolby Laboratories Licensing Corporation Image reshaping in video coding using rate distortion optimization

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3244616A1 (en) * 2016-05-13 2017-11-15 Thomson Licensing A method for encoding an input video comprising a luma component and two chroma components, the method comprising reshaping of said input video based on reshaping functions
CN113475079A (zh) * 2019-02-01 2021-10-01 北京字节跳动网络技术有限公司 环路整形和帧内块复制之间的相互作用
KR20210118400A (ko) 2019-02-01 2021-09-30 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩을 위한 루마 종속적 크로마 잔차 스케일링의 구성
WO2020175893A1 (ko) * 2019-02-28 2020-09-03 엘지전자 주식회사 Aps 시그널링 기반 비디오 또는 영상 코딩
CN113475072B (zh) * 2019-03-04 2023-12-15 北京字节跳动网络技术有限公司 视频处理中滤波信息的信令
KR20230004921A (ko) * 2019-03-07 2023-01-06 엘지전자 주식회사 루마 맵핑 및 크로마 스케일링 기반 비디오 또는 영상 코딩
CN117499644A (zh) 2019-03-14 2024-02-02 北京字节跳动网络技术有限公司 环路整形信息的信令和语法
WO2020192614A1 (en) 2019-03-23 2020-10-01 Beijing Bytedance Network Technology Co., Ltd. Restrictions on adaptive-loop filtering parameter sets
CN111027448B (zh) * 2019-12-04 2023-05-05 成都考拉悠然科技有限公司 一种基于时域推理图的视频行为类别识别方法
CN113630563B (zh) * 2020-05-08 2022-07-22 华为技术有限公司 一种高动态范围hdr视频的处理方法、编码设备和解码设备
CN116648906A (zh) * 2020-12-24 2023-08-25 华为技术有限公司 通过指示特征图数据进行编码

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101841708A (zh) * 2009-03-18 2010-09-22 索尼公司 图像处理设备和方法、以及信息处理设备和方法
WO2014204865A1 (en) * 2013-06-17 2014-12-24 Dolby Laboratories Licensing Corporation Adaptive reshaping for layered coding of enhanced dynamic range signals
WO2015057704A1 (en) * 2013-10-14 2015-04-23 Qualcomm Incorporated Device and method for scalable coding of video information
CN104754347A (zh) * 2013-12-26 2015-07-01 中兴通讯股份有限公司 视频图像序号的编码、解码方法及装置、电子设备
US20150195574A1 (en) * 2013-11-06 2015-07-09 Arris Enterprises, Inc. Modification of picture parameter set (pps) for hevc extensions

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8218625B2 (en) * 2004-04-23 2012-07-10 Dolby Laboratories Licensing Corporation Encoding, decoding and representing high dynamic range images
US8014445B2 (en) * 2006-02-24 2011-09-06 Sharp Laboratories Of America, Inc. Methods and systems for high dynamic range video coding
KR101346008B1 (ko) * 2009-03-13 2013-12-31 돌비 레버러토리즈 라이쎈싱 코오포레이션 고 동적 범위, 가시 동적 범위, 및 광색역 비디오의 층상 압축
US8990200B1 (en) * 2009-10-02 2015-03-24 Flipboard, Inc. Topical search system
TWI559779B (zh) * 2010-08-25 2016-11-21 杜比實驗室特許公司 擴展影像動態範圍
EP2819414A3 (en) * 2013-06-28 2015-02-25 Samsung Electronics Co., Ltd Image processing device and image processing method
EP3024222A4 (en) * 2013-07-14 2017-01-18 LG Electronics Inc. Method and apparatus for transmitting and receiving ultra high-definition broadcasting signal for expressing high-quality color in digital broadcasting system
KR101839258B1 (ko) 2013-10-14 2018-03-15 나이키 이노베이트 씨.브이. 운동 움직임 속성으로부터의 페이스 및 에너지 지출의 계산
EP2938084A4 (en) * 2013-12-27 2016-10-26 Sony Corp IMAGE PROCESSING DEVICE AND IMAGE PROCESSING METHOD
EP4020995A1 (en) 2015-07-16 2022-06-29 Dolby Laboratories Licensing Corporation Signal reshaping and coding for hdr and wide color gamut signals
WO2017019818A1 (en) * 2015-07-28 2017-02-02 Vid Scale, Inc. High dynamic range video coding architectures with multiple operating modes
JP6320440B2 (ja) * 2015-08-04 2018-05-09 ドルビー ラボラトリーズ ライセンシング コーポレイション ハイダイナミックレンジ信号のための信号再構成
US10674150B2 (en) * 2015-09-23 2020-06-02 Arris Enterprises Llc System and method for reshaping and adaptation of high dynamic range video data

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101841708A (zh) * 2009-03-18 2010-09-22 索尼公司 图像处理设备和方法、以及信息处理设备和方法
WO2014204865A1 (en) * 2013-06-17 2014-12-24 Dolby Laboratories Licensing Corporation Adaptive reshaping for layered coding of enhanced dynamic range signals
WO2015057704A1 (en) * 2013-10-14 2015-04-23 Qualcomm Incorporated Device and method for scalable coding of video information
US20150195574A1 (en) * 2013-11-06 2015-07-09 Arris Enterprises, Inc. Modification of picture parameter set (pps) for hevc extensions
CN104754347A (zh) * 2013-12-26 2015-07-01 中兴通讯股份有限公司 视频图像序号的编码、解码方法及装置、电子设备

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3399752A4 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2018191269A (ja) * 2017-02-24 2018-11-29 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 復号された画像データから画像データを再構成する方法および装置
US11310532B2 (en) 2017-02-24 2022-04-19 Interdigital Vc Holdings, Inc. Method and device for reconstructing image data from decoded image data
JP7086587B2 (ja) 2017-02-24 2022-06-20 インターデジタル ヴイシー ホールディングス， インコーポレイテッド 復号された画像データから画像データを再構成する方法および装置
JP2022130436A (ja) * 2017-02-24 2022-09-06 インターデジタル ヴイシー ホールディングス， インコーポレイテッド 復号された画像データから画像データを再構成する方法および装置
JP7340659B2 (ja) 2017-02-24 2023-09-07 インターデジタル ヴイシー ホールディングス， インコーポレイテッド 復号された画像データから画像データを再構成する方法および装置
US11395009B2 (en) 2018-02-14 2022-07-19 Dolby Laboratories Licensing Corporation Image reshaping in video coding using rate distortion optimization
TWI787460B (zh) * 2018-02-14 2022-12-21 美商杜拜研究特許公司 利用率失真最佳化在視訊編碼之影像再成形

Also Published As

Publication number Publication date
EP3399752B1 (en) 2021-12-22
EP3962085A2 (en) 2022-03-02
KR102156030B1 (ko) 2020-09-16
EP3399752A4 (en) 2019-12-11
EP3399752A1 (en) 2018-11-07
EP3962085A3 (en) 2022-05-25
CN106937121A (zh) 2017-07-07
US11006134B2 (en) 2021-05-11
CN106937121B (zh) 2021-12-10
JP2019500811A (ja) 2019-01-10
JP7045317B2 (ja) 2022-04-01
US20190014331A1 (en) 2019-01-10
KR20180100368A (ko) 2018-09-10

Similar Documents

Publication Publication Date Title
WO2017114016A1 (zh) 图像解码和编码方法、解码和编码装置、解码器及编码器
CN109547786B (zh) 视频编码、以及视频解码的方法、装置
RU2659748C2 (ru) Синтаксис и семантика для буферизации информации с целью упрощения конкатенации видеоданных
US9565439B2 (en) System and method for enhancing data compression using dynamic learning and control
JP2020508617A (ja) 複数の参照線を用いたイントラ予測
CN114631320A (zh) 对图像执行人工智能(ai)编码和ai解码的设备和方法
US20230379502A1 (en) Method and apparatus for image encoding/decoding
US10587875B2 (en) Coding tools for subjective quality improvements in video codecs
CN110650349B (zh) 一种图像编码方法、解码方法、编码器、解码器及存储介质
US9894385B2 (en) Video signal processing method and device
JP2020515190A (ja) ルミナンス情報を用いた量子化パラメーター予測
KR20210135247A (ko) 인 루프 재성형 적응적 재성형기 방향
CN115398481A (zh) 对图像执行人工智能编码和人工智能解码的设备和方法
CN110149515B (zh) 数据传输方法及装置
CN103826084A (zh) 一种音频编码方法
KR20170044682A (ko) 비디오 코딩에서 인-루프 필터링을 위한 시스템 및 방법
JP2023501885A (ja) ビデオコーデックにおける品質と計算の複雑さとの間の調整可能なトレードオフ
CN113539281A (zh) 音频信号编码方法和装置
KR20060043050A (ko) 영상 신호의 인코딩 및 디코딩 방법
KR100747664B1 (ko) 대역폭에 적응적인 멀티미디어 데이터 처리방법 및 이를적용한 호스트장치
CN106954073B (zh) 一种视频数据输入和输出方法、装置与系统
KR101606121B1 (ko) 동영상 파일 조각화 방법 및 그 장치
KR20160002712A (ko) 비디오 신호 처리 방법 및 장치
CN112004083B (zh) 一种利用帧间预测特性优化码率控制方法及系统
KR101409526B1 (ko) 영상 데이터의 비트율을 일정하게 유지시키는 장치 및 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16880806

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2018534535

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 20187022134

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2016880806

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2016880806

Country of ref document: EP

Effective date: 20180731