CN114494037A - 图像数据处理方法、装置、电子设备以及存储介质 - Google Patents
图像数据处理方法、装置、电子设备以及存储介质 Download PDFInfo
- Publication number
- CN114494037A CN114494037A CN202111633789.0A CN202111633789A CN114494037A CN 114494037 A CN114494037 A CN 114494037A CN 202111633789 A CN202111633789 A CN 202111633789A CN 114494037 A CN114494037 A CN 114494037A
- Authority
- CN
- China
- Prior art keywords
- transition
- target
- initial
- picture
- tone mapping
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 21
- 238000003672 processing method Methods 0.000 title claims abstract description 8
- 230000007704 transition Effects 0.000 claims abstract description 386
- 238000013507 mapping Methods 0.000 claims abstract description 162
- 238000000034 method Methods 0.000 claims abstract description 50
- 238000004891 communication Methods 0.000 claims description 18
- 230000004044 response Effects 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 abstract description 18
- 230000000694 effects Effects 0.000 abstract description 8
- 238000009877 rendering Methods 0.000 description 8
- 238000006243 chemical reaction Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 238000004519 manufacturing process Methods 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000009191 jumping Effects 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 230000002194 synthesizing effect Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000002156 mixing Methods 0.000 description 3
- 230000009466 transformation Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003631 expected effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000004806 packaging method and process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本发明实施例提供了一种图像数据处理方法、装置、电子设备以及存储介质，通过获取初始图像的第一时间线、转场内容等，并在第一时间线上将转场内容切分为对应的多个初始转场画面，使得可以有针对性地调整任一初始转场画面，接着获取与不同初始转场画面对应的不同目标色调映射参数，采用不同的目标色调映射参数对初始转场画面进行调整，生成对应的多个目标转场画面，实现对不同的初始转场画面进行差异化色调映射的过程，同时，生成与目标转场画面对应的第二时间线，并依据目标转场画面与第二时间线生成目标图像，从而保证了初始图像转换的目标图像与初始图像的整体内容一致，且配置了不同转场内容的不同显示效果，以提高图像的画面质量。
Description
技术领域
本发明涉及图像处理技术领域，特别是涉及一种图像数据处理方法、一种图像数据处理装置、一种电子设备以及一种计算机可读存储介质。
背景技术
高动态范围(High Dynamic Range Imaging，简称HDRI或HDR)，在计算机图形学与电影摄影术中，HDR是用来实现比普通数位图像技术更大曝光动态范围(即更大的明暗差别)的一组技术，高动态范围成像的目的就是要正确地表示真实世界中从太阳光直射到最暗的阴影这样大的范围亮度。标准动态范围(Standard Dynamic Range，简称SDR)是指一种很常见的色彩显示方式，信息大小相比HDR更小、普及度高。
由于近几年超高清节目制作技术在不断发展，超高清节目内容的制作水平也逐渐提高，但是在超高清与高清节目同播的情况下，节目制作人员在编辑HDR节目时，需要考虑SDR转换后的节目内容效果。然而，在现有的技术中，通常使用合成、转码的方式对整个工程或者整个视音频文件进行处理，以实现HDR与SDR之间的色调映射，使用转码的方式虽然考虑到了整体图像的亮暗对比关系，但是容易出现以下几个问题：
第一，由于合成渲染或转码处理的对象为整个工程或整个视音频文件，因此，难以兼顾到局部图像的细节画面，图像容易出现高光细节缺失较多的情况。
第二，将HDR视频分解为多个视频帧之后，并通过滤波处理得到SDR视频的过程中，图像的亮度跳变会转变为渐变，从而导致视频进行转场后，无法及时获取图像的亮度变化，使得转场内容无法得到正确的显示。
第三，在HDR节目中添加字幕图文包装后，如果将字幕图文添加至视频文件中同时进行渲染合成，所合成的节目内容容易出现图文亮度跳变的情况，且这种图文亮度发生跳变的情况在合成、转码过程中是无法调整的。
由于上述通过合成渲染或转码方式实现HDR与SDR之间的色调映射所出现的问题，导致由HDR转换到SDR之后图像亮度变化不准确，且在HDR的制作过程中无法确保SDR图像的画面质量。
发明内容
本发明实施例是提供一种图像数据处理方法、装置、电子设备以及计算机可读存储介质，以解决或部分解决相关技术中在HDR内容下制作SDR内容的过程中，由HDR转换到SDR之后图像的亮度变化不准确、制作后的SDR图像画面质量不高的问题。
为了解决上述问题，本发明实施例公开了一种图像数据处理的方法，包括：
获取与初始图像对应的第一时间线与转场内容；
根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
获取与各个所述初始转场画面对应的目标色调映射参数；
根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
根据所述目标转场画面与所述第二时间线生成目标图像。
可选地，所述获取与初始图像对应的第一时间线与转场内容，包括：
获取至少一个视音频文件，对所述视音频文件进行图像处理，确定与所述视音频文件对应的初始图像，所述初始图像包括转场标识；
获取与所述初始图像对应的第一时间线，通过所述转场标识识别对应的转场内容。
可选地，所述根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面，包括：
按照第一时间线的先后顺序将所述转场内容切分为对应的多个初始转场画面。
可选地，所述获取与各个所述初始转场画面对应的目标色调映射参数，包括：
建立所述初始转场画面与所述目标色调映射参数之间的色调映射表；
将各个所述初始转场画面与所述色调映射表进行匹配，从所述色调映射表中提取各个所述初始转场画面对应的目标色调映射参数。
可选地，所述根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线，包括：
获取所述初始转场画面的初始画面参数；
在所述第一时间线上，将所述初始画面参数替换为所述目标色调映射参数；
采用所述目标色调映射参数添加至所述初始转场画面，生成对应的目标转场画面，以及与所述目标转场画面对应的第二时间线。
可选地，所述初始转场画面包括正常转场画面与高亮度转场画面，所述采用所述目标映射参数生成与所述初始转场画面对应的目标转场画面，以及与所述目标转场画面对应的第二时间线，包括：
将所述正常转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述正常转场画面对应的目标正常转场画面；
响应于针对所述高亮度转场画面的选择操作，展示与所述选择操作对应的参数设置控件；
响应于针对所述参数设置控件的用户操作，确定与所述高亮度转场画面对应的目标色调映射参数；
将所述高亮度转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述高亮度转场画面对应的目标高亮度转场画面。
可选地，所述根据所述目标转场画面以及所述第二时间线生成目标图像，包括：
将所述目标正常转场画面、目标高亮度转场画面以及所述第二时间线进行合并，生成对应的目标图像。
本发明实施例还公开了一种图像数据处理装置，包括：
初始图像获取模块，用于获取与初始图像对应的第一时间线与转场内容；
初始转场画面确定模块，用于根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
目标色调映射参数获取模块，用于获取与各个所述初始转场画面对应的目标色调映射参数；
目标转场画面生成模块，用于根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
目标图像生成模块，用于根据所述目标转场画面与所述第二时间线生成目标图像。
可选地，所述初始图像获取模块具体用于：
获取至少一个视音频文件，对所述视音频文件进行图像处理，确定与所述视音频文件对应的初始图像，所述初始图像包括转场标识；
获取与所述初始图像对应的第一时间线，通过所述转场标识识别对应的转场内容。
可选地，所述初始转场画面确定模块具体用于：
按照第一时间线的先后顺序将所述转场内容切分为对应的多个初始转场画面。
可选地，所述目标色调映射参数获取模块具体用于：
建立所述初始转场画面与所述目标色调映射参数之间的色调映射表；
将各个所述初始转场画面与所述色调映射表进行匹配，从所述色调映射表中提取各个所述初始转场画面对应的目标色调映射参数。
可选地，所述目标转场画面生成模块包括：
初始画面参数获取子模块，用于获取所述初始转场画面的初始画面参数；
目标色调映射参数生成子模块，用于在所述第一时间线上，将所述初始画面参数替换为所述目标色调映射参数；
目标转场画面生成子模块，用于采用所述目标色调映射参数添加至所述初始转场画面，生成对应的目标转场画面，以及与所述目标转场画面对应的第二时间线。
可选地，所述初始转场画面包括正常转场画面与高亮度转场画面，所述目标转场画面生成子模块具体用于：
将所述正常转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述正常转场画面对应的目标正常转场画面；
响应于针对所述高亮度转场画面的选择操作，展示与所述选择操作对应的参数设置控件；
响应于针对所述参数设置控件的用户操作，确定与所述高亮度转场画面对应的目标色调映射参数；
将所述高亮度转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述高亮度转场画面对应的目标高亮度转场画面。
可选地，目标图像生成模块具体用于：
将所述目标正常转场画面、目标高亮度转场画面以及所述第二时间线进行合并，生成对应的目标图像。
本发明实施例还公开了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行存储器上所存放的程序时，实现如本发明实施例所述的方法。
本发明实施例还公开了一种计算机可读存储介质，其上存储有指令，当由一个或多个处理器执行时，使得所述处理器执行如本发明实施例所述的方法。
本发明实施例包括以下优点：
在本发明实施例中，通过获取初始图像，以及初始图像的第一时间线、转场内容等，并在第一时间线上将转场内容切分为对应的多个初始转场画面，使得可以有针对性地调整任一初始转场画面，接着获取与不同初始转场画面对应的不同目标色调映射参数，采用不同的目标色调映射参数对初始转场画面进行调整，生成对应的多个目标转场画面，以实现对不同的初始转场画面进行差异化色调映射的过程，同时，生成与目标转场画面对应的第二时间线，并依据目标转场画面与第二时间线生成目标图像，从而保证了初始图像转换的目标图像与初始图像的整体内容一致，且为初始图像或目标图像配置了对应的转场内容的显示效果，提高了图像的画面质量。
附图说明
图1是本发明实施例中提供的一种图像数据处理方法的步骤流程图；
图2是本发明实施例中提供的一种图像数据处理方法的步骤流程图；
图3是本发明实施例中提供的一种图像数据处理装置的结构框图；
图4是本发明实施例中提供的一种电子设备的框图；
图5是本发明实施例中提供的一种计算机可读介质的示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。
随着科技的不断进步与发展，人们越来越注重高品质的生活，而视频、音频等内容已经成为了人们日常生活中不可或缺的部分，通过使用不同的视音频文件娱乐生活、推进工作、丰富教学方式等，为此，技术人员对视音频文件的内容形式、内容类型等相关内容进行了改进或优化，例如，在超高清视频与高清视频同播的情况下，由于HDR与SDR有各自的颜色范围和亮度范围，同一视频或图像在HDR与SDR中呈现出来的效果往往存在差异。因此，将超高清视频以高清的形式进行播放时，以高清形式播放的视频不仅无法正确显示与HDR或SDR相应的亮度，而且视频中的图像颜色饱和度下降了，导致高清播放的视频容易变灰，HDR视频与SDR视频的颜色差异较大，使用户观看视频的体验感不佳。
而在现有的技术方案中，技术人员往往通过合成渲染或者转码的方式将HDR转换为SDR，这种处理过程简单、并作用于整个视频或图像，因此，难以兼顾到局部图像的细节画面，无法有针对性地处理图像的细节缺失较多的情况，且在滤波的过程中，使图像亮度由跳变转变为渐变，导致视频在进行转场时亮度变化较小，在HDR节目的图文包装或后期制作中，需要在节目内容中添加图像或文字等图文元素并进行合成渲染或转码，因此，转场时容易出现图文亮度跳变的情况，且这种图文亮度发生跳变的情况在合成渲染或转码过程中是无法调整的，导致了视频或图像的细节缺失严重、跳变的时机错误等等，从而无法在超高清与高清视频同播的过程中，展示出HDR下变换SDR后高质量的、正确的视频图像。
对此，本发明实施例的核心发明点之一在于通过获取初始图像，以及初始图像的第一时间线、转场内容等，并在第一时间线上将转场内容切分为对应的多个初始转场画面，使得可以有针对性地调整任一初始转场画面，接着获取与不同初始转场画面对应的不同目标色调映射参数，采用不同的目标色调映射参数对初始转场画面进行调整，生成对应的多个目标转场画面，以实现对不同的初始转场画面进行差异化色调映射的过程，同时，生成与目标转场画面对应的第二时间线，并依据目标转场画面与第二时间线生成对应的目标图像，保证了初始图像转换的目标图像与初始图像的整体内容一致，且为初始图像或目标图像配置了对应的转场内容的显示效果，提高了图像的画面质量，从而可以按照用户需求输出内容正确、视觉效果好的图像。
具体的，参照图1，示出了本发明实施例中提供的一种的方法的步骤流程图，具体可以包括如下步骤：
步骤101，获取与初始图像对应的第一时间线与转场内容；
在本发明的实施例中，可以获取至少一个视音频文件，将视音频文件输入至非编系统中，从而获取与视音频文件对应的初始图像、以及对应的第一时间线、转场内容。
可选地，视音频文件可以为录制好的视频文件、以语音形式进行播放的音频文件等，可以将视频与音频进行结合，并作为一个整体视音频文件输入至非编系统中，由非编系统自动确定与HDR对应的第一时间线，以及自动识别与视音频文件对应的转场画面。
其中，非编系统全称为非线性编辑系统，非线性编辑是相对于线性编辑而言的，非线性编辑可以直接从计算机的硬盘中以帧或文件的方式迅速、准确地存取素材，并进行编辑的方式，它是以计算机为平台的专用设备，可以实现多种传统电视制作设备的功能，它可以处理文字、图形、图像、动画等多种形式的素材，具体的，非线性编辑系统可以把输入的视音频信号进行a/d转换(模数转换)，并采用数字压缩技术存入计算机硬盘中，将传统电视节目后期制作系统(简称线编)中的切换台、数字特技台、录像机、录音机、编辑机、调音台、字幕机及图形创作系统等设备的功能，用一台计算机来操作。常见的非编系统分为基于工作站平台的系统、基于MAC平台的系统、基于PC平台的系统，这类非线性编辑系统正在向网络化发展，大大提高了电视台内部的制作播出效率。
在具体实现中，由于无法使用统一的亮度参数适配不同的转场画面，因此可以通过非编系统识别出对应的转场内容，非编系统可以获取至少一个视音频文件，并对至少一个视音频文件进行图像处理，然后确定与视音频文件对应的初始图像，初始图像包括转场标识。
可选地，转场内容可以为用于过渡或转换场景与场景之间的内容，制作好的HDR视频中的各个转场内容存在转场标识，非编系统通过转场标识自动识别出与初始图像中的转场内容。
作为一种示例，非编系统可以包括转场控件，通过响应针对转场控件的用户操作，如触控操作等，接收与用户操作对应的转场请求，该转场请求携带了转场标识，转场标识与转场内容之间存在关联，从而通过非编系统快速确定出视音频文件的转场内容，并针对转场内容进行相应的用户操作。
步骤102，根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
在本发明的实施例中，由于视音频文件存在的转场内容较多，例如，新闻联播里现场采访画面与演播室画面，且现场采访画面中光线的亮度指标与演播室画面中光线的亮度指标存在明显的差异，当从演播室画面转场为现场采访画面时，容易发生丢失画面中的细节内容或者亮度不匹配等情况，因此，可以将转场内容切分为对应的多个初始转场画面，有针对性地对不同的初始转场画面进行调整。
可选地，初始转场画面可以为未被非编系统处理过的各个转场内容，非编系统获取到初始图像对应的第一时间线后，可以按照第一时间线的时序先后将转场内容切分为对应的多个初始转场画面，从而可以对不同的初始转场画面适配对应的参数，从而个性化调整不同的初始转场画面，进而得到与预期效果一致的转场内容。
步骤103，获取与各个所述初始转场画面对应的目标色调映射参数；
在本发明的实施例中，非编系统将转场内容切分为多个初始转场画面之后，可以获取与初始转场画面对应的目标色调映射参数。
可选地，色调映射是在有限动态范围媒介上近似显示高动态范围图像的一项计算机图形学技术，如打印结果、CRT(Cathode Ray Tube，阴极射线显像管)或者LCD显示器(Liquid Crystal Display，液晶显示器)以及投影仪等都只有有限的动态范围。从本质上来讲，色调映射所要解决的问题是进行大幅度的对比度衰减将场景亮度变换到可以显示的范围，同时要保持图像细节与颜色等对于表现原始场景非常重要的信息，色调映射使用的算法可以分为全局色调映射算法、局部色调映射算法以及混合色域映射算法，其中，全局色调映射算法为建立像素点跟变换函数之间一对一映射关系，对图像进行动态范围变换过程中,采用一对一映射关系对图像的每个像素点使用同一个变换函数，局部色调映射算法可以根据图像局部的像素统计量以及上下文关系灵活调节映射函数，以弥补图像亮度、颜色损失，利用调节好的映射函数对图像的每个像素点进行相应的变换，混合映射算法则可以在动态范围映射场景下，结合全局色调映射算法与局部色调映射算法对图像进行色调映射。
进一步地，色调映射参数可以为用于调节图像亮度值的参数，非编系统可以在动态范围映射场景下，结合全局色调映射算法、局部色调映射算法或混合色调映射算法中的一种，同时可以将与不同初始转场画面对应的不同色调映射参数添加至初始转场画面中进行渲染、混合、替换等操作，本发明对此不作限制。
其中，非编系统中配置可以根据国际电信联盟(InternationalTelecommunication Union，简称ITU)发布的色域标准(也可以叫色彩标准)分别制定与HDR与SDR对应的色调映射参数，例如，SDR常用的色域标准为sRGB与Rec.709，HDR常用的色域标准为ITU-R Recommendation BT.2020(简称Rec.2020或BT.2020)，非编系统可以兼容BT.2020等与HDR对应的色域标准以及BT.709等与SDR对应的色域标准，从而可以使用不同的色域标准对图像进行混合或者渲染等操作。
在具体实现中，可以建立初始转场画面与目标色调映射参数之间的色调映射表，然后将各个初始转场画面与色调映射表进行匹配，接着从色调映射表中提取各个初始转场画面对应的目标色调映射参数。
可选地，色调映射表可以包括不同初始转场画面与不同目标色调映射参数之间的映射关系，例如，色调映射表包括了初始转场画面①---目标色调映射参数Ⅰ、初始转场画面②---目标色调映射参数Ⅱ、初始转场画面③---目标色调映射参数Ⅲ等，通过色调映射表可以匹配出与不同初始转场画面对应的目标色调映射参数。
作为一种示例，假设存在视音频文件为介绍美食的HDR节目视频，则可以将录制好的HDR节目视频输入至非编系统中，接着非编系统可以获取该HDR节目视频对应的HDR时间线，并基于HDR时间线，通过触控SDR转换控件等方式，开启SDR内容编辑，然后将HDR节目视频转换为对应的多张图像，且通过图像中的转场标识自动识别出HDR节目视频的转场内容，可以按照HDR时间线的顺序将转场内容切分为初始转场画面①、初始转场画面②、初始转场画面③，此时，非编系统可以将多个初始转场画面与色调参数映射表A进行匹配，从而获取到与初始转场画面①对应的目标色调映射参数Ⅰ、与初始转场画面②对应的目标色调映射参数Ⅱ以及与初始转场画面③对应的目标色调映射参数Ⅲ，最后可以将各个目标色调映射参数添加对应的初始转场画面，实现对初始转场内容的调整过程。
步骤104，根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
在本发明的实施例中，非编系统可以将初始转场画面与色调映射表一一进行匹配，然后根据匹配到的目标色调映射参数调整初始转场界面，从而生成与多个初始转场画面对应的多个目标转场画面，以及与目标转场画面对应的第二时间线。
可选地，第二时间线可以为与SDR对应的时间线，通过动态色调映射技术在不同的初始转场画面中添加对应的目标色调映射参数，可以确保在图像内容不变的情况下，同时兼顾与HDR与SDR对应的图像色彩，从而保证了同一视频不仅可以在超高清与高清下进行同播，而且同播时的视频画面质量高，避免出现画面亮度过高、变灰等问题。
在具体实现中，非编系统可以获取各个初始转场画面的各个初始画面参数，在第一时间线上可以将各个初始画面参数替换为对应的目标色调映射参数，然后非编系统可以将对应的目标色调映射参数添加至初始转场画面中，进而得到与初始转场画面对应的目标转场画面以及对应的第二时间线。
可选地，画面参数可以为图像的亮度、颜色、分辨率以及大小等等。非编系统通过初始转场画面匹配到相应的目标色调映射参数之后，可以将初始转场画面携带的初始画面参数替换为匹配好的目标色调映射参数，并将目标色调映射参数添加至初始转场画面，得到对应的目标转场画面，实现同一视音频文件兼顾HDR与SDR对应的图像效果，当用户选择HDR或SDR播放同一转场内容时，可以展示出与HDR或SDR适配的图像效果。
具体的，初始转场画面可以包括正常转场画面与高亮度转场画面，非编系统获取到目标映射参数时，可以将正常转场画面的初始画面参数替换为对应的目标色调映射参数，从而生成与正常转场画面对应的目标正常转场画面，然后可以响应于针对高亮度转场画面的选择操作，展示与选择操作对应的参数设置控件，其中，参数设置控件可以为包括转场画面的各个画面参数，以及与各个画面参数对应的调整界面，通过响应于针对参数设置控件的用户操作，确定与高亮度转场画面对应的目标色调映射参数，然后将高亮度转场画面的初始画面参数替换为对应的目标色调映射参数，并生成与高亮度转场画面对应的目标高亮度转场画面。
在一种示例中，正常转场画面可以为由非编系统自动识别出不存在亮度过高的若干个转场画面，非编系统获取到正常转场画面的初始画面参数A，并依据动态色调映射技术获取到目标色调映射参数Ⅰ，然后将初始画面参数A替换为目标色调映射参数Ⅰ，进而可以将目标色调映射参数Ⅰ添加至正常转场画面中，并获得目标正常转场画面。
在另一种示例中，高亮度转场画面可以为存在亮度较高的若干个转场画面，例如，转场画面中包括了太阳等亮度过高的部分，则需要用户通过参数设置控件手动地对太阳部分进行画面参数调节，或者转场画面中主持人穿的衣服亮度较高时，同样需要用户通过参数设置控件手动地调节该画面的画面参数，以区分主持人衣服的亮度与主持人面部的亮度等，然后在第二时间线上，调节画面参数之前可以响应于针对高亮度转场画面的选择操作，从而展示与选择操作对应的参数设置控件，并对参数设置控件执行相关的用户操作，例如，触控操作、滑动操作等，然后确定出与高亮度转场画面对应的目标色调映射参数Ⅰ，将高亮度转场画面的初始画面参数A替换为目标色调映射参数Ⅰ，并生成与高亮度转场画面对应的目标高亮度转场画面。
步骤105，根据所述目标转场画面与所述第二时间线生成目标图像。
在本发明的实施例中，非编系统可以将编辑好的目标正常转场画面、目标高亮度转场画面以及第二时间线进行合并，生成对应的目标图像。
其中，目标图像可以为HDR或SDR视音频文件，以实现兼顾HDR节目或SDR节目的图像效果，可以按照用户需求输出对应的视音频文件，从而保证了输出视音频文件的画面质量。
为了使本领域技术人员更好地理解本发明实施例的技术方案，下面通过一个例子，以及参照图2示出的流程图对本发明实施例进行说明。
S11，将与HDR相应的视音频文件加载到非编系统中，非编系统建立HDR时间线，然后进行图文、音视频等节目的编辑。
S12，在非编系统中，可以发起将带有视音频图像的HDR时间线转换SDR，同时进行视音频内容转场分析，将转场内容切分为多个初始转场画面。
S13，非编系统利用动态色调映射技术分析计算初始转场画面内容为正常转场画面和/或高亮度转场画面。
S14，非编系统为经过动态色调映射后的正常转场画面和/或高亮度转场画面匹配出对应的目标色调映射参数。
S15，非编系统在初始转场画面中添加目标色调映射参数之后，生成HDR内容相同的SDR时间线。
S16，非编系统在SDR时间线上，为正常转场画面中添加目标色调映射参数生成对应的目标正常转场画面，和/或为高亮度转场画面中添加目标色调映射参数生成对应的目标高亮度转场画面。
S17，非编系统依据正常转场画面、高亮度转场画面以及SDR时间线合成并输出HDR视音频文件或SDR视音频文件。
需要说明的是，本发明实施例包括但不限于上述示例，可以理解的是，在本发明实施例的思想指导下，本领域技术人员可以根据实际情况进行设置，本发明对此不作限制。
在本发明实施例中，通过获取初始图像，以及初始图像的第一时间线、转场内容等，并在第一时间线上将转场内容切分为对应的多个初始转场画面，使得可以有针对性地调整任一初始转场画面，接着获取与不同初始转场画面对应的不同目标色调映射参数，采用不同的目标色调映射参数对初始转场画面进行调整，生成对应的多个目标转场画面，以实现对不同的初始转场画面进行差异化色调映射的过程，同时，生成与目标转场画面对应的第二时间线，并依据目标转场画面与第二时间线生成目标图像，保证了初始图像转换的目标图像与初始图像的整体内容一致，且为初始图像或目标图像配置了对应的转场内容的显示效果，提高了图像的画面质量，从而可以按照用户需求输出内容正确、视觉效果好的图像。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图3，示出了本发明实施例中提供的一种图像数据处理装置的结构框图，具体可以包括如下模块：
初始图像获取模块301，用于获取与初始图像对应的第一时间线与转场内容；
初始转场画面确定模块302，用于根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
目标色调映射参数获取模块303，用于获取与各个所述初始转场画面对应的目标色调映射参数；
目标转场画面生成模块304，用于根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
目标图像生成模块305，用于根据所述目标转场画面与所述第二时间线生成目标图像。
在本发明的一种可选实施例中，所述初始图像获取模块301具体用于：
获取至少一个视音频文件，对所述视音频文件进行图像处理，确定与所述视音频文件对应的初始图像，所述初始图像包括转场标识；
获取与所述初始图像对应的第一时间线，通过所述转场标识识别对应的转场内容。
在本发明的一种可选实施例中，所述初始转场画面确定模块302具体用于：
按照第一时间线的先后顺序将所述转场内容切分为对应的多个初始转场画面。
在本发明的一种可选实施例中，所述目标色调映射参数获取模块303具体用于：
建立所述初始转场画面与所述目标色调映射参数之间的色调映射表；
将各个所述初始转场画面与所述色调映射表进行匹配，从所述色调映射表中提取各个所述初始转场画面对应的目标色调映射参数。
在本发明的一种可选实施例中，所述目标转场画面生成模块304包括：
初始画面参数获取子模块，用于获取所述初始转场画面的初始画面参数；
目标色调映射参数生成子模块，用于在所述第一时间线上，将所述初始画面参数替换为所述目标色调映射参数；
目标转场画面生成子模块，用于采用所述目标色调映射参数添加至所述初始转场画面，生成对应的目标转场画面，以及与所述目标转场画面对应的第二时间线。
在本发明的一种可选实施例中，所述初始转场画面包括正常转场画面与高亮度转场画面，所述目标转场画面生成子模块具体用于：
将所述正常转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述正常转场画面对应的目标正常转场画面；
响应于针对所述高亮度转场画面的选择操作，展示与所述选择操作对应的参数设置控件；
响应于针对所述参数设置控件的用户操作，确定与所述高亮度转场画面对应的目标色调映射参数；
将所述高亮度转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述高亮度转场画面对应的目标高亮度转场画面。
在本发明的一种可选实施例中，目标图像生成模块305具体用于：
将所述目标正常转场画面、目标高亮度转场画面以及所述第二时间线进行合并，生成对应的目标图像。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
另外，本发明实施例还提供一种电子设备，如图4所示，包括处理器401、通信接口402、存储器403和通信总线404，其中，处理器401，通信接口402，存储器403通过通信总线404完成相互间的通信，
存储器403，用于存放计算机程序；
处理器401，用于执行存储器403上所存放的程序时，实现如下步骤：
获取与初始图像对应的第一时间线与转场内容；
根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
获取与各个所述初始转场画面对应的目标色调映射参数；
根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
根据所述目标转场画面与所述第二时间线生成目标图像。
在本发明的一种可选实施例中，所述获取与初始图像对应的第一时间线与转场内容，包括：
获取至少一个视音频文件，对所述视音频文件进行图像处理，确定与所述视音频文件对应的初始图像，所述初始图像包括转场标识；
获取与所述初始图像对应的第一时间线，通过所述转场标识识别对应的转场内容。
在本发明的一种可选实施例中，所述根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面，包括：
按照第一时间线的先后顺序将所述转场内容切分为对应的多个初始转场画面。
在本发明的一种可选实施例中，所述获取与各个所述初始转场画面对应的目标色调映射参数，包括：
建立所述初始转场画面与所述目标色调映射参数之间的色调映射表；
将各个所述初始转场画面与所述色调映射表进行匹配，从所述色调映射表中提取各个所述初始转场画面对应的目标色调映射参数。
在本发明的一种可选实施例中，所述根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线，包括：
获取所述初始转场画面的初始画面参数；
在所述第一时间线上，将所述初始画面参数替换为所述目标色调映射参数；
采用所述目标色调映射参数添加至所述初始转场画面，生成对应的目标转场画面，以及与所述目标转场画面对应的第二时间线。
在本发明的一种可选实施例中，所述初始转场画面包括正常转场画面与高亮度转场画面，所述采用所述目标映射参数生成与所述初始转场画面对应的目标转场画面，以及与所述目标转场画面对应的第二时间线，包括：
将所述正常转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述正常转场画面对应的目标正常转场画面；
响应于针对所述高亮度转场画面的选择操作，展示与所述选择操作对应的参数设置控件；
响应于针对所述参数设置控件的用户操作，确定与所述高亮度转场画面对应的目标色调映射参数；
将所述高亮度转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述高亮度转场画面对应的目标高亮度转场画面。
在本发明的一种可选实施例中，所述根据所述目标转场画面以及所述第二时间线生成目标图像，包括：
将所述目标正常转场画面、目标高亮度转场画面以及所述第二时间线进行合并，生成对应的目标图像。
上述终端提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，简称EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述终端与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，简称RAM)，也可以包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application SpecificIntegrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
如图5所示，在本发明提供的又一实施例中，还提供了一种计算机可读存储介质501，该计算机可读存储介质中存储有指令，当其在计算机上运行时，使得计算机执行上述实施例中所述一种图像数据处理方法。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中所述一种图像数据处理方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。
Claims (10)
1.一种图像数据处理方法，其特征在于，包括：
获取与初始图像对应的第一时间线与转场内容；
根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
获取与各个所述初始转场画面对应的目标色调映射参数；
根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
根据所述目标转场画面与所述第二时间线生成目标图像。
2.根据权利要求1所述的方法，其特征在于，所述获取与初始图像对应的第一时间线与转场内容，包括：
获取至少一个视音频文件，对所述视音频文件进行图像处理，确定与所述视音频文件对应的初始图像，所述初始图像包括转场标识；
获取与所述初始图像对应的第一时间线，通过所述转场标识识别对应的转场内容。
3.根据权利要求1所述的方法，其特征在于，所述根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面，包括：
按照第一时间线的先后顺序将所述转场内容切分为对应的多个初始转场画面。
4.根据权利要求1所述的方法，其特征在于，所述获取与各个所述初始转场画面对应的目标色调映射参数，包括：
建立所述初始转场画面与所述目标色调映射参数之间的色调映射表；
将各个所述初始转场画面与所述色调映射表进行匹配，从所述色调映射表中提取各个所述初始转场画面对应的目标色调映射参数。
5.根据权利要求1所述的方法，其特征在于，所述根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线，包括：
获取所述初始转场画面的初始画面参数；
在所述第一时间线上，将所述初始画面参数替换为所述目标色调映射参数；
采用所述目标色调映射参数添加至所述初始转场画面，生成对应的目标转场画面，以及与所述目标转场画面对应的第二时间线。
6.根据权利要求5所述的方法，其特征在于，所述初始转场画面包括正常转场画面与高亮度转场画面，所述采用所述目标映射参数生成与所述初始转场画面对应的目标转场画面，以及与所述目标转场画面对应的第二时间线，包括：
将所述正常转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述正常转场画面对应的目标正常转场画面；
响应于针对所述高亮度转场画面的选择操作，展示与所述选择操作对应的参数设置控件；
响应于针对所述参数设置控件的用户操作，确定与所述高亮度转场画面对应的目标色调映射参数；
将所述高亮度转场画面的初始画面参数替换为所述目标色调映射参数，并生成与所述高亮度转场画面对应的目标高亮度转场画面。
7.根据权利要求6所述的方法，其特征在于，所述根据所述目标转场画面以及所述第二时间线生成目标图像，包括：
将所述目标正常转场画面、目标高亮度转场画面以及所述第二时间线进行合并，生成对应的目标图像。
8.一种图像数据处理装置，其特征在于，包括：
初始图像获取模块，用于获取与初始图像对应的第一时间线与转场内容；
初始转场画面确定模块，用于根据所述第一时间线将所述转场内容切分为对应的多个初始转场画面；
目标色调映射参数获取模块，用于获取与各个所述初始转场画面对应的目标色调映射参数；
目标转场画面生成模块，用于根据所述目标色调映射参数调整所述初始转场画面，生成目标转场画面以及与所述目标转场画面对应的第二时间线；
目标图像生成模块，用于根据所述目标转场画面与所述第二时间线生成目标图像。
9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，所述处理器、所述通信接口以及所述存储器通过所述通信总线完成相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行存储器上所存放的程序时，实现如权利要求1-7任一项所述的方法。
10.一种计算机可读存储介质，其上存储有指令，当由一个或多个处理器执行所述指令时，使得所述处理器执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111633789.0A CN114494037A (zh) | 2021-12-28 | 2021-12-28 | 图像数据处理方法、装置、电子设备以及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111633789.0A CN114494037A (zh) | 2021-12-28 | 2021-12-28 | 图像数据处理方法、装置、电子设备以及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN114494037A true CN114494037A (zh) | 2022-05-13 |
Family
ID=81496730
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111633789.0A Pending CN114494037A (zh) | 2021-12-28 | 2021-12-28 | 图像数据处理方法、装置、电子设备以及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN114494037A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024001829A1 (zh) * | 2022-06-27 | 2024-01-04 | 华为技术有限公司 | Hdr图像编辑方法、装置、电子设备及可读存储介质 |
-
2021
- 2021-12-28 CN CN202111633789.0A patent/CN114494037A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2024001829A1 (zh) * | 2022-06-27 | 2024-01-04 | 华为技术有限公司 | Hdr图像编辑方法、装置、电子设备及可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7018573B2 (ja) | 輝度変換装置および輝度変換方法 | |
| CN108495141B (zh) | 一种音视频的合成方法及系统 | |
| US20210004604A1 (en) | Video frame extraction method and apparatus, computer-readable medium | |
| US10720091B2 (en) | Content mastering with an energy-preserving bloom operator during playback of high dynamic range video | |
| CN109151253B (zh) | 显示装置、显示方法以及再现显示系统 | |
| EP1952640B1 (en) | Systems and methods for determining and communicating correction information for video images | |
| US10504263B2 (en) | Adaptive high dynamic range (HDR) tone mapping with overlay indication | |
| CN108141576B (zh) | 显示装置及其控制方法 | |
| CN114866809B (zh) | 视频转换方法、装置、设备、存储介质及程序产品 | |
| CN114494037A (zh) | 图像数据处理方法、装置、电子设备以及存储介质 | |
| JP2016052015A (ja) | 電子機器および色域判定方法 | |
| US20190172416A1 (en) | Image processing apparatus and image processing method | |
| CN114245027B (zh) | 一种视频数据混合处理方法、系统、电子设备和存储介质 | |
| Kamata et al. | Real-world live 4K ultra HD broadcasting with high dynamic range | |
| Thompson | Conversion of Conventional Video Display for High Dynamic Range Televisions | |
| Borg et al. | Content-Dependent Metadata for Color Volume Transformation of High Luminance and Wide Color Gamut Images | |
| Bae et al. | Study on HDR/WCG Service Model for UHD Service | |
| Gaggioni et al. | Opening a new chapter | |
| Routhier | UHD (2160/HDR) and HD (1080/BT. 709) Simultaneous Workflows at the CBC | |
| Vaz et al. | HDR10+ Advantages for the Next-Generation of Brazilian Broadcasting System (TV 3.0) | |
| Vaz et al. | HDR10+ Concepts, Principles, Capabilities and Advantages for the Next-Generation of Brazilian Broadcasting System (TV 3.0) | |
| CN116801009A (zh) | 一种视频数据处理方法、装置、介质及设备 | |
| Greenberg et al. | Color Me Confused: Color Space Preservation Challenges in the Transcoding, Rewrapping, and Playback of Digital Video Files |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |