CN113628100A - 视频增强方法、装置、终端及存储介质 - Google Patents

Abstract

本申请实施例公开了一种视频增强方法、装置、终端及存储介质，属于计算机技术领域。所述方法将视频按照每一个视频帧为单位进行优化，使得每个视频帧能够根据所对应的画面场景来确定图像增强参数，从而使得每一帧图像都能按照需要增强的效果增强，最后整个视频的优化效果较好，避免了使用一种策略对一段视频进行优化所造成的有些画面帧无法获得良好图像优化效果，整体提高了视频中的每一帧的显示效果。

Description

视频增强方法、装置、终端及存储介质

技术领域

本申请实施例涉及计算机技术领域，特别涉及一种视频增强方法、装置、终端及存储介质。

背景技术

随着视频增强技术的发展，用户能够通过该技术对视频的画面进行优化，获取自身需要的效果。

相关技术中，用户将需要优化的视频输入到视频编辑软件，通过视频编辑软件提供的一组增强参数对视频的画面进行优化，得到优化后的视频。在视频优化后，用户通过终端观看优化后的视频。

发明内容

本申请实施例提供了一种视频增强方法、装置、终端及存储介质，可以解决的问题。所述技术方案如下：

根据本申请的一方面内容，提供了一种视频增强方法，所述方法包括：

获取视频，所述视频包括n个图像帧，n为正整数；

根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，不同图像帧对应的所述帧级别图像增强参数互相独立；

根据所述n个图像帧对应的帧级别图像增强参数，分别对所述n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的所述视频。

根据本申请的另一方面内容，提供了一种视频增强装置，所述装置包括：

视频获取模块，用于获取视频，所述视频包括n个图像帧，n为正整数；

参数获取模块，用于根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，不同图像帧对应的所述帧级别图像增强参数互相独立；

视频增强模块，用于根据所述n个图像帧对应的帧级别图像增强参数，分别对所述n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的所述视频。

根据本申请的另一方面内容，提供了一种终端，所述终端包括处理器和存储器，所述存储器中存储有至少一条指令，所述指令由所述处理器加载并执行以实现如本申请各个方面提供的视频增强方法。

根据本申请的另一方面内容，提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令，所述指令由处理器加载并执行以实现如本申请各个方面提供的视频增强方法。

根据本申请的一个方面，提供了一种计算机程序产品，该计算机程序产品包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述各种可选实现方式中提供的视频增强方法。

本申请实施例提供的技术方案带来的有益效果可以包括：

由于本申请能够将视频按照每一个视频帧为单位进行优化，使得每个视频帧能够根据所对应的画面场景来确定图像增强参数，从而使得每一帧图像都能按照需要增强的效果增强，最后整个视频的优化效果较好，避免了使用一种策略对一段视频进行优化所造成的有的画面帧无法获得良好图像优化效果，整体提高了视频中的每一帧的显示效果。

附图说明

为了更清楚地介绍本申请实施例中的技术方案，下面将对本申请实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。

图1是本申请一个示例性实施例提供的一种终端的结构框图；

图2是本申请实施例提供的一种显示屏中的各个图层之间的关系的示意图；

图3是本申请一个示例性实施例提供的一种视频增强方法的流程图；

图4是本申请另一个示例性实施例提供的一种视频增强方法流程图；

图5是基于图4所示实施例提供的一种第一曲线和第二曲线的示意图；

图6是基于图4所示实施例提供的另一种第一曲线和第二曲线的示意图；

图7是基于图5所示实施例提供的一种视频增强和视频播放过程的示意图；

图8是本申请一个示例性实施例提供的一种视频增强装置的结构框图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施方式作进一步地详细描述。

下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。

在本申请的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。在本申请的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。此外，在本申请的描述中，除非另有说明，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。

如本文中所使用，根据上下文，术语“如果”任选地被解释为“当......时”、“在……时”、“响应于确定”或“响应于检测”。类似地，根据上下文，短语“如果确定……”或“如果检测到(所陈述的条件或事件)时”或“响应于检测到(所陈述的条件或事件)”。

需要说明的是，使用个人可识别信息应遵循公认为满足或超过维护用户隐私的行业或政府要求的隐私政策和做法。具体地，个人可识别信息在管理和处理的过程中应当向用户明确说明授权使用的性质，以使无意或未经授权的访问或使用的风险最小化。

示例性地，本申请实施例所示的视频增强方法，可以应用在终端中，该终端具备显示屏且具备视频增强功能。终端可以包括手机、平板电脑、膝上型电脑、台式电脑、电脑一体机、服务器、工作站、电视、机顶盒、智能眼镜、智能手表、数码相机、MP4播放终端、MP5播放终端、学习机、点读机、电纸书、电子词典、车载终端、虚拟现实(Virtual Reality，VR)播放终端或增强现实(Augmented Reality，AR)播放终端等。

相关技术中，采用滤镜对视频的画面进行优化是一种常见的方式。比如，用户使用手机拍摄视频时，可以选择一种滤镜来拍摄。例如，滤镜可以是复古、素描、油彩或者粉笔画等。当用户选择其中一种滤镜之后，相当于使用一组固定的图像增强参数对拍摄的视频中的每一帧进行相同的增强处理。在一种可能的应用场景中，若用户选择了油彩滤镜，且需要处理的视频的长度是15秒，每秒钟24帧，则需要处理的图像帧一共360帧。这360帧的图像统一采用油彩滤镜对应的图像增强参数来增强，增强后的视频中的每个图像帧都能够保持油彩滤镜提供的油彩效果。

然而，由于视频拍摄时中的每一个图像帧的光照环境和其中被拍摄的景物可能有所区别。因此，采用统一的一种滤镜对整个视频进行增强时，会在原始图像帧中光照等条件不合适的情况下出现增强后画面模糊等效果较差的问题。

在本申请中，终端在获取包含n个图像帧的视频之后，能够根据n个图像帧对应的画面场景，获取n个图像帧对应的帧级别图像增强参数，从而能够为每一个图像帧选择合适的图像增强参数。在图像处理时，对每一个图像帧所采用的帧级别图像增强参数会因图像帧的不同而有所区别。也即本申请对视频进行增强时，能够令每一帧图像均达到较佳的显示效果，避免了相关技术中单独采用滤镜增强视频时效果不佳的问题。

请参照图1，图1是本申请一个示例性实施例提供的一种终端的结构框图，如图1所示，该终端包括处理器120和存储器140，所述存储器140中存储有至少一条指令，所述指令由所述处理器120加载并执行以实现如本申请各个方法实施例所述的视频增强方法。

在本申请中，终端100是具备视频增强功能的电子设备。终端100能够获取视频，所述视频包括n个图像帧，n为正整数；根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，不同图像帧对应的所述帧级别图像增强参数互相独立；根据所述n个图像帧对应的帧级别图像增强参数，分别对所述n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的所述视频。

处理器120可以包括一个或者多个处理核心。处理器120利用各种接口和线路连接整个终端100内的各个部分，通过运行或执行存储在存储器140内的指令、程序、代码集或指令集，以及调用存储在存储器140内的数据，执行终端100的各种功能和处理数据。可选的，处理器120可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器120可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器120中，单独通过一块芯片进行实现。

存储器140可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory，ROM)。可选的，该存储器140包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器140可用于存储指令、程序、代码、代码集或指令集。存储器140可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现下述各个方法实施例的指令等；存储数据区可存储下面各个方法实施例中涉及到的数据等。

请参考图2，图2是本申请实施例提供的一种显示屏中的各个图层之间的关系的示意图。在图2中，屏幕硬件模块210用于合成图层221、图层222和图层223，得到屏幕显示图像220。在本申请中，图层222是图像或者视频所在的图层。例如，终端需要显示一张图像，则该图像被设置在图层222中，屏幕中显示的其它内容放置在另外两个图层中。

在一种可能的方式中，终端需要合成的图层可以不为3个，例如，终端需要合成的图层可以是2个、4个或者5个。本申请实施例不对需要合成的图层的数量进行限定。

示例性的，图层221中可以放置系统导航栏，图层223中可以放置状态栏。其中，导航栏中可以包括返回上一层键、主页键和最近任务键。状态栏中可以显示信号强弱、电量余量、时间或运营商标识中的至少一种。

在本申请中，终端能够对图层222中的视频进行增强，以得到显示效果更好的视频。

请参考图3，图3是本申请一个示例性实施例提供的一种视频增强方法的流程图。该视频增强方法可以应用在上述所示的终端中。在图2中，视频增强方法包括：

步骤310，获取视频，视频包括n个图像帧，n为正整数。

在本申请实施例中，终端从本地的存储硬件中获取视频，或者从其它设备中下载视频。

一种可能的方式中，该视频是限制时长的视频。例如短视频，该短视频的时长被限定为10秒、15秒、30秒或者1分钟等时长。或者，视频也可以是能够被编辑的视频。也即，能够被编辑的视频能够以图像帧的粒度被抽出，每一帧图像均能够被处理。

步骤320，根据n个图像帧对应的画面场景，获取n个图像帧对应的帧级别图像增强参数，不同图像帧对应的帧级别图像增强参数互相独立。

在本申请中，终端根据对于组成视频的n个图像帧，先确定每一个图像帧各自对应的画面场景。若一共存在n个图像帧，则终端能够确定n个图像帧对应的n个画面场景。其中，n个画面场景中可能存在相同种类的画面场景。

在终端确定出图像帧对应的画面场景后，终端能够再根据画面场景再确定图像帧对应的帧级别图像增强参数。

在一种可能的实现方式中，帧级别图像增强参数可以是锐度、对比度或饱和度中的至少一种。可选的，帧级别图像增强参数还可以包括亮度、色温、色调、曝光度、高光或阴影等至少一种。

步骤330，根据n个图像帧对应的帧级别图像增强参数，分别对n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的视频。

在本申请实施例中，终端在得到每一个图像帧对应的帧级别图像增强参数后，将以图像帧单位，对每一个图像帧进行图像增强，得到图像增强后的视频。

在一个具体的应用场景中，若视频的时长为15秒，每一秒的视频对应24个图像帧，则该视频共包括360个图像帧。本申请能够获取360个图像帧中的每一个图像帧对应的画面场景，并根据画面场景获取360个图像帧中每一个图像帧对应的画面场景，确定每一个图像帧对应的帧级别图像增强参数。随后，以每一个图像帧为单位，按照帧级别图像增强参数对每一个图像帧进行图像增强，从而得到图像增强后的每一个图像帧。再将每一个图像帧按照原本的次序重新组合在一起，构成图像增强后的视频。

综上所述，本实施例提供的视频增强方法，由于本申请能够将视频按照每一个视频帧为单位进行优化，使得每个视频帧能够根据所对应的画面场景来确定图像增强参数，从而使得每一帧图像都能按照需要增强的效果增强，最后整个视频的优化效果较好，避免了使用一种策略对一段视频进行优化所造成的有的画面帧无法获得良好图像优化效果，整体提高了视频中的每一帧的显示效果。

基于上一个实施例所公开的方案，终端还能够根据图像帧对应的画面场景的不同，得到不同的帧级别图像增强参数，进而得到效果较佳的图像增强后的视频。请参考如下实施例。

请参见图4，图4是本申请另一个示例性实施例提供的一种视频增强方法流程图。该视频增强方法可以应用在上述所示的终端中。在图4中，该视频增强方法包括：

步骤410，获取视频。

在本申请中，步骤410的执行过程和步骤310的执行过程相同，此处不再赘述。

步骤421，针对n个图像帧中的第i个图像帧，调用AI(Artificial Intelligence，人工智能)模型识别第i个图像帧分别属于m种单一画面场景的概率，i为不大于n的整数。

在一种可能的方式中，当终端获取到了视频。终端还能够将视频中的图像帧进行压缩到指定大小，以便压缩后的图像帧能够输入到AI模型中。

在一种可能的方式中，若AI模型需要的输入图像的尺寸是256*256，则终端将会将图像帧先压缩至256*256，随后再将压缩为256*256大小的图像帧输入到AI模型中。

可选的，本申请中所调用的AI模型是同一个AI模型。该AI模型具备识图能力。

在本申请其它可能的实现方式中，终端还能够根据AI模型的输入需求，将图像帧的尺寸压缩符合AI模型的输入需求。例如，若AI模型的输入需求是512*512，则终端将会将每一个图像帧均先压缩为512*512，然后再将压缩后的图像帧输入至AI模型。

在本申请中，AI模型具备识别第i个图像帧分别属于m种单一画面场景的概率。例如，若m＝5，单一画面场景包括人像场景、天空场景、草地场景、食物场景和建筑场景中至少一种的。在本申请中，AI模型将会给出上述图像帧属于每一种场景的概率。

需要说明的是，步骤421可以分成两种执行方式。分别参见以下的步骤(a1)和步骤(a2)。

步骤(a1)，响应于第i个图像帧属于目标单一画面场景的概率大于阈值且目标单一画面场景为一种，则确定第i个图像帧对应的画面场景为目标单一画面场景。

在申请中，终端中设置有一个阈值，该阈值用于确认第i个图像帧是否大概率属于目标单一画面场景。例如，阈值可以设置为0.5、0.6或0.7等数值，该阈值是的取值范围是[0，1]。当第i个图像帧属于目标单一画面场景的概率大于该阈值，并且单一画面场景仅有一种时，确定第i个图像帧对应的画面场景是目标单一画面场景。

例如，本申请提供一种第i个图像帧对应的画面场景是目标单一画面场景的示例，详情请参见表一。

人像场景	天空场景	草地场景	食物场景	建筑场景
					0.06	0.86	0.31	0.42	0.23

表一

在表一所示的示例中，阈值为0.5。因此，表一所示的第i个图像帧属于天空场景的概率时0.86大于阈值0.5，并且该单一画面场景仅有天空场景一个。因此，表一所示数据对应的第i个图像帧对应的画面场景是目标单一画面场景。该目标单一画面场景是天空场景。

步骤(a2)，响应于第i个图像帧属于目标单一画面场景的概率大于阈值且目标单一画面场景为至少两种，则确定第i个图像帧对应的画面场景为复杂画面场景，复杂画面场景是至少两种目标单一画面场景所组合出的画面场景。

区别于步骤(a1)，在步骤(a2)所示的场景中，第i个图像帧属于目标单一画面场景的概率大于阈值且目标单一画面场景为至少两种。在该场景中，终端将第i个图像帧对应的画面场景确定为复杂画面场景。由于复杂画面场景是至少两种目标单一画面场景所组合出的画面场景。因此，在实际场景中，复杂画面场景出现的概率较高。

例如，本申请提供一种第i个图像帧对应的画面场景是目标复杂画面场景的示例，详情请参见表二。

人像场景	天空场景	草地场景	食物场景	建筑场景
					0.89	0.31	0.93	0.84	0.15

表二

在表一所示的示例中，阈值为0.5。因此，表一所示的第i个图像帧属于人像场景的概率是0.89大于阈值0.5；第i个图像帧属于草地场景的概率是0.93大于阈值0.5；第i个图像帧属于食物场景的概率是0.84大于阈值0.5。并且，该单一画面场景有三个。因此，表一所示数据对应的第i个图像帧对应的画面场景是复杂画面场景。该复杂画面场景中包括草地、人像和食物。

基于步骤(a1)和步骤(a2)的介绍，AI模型能够对第i个图像属于目标单一画面场景还是复杂画面场景进行判断。

步骤422，根据第i个图像帧分别属于m种单一画面场景的概率，确定第i个图像帧对应的画面场景。

在本申请中，终端根据第i个图像帧分别属于m种单一画面场景的概率，确定第i个图像帧对应的画面场景。

在一种可能的方式中，终端可以将第i个图像帧分别属于m种单一画面场景的概率中的最高概率对应的画面场景确定为第i个图像帧对应的画面场景。

示意性的，若m等于5，且5种单一画面场景分别为人像场景、天空场景、草地场景、食物场景和建筑场景。在终端将第12个图像帧输入AI模型后，AI模型计算得到第12个图像帧属于上述5中单一画面场景的概率如表三所示。

人像场景	天空场景	草地场景	食物场景	建筑场景
					0.23	0.14	0.22	0.86	0.35

表三

在表三所示的场景中，AI模型确定第12个图像帧属于食物场景的概率最高，为0.86。

步骤423，确定与第i个图像帧对应的画面场景对应的帧级别图像增强参数。

在本申请中，在第i个图像帧对应的画面场景为目标单一画面场景的情况下，基于第一对应关系确定与目标单一画面场景对应的帧级别图像增强参数。

在一种可能的实现方式中，终端在确定第i个图像帧对应的画面场景后，将获取画面场景对应的帧级别图像增强参数。在一种可能的方式中，请参见表四，表三示出了一种单一画面场景和帧级别图像增强参数的第一对应关系。

人像场景	天空场景	草地场景	食物场景	建筑场景
					参数组一	参数组二	参数组三	参数组四	参数组五

表四

在本例中，若第i个图像帧对应画面场景是食物场景，则终端确定第i个图像帧对应的帧级别图像增强参数是参数组四。

在另一种可能的实现方式中，终端在第i个图像帧对应的画面场景为复杂画面场景的情况下，基于第二对应关系确定与复杂画面场景对应的帧级别图像增强参数。其中，第二对应关系包括不同复杂画面场景和帧级别图像增强参数之间的对应关系。

在本例中，请参见表五，表五示出了一种复杂画面场景和帧级别图像增强参数的第二对应关系。

表五

在表五中，若复杂画面场景包括草地场景+食物场景+人像场景一共三个场景，则第i个图像帧对应的帧级别图像增强参数是参数组八。

需要说明的是，若AI模型没有识别出i个图像帧对应的画面场景，则终端可以将默认的帧级别图像增强参数确定为i个图像帧对应的帧级别图像增强参数。

基于表五所示的场景，终端还能够在第i个图像帧对应的画面场景为复杂画面场景的情况下，确定复杂画面场景中的至少两个目标单一画面场景。在一种可能的场景中，每一个目标单一画面场景均对应有一个局部区域，该局部区域是第i个图像帧中的子区域，也即局部区域所包括的范围位于第i个图像帧中。在一种可能的方式中，不同的局部区域之间不存在重合的区域。在该情况下，终端能够基于第二对应关系确定局部区域对应的帧级别图像增强参数。例如，若以表五所示例子为例，参数组七包括草地场景对应的子参数组和天空场景对应的子参数组。终端可以采用草地场景对应的子参数组对草地场景对应的局部区域进行增强，同时采用天空场景对应的子参数组对天空场景对应的局部区域进行增强。

在另一种可能的方式中，不同的局部区域之间存在重合的区域。在该情况下，重合区域按照优先级高的目标单一画面场景的帧级别图像增强参数进行增强。

在一种可能的方式中，步骤423可以被步骤(a1)和步骤(a2)所替代，以实现确定帧级别图像增强参数的效果。

步骤(a1)，确定与所述第i个图像帧对应的画面场景对应的至少两个候选帧级别图像增强参数组。

在一种可能的方式中，针对同一个画面场景，本申请可以提供至少两个候选帧级别图像增强参数组。例如，当画面场景是人像场景时，本申请可以提供的候选帧级别图像增强参数组可以包括大眼图像增强参数组、美白图像增强参数组和去皱图像增强参数组等。

需要说明的是，上述画面场景仅以人像场景举例。在本申请中，画面场景还可以是天空场景、草地场景、食物场景或建筑场景等等场景中的一种。同一种画面场景均可以对应至少两个候选帧级别图像增强参数组，本申请实施例对此不作限定。

步骤(a2)，从至少两个候选帧级别图像增强参数组中，确定出与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数。

在本申请中，终端能够从至少两个候选帧级别图像增强参数组中，确定出与第i个图像帧对应的画面场景对应的帧级别图像增强参数。在一种可能的确定方式中，终端将对各个候选帧级别图像增强参数组打分，将分数高的候选帧级别图像增强参数组作为画面场景对应的帧级别图像增强参数。

例如，当画面场景是人像场景时，候选帧级别图像增强参数组包括大眼图像增强参数组、美白图像增强参数组和去皱图像增强参数组。各个候选帧级别图像增强参数组的评分情况可以参见表六。

表六

需要说明的是，评分标准可以是一个预设的算法或者计算模型。本申请需要对候选帧级别图像增强参数组打分时，调用即可。表六中的分值用于指示候选帧级别图像增强参数组与对应的画面场景之间的关联程度。

可选地，本申请中的一个画面场景对应的各个参数组中的多个参数的数值可以不同。例如，一个参数组中可同时包括饱和度、亮度、锐度、对比度、色温、色调、曝光度、高光或阴影等中的一种或者多种。不同的参数组中的同一个参数的数值既可以相同，也可以不同。不同的参数组之间存在数值不同的同名参数。

步骤430，根据n个图像帧对应的帧级别图像增强参数，分别对n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的视频。

在本申请实施例中，步骤430的执行过程和步骤330的执行过程相同，此处不再赘述。

步骤441，响应于播放指令，播放得到图像增强后的视频。

步骤442，在播放视频的过程中，获取环境光亮度。

在本申请实施例中，终端将在图像增强后的视频的播放过程中，先获取环境光亮度。一种可能的方式中，终端可以通过光传感器来获取环境光亮度，环境光亮度的单位可以用流明来表示。

步骤443，从第一映射关系中，获取环境光亮度对应的第二显示屏亮度。

在本例中，终端中预先保存第一映射关系。该第一映射关系用于指示环境光亮度和第二显示屏亮度之间的映射关系。

步骤444，将显示屏的亮度从第一显示屏亮度调整为第二显示屏亮度。

在本例中，终端将显示屏的亮度从当前的第一显示屏亮度调整为第二显示屏亮度。需要说明的是，当第一显示屏亮度和第二显示屏亮度相同时，终端在步骤的执行时段直接跳过。

在一种可能的方式中，终端中预存有第二映射关系，第二映射关系用于环境光亮度与第三显示屏亮度之间的对应关系。

在一种可能的方式中，第一映射关系所对应的图像是曲线。第二映射关系所对应的图像是直线。第一映射关系所对应的曲线属于第一象限，且起点是原点。第一映射关系所对应的曲线与第二映射关系所对应的直线共有三个交点，分别是原点、第一阈值点和最高亮度点。

示意性的，(1)在环境光亮度等于第一阈值P1的情况下，第二显示屏亮度等于第三显示屏亮度。(2)在环境光亮度大于第一阈值P1的情况下，第二显示屏亮度大于第三显示屏亮度。(3)在环境光亮度小于第一阈值P1的情况下，第二显示屏亮度小于第三显示屏亮度。

请参见图5，图5是基于图4所示实施例提供的一种第一曲线和第二曲线的示意图。横轴表示环境光亮度，纵轴表示屏幕亮度。第一曲线L1和第二曲线L2的第一个交点是原点(0，0)，第二个交点是第一阈值点(P1，X1)，第三个交点是最高亮度点(Pmax，Xmax)。

可选的，图5中还可以提供第三映射关系对应的第三曲线L3。该第三曲线L3属于第一象限，且第三曲线L3与第一曲线L1的交点也同样是原点(0，0)、原点(0，0)和最高亮度点(Pmax，Xmax)。

作为本申请的一种实际落地实施例。以视频是10秒的视频，且每秒的视频包括24个图像帧。也即视频包括编号001至编号240一共240个图像帧，上述240图像帧按照编号的次序播放后，表现为视频的播放过程。

请参见图6，图6是基于图4所示实施例提供的另一种第一曲线和第二曲线的示意图。横轴表示环境光亮度，纵轴表示屏幕亮度。在该场景中，第一曲线L1、第二曲线L2和第三曲线L3在第二阈值点(P2，X2)至第三阈值点(P3，X3)之间的线段重合。在此基础上，三条曲线的另外两个交汇点是原点(0，0)和最高亮度点(Pmax，Xmax)。

在图5中，在环境光亮度大于第一阈值P1的情况下，第一映射关系是凸函数类型函数；在环境光亮度小于第一阈值P1的情况下，第一映射关系是凹函数类型函数。其中，在环境光亮度等于第一阈值P1的情况下，第一映射关系既可以是凸函数类型函数，也可以是凹函数类型函数。

在图6中，在环境光亮度大于第三阈值P3的情况下，第一映射关系是凸函数类型函数；在环境光亮度小于第二阈值P2的情况下，第一映射关系是凹函数类型函数，其中，第三阈值P3大于第二阈值P2。其中，在环境光亮度属于[P2,P3]时，第一映射关系是等比例函数。

请参见图7，图7是基于图4所示实施例提供的一种视频增强和视频播放过程的示意图。

在图7的视频增强阶段6A中，编号001至编号048的图像帧对应的画面场景是目标单一画面场景，均为草地场景。终端将草地场景对应的参数组6a确定为编号001至编号048的图像帧的帧级别图像增强参数。编号049至编号192的图像帧对应的画面场景是复杂画面场景，该复杂画面场景包括草地场景和人像场景。终端将该复杂画面场景对应的参数组6b确定为编号049至编号192的图像帧的帧级别图像增强参数。编号193至编号240的图像帧对应的画面场景没有被AI模型识别出来。因此，编号193至编号240的图像帧的帧级别图像增强参数被设置为默认帧级别图像增强参数。终端将按照每一个图像帧的帧级别图像增强参数，对每一个图像帧进行图像增强。当所有的图像帧均完成图像增强时，视频增强阶段6A结束，终端得到视频增强后的视频。

需要说明的是，本申请中一组图像帧均采用一样的帧级别图像增强参数是该组的图像帧对应的画面场景相同。若不相同，则相邻帧才会采用不同的帧级别图像增强参数。如048图像帧和049图像帧。

在图7的播放时屏幕亮度调节阶段6B中，终端能够识别视频增强后的视频。在该视频增强后的视频播放时，终端获取第一映射关系。终端利用第一映射关系确定当前的环境光亮度对应的第二显示屏亮度，并将当前的第一显示屏亮度调整为第二显示屏亮度。由于调整之前的第一显示屏亮度是针对普通视频的显示效果设置的参数，不一定能够满足视频增强后的视频显示其效果。因此，终端将显示屏的亮度调整为第二显示屏亮度后，视频增强后的视频能够以较好的效果播放。

综上所述，本实施例能够在对视频进行图像增强时，分别根据每一个图像帧所属的画面场景，得到该图像帧对应的帧级别图像增强参数，在完成对每一个图像帧的图像增强后，得到图像增强后的视频。随后，在图像增强后的视频播放时，能够按照预设的映射关系确定当前环境光亮度对应的屏幕亮度，从而将终端屏幕亮度调整到映射关系对应的亮度，使得手机能够以合适的亮度播放被图像增强后的视频，避免了通常的自动调亮度方案调节效果差，不利于图像增强后的视频的展示效果。

下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。

请参考图7，图8是本申请一个示例性实施例提供的一种视频增强装置的结构框图。该视频增强装置可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。该装置包括：

视频获取模块710，用于获取视频，所述视频包括n个图像帧，n为正整数。

参数获取模块720，用于根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，不同图像帧对应的所述帧级别图像增强参数互相独立。

视频增强模块730，用于根据所述n个图像帧对应的帧级别图像增强参数，分别对所述n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的所述视频。

在一个可选的实施例中，所述参数获取模块720，用于针对所述n个图像帧中的第i个图像帧，调用AI模型识别所述第i个图像帧分别属于m种单一画面场景的概率，i为不大于n的整数；根据所述第i个图像帧分别属于m种单一画面场景的概率，确定所述第i个图像帧对应的画面场景；确定与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数。

在一个可选的实施例中，所述参数获取模块720，用于响应于所述第i个图像帧属于目标单一画面场景的概率大于阈值且所述目标单一画面场景为一种，则确定所述第i个图像帧对应的画面场景为所述目标单一画面场景。或者，所述参数获取模块720，用于响应于所述第i个图像帧属于目标单一画面场景的概率大于阈值且所述目标单一画面场景为至少两种，则确定所述第i个图像帧对应的画面场景为复杂画面场景，所述复杂画面场景是至少两种所述目标单一画面场景所组合出的画面场景。

在一个可选的实施例中，所述参数获取模块720，用于在所述第i个图像帧对应的画面场景为所述目标单一画面场景的情况下，基于第一对应关系确定与所述目标单一画面场景对应的帧级别图像增强参数；其中，所述第一对应关系包括不同单一画面场景和帧级别图像增强参数之间的对应关系。

在一个可选的实施例中，所述参数获取模块720，用于在所述第i个图像帧对应的画面场景为所述复杂画面场景的情况下，基于第二对应关系确定与所述复杂画面场景对应的帧级别图像增强参数；其中，所述第二对应关系包括不同复杂画面场景和帧级别图像增强参数之间的对应关系。

在一个可选的实施例中，所述参数获取模块720，用于在所述第i个图像帧对应的画面场景为所述复杂画面场景的情况下，确定所述复杂画面场景中的至少两个所述目标单一画面场景；在所述第i个图像帧中，确定至少两个所述目标单一画面场景各自对应的局部区域；基于所述第二对应关系确定所述局部区域对应的所述帧级别图像增强参数。

在一个可选的实施例中，参数获取模块720，用于确定与所述第i个图像帧对应的画面场景对应的至少两个候选帧级别图像增强参数组；从至少两个候选帧级别图像增强参数组中，确定出与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数。

在一个可选的实施例中，所述装置还包括屏幕亮度调节模块，用于在播放所述视频的过程中，获取环境光亮度；从第一映射关系中，获取所述环境光亮度对应的第二显示屏亮度；将显示屏的亮度从第一显示屏亮度调整为所述第二显示屏亮度。

在一个可选的实施例中，所述装置中涉及的，在所述环境光亮度大于第一阈值P1的情况下，所述第一映射关系是凸函数类型函数；在所述环境光亮度小于第一阈值P1的情况下，所述第一映射关系是凹函数类型函数；或，在所述环境光亮度大于第三阈值P3的情况下，所述第一映射关系是凸函数类型函数；在所述环境光亮度小于第二阈值P2的情况下，所述第一映射关系是凹函数类型函数，其中，第三阈值P3大于第二阈值P2。

综上所述，本实施例能够在对视频进行图像增强时，分别根据每一个图像帧所属的画面场景，得到该图像帧对应的帧级别图像增强参数，在完成对每一个图像帧的图像增强后，得到图像增强后的视频。随后，在图像增强后的视频播放时，能够按照预设的映射关系确定当前环境光亮度对应的屏幕亮度，从而将终端屏幕亮度调整到映射关系对应的亮度，使得手机能够以合适的亮度播放被图像增强后的视频，避免了通常的自动调亮度方案调节效果差，不利于图像增强后的视频的展示效果。

本申请实施例还提供了一种计算机可读介质，该计算机可读介质存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上各个实施例所述的视频增强方法。

需要说明的是：上述实施例提供的视频增强装置在执行视频增强方法时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将设备的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的视频增强装置与视频增强方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。

上述本申请实施例序号仅仅为了描述，不代表实施例的优劣。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上所述仅为本申请的能够实现的示例性的实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (12)

1.一种视频增强方法，其特征在于，所述方法包括：

获取视频，所述视频包括n个图像帧，n为正整数；

根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，不同图像帧对应的所述帧级别图像增强参数互相独立；

根据所述n个图像帧对应的帧级别图像增强参数，分别对所述n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的所述视频。

2.根据权利要求1所述的方法，其特征在于，所述根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，包括：

针对所述n个图像帧中的第i个图像帧，调用AI模型识别所述第i个图像帧分别属于m种单一画面场景的概率，i为不大于n的整数；

根据所述第i个图像帧分别属于m种单一画面场景的概率，确定所述第i个图像帧对应的画面场景；

确定与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第i个图像帧分别属于m种单一画面场景的概率，确定所述第i个图像帧对应的画面场景，包括：

响应于所述第i个图像帧属于目标单一画面场景的概率大于阈值且所述目标单一画面场景为一种，则确定所述第i个图像帧对应的画面场景为所述目标单一画面场景；

响应于所述第i个图像帧属于目标单一画面场景的概率大于阈值且所述目标单一画面场景为至少两种，则确定所述第i个图像帧对应的画面场景为复杂画面场景，所述复杂画面场景是至少两种所述目标单一画面场景所组合出的画面场景。

4.根据权利要求3所述的方法，其特征在于，所述确定与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数，包括：

在所述第i个图像帧对应的画面场景为所述目标单一画面场景的情况下，基于第一对应关系确定与所述目标单一画面场景对应的帧级别图像增强参数；

其中，所述第一对应关系包括不同单一画面场景和帧级别图像增强参数之间的对应关系。

5.根据权利要求3所述的方法，其特征在于，所述确定与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数，包括：

在所述第i个图像帧对应的画面场景为所述复杂画面场景的情况下，基于第二对应关系确定与所述复杂画面场景对应的帧级别图像增强参数；

其中，所述第二对应关系包括不同复杂画面场景和帧级别图像增强参数之间的对应关系。

6.根据权利要求5所述的方法，其特征在于，所述在所述第i个图像帧对应的画面场景为所述复杂画面场景的情况下，基于第二对应关系确定与所述复杂画面场景对应的帧级别图像增强参数，包括：

在所述第i个图像帧对应的画面场景为所述复杂画面场景的情况下，确定所述复杂画面场景中的至少两个所述目标单一画面场景；

在所述第i个图像帧中，确定至少两个所述目标单一画面场景各自对应的局部区域；

基于所述第二对应关系确定所述局部区域对应的所述帧级别图像增强参数。

7.根据权利要求2至6任一所述的方法，其特征在于，所述确定与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数，包括：

确定与所述第i个图像帧对应的画面场景对应的至少两个候选帧级别图像增强参数组；

从至少两个候选帧级别图像增强参数组中，确定出与所述第i个图像帧对应的画面场景对应的帧级别图像增强参数。

8.根据权利要求1至6任一所述的方法，其特征在于，所述方法还包括：

在播放所述视频的过程中，获取环境光亮度；

从第一映射关系中，获取所述环境光亮度对应的第二显示屏亮度；

将显示屏的亮度从第一显示屏亮度调整为所述第二显示屏亮度。

9.根据权利要求8所述的方法，其特征在于，所述方法还包括：

在所述环境光亮度大于第一阈值P1的情况下，所述第一映射关系是凸函数类型函数；

在所述环境光亮度小于第一阈值P1的情况下，所述第一映射关系是凹函数类型函数；

或，

在所述环境光亮度大于第三阈值P3的情况下，所述第一映射关系是凸函数类型函数；

在所述环境光亮度小于第二阈值P2的情况下，所述第一映射关系是凹函数类型函数，其中，第三阈值P3大于第二阈值P2。

10.一种视频增强装置，其特征在于，所述装置包括：

视频获取模块，用于获取视频，所述视频包括n个图像帧，n为正整数；

参数获取模块，用于根据所述n个图像帧对应的画面场景，获取所述n个图像帧对应的帧级别图像增强参数，不同图像帧对应的所述帧级别图像增强参数互相独立；

视频增强模块，用于根据所述n个图像帧对应的帧级别图像增强参数，分别对所述n个图像帧中的每一个图像帧进行图像增强，得到图像增强后的所述视频。

11.一种终端，其特征在于，所述终端包括处理器、和与所述处理器相连的存储器，以及存储在所述存储器上的程序指令，所述处理器执行所述程序指令时实现如权利要求1至9任一所述的视频增强方法。

12.一种计算机可读存储介质，所述存储介质中存储有程序指令，其特征在于，所述程序指令被处理器执行时实现如权利要求1至9任一所述的视频增强方法。

Images