CN114596208A - 视频中图像的处理方法、装置、存储介质和处理器 - Google Patents

Abstract

本发明公开了一种视频中图像的处理方法、装置、存储介质和处理器。其中，该方法包括：展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据；识别出原始图像中的高频层图像；对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行融合，得到初始结果图像。本发明解决了视频中的对象在进行图像处理后，画面存在清晰度差的技术问题。

Description

视频中图像的处理方法、装置、存储介质和处理器

技术领域

本发明涉及图像处理领域，具体而言，涉及一种视频中图像的处理方法、装置、 存储介质和处理器。

背景技术

目前，针对视频中的目标对象，允许采用优化工具对视频中的目标对象的面部进行磨皮。

但是，优化工具在对目标对象的面部执行磨皮的过程中，由于视频场景中的耗时和功耗的限制，多是选择简单的滤波操作，没有祛斑祛痘功能，对皮肤的细节和背景 保护也不够，从而会损失整个画面的信息，导致进行图像处理后的画面存在清晰度差 的技术问题。

针对上述的视频中的对象在进行图像处理后，画面存在清晰度差的技术问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种视频中图像的处理方法、装置、存储介质和处理器，以至少解决视频中的对象在进行图像处理后，画面存在清晰度差的技术问题。

根据本发明实施例的一个方面，提供了一种视频中图像的处理方法。该方法可以包括：展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数 据；识别出原始图像中的高频层图像；对高频层图像进行强光融合；将预处理图像与 原始图像进行融合，得到初始结果图像。

根据本发明实施例的另一方面，还提供了另一种视频中图像的处理方法。该方法可以包括：在客户端的显示界面上展示待处理的原始图像，其中，原始图像为播放视 频过程中采集到的多媒体数据；对原始图像进行强光融合，并基于生成的强光融合结 果获取原始图像的预处理图像；将预处理图像与原始图像进行融合，得到初始结果图 像；对初始结果图像中的皮肤蒙板进行图像锐化，生成目标图像，其中，基于原始图 像中脸部的关键信息，生成脸部皮肤的皮肤蒙板。

根据本发明实施例的另一方面，还提供了另一种视频中图像的处理方法。该方法可以包括：在客户端的显示界面上展示待处理的原始图像，其中，原始图像为播放视 频过程中采集到的多媒体数据；响应客户端接收到的图像处理指令，在客户端的显示 界面上显示对原始图像执行图像处理指令的图像处理结果，其中，图像处理指令用于 对原始图像的高频层图像进行强光融合；将图像处理结果与原始图像进行融合，并在 显示界面上渲染融合得到的初始结果图像。

根据本发明实施例的另一方面，还提供了另一种视频中图像的处理方法。该方法可以包括：在显示界面中显示视频中待处理的原始图像；响应于对原始图像的识别操 作，确定出原始图像中的高频层图像和低频层图像；对高频层图像进行强光融合，并 基于生成的强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行 融合；在显示界面中渲染融合得到的初始结果图像。

根据本发明实施例的另一方面，还提供了一种视频中图像的处理装置。该装置可以包括：第一展示单元，用于展示待处理的原始图像，其中，原始图像为播放视频过 程中采集到的多媒体数据；识别单元，用于识别出原始图像中的高频层图像；第一处 理单元，用于对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像 的预处理图像；第一融合单元，用于将预处理图像与原始图像进行融合，得到初始结 果图像。

根据本发明实施例的另一方面，还提供了另一种视频中图像的处理装置。该装置还可以包括：第二展示单元，用于在客户端的显示界面上展示待处理的原始图像，其 中，原始图像为播放视频过程中采集到的多媒体数据；第二处理单元，用于对原始图 像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像；第二融合 单元，用于将预处理图像与原始图像进行融合，得到初始结果图像第三处理单元，用 于对强光融合结果进行平滑阶梯滤波，生成滤波图像，并将初始结果图像中的暗区域 进行提亮处理，生成二次提亮图像；第三融合单元，用于将初始结果图像、滤波图像 和二次提亮图像进行融合，生成二次结果图像，并使用皮肤蒙板对二次结果图像，其 中，基于原始图像中脸部的关键信息，生成脸部皮肤的皮肤蒙板。

根据本发明实施例的另一方面，还提供了另一种视频中图像的处理装置。该装置还可以包括：第三展示单元，用于在客户端的显示界面上展示待处理的原始图像，其 中，原始图像为播放视频过程中采集到的多媒体数据；第一显示单元，用于响应客户 端接收到的图像处理指令，在客户端的显示界面上显示对原始图像执行图像处理指令 的图像处理结果，其中，图像处理指令用于对原始图像的高频层图像进行强光融合； 第四融合单元，用于将图像处理结果与原始图像进行融合，并在显示界面上渲染融合 得到的初始结果图像。

根据本发明实施例的另一方面，还提供了另一种视频中图像的处理装置。该装置还可以包括：第二显示单元，用于在显示界面中显示视频中待处理的原始图像；确定 单元，用于响应于对原始图像的识别操作，确定出原始图像中的高频层图像和低频层 图像；第四处理单元，用于对高频层图像进行强光融合，并基于生成的强光融合结果 获取原始图像的预处理图像；第五融合单元，用于将预处理图像与原始图像进行融合； 渲染单元，用于在显示界面中渲染融合得到的初始结果图像。

根据本发明实施例的另一方面，还提供了一种计算机可读存储介质。该计算机可读存储介质包括存储的程序，其中，在程序被处理器运行时控制计算机可读存储介质 所在设备执行本发明实施例的视频中图像的处理方法。

根据本发明实施例的另一方面，还提供了一种处理器。该处理器用于运行程序，其中，程序被处理器运行时执行本发明实施例的视频中图像的处理方法。

根据本发明实施例的另一方面，还提供了一种视频中图像的处理系统。该视频中图像的处理系统包括：处理器；存储器，与处理器相连接，用于为处理器提供处理以 下处理步骤的指令：展示待处理的原始图像，其中，原始图像为播放视频过程中采集 到的多媒体数据；识别出原始图像中的高频层图像；对高频层图像进行强光融合，并 基于生成的强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行 融合，得到初始结果图像。

在该实施例的视频中图像的处理方法中，展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据；识别出原始图像中的高频层图像；对高频 层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像；将预 处理图像与原始图像进行融合，得到初始结果图像。本申请从原始图像中识别出高频 层图像，对高频层图像进行中识别出，对原始图像进行提亮处理，进而与原始图像进 行融合，以此来实现在对原始图像进行磨皮的同时保留细节和颜色均匀，画面显得干 净通透，提高图像的质感和清晰度，避免了优化工具在执行磨皮的过程中会损失整个 画面的信息，从而解决了视频中的对象在进行图像处理后，画面存在清晰度差的技术 问题，达到了视频中的对象在进行图像处理后，提高画面的清晰度的技术效果。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图 中：

图1是根据本发明实施例的一种用于实现视频中图像的处理方法的计算机终端(或移动设备)的硬件结构框图；

图2是根据本发明实施例的一种视频中图像的处理方法的流程图；

图3是根据本发明实施例的另一种视频中图像的处理方法的流程图；

图4是根据本发明实施例的另一种视频中图像的处理方法的流程图；

图5是根据本发明实施例的一种视频中图像的处理方法的流程图；

图6是根据本发明实施例的一种适用于实时视频流的磨皮算法的示意图；

图7是根据本发明实施例的一种视频中图像的处理方法的场景示意图；

图8是根据本发明实施例的另一种视频中图像的处理方法的场景示意图；

图9是根据本发明实施例的一种视频中图像的处理结果的对比示意图；

图10是根据本发明实施例的一种视频中图像的处理装置的示意图；

图11是根据本发明实施例的另一种视频中图像的处理装置的示意图；

图12是根据本发明实施例的另一种视频中图像的处理装置的示意图；

图13是根据本发明实施例的另一种视频中图像的处理装置的示意图；

图14是根据本发明实施例的一种计算机终端的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例 仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领 域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于 本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二” 等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里 图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形， 意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、 产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或 对于这些过程、方法、产品或设备固有的其它步骤或单元。

首先，在对本申请实施例进行描述的过程中出现的部分名词或术语适用于如下解释：

保边滤波器(Edge Preserving Filter)，为在滤波过程中能够有效地保留图像中的边 缘信息的一类特殊滤波器；

高反差滤波器，为一种基于高反差保留的滤波磨皮算法；

高斯滤波，为一种线性平滑滤波，适用于消除高斯噪声，应用于图像处理的减噪过程；

皮肤蒙板，也即，皮肤区域蒙板，决定了皮肤显示的区域；

皮肤暗区域，是指皮肤上的痘痘、色斑、毛孔等皮肤瑕疵点所在的区域，这些区 域在像素值上表现的比周围像素值低；

对图像进行曲线调整，为图像亮度调整的一种方式。

实施例1

根据本发明实施例，还提供了一种视频中图像的处理方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执 行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处 的顺序执行所示出或描述的步骤。

本申请实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。图1是根据本发明实施例的一种用于实现视频中图像的处理方法的计 算机终端(或移动设备)的硬件结构框图。如图1所示，计算机终端10(或移动设备 10)可以包括一个或多个(图中采用102a、102b，……，102n来示出)处理器102(处 理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、 用于存储数据的存储器104、以及用于通信功能的传输模块106。除此以外，还可以包 括：显示器、输入/输出接口(I/O接口)、通用串行总线(USB)端口(可以作为I/O 接口的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员 可以理解，图1所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如， 计算机终端10还可包括比图1中所示更多或者更少的组件，或者具有与图1所示不同 的配置。

应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常 可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、 固件或其他任意组合。此外，数据处理电路可为单个独立的处理模块，或全部或部分 的结合到计算机终端10(或移动设备)中的其他元件中的任意一个内。如本申请实施 例中所涉及到的，该数据处理电路作为一种处理器控制(例如与接口连接的可变电阻 终端路径的选择)。

存储器104可用于存储应用软件的软件程序以及模块，如本发明实施例中的视频中图像的处理方法对应的程序指令/数据存储装置，处理器102通过运行存储在存储器 104内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的应 用程序的视频中图像的处理方法。存储器104可包括高速随机存储器，还可包括非易 失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。 在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些 远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、 企业内部网、局域网、移动通信网及其组合。

传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个 网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连 从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(Radio Frequency， RF)模块，其用于通过无线方式与互联网进行通讯。

显示器可以例如触摸屏式的液晶显示器(LCD)，该液晶显示器可使得用户能够与计算机终端10(或移动设备)的用户界面进行交互。

此处需要说明的是，在一些可选实施例中，上述图1所示的计算机设备(或移动 设备)可以包括硬件元件(包括电路)、软件元件(包括存储在计算机可读介质上的计 算机代码)、或硬件元件和软件元件两者的结合。应当指出的是，图1仅为特定具体实 例的一个实例，并且旨在示出可存在于上述计算机设备(或移动设备)中的部件的类 型。

在图1所示的运行环境下，本申请提供了如图2所示的视频中图像的处理方法。 需要说明的是，该实施例的视频中图像的处理方法可以由图1所示实施例的移动终端 执行。

图2是根据本发明实施例的一种视频中图像的处理方法的流程图。如图2所示， 该方法可以包括以下步骤：

步骤S202，展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据。

在本发明上述步骤S202提供的技术方案中，待处理的原始图像可以包括目标对象的待处理的人像，比如，该人像为面部图像，可以在客户端的显示界面上展示待处理 的原始图像。该原始图像可以为在视频场景中，在客户端播放视频的过程中所采集到 的多媒体数据，比如，该多媒体数据包括视频图像数据，其中，视频可以为实时视频 流，视频场景可以为在客户端上播放直播视频、播放短视频、录制视频等多媒体数据 的场景，此处不做具体限制。

步骤S204，识别出原始图像中的高频层图像。

在本发明上述步骤S204提供的技术方案中，在展示待处理的原始图像之后，可以识别出原始图像中的高频层图像。

在该实施例中，可以对原始图像进行分层，识别出原始图像中的高频层图像，该高频层图像可以为原始图像中的高频成分的图像。

可选地，该实施例可以识别出原始图像中的高频成分的图像，通过该高频成分的图像进一步形成上述高频层图像。

步骤S206，对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像。

在本发明上述步骤S206提供的技术方案中，在识别出原始图像中的高频层图像之后，对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理 图像。

在该实施例中，可以对高频层图像进行强光融合，以对高频层图像中的瑕疵进行有针对性地滤波处理，从而保留高频层图像中的细节特征，其中，瑕疵可以为人脸上 的斑、痘等，细节特征可以为皮肤细节，从而得到滤波处理后的图像，该滤波处理后 的图像可以为强光融合结果，进而基于生成的强光融合结果获取原始图像的预处理图 像。

可选地，该实施例通过(A<0.5f)？(2*A*A):(1.0f-2*(1.0f-A)*(1.0f-A))对高频层图像进 行强光融合，其中，A可以用于表示像素值，f可以用于表示在进行强光融合时与高频 层图像对应的数据，对高频层图像进行强光融合的结果可以通过mask2进行表示。

步骤S208，将预处理图像与原始图像进行融合，得到初始结果图像。

在本发明上述步骤S208提供的技术方案中，在对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像之后，可以将预处理图像与原始图 像进行融合，得到初始结果图像。

该实施例在将预处理图像与原始图像进行融合时，可以是通过一定的参数将预处理图像与原始图像进行融合，比如，通过一定的参数将预处理图像的像素和原始图像 的像素进行融合，得到初始结果图像的像素，该初始结果图像可以通过ret1进行表示， 其中，上述一定的参数可以为磨皮力度参数。可选地，初始结果图像的像素 piexlC＝piexlA*alpha+piexlB*(1.0-alpha)，其中，piexlA可以用于表示预处理图像的像 素，piexlB可以用于表示原始图像的像素，alpha大小在[0，1]之间。

通过本申请上述步骤S202至步骤S208，展示待处理的原始图像，其中，原始图 像为播放视频过程中采集到的多媒体数据；识别出原始图像中的高频层图像；对高频 层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像；将预 处理图像与原始图像进行融合，得到初始结果图像。也就是说，本申请从原始图像中 识别出高频层图像，对高频层图像进行强光融合，对原始图像进行提亮处理，进而与 原始图像进行融合，以此来实现在对原始图像进行磨皮的同时保留细节和颜色均匀， 画面显得干净通透，提高图像的质感和清晰度，避免了优化工具在执行磨皮的过程中 会损失整个画面的信息，从而解决了视频中的对象在进行图像处理后，画面存在清晰 度差的技术问题，达到了视频中的对象在进行图像处理后，提高画面的清晰度的技术 效果。

下面对该实施例的上述方法进行进一步介绍。

作为一种可选的实施方式，步骤S206，基于生成的强光融合结果获取原始图像的预处理图像，包括：对原始图像进行提亮处理，得到一次提亮图像；基于强光融合结 果和一次提亮图像生成预处理图像。

可选地，除了对高频层图像进行强光融合之外，还可以对原始图像进行提亮处理，可以是对原始图像进行曲线调整，对曲线调整后的原始图像进行提亮处理，得到一次 提亮图像，比如，对原始图像的暗区域的像素值通过曲线来拉伸的方式来达到去痘和 净肤的效果，得到一次提亮图像。该一次提亮图像可以通过lut1(image)进行表示， 从而通过上述方法可以保留皮肤细节，并且保证肤色均匀，使得皮肤显得干净通透。 其中，曲线可以为S曲线，曲线调整是图像亮度调整的一种方式。

该实施例可以将强光融合后的图像和一次提亮图像确定为原始图像的预处理图像。

作为一种可选的实施方式，对原始图像进行提亮处理，得到一次提亮图像，包括：对原始图像的低频层图像进行提亮处理，得到一次提亮图像。

在该实施例中，在实现对原始图像进行提亮处理时，可以是对从原始图像中识别出来的低频层图像进行提亮处理，得到一次提亮图像，可以是对低频层图像进行曲线 调整，以达到对低频层图像进行提亮处理的目的，以此来实现在进行磨皮的同时保留 皮肤细节和肤色均匀。

作为一种可选的实施方式，步骤S204，识别出原始图像中的高频层图像，包括： 对原始图像的G通道灰度图进行高斯滤波，得到原始图像的低频层图像；基于G通道 灰度图和低频层图像，计算高反差层，得到高频层图像。

在该实施例中，在实现识别出原始图像中的高频层图像时，可以是先获取原始图像的G通道灰度图，该G通道灰度图也可以称为G通道图像，对其进行高斯滤波， 得到的滤波结果为低频层图像，可以通过gauss(G)进行表示。在对原始图像的G通 道灰度图进行高斯滤波，得到原始图像的低频层图像之后，可以基于G通道灰度图和 低频层图像，计算得到高反差层，从而得到高频层图像。可选地，该实施例的高反差 层为G通道灰度图与低频层图像二者之间的差与128的和，也即，高反差层hp＝G-gauss (G)+128。

作为一种可选的实施方式，步骤S206，对高频层图像进行强光融合，包括：对高 频层图像进行强光融合，得到对高频层图像中的瑕疵进行滤波后的滤波结果。

在该实施例中，对高频层图像(高反差层)进行强光融合，可以得到对高频层图 像中的瑕疵进行有针对性的滤波后的滤波结果。

作为一种可选的实施方式，在步骤S208，将预处理图像与原始图像进行融合的过程中，基于接收到的参数来调节初始结果图像的级别。

该实施例可以在获取待处理的原始图像时，接收参数，该参数可以是磨皮力度参数，比如，通过alpha进行表示，从而在对预处理图像与原始图像进行融合的过程中， 可以是利用接收到的上述参数对预处理图像与原始图像进行融合，得到初始结果图像， 其中，接收到的上述参数影响初始结果图像的级别，从而在对预处理图像与原始图像 进行融合的过程中，可以基于接收到的上述参数来调节上述初始结果图像的级别，该 级别也可以称为磨皮级别。

作为一种可选的实施方式，在步骤S208，得到初始结果图像之后，该方法还包括：对强光融合结果进行平滑阶梯滤波，生成滤波图像；将初始结果图像中的暗区域进行 提亮处理，生成二次提亮图像；将初始结果图像、滤波图像和二次提亮图像进行融合， 生成二次结果图像。

在该实施例中，在得到初始结果图像之后，可以对生成的强光融合结果进行平滑阶梯滤波，比如，对mask2进行平滑阶梯滤波，从而生成滤波图像，该滤波图像可以 通过mask3进行表示；还可以确定初始结果图像中的暗区域，然后对该暗区域进行提 亮处理，比如，对该暗区域进行曲线调整，可以是对暗区域进行曲线拉伸，也即，对 暗区域的图像逐像素值按曲线公式计算，得到计算后的像素值，从而通过计算后的像 素值生成二次提亮图像，该二次提亮图像可以同时通过lut2(ret1)进行表示，可以实 现脸部祛痘和达到水润效果。该实施例在生成滤波图像、二次提亮图像之后，可以将 初始结果图像、滤波图像和二次提亮图像进行融合，可以是通过一定的参数对初始结 果图像的像素、滤波图像的像素和二次提亮图像的像素进行融合，从而生成二次结果 图像，该二次结果图像可以通过merge进行表示。

作为一种可选的实施方式，在步骤S202，展示待处理的原始图像之后，该方法还包括：基于脸部特征，从原始图像中检测出脸部关键信息；基于脸部关键信息，生成 脸部皮肤的皮肤蒙板。

在该实施例中，在展示待处理的原始图像之后，可以是从原始图像中确定出脸部特征，然后基于该脸部特征从原始图像中检测出脸部关键信息，也即，对原始图像进 行人脸检测，上述脸部关键信息可以为进行人脸检测所得到的人脸关键点，进而基于 脸部关键信息生成脸部皮肤的皮肤蒙板，该皮肤蒙板可以为人脸皮肤区域蒙板mask1， 通过一定的参数将预处理图像的像素、原始图像的像素和区域蒙板进行融合，从而得 到初始结果图像的像素。

作为一种可选的实施方式，在生成二次结果图像之后，该方法还包括：使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像；输出目标图像。

在该实施例中，在生成二次结果图像之后，可以是用皮肤蒙板对二次结果图像进行图像锐化，而皮肤蒙板和原始图像不需要锐化，从而生成目标图像，进而输出目标 图像，该目标图像可以通过out进行表示。

作为一种可选的实施方式，使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像，包括：使用皮肤蒙板和预先设定的不同调节参数对二次结果图像中的人脸区 域进行图像锐化，生成目标图像，其中，二次结果图像中的背景区域保持不变，或者 对背景区域的锐化级别低于对人脸区域的锐化级别。

在该实施例中，在使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像时，可以使用皮肤蒙板和预先设定的不同调节参数对二次结果图像中的人脸区域进行图像 锐化，其中，预先设定的不同调节参数可以为磨皮力度参数，通过其对二次结果图像 中的人脸区域进行图像锐化，而二次结果图像中的背景区域保持不变，或者对背景区 域的锐化级别低于对人脸区域的锐化级别，也即，背景区域保持不变或者轻微锐化， 这样可以补偿因滤波引入的凸显更模糊的问题，从而达到使得画面更清晰的目的。

在该实施例中，在进行锐化处理时，可以是通过叠加梯度图的方式来进行图像锐化，其中，梯度图是中心像素和周围像素的差值；该实施例对图像和人脸分别做锐化， 此处可以通过皮肤蒙板来区分人脸区域和背景，分别使用不同的磨皮力度参数或方式 来对其做锐化处理。

本发明实施例还提供了另一种视频中图像的处理方法。

图3是根据本发明实施例的另一种视频中图像的处理方法的流程图。如图3所示，该方法可以包括：

步骤S302，在客户端的显示界面上展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据。

在本发明上述步骤S302提供的技术方案中，获取待处理的原始图像，比如，通过图像采集设备获取待处理的原始图像，可以在客户端的显示界面上进一步展示待处理 的原始图像，该待处理的原始图像可以包括目标对象的待处理的人像，比如，该人像 为面部图像。该原始图像可以为在视频场景中，在客户端播放视频的过程中所采集到 的多媒体数据，比如，该多媒体数据包括视频图像数据，其中，视频场景可以为在客 户端上播放直播视频、播放短视频、录制视频等多媒体数据的场景。

步骤S304，对原始图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像。

在本发明上述步骤S304提供的技术方案中，在客户端的显示界面上展示待处理的原始图像之后，可以对原始图像进行强光融合，并基于生成的强光融合结果获取原始 图像的预处理图像。

在该实施例中，可以对原始图像进行分层，识别出原始图像中的高频层图像，该高频层图像可以为原始图像中的高频成分的图像。该实施例可以对上述高频层图像进 行强光融合，以对高频层图像中的瑕疵进行有针对性地滤波处理，保留高频层图像中 的细节特征，其中，瑕疵为人脸上的斑、痘等，细节特征可以为皮肤细节，进而基于 生成的强光融合结果获取原始图像的预处理图像。

可选地，该实施例还可以进一步对上述原始图像进行提亮处理，可以是对原始图像进行曲线调整，对曲线调整后的原始图像进行提亮处理，得到提亮处理后的图像， 从而可以保留皮肤细节，并且保证肤色均匀，使得皮肤显得干净通透。

该实施例可以将强光融合后的图像和提亮处理后的图像确定为原始图像的预处理 图像。

步骤S306，将预处理图像与原始图像进行融合，得到初始结果图像。

在本发明上述步骤S306提供的技术方案中，在对原始图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像之后，可以将预处理图像与原始图像 进行融合，得到初始结果图像。

该实施例可以是通过一定的参数将预处理图像的像素与原始图像的像素进行融合， 可以是通过一定的参数将预处理图像的像素和原始图像的像素进行融合，得到初始结果图像的像素。

步骤S308，对强光融合结果进行平滑阶梯滤波，生成滤波图像，并将初始结果图像中的暗区域进行提亮处理，生成二次提亮图像。

在本发明上述步骤S308提供的技术方案中，在得到初始结果图像之后，可以对生成的强光融合结果进行平滑阶梯滤波，从而生成滤波图像；还可以确定初始结果图像 中的暗区域，然后对该暗区域进行提亮处理，比如，对该暗区域进行曲线调整，可以 是对暗区域进行曲线拉伸，得到计算后的像素值，从而通过计算后的像素值生成二次 提亮图像，可以实现脸部祛痘和达到水润效果。

步骤S310，将初始结果图像、滤波图像和二次提亮图像进行融合，生成二次结果图像，并使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像。

在本发明上述步骤S310提供的技术方案中，在将初始结果图像中的暗区域进行提亮处理，生成二次提亮图像之后，可以将初始结果图像、滤波图像和二次提亮图像进 行融合，生成二次结果图像，并使用皮肤蒙板对二次结果图像进行图像锐化，生成目 标图像，其中，基于原始图像中脸部的关键信息，生成脸部皮肤的皮肤蒙板。在生成 二次结果图像之后，可以是用上述皮肤蒙板对二次结果图像进行图像锐化，而皮肤蒙 板和原始图像不需要锐化，从而生成目标图像，进而输出目标图像。

本发明实施例还提供了另一种视频中图像的处理方法。

图4是根据本发明实施例的另一种视频中图像的处理方法的流程图。如图4所示，该方法可以包括以下步骤：

步骤S402，在客户端的显示界面上展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据。

在本发明上述步骤S402提供的技术方案中，通过图像采集设备获取待处理的原始图像，进行在客户端的显示界面上展示待处理的原始图像，该待处理的原始图像可以 包括目标对象的待处理的人像，比如，该人像为面部图像。该原始图像可以为在视频 场景中，在客户端播放视频的过程中所采集到的多媒体数据。

步骤S404，响应客户端接收到的图像处理指令，在客户端的显示界面上显示对原始图像执行图像处理指令的图像处理结果。

在本发明上述步骤S404提供的技术方案中，在客户端的显示界面上展示待处理的原始图像之后，响应客户端接收到的图像处理指令，在客户端的显示界面上显示对原 始图像执行图像处理指令的图像处理结果，其中，图像处理指令用于对原始图像的高 频层图像进行强光融合，还可以对原始图像进行提亮处理。

在该实施例中，用户可以在客户端的显示界面上触发图像处理指令，客户端接收该图像处理指令，进而响应该图像处理指令，对原始图像的高频层图像进行强光融合， 还可以进一步对原始图像进行提亮处理。

该实施例对高频层图像进行强光融合，以实现对高频层图像中的瑕疵进行有针对性地滤波处理，从而保留高频层图像中的细节特征，得到滤波处理后的图像。可选地， 该实施例对原始图像进行提亮处理，可以是对原始图像进行曲线调整，对曲线调整后 原始图像进行提亮处理，得到提亮处理后的图像，从而可以保留皮肤细节，并且保证 肤色均匀，使得皮肤显得干净通透。

该实施例将强光融合后的图像和提亮处理后的图像确定为原始图像的预处理图像， 该预处理图像可以为对原始图像执行图像处理指令的图像处理结果，进而将其显示在客户端的显示界面上。

步骤S406，将图像处理结果与原始图像进行融合，并在显示界面上渲染融合得到的初始结果图像。

在本发明上述步骤S406提供的技术方案中，在客户端的显示界面上显示对原始图像执行图像处理指令的图像处理结果之后，可以将图像处理结果与原始图像进行融合， 并在显示界面上渲染融合得到的初始结果图像。

该实施例在将图像处理结果与原始图像进行融合时，可以是通过一定的参数将图像处理结果与原始图像进行融合，可以是通过一定的参数将图像处理结果的像素和原 始图像的像素进行融合，得到初始结果图像的像素，进而对初始结果图像进行渲染， 并在客户端的显示界面上显示对初始结果图像进行渲染所得到的图像结果。

本发明实施例还提供了另一种视频中图像的处理方法。

图5是根据本发明实施例的一种视频中图像的处理方法的流程图。如图5所示， 该方法可以包括以下步骤：

步骤S502，在显示界面中显示视频中待处理的原始图像。

在本发明上述步骤S502提供的技术方案中，视频可以为在客户端上播放的直播视频、播放的短视频、录制的视频等。该实施例可以从视频中获取待处理的原始图像， 该待处理的原始图像可以包括目标对象的待处理的人像，比如，该人像为面部图像， 进而在客户端的显示界面上显示视频中待处理的原始图像。

步骤S504，响应于对原始图像的识别操作，确定出原始图像中的高频层图像。

在本发明上述步骤S504提供的技术方案中，在显示界面中显示视频中待处理的原始图像之后，可以响应于对原始图像的识别操作，确定出原始图像中的高频层图像。

在该实施例中，对原始图像进行磨皮操作，可以为用户在客户端的显示界面上针对原始图像所进行的与磨皮相关的操作，磨皮操作可以包括识别操作，可以响应于对 原始图像的识别操作，识别出原始图像中的高频层图像。

可选地，该实施例可以识别出原始图像中的高频成分的图像，通过该高频成分的图像进一步形成高频层图像。

步骤S506，对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像。

在本发明上述步骤S506提供的技术方案中，在确定出原始图像中的高频层图像和低频层图像之后，可以对高频层图像进行强光融合，并基于生成的强光融合结果获取 原始图像的预处理图像。

在该实施例中，对高频层图像进行强光融合，以实现对高频层图像中的瑕疵进行有针对性地滤波处理，从而保留高频层图像中的细节特征，并基于生成的强光融合结 果获取原始图像的预处理图像。

可选地，该实施例还进一步对原始图像进行提亮处理，可以是对原始图像进行曲线调整，对曲线调整后的原始图像进行提亮处理，得到提亮处理后的图像，从而可以 保留皮肤细节，并且保证肤色均匀，使得皮肤显得干净通透。

该实施例可以将强光融合后的图像和提亮处理后的图像确定为原始图像的预处理 图像。

步骤S508，将预处理图像与原始图像进行融合。

在本发明上述步骤S508提供的技术方案中，在对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像之后，可以将预处理图像与原始图 像进行融合。

该实施例在将预处理图像与原始图像进行融合时，可以是通过一定的参数将预处理图像与原始图像进行融合，得到初始结果图像，可以是通过一定的参数将预处理图 像的像素和原始图像的像素进行融合，得到初始结果图像的像素，其中，一定的参数 可以为磨皮力度参数。

步骤S510，在显示界面中渲染融合得到的初始结果图像。

在本发明上述步骤S510提供的技术方案中，在将预处理图像与原始图像进行融合之后，可以在显示界面中渲染融合得到的初始结果图像。

在该实施例中，可以对初始结果图像进行渲染，并在客户端的显示界面上显示对初始结果图像进行渲染所得到的图像结果，也即，显示目标图像。

在该实施例中，在对初始结果图像进行渲染时，可以是将初始结果图像中的暗区域进行提亮处理，生成二次提亮图像，对强光融合结果进行平滑阶梯滤波，生成滤波 图像，然后将初始结果图像、滤波图像和二次提亮图像进行融合，并使用皮肤蒙板对 二次结果图像进行图像锐化，生成目标图像。

该实施例的视频中图像的处理方法可以适用于人像美化，应用在直播场景、会议场景、移动端相机场景、短视频应用场景中，将原始图像分为高频层图像和低频层图 像，可以对高频层图像中的瑕疵进行针对性的滤波处理，对低频层图像进行曲线调整， 以此来做到磨皮的同时保留皮肤细节和肤色均匀，使得滤波之后皮肤显得干净通透； 该实施例可以对皮肤里的暗区域进行检测，结合曲线调整来实现祛痘和水润效果；该 实施例还可以结合皮肤蒙板对原始图像和初始结果图像分别做锐化处理，补偿因滤波 引入的凸显更模糊问题，使画面更清晰，避免了优化工具在执行磨皮的过程中会损失 整个画面的信息，从而解决了视频中的对象在进行图像处理后，画面存在清晰度差的 技术问题，达到了视频中的对象在进行图像处理后，提高画面的清晰度的技术效果。

实施例2

下面结合优选的实施方式对本发明的技术方案进行举例说明。

随着直播和短视频行业的兴起，人像美化技术得到了广泛的应用，人像美化中最主要的功能是磨皮。但是，视频场景中由于耗时和功耗的限制，磨皮多是选择简单的 滤波操作，比如，使用保边滤波器(可以是bilateral filter、guided filter等滤波器)进 行滤波磨皮，使用高反差的方式进行滤波磨皮。这两种方式磨皮，会导致皮肤的细节 纹理(如毛孔和五官的轮廓等)丢失，肤色不均匀，也没有祛斑祛痘功能，使得皮肤 显得不干净，对皮肤的细节和背景保护不够，从而导致画面模糊不清晰，处理之后皮 肤光滑但没有水润和质感。

而该实施例提出了一种新的适用于实时视频流的磨皮算法，在美化皮肤的同时可以做到保留皮肤的细节信息，从而提高皮肤质感和人像清晰度。

图6是根据本发明实施例的一种适用于实时视频流的磨皮算法的示意图。如图6所示，该方法涉及以下处理过程：

S1，输入原始图像和磨皮力度参数alpha。

S2，对输入的原始图像进行人脸检测，得到人脸关键点，进而通过人脸关键点画出人脸皮肤区域蒙板mask1。

S3，获取输入的原始图像的G通道图像，并对其G通道图像进行高斯滤波，得到gauss(G)，再计算高反差层hp＝G-gauss(G)+128。

S4，对高反差层进行强光融合，得到mask2。

可选地，该实施例在进行强光融合时，可以通过以下方式进行：

(A<0.5f)？(2*A*A):(1.0f-2*(1.0f-A)*(1.0f-A))，其中，A用于表示像素值，f用于表 示与高反差层对应的数据。

S5，对输入的原始图像进行曲线调整，得到提亮之后的图像lut1(image)。

在该实施例中曲线可以为S曲线，是图像亮度调整的一种方式。

S6，对输入的原始图像、进行强光融合后的mask2、进行曲线调整之后的图像lut1和输入参数进行图像融合，得到滤波之后的图像ret1。

S7，对S4的结果mask2进行平滑阶梯滤波，得到滤波结果mask3。

S8，对S6的结果ret1进行曲线拉伸，得到提亮的图像lut2(ret1)。

该实施例在进行曲线拉伸时，可以是对图像的逐像素值按曲线公式进行计算变换。

S9、对S6的图像ret1、S7的滤波结果mask3、S8的图像lut2进行融合，得到融 合结果merge。

S10，对S2的结果mask1、输入参数和S9的merge进行图像锐化，得到输出图像out。

在该实施例中，锐化可以是通过叠加梯度图的方式来进行的图像锐化，梯度图是中心像素和周围像素的差值。该实施例可以对图像和人脸分别做锐化，此处通过皮肤 蒙板来区分人脸皮肤和背景，分别使用不同的磨皮力度参数或方式来对其进行锐化处 理。

图7是根据本发明实施例的一种视频中图像的处理方法的场景示意图。如图7所示，向计算设备输入待处理的原始图像，可以在计算设备的显示界面上进一步展示待 处理的原始图像，该待处理的原始图像可以包括目标对象的待处理的人像，比如，该 人像为面部图像。该原始图像可以为在视频场景中，在播放视频的过程中所采集到的 多媒体数据，比如，该多媒体数据包括视频图像数据，其中，视频场景可以为在客户 端上播放直播视频、播放短视频、录制视频等多媒体数据的场景。

在该实施例中，计算设备可以对原始图像进行识别，识别出高频层图像。该实施例的计算设备可以对上述高频层图像进行强光融合，以实现计算设备对高频层图像中 的瑕疵进行有针对性地滤波处理，而保留高频层图像中的细节特征。可选地，该实施 例的计算设备对上述原始图像进行提亮处理，可以是对原始进行曲线调整，对曲线调 整后低频层图像进行提亮处理，得到提亮处理后的图像。

该实施例的计算设备可以将强光融合后的图像和提亮处理后的图像确定为原始图 像的预处理图像。

该实施例的计算设备可以通过一定的参数将预处理图像的像素和原始图像的像素 进行融合，得到初始结果图像的像素。

在得到初始结果图像之后，可以对强光融合结果进行平滑阶梯滤波，生成滤波图像，并将初始结果图像中的暗区域进行提亮处理，生成二次提亮图像，进而将初始结 果图像、滤波图像和二次提亮图像进行融合，生成二次结果图像，并使用皮肤蒙板对 二次结果图像进行图像锐化，生成目标图像，可以在计算设备的显示界面上显示该目 标图像。

图8是根据本发明实施例的另一种视频中图像的处理方法的场景示意图。如图8所示，添加并在显示界面中显示视频中待处理的原始图像。该视频可以为在客户端上 播放的直播视频、播放的短视频、录制的视频等。在显示界面中显示视频中待处理的 原始图像之后，可以响应于对原始图像的识别操作，确定出原始图像中的高频层图像 和低频层图像。

在该实施例中，对原始图像的磨皮操作可以为用户在客户端的显示界面上针对原始图像所进行的与磨皮相关的操作，磨皮操作可以包括识别操作，可以响应于对原始 图像的识别操作，识别出原始图像中的高频层图像。对高频层图像进行强光融合，并 基于生成的强光融合结果获取原始图像的预处理图像，然后将预处理图像与原始图像 进行融合，进而在显示界面中渲染融合得到的初始结果图像。在得到初始结果图像之 后，可以对强光融合结果进行平滑阶梯滤波，生成滤波图像，并将初始结果图像中的 暗区域进行提亮处理，生成二次提亮图像，进而将初始皮图像、滤波图像和二次提亮 图像进行融合，生成二次结果图像，并使用皮肤蒙板对二次结果图像进行图像锐化， 生成目标图像，并将该目标图像显示在显示界面上。

图9是根据本发明实施例的一种视频中图像的处理结果的对比示意图。如图9所示，其中，图9中最右边的图像为原始图像，皮肤质感较差，图9中最左边的图像为 该实施例的初始结果图像的效果，皮肤质感较图9中最右边的图像稍微好些，图9中 中间的图像为渲染融合得到的初始结果图像所得到的目标图像的效果，保留皮肤的细 节信息，提高皮肤质感和人像清晰度，皮肤显得干净通透，具有水润效果。

由上述可知，该实施例对高频层图像中的瑕疵进行针对性的滤波处理，对低频层图像进行曲线调整，以此来做到磨皮的同时保留皮肤细节和肤色均匀，使得滤波之后 皮肤显得干净通透；该实施例可以对皮肤里的暗区域进行检测，结合曲线调整来实现 祛痘和水润效果；该实施例还可以结合皮肤蒙板对原始图像和初始结果图像分别做锐 化处理，补偿因滤波引入的凸显更模糊问题，使画面更清晰，避免了优化工具在执行 磨皮的过程中会损失整个画面的信息，从而解决了视频中的对象在进行图像处理后， 画面存在清晰度差的技术问题，达到了视频中的对象在进行图像处理后，提高画面的 清晰度的技术效果。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限 制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术 人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块 并不一定是本发明所必须的。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但 很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者 说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存 储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终 端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所 述的方法。

实施例3

根据本发明实施例，还提供了一种用于实施上述图2所示的视频中图像的处理方法的视频中图像的处理装置。

图10是根据本发明实施例的一种视频中图像的处理装置的示意图。如图10所示，该视频中图像的处理装置100可以包括：第一展示单元101、识别单元102、第一处理 单元103和第一融合单元104。

第一展示单元101，用于展示待处理的原始图像，其中，原始图像为播放视频过 程中采集到的多媒体数据。

识别单元102，用于识别出原始图像中的高频层图像。

第一处理单元103，用于对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像。

第一融合单元104，用于将预处理图像与原始图像进行融合，得到初始结果图像。

此处需要说明的是，上述第一展示单元101、识别单元102、第一处理单元103 和第一融合单元104分别对应于实施例1的步骤S202至步骤S208，四个单元与对应 的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说 明的是，上述单元作为装置的一部分可以运行在实施例1提供的计算机终端10中。

根据本发明实施例，还提供了一种用于实施上述图3所示的视频中图像的处理方法的视频中图像的处理装置。

图11是根据本发明实施例的另一种视频中图像的处理装置的示意图。如图11所示，该视频中图像的处理装置110可以包括：第二展示单元111、第二处理单元112、 第二融合单元113、第三处理单元114和第三融合单元115。

第二展示单元111，用于在客户端的显示界面上展示待处理的原始图像，其中， 原始图像为播放视频过程中采集到的多媒体数据。

第二处理单元112，用于对原始图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像。

第二融合单元113，用于将预处理图像与原始图像进行融合，得到初始结果图像。

第三处理单元114，用于对强光融合结果进行平滑阶梯滤波，生成滤波图像，并 将初始结果图像中的暗区域进行提亮处理，生成二次提亮图像；

第三融合单元115，用于将初始结果图像、滤波图像和二次提亮图像进行融合， 生成二次结果图像，并使用皮肤蒙板对二次结果图像，其中，基于原始图像中脸部的 关键信息，生成脸部皮肤的皮肤蒙板。

此处需要说明的是，上述第二展示单元111、第一处理单元112、第二融合单元113、第三处理单元114和第三融合单元115分别对应于实施例1的步骤S302至步骤 S310，五个单元与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1 所公开的内容。需要说明的是，上述单元作为装置的一部分可以运行在实施例1提供 的计算机终端10中。

根据本发明实施例，还提供了一种用于实施上述图4所示的视频中图像的处理方法的视频中图像的处理装置。

图12是根据本发明实施例的另一种视频中图像的处理装置的示意图。如图12所示，该视频中图像的处理装置120可以包括：第三展示单元121、第一显示单元122 和第四融合单元123。

第三展示单元121，用于在客户端的显示界面上展示待处理的原始图像，其中， 原始图像为播放视频过程中采集到的多媒体数据。

第一显示单元122，用于响应客户端接收到的图像处理指令，在客户端的显示界面上显示对原始图像执行图像处理指令的图像处理结果，其中，图像处理指令用于对 原始图像的高频层图像进行强光融合。

第四融合单元123，用于将图像处理结果与原始图像进行融合，并在显示界面上渲染融合得到的初始结果图像。

此处需要说明的是，上述第三展示单元121、第一显示单元122和第四融合单元123分别对应于实施例1的步骤S402至步骤S406，三个单元与对应的步骤所实现的 实例和应用场景相同，但不限于上述实施例1所公开的内容。需要说明的是，上述单 元作为装置的一部分可以运行在实施例1提供的计算机终端10中。

根据本发明实施例，还提供了一种用于实施上述图5所示的视频中图像的处理方法的视频中图像的处理装置。

图13是根据本发明实施例的另一种视频中图像的处理装置的示意图。如图13所示，该视频中图像的处理装置130可以包括：第二显示单元131、确定单元132、第四 处理单元133、第五融合单元134和渲染单元135。

第二显示单元131，用于在显示界面中显示视频中待处理的原始图像。

确定单元132，用于响应于对原始图像的识别操作，确定出原始图像中的高频层图像和低频层图像。

第四处理单元133，用于对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像的预处理图像。

第五融合单元134，用于将预处理图像与原始图像进行融合。

渲染单元135，用于在显示界面中渲染融合得到的初始结果图像。

此处需要说明的是，上述第二显示单元131、确定单元132、第四处理单元133、 第五融合单元134和渲染单元135分别对应于实施例1的步骤S502至步骤S510，三 个单元与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例1所公开的 内容。需要说明的是，上述单元作为装置的一部分可以运行在实施例1提供的计算机 终端10中。

在该实施例的视频中图像的处理装置中，从原始图像中识别出高频层图像，对高频层图像进行强光融合，对原始图像进行提亮处理，进而与原始图像进行融合，以此 来实现在对原始图像进行磨皮的同时保留细节和颜色均匀，画面显得干净通透，提高 图像的质感和清晰度，避免了优化工具在执行磨皮的过程中会损失整个画面的信息， 从而解决了视频中的对象在进行图像处理后，画面存在清晰度差的技术问题，达到了 视频中的对象在进行图像处理后，提高画面的清晰度的技术效果。

实施例4

本发明的实施例可以提供一种视频中图像的处理系统，该系统可以包括计算机终端，该计算机终端可以是计算机终端群中的任意一个计算机终端设备。可选地，在本 实施例中，上述计算机终端也可以替换为移动终端等终端设备。

可选地，在本实施例中，上述计算机终端可以位于计算机网络的多个网络设备中的至少一个网络设备。

在本实施例中，上述计算机终端可以执行应用程序的视频中图像的处理方法中以下步骤的程序代码：展示待处理的原始图像，其中，原始图像为播放视频过程中采集 到的多媒体数据；识别出原始图像中的高频层图像；对高频层图像进行强光融合，并 基于生成的强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行 融合，得到初始结果图像。

可选地，图14是根据本发明实施例的一种计算机终端的结构框图。如图14所示，该计算机终端A可以包括：一个或多个(图中仅示出一个)处理器142、存储器144、 以及传输装置146。

其中，传输装置，用于传输待处理的原始图像；存储器可用于存储软件程序以及模块，如本发明实施例中的视频中图像的处理方法和装置对应的程序指令/模块，处理 器通过运行存储在存储器内的软件程序以及模块，从而执行各种功能应用以及数据处 理，即实现上述的视频中图像的处理方法。存储器可包括高速随机存储器，还可以包 括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存 储器。在一些实例中，存储器可进一步包括相对于处理器远程设置的存储器，这些远 程存储器可以通过网络连接至计算机终端A。上述网络的实例包括但不限于互联网、 企业内部网、局域网、移动通信网及其组合。

处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据；识 别出原始图像中的高频层图像；对高频层图像进行强光融合，并基于生成的强光融合 结果获取原始图像的预处理图像；将预处理图像与原始图像进行融合，得到初始结果 图像。

可选地，上述处理器还可以执行如下步骤的程序代码：对原始图像进行提亮处理，得到一次提亮图像；基于强光融合结果和一次提亮图像生成预处理图像。

可选地，上述处理器还可以执行如下步骤的程序代码：对原始图像的低频层图像进行提亮处理，得到一次提亮图像。

可选地，上述处理器还可以执行如下步骤的程序代码：对原始图像的G通道灰度图进行高斯滤波，得到原始图像的低频层图像；基于G通道灰度图和低频层图像，计 算高反差层，得到高频层图像。

可选地，上述处理器还可以执行如下步骤的程序代码：对高频层图像进行强光融合，得到对高频层图像中的瑕疵进行滤波后的滤波结果。

可选地，上述处理器还可以执行如下步骤的程序代码：在将预处理图像与原始图像进行融合的过程中，基于接收到的参数来调节初始结果图像的级别。

可选地，上述处理器还可以执行如下步骤的程序代码：在得到初始结果图像之后，对强光融合结果进行平滑阶梯滤波，生成滤波图像；将初始结果图像中的暗区域进行 提亮处理，生成二次提亮图像；将初始结果图像、滤波图像和二次提亮图像进行融合， 生成二次结果图像。

可选地，上述处理器还可以执行如下步骤的程序代码：在客户端的显示界面上展示待处理的原始图像之后，基于脸部特征，从原始图像中检测出脸部关键信息；基于 脸部关键信息，生成脸部皮肤的皮肤蒙板。

可选地，上述处理器还可以执行如下步骤的程序代码：在生成二次结果图像之后，使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像；输出目标图像。

可选地，上述处理器还可以执行如下步骤的程序代码：使用皮肤蒙板和预先设定的不同调节参数对二次结果图像中的人脸区域进行图像锐化，生成目标图像，其中， 二次结果图像中的背景区域保持不变，或者对背景区域的锐化级别低于对人脸区域的 锐化级别。

作为一种可选的示例，处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：在客户端的显示界面上展示待处理的原始图像，其中，原始图 像为播放视频过程中采集到的多媒体数据；对原始图像进行强光融合，并基于生成的 强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行融合，得到 初始结果图像；对初始结果图像中的皮肤蒙板进行图像锐化，生成目标图像，其中， 基于原始图像中脸部的关键信息，生成脸部皮肤的皮肤蒙板。

作为一种可选的示例，处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：在客户端的显示界面上展示待处理的原始图像，其中，原始图 像为播放视频过程中采集到的多媒体数据；响应客户端接收到的图像处理指令，在客 户端的显示界面上显示对原始图像执行图像处理指令的图像处理结果，其中，图像处 理指令用于对原始图像的高频层图像进行强光融合；将图像处理结果与原始图像进行 融合，并在显示界面上渲染融合得到的初始结果图像。

作为一种可选的示例，处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：在显示界面中显示视频中待处理的原始图像；响应于对原始图 像的识别操作，确定出原始图像中的高频层图像和低频层图像；对高频层图像进行强 光融合，并基于生成的强光融合结果获取原始图像的预处理图像；将预处理图像与原 始图像进行融合；在显示界面中渲染融合得到的初始结果图像。

采用本发明实施例，提供了一种视频中图像的处理方法。通过展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒体数据；识别出原始图像中的 高频层图像；对高频层图像进行强光融合，并基于生成的强光融合结果获取原始图像 的预处理图像；将预处理图像与原始图像进行融合，得到初始结果图像。本申请从原 始图像中识别出高频层图像，对高频层图像进行强光融合，对原始图像进行提亮处理， 进而与原始图像进行融合，以此来实现在对原始图像进行磨皮的同时保留细节和颜色 均匀，画面显得干净通透，提高图像的质感和清晰度，避免了优化工具在执行磨皮的 过程中会损失整个画面的信息，从而解决了视频中的对象在进行图像处理后，画面存 在清晰度差的技术问题，达到了视频中的对象在进行图像处理后，提高画面的清晰度 的技术效果。

本领域普通技术人员可以理解，图14所示的结构仅为示意，计算机终端A也可 以是智能手机(如Android手机、iOS手机等)、平板电脑、掌声电脑以及移动互联网 设备(Mobile Internet Devices，MID)、PAD等终端设备。图14其并不对上述计算机 终端A的结构造成限定。例如，计算机终端A还可包括比图14中所示更多或者更少 的组件(如网络接口、显示装置等)，或者具有与图14所示不同的配置。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以 通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机 存取器(Random Access Memory，RAM)、磁盘或光盘等。

实施例5

本发明的实施例还提供了一种计算机可读存储介质。可选地，在本实施例中，上述计算机可读存储介质可以用于保存上述实施例一所提供的视频中图像的处理方法所 执行的程序代码。

可选地，在本实施例中，上述计算机可读存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中，或者位于移动终端群中的任意一个移动终端中。

可选地，在本实施例中，计算机可读存储介质被设置为存储用于执行以下步骤的程序代码：展示待处理的原始图像，其中，原始图像为播放视频过程中采集到的多媒 体数据；识别出原始图像中的高频层图像；对高频层图像进行强光融合，并基于生成 的强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行融合，得 到初始结果图像。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：对原始图像进行提亮处理，得到一次提亮图像；基于强光融合结果和一次提亮图像生成 预处理图像。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：对原始图像的低频层图像进行提亮处理，得到一次提亮图像。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：对原始图像的G通道灰度图进行高斯滤波，得到原始图像的低频层图像；基于G通道灰 度图和低频层图像，计算高反差层，得到高频层图像。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：对高频层图像进行强光融合，得到对高频层图像中的瑕疵进行滤波后的滤波结果。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：在将预处理图像与原始图像进行融合的过程中，基于接收到的参数来调节初始结果图像 的级别。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：在得到初始结果图像之后，对强光融合结果进行平滑阶梯滤波，生成滤波图像；将初始 结果图像中的暗区域进行提亮处理，生成二次提亮图像；将初始结果图像、滤波图像 和二次提亮图像进行融合，生成二次结果图像。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：在客户端的显示界面上展示待处理的原始图像之后，基于脸部特征，从原始图像中检测 出脸部关键信息；基于脸部关键信息，生成脸部皮肤的皮肤蒙板。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：在生成二次结果图像之后，使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像； 输出目标图像。

可选地，计算机可读存储介质还被设置为存储用于执行以下步骤的程序代码：使用皮肤蒙板和预先设定的不同调节参数对二次结果图像中的人脸区域进行图像锐化， 生成目标图像，其中，二次结果图像中的背景区域保持不变，或者对背景区域的锐化 级别低于对人脸区域的锐化级别。

作为一种可选的示例，计算机可读存储介质被设置为存储用于执行以下步骤的程序代码：在客户端的显示界面上展示待处理的原始图像，其中，原始图像为播放视频 过程中采集到的多媒体数据；对原始图像进行强光融合，并基于生成的强光融合结果 获取原始图像的预处理图像；将预处理图像与原始图像进行融合，得到初始结果图像； 使用皮肤蒙板对二次结果图像进行图像锐化，生成目标图像，其中，基于原始图像中 脸部的关键信息，生成脸部皮肤的皮肤蒙板。

作为一种可选的示例，计算机可读存储介质被设置为存储用于执行以下步骤的程序代码：在客户端的显示界面上展示待处理的原始图像，其中，原始图像为播放视频 过程中采集到的多媒体数据；响应客户端接收到的图像处理指令，在客户端的显示界 面上显示对原始图像执行图像处理指令的图像处理结果，其中，图像处理指令用于对 原始图像的高频层图像进行强光融合；将图像处理结果与原始图像进行融合，并在显 示界面上渲染融合得到的初始结果图像。

作为一种可选的示例，计算机可读存储介质被设置为存储用于执行以下步骤的程序代码：在显示界面中显示视频中待处理的原始图像；响应于对原始图像的识别操作， 确定出原始图像中的高频层图像和低频层图像；对高频层图像进行强光融合，并基于 生成的强光融合结果获取原始图像的预处理图像；将预处理图像与原始图像进行融合； 在显示界面中渲染融合得到的初始结果图像。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分， 仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件 可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所 显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模 块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到 多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例 方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成 的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时， 可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的 形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一 台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所 述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者 光盘等各种可以存储程序代码的介质。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润 饰也应视为本发明的保护范围。

Claims (20)

1.一种视频中图像的处理方法，其特征在于，包括：

展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；

识别出所述原始图像中的高频层图像；

对所述高频层图像进行强光融合，并基于生成的强光融合结果获取所述原始图像的预处理图像；

将所述预处理图像与所述原始图像进行融合，得到初始结果图像。

2.根据权利要求1所述的方法，其特征在于，基于生成的强光融合结果获取所述原始图像的预处理图像，包括：

对所述原始图像进行提亮处理，得到一次提亮图像；

基于所述强光融合结果和所述一次提亮图像生成所述预处理图像。

3.根据权利要求2所述的方法，其特征在于，对所述原始图像进行提亮处理，得到一次提亮图像，包括：

对所述原始图像的低频层图像进行提亮处理，得到所述一次提亮图像。

4.根据权利要求1所述的方法，其特征在于，识别出所述原始图像中的高频层图像，包括：

对所述原始图像的G通道灰度图进行高斯滤波，得到所述原始图像的低频层图像；

基于所述G通道灰度图和所述低频层图像，计算高反差层，得到所述高频层图像。

5.根据权利要求1所述的方法，其特征在于，对所述高频层图像进行强光融合，包括：

对所述高频层图像进行强光融合，得到对所述高频层图像中的瑕疵进行滤波后的滤波结果。

6.根据权利要求1所述的方法，其特征在于，在将所述预处理图像与所述原始图像进行融合的过程中，基于接收到的参数来调节所述初始结果图像的级别。

7.根据权利要求1至6中任意一项所述的方法，其特征在于，在得到初始结果图像之后，所述方法还包括：

对所述强光融合结果进行平滑阶梯滤波，生成滤波图像；

将所述初始结果图像中的暗区域进行提亮处理，生成二次提亮图像；

将所述初始结果图像、所述滤波图像和所述二次提亮图像进行融合，生成二次结果图像。

8.根据权利要求7所述的方法，其特征在于，在展示待处理的原始图像之后，所述方法还包括：

基于脸部特征，从所述原始图像中检测出脸部关键信息；

基于所述脸部关键信息，生成脸部皮肤的皮肤蒙板。

9.根据权利要求8所述的方法，其特征在于，在生成二次结果图像之后，所述方法还包括：

使用所述皮肤蒙板对所述二次结果图像进行图像锐化，生成目标图像；

输出所述目标图像。

10.根据权利要求9所述的方法，其特征在于，使用所述皮肤蒙板对所述二次结果图像进行图像锐化，生成目标图像，包括：

使用所述皮肤蒙板和预先设定的不同调节参数对所述二次结果图像中的人脸区域进行图像锐化，生成所述目标图像，其中，所述二次结果图像中的背景区域保持不变，或者对所述背景区域的锐化级别低于对所述人脸区域的锐化级别。

11.一种视频中图像的处理方法，其特征在于，包括：

在客户端的显示界面上展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；

对所述原始图像进行强光融合，并基于生成的强光融合结果获取所述原始图像的预处理图像；

将所述预处理图像与所述原始图像进行融合，得到初始结果图像；

对所述强光融合结果进行平滑阶梯滤波，生成滤波图像，并将所述初始结果图像中的暗区域进行提亮处理，生成二次提亮图像；

将所述初始结果图像、所述滤波图像和所述二次提亮图像进行融合，生成二次结果图像，并使用皮肤蒙板对所述二次结果图像进行图像锐化，生成目标图像，其中，基于所述原始图像中脸部的关键信息，生成脸部皮肤的所述皮肤蒙板。

12.一种视频中图像的处理方法，其特征在于，包括：

在客户端的显示界面上展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；

响应所述客户端接收到的图像处理指令，在所述客户端的显示界面上显示对所述原始图像执行所述图像处理指令的图像处理结果，其中，所述图像处理指令用于对所述原始图像的高频层图像进行强光融合；

将所述图像处理结果与所述原始图像进行融合，并在所述显示界面上渲染融合得到的初始结果图像。

13.一种视频中图像的处理方法，其特征在于，包括：

在显示界面中显示视频中待处理的原始图像；

响应于对所述原始图像的识别操作，确定出所述原始图像中的高频层图像；

对所述高频层图像进行强光融合，并基于生成的强光融合结果获取所述原始图像的预处理图像；

将所述预处理图像与所述原始图像进行融合；

在所述显示界面中渲染融合得到的初始结果图像。

14.一种视频中图像的处理装置，其特征在于，包括：

第一展示单元，用于展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；

识别单元，用于识别出所述原始图像中的高频层图像；

第一处理单元，用于对所述高频层图像进行强光融合，并基于生成的强光融合结果获取所述原始图像的预处理图像；

第一融合单元，用于将所述预处理图像与所述原始图像进行融合，得到初始结果图像。

15.一种视频中图像的处理装置，其特征在于，包括：

第二展示单元，用于在客户端的显示界面上展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；

第二处理单元，用于对所述原始图像进行强光融合，并基于生成的强光融合结果获取所述原始图像的预处理图像；

第二融合单元，用于将所述预处理图像与所述原始图像进行融合，得到初始结果图像；

第三处理单元，用于所述强光融合结果进行平滑阶梯滤波，生成滤波图像，并将所述初始结果图像中的暗区域进行提亮处理，生成二次提亮图像；

第三融合单元，用于将所述初始结果图像、所述滤波图像和所述二次提亮图像进行融合，生成二次结果图像，并使用皮肤蒙板对所述二次结果图像，其中，基于所述原始图像中脸部的关键信息，生成脸部皮肤的所述皮肤蒙板。

16.一种视频中图像的处理装置，其特征在于，包括：

第三展示单元，用于在客户端的显示界面上展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；

第一显示单元，用于响应所述客户端接收到的图像处理指令，在所述客户端的显示界面上显示对所述原始图像执行所述图像处理指令的图像处理结果，其中，所述图像处理指令用于对所述原始图像的高频层图像进行强光融合；

第四融合单元，用于将所述图像处理结果与所述原始图像进行融合，并在所述显示界面上渲染融合得到的初始结果图像。

17.一种视频中图像的处理装置，其特征在于，包括：

第二显示单元，用于在显示界面中显示视频中待处理的原始图像；

确定单元，用于响应于对所述原始图像的识别操作，确定出所述原始图像中的高频层图像和低频层图像；

第四处理单元，用于对所述高频层图像进行强光融合，并基于生成的强光融合结果获取所述原始图像的预处理图像；

第五融合单元，用于将所述预处理图像与所述原始图像进行融合；

渲染单元，用于在所述显示界面中渲染融合得到的初始结果图像。

18.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质包括存储的程序，其中，在所述程序被处理器运行时控制所述计算机可读存储介质所在设备执行权利要求1至13中任意一项所述的方法。

19.一种处理器，其特征在于，所述处理器用于运行程序，其中，所述程序被所述处理器运行时执行权利要求1至13中任意一项所述的方法。

20.一种视频中图像的处理系统，其特征在于，包括：

处理器；

存储器，与所述处理器相连接，用于为所述处理器提供处理以下处理步骤的指令：展示待处理的原始图像，其中，所述原始图像为播放视频过程中采集到的多媒体数据；识别出所述原始图像中的高频层图像和低频层图像；对所述高频层图像进行滤波处理，并对所述低频层图像进行提亮处理，得到所述原始图像的预处理图像；将所述预处理图像与所述原始图像进行融合，得到初始结果图像。

Images