CN111091512B - 图像处理方法及装置、计算机可读存储介质 - Google Patents

图像处理方法及装置、计算机可读存储介质 Download PDF

Info

Publication number
CN111091512B
CN111091512B CN201911310747.6A CN201911310747A CN111091512B CN 111091512 B CN111091512 B CN 111091512B CN 201911310747 A CN201911310747 A CN 201911310747A CN 111091512 B CN111091512 B CN 111091512B
Authority
CN
China
Prior art keywords
feature points
shaping
face image
face
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911310747.6A
Other languages
English (en)
Other versions
CN111091512A (zh
Inventor
刘春宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Guangzhou Kugou Computer Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Kugou Computer Technology Co Ltd filed Critical Guangzhou Kugou Computer Technology Co Ltd
Priority to CN201911310747.6A priority Critical patent/CN111091512B/zh
Publication of CN111091512A publication Critical patent/CN111091512A/zh
Application granted granted Critical
Publication of CN111091512B publication Critical patent/CN111091512B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本申请公开一种图像处理方法及装置、计算机可读存储介质，属于图像处理领域。该方法包括：获取待整形人脸图像；从该待整形人脸图像中确定多个人脸特征点；根据该多个人脸特征点对该待整形人脸图像进行第一整形处理，得到第一人脸图像；根据该多个人脸特征点从该第一人脸图像中确定多个第一特征点，该多个第一特征点与该多个人脸特征点一一对应；根据该多个第一特征点对该第一人脸图像进行第二整形处理，得到第二人脸图像。本申请有助于改善人脸整形效果。

Description

图像处理方法及装置、计算机可读存储介质
技术领域
本申请涉及图像处理领域，特别涉及一种图像处理方法及装置、计算机可读存储介质。
背景技术
随着智能手机、平板电脑等终端的普及，基于终端的图像处理客户端越来越普遍。图像处理客户端可以对人脸图像进行整形处理(也即是特效处理)，该整形处理例如瘦脸处理、大眼处理、瘦鼻处理或削脸处理等。
目前，主要采用串行人脸整形方案对人脸图像进行整形处理。示例地，串行人脸整形方案中，首先从人脸图像中检测人脸特征点，然后根据检测出的人脸特征点，依次对该人脸图像进行瘦脸处理、大眼处理、瘦鼻处理或削脸处理，得到最终的人脸图像。
但是，每一次整形处理中，人脸图像会发生变形，使得人脸特征点的位置偏移，目前的串行人脸整形方案中，每一步整形处理均是基于最初检测到的人脸特征点和前一步的整形处理结果进行的，因此前一步整形处理中人脸特征点的位置偏移会影响下一步的人脸整形效果，导致根据最初检测到的人脸特征点和前一步的整形处理结果进行人脸整形的效果较差。
发明内容
本申请提供一种图像处理方法及装置、计算机可读存储介质，有助于改善人脸整形效果。本申请的技术方案如下：
第一方面，提供一种图像处理方法，所述方法包括：
获取待整形人脸图像；
从所述待整形人脸图像中确定多个人脸特征点；
根据所述多个人脸特征点对所述待整形人脸图像进行第一整形处理，得到第一人脸图像；
根据所述多个人脸特征点从所述第一人脸图像中确定多个第一特征点，所述多个第一特征点与所述多个人脸特征点一一对应；
根据所述多个第一特征点对所述第一人脸图像进行第二整形处理，得到第二人脸图像。
可选地，在根据所述多个第一特征点对所述第一人脸图像进行第二整形处理，得到第二人脸图像之后，所述方法还包括：
根据所述多个第一特征点从所述第二人脸图像中确定多个第二特征点，所述多个第二特征点与所述多个第一特征点一一对应；
根据所述多个第二特征点对所述第二人脸图像进行第三整形处理，得到第三人脸图像。
可选地，所述根据所述多个人脸特征点对所述待整形人脸图像进行第一整形处理，包括：
获取第一整形矩阵，所述第一整形矩阵包括与所述多个人脸特征点一一对应的多个第一整形参数；
根据所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵，对所述待整形人脸图像进行第一整形处理；
所述根据所述多个人脸特征点从所述第一人脸图像中确定多个第一特征点，包括：
根据所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵，从所述第一人脸图像中确定多个第一特征点；
所述根据所述多个第一特征点对所述第一人脸图像进行第二整形处理，包括：
获取第二整形矩阵，所述第二整形矩阵包括与所述多个第一特征点一一对应的多个第二整形参数；
根据所述多个第一特征点在所述第一人脸图像中的位置和所述第二整形矩阵，对所述第一人脸图像进行第二整形处理。
可选地，在根据所述多个人脸特征点从所述第一人脸图像中确定多个第一特征点之前，所述方法还包括：将所述第一人脸图像存储在第一缓存中；
在根据所述多个第一特征点从所述第二人脸图像中确定多个第二特征点之前，所述方法还包括：将所述第二人脸图像存储在第二缓存中。
可选地，所述第一缓存和所述第二缓存中的至少一个包括帧缓存对象(英文：Frame Buffer object；简称：FBO)缓存。
可选地，所述第一整形处理、所述第二整形处理和所述第三整形处理不同。
可选地，所述第一整形处理、所述第二整形处理和所述第三整形处理中的至少一种包括脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。
第二方面，提供一种图像处理装置，所述装置包括：
获取模块，用于获取待整形人脸图像；
第一确定模块，用于从所述待整形人脸图像中确定多个人脸特征点；
第一整形模块，用于根据所述多个人脸特征点对所述待整形人脸图像进行第一整形处理，得到第一人脸图像；
第二确定模块，用于根据所述多个人脸特征点从所述第一人脸图像中确定多个第一特征点，所述多个第一特征点与所述多个人脸特征点一一对应；
第二整形模块，用于根据所述多个第一特征点对所述第一人脸图像进行第二整形处理，得到第二人脸图像。
可选地，所述装置还包括：
第三确定模块，用于根据所述多个第一特征点从所述第二人脸图像中确定多个第二特征点，所述多个第二特征点与所述多个第一特征点一一对应；
第三整形模块，用于根据所述多个第二特征点对所述第二人脸图像进行第三整形处理，得到第三人脸图像。
可选地，所述第一整形模块，用于：
获取第一整形矩阵，所述第一整形矩阵包括与所述多个人脸特征点一一对应的多个第一整形参数；
根据所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵，对所述待整形人脸图像进行第一整形处理；
所述第二确定模块，用于根据所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵，从所述第一人脸图像中确定多个第一特征点；
所述第二整形模块，用于：
获取第二整形矩阵，所述第二整形矩阵包括与所述多个第一特征点一一对应的多个第二整形参数；
根据所述多个第一特征点在所述第一人脸图像中的位置和所述第二整形矩阵，对所述第一人脸图像进行第二整形处理。
可选地，所述装置还包括：
第一存储模块，用于将所述第一人脸图像存储在第一缓存中；
第二存储模块，用于将所述第二人脸图像存储在第二缓存中。
可选地，所述第一缓存和所述第二缓存中的至少一个包括FBO缓存。
可选地，所述第一整形处理、所述第二整形处理和所述第三整形处理不同。
可选地，所述第一整形处理、所述第二整形处理和所述第三整形处理中的至少一种包括脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。
第三方面，提供一种图像处理装置，包括：处理器和存储器，
所述存储器，用于存储计算机程序；
所述处理器，用于执行所述存储器上所存储的计算机程序，实现第一方面或第一方面的任一可选方式所述的图像处理方法。
第四方面，提供一种计算机可读存储介质，当所述计算机可读存储介质中的程序由处理器执行时，能够实现第一方面或第一方面的任一可选方式所述的图像处理方法。
本申请提供的技术方案带来的有益效果是：
本申请提供的图像处理方法及装置、计算机可读存储介质，获取待整形人脸图像后，从待整形人脸图像中确定多个人脸特征点，根据该多个人脸特征点对待整形人脸图像进行第一整形处理得到第一人脸图像，根据该多个人脸特征点从第一人脸图像中确定多个第一特征点，该多个第一特征点与该多个人脸特征点一一对应，根据该多个第一特征点对第一人脸图像进行第二整形处理得到第二人脸图像。由于根据多个第一特征点对第一人脸图像进行第二整形处理，该多个第一特征点并不是待整形人脸图像中的人脸特征点，而是根据该待整形人脸图像中的多个人脸特征点确定的，因此即使第一整形处理使得该待整形人脸图像中的人脸特征点的位置偏移，也不会影响第二整形处理的效果，有助于改善人脸整形效果。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本申请。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种图像处理方法的方法流程图；
图2是本申请实施例提供的另一种图像处理方法的方法流程图；
图3是本申请实施例提供的一种图像处理装置的框图；
图4是本申请实施例提供的另一种图像处理装置的框图；
图5是本申请实施例提供的一种图像处理装置的结构示意图。
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本申请的实施例，并与说明书一起用于解释本申请的原理。
具体实施方式
为了使本申请的原理、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。
本申请实施例提供的方案可以适用于串行人脸整形，有助于改善目前的串行人脸整形方案中，人脸特征点的位置偏移影响人脸整形的效果的问题，具有较好的人脸整形效果。该图像处理方法可以由终端执行，该终端可以是智能手机、平板电脑、智能电视、智能手表、动态影像专家压缩标准音频层面5(英文：Moving Picture Experts Group AudioLayer V；简称：MP5)播放器、膝上型便携计算机或台式计算机等等。可选地，该终端中可以安装有图像处理客户端，由该图像处理客户端进行图像处理，该图像处理客户端可以是直播客户端、视频录制客户端、视频编辑客户端等具备图像处理功能的客户端，例如，该图像处理客户端可以为直播伴侣。在一些实施场景中，客户端又称为应用程序(英文：Application；简称：APP)，本申请实施例对此不做限定。
请参考图1，其示出了本申请实施例提供的一种图像处理方法的方法流程图，该图像处理方法可以由终端执行。参见图1，该方法可以包括如下步骤：
步骤101、获取待整形人脸图像。
步骤102、从该待整形人脸图像中确定多个人脸特征点。
步骤103、根据该多个人脸特征点对该待整形人脸图像进行第一整形处理，得到第一人脸图像。
步骤104、根据该多个人脸特征点从该第一人脸图像中确定多个第一特征点，该多个第一特征点与该多个人脸特征点一一对应。
步骤105、根据该多个第一特征点对该第一人脸图像进行第二整形处理，得到第二人脸图像。
综上所述，本申请实施例提供的图像处理方法，由于根据多个第一特征点对第一人脸图像进行第二整形处理，该多个第一特征点并不是待整形人脸图像中的人脸特征点，而是根据该待整形人脸图像中的多个人脸特征点确定的，因此即使第一整形处理使得该待整形人脸图像中的人脸特征点的位置偏移，也不会影响第二整形处理的效果，有助于改善人脸整形效果。
请参考图2，其示出了本申请实施例提供的另一种图像处理方法的方法流程图，该图像处理方法可以由终端执行。参见图2，该方法可以包括如下步骤：
步骤201、获取待整形人脸图像。
其中，待整形人脸图像可以是人脸图像，也可以是包括人脸图像的图像，例如，包括人脸图像的人体图像，本申请实施例对此不做限定。
可选地，终端中可以具有摄像头，终端可以通过该摄像头采集人脸图像作为待整形人脸图像。或者，终端存储有人脸图像，终端可以从本地图库中获取人脸图像作为待整形人脸图像。又或者，终端可以从服务器或其他终端获取待整形人脸图像，本申请实施例对此不做限定。
本申请实施例提供的图像处理方案可以应用于直播场景，在直播场景中，终端可以通过摄像头采集待整形人脸图像。
步骤202、从该待整形人脸图像中确定多个人脸特征点。
可选地，终端可以通过人脸检测技术对该待整形人脸图像进行人脸检测，确定出该待整形人脸图像中的人脸区域，然后对检测出的人脸区域进行人脸对齐，以从该待整形人脸图像中确定出多个人脸特征点。其中，该人脸特征点可以是五官特征点，例如，脸部轮廓特征点、眼部特征点(或称为眼睛特征点)、鼻部特征点(或称为鼻子特征点)、眉部特征点(或称为眉毛特征点)或唇部特征点(或称为嘴巴特征点)中的至少一种。该人脸特征点还可以是脸部的其他特征点，本申请实施例对此不做限定。
需要说明的是，终端从待整形人脸图像中确定多个人脸特征点后，可以得到该多个人脸特征点在该待整形人脸图像中的位置，并且终端可以记录多个人脸特征点在该待整形人脸图像中的位置。示例地，终端可以确定出n个人脸特征点在该待整形人脸图像中的位置，该n个人脸特征点在该待整形人脸图像中的位置可以是Pi c，i＝1,2,3,...n，n为大于等于1的整数。
步骤203、根据该多个人脸特征点对该待整形人脸图像进行第一整形处理，得到第一人脸图像。
可选地，终端可以获取第一整形矩阵，根据多个人脸特征点在待整形人脸图像中的位置和该第一整形矩阵，对该待整形人脸图像进行第一整形处理得到第一人脸图像，该第一整形矩阵可以包括与该多个人脸特征点一一对应的多个第一整形参数。其中，第一整形处理可以是脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。例如，第一整形处理可以是瘦脸处理、大眼处理、瘦鼻处理和削脸处理中的任意一种，相应地，第一人脸图像可以是瘦脸图像、大眼图像、瘦鼻图像和削脸图像中的任意一种。示例地，第一整形处理为瘦脸处理，第一整形矩阵为瘦脸矩阵，第一整形参数为瘦脸参数。
可选地，终端可以存储有整形特效列表，该整形特效列表中可以包括按序存储的至少两种整形方案，每种整形方案包括整形矩阵，每种整形矩阵包括多个整形参数，终端可以从该整形特效列表中获取第一整形矩阵。或者，终端可以从服务器获取整形特效列表，并从该整形特效列表中获取第一整形矩阵。或者，终端可以直接从服务器获取该第一整形矩阵，本申请实施例对此不做限定。
可选地，终端可以根据该多个人脸特征点从该待整形人脸图像中确定多个辅助整形点，根据该多个人脸特征点和该多个辅助整形点将该待整形人脸图像划分成多个三角形区域，使该多个三角形区域叠加形成的图形包围该待整形人脸图像中的待整形区域(例如脸部区域)，之后，终端根据该第一整形矩阵中与该多个人脸特征点一一对应的多个第一整形参数，确定该多个人脸特征点的拉伸位置，根据该多个人脸特征点的拉伸位置对该多个三角形区域进行拉伸，以对该待整形人脸图像进行第一整形处理。
可选地，终端根据该多个人脸特征点从该待整形人脸图像中确定多个辅助整形点可以包括：终端将位于目标线段的延伸方向上的目标点确定为辅助整形点，该目标线段经过该待整形人脸图像中的待整形区域(例如脸部区域)的中心点，该目标线段的两个端点为该多个人脸特征点中的两个人脸特征点，该目标线段的两个端点中距离该目标点距离最近的端点与该目标点之间的距离可以等于该目标线段的四分之一。
可选地，终端根据该多个人脸特征点和该多个辅助整形点将该待整形人脸图像划分成多个三角形区域可以包括：终端根据该多个人脸特征点和该多个辅助整形点，对该待整形人脸图像进行三角剖分得到多个三角形区域。示例地，终端可以采用delaunay三角剖分法或德洛内三角剖分法对该待整形人脸图像进行三角剖分。
可选地，终端根据该第一整形矩阵中与该多个人脸特征点一一对应的第一整形参数，确定该多个人脸特征点的拉伸位置可以包括：对于该多个人脸特征点中的每个人脸特征点，终端将该人脸特征点在该待整形人脸图像中的位置与该第一整形矩阵中相应的第一整形参数相乘，将二者的乘积作为该人脸特征点的拉伸位置。示例地，终端确定出n个人脸特征点在该待整形人脸图像中的位置为Pi c，i＝1,2,3,...n，第一整形矩阵为[f1、f2、f3、f4...fn]，f1为P1 c对应的第一整形参数(也即是P1 c位置的人脸特征点对应的第一整形参数)，f2为P2 c对应的第一整形参数(也即是P2 c位置的人脸特征点对应的第一整形参数)，f3为P3 c对应的第一整形参数(也即是P3 c位置的人脸特征点对应的第一整形参数)，依次类推，则终端将P1 c×f1确定为P1 c对应的拉伸位置(也即是将P1 c位置的人脸特征点的拉伸位置确定为P1 c×f1)，将P2 c×f2确定为P2 c对应的拉伸位置(也即是将P2 c位置的人脸特征点的拉伸位置确定为P2 c×f2)，将P3 c×f3确定为P3 c对应的拉伸位置(也即是将P3 c位置的人脸特征点的拉伸位置确定为P3 c×f3)，依次类推。
步骤204、将该第一人脸图像存储在第一缓存中。
其中，该第一缓存可以是FBO缓存，FBO缓存是一种离线处理缓存。容易理解，在执行该步骤204之前，终端可以先创建该第一缓存。可选地，终端可以通过系统接口创建该第一缓存。
可选地，终端在创建该第一缓存后，在得到第一人脸图像后，终端可以将该第一人脸图像存储在该第一缓存中。
步骤205、根据该多个人脸特征点从该第一人脸图像中确定多个第一特征点，该多个第一特征点与该多个人脸特征点一一对应。
可选地，终端可以根据该多个人脸特征点在该待整形人脸图像中的位置和第一整形矩阵，从该第一人脸图像中确定多个第一特征点。在本申请实施例中，该第一特征点指的是第一人脸图像中的人脸特征点。
可选地，对于该多个人脸特征点中的每个人脸特征点，终端根据该人脸特征点在该待整形人脸图像中的位置和该第一整形矩阵中与该人脸特征点对应的第一整形参数，确定该人脸特征点在该第一人脸图像中的对应位置，将第一人脸图像中该对应位置处的特征点确定为第一特征点，从而从该第一人脸图像中确定多个第一特征点。
可选地，对于每个人脸特征点，终端将该人脸特征点在该待整形人脸图像中的位置和该第一整形矩阵中与该人脸特征点对应的第一整形参数相乘，将二者的乘积作为该人脸特征点在该第一人脸图像中的对应位置。
示例地，终端确定出n个人脸特征点在该待整形人脸图像中的位置为Pi c，i＝1,2,3,...n，第一整形矩阵为[f1、f2、f3、f4...f106]，f1为P1 c对应的第一整形参数，f2为P2 c对应的第一整形参数，f3为P3 c对应的第一整形参数，依次类推，则终端将P1 c×f1确定为P1 c在第一人脸图像中的对应位置(也即是将第一人脸图像中P1 c×f1位置的特征点确定为第一特征点)，将P2 c×f2确定为P2 c在第一人脸图像中的对应位置(也即是将第一人脸图像中P2 c×f2位置的特征点确定为第一特征点)，将P3 c×f3确定为P3 c在第一人脸图像中的对应位置(也即是将第一人脸图像中P3 c×f3位置的特征点确定为第一特征点)，依次类推。
步骤206、根据该多个第一特征点对该第一人脸图像进行第二整形处理，得到第二人脸图像。
可选地，终端可以获取第二整形矩阵，根据多个第一特征点在第一人脸图像中的位置和该第二整形矩阵，对该第一人脸图像进行第二整形处理得到第二人脸图像，该第二整形矩阵包括与该多个第一特征点一一对应的多个第二整形参数。其中，第二整形处理可以是脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。例如，第二整形处理可以是瘦脸处理、大眼处理、瘦鼻处理和削脸处理中的任意一种，相应地，第二人脸图像可以是瘦脸图像、大眼图像、瘦鼻图像和削脸图像中的任意一种，在本申请实施例中，该第二整形处理与上述第一整形处理可以相同或不同，本申请实施例对此不做限定。示例地，第二整形处理为大眼处理，第二整形矩阵为大眼矩阵，第二整形参数为大眼参数。
可选地，终端可以从本地的整形特效列表中获取第二整形矩阵。或者，终端可以从服务器的整形特效列表中获取第二整形矩阵，本申请实施例对此不做限定。需要说明的是，该第二整形矩阵和上述第一整形矩阵是按序存储在整形特效列表中的两个整形矩阵，该第二整形矩阵可以位于该第一整形矩阵之后。
可选地，终端可以根据该多个第一特征点从该第一人脸图像中确定出多个辅助整形点，根据该多个第一特征点和该多个辅助整形点将该第一人脸图像划分成多个三角形区域，使该多个三角形区域叠加形成的图形包围该第一人脸图像中的待整形区域(例如眼部区域)，之后，终端根据该第二整形矩阵中与该多个第一特征点一一对应的多个第二整形参数，确定该多个第一特征点的拉伸位置，根据该多个第一特征点的拉伸位置对该多个三角形区域进行拉伸，以对该第一人脸图像进行第二整形处理。
需要说明的是，终端根据多个第一特征点从第一人脸图像中确定多个辅助整形点的过程，根据多个第一特征点和多个辅助整形点将第一人脸图像划分成多个三角形区域的过程，以及，根据第二整形矩阵中与多个第一特征点一一对应的多个第二整形参数确定多个第一特征点的拉伸位置的过程均可以参考上述步骤203，本申请实施例在此不再赘述。
示例地，终端确定出n个第一特征点在该第一人脸图像中的位置为Pi d，i＝1,2,3,...n，第二整形矩阵为[k1、k2、k3、k4...kn]，k1为P1 d对应的第二整形参数(也即是P1 d位置的第一特征点对应的第二整形参数)，k2为P2 d对应的第二整形参数(也即是P2 d位置的第一特征点对应的第二整形参数)，k3为P3 d对应的第二整形参数(也即是P3 d位置的第一特征点对应的第二整形参数)，依次类推，则终端将P1 d×k1确定为P1 d对应的拉伸位置(也即是将P1 d位置的第一特征点的拉伸位置确定为P1 d×k1)，将P2 d×k2确定为P2 d对应的拉伸位置(也即是将P2 d位置的第一特征点的拉伸位置确定为P2 d×k2)，将P3 d×k3确定为P3 d对应的拉伸位置(也即是将P3 d位置的第一特征点的拉伸位置确定为P3 d×k3)，依次类推。
步骤207、将该第二人脸图像存储在第二缓存中。
其中，该第二缓存可以是FBO缓存。容易理解，在执行该步骤207之前，终端可以先创建该第二缓存。可选地，终端可以通过系统接口创建该第二缓存。
可选地，终端在创建该第二缓存后，在得到第二人脸图像后，终端可以将该第二人脸图像存储在该第二缓存中。
步骤208、根据该多个第一特征点从该第二人脸图像中确定多个第二特征点，该多个第二特征点与该多个第一特征点一一对应。
可选地，终端可以根据该多个第一特征点在第一人脸图像中的位置和第二整形矩阵，从该第二人脸图像中确定多个第二特征点。在本申请实施例中，该第二特征点指的是第二人脸图像中的人脸特征点。
可选地，对于该多个第一特征点中的每个第一特征点，终端根据该第一特征点在该第一人脸图像中的位置和该第二整形矩阵中与该第一特征点对应的第二整形参数，确定该第一特征点在该第二人脸图像中的对应位置，将第二人脸图像中该对应位置处的特征点确定为第二特征点，从而从该第二人脸图像中确定多个第二特征点。
可选地，对于每个第一特征点，终端将该第一特征点在该第一人脸图像中的位置和该第二整形矩阵中与该第一特征点对应的第二整形参数相乘，将二者的乘积作为该第一特征点在该第二人脸图像中的对应位置。
示例地，终端确定出n个第一特征点在该第一人脸图像中的位置为Pi d，i＝1,2,3,...n，第二整形矩阵为[k1、k2、k3、k4...kn]，k1为P1 d对应的第二整形参数，k2为P2 d对应的第二整形参数，k3为P3 d对应的第二整形参数，依次类推，则终端将P1 d×k1确定为P1 d在第二人脸图像中的对应位置(也即是将第二人脸图像中P1 d×k1位置的特征点确定为第二特征点)，将P2 d×k2确定为P2 d在第二人脸图像中的对应位置(也即是将第二人脸图像中P2 d×k2位置的特征点确定为第二特征点)，将P3 d×k3确定为P3 d在第二人脸图像中的对应位置(也即是将第二人脸图像中P3 d×k3位置的特征点确定为第二特征点)，依次类推。
步骤209、根据该多个第二特征点对该第二人脸图像进行第三整形处理，得到第三人脸图像。
可选地，终端可以获取第三整形矩阵，根据多个第二特征点在第二人脸图像中的位置和该第三整形矩阵，对该第二人脸图像进行第三整形处理得到第三人脸图像，该第三整形矩阵包括与该多个第二特征点一一对应的多个第三整形参数。其中，第三整形处理可以是脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。例如，第三整形处理可以是瘦脸处理、大眼处理、瘦鼻处理和削脸处理中的任意一种，相应地，第三人脸图像可以是瘦脸图像、大眼图像、瘦鼻图像和削脸图像中的任意一种，在本申请实施例中，该第三整形处理与上述第二整形处理以及第一整形处理可以或不同。示例地，第三整形处理为瘦鼻处理，第三整形矩阵为瘦鼻矩阵，第三整形参数为瘦鼻参数。
需要说明的是，该第三整形矩阵与上述第一整形矩阵、第二整形矩阵可以是按序存储在整形特效列表中的三个整形矩阵，该第三整形矩阵可以位于该第二整形矩阵之后。该步骤209的具体实现方式可以参考上述步骤203和步骤206，本申请实施例在此不再赘述。
步骤210、从第一缓存中删除第一人脸图像，将该第三人脸图像存储在该第一缓存中。
终端得到第三人脸图像后，由于已经基于第一人脸图像进行了第二整形处理，因此终端可以从第一缓存中删除第一人脸图像，将该第三人脸图像存储在该第一缓存中，以便于后续使用该第三人脸图像。
需要说明的是，该步骤210的描述仅仅是示例性的，实际实施时，终端也可以不从第一缓存中删除第一人脸图像，而是创建第三缓存，将第三人脸图像存储在第三缓存中，该第三缓存可以是FBO缓存，本申请实施例对此不做限定。容易理解，终端从第一缓存中删除第一人脸图像并将第三人脸图像存储在该第一缓存中，可以使该第一缓存循环利用。
步骤211、根据该多个第二特征点从第三人脸图像中确定多个第三特征点，该多个第三特征点与该多个第二特征点一一对应。
可选地，终端可以根据多个第二特征点在第二人脸图像中的位置和第三整形矩阵，从第三人脸图像中确定多个第三特征点。在本申请实施例中，该第三特征点指的是第三人脸图像中的人脸特征点。该步骤211的实现过程可以参考步骤208中，终端根据第一特征点在第一人脸图像中的位置和第二整形矩阵从第二人脸图像中确定第二特征点的实现过程，本申请实施例在此不再赘述。
步骤212、根据该多个第三特征点对该第三人脸图像进行第四整形处理，得到第四人脸图像。
可选地，终端可以获取第四整形矩阵，根据多个第三特征点在第三人脸图像中的位置和该第四整形矩阵，对该第三人脸图像进行第四整形处理得到第四人脸图像，该第四整形矩阵包括与该多个第三特征点一一对应的多个第四整形参数。其中，第四整形处理可以是脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。例如，第四整形处理可以是瘦脸处理、大眼处理、瘦鼻处理和削脸处理中的任意一种，相应地，第四人脸图像可以是瘦脸图像、大眼图像、瘦鼻图像和削脸图像中的任意一种，在本申请实施例中，该第四整形处理与上述第三整形处理、第二整形处理以及第一整形处理可以相同或不同。示例地，第四整形处理为削脸处理，第四整形矩阵为削脸矩阵，第四整形参数为削脸参数。
需要说明的是，该第四整形矩阵与上述第一整形矩阵、第二整形矩阵和第三整形矩阵可以是按序存储在整形特效列表中的四个整形矩阵，该第四整形矩阵可以位于该第三整形矩阵之后。该步骤212的具体实现方式可以参考上述步骤203、步骤206和步骤209，本申请实施例在此不再赘述。
步骤213、输出第四人脸图像。
终端得到第四人脸图像后，可以输出该第四人脸图像，并通过终端的显示屏显示该第四人脸图像。在本申请实施例中，该第四人脸图像可以是终端对待整形人脸图像依次经过四次整形处理得到的人脸图像，例如是终端对待整形人脸图像依次经过瘦脸处理、大眼处理、瘦鼻处理和削脸处理得到的人脸图像。需要说明的是，终端输出第四人脸图像后，可以从上述各个缓冲中删除相应的图像，并通过系统接口销毁上述各个缓存，本申请实施例对此不做限定。
需要说明的是，在得到第四人脸图像之后，终端还可以对第四人脸图像进行第五整形处理，终端对待整形人脸图像的整形处理次数可以根据需要设置，本申请实施例对此不做限定。
如前所述，在本申请实施例中，由于根据多个第一特征点对第一人脸图像进行第二整形处理，该多个第一特征点并不是待整形人脸图像中的人脸特征点，而是根据该待整形人脸图像中的多个人脸特征点确定的(也即是对多个人脸特征点进行位置调整得到的)，因此即使第一整形处理使得待整形人脸图像中的人脸特征点的位置偏移，也不会影响第二整形处理的效果；由于根据多个第二特征点对第二人脸图像进行第三整形处理，该多个第二特征点并不是第一人脸图像中的第一特征点，而是根据该第一人脸图像中的多个第一特征点确定的(也即是对多个第一特征点进行位置调整得到的)，因此即使第二整形处理使得第一人脸图像中的第一特征点的位置偏移，也不会影响第三整形处理的效果；由于根据多个第三特征点对第三人脸图像进行第四整形处理，该多个第三特征点并不是第二人脸图像中的第二特征点，而是根据该第二人脸图像中的多个第二特征点确定的(也即是对多个第二特征点进行位置调整得到的)，因此即使第三整形处理使得第二人脸图像中的第二特征点的位置偏移，也不会影响第四整形处理的效果。
还需要说明的是，本申请实施例提供的图像处理方法步骤的先后顺序可以进行适当调整，步骤也可以根据情况进行相应增减，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化的方法，都应涵盖在本申请的保护范围之内，因此不再赘述。
综上所述，本申请实施例提供的图像处理方法，由于在串行人脸整形方案的任意两步整形处理中，后一步人脸整形处理的人脸特征点是基于前一步人脸整形处理对前一步人脸整形处理时采用的人脸特征点进行位置调整得到的(也即是基于前一步人脸整形图像中的人脸特征点确定的)，而并不是直接采用前一步人脸整形处理时的人脸特征点进行后一步人脸整形处理，因此即使前一步人脸整形处理使得人脸特征点的位置偏移，也不会影响后一步人脸整形处理的效果，有助于改善人脸整形效果。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
请参考图3，其示出了本申请实施例提供的一种图像处理装置300的框图，该图像处理装置300可以为终端中的程序组件。参见图3，该图像处理装置300可以包括但不限于：
获取模块310，用于获取待整形人脸图像；
第一确定模块320，用于从待整形人脸图像中确定多个人脸特征点；
第一整形模块330，用于根据多个人脸特征点对待整形人脸图像进行第一整形处理，得到第一人脸图像；
第二确定模块340，用于根据多个人脸特征点从第一人脸图像中确定多个第一特征点，多个第一特征点与多个人脸特征点一一对应；
第二整形模块350，用于根据多个第一特征点对第一人脸图像进行第二整形处理，得到第二人脸图像。
综上所述，本申请实施例提供的图像处理装置，由于根据多个第一特征点对第一人脸图像进行第二整形处理，该多个第一特征点并不是待整形人脸图像中的人脸特征点，而是根据该待整形人脸图像中的多个人脸特征点确定的，因此即使第一整形处理使得待整形人脸图像中的人脸特征点的位置偏移，也不会影响第二整形处理的效果，有助于改善人脸整形效果。
可选地，请参考图4，其示出了本申请实施例提供的另一种图像处理装置300的框图，参见图4，在图3的基础上，该图像处理装置300还包括：
第三确定模块360，用于根据多个第一特征点从第二人脸图像中确定多个第二特征点，多个第二特征点与多个第一特征点一一对应；
第三整形模块370，用于根据多个第二特征点对第二人脸图像进行第三整形处理，得到第三人脸图像。
可选地，第一整形模块330，用于：
获取第一整形矩阵，第一整形矩阵包括与多个人脸特征点一一对应的多个第一整形参数；
根据多个人脸特征点在待整形人脸图像中的位置和第一整形矩阵，对待整形人脸图像进行第一整形处理；
第二确定模块340，用于根据多个人脸特征点在待整形人脸图像中的位置和第一整形矩阵，从第一人脸图像中确定多个第一特征点；
第二整形模块350，用于：
获取第二整形矩阵，第二整形矩阵包括与多个第一特征点一一对应的多个第二整形参数；
根据多个第一特征点在第一人脸图像中的位置和第二整形矩阵，对第一人脸图像进行第二整形处理。
可选地，请继续参考图4，该图像处理装置300还包括：
第一存储模块380，用于将第一人脸图像存储在第一缓存中；
第二存储模块390，用于将第二人脸图像存储在第二缓存中。
可选地，第一缓存和第二缓存中的至少一个包括FBO缓存。
可选地，第一整形处理、第二整形处理和第三整形处理不同。
可选地，第一整形处理、第二整形处理和第三整形处理中的至少一种包括脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。
综上所述，本申请实施例提供的图像处理装置，由于根据多个第一特征点对第一人脸图像进行第二整形处理，该多个第一特征点并不是待整形人脸图像中的人脸特征点，而是根据该待整形人脸图像中的多个人脸特征点确定的，因此即使第一整形处理使得待整形人脸图像中的人脸特征点的位置偏移，也不会影响第二整形处理的效果，有助于改善人脸整形效果。
本申请实施例提供了一种图像处理装置，包括：处理器和存储器，
该存储器，用于存储计算机程序。
该处理器，用于执行该存储器上所存储的计算机程序，实现上述实施例提供的图像处理方法。
请参考图5，其示出了本申请实施例提供的一种图像处理装置500的结构示意图。该装置500可以是终端，比如：智能手机、平板电脑、动态影像专家压缩标准音频层面4(英文：Moving Picture Experts Group Audio Layer IV；简称：MP4)播放器、笔记本电脑或台式电脑。装置500还可能被称为用户设备、便携式终端、膝上型终端、台式终端等其他名称。
通常，装置500包括有：处理器501和存储器502。
处理器501可以包括一个或多个处理核心，比如4核心处理器、5核心处理器等。处理器501可以采用数字信号处理(英文：Digital Signal Processing；简称：DSP)、现场可编程门阵列(英文：Field－Programmable Gate Array；简称：FPGA)、可编程逻辑阵列(英文：Programmable Logic Array；简称：PLA)中的至少一种硬件形式来实现。处理器501也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称中央处理器(英文：Central Processing Unit；简称：CPU)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器501可以在集成有图像处理器(英文：Graphics Processing Unit；简称：GPU)，GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中，处理器501还可以包括人工智能(英文：ArtificialIntelligence；简称：AI)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器502可以包括一个或多个计算机可读存储介质，该计算机可读存储介质可以是非暂态的。存储器502还可包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。在一些实施例中，存储器502中的非暂态的计算机可读存储介质用于存储至少一个指令，该至少一个指令用于被处理器501所执行以实现本申请实施例提供的图像处理方法。
在一些实施例中，装置500还可选包括有：外围设备接口503和至少一个外围设备。处理器501、存储器502和外围设备接口503之间可以通过总线或信号线相连。各个外围设备可以通过总线、信号线或电路板与外围设备接口503相连。具体地，外围设备包括：射频电路504、显示屏505、摄像头组件506、音频电路507、定位组件508或电源509中的至少一种。
外围设备接口503可被用于将输入/输出(英文：Input/Output；简称：I/O)相关的至少一个外围设备连接到处理器501和存储器502。在一些实施例中，处理器501、存储器502和外围设备接口503被集成在同一芯片或电路板上；在一些其他实施例中，处理器501、存储器502和外围设备接口503中的任意一个或两个可以在单独的芯片或电路板上实现，本实施例对此不加以限定。
射频电路504用于接收和发射射频(英文：Radio Frequency；简称：RF)信号，也称电磁信号。射频电路504通过电磁信号与通信网络以及其他通信设备进行通信。射频电路504将电信号转换为电磁信号进行发送，或者，将接收到的电磁信号转换为电信号。可选地，射频电路504包括：天线系统、RF收发器、一个或多个放大器、调谐器、振荡器、数字信号处理器、编解码芯片组、用户身份模块卡等等。射频电路504可以通过至少一种无线通信协议来与其它终端进行通信。该无线通信协议包括但不限于：万维网、城域网、内联网、各代移动通信网络(2G、3G、4G及5G)、无线局域网和/或无线保真(英文：Wireless Fidelity；简称：WiFi)网络。在一些实施例中，射频电路504还可以包括近距离无线通信(英文：Near FieldCommunication；简称：NFC)有关的电路，本申请对此不加以限定。
显示屏505用于显示用户界面(英文：User Interface；简称：UI)。该UI可以包括图形、文本、图标、视频及其它们的任意组合。当显示屏505是触摸显示屏时，显示屏505还具有采集在显示屏505的表面或表面上方的触摸信号的能力。该触摸信号可以作为控制信号输入至处理器501进行处理。此时，显示屏505还可以用于提供虚拟按钮和/或虚拟键盘，也称软按钮和/或软键盘。在一些实施例中，显示屏505可以为一个，设置装置500的前面板；在另一些实施例中，显示屏505可以为至少两个，分别设置在装置500的不同表面或呈折叠设计；在再一些实施例中，显示屏505可以是柔性显示屏，设置在装置500的弯曲表面上或折叠面上。甚至，显示屏505还可以设置成非矩形的不规则图形，也即异形屏。显示屏505可以为有机发光二极管(英文：Organic Light-Emitting Diode；简称：OLED)显示屏。
摄像头组件506用于采集图像或视频。可选地，摄像头组件506包括前置摄像头和后置摄像头。通常，前置摄像头设置在终端的前面板，后置摄像头设置在终端的背面。在一些实施例中，后置摄像头为至少两个，分别为主摄像头、景深摄像头、广角摄像头、长焦摄像头中的任意一种，以实现主摄像头和景深摄像头融合实现背景虚化功能、主摄像头和广角摄像头融合实现全景拍摄以及虚拟现实(英文：Virtual Reality；简称：VR)拍摄功能或者其它融合拍摄功能。在一些实施例中，摄像头组件506还可以包括闪光灯。闪光灯可以是单色温闪光灯，也可以是双色温闪光灯。双色温闪光灯是指暖光闪光灯和冷光闪光灯的组合，可以用于不同色温下的光线补偿。
音频电路507可以包括麦克风和扬声器。麦克风用于采集用户及环境的声波，并将声波转换为电信号输入至处理器501进行处理，或者输入至射频电路504以实现语音通信。出于立体声采集或降噪的目的，麦克风可以为多个，分别设置在装置500的不同部位。麦克风还可以是阵列麦克风或全向采集型麦克风。扬声器则用于将来自处理器501或射频电路504的电信号转换为声波。扬声器可以是传统的薄膜扬声器，也可以是压电陶瓷扬声器。当扬声器是压电陶瓷扬声器时，不仅可以将电信号转换为人类可听见的声波，也可以将电信号转换为人类听不见的声波以进行测距等用途。在一些实施例中，音频电路507还可以包括耳机插孔。
定位组件508用于定位装置500的当前地理位置，以实现导航或基于位置的服务(英文：Location Based Service；简称：LBS)。定位组件508可以是基于美国的全球定位系统(英文：Global Positioning System；简称：GPS)、中国的北斗系统或俄罗斯的伽利略系统的定位组件。
电源509用于为装置500中的各个组件进行供电。电源509可以是交流电、直流电、一次性电池或可充电电池。当电源509包括可充电电池时，该可充电电池可以是有线充电电池或无线充电电池。有线充电电池是通过有线线路充电的电池，无线充电电池是通过无线线圈充电的电池。该可充电电池还可以用于支持快充技术。
在一些实施例中，装置500还包括有一个或多个传感器510。该一个或多个传感器510包括但不限于：加速度传感器511、陀螺仪传感器512、压力传感器513、指纹传感器514、光学传感器515以及接近传感器515。
加速度传感器511可以检测以装置500建立的坐标系的三个坐标轴上的加速度大小。比如，加速度传感器511可以用于检测重力加速度在三个坐标轴上的分量。处理器501可以根据加速度传感器511采集的重力加速度信号，控制触摸显示屏505以横向视图或纵向视图进行用户界面的显示。加速度传感器511还可以用于游戏或者用户的运动数据的采集。
陀螺仪传感器512可以检测装置500的机体方向及转动角度，陀螺仪传感器512可以与加速度传感器511协同采集用户对装置500的3D动作。处理器501根据陀螺仪传感器512采集的数据，可以实现如下功能：动作感应(比如根据用户的倾斜操作来改变UI)、拍摄时的图像稳定、游戏控制以及惯性导航。
压力传感器513可以设置在装置500的侧边框和/或触摸显示屏505的下层。当压力传感器513设置在装置500的侧边框时，可以检测用户对装置500的握持信号，由处理器501根据压力传感器513采集的握持信号进行左右手识别或快捷操作。当压力传感器513设置在触摸显示屏505的下层时，由处理器501根据用户对触摸显示屏505的压力操作，实现对UI界面上的可操作性控件进行控制。可操作性控件包括按钮控件、滚动条控件、图标控件、菜单控件中的至少一种。
指纹传感器514用于采集用户的指纹，由处理器501根据指纹传感器514采集到的指纹识别用户的身份，或者，由指纹传感器514根据采集到的指纹识别用户的身份。在识别出用户的身份为可信身份时，由处理器501授权该用户执行相关的敏感操作，该敏感操作包括解锁屏幕、查看加密信息、下载软件、支付及更改设置等。指纹传感器514可以被设置装置500的正面、背面或侧面。当装置500上设置有物理按键或厂商Logo时，指纹传感器514可以与物理按键或厂商Logo集成在一起。
光学传感器515用于采集环境光强度。在一个实施例中，处理器501可以根据光学传感器515采集的环境光强度，控制触摸显示屏505的显示亮度。具体地，当环境光强度较高时，调高触摸显示屏505的显示亮度；当环境光强度较低时，调低触摸显示屏505的显示亮度。在另一个实施例中，处理器501还可以根据光学传感器515采集的环境光强度，动态调整摄像头组件506的拍摄参数。
接近传感器515，也称距离传感器，通常设置在装置500的前面板。接近传感器515用于采集用户与装置500的正面之间的距离。在一个实施例中，当接近传感器515检测到用户与装置500的正面之间的距离逐渐变小时，由处理器501控制触摸显示屏505从亮屏状态切换为息屏状态；当接近传感器515检测到用户与装置500的正面之间的距离逐渐变大时，由处理器501控制触摸显示屏505从息屏状态切换为亮屏状态。
本领域技术人员可以理解，图5中示出的结构并不构成对装置500的限定，可以包括比图示更多或更少的组件，或者组合某些组件，或者采用不同的组件布置。
本申请实施例提供了一种计算机可读存储介质，当该计算机可读存储介质中的程序由处理器执行时，能够实现上述实施例提供的图像处理方法。该计算机可读存储介质可以是非暂态的。例如，该计算机可读存储介质可以是只读存储器(英文：Read-Only Memory；简称：ROM)、随机存取存储器(英文：Random Access Memory；简称：RAM)、紧凑型光盘只读储存器(英文：Compact Disc Read-Only Memory；简称：CD-ROM)、磁带、软盘和光数据存储设备等。
本申请中术语“A或B的至少一种”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A或B的至少一种，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。同理，“A、B或C的至少一种”表示可以存在七种关系，可以表示：单独存在A，单独存在B，单独存在C，同时存在A和B，同时存在A和C，同时存在C和B，同时存在A、B和C这七种情况。同理，“A、B、C或D的至少一种”表示可以存在十五种关系，可以表示：单独存在A，单独存在B，单独存在C，单独存在D，同时存在A和B，同时存在A和C，同时存在A和D，同时存在C和B，同时存在D和B，同时存在C和D，同时存在A、B和C，同时存在A、B和D，同时存在A、C和D，同时存在B、C和D，同时存在A、B、C和D，这十五种情况。
本申请中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。术语“第一”、“第二”、“第三”和“第四”仅用于描述目的，而不能理解为指示或暗示相对重要性。术语“多个”指两个或两个以上，除非另有明确的限定。术语“至少一种”表示一种或多种，多种表示两种或两种以上。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的计算机可读存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本申请的示例性实施例，并不用以限制本申请，凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (9)

1.一种图像处理方法，其特征在于，所述方法包括：
获取待整形人脸图像；
从所述待整形人脸图像中确定多个人脸特征点；
获取第一整形矩阵，所述第一整形矩阵包括与所述多个人脸特征点一一对应的多个第一整形参数；根据所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵，对所述待整形人脸图像进行第一整形处理，得到第一人脸图像；
将所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵中与所述多个人脸特征点对应的第一整形参数相乘，将乘积作为所述多个人脸特征点在所述第一人脸图像中的对应位置，将所述第一人脸图像中多个对应位置处的特征点确定为多个第一特征点，所述多个第一特征点与所述多个人脸特征点一一对应；
获取第二整形矩阵，所述第二整形矩阵包括与所述多个第一特征点一一对应的多个第二整形参数；根据所述多个第一特征点在所述第一人脸图像中的位置和所述第二整形矩阵，对所述第一人脸图像进行第二整形处理，得到第二人脸图像。
2.根据权利要求1所述的方法，其特征在于，
在得到第二人脸图像之后，所述方法还包括：
根据所述多个第一特征点从所述第二人脸图像中确定多个第二特征点，所述多个第二特征点与所述多个第一特征点一一对应；
根据所述多个第二特征点对所述第二人脸图像进行第三整形处理，得到第三人脸图像。
3.根据权利要求2所述的方法，其特征在于，
在得到第一人脸图像之后，所述方法还包括：将所述第一人脸图像存储在第一缓存中；
在根据所述多个第一特征点从所述第二人脸图像中确定多个第二特征点之前，所述方法还包括：将所述第二人脸图像存储在第二缓存中。
4.根据权利要求3所述的方法，其特征在于，
所述第一缓存和所述第二缓存中的至少一个包括帧缓存对象FBO缓存。
5.根据权利要求1至4任一所述的方法，其特征在于，
所述第一整形处理和所述第二整形处理中的至少一种包括脸型处理、眼部处理、鼻型处理、眉部处理和唇部处理中的任意一种。
6.一种图像处理装置，其特征在于，所述装置包括：
获取模块，用于获取待整形人脸图像；
第一确定模块，用于从所述待整形人脸图像中确定多个人脸特征点；
第一整形模块，用于获取第一整形矩阵，所述第一整形矩阵包括与所述多个人脸特征点一一对应的多个第一整形参数；根据所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵，对所述待整形人脸图像进行第一整形处理，得到第一人脸图像；
第二确定模块，用于将所述多个人脸特征点在所述待整形人脸图像中的位置和所述第一整形矩阵中与所述多个人脸特征点对应的第一整形参数相乘，将乘积作为所述多个人脸特征点在所述第一人脸图像中的对应位置，将所述第一人脸图像中多个对应位置处的特征点确定为多个第一特征点，所述多个第一特征点与所述多个人脸特征点一一对应；
第二整形模块，用于获取第二整形矩阵，所述第二整形矩阵包括与所述多个第一特征点一一对应的多个第二整形参数；根据所述多个第一特征点在所述第一人脸图像中的位置和所述第二整形矩阵，对所述第一人脸图像进行第二整形处理，得到第二人脸图像。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：
第三确定模块，用于根据所述多个第一特征点从所述第二人脸图像中确定多个第二特征点，所述多个第二特征点与所述多个第一特征点一一对应；
第三整形模块，用于根据所述多个第二特征点对所述第二人脸图像进行第三整形处理，得到第三人脸图像。
8.一种图像处理装置，其特征在于，包括：处理器和存储器，
所述存储器，用于存储计算机程序；
所述处理器，用于执行所述存储器上所存储的计算机程序，实现权利要求1至5任一所述的图像处理方法。
9.一种计算机可读存储介质，其特征在于，当所述计算机可读存储介质中的程序由处理器执行时，能够实现权利要求1至5任一所述的图像处理方法。
CN201911310747.6A 2019-12-18 2019-12-18 图像处理方法及装置、计算机可读存储介质 Active CN111091512B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911310747.6A CN111091512B (zh) 2019-12-18 2019-12-18 图像处理方法及装置、计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911310747.6A CN111091512B (zh) 2019-12-18 2019-12-18 图像处理方法及装置、计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN111091512A CN111091512A (zh) 2020-05-01
CN111091512B true CN111091512B (zh) 2024-03-01

Family

ID=70395716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911310747.6A Active CN111091512B (zh) 2019-12-18 2019-12-18 图像处理方法及装置、计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN111091512B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109325924A (zh) * 2018-09-20 2019-02-12 广州酷狗计算机科技有限公司 图像处理方法、装置、终端及存储介质
CN109685740A (zh) * 2018-12-25 2019-04-26 努比亚技术有限公司 人脸校正的方法及装置、移动终端及计算机可读存储介质
WO2019100766A1 (zh) * 2017-11-22 2019-05-31 格力电器（武汉）有限公司 一种图像处理方法、装置、电子设备及存储介质
CN110490828A (zh) * 2019-09-10 2019-11-22 广州华多网络科技有限公司 视频直播中的图像处理方法和系统
CN110544272A (zh) * 2019-09-06 2019-12-06 腾讯科技（深圳）有限公司 脸部跟踪方法、装置、计算机设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019100766A1 (zh) * 2017-11-22 2019-05-31 格力电器（武汉）有限公司 一种图像处理方法、装置、电子设备及存储介质
CN109325924A (zh) * 2018-09-20 2019-02-12 广州酷狗计算机科技有限公司 图像处理方法、装置、终端及存储介质
CN109685740A (zh) * 2018-12-25 2019-04-26 努比亚技术有限公司 人脸校正的方法及装置、移动终端及计算机可读存储介质
CN110544272A (zh) * 2019-09-06 2019-12-06 腾讯科技（深圳）有限公司 脸部跟踪方法、装置、计算机设备及存储介质
CN110490828A (zh) * 2019-09-10 2019-11-22 广州华多网络科技有限公司 视频直播中的图像处理方法和系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于标准肤色的人脸图像纹理合成与三维重建应用;阳策 等;计算机系统应用;第28卷(第5期);第28-34页 *

Also Published As

Publication number Publication date
CN111091512A (zh) 2020-05-01

Similar Documents

Publication Publication Date Title
CN110992493B (zh) 图像处理方法、装置、电子设备及存储介质
CN112907725B (zh) 图像生成、图像处理模型的训练、图像处理方法和装置
CN111028144B (zh) 视频换脸方法及装置、存储介质
CN111142838B (zh) 音频播放方法、装置、计算机设备及存储介质
CN111723803B (zh) 图像处理方法、装置、设备及存储介质
CN110956580B (zh) 图像换脸的方法、装置、计算机设备以及存储介质
CN110619614B (zh) 图像处理的方法、装置、计算机设备以及存储介质
CN112565806B (zh) 虚拟礼物赠送方法、装置、计算机设备及介质
CN111276122B (zh) 音频生成方法及装置、存储介质
CN111754386B (zh) 图像区域屏蔽方法、装置、设备及存储介质
CN112084811A (zh) 身份信息的确定方法、装置及存储介质
CN109634688B (zh) 会话界面的显示方法、装置、终端及存储介质
CN110677713B (zh) 视频图像处理方法及装置、存储介质
CN110152309B (zh) 语音通信方法、装置、电子设备及存储介质
CN113160031B (zh) 图像处理方法、装置、电子设备及存储介质
CN112738606B (zh) 音频文件的处理方法、装置、终端及存储介质
CN112381729B (zh) 图像处理方法、装置、终端及存储介质
CN111860064B (zh) 基于视频的目标检测方法、装置、设备及存储介质
CN113592874B (zh) 图像显示方法、装置和计算机设备
CN111986700B (zh) 无接触式操作触发的方法、装置、设备及存储介质
CN110660031B (zh) 图像锐化方法及装置、存储介质
CN110942426B (zh) 图像处理的方法、装置、计算机设备和存储介质
CN111369434B (zh) 拼接视频封面生成的方法、装置、设备和存储介质
CN111091512B (zh) 图像处理方法及装置、计算机可读存储介质
CN109344284B (zh) 歌曲文件的播放方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant