CN115018698B - 一种用于人机交互的图像处理方法及系统 - Google Patents
一种用于人机交互的图像处理方法及系统 Download PDFInfo
- Publication number
- CN115018698B CN115018698B CN202210941275.XA CN202210941275A CN115018698B CN 115018698 B CN115018698 B CN 115018698B CN 202210941275 A CN202210941275 A CN 202210941275A CN 115018698 B CN115018698 B CN 115018698B
- Authority
- CN
- China
- Prior art keywords
- image
- user
- processing
- shooting
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 37
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 230000002452 interceptive effect Effects 0.000 claims abstract description 62
- 238000000034 method Methods 0.000 claims abstract description 45
- 238000005457 optimization Methods 0.000 claims abstract description 27
- 230000008569 process Effects 0.000 claims abstract description 24
- 238000004458 analytical method Methods 0.000 claims description 21
- 230000003796 beauty Effects 0.000 claims description 16
- 230000001815 facial effect Effects 0.000 claims description 16
- 238000010276 construction Methods 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 7
- 238000013507 mapping Methods 0.000 claims description 5
- 238000005286 illumination Methods 0.000 claims description 4
- 230000008859 change Effects 0.000 abstract description 3
- 238000010586 diagram Methods 0.000 description 8
- 239000000284 extract Substances 0.000 description 5
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 238000010422 painting Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000008719 thickening Effects 0.000 description 1
Images
Classifications
-
- G06T3/04—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Abstract
本发明涉及图像处理技术领域,具体公开了一种用于人机交互的图像处理方法及系统。本发明通过提取目标图像中的人物图像;接收处理设置信息,进行交互拍摄,生成交互拍摄数据;构建用户的三维面部模型;进行对比配对,将对比配对成功的人物图像标记为用户图像;按照处理设置信息和用户图像,对三维面部模型进行处理,并将用户处理图像替换目标图像中的用户图像,生成目标处理图像。能够接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,构建用户的三维面部模型,进行对比配对和优化处理,生成用户处理图像,进而进行图像替换,生成目标处理图像,从而能够避免人物图像的基本特征被改变,且能够实现高效快捷、低成本的图像调整。
Description
技术领域
本发明属于图像处理技术领域,尤其涉及一种用于人机交互的图像处理方法及系统。
背景技术
图像处理,用计算机对图像进行分析,以达到所需结果的技术。又称影像处理。图像处理一般指数字图像处理。数字图像是指用工业相机、摄像机、扫描仪等设备经过拍摄得到的一个大的二维数组,该数组的元素称为像素,其值称为灰度值。图像处理技术一般包括图像压缩,增强和复原,匹配、描述和识别等。
对人物图像进行美颜处理,是最常见的图像处理。现有的人物图像美颜处理一般分为专业处理和非专业处理,其中:专业处理,需要专业的图像处理技术人员进行人物图像的专业调整,图像处理时间长、成本高;非专业处理,一般是用户通过美颜软件,对自己的面部拍摄图像进行美颜调整,这种美颜调整往往容易造成人物图像的基本特征被改变。
发明内容
本发明实施例的目的在于提供一种用于人机交互的图像处理方法及系统,旨在解决背景技术中提出的问题。
为实现上述目的,本发明实施例提供如下技术方案:
一种用于人机交互的图像处理方法,所述方法具体包括以下步骤:
获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像;
接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据;
根据所述交互拍摄数据,构建用户的三维面部模型;
根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像;
按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
作为本发明实施例技术方案进一步的限定,所述获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像具体包括以下步骤:
获取待处理的目标图像;
对所述目标图像进行人物识别,生成人物识别信息;
按照所述人物识别信息,从所述目标图像中提取多个人物图像。
作为本发明实施例技术方案进一步的限定,所述接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据具体包括以下步骤:
生成并展示信息设置窗口;
接收用户在所述信息设置窗口选择的处理设置信息;
生成窗口拍摄信号;
根据所述窗口拍摄信号,对用户进行交互拍摄,生成交互拍摄数据。
作为本发明实施例技术方案进一步的限定,所述根据所述交互拍摄数据,构建用户的三维面部模型具体包括以下步骤:
对所述交互拍摄数据进行处理,提取面部拍摄数据;
根据所述面部拍摄数据,进行关键点的提取与匹配,得到关键点数据;
根据所述关键点数据,构建三维坐标系;
按照所述面部拍摄数据,在所述三维坐标系中进行点云构建与映射处理,生成用户的三维面部模型。
作为本发明实施例技术方案进一步的限定,所述根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像具体包括以下步骤:
对所述三维面部模型进行特征分析,得到用户的识别特征信息;
根据所述识别特征信息,对多个所述人物图像进行对比配对,生成对比配对结果;
按照所述对比配对结果,将对比配对成功的人物图像标记为用户图像。
作为本发明实施例技术方案进一步的限定,所述按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像具体包括以下步骤:
按照所述处理设置信息,对所述三维面部模型进行优化处理,生成三维优化模型;
对所述用户图像进行展示分析,得到展示特征信息;
按照所述展示特征信息,对所述三维优化模型进行展示处理,生成用户处理图像;
将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
一种用于人机交互的图像处理系统,所述系统包括人物图像提取单元、处理交互拍摄单元、三维模型构建单元、对比配对标记单元和图像处理替换单元,其中:
人物图像提取单元,用于获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像;
处理交互拍摄单元,用于接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据;
三维模型构建单元,用于根据所述交互拍摄数据,构建用户的三维面部模型;
对比配对标记单元,用于根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像;
图像处理替换单元,用于按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
作为本发明实施例技术方案进一步的限定,所述处理交互拍摄单元具体包括:
窗口展示模块,用于生成并展示信息设置窗口;
设置接收模块,用于接收用户在所述信息设置窗口选择的处理设置信息;
信号生成模块,用于生成窗口拍摄信号;
交互拍摄模块,用于根据所述窗口拍摄信号,对用户进行交互拍摄,生成交互拍摄数据。
作为本发明实施例技术方案进一步的限定,所述对比配对标记单元具体包括:
特征分析模块,用于对所述三维面部模型进行特征分析,得到用户的识别特征信息;
对比配对模块,用于根据所述识别特征信息,对多个所述人物图像进行对比配对,生成对比配对结果;
图像标记模块,用于按照所述对比配对结果,将对比配对成功的人物图像标记为用户图像。
作为本发明实施例技术方案进一步的限定,所述图像处理替换单元具体包括:
优化处理模块,用于按照所述处理设置信息,对所述三维面部模型进行优化处理,生成三维优化模型;
展示分析模块,用于对所述用户图像进行展示分析,得到展示特征信息;
展示处理模块,用于按照所述展示特征信息,对所述三维优化模型进行展示处理,生成用户处理图像;
图像替换模块,用于将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
与现有技术相比,本发明的有益效果是:
本发明实施例通过提取目标图像中的人物图像;接收处理设置信息,进行交互拍摄,生成交互拍摄数据;构建用户的三维面部模型;进行对比配对,将对比配对成功的人物图像标记为用户图像;按照处理设置信息和用户图像,对三维面部模型进行处理,并将用户处理图像替换目标图像中的用户图像,生成目标处理图像。能够接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,构建用户的三维面部模型,进行对比配对和优化处理,生成用户处理图像,进而进行图像替换,生成目标处理图像,从而能够避免人物图像的基本特征被改变,且能够实现高效快捷、低成本的图像调整。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例。
图1示出了本发明实施例提供的方法的流程图。
图2示出了本发明实施例提供的方法中目标图像人物识别的流程图。
图3示出了本发明实施例提供的方法中处理设置交互拍摄的流程图。
图4示出了本发明实施例提供的方法中构建三维面部模型的流程图。
图5示出了本发明实施例提供的方法中人物图像对比配对的流程图。
图6示出了本发明实施例提供的方法中模型处理图像替换的流程图。
图7示出了本发明实施例提供的系统的应用架构图。
图8示出了本发明实施例提供的系统中处理交互拍摄单元的结构框图。
图9示出了本发明实施例提供的系统中对比配对标记单元的结构框图。
图10示出了本发明实施例提供的系统中图像处理替换单元的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
可以理解的是,现有技术中,人物图像美颜处理一般分为专业处理和非专业处理,其中:专业处理,需要专业的图像处理技术人员进行人物图像的专业调整,图像处理时间长、成本高;非专业处理,一般是用户通过美颜软件,对自己的面部拍摄图像进行美颜调整,这种美颜调整往往容易造成人物图像的基本特征被改变。
为解决上述问题,本发明实施例通过获取待处理的目标图像,提取目标图像中的人物图像;接收处理设置信息,进行交互拍摄,生成交互拍摄数据;构建用户的三维面部模型;进行对比配对,将对比配对成功的人物图像标记为用户图像;按照处理设置信息和用户图像,对三维面部模型进行处理,并将用户处理图像替换目标图像中的用户图像,生成目标处理图像。能够接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,构建用户的三维面部模型,进行对比配对和优化处理,生成用户处理图像,进而进行图像替换,生成目标处理图像,从而能够避免人物图像的基本特征被改变,且能够实现高效快捷、低成本的图像调整。
图1示出了本发明实施例提供的方法的流程图。
具体的,一种用于人机交互的图像处理方法,所述方法具体包括以下步骤:
步骤S101,获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像。
在本发明实施例中,接收用户上传的需要进行处理的目标图像,通过对目标图像进行人物识别,生成人物识别信息,进而按照人物识别信息,对目标图像进行图像提取处理,从目标图像中提取多个人物图像。
可以理解的是,用户上传的目标图像中含有多个人物图像,且多个人物图像中包含有用户自己的图像;通过对目标图像进行人物识别,可以获取目标图像中含有的多个人物分别对应的图像位置,进而按照多个图像位置,对目标图像进行图像截取,得到多个人物图像。
具体的,图2示出了本发明实施例提供的方法中目标图像人物识别的流程图。
其中,在本发明提供的优选实施方式中,所述获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像具体包括以下步骤:
步骤S1011,获取待处理的目标图像。
步骤S1012,对所述目标图像进行人物识别,生成人物识别信息。
步骤S1013,按照所述人物识别信息,从所述目标图像中提取多个人物图像。
进一步的,所述用于人机交互的图像处理方法还包括以下步骤:
步骤S102,接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据。
在本发明实施例中,完成目标图像的上传之后,生成信息设置窗口,并将信息设置窗口进行展示,用户可以在信息设置窗口中进行图像设置的选择,从而接收用户在信息设置窗口选择的处理设置信息,并且在展示信息设置窗口时,生成窗口拍摄信号,按照窗口拍摄信号对进行图像设置选择的用户进行交互视频拍摄,并在用户完成图像设置选择时,完成交互视频拍摄,在这个过程中,对用户交互拍摄得到交互拍摄数据。
可以理解的是,处理设置信息,是对用户在信息设置窗口中进行人物图像美颜设置选择的汇总,例如:眉毛加粗20%、眼睛加大10%、嘴唇模拟涂抹某某颜色的口红等。
具体的,图3示出了本发明实施例提供的方法中处理设置交互拍摄的流程图。
其中,在本发明提供的优选实施方式中,所述接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据具体包括以下步骤:
步骤S1021,生成并展示信息设置窗口。
步骤S1022,接收用户在所述信息设置窗口选择的处理设置信息。
步骤S1023,生成窗口拍摄信号。
步骤S1024,根据所述窗口拍摄信号,对用户进行交互拍摄,生成交互拍摄数据。
进一步的,所述用于人机交互的图像处理方法还包括以下步骤:
步骤S103,根据所述交互拍摄数据,构建用户的三维面部模型。
在本发明实施例中,通过对交互拍摄数据进行处理,提取交互拍摄数据中只含有用户面部图像的面部拍摄数据,进行用户面部特征的识别,提取对应面部特征的多个关键点,进而按照多个关键点进行空间坐标构建,得到构建的三维坐标系,并匹配多个关键点在三维坐标系中的三维坐标,建立稀疏点云,进而按照面部拍摄数据,在三维坐标系中进行三维信息的丰富,将稀疏点云扩建形成稠密点云,并对稠密点云中的空洞部位进行填充,进行纹理映射,将面部拍摄数据中对应的二维空间的纹理信息映射到三维空间中,生成用户的三维面部模型。
具体的,图4示出了本发明实施例提供的方法中构建三维面部模型的流程图。
其中,在本发明提供的优选实施方式中,所述根据所述交互拍摄数据,构建用户的三维面部模型具体包括以下步骤:
步骤S1031,对所述交互拍摄数据进行处理,提取面部拍摄数据。
步骤S1032,根据所述面部拍摄数据,进行关键点的提取与匹配,得到关键点数据。
步骤S1033,根据所述关键点数据,构建三维坐标系。
步骤S1034,按照所述面部拍摄数据,在所述三维坐标系中进行点云构建与映射处理,生成用户的三维面部模型。
进一步的,所述用于人机交互的图像处理方法还包括以下步骤:
步骤S104,根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像。
在本发明实施例中,通过对三维面部模型进行特征分析,生成用户的三维面部模型对应的识别特征信息,根据识别特征信息,对多个人物图像进行识别对比,从多个人物图像中识别出与三维面部模型特征相同或相似的人物图像,将该人物图像标记为用户图像。
具体的,图5示出了本发明实施例提供的方法中人物图像对比配对的流程图。
其中,在本发明提供的优选实施方式中,所述根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像具体包括以下步骤:
步骤S1041,对所述三维面部模型进行特征分析,得到用户的识别特征信息。
步骤S1042,根据所述识别特征信息,对多个所述人物图像进行对比配对,生成对比配对结果。
步骤S1043,按照所述对比配对结果,将对比配对成功的人物图像标记为用户图像。
进一步的,所述用于人机交互的图像处理方法还包括以下步骤:
步骤S105,按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
在本发明实施例中,按照处理设置信息,对三维面部模型进行相应的美颜优化处理,对三维面部模型相应的部位,按照用户的设置进行美颜调节,完成对三维面部模型的优化调节之后,生成三维优化模型,并通过对用户图像进行展示分析,确定用户在用户图像中的拍摄角度、光照、阴影等拍摄特征,得到展示特征信息,进而按照展示特征信息,对三维优化模型进行展示调节,获取完成展示调节得到的用户处理图像,进而按照用户处理图像,对目标图像中的用户图像进行替换,生成目标处理图像。
具体的,图6示出了本发明实施例提供的方法中模型处理图像替换的流程图。
其中,在本发明提供的优选实施方式中,所述按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像具体包括以下步骤:
步骤S1051,按照所述处理设置信息,对所述三维面部模型进行优化处理,生成三维优化模型。
步骤S1052,对所述用户图像进行展示分析,得到展示特征信息。
步骤S1053,按照所述展示特征信息,对所述三维优化模型进行展示处理,生成用户处理图像。
步骤S1054,将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
进一步的,图7示出了本发明实施例提供的系统的应用架构图。
其中,在本发明提供的又一个优选实施方式中,一种用于人机交互的图像处理系统,包括:
人物图像提取单元101,用于获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像。
在本发明实施例中,人物图像提取单元101接收用户上传的需要进行处理的目标图像,通过对目标图像进行人物识别,生成人物识别信息,进而按照人物识别信息,对目标图像进行图像提取处理,从目标图像中提取多个人物图像。
处理交互拍摄单元102,用于接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据。
在本发明实施例中,完成目标图像的上传之后,处理交互拍摄单元102生成信息设置窗口,并将信息设置窗口进行展示,用户可以在信息设置窗口中进行图像设置的选择,处理交互拍摄单元102接收用户在信息设置窗口选择的处理设置信息,并且在展示信息设置窗口时,生成窗口拍摄信号,按照窗口拍摄信号对进行图像设置选择的用户进行交互视频拍摄,并在用户完成图像设置选择时,完成交互视频拍摄,在这个过程中,对用户交互拍摄得到交互拍摄数据。
具体的,图8示出了本发明实施例提供的系统中处理交互拍摄单元102的结构框图。
其中,在本发明提供的优选实施方式中,所述处理交互拍摄单元102具体包括:
窗口展示模块1021,用于生成并展示信息设置窗口。
设置接收模块1022,用于接收用户在所述信息设置窗口选择的处理设置信息。
信号生成模块1023,用于生成窗口拍摄信号。
交互拍摄模块1024,用于根据所述窗口拍摄信号,对用户进行交互拍摄,生成交互拍摄数据。
进一步的,所述用于人机交互的图像处理系统还包括:
三维模型构建单元103,用于根据所述交互拍摄数据,构建用户的三维面部模型。
在本发明实施例中,三维模型构建单元103通过对交互拍摄数据进行处理,提取交互拍摄数据中只含有用户面部图像的面部拍摄数据,进行用户面部特征的识别,提取对应面部特征的多个关键点,进而按照多个关键点进行空间坐标构建,得到构建的三维坐标系,并匹配多个关键点在三维坐标系中的三维坐标,建立稀疏点云,进而按照面部拍摄数据,在三维坐标系中进行三维信息的丰富,将稀疏点云扩建形成稠密点云,并对稠密点云中的空洞部位进行填充,进行纹理映射,将面部拍摄数据中对应的二维空间的纹理信息映射到三维空间中,生成用户的三维面部模型。
对比配对标记单元104,用于根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像。
在本发明实施例中,对比配对标记单元104通过对三维面部模型进行特征分析,生成用户的三维面部模型对应的识别特征信息,根据识别特征信息,对多个人物图像进行识别对比,从多个人物图像中识别出与三维面部模型特征相同或相似的人物图像,将该人物图像标记为用户图像。
具体的,图9示出了本发明实施例提供的系统中对比配对标记单元104的结构框图。
其中,在本发明提供的优选实施方式中,所述对比配对标记单元104具体包括:
特征分析模块1041,用于对所述三维面部模型进行特征分析,得到用户的识别特征信息。
对比配对模块1042,用于根据所述识别特征信息,对多个所述人物图像进行对比配对,生成对比配对结果。
图像标记模块1043,用于按照所述对比配对结果,将对比配对成功的人物图像标记为用户图像。
进一步的,所述用于人机交互的图像处理系统还包括:
图像处理替换单元105,用于按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
在本发明实施例中,图像处理替换单元105按照处理设置信息,对三维面部模型进行相应的美颜优化处理,对三维面部模型相应的部位,按照用户的设置进行美颜调节,完成对三维面部模型的优化调节之后,生成三维优化模型,并通过对用户图像进行展示分析,确定用户在用户图像中的拍摄角度、光照、阴影等拍摄特征,得到展示特征信息,进而按照展示特征信息,对三维优化模型进行展示调节,获取完成展示调节得到的用户处理图像,进而按照用户处理图像,对目标图像中的用户图像进行替换,生成目标处理图像。
具体的,图10示出了本发明实施例提供的系统中图像处理替换单元105的结构框图。
其中,在本发明提供的优选实施方式中,所述图像处理替换单元105具体包括:
优化处理模块1051,用于按照所述处理设置信息,对所述三维面部模型进行优化处理,生成三维优化模型。
展示分析模块1052,用于对所述用户图像进行展示分析,得到展示特征信息。
展示处理模块1053,用于按照所述展示特征信息,对所述三维优化模型进行展示处理,生成用户处理图像。
图像替换模块1054,用于将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像。
应该理解的是,虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink) DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (6)
1.一种用于人机交互的图像处理方法,其特征在于,所述方法具体包括以下步骤:
获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像;
接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据;
具体的,完成目标图像的上传之后,生成信息设置窗口,并将信息设置窗口进行展示,用户在信息设置窗口中进行图像设置的选择,从而接收用户在信息设置窗口选择的处理设置信息,并且在展示信息设置窗口时,生成窗口拍摄信号,按照窗口拍摄信号对进行图像设置选择的用户进行交互视频拍摄,并在用户完成图像设置选择时,完成交互视频拍摄,在这个过程中,对用户交互拍摄得到交互拍摄数据;
根据所述交互拍摄数据,构建用户的三维面部模型;
根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像;
按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像;
具体的,按照处理设置信息,对三维面部模型进行相应的美颜优化处理,对三维面部模型相应的部位,按照用户的设置进行美颜调节,完成对三维面部模型的优化调节之后,生成三维优化模型,并通过对用户图像进行展示分析,确定用户在用户图像中的拍摄角度、光照、阴影拍摄特征,得到展示特征信息,进而按照展示特征信息,对三维优化模型进行展示调节,获取完成展示调节得到的用户处理图像,进而按照用户处理图像,对目标图像中的用户图像进行替换,生成目标处理图像。
2.根据权利要求1所述的用于人机交互的图像处理方法,其特征在于,所述获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像具体包括以下步骤:
获取待处理的目标图像;
对所述目标图像进行人物识别,生成人物识别信息;
按照所述人物识别信息,从所述目标图像中提取多个人物图像。
3.根据权利要求1所述的用于人机交互的图像处理方法,其特征在于,所述根据所述交互拍摄数据,构建用户的三维面部模型具体包括以下步骤:
对所述交互拍摄数据进行处理,提取面部拍摄数据;
根据所述面部拍摄数据,进行关键点的提取与匹配,得到关键点数据;
根据所述关键点数据,构建三维坐标系;
按照所述面部拍摄数据,在所述三维坐标系中进行点云构建与映射处理,生成用户的三维面部模型。
4.根据权利要求1所述的用于人机交互的图像处理方法,其特征在于,所述根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像具体包括以下步骤:
对所述三维面部模型进行特征分析,得到用户的识别特征信息;
根据所述识别特征信息,对多个所述人物图像进行对比配对,生成对比配对结果;
按照所述对比配对结果,将对比配对成功的人物图像标记为用户图像。
5.一种用于人机交互的图像处理系统,其特征在于,所述系统包括人物图像提取单元、处理交互拍摄单元、三维模型构建单元、对比配对标记单元和图像处理替换单元,其中:
人物图像提取单元,用于获取待处理的目标图像,对所述目标图像进行人物识别,提取所述目标图像中的多个人物图像;
处理交互拍摄单元,用于接收用户的处理设置信息,并在处理过程中,对用户进行交互拍摄,生成交互拍摄数据;
具体的,完成目标图像的上传之后,处理交互拍摄单元生成信息设置窗口,并将信息设置窗口进行展示,用户在信息设置窗口中进行图像设置的选择,从而接收用户在信息设置窗口选择的处理设置信息,并且在展示信息设置窗口时,生成窗口拍摄信号,按照窗口拍摄信号对进行图像设置选择的用户进行交互视频拍摄,并在用户完成图像设置选择时,完成交互视频拍摄,在这个过程中,对用户交互拍摄得到交互拍摄数据;
三维模型构建单元,用于根据所述交互拍摄数据,构建用户的三维面部模型;
对比配对标记单元,用于根据所述三维面部模型,对多个所述人物图像进行对比配对,将对比配对成功的人物图像标记为用户图像;
图像处理替换单元,用于按照所述处理设置信息和所述用户图像,对所述三维面部模型进行处理,生成用户处理图像,并将所述用户处理图像替换所述目标图像中的用户图像,生成目标处理图像;
具体的,图像处理替换单元按照处理设置信息,对三维面部模型进行相应的美颜优化处理,对三维面部模型相应的部位,按照用户的设置进行美颜调节,完成对三维面部模型的优化调节之后,生成三维优化模型,并通过对用户图像进行展示分析,确定用户在用户图像中的拍摄角度、光照、阴影拍摄特征,得到展示特征信息,进而按照展示特征信息,对三维优化模型进行展示调节,获取完成展示调节得到的用户处理图像,进而按照用户处理图像,对目标图像中的用户图像进行替换,生成目标处理图像。
6.根据权利要求5所述的用于人机交互的图像处理系统,其特征在于,所述对比配对标记单元具体包括:
特征分析模块,用于对所述三维面部模型进行特征分析,得到用户的识别特征信息;
对比配对模块,用于根据所述识别特征信息,对多个所述人物图像进行对比配对,生成对比配对结果;
图像标记模块,用于按照所述对比配对结果,将对比配对成功的人物图像标记为用户图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210941275.XA CN115018698B (zh) | 2022-08-08 | 2022-08-08 | 一种用于人机交互的图像处理方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210941275.XA CN115018698B (zh) | 2022-08-08 | 2022-08-08 | 一种用于人机交互的图像处理方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115018698A CN115018698A (zh) | 2022-09-06 |
CN115018698B true CN115018698B (zh) | 2022-11-08 |
Family
ID=83065842
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210941275.XA Active CN115018698B (zh) | 2022-08-08 | 2022-08-08 | 一种用于人机交互的图像处理方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115018698B (zh) |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110298799A1 (en) * | 2008-06-03 | 2011-12-08 | Xid Technologies Pte Ltd | Method for replacing objects in images |
CN105118082B (zh) * | 2015-07-30 | 2019-05-28 | 科大讯飞股份有限公司 | 个性化视频生成方法及系统 |
WO2017177259A1 (en) * | 2016-04-12 | 2017-10-19 | Phi Technologies Pty Ltd | System and method for processing photographic images |
CN107123081A (zh) * | 2017-04-01 | 2017-09-01 | 北京小米移动软件有限公司 | 图像处理方法、装置及终端 |
CN107959789B (zh) * | 2017-11-10 | 2020-03-06 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN108012081B (zh) * | 2017-12-08 | 2020-02-04 | 北京百度网讯科技有限公司 | 智能美颜方法、装置、终端和计算机可读存储介质 |
CN108765272B (zh) * | 2018-05-31 | 2022-07-08 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备及可读存储介质 |
CN108876708B (zh) * | 2018-05-31 | 2022-10-25 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备和存储介质 |
CN109190503A (zh) * | 2018-08-10 | 2019-01-11 | 珠海格力电器股份有限公司 | 美颜方法、装置、计算装置和存储介质 |
CN108682050B (zh) * | 2018-08-16 | 2020-03-24 | Oppo广东移动通信有限公司 | 基于三维模型的美颜方法和装置 |
CN111179179A (zh) * | 2018-11-09 | 2020-05-19 | 大连神奇视角网络科技有限公司 | 一种基于电子画册的摄影自主交流系统 |
CN109767485A (zh) * | 2019-01-15 | 2019-05-17 | 三星电子(中国)研发中心 | 图像处理方法和装置 |
CN110728621B (zh) * | 2019-10-17 | 2023-08-25 | 北京达佳互联信息技术有限公司 | 一种面部图像的换脸方法、装置、电子设备及存储介质 |
CN111563855B (zh) * | 2020-04-29 | 2023-08-01 | 百度在线网络技术(北京)有限公司 | 图像处理的方法及装置 |
-
2022
- 2022-08-08 CN CN202210941275.XA patent/CN115018698B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN115018698A (zh) | 2022-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107393000B (zh) | 图像处理方法、装置、服务器及计算机可读存储介质 | |
CN109859098B (zh) | 人脸图像融合方法、装置、计算机设备及可读存储介质 | |
CN109829930B (zh) | 人脸图像处理方法、装置、计算机设备及可读存储介质 | |
US10789453B2 (en) | Face reenactment | |
CN110503703B (zh) | 用于生成图像的方法和装置 | |
CN108463823B (zh) | 一种用户头发模型的重建方法、装置及终端 | |
CN109344742B (zh) | 特征点定位方法、装置、存储介质和计算机设备 | |
CN110738595B (zh) | 图片处理方法、装置和设备及计算机存储介质 | |
CN107346414B (zh) | 行人属性识别方法和装置 | |
CN108121957A (zh) | 美颜素材的推送方法及装置 | |
CN109299658B (zh) | 脸部检测方法、脸部图像渲染方法、装置及存储介质 | |
US20130258198A1 (en) | Video search system and method | |
CN106485186B (zh) | 图像特征提取方法、装置、终端设备及系统 | |
CN108198177A (zh) | 图像获取方法、装置、终端及存储介质 | |
CN110390254B (zh) | 基于人脸的性格分析方法、装置、计算机设备及存储介质 | |
CN110738103A (zh) | 活体检测方法、装置、计算机设备和存储介质 | |
CN113469092B (zh) | 字符识别模型生成方法、装置、计算机设备和存储介质 | |
US11386587B2 (en) | Automatic coloring of line drawing | |
CN111753782A (zh) | 一种基于双流网络的假脸检测方法、装置及电子设备 | |
CN114332374A (zh) | 一种虚拟显示方法、设备以及存储介质 | |
CN115035580A (zh) | 一种人物数字孪生构建方法及系统 | |
CN109949207B (zh) | 虚拟对象合成方法、装置、计算机设备和存储介质 | |
CN113453027A (zh) | 直播视频、虚拟上妆的图像处理方法、装置及电子设备 | |
CN115018698B (zh) | 一种用于人机交互的图像处理方法及系统 | |
CN112288861B (zh) | 一种基于单张照片的人脸三维模型自动构建方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |