CN109981989A - 渲染图像的方法、装置、电子设备和计算机可读存储介质 - Google Patents

渲染图像的方法、装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN109981989A
CN109981989A CN201910274416.5A CN201910274416A CN109981989A CN 109981989 A CN109981989 A CN 109981989A CN 201910274416 A CN201910274416 A CN 201910274416A CN 109981989 A CN109981989 A CN 109981989A
Authority
CN
China
Prior art keywords
image
parameter
rendering
filming apparatus
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910274416.5A
Other languages
English (en)
Other versions
CN109981989B (zh
Inventor
李润祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Douyin Vision Co Ltd
Douyin Vision Beijing Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201910274416.5A priority Critical patent/CN109981989B/zh
Publication of CN109981989A publication Critical patent/CN109981989A/zh
Application granted granted Critical
Publication of CN109981989B publication Critical patent/CN109981989B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering
    • G06T15/005General purpose rendering architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107Static hand or arm
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • H04N23/611Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects

Abstract

本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法包括:从拍摄装置获取第一图像;确定所述第一图像中的人物对象的参数;响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像;从所述拍摄装置获取所述第二图像;通过渲染参数渲染所述第二图像中的人物对象。本公开实施例通过采取该技术方案,通过识别人物对象的参数,根据所述人物对象的参数控制拍摄装置的拍摄,并对所拍摄的人物对象进行渲染,能够实现灵活地拍摄和渲染所述人物对象。

Description

渲染图像的方法、装置、电子设备和计算机可读存储介质
技术领域
本公开涉及信息处理领域,尤其涉及一种渲染图像的方法、装置、电子设备及计算机可读存储介质。
背景技术
随着计算机技术的发展,智能终端的应用范围得到了广泛的提高,例如可以通过智能终端拍摄图像和视频等。
同时智能终端还具有强大的数据处理能力,例如在采用智能终端对目标对象进行拍摄时,能够通过图像分割算法对智能终端拍摄所获得的图像进行实时处理,以识别出所拍摄图像中的目标对象。以通过人体图像分割算法处理视频为例,智能终端等计算机设备能够通过人体图像分割算法实时地处理视频的每一帧图像,准确识别图像中的人物对象轮廓和人物对象的各个关键点,例如能够识别人物对象的面部、右手等在图像中的位置等,这种识别已经能够精确到像素级。
现有技术中,还能够通过设定的渲染参数渲染照片或者视频中的图像,例如可以通过虚拟按键或物理按键等控制拍摄装置拍摄照片,然后识别其中的人物对象并进行美颜。但是上述对人物对象进行拍摄和渲染的过程需要被拍摄的人物对象和对拍摄装置的控制之间良好配合,无法灵活地实现拍摄和渲染所述人物对象。
发明内容
本公开实施例提供渲染图像的方法,装置,电子设备,和计算机可读存储介质,通过识别人物对象的参数,根据所述人物对象的参数控制拍摄装置的拍摄,并对所拍摄的人物对象进行渲染,能够实现灵活地拍摄和渲染所述人物对象。
第一方面,本公开实施例提供一种渲染图像的方法,其特征在于,包括:从拍摄装置获取第一图像;确定所述第一图像中的人物对象的参数;响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像;从所述拍摄装置获取所述第二图像;通过渲染参数渲染所述第二图像中的人物对象。
进一步的,所述第一图像包括所述拍摄装置生成的用于预览的图像。
进一步的,所述第一图像中的人物对象的参数,包括如下参数中的一个或多个:所述第一图像中的人物对象的手势参数;所述第一图像中的人物对象的姿势参数;所述第一图像中的人物对象的表情参数;所述第一图像中的人物对象的位置参数。
进一步的,所述第一图像中的人物对象的参数包括所述手势参数;所述人物对象的参数满足预设条件,包括:所述手势参数与预设手势参数对应。
进一步的,所述第一图像中的人物对象的参数包括所述姿势参数;所述人物对象的参数满足预设条件,包括:所述手势参数与预设姿势参数对应。
进一步的,所述第一图像中的人物对象的参数包括所述表情参数;所述人物对象的参数满足预设条件,包括:所述表情参数与预设表情参数对应。
进一步的,所述第一图像中的人物对象的参数包括所述位置参数;所述人物对象的参数满足预设条件,包括:所述位置参数属于预设的位置范围。
进一步的,响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像,包括:响应于所述人物对象的参数满足预设条件,向所述拍摄装置发送控制信号,所述控制信号用于指示所述拍摄装置拍摄所述第二图像。
进一步的,通过渲染参数渲染所述第二图像中的人物对象,包括:确定所述第二图像中的人物对象的人脸参数;根据所述渲染参数修正所述人脸参数;根据修正后的人脸参数渲染所述第二图像。
进一步的,在通过渲染参数渲染所述第二图像中的人物对象之后,还包括:显示所述第二图像;和/或存储所述第二图像。
第二方面,本公开实施例提供一种渲染图像的装置,其特征在于,包括:图像获取模块,用于从拍摄装置获取第一图像;确定模块,用于确定所述第一图像中的人物对象的参数;控制模块,用于响应于所述人物对象的参数满足第一预设条件,控制所述拍摄装置拍摄第二图像;所述图像获取模块,还用于从所述拍摄装置获取所述第二图像;渲染模块,用于通过渲染参数渲染所述第二图像中的人物对象。
进一步的,所述第一图像包括所述拍摄装置生成的用于预览的图像。
进一步的,所述第一图像中的人物对象的参数,包括如下参数中的一个或多个:所述第一图像中的人物对象的手势参数;所述第一图像中的人物对象的姿势参数;所述第一图像中的人物对象的表情参数;所述第一图像中的人物对象的位置参数。
进一步的,所述第一图像中的人物对象的参数包括所述手势参数;所述人物对象的参数满足预设条件,包括:所述手势参数与预设手势参数对应。
进一步的,所述第一图像中的人物对象的参数包括所述姿势参数;所述人物对象的参数满足预设条件,包括:所述手势参数与预设姿势参数对应。
进一步的,所述第一图像中的人物对象的参数包括所述表情参数;所述人物对象的参数满足预设条件,包括:所述表情参数与预设表情参数对应。
进一步的,所述第一图像中的人物对象的参数包括所述位置参数;所述人物对象的参数满足预设条件,包括:所述位置参数属于预设的位置范围。
进一步的,所述控制模块还用于:响应于所述人物对象的参数满足预设条件,向所述拍摄装置发送控制信号,所述控制信号用于指示所述拍摄装置拍摄所述第二图像。
进一步的,所述渲染模块还用于:确定所述第二图像中的人物对象的人脸参数;根据所述渲染参数修正所述人脸参数;根据修正后的人脸参数渲染所述第二图像。
进一步的,所述渲染图像的装置还包括显示模块和/或存储模块,所述显示模块用于显示所述第二图像;所述存储模块用于存储所述第二图像。
第三方面,本公开实施例提供一种电子设备,包括:存储器,用于存储计算机可读指令;以及一个或多个处理器,用于运行所述计算机可读指令,使得所述处理器运行时实现前述第一方面中的任一所述渲染图像的方法。
第四方面,本公开实施例提供一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,当所述计算机指令被计算机执行时,使得所述计算机执行前述第一方面中的任一所述渲染图像的方法。
本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法,其特征在于,包括:从拍摄装置获取第一图像;确定所述第一图像中的人物对象的参数;响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像;从所述拍摄装置获取所述第二图像;通过渲染参数渲染所述第二图像中的人物对象。本公开实施例提供渲染图像的方法,装置,电子设备,和计算机可读存储介质,通过识别人物对象的参数,根据所述人物对象的参数控制拍摄装置的拍摄,并对所拍摄的人物对象进行渲染,能够实现灵活地拍摄和渲染所述人物对象。
上述说明仅是本公开技术方案的概述,为了能更清楚了解本公开的技术手段,而可依照说明书的内容予以实施,并且为让本公开的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的渲染图像的方法的实施例一的流程图;
图2为本公开实施例提供的渲染图像的方法的实施例二的流程图;
图3为本公开实施例提供的渲染图像的装置的实施例的结构示意图;
图4为根据本公开实施例提供的电子设备的结构示意图。
具体实施方式
以下通过特定的具体实例说明本公开的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本公开的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
需要说明的是,下文描述在所附权利要求书的范围内的实施例的各种方面。应显而易见,本文中所描述的方面可体现于广泛多种形式中,且本文中所描述的任何特定结构及/或功能仅为说明性的。基于本公开,所属领域的技术人员应了解,本文中所描述的一个方面可与任何其它方面独立地实施,且可以各种方式组合这些方面中的两者或两者以上。举例来说,可使用本文中所阐述的任何数目个方面来实施设备及/或实践方法。另外,可使用除了本文中所阐述的方面中的一或多者之外的其它结构及/或功能性实施此设备及/或实践此方法。
还需要说明的是,以下实施例中所提供的图示仅以示意方式说明本公开的基本构想,图示中仅显示与本公开中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
另外,在以下描述中,提供具体细节是为了便于透彻理解实例。然而,所属领域的技术人员将理解,可在没有这些特定细节的情况下实践所述方面。
图1为本公开实施例提供的渲染图像的方法实施例一的流程图,本实施例提供的渲染图像的方法可以由一个渲染图像的装置来执行,该装置可以实现为软件,可以实现为硬件,还可以实现为软件和硬件的组合,例如所述渲染图像的装置包括计算机设备(例如智能终端),从而通过该计算机设备来执行本实施例提供的该渲染图像的方法。
如图1所示,本公开实施例的渲染图像的方法包括如下步骤:
步骤S101,从拍摄装置获取第一图像;
在步骤S101中,渲染图像的装置从拍摄装置获取第一图像,以便实现本公开实施例的渲染图像的方法。
可选的,所述第一图像包括所述拍摄装置拍摄的图像,例如所述拍摄装置拍摄了照片,该照片作为所述第一图像;还例如所述拍摄装置拍摄了视频,本领域技术人员可以理解,视频包括一系列图像帧,每个图像帧可以称为图像,从而该视频中的一个或多个图像帧可以作为所述第一图像。
可选的,所述第一图像包括所述拍摄装置生成的用于预览的图像。作为说明,例如所述拍摄装置包括感光元件(或成像原件)和/或镜头,从而所述拍摄装置获取图像的过程可以包括将光线通过感光元件记录并转化为数字信号,运算芯片对数字信号进行处理以形成图像对应的数据,显示装置可以基于该数据显示该图像。现有技术中较为常见的是,在使用数码拍摄装置准备拍摄照片或者视频时,可以几乎实时地将数码拍摄装置获取的图像(或者说一系列图像帧,或者图像流)显示在屏幕上,但是本领域技术人员能够明确,在上述实时显示获取的图像的过程中并没有实现拍摄照片或者视频功能,而仅仅是将拍摄装置生成的用于预览的图像显示在屏幕上,所述数码拍摄装置需要接收控制命令后才会实现拍摄照片或者视频的功能。
值得说明的是,本公开实施例中所涉及的拍摄装置,可以属于所述渲染图像的装置的一部分,即所述渲染图像的装置包括所述拍摄装置,从而步骤S101中所获取的第一图像包括所述拍摄装置拍摄的图像或者生成的用于预览的图像;当然,所述渲染图像的装置可以不包括所述拍摄装置,但是与所述拍摄装置通信连接,从而步骤S101中获取第一图像包括所述渲染图像的装置通过所述通信连接获取所述拍摄装置拍摄的图像或者生成的用于预览的图像。
步骤S102,确定所述第一图像中的人物对象的参数;
可选的,所述人物对象包括人体,或者所述人体的关键部位,其中所述人体的关键部位可以包括人体的一个或者多个器官、关节、或者部位。如本公开背景技术所述,现有技术中的计算机设备具有强大的数据处理能力,例如可以通过人体图像分割算法识别图像中的人物对象的轮廓和人物对象的各关键点,乃至识别人物对象的各部位,因此,本公开实施例中的渲染图像的装置可以基于人体图像分割算法识别所述第一图像中的人物对象的参数。可选的,所述第一图像中的人物对象的参数包括如下参数中的一个或多个:所述第一图像中的人物对象的手势参数;所述第一图像中的人物对象的姿势参数;所述第一图像中的人物对象的表情参数;所述第一图像中的人物对象的位置参数。
作为一个并未限定本公开实施例的示例,可以借助人体分割算法识别图像中的人物对象的关键点,并根据所述人物对象的关键点确定所述人物对象的参数。例如可以通过颜色特征和/或形状特征表征所述人物对象的关键点,然后在所述第一图像中根据所述颜色特征和/或形状特征进行匹配,以通过特征提取的方式实现关键点定位,由于人物对象的关键点在图像中仅占据非常小的面积(通常只有几个至几十个像素的大小),与人体的关键点对应的颜色特征和/或形状特征在图像上所占据的区域通常也是非常有限和局部的,目前常用的特征提取的方式有两种:(1)沿轮廓垂向的一维范围图像特征提取;(2)关键点方形邻域的二维范围图像特征提取,上述两种方式有很多种实现方法,如ASM和AAM类方法、统计能量函数类方法、回归分析方法、深度学习方法、分类器方法、批量提取方法等等,上述各种实现方法所使用的关键点个数,准确度以及速度各不相同,可以适用于不同的应用场景,本公开实施例不做具体限定。
在一个可选的示例中,所述人物对象的参数包括手势参数,那么可以通过与人手的关键点对应的颜色特征和/或形状特征在所述第一图像中提取人手的关键点,进而根据提取的人手的关键点确定所述手势参数。例如可以根据设定人手的关键点的数量提取所述人手的轮廓关键点和关节关键点,每个关键点有固定编号,比如可以按照轮廓关键点、大拇指关节关键点、食指关节关键点、中指关节关键点、无名指关节关键点、小拇指关节关键点的顺序,从上到下编号,在一个典型的应用中,所述关键点为22个,每个关键点有固定编号。在提取了所述人手的关键点之后,可以中选择一个或多个人手的关键点,与预设的手势特征做比对,以确定出所述人物对象的手势参数,例如选择手掌关键点以通过圆形外界检测框确定人手缩成拳头状态,并且选择食指指尖关键点和中指指尖关键点以计算两指尖关键点之间的距离大于或等于第一阈值并且两指尖关键点距离所述手掌关键点的质心或中心等大于或等于第二阈值,从而可以确定所述人物对象的关键点符合“V字形”的手势特征,那么可以将所述人物对象的手势参数确定为“V字形”。
在上述可选的示例中,由于所述人物对象(即人手)的关键点符合“V字形”的手势特征,故将所述人物对象的手势参数确定为“V字形”,本领域技术人员可以理解,还可以根据其他手势特征确定所述人物对象的手势参数。可选的,可以通过确定标签的方式标记所述人物对象参数,那么所述标签用于指示所述人物对象的参数。例如在上述确定所述人物对象的手势参数为“V字形”的实施例中,可以将所述人物对象的手势参数的标签标记为“V字形”。
同理,在一个可选的示例中,所述人物对象的参数包括姿势参数,那么可以基于与上述手势参数类似的方式确定所述人物对象的姿势参数,例如可以通过与人体的关键点对应的颜色特征和/或形状特征在所述第一图像中提取人体的关键点,进而根据提取的人体的关键点确定所述手势参数,此处不再赘述。
同理,在又一个可选的示例中,所述人物对象的参数包括表情参数,那么可以基于与上述手势参数类似的方式确定所述人物对象的表情参数,例如可以通过与人脸的关键点对应的颜色特征和/或形状特征在所述第一图像中提取人脸的关键点,进而根据提取的人脸的关键点确定所述表情参数,此处不再赘述。
在一个可选的示例中,所述人物对象的参数包括位置参数。本领域技术人员可以理解,本公开实施例中所涉及的图像包括的像素,可以通过位置参数和颜色参数来表征,一种典型的表征方式为通过五元组(x,y,r,g,b)来表示图像的一个像素,其中的坐标x和y作为所述一个像素的位置参数,其中的颜色分量r,g,和b为所述像素在RGB空间上的数值,将r,g,和b叠加可以获得所述像素的颜色。可选的,像素的位置参数还包括深度坐标z,例如现有技术中部分拍摄装置在拍摄过程中,可以记录像素的深度,从而对于一个像素,可以通过(x,y,z)来表示所述一个像素的位置参数。在本公开的上述可选的示例中,可以通过坐标表示所述人物对象的位置参数,例如在所述第一图像中,基于与所述人物对象对应的像素的坐标确定所述人物对象的位置参数,作为一个并不限定本公开实施例的具体示例,可以通过与人物对象的关键点对应的颜色特征和/或形状特征在所述第一图像中提取人物对象的轮廓关键点,然后基于所述轮廓关键点生成所述人物对象的轮廓,将所述人物对象的轮廓以内的所有像素的z坐标取平均值,将该平均值作为所述人物对象的位置参数。
步骤S103,响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像;
在步骤S102中确定了所述人物对象的参数,进而在步骤S103中,响应于确定的所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄所述第二图像,例如所述拍摄装置生成关于所述人物对象的预览图像并显示在所述渲染图像的装置所包括的或者通信连接的显示装置上,在步骤S103中响应于该预览图像中的人物对象的参数满足预设条件,则控制所述拍摄装置对所述人物对象进行拍摄,以获取所述第二图像。
可选的,所述第一图像中的人物对象的参数包括所述手势参数,相应地,所述人物对象的参数满足预设条件,包括:所述手势参数与预设手势参数对应,例如在步骤S102中确定的所述手势参数与预设的手势参数相同或者相等,或者所述手势参数属于预设的手势参数的范围,则认为所述手势参数与预设手势参数对应,作为一个示例,在步骤S102中所确定的手势参数的标签为“V字形”,而预设手势参数也为“V字形”(作为计算机程序实现的示例,“V字形”的手势参数可以用一个布尔值表示,在步骤S102中确定所述第一图像中所述人物对象的手势参数为“V字形”则可以将标记所述人物对象参数的标签赋值为该布尔值,并且所述预设手势参数也可以通过该布尔值表示,因此在步骤S103中,响应于所述手势参数的布尔值与所述预设手势参数的布尔值相等,则控制所述拍摄装置拍摄所述第二图像;同理,所述预设的手势参数可以包括多个布尔值以代表多个预设的手势参数,其构成所述预设的手势参数的范围,当所述第一图像中所述人物对象的手势参数属于所述预设的手势参数的范围,则控制所述拍摄装置拍摄所述第二图像),那么认为所述手势参数与预设手势参数对应,因此响应于所述手势参数与预设手势参数对应,控制所述拍摄装置拍摄所述第二图像。
可选的,所述第一图像中的人物对象的参数包括所述姿势参数,相应地,所述人物对象的参数满足预设条件,包括:所述手势参数与预设姿势参数对应。可选的,所述第一图像中的人物对象的参数包括所述表情参数,相应地,所述人物对象的参数满足预设条件,包括:所述表情参数与预设表情参数对应。其中,对于所述第一图像中的人物对象的参数与预设的参数对应的示例可以参照所述手势参数与预设的手势参数对应的示例中相同或相应的描述,此处不再赘述。
可选的,所述第一图像中的人物对象的参数包括所述位置参数,相应地,所述人物对象的参数满足预设条件,包括:所述位置参数属于预设的位置范围。例如在步骤S102中确定的所述位置参数包括所述人物对象对应的所有像素的z坐标的平均值,响应于所述z坐标的平均值属于预设的位置范围(作为计算机程序实现的示例,例如所述z坐标的平均值属于预设的区间),控制所述拍摄装置拍摄所述第二图像。
作为一个可选的实施例,在步骤S103中,控制所述拍摄装置拍摄第二图像,包括:向所述拍摄装置发送控制信号,所述控制信号指示所述拍摄装置进行拍摄。相应地,所述拍摄装置响应于接收到所述控制信号,拍摄所述第二图像。
步骤S104,从所述拍摄装置获取所述第二图像;
由于在步骤S103中,所述渲染图像的装置控制所述拍摄装置拍摄了所述第二图像,那么在步骤S104中,所述渲染图像的装置能够从所述拍摄装置获取所述第二图像。关于所述渲染图像的装置从所述拍摄装置获取所述第二图像的获取方式,可以参照步骤S101中关于获取所述第一图像的相同或相应的描述,此处不再赘述。
步骤S105,通过渲染参数渲染所述第二图像中的人物对象。
可选的,所述人物对象包括人体,或者所述人体的关键部位,其中所述人体的关键部位可以包括人体的一个或者多个器官、关节、或者部位。如前所述,本公开实施例中的渲染图像的装置可以基于人体图像分割算法识别图像中的人物对象的轮廓和人物对象的各关键点,乃至识别人物对象的各部位,例如能够识别所述第二图像中的人脸部位所对应的像素的位置参数和颜色参数,还能够识别所述第二图像中的身体、手臂、腿部等部位对应的像素的位置参数和颜色参数,那么可以通过渲染参数对在所述第二图像中识别的人物对象进行渲染,以实现诸如美颜等图像处理功能。可选的,通过渲染参数渲染所述第二图像中的人物对象,包括:确定所述第二图像中的人物对象的人脸参数,并根据所述渲染参数修正所述人脸参数,然后根据修正后的人脸参数渲染所述第二图像。作为一个示例,所述渲染参数可以是预设的渲染参数,例如该预设的渲染参数对应于人脸像素的目标颜色参数,那么在步骤S105中,可以计算所述第二图像中的人脸部位所对应的像素的颜色参数与所述预设的渲染参数即人脸像素的目标颜色参数的差值,并基于该差值修正所述第二图像中的人脸部位所对应的像素的颜色参数,以实现诸如人脸美白等图像处理功能。本领域技术人员可以理解,所述渲染参数可以包括其他的形式和内容,通过所述渲染参数能够调整所述人物对象对应的像素的位置参数和/或颜色参数,例如实现瘦脸,瘦腿,瘦脸等各种图像处理功能,本公开实施例对所述渲染参数的形式不做具体限定。
在本公开实施例提供的渲染图像的方法中,通过识别人物对象的参数,根据所述人物对象的参数控制拍摄装置的拍摄,并对所拍摄的人物对象进行渲染,能够实现灵活地拍摄所述人物对象和渲染所述人物对象。
图2为本公开实施例提供的渲染图像的方法实施例二的流程图,在该方法实施例二中,在步骤S105:通过渲染参数渲染所述第二图像中的人物对象之后,还包括步骤S201;显示所述第二图像;和/或存储所述第二图像。由于在步骤S105中实现了渲染所述第二图像的功能,例如对所述拍摄装置拍摄的所述第二图像进行了美颜等图像处理,那么在步骤S201中,可以将该经过美颜的图像显示和/或存储,以使得使用者能够即时浏览渲染后的图像效果并持久化该经过渲染的图像。
图3所示为本公开实施例提供的渲染图像的装置300实施例的结构示意图,如图3所示,渲染图像的装置300包括图像获取模块301,确定模块302,控制模块303,和渲染模块304。其中,所述图像获取模块301用于从拍摄装置获取第一图像;所述确定模块302,用于确定所述第一图像中的人物对象的参数;所述控制模块303,用于响应于所述人物对象的参数满足第一预设条件,控制所述拍摄装置拍摄第二图像;所述图像获取模块301,还用于从所述拍摄装置获取所述第二图像;所述渲染模块304,用于通过渲染参数渲染所述第二图像中的人物对象。
在一个可选的实施例中,所述渲染图像的装置还包括:显示模块305和/或存储模块306,其中,所述显示模块305用于显示所述第二图像,所述存储模块306用于存储所述第二图像。
图3所示装置可以执行图1和/或图2所示实施例的方法,本实施例未详细描述的部分,可参考对图1和/或图2所示实施例的相关说明。该技术方案的执行过程和技术效果参见图1和/或图2所示实施例中的描述,在此不再赘述。
下面参考图4,其示出了适于用来实现本公开实施例的电子设备300的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图4示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图4所示,电子设备400可以包括处理装置(例如中央处理器、图形处理器等)401,其可以根据存储在只读存储器(ROM)402中的程序或者从存储装置408加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM 403中,还存储有电子设备400操作所需的各种程序和数据。处理装置401、ROM402以及RAM 403通过总线或通信线路404彼此相连。输入/输出(I/O)接口405也连接至总线或通信线路404。
通常,以下装置可以连接至I/O接口405:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置406;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置407;包括例如磁带、硬盘等的存储装置408;以及通信装置409。通信装置409可以允许电子设备400与其他设备进行无线或有线通信以交换数据。虽然图4示出了具有各种装置的电子设备400,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置409从网络上被下载和安装,或者从存储装置408被安装,或者从ROM 402被安装。在该计算机程序被处理装置401执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述实施例中的渲染图像的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言-诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言-诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)-连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (13)

1.一种渲染图像的方法,其特征在于,包括:
从拍摄装置获取第一图像;
确定所述第一图像中的人物对象的参数;
响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像;
从所述拍摄装置获取所述第二图像;
通过渲染参数渲染所述第二图像中的人物对象。
2.根据权利要求1所述的渲染图像的方法,其特征在于,所述第一图像包括所述拍摄装置生成的用于预览的图像。
3.根据权利要求1所述的渲染图像的方法,其特征在于,所述第一图像中的人物对象的参数,包括如下参数中的一个或多个:
所述第一图像中的人物对象的手势参数;
所述第一图像中的人物对象的姿势参数;
所述第一图像中的人物对象的表情参数;
所述第一图像中的人物对象的位置参数。
4.根据权利要求3所述的渲染图像的方法,其特征在于,所述第一图像中的人物对象的参数包括所述手势参数;
所述人物对象的参数满足预设条件,包括:
所述手势参数与预设手势参数对应。
5.根据权利要求3所述的渲染图像的方法,其特征在于,所述第一图像中的人物对象的参数包括所述姿势参数;
所述人物对象的参数满足预设条件,包括:
所述手势参数与预设姿势参数对应。
6.根据权利要求3所述的渲染图像的方法,其特征在于,所述第一图像中的人物对象的参数包括所述表情参数;
所述人物对象的参数满足预设条件,包括:
所述表情参数与预设表情参数对应。
7.根据权利要求3所述的渲染图像的方法,其特征在于,所述第一图像中的人物对象的参数包括所述位置参数;
所述人物对象的参数满足预设条件,包括:
所述位置参数属于预设的位置范围。
8.根据权利要求1所述的渲染图像的方法,其特征在于,响应于所述人物对象的参数满足预设条件,控制所述拍摄装置拍摄第二图像,包括:
响应于所述人物对象的参数满足预设条件,向所述拍摄装置发送控制信号,所述控制信号用于指示所述拍摄装置拍摄所述第二图像。
9.根据权利要求1所述的渲染图像的方法,其特征在于,通过渲染参数渲染所述第二图像中的人物对象,包括:
确定所述第二图像中的人物对象的人脸参数;
根据所述渲染参数修正所述人脸参数;
根据修正后的人脸参数渲染所述第二图像。
10.根据权利要求1所述的渲染图像的方法,其特征在于,在通过渲染参数渲染所述第二图像中的人物对象之后,还包括:
显示所述第二图像;和/或
存储所述第二图像。
11.一种渲染图像的装置,其特征在于,包括:
图像获取模块,用于从拍摄装置获取第一图像;
确定模块,用于确定所述第一图像中的人物对象的参数;
控制模块,用于响应于所述人物对象的参数满足第一预设条件,控制所述拍摄装置拍摄第二图像;
所述图像获取模块,还用于从所述拍摄装置获取所述第二图像;
渲染模块,用于通过渲染参数渲染所述第二图像中的人物对象。
12.一种电子设备,包括:
存储器,用于存储计算机可读指令;以及
处理器,用于运行所述计算机可读指令,使得所述处理器运行时实现根据权利要求1-10中任意一项所述的渲染图像的方法。
13.一种非暂态计算机可读存储介质,用于存储计算机可读指令,当所述计算机可读指令由计算机执行时,使得所述计算机执行权利要求1-10中任意一项所述的渲染图像的方法。
CN201910274416.5A 2019-04-04 2019-04-04 渲染图像的方法、装置、电子设备和计算机可读存储介质 Active CN109981989B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910274416.5A CN109981989B (zh) 2019-04-04 2019-04-04 渲染图像的方法、装置、电子设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910274416.5A CN109981989B (zh) 2019-04-04 2019-04-04 渲染图像的方法、装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN109981989A true CN109981989A (zh) 2019-07-05
CN109981989B CN109981989B (zh) 2021-05-25

Family

ID=67083232

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910274416.5A Active CN109981989B (zh) 2019-04-04 2019-04-04 渲染图像的方法、装置、电子设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN109981989B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110568933A (zh) * 2019-09-16 2019-12-13 深圳市趣创科技有限公司 基于人脸识别的人机交互方法、装置和计算机设备
WO2021098107A1 (zh) * 2019-11-22 2021-05-27 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
US11403788B2 (en) 2019-11-22 2022-08-02 Beijing Sensetime Technology Development Co., Ltd. Image processing method and apparatus, electronic device, and storage medium

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103024275A (zh) * 2012-12-17 2013-04-03 东莞宇龙通信科技有限公司 自动拍摄方法及终端
US20130135498A1 (en) * 2010-01-26 2013-05-30 Roy Melzer Method and system of creating a video sequence
CN103139480A (zh) * 2013-02-28 2013-06-05 华为终端有限公司 一种图像采集方法及装置
EP2846231A2 (en) * 2013-09-10 2015-03-11 Samsung Electronics Co., Ltd Apparatus and method for controlling a user interface using an input image
CN104767940A (zh) * 2015-04-14 2015-07-08 深圳市欧珀通信软件有限公司 拍照方法及装置
CN105279487A (zh) * 2015-10-15 2016-01-27 广东欧珀移动通信有限公司 美颜工具筛选方法和系统
CN106210526A (zh) * 2016-07-29 2016-12-07 维沃移动通信有限公司 一种拍摄方法及移动终端

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130135498A1 (en) * 2010-01-26 2013-05-30 Roy Melzer Method and system of creating a video sequence
CN103024275A (zh) * 2012-12-17 2013-04-03 东莞宇龙通信科技有限公司 自动拍摄方法及终端
CN103139480A (zh) * 2013-02-28 2013-06-05 华为终端有限公司 一种图像采集方法及装置
EP2846231A2 (en) * 2013-09-10 2015-03-11 Samsung Electronics Co., Ltd Apparatus and method for controlling a user interface using an input image
CN104767940A (zh) * 2015-04-14 2015-07-08 深圳市欧珀通信软件有限公司 拍照方法及装置
CN105279487A (zh) * 2015-10-15 2016-01-27 广东欧珀移动通信有限公司 美颜工具筛选方法和系统
CN106210526A (zh) * 2016-07-29 2016-12-07 维沃移动通信有限公司 一种拍摄方法及移动终端

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
TOMAS SIMO,ET.AL: "Hand Keypoint Detection in single Images using Multiview Bootstrapping", 《2017 IEEE CONFERENCE ON COMPUTER VISION AND PATTERN RECOGNITION》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110568933A (zh) * 2019-09-16 2019-12-13 深圳市趣创科技有限公司 基于人脸识别的人机交互方法、装置和计算机设备
WO2021098107A1 (zh) * 2019-11-22 2021-05-27 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
US11403788B2 (en) 2019-11-22 2022-08-02 Beijing Sensetime Technology Development Co., Ltd. Image processing method and apparatus, electronic device, and storage medium

Also Published As

Publication number Publication date
CN109981989B (zh) 2021-05-25

Similar Documents

Publication Publication Date Title
CN110766777B (zh) 虚拟形象的生成方法、装置、电子设备及存储介质
CN110210571B (zh) 图像识别方法、装置、计算机设备及计算机可读存储介质
CN111242881B (zh) 显示特效的方法、装置、存储介质及电子设备
CN110058685A (zh) 虚拟对象的显示方法、装置、电子设备和计算机可读存储介质
CN110047124A (zh) 渲染视频的方法、装置、电子设备和计算机可读存储介质
US20220066569A1 (en) Object interaction method and system, and computer-readable medium
CN109902659A (zh) 用于处理人体图像的方法和装置
CN110047122A (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110062176A (zh) 生成视频的方法、装置、电子设备和计算机可读存储介质
CN109981989A (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110070063A (zh) 目标对象的动作识别方法、装置和电子设备
CN110062157A (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110069125B (zh) 虚拟对象的控制方法和装置
CN110399847A (zh) 关键帧提取方法、装置及电子设备
CN110084154B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN111199169A (zh) 图像处理方法和装置
CN110070585A (zh) 图像生成方法、装置和计算机可读存储介质
CN109815854A (zh) 一种用于在用户设备上呈现图标的关联信息的方法与设备
CN113163135B (zh) 视频的动画添加方法、装置、设备及介质
CN110047126B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110062158A (zh) 控制拍摄装置的方法、装置、电子设备和计算机可读存储介质
CN111368668A (zh) 三维手部识别方法、装置、电子设备及存储介质
CN110222576A (zh) 拳击动作识别方法、装置和电子设备
CN110288691A (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110069126A (zh) 虚拟对象的控制方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee after: Tiktok vision (Beijing) Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee before: BEIJING BYTEDANCE NETWORK TECHNOLOGY Co.,Ltd.

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee after: Douyin Vision Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee before: Tiktok vision (Beijing) Co.,Ltd.