CN110084154B - 渲染图像的方法、装置、电子设备和计算机可读存储介质 - Google Patents

渲染图像的方法、装置、电子设备和计算机可读存储介质 Download PDF

Info

Publication number
CN110084154B
CN110084154B CN201910292677.XA CN201910292677A CN110084154B CN 110084154 B CN110084154 B CN 110084154B CN 201910292677 A CN201910292677 A CN 201910292677A CN 110084154 B CN110084154 B CN 110084154B
Authority
CN
China
Prior art keywords
image
target object
color parameter
color
rendering
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910292677.XA
Other languages
English (en)
Other versions
CN110084154A (zh
Inventor
李润祥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Douyin Vision Co Ltd
Douyin Vision Beijing Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201910292677.XA priority Critical patent/CN110084154B/zh
Publication of CN110084154A publication Critical patent/CN110084154A/zh
Application granted granted Critical
Publication of CN110084154B publication Critical patent/CN110084154B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Image Processing (AREA)

Abstract

本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法包括:获取第一图像;确定所述第一图像中的目标对象;确定第一颜色参数;根据所述第一颜色参数渲染所述第一图像中的目标对象。本公开实施例通过采取该技术方案,能够识别图像中的目标对象,并根据颜色参数渲染所述目标对象,丰富图像的渲染效果。

Description

渲染图像的方法、装置、电子设备和计算机可读存储介质
技术领域
本公开涉及信息处理领域,尤其涉及一种渲染图像的方法、装置、电子设备及计算机可读存储介质。
背景技术
随着计算机技术的发展,智能终端的应用范围得到了广泛的提高,例如可以通过智能终端拍摄图像和视频等。
同时智能终端还具有强大的数据处理能力,例如智能终端能够通过图像分割算法对智能终端拍摄的或者获得的图像进行处理,以识别出所述图像中的目标对象。以通过人体图像分割算法处理视频为例,智能终端等计算机设备能够通过人体图像分割算法实时地处理所拍摄的视频的每一帧图像,准确识别图像中的人体轮廓和人体的各个关键点,例如能够识别人体的面部、左手、右手等在图像中的位置等,这种识别已经能够精确到像素级。
现有技术中,能够通过设定的颜色参数渲染照片或者视频中的图像,例如在设定滤镜后可以根据该滤镜对应的颜色参数对图像进行渲染,从而显示的照片或视频具有滤镜效果,但是上述渲染方式是对整个图像进行同样的处理,渲染效果单一。
发明内容
本公开实施例提供渲染图像的方法,装置,电子设备,和计算机可读存储介质,能够识别图像中的目标对象,并根据颜色参数渲染所述目标对象,丰富图像的渲染效果。
第一方面,本公开实施例提供一种渲染图像的方法,其特征在于,包括:获取第一图像;确定所述第一图像中的目标对象;确定第一颜色参数;根据所述第一颜色参数渲染所述第一图像中的目标对象。
进一步的,所述第一图像中的目标对象包括皮肤对象和/或服装对象。
进一步的,确定第一颜色参数,包括:根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数。
进一步的,所述第一图像中的目标对象对应的颜色参数包括所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数;根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数,包括:将所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。
进一步的,所述第一图像中的目标对象对应的颜色参数包括距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数;根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数,包括:将距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。
进一步的,根据第一颜色参数渲染所述第一图像中的目标对象,包括:将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第一比例与所述第一颜色参数融合。
进一步的,所述获取第一图像,包括:从视频中获取所述第一图像;所述确定第一颜色参数,包括:确定所述第一图像在所述视频中的位置信息;将与所述位置信息对应的颜色参数确定为所述第一颜色参数。
进一步的,根据所述第一颜色参数渲染所述第一图像中的目标对象,包括:将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第二比例与所述第一颜色参数融合。
进一步的,所述方法还包括:从所述视频中获取第二图像;确定所述第二图像中的目标对象;确定第二颜色参数;根据所述第二颜色参数渲染所述第二图像中的目标对象。
第二方面,本公开实施例提供一种渲染图像的装置,其特征在于,包括:图像获取模块,用于获取第一图像;目标对象确定模块,用于确定所述第一图像中的目标对象;颜色参数确定模块,用于确定第一颜色参数;渲染模块,用于根据所述第一颜色参数渲染所述第一图像中的目标对象。
进一步的,所述第一图像中的目标对象包括皮肤对象和/或服装对象。
进一步的,所述颜色参数确定模块还用于:根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数。
进一步的,所述第一图像中的目标对象对应的颜色参数包括所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数;所述颜色参数确定模块还用于:将所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。
进一步的,所述第一图像中的目标对象对应的颜色参数包括距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数;所述颜色参数确定模块还用于:将距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。
进一步的,所述渲染模块还用于:将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第一比例与所述第一颜色参数融合。
进一步的,所述图像获取模块还用于:从视频中获取所述第一图像;所述颜色参数确定模块还用于:确定所述第一图像在所述视频中的位置信息;将与所述位置信息对应的颜色参数确定为所述第一颜色参数。
进一步的,所述渲染模块还用于:将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第二比例与所述第一颜色参数融合。
进一步的,所述图像获取模块还用于:从所述视频中获取第二图像;所述目标对象确定模块还用于:确定所述第二图像中的目标对象;所述颜色参数确定模块还用于:确定第二颜色参数;所述渲染模块还用于:根据所述第二颜色参数渲染所述第二图像中的目标对象。
第三方面,本公开实施例提供一种电子设备,包括:存储器,用于存储计算机可读指令;以及一个或多个处理器,用于运行所述计算机可读指令,使得所述处理器运行时实现前述第一方面中的任一所述渲染图像的方法。
第四方面,本公开实施例提供一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,当所述计算机指令被计算机执行时,使得所述计算机执行前述第一方面中的任一所述渲染图像的方法。
本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法,其特征在于,包括:获取第一图像;确定所述第一图像中的目标对象;确定第一颜色参数;根据所述第一颜色参数渲染所述第一图像中的目标对象。本公开实施例提供渲染图像的方法,装置,电子设备,和计算机可读存储介质,能够识别图像中的目标对象,并根据颜色参数渲染所述目标对象,丰富图像的渲染效果。
上述说明仅是本公开技术方案的概述,为了能更清楚了解本公开的技术手段,而可依照说明书的内容予以实施,并且为让本公开的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的渲染图像的方法的实施例一的流程图;
图2为本公开实施例提供的渲染图像的方法的实施例二的流程图;
图3为本公开实施例提供的渲染图像的装置的实施例的结构示意图;
图4为根据本公开实施例提供的电子设备的结构示意图。
具体实施方式
以下通过特定的具体实例说明本公开的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本公开的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
需要说明的是,下文描述在所附权利要求书的范围内的实施例的各种方面。应显而易见,本文中所描述的方面可体现于广泛多种形式中,且本文中所描述的任何特定结构及/或功能仅为说明性的。基于本公开,所属领域的技术人员应了解,本文中所描述的一个方面可与任何其它方面独立地实施,且可以各种方式组合这些方面中的两者或两者以上。举例来说,可使用本文中所阐述的任何数目个方面来实施设备及/或实践方法。另外,可使用除了本文中所阐述的方面中的一或多者之外的其它结构及/或功能性实施此设备及/或实践此方法。
还需要说明的是,以下实施例中所提供的图示仅以示意方式说明本公开的基本构想,图示中仅显示与本公开中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
另外,在以下描述中,提供具体细节是为了便于透彻理解实例。然而,所属领域的技术人员将理解,可在没有这些特定细节的情况下实践所述方面。
图1为本公开实施例提供的渲染图像的方法实施例一的流程图,本公开实施例提供的渲染图像的方法可以由一个渲染图像的装置来执行,该装置可以实现为软件,可以实现为硬件,还可以实现为软件和硬件的组合,例如所述渲染图像的装置包括计算机设备(例如智能终端),从而通过该计算机设备来执行本实施例提供的该渲染图像的方法。
如图1所示,本公开实施例的渲染图像的方法包括如下步骤:
步骤S101,获取第一图像;
在步骤S101中,渲染图像的装置获取第一图像,以便在后续的步骤中实现渲染图像的方法。该渲染图像的装置可以包括拍摄装置,从而步骤S101中所获取的第一图像包括该拍摄装置生成的用于预览的图像,或者包括该拍摄装置拍摄的图像;该渲染图像的装置可以不包括拍摄装置,但是与拍摄装置通信连接,从而步骤S101中获取第一图像包括通过所述通信连接获取该拍摄装置生成的用于预览的图像,或者包括通过所述通信连接获取该拍摄装置拍摄的图像;该渲染图像的装置还可以从预设的存储位置获取图像并对获取的图像应用本公开实施例提供的渲染图像的方法,本公开实施例对获取第一图像的方式不做限定。
并且,本领域技术人员可以理解,视频包括一系列图像帧,其中每个图像帧也可以称为图像本公开实施例提供的渲染图像的装置还可以对视频的一个或多个图像帧应用本公开实施例提供的渲染图像的方法,例如所述渲染图像的装置可以对视频的每个图像帧均应用本公开实施例提供的渲染图像的方法。
步骤S102,确定所述第一图像中的目标对象;
可选的,所述第一图像中的目标对象包括皮肤对象和/或服装对象。作为不限制本公开实施例的示例,所述皮肤对象包括人物对象的各皮肤部位,例如人物对象的面部,手部,臂部,腿部,和足部等;所述服装对象包括衣服对象,裤子对象,围巾对象,帽子对象,手套对象等。如同本领域技术人员所了解的,本公开实施例中的图像包括多个像素,可以认为图像是由多个像素构成的,相应地,所述目标对象在所述第一图像中对应有像素区域,例如所述像素区域包括所述目标对象在所述第一图像中的轮廓以内的像素,在所述步骤S102中确定了所述第一图像中的目标对象,也就确定了所述目标对象的像素区域或者确定了所述目标对象的轮廓以内的像素。
作为不限制本公开实施例的示例,可以通过图像分割算法确定所述第一图像中的目标对象,例如对于皮肤对象,尽管人的肤色由于不同人种或者个体特点表现出不同的颜色,但是其色调基本一致,皮肤的颜色在颜色空间中只聚集在很小的一块区域,从而可以基于皮肤的颜色特征通过图像分割算法在所述第一图像中识别出所述皮肤对象,进一步的,还可以根据形状特征在所述第一图像中识别出皮肤对象中的面部,手部,臂部,腿部,和足部等。同理,对于服装对象,其形状与人体的形状具有重合性,而由于服装的材质和纹理也具有典型性,故可以通过颜色特征表征将服装的材质纹理和纹理,从而可以基于服装的颜色特征和/或形状特征通过图像分割算法在所述第一图像中识别出所述服装对象。
在上述基于目标对象的颜色特征和/或形状特征并通过图像分割算法在所述第一图像中确定目标对象的过程中,常见的图像分割算法可以根据图像颜色参数的相似性或同质性将图像划分为区域,然后通过区域合并的方式将合并后的区域所包括的像素确定为所述目标对象的像素区域;还可以根据颜色特征和/或形状特征在图像上进行关键点定位,确定目标对象的关键点,例如确定目标对象的轮廓关键点,然后基于所述轮廓关键点和图像颜色参数的不连续性和突变性寻找所述目标对象的轮廓,根据其轮廓的位置进行空间上的延伸,也就是说根据图像的特征点、线、面进行图像分割以确定出所述目标对象的轮廓,所述目标对象的轮廓内的区域即为所述目标对象的像素区域。当然,还可以采用其他的图像分割算法,本公开实施例对各类图像分割算法不做限定,任何现有的或将来的图像分割算法均可用于本公开实施例中,以确定出所述第一图像中的目标对象。
作为一个并未限定本公开实施例的示例,所述目标对象包括人物对象的面部,那么可以通过颜色特征和/或形状特征表征所述人物对象的面部的轮廓关键点,然后在所述第一图像中根据所述颜色特征和/或形状特征进行匹配和定位,以确定出所述人物对象的面部的轮廓关键点,由于关键点在图像中仅占据非常小的面积(通常只有几个至几十个像素的大小),与关键点对应的颜色特征和/或形状特征在图像上所占据的区域通常也是非常有限和局部的,目前用的特征提取方式有两种:(1)沿轮廓垂向的一维范围图像特征提取;(2)关键点方形邻域的二维范围图像特征提取,上述两种方式有很多种实现方法,如ASM和AAM类方法、统计能量函数类方法、回归分析方法、深度学习方法、分类器方法、批量提取方法等等,本公开实施例不做具体限定。在识别出所述人物对象的面部的轮廓关键点后可以基于所述轮廓关键点和图像颜色参数的不连续性和突变性寻找人物对象的面部的轮廓。
步骤S103:确定第一颜色参数;
在步骤S103中确定所述第一颜色参数,以便渲染所述第一图像。值得说明的是,为便于清楚地描述本公开实施例,在步骤之前包括步骤的编号,但是步骤的编号并未限定步骤执行的先后顺序,例如步骤S103可以在步骤S101和/或步骤S102之前执行,也可以在步骤S101和/或步骤S102之后执行,还可以与步骤S101和/或步骤S102同时执行。
本公开实施例中,所述第一颜色参数可以用于渲染图像和/或渲染图像中的目标对象。可选的,所述第一颜色参数包括颜色系数,例如可以通过所述颜色系数乘以所述图像和/或目标对象的每一个像素的颜色参数以得到所述每一个像素的新的颜色参数;可选的,所述第一颜色参数包括像素在颜色空间上的颜色参数,例如可以将所述颜色空间上的颜色参数与所述图像和/或目标对象的像素的颜色参数融合;可选的,所述第一颜色参数包括滤镜参数,例如可以通过所述滤镜参数按照预设的渲染算法对所述图像的像素的颜色参数进行处理,以获得滤镜效果;可选的,所述第一颜色参数包括美颜参数,例如可以通过所述美颜参数对图像中的皮肤对象进行渲染以实现美颜的效果;可选的,所述第一颜色参数包括纹理参数,例如可以通过所述纹理参数对图像中的服装对象进行渲染,例如将服装对象的轮廓内的像素渲染成诸如丝绸纹理等各种面料特征,在这一示例中,所述纹理参数可以包括预设的服装纹理图(例如对于格子衫可以定义预设单位面积内的各像素的颜色以形成诸如黑白格子的服装纹理图),该服装纹理图可以用于填充服装对象的轮廓内的像素,而对于不规则形状的轮廓周边区域例如可以基于多次贝赛尔曲线计算变形后的服装纹理图,并通过变形后的服装纹理图填充所述不规则形状的轮廓周边区域内的像素。值得说明的是,本公开实施例中的第一颜色参数除上述实施例外还可以包括各种形式的参数,在通过所述第一颜色渲染图像或图像中的目标对象时,能够调整所述目标对象对应的像素的颜色参数,本公开实施例对所述第一颜色参数的形式不做具体限定。
在一个可选的实施例中,所述第一颜色参数包括预设的颜色参数,从而在步骤S103中将所述预设的颜色参数确定为所述第一颜色参数。
在又一个可选的实施例中,确定第一颜色参数包括所述渲染图像的装置接收所述第一颜色参数,其中所述渲染图像的装置接收了所述第一颜色参数也就确定了所述第一颜色参数。例如所述渲染图像的装置包括输入/输出接口,从而能够从所述输入/输出接口接收所述第一颜色参数。
在另一个可选的实施例中,确定第一颜色参数,包括:根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数。
可选的,所述第一图像中的目标对象对应的颜色参数包括所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数,相应地根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数,包括将所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。在这一实施例中,由于在步骤S102中确定了所述第一图像中的目标对象,因此也就获得了所述目标对象的轮廓,因此在步骤S103中,可以将所述目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数,例如所述预设范围包括与所述目标对象的轮廓的距离为M个像素的所有像素所形成的轮廓与所述目标对象的轮廓之间的区域那么所述第一颜色参数包括上述两个轮廓之间所有的像素的颜色参数的平均值。
如前所述,本公开实施例中的图像是由多个像素构成的,可以通过位置参数和颜色参数来表征像素,一种典型的表征方式为通过五元组(x,y,r,g,b)来表示图像的一个像素,其中的坐标x和y作为所述一个像素的位置参数,其中的颜色分量r,g,和b为所述像素在RGB空间上的数值,将r,g,和b叠加可以获得所述像素的颜色。可选的,还可以通过其他颜色空间来表示所述像素的颜色参数,例如通过(L,a,b)表示所述像素在LAB空间上的颜色,其中L表示亮度,a表示红绿色程度,b表示黄蓝色程度。当然,还可以采用其他方式表示所述图像的像素的位置参数和颜色参数,本公开实施例对此不做限定。
对于前述实施例,以RGB空间表示像素的颜色参数为例,所述第一颜色参数包括上述两个轮廓之前所有的像素的颜色参数的平均值,那么可以将上述两个轮廓之间所有的像素的R通道的颜色参数求和后除以所述所有的像素的数量所得到的值作为所述第一颜色参数的R通道的参数值,同理可以计算出所述第一颜色参数的G通道和B通道的参数值,从而获得了所述第一颜色参数在RGB空间上的参数值。
可选的,所述第一图像中的目标对象对应的颜色参数包括距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数,相应地根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数,包括将距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。在这一实施例中,根据步骤S102:确定所述第一图像中的目标对象所采用的图像分割算法的不同,在步骤S102中可以确定所述第一图像的目标对象的关键点(例如轮廓关键点,重心关键点,质心关键点,重心关键点等),或者可以在步骤S102之后基于步骤S102中获得的所述目标对象的轮廓确定所述第一图像中的目标对象的关键点,因此在步骤S103中,可以将距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数,例如所述预设范围包括以所述目标对象的一个或多个关键点为圆心、以预设N个像素为半径的圆形区域,那么所述第一颜色参数包括上述圆形区域中所有的像素的颜色参数的平均值。
对于前述实施例,以所述目标对象包括人物对象的手部为例,在步骤S102中或者在步骤S102之后,可以根据设定人物对象的手部的关键点的数量提取所述人物对象的手部的轮廓关键点和/或关节关键点,每个关键点有固定编号,比如可以按照轮廓关键点、大拇指关节关键点、食指关节关键点、中指关节关键点、无名指关节关键点、小拇指关节关键点的顺序,从上到下编号,在一个典型的应用中,所述关键点为22个,每个关键点有固定编号,那么在步骤S103中例如可以将距离所述人物对象的手部的食指关键点为圆心、以100个像素为半径的圆形区域中所有像素的颜色参数的平均值确定为所述第一颜色参数。
步骤S104:根据所述第一颜色参数渲染所述第一图像中的目标对象。
在步骤S104中根据在步骤S103中确定的所述第一颜色参数渲染所述第一图像中的目标对象。例如所述第一颜色参数包括颜色系数,那么可以通过所述颜色系数乘以所述第一图像中的目标对象的轮廓以内的每一个像素的颜色参数以得到所述每一个像素的新的颜色参数;例如所述第一颜色参数包括滤镜参数,那么可以通过所述滤镜参数按照预设的渲染算法对所述第一图像的目标对象的轮廓以内的像素的颜色参数进行处理,以获得滤镜效果;例如所述第一颜色参数包括美颜参数,那么可以通过所述美颜参数对图像中的皮肤对象进行渲染以实现美颜的效果;例如所述第一颜色参数包括纹理参数,那么可以通过所述纹理参数对图像中的服装对象进行渲染以使所述服装对象表现为诸如丝绸纹理等各种面料的特征。
例如所述第一颜色参数包括像素在颜色空间上的颜色参数,如前述实施例中所述,所述第一颜色参数包括所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值或者所述第一颜色参数包括距离所述第一图像中的目标对象的关键点的预设范围内的像素的颜色参数的平均值,那么在步骤S104中,可以将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第一比例与所述第一颜色参数融合。例如所述第一颜色参数在RGB空间上的参数值分别为(R,G,B),所述第一图像中的目标对象的轮廓以内的像素的颜色参数为(r,g,b),所述第一比例为4∶6,那么经过融合后,所述第一图像中的目标对象的轮廓以内的像素的颜色参数为(R*0.4+r*0.6,G*0.4+g*0.6,B*0.4+b*0.6)。本领域技术人员能够理解,上述第一比例还可以采用其他的表现形式,根据该第一比例可以确定在融合时所述第一颜色参数所乘的系数和所述第一图像中的目标对象的轮廓以内的像素的颜色参数所乘的系数,该两个系数的和为1。
通过上述实施方式,本公开提供的实施例能够识别图像中的目标对象,并根据颜色参数渲染所述目标对象,丰富图像的渲染效果。
图2为本公开实施例提供的渲染图像的方法实施例二的流程图,如图2所示,在与本公开实施例提供的渲染图像的方法实施例一的步骤S101对应的步骤S201包括:从视频中获取第一图像。本领域技术人员能够理解,所述视频包括一系列图像帧,其中每个图像帧也可以称为图像,因此在步骤S201中,从所述视频中获取所述第一图像。在与本公开实施例提供的渲染图像的方法实施例一的步骤S102对应的步骤S202包括:确定所述第一图像中的目标对象。其中关于步骤S201和步骤S202的实现方式可以参照本公开实施例提供的渲染图像的方法实施例一中的步骤S101和步骤S102的相同或相应描述,此处不再赘述。
步骤S203:确定所述第一图像在所述视频中的位置信息;将与所述位置信息对应的颜色参数确定为第一颜色参数。其中关于第一颜色参数的表现形式等可以参照前述实施例中的相同或相应描述,此处不再赘述。作为并不限制本公开实施例的示例,步骤S203中涉及的位置信息包括所述第一图像在所述视频的所有图像帧中的序号,或者包括所述第一图像在所述视频被播放时所处的播放时间等,具体地,例如所述视频中前50%的图像帧对应第一子颜色参数,后50%的图像帧对应第二子颜色参数,如果所述第一图像在所述视频中的序号属于前50%的图像帧,那么该序号对应第一子颜色参数,从而在步骤S203中将所述第一子颜色参数确定为所述第一颜色参数。
步骤S204:将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第二比例与所述第一颜色参数融合。
例如所述第一颜色参数包括像素在颜色空间上的颜色参数,那么在步骤S204中,可以将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第二比例与所述第一颜色参数融合,其中关于第二比例的含义可以参照前述实施例中第一比例的相同或相应描述,此处不再赘述。
可选的,本公开实施例提供的渲染图像的方法实施例二还包括:从所述视频中获取第二图像;确定所述第二图像中的目标对象;确定第二颜色参数;根据所述第二颜色参数渲染所述第二图像中的目标对象。也就是说,在上述实施例中,所述方法还从所述视频中获取第二图像,并确定第二颜色参数并根据所述第二颜色参数渲染所述第二图像中的目标对象,其中,关于所述第二颜色参数的含义和形式等可以参照前述实施例中关于第一颜色参数的相同或相应的描述,关于确定所述第二图像中的目标对象的实现方式可以参照步骤S102确定所述第一图像中的目标对象的相同或相应的描述,此处不再赘述。本领域技术人员可以理解,本公开实施例所提供的渲染图像的方法,还可以对所述视频中所有的图像都通过颜色参数渲染其中的目标对象,例如对于包括人物对象的视频,所述目标对象包括所述人物对象的面部,通过本公开实施例提供的图像渲染方法,可以将所述视频中的人物对象的面部进行渲染,例如所述视频中前50%的图像帧对应第一子颜色参数,后50%的图像帧对应第二子颜色参数,其中第一子颜色参数对应于红色,第二子颜色参数对应于绿色,通过本公开实施例提供的渲染图像的方法,能够将所述视频中前50%的图像帧中的人物对象的面部渲染成红色,将所述视频中后50%的图像帧中的人物对象的面部渲染成绿色,丰富了(视频中)图像的渲染效果。
图3所示为本公开实施例提供的渲染图像的装置300实施例的结构示意图,如图3所示,所述装置包括图像获取模块301,目标对象确定模块302,颜色参数确定模块303,和渲染模块304。其中,所述图像获取模块301,用于获取第一图像;所述目标对象确定模块302,用于确定所述第一图像中的目标对象;所述颜色参数确定模块303,用于确定第一颜色参数;所述渲染模块304,用于根据所述第一颜色参数渲染所述第一图像中的目标对象。
在一个可选的实施例中,所述图像获取模块301用于从视频中获取所述第一图像,还用于从所述视频中获取第二图像;所述目标对象确定模块302还用于确定所述第二图像中的目标对象;所述颜色参数确定模块303,还用于确定第二颜色参数;所述渲染模块304还用于根据所述第二颜色参数渲染所述第二图像中的目标对象。
图3所示装置可以执行图1和/或图2所示实施例的方法,本实施例未详细描述的部分,可参考对图1和/或图2所示实施例的相关说明。该技术方案的执行过程和技术效果参见图1和/或图2所示实施例中的描述,在此不再赘述。
下面参考图4,其示出了适于用来实现本公开实施例的电子设备400的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图4示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图4所示,电子设备400可以包括处理装置(例如中央处理器、图形处理器等)401,其可以根据存储在只读存储器(ROM)402中的程序或者从存储装置408加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM 403中,还存储有电子设备400操作所需的各种程序和数据。处理装置401、ROM402以及RAM 403通过总线或通信线路404彼此相连。输入/输出(I/O)接口405也连接至总线或通信线路404。
通常,以下装置可以连接至I/O接口405:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置406;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置407;包括例如磁带、硬盘等的存储装置408;以及通信装置409。通信装置409可以允许电子设备400与其他设备进行无线或有线通信以交换数据。虽然图4示出了具有各种装置的电子设备400,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置409从网络上被下载和安装,或者从存储装置408被安装,或者从ROM 402被安装。在该计算机程序被处理装置401执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述实施例中的渲染图像的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言-诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言-诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)-连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方安。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (8)

1.一种渲染图像的方法,其特征在于,包括:
从视频中获取第一图像;
确定所述第一图像中的目标对象;
确定所述第一图像在所述视频中的位置信息;
将与所述位置信息对应的颜色参数确定为第一颜色参数;
根据所述第一颜色参数渲染所述第一图像中的目标对象;
其中,所述确定第一颜色参数,包括:
根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数;所述第一图像中的目标对象对应的颜色参数包括所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数;
根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数,包括:
将所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。
2.根据权利要求1所述的渲染图像的方法,其特征在于,所述第一图像中的目标对象包括皮肤对象和/或服装对象。
3.根据权利要求1或2所述的渲染图像的方法,其特征在于,根据第一颜色参数渲染所述第一图像中的目标对象,包括:
将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第一比例与所述第一颜色参数融合。
4.根据权利要求1所述的渲染图像的方法,其特征在于,根据所述第一颜色参数渲染所述第一图像中的目标对象,包括:
将所述第一图像中的目标对象的轮廓以内的像素的颜色参数按照第二比例与所述第一颜色参数融合。
5.根据权利要求1所述的渲染图像的方法,其特征在于,所述方法还包括:
从所述视频中获取第二图像;
确定所述第二图像中的目标对象;
确定第二颜色参数;
根据所述第二颜色参数渲染所述第二图像中的目标对象。
6.一种渲染图像的装置,其特征在于,包括:
图像获取模块,用于从视频中获取第一图像;
目标对象确定模块,用于确定所述第一图像中的目标对象;
颜色参数确定模块,用于确定所述第一图像在所述视频中的位置信息;将与所述位置信息对应的颜色参数确定为第一颜色参数;
渲染模块,用于根据所述第一颜色参数渲染所述第一图像中的目标对象;
其中,所述确定第一颜色参数,包括:
根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数;所述第一图像中的目标对象对应的颜色参数包括所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数;
根据所述第一图像中的目标对象对应的颜色参数确定所述第一颜色参数,包括:
将所述第一图像中的目标对象的轮廓以外的预设范围内的像素的颜色参数的平均值确定为所述第一颜色参数。
7.一种电子设备,包括:
存储器,用于存储计算机可读指令;以及
处理器,用于运行所述计算机可读指令,使得所述处理器运行时实现根据权利要求1-5中任意一项所述的渲染图像的方法。
8.一种非暂态计算机可读存储介质,用于存储计算机可读指令,当所述计算机可读指令由计算机执行时,使得所述计算机执行权利要求1-5中任意一项所述的渲染图像的方法。
CN201910292677.XA 2019-04-12 2019-04-12 渲染图像的方法、装置、电子设备和计算机可读存储介质 Active CN110084154B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910292677.XA CN110084154B (zh) 2019-04-12 2019-04-12 渲染图像的方法、装置、电子设备和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910292677.XA CN110084154B (zh) 2019-04-12 2019-04-12 渲染图像的方法、装置、电子设备和计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN110084154A CN110084154A (zh) 2019-08-02
CN110084154B true CN110084154B (zh) 2021-09-17

Family

ID=67414817

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910292677.XA Active CN110084154B (zh) 2019-04-12 2019-04-12 渲染图像的方法、装置、电子设备和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN110084154B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111091610B (zh) * 2019-11-22 2023-04-11 北京市商汤科技开发有限公司 图像处理方法及装置、电子设备和存储介质
US11403788B2 (en) 2019-11-22 2022-08-02 Beijing Sensetime Technology Development Co., Ltd. Image processing method and apparatus, electronic device, and storage medium
CN111161133B (zh) * 2019-12-26 2023-07-04 维沃移动通信有限公司 一种图片处理方法及电子设备
CN114758027A (zh) * 2022-04-12 2022-07-15 北京字跳网络技术有限公司 图像处理方法、装置、电子设备及存储介质
CN117556162A (zh) * 2023-11-01 2024-02-13 书行科技(北京)有限公司 图片加载检测方法、视频渲染检测方法及相关产品

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107016718A (zh) * 2017-02-20 2017-08-04 北京奇艺世纪科技有限公司 一种场景渲染方法和装置
CN107273837A (zh) * 2017-06-07 2017-10-20 广州视源电子科技股份有限公司 虚拟化妆的方法和系统
CN109361861A (zh) * 2018-11-14 2019-02-19 维沃移动通信有限公司 一种图像处理方法及移动终端
CN109376575A (zh) * 2018-08-20 2019-02-22 奇酷互联网络科技(深圳)有限公司 对图像中人体美化的方法、移动终端和存储介质
CN109461124A (zh) * 2018-09-21 2019-03-12 维沃移动通信(杭州)有限公司 一种图像处理方法及终端设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102708585B (zh) * 2012-05-09 2015-05-20 北京像素软件科技股份有限公司 一种渲染模型轮廓边缘的方法
CN108876931B (zh) * 2017-05-12 2021-04-16 腾讯科技(深圳)有限公司 三维物体颜色调整方法、装置、计算机设备及计算机可读存储介质
CN107464253B (zh) * 2017-07-10 2020-11-20 北京小米移动软件有限公司 眉毛定位方法及装置
CN107665482B (zh) * 2017-09-22 2021-07-23 北京奇虎科技有限公司 实现双重曝光的视频数据实时处理方法及装置、计算设备
CN108470322B (zh) * 2018-03-09 2022-03-18 北京小米移动软件有限公司 处理人脸图像的方法、装置及可读存储介质
CN108765542B (zh) * 2018-05-31 2022-09-09 Oppo广东移动通信有限公司 图像渲染方法、电子设备和计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107016718A (zh) * 2017-02-20 2017-08-04 北京奇艺世纪科技有限公司 一种场景渲染方法和装置
CN107273837A (zh) * 2017-06-07 2017-10-20 广州视源电子科技股份有限公司 虚拟化妆的方法和系统
CN109376575A (zh) * 2018-08-20 2019-02-22 奇酷互联网络科技(深圳)有限公司 对图像中人体美化的方法、移动终端和存储介质
CN109461124A (zh) * 2018-09-21 2019-03-12 维沃移动通信(杭州)有限公司 一种图像处理方法及终端设备
CN109361861A (zh) * 2018-11-14 2019-02-19 维沃移动通信有限公司 一种图像处理方法及移动终端

Also Published As

Publication number Publication date
CN110084154A (zh) 2019-08-02

Similar Documents

Publication Publication Date Title
CN110084154B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110062176B (zh) 生成视频的方法、装置、电子设备和计算机可读存储介质
CN111787242B (zh) 用于虚拟试衣的方法和装置
CN111242881A (zh) 显示特效的方法、装置、存储介质及电子设备
CN111091576A (zh) 图像分割方法、装置、设备及存储介质
CN110062157B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN110866977B (zh) 增强现实处理方法及装置、系统、存储介质和电子设备
CN111414879B (zh) 人脸遮挡程度识别方法、装置、电子设备及可读存储介质
CN112241933A (zh) 人脸图像处理方法、装置、存储介质及电子设备
US20220358662A1 (en) Image generation method and device
CN114092678A (zh) 图像处理方法、装置、电子设备及存储介质
CN115311178A (zh) 图像拼接方法、装置、设备及介质
CN113034655A (zh) 基于增强现实的试鞋方法、装置和电子设备
CN111199169A (zh) 图像处理方法和装置
CN109981989B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
US20230036366A1 (en) Image attribute classification method, apparatus, electronic device, medium and program product
CN110047126B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN109816791B (zh) 用于生成信息的方法和装置
CN110059739B (zh) 图像合成方法、装置、电子设备和计算机可读存储介质
CN110097622B (zh) 渲染图像的方法、装置、电子设备和计算机可读存储介质
CN111292247A (zh) 图像处理方法和装置
CN111107264A (zh) 图像处理方法、装置、存储介质以及终端
CN114422698B (zh) 视频生成方法、装置、设备及存储介质
CN112801997B (zh) 图像增强质量评估方法、装置、电子设备及存储介质
CN111292276B (zh) 图像处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee after: Tiktok vision (Beijing) Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee before: BEIJING BYTEDANCE NETWORK TECHNOLOGY Co.,Ltd.

Address after: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee after: Douyin Vision Co.,Ltd.

Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing.

Patentee before: Tiktok vision (Beijing) Co.,Ltd.

CP01 Change in the name or title of a patent holder