CN110047126A - 渲染图像的方法、装置、电子设备和计算机可读存储介质 - Google Patents
渲染图像的方法、装置、电子设备和计算机可读存储介质 Download PDFInfo
- Publication number
- CN110047126A CN110047126A CN201910341736.8A CN201910341736A CN110047126A CN 110047126 A CN110047126 A CN 110047126A CN 201910341736 A CN201910341736 A CN 201910341736A CN 110047126 A CN110047126 A CN 110047126A
- Authority
- CN
- China
- Prior art keywords
- image
- rendering
- location information
- parameter
- manpower
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 238000009877 rendering Methods 0.000 claims abstract description 143
- 230000000694 effects Effects 0.000 claims description 16
- 238000013507 mapping Methods 0.000 claims description 7
- 230000001052 transient effect Effects 0.000 claims description 2
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 241000251468 Actinopterygii Species 0.000 description 37
- 238000004422 calculation algorithm Methods 0.000 description 12
- 238000010586 diagram Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 12
- 238000003709 image segmentation Methods 0.000 description 10
- 238000004364 calculation method Methods 0.000 description 7
- 230000036544 posture Effects 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 230000008859 change Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 210000003811 finger Anatomy 0.000 description 5
- 241000406668 Loxodonta cyclotis Species 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000005611 electricity Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000011521 glass Substances 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 241000905957 Channa melasoma Species 0.000 description 2
- 238000000889 atomisation Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000005291 magnetic effect Effects 0.000 description 2
- 238000000638 solvent extraction Methods 0.000 description 2
- 210000003813 thumb Anatomy 0.000 description 2
- 244000174681 Michelia champaca Species 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000003796 beauty Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 239000000571 coke Substances 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000013135 deep learning Methods 0.000 description 1
- 238000010612 desalination reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 210000001145 finger joint Anatomy 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 210000004932 little finger Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000000611 regression analysis Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Geometry (AREA)
- Computer Graphics (AREA)
- General Physics & Mathematics (AREA)
- Processing Or Creating Images (AREA)
- Image Analysis (AREA)
Abstract
本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法包括:获取图像;确定所述图像中的人手对象的位置信息;根据所述人手对象的位置信息确定渲染参数;根据所述渲染参数渲染所述图像。本公开实施例通过采取该技术方案,根据图像中的人手对象确定渲染参数以渲染所述图像,能够灵活便捷地渲染图像。
Description
技术领域
本公开涉及信息处理领域,尤其涉及一种渲染图像的方法、装置、电子设备及计算机可读存储介质。
背景技术
随着计算机技术的发展,智能终端的应用范围得到了广泛的提高,例如可以通过智能终端拍摄图像和视频等。
同时智能终端还具有强大的数据处理能力,例如智能终端能够通过图像分割算法对智能终端拍摄的或者获得的图像进行处理,以识别出所述图像中的目标对象。以通过人体图像分割算法处理视频为例,智能终端等计算机设备能够通过人体图像分割算法实时地处理所拍摄的视频的每一帧图像,准确识别图像中的人物对象和人物对象的关键部位,进一步的,还可以根据预设的渲染参数渲染所述视频的每一帧图像。
但是现有的图像渲染功能,往往根据预设的渲染参数对图像进行渲染,如果需要改变渲染参数,则需要重新进行设置之后再应用到图像,使得对图像的渲染设置非常不灵活。
发明内容
本公开实施例提供渲染图像的方法,装置,电子设备,和计算机可读存储介质,通过采取本公开实施例的技术方案,根据图像中的人手对象确定渲染参数以渲染所述图像,能够灵活便捷地渲染图像。
第一方面,本公开实施例提供一种渲染图像的方法,其特征在于,包括:获取图像;确定所述图像中的人手对象的位置信息;根据所述人手对象的位置信息确定渲染参数;根据所述渲染参数渲染所述图像。
进一步的,所述渲染参数包括镜头效果参数。
进一步的,所述镜头效果参数包括鱼眼镜头参数,和/或光圈参数。
进一步的,根据所述人手对象的位置信息确定渲染参数,包括:将所述人手对象的位置信息通过映射关系映射为所述渲染参数。
进一步的,根据所述人手对象的位置信息确定渲染参数,包括:在所述人手对象的位置信息属于第一区间的情况下,确定所述渲染参数包括第一渲染参数;在所述人手对象的位置信息属于第二区间的情况下,确定所述渲染参数包括第二渲染参数。
进一步的,所述人手对象的位置信息包括所述人手对象的坐标。
进一步的,确定所述图像中的人手对象的位置信息,包括:识别所述图像中的人手对象的第一关键点和第二关键点;确定所述第一关键点和所述第二关键点之间的距离,所述人手对象的位置信息包括所述第一关键点和所述第二关键点之间的距离。
进一步的,确定所述图像中的人手对象的位置信息,包括:识别所述图像中的左手对象和右手对象;确定所述左手对象和所述右手对象之间的距离,所述人手对象的位置信息包括所述左手对象和所述右手对象之间的距离。
进一步的,确定所述图像中的人手对象的位置信息,包括:确定所述图像的预设范围中的所述人手对象的位置信息;和/或在所述图像中的人手对象符合预设姿势的情况下,确定所述图像中的人手对象的位置信息。
第二方面,本公开实施例提供一种渲染图像的装置,其特征在于,包括:图像获取模块,用于获取图像;位置信息确定模块,用于确定所述图像中的人手对象的位置信息;渲染参数确定模块,用于根据所述人手对象的位置信息确定渲染参数;渲染模块,用于根据所述渲染参数渲染所述图像。
进一步的,所述渲染参数包括镜头效果参数。
进一步的,所述镜头效果参数包括鱼眼镜头参数,和/或光圈参数。
进一步的,所述渲染参数确定模块还用于:将所述人手对象的位置信息通过映射关系映射为所述渲染参数。
进一步的,所述渲染参数确定模块还用于:在所述人手对象的位置信息属于第一区间的情况下,确定所述渲染参数包括第一渲染参数;在所述人手对象的位置信息属于第二区间的情况下,确定所述渲染参数包括第二渲染参数。
进一步的,所述人手对象的位置信息包括所述人手对象的坐标。
进一步的,所述位置信息确定模块还用于:识别所述图像中的人手对象的第一关键点和第二关键点;确定所述第一关键点和所述第二关键点之间的距离,所述人手对象的位置信息包括所述第一关键点和所述第二关键点之间的距离。
进一步的,所述位置信息确定模块还用于:识别所述图像中的左手对象和右手对象;确定所述左手对象和所述右手对象之间的距离,所述人手对象的位置信息包括所述左手对象和所述右手对象之间的距离。
进一步的,所述位置信息确定模块还用于:确定所述图像的预设范围中的所述人手对象的位置信息;和/或在所述图像中的人手对象符合预设姿势的情况下,确定所述图像中的人手对象的位置信息。
第三方面,本公开实施例提供一种电子设备,包括:存储器,用于存储计算机可读指令;以及一个或多个处理器,用于运行所述计算机可读指令,使得所述处理器运行时实现前述第一方面中的任一所述渲染图像的方法。
第四方面,本公开实施例提供一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,当所述计算机指令被计算机执行时,使得所述计算机执行前述第一方面中的任一所述渲染图像的方法。
本公开公开了一种渲染图像的方法、装置、电子设备和计算机可读存储介质。其中所述渲染图像的方法,其特征在于,包括:获取图像;确定所述图像中的人手对象的位置信息;根据所述人手对象的位置信息确定渲染参数;根据所述渲染参数渲染所述图像。本公开实施例通过采取该技术方案,根据图像中的人手对象确定渲染参数以渲染所述图像,能够灵活便捷地渲染图像。
上述说明仅是本公开技术方案的概述,为了能更清楚了解本公开的技术手段,而可依照说明书的内容予以实施,并且为让本公开的上述和其他目的、特征和优点能够更明显易懂,以下特举较佳实施例,并配合附图,详细说明如下。
附图说明
为了更清楚地说明本公开实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本公开的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本公开实施例提供的渲染图像的方法的实施例的流程图;
图2为本公开实施例提供的根据鱼眼镜头参数渲染图像的示意图;
图3为本公开实施例提供的渲染图像的装置的实施例的结构示意图;
图4为根据本公开实施例提供的电子设备的结构示意图。
具体实施方式
以下通过特定的具体实例说明本公开的实施方式,本领域技术人员可由本说明书所揭露的内容轻易地了解本公开的其他优点与功效。显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。本公开还可以通过另外不同的具体实施方式加以实施或应用,本说明书中的各项细节也可以基于不同观点与应用,在没有背离本公开的精神下进行各种修饰或改变。需说明的是,在不冲突的情况下,以下实施例及实施例中的特征可以相互组合。基于本公开中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本公开保护的范围。
需要说明的是,下文描述在所附权利要求书的范围内的实施例的各种方面。应显而易见,本文中所描述的方面可体现于广泛多种形式中,且本文中所描述的任何特定结构及/或功能仅为说明性的。基于本公开,所属领域的技术人员应了解,本文中所描述的一个方面可与任何其它方面独立地实施,且可以各种方式组合这些方面中的两者或两者以上。举例来说,可使用本文中所阐述的任何数目个方面来实施设备及/或实践方法。另外,可使用除了本文中所阐述的方面中的一或多者之外的其它结构及/或功能性实施此设备及/或实践此方法。
还需要说明的是,以下实施例中所提供的图示仅以示意方式说明本公开的基本构想,图示中仅显示与本公开中有关的组件而非按照实际实施时的组件数目、形状及尺寸绘制,其实际实施时各组件的型态、数量及比例可为一种随意的改变,且其组件布局型态也可能更为复杂。
另外,在以下描述中,提供具体细节是为了便于透彻理解实例。然而,所属领域的技术人员将理解,可在没有这些特定细节的情况下实践所述方面。
图1为本公开实施例提供的渲染图像的方法实施例的流程图,本公开实施例提供的渲染图像的方法可以由一个渲染图像的装置来执行,该装置可以实现为软件,可以实现为硬件,还可以实现为软件和硬件的组合,例如所述渲染图像的装置包括计算机设备(例如智能终端),从而通过该计算机设备来执行本实施例提供的该渲染图像的方法。
如图1所示,本公开实施例的渲染图像的方法包括如下步骤:
步骤S101,获取图像;
在步骤S101中,渲染图像的装置获取图像,以便通过当前的和/或后续的步骤实现渲染图像的方法。该渲染图像的装置可以包括拍摄装置,从而步骤S101中所获取的图像包括该拍摄装置拍摄的图像;该渲染图像的装置可以不包括拍摄装置,但是与拍摄装置通信连接,从而步骤S101中获取图像包括通过所述通信连接获取该拍摄装置拍摄的图像;该渲染图像的装置还可以从预设的存储位置获取图像并应用本公开实施例提供的渲染图像的方法,本公开实施例对获取图像的方式不做限定。
本领域技术人员可以理解,视频由一系列图像帧构成,每个图像帧也可以称为图像,因此步骤S101获取图像包括从视频中获取图像。
步骤S102,确定所述图像中的人手对象的位置信息;
在步骤S102中,所述渲染图像的装置可以直接确定出所述图像中的人手对象的位置信息,还可以先识别所述图像中的人手对象,然后确定所述人手对象的位置信息。
本公开实施例中,可选的,可以基于所述图像的像素确定所述图像中的人手对象的位置信息。如同本领域技术人员所了解的,本公开实施例中的图像包括多个像素,可以认为图像是由多个像素构成的,可以通过位置参数和颜色参数来表征像素,一种典型的表征方式为通过五元组(x,y,r,g,b)来表示图像的一个像素,其中的坐标x和y作为所述一个像素的位置参数,可选的,具有深度记录功能的拍摄装置在拍摄过程中,可以记录每个像素的深度信息,相应地,可以通过(x,y,z)来表示像素的位置参数,其中z为该像素的深度坐标,本领域技术人员能够明确,前述坐标所对应的坐标系例如是拍摄装置在拍摄时所建立的,该坐标系的原点根据配置可以是所述图像的四边形的一个顶点,或者是所述图形的中心等,本公开实施例对于图像中的像素的坐标所对应的坐标系不做限定;前述五元组中的颜色分量r,g,和b为所述像素在RGB空间上的数值,将r,g,和b叠加可以获得所述像素的颜色,可选的,还可以通过其他颜色空间来表示所述像素的颜色参数,例如通过(L,a,b)表示所述像素在LAB空间上的颜色,其中L表示亮度,a表示红绿色程度,b表示黄蓝色程度。当然,还可以采用其他方式表示所述图像的像素的位置参数和颜色参数,本公开实施例对此不做限定。
作为一个示例,可以根据人手对象的颜色特征和/或形状特征,和所述图像的像素来确定所述图像中的人手对象的位置信息。人手对象被皮肤覆盖,尽管人的肤色由于不同人种或者个体特点表现出不同的颜色,但是其色调基本一致,皮肤的颜色在颜色空间中只聚集在很小的一块区域,从而可以基于皮肤的颜色特征通过图像分割算法在所述图像中识别出人物对象的皮肤部分,所述图像分割算法例如将图像中的像素的颜色参数与皮肤的颜色特征进行比对,以识别出图像中皮肤部分的区域,这可能包括人物对象的人脸对象、人手对象、臂部、腿部、足部等,进一步的,可以根据人手对象的形状特征在所述皮肤部分的区域中识别出人手对象的区域,以确定所述图像中的人手对象的位置信息。
在前述基于人手对象的颜色特征和/或形状特征并通过图像分割算法在所述图像中确定人手对象的位置信息的过程中,常见的图像分割算法可以根据图像颜色参数的相似性或同质性将图像划分为区域,然后通过区域合并的方式将合并后的区域所包括的像素确定为所述人手对象的像素区域;还可以根据颜色特征和/或形状特征在图像上进行关键点定位以确定关键点,例如确定人手对象的轮廓关键点,然后基于所述轮廓关键点和图像颜色参数的不连续性和突变性寻找所述人手对象的轮廓,根据其轮廓的位置进行空间上的延伸,也就是说根据图像的特征点、线、面进行图像分割以确定出所述人手对象的轮廓,所述人手对象的轮廓内的区域即为所述人手对象的像素区域。当然,还可以采用其他的图像分割算法,本公开实施例对在确定所述人手对象的位置信息的过程中所采用的图像分割算法不做限定。
作为又一个示例,可以根据人手对象的颜色特征和/或形状特征来表征所述人手对象的关键点,然后在所述图像中根据所述颜色特征和/或形状特征对所述图像中的像素的颜色参数和/或位置参数进行匹配和定位,以确定出所述人手对象的关键点的位置,并基于所述人手对象的关键点的位置确定所述人手对象的位置信息。由于关键点在图像中仅占据非常小的面积(通常只有几个至几十个像素的大小),与关键点对应的颜色特征和/或形状特征在图像上所占据的区域通常也是非常有限和局部的,目前用的特征提取方式有两种:(1)沿轮廓垂向的一维范围图像特征提取;(2)关键点方形邻域的二维范围图像特征提取,上述两种方式有很多种实现方法,如ASM和AAM类方法、统计能量函数类方法、回归分析方法、深度学习方法、分类器方法、批量提取方法等等,本公开实施例不做具体限定。在识别出所述人手对象的关键点的位置后可以基于所述关键点的位置确定所述人手对象的位置信息,例如直接将所述关键点的位置作为所述人手对象的位置信息,或者基于所述关键点的位置计算出所述人手对象的位置信息。
作为一个可选的实施例,所述人手对象的位置信息包括所述人手对象的坐标。例如,通过图像分割算法确定出所述人手对象的轮廓或者像素区域后可以进一步将所述轮廓或者像素区域的中心、重心、或者质心所在位置的像素的坐标作为所述人手对象的坐标;还例如,根据前述示例按照人手对象的颜色特征和/或形状特征来确定所述人手对象的关键点,比如可以按照轮廓关键点、大拇指关节关键点、食指关节关键点、中指关节关键点、无名指关节关键点、小拇指关节关键点的顺序,从上到下编号,在一个典型的应用中,单只人手(左手或者右手)的关键点为22个,每个关键点有固定编号,在确定所述人手对象的关键点后,可以将所述22个关键点对应的像素的坐标的平均值作为所述人手对象的位置信息,还可以直接将其中的一个或者多个关键点对应的像素的坐标作为所述人手对象的坐标。
作为另一个可选的实施例,确定所述图像中的人手对象的位置信息,包括:识别所述图像中的人手对象的第一关键点和第二关键点;确定所述第一关键点和所述第二关键点之间的距离,所述人手对象的位置信息包括所述第一关键点和所述第二关键点之间的距离。例如根据前述示例按照人手对象的颜色特征和/或形状特征来确定单只人手对象的拇指指尖关键点和食指指尖关键点,将两关键点之间的距离(例如欧式距离)作为所述人手对象的位置信息。
作为又一个可选的实施例,确定所述图像中的人手对象的位置信息,包括:识别所述图像中的左手对象和右手对象;确定所述左手对象和所述右手对象之间的距离,所述人手对象的位置信息包括所述左手对象和所述右手对象之间的距离。如同本领域技术人员所理解的,人手对象包括左手对象和右手对象,而左手对象和右手对象的颜色特征是相同或者相似的,但是左手对象和右手对象的位置特征是存在区别的(区别主要体现相邻手指的顺序和长度等),因此识别所述图像中的左手对象和右手对象,可以包括:根据左手对象和右手对象的位置特征并通过图像分割算法在所述图像中确定左手对象和右手对象的像素区域,相应地,确定所述左手对象和所述右手对象之间的距离可以包括:通过左手对象和右手对象的像素区域的中心、重心、或者质心所在位置的像素的坐标表征该识别的左手对象和右手对象,从而计算左手对象和右手对象之间的距离;识别所述图像中的左手对象和右手对象,还可以包括:基于左手对象和右手对象的颜色特征和/或位置特征分别确定左手对象和右手对象的关键点,相应地,确定所述左手对象和所述右手对象之间的距离,可以包括:通过单只人手的关键点所对应的像素的坐标表征该识别的左手对象和右手对象并计算所述距离,例如将左手对象的食指指尖关键点与右手对象的食指指尖关键点之间的距离作为所述人手对象的位置信息。
作为再一个可选的实施例,所述步骤S102:确定所述图像中的人手对象的位置信息,包括:确定所述图像的预设范围中的所述人手对象的位置信息;和/或在所述图像中的人手对象符合预设姿势的情况下,确定所述图像中的人手对象的位置信息。例如所述预设范围包括所述图像的上半部分,或者其他预设范围,那么步骤S102将确定所述图像的所述预设范围中的人手对象的位置信息,而不会确定所述图像中的预设范围之外的人手对象的位置信息。例如所述预设姿势包括V字形胜利手势,那么在所述人手对象不符合所述预设姿势的情况下,将不会确定所述图像中的人手对象的位置信息,当然所述预设姿势还可以包括其他姿势,对于人手对象的姿势的识别可以参照现有的或者将来的任何人手姿势识别技术,本公开实施例对此不作限定。
步骤S103,根据所述人手对象的位置信息确定渲染参数。
在步骤S103中,将根据步骤S102中所确定的图像中人手对象的位置信息来确定所述渲染参数。作为一个可选的实施例,根据所述人手对象的位置信息确定渲染参数,包括:将所述人手对象的位置信息通过映射关系映射为所述渲染参数,例如通过计算公式表征所述映射关系,从而将在步骤S102中确定的人手对象的位置信息代入所述计算公式的变量,通过所述计算公式计算出所述渲染参数。作为又一个可选的实施例,根据所述人手对象的位置信息确定渲染参数,包括:在所述人手对象的位置信息属于第一区间的情况下,确定所述渲染参数包括第一渲染参数;在所述人手对象的位置信息属于第二区间的情况下,确定所述渲染参数包括第二渲染参数,例如所述第一区间是大于第一阈值的区间,第二区间是小于或者等于所述第一阈值的区间,其中所述第一阈值是预设的阈值,那么当所述人手对象的位置信息属于大于第一阈值的区间时,确定所述渲染参数包括第一渲染参数,当所述人手对象的位置信息属于小于或等于所述第一阈值的区间时,确定所述渲染参数包括第二渲染参数。可选的,所述第一渲染参数和第二渲染参数不同。可选的,所述第一区间和所述第二区间无交集。
步骤S104,根据所述渲染参数渲染所述图像。
如本领域技术人员所理解的,在步骤S103中所确定的所述渲染参数可以包括任何形式的用于对图像进行色彩和/或内容进行处理的图像处理参数,从而在步骤S104中,能够根据所述渲染参数渲染所述图像,例如,所述渲染参数包括颜色系数,那么在步骤S104中能够将所述图像的像素的颜色参数乘以所述颜色系数,实现对所述图像的渲染,还例如,所述渲染参数包括美颜参数(例如包括标准脸型参数),那么在步骤S104中能够对所述图像中的人物对象进行美颜(相应地,例如按照标准脸型对所述人物对象进行瘦脸)。
作为一个示例,在应用本公开实施例的场景中,例如渲染图像的装置包括拍摄装置和显示装置,该渲染图像的装置通过所述拍摄装置拍摄视频,对于所述视频的每一帧图像都可以应用本公开实施例的渲染图像的方法,并且,所述渲染图像的装置还可以将渲染后的每一帧图像显示在所述显示装置上。例如所述人手对象的位置信息包括所述人手对象的深度坐标,所述渲染参数包括根据所述人手对象的深度坐标确定的虚化效果参数,其中深度坐标的数值越大,所述虚化效果参数的数值越大,而所述虚化效果参数的数值越大则图像被渲染的虚化程度越高,从而在该示例中,当所述渲染图像的装置的拍摄装置所拍摄的视频中的人手对象前后移动以改变其深度坐标时,所确定虚化效果参数的数值也随之变化,相应地,该渲染图像的装置的显示装置所显示的视频画面的虚化程度也会随之变化。
通过本公开实施例提供的技术方案,根据图像中的人手对象确定渲染参数以渲染所述图像,能够灵活便捷地渲染图像。
在一个可选的实施例中,所述渲染参数包括镜头效果参数。作为示例,例如所述镜头效果参数包括滤镜参数,结合前述的实施例,当所述人手对象的位置信息属于第一区间的情况下,确定所述渲染参数包括第一滤镜参数(例如为红镜参数,根据红镜参数渲染图像能够得到淡化蓝光以及柔和风景的效果);在所述人手对象的位置信息属于第二区间的情况下,确定所述渲染参数包括第二滤镜参数(例如为雾化镜参数,根据雾化镜参数渲染图像能够产生雾天效果)。
可选的,所述镜头效果参数包括鱼眼镜头参数,和/或光圈参数。
例如所述镜头效果参数包括光圈参数,结合前述的实施例,可以将所述人手对象的位置信息代入计算公式以计算出所述光圈参数,例如将所述人手对象的位置信息包括左手对象和右手对象之间的距离,可以确定所述距离与所述图像的宽度的比例,并将所述比例乘以预设的最大光圈值以得到所述光圈参数,进而通过所述光圈参数渲染所述图像,在渲染的过程中,作为示例,可以通过图像分割算法识别所述图像中的前景图像和背景图像,然后根据所述光圈参数虚化所述背景图像。
例如所述镜头效果参数包括鱼眼镜头参数,如本领域技术人员所理解的,通过鱼眼镜头拍摄的图像会根据鱼眼镜头参数产生较大变形,所述鱼眼镜头的焦距越短,所产生的变形越大,所述鱼眼镜头的视角越大,所产生的变形越大。因此可以通过前述实施例,根据所述人手对象的位置信息确定所述鱼眼镜头参数,并根据所述鱼眼镜头参数渲染所述图像,以取得更为丰富的渲染效果。
图2所示为本公开实施例提供的根据鱼眼镜头参数渲染所述图像的示意图,其中201为步骤S101中获取的所述图像即渲染前的图像,202为根据所述鱼眼镜头参数确定的鱼眼镜头渲染模型,203为步骤S104中根据所述鱼眼镜头参数渲染后的图像。如图2所示,所述鱼眼镜头渲染模型202包括一个球面透镜,所述鱼眼镜头参数中的鱼眼镜头视角参数决定了所述球面透镜的凹凸程度、进而决定了渲染后的图像的变形程度,所述鱼眼镜头渲染模型202还包括所述球面透镜的焦距参数f(即所述鱼眼镜头参数中的鱼眼镜头焦距参数),所述鱼眼镜头焦距参数的大小也能够决定渲染后的图像的变形程度。在图2中,A为渲染前的图像201的原点,B为渲染后的图像203的原点,O为所述鱼眼镜头渲染模型202的底面原点,渲染前的图像201的一个像素点C在鱼眼镜头渲染模型202上具有一个映射点D,DO为D点的入射光线,E为映射点D在所述鱼眼镜头渲染模型202的底面上的投影,θ为入射角(球面透镜的凹凸程度或者所述鱼眼镜头视角参数决定了θ的大小),F点为C点经过鱼眼镜头渲染模型202偏移之后的像素点,也就是说,渲染前的图像203中的像素点C在经过所述鱼眼镜头参数渲染后,其在渲染后的图像203中的位置变化为F,由于所述鱼眼镜头渲染模型202的焦距为f(f=OB),那么可以根据f和θ计算出d,例如可以定义d=f*θ或者d=f*sin(θ),这样就确定了渲染前的图像203中的像素点C在渲染后的图像203中的位置,相应地,可以对步骤S101中所确定的图像中的所有像素按照上述方式确定在渲染后的图像中的位置,而所有像素的颜色参数在渲染前后可以保持不变,从而实现根据鱼眼镜头参数渲染所述图像。
根据图2提供的渲染所述图像的示意图可知,在渲染过程中,鱼眼镜头参数中的鱼眼镜头视角参数(能够影响前述θ的大小,进而影响前述d的大小即影响了变形程度)和鱼眼镜头焦距参数(能够影响前述d的大小即影响了变形程度)决定了图像形变的程度,因此基于前述实施例,可以根据所述人手对象的位置信息确定所述鱼眼镜头视角参数和/或鱼眼镜头焦距参数,并根据所述鱼眼镜头视角参数和/或鱼眼镜头焦距参数渲染所述图像,以取得更为丰富的渲染效果。作为一个示例,例如所述预设的鱼眼镜头视角参数保持不变,在步骤S102中确定的所述人手对象的位置信息包括左手对象和右手对象之间的距离(例如为800像素),在步骤S103中根据所述人手对象的位置信息和预设的计算公式确定鱼眼镜头焦距参数(例如包括将所述左手对象和右手对象之间的距离除以预设调整值后的数值作为所述鱼眼镜头焦距参数,如果所述预设调整值为100,那么所述鱼眼镜头焦距参数为800/100=8mm),从而在步骤S104中按照确定的鱼眼镜头焦距参数渲染所述图像,具体的实现可以参照图2所提供的鱼眼镜头渲染模型202和定义的公式,此处不再赘述。
图3所示为本公开实施例提供的渲染图像的装置300实施例的结构示意图,如图3所示,所述装置包括图像获取模块301,位置信息确定模块302,渲染参数确定模块303,和渲染模块304。其中,所述图像获取模块301,用于获取图像;所述位置信息确定模块302,用于确定所述图像中的人手对象的位置信息;所述渲染参数确定模块303,用于根据所述人手对象的位置信息确定渲染参数;所述渲染模块304,用于根据所述渲染参数渲染所述图像。
图3所示装置可以执行图1所示实施例的方法,本实施例未详细描述的部分,可参考对图1所示实施例的相关说明。该技术方案的执行过程和技术效果参见图1所示实施例中的描述,在此不再赘述。
下面参考图4,其示出了适于用来实现本公开实施例的电子设备400的结构示意图。本公开实施例中的电子设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图4示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图4所示,电子设备400可以包括处理装置(例如中央处理器、图形处理器等)401,其可以根据存储在只读存储器(ROM)402中的程序或者从存储装置408加载到随机访问存储器(RAM)403中的程序而执行各种适当的动作和处理。在RAM 403中,还存储有电子设备400操作所需的各种程序和数据。处理装置401、ROM 402以及RAM 403通过总线或通信线路404彼此相连。输入/输出(I/O)接口405也连接至总线或通信线路404。
通常,以下装置可以连接至I/O接口405:包括例如触摸屏、触摸板、键盘、鼠标、图像传感器、麦克风、加速度计、陀螺仪等的输入装置406;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置407;包括例如磁带、硬盘等的存储装置408;以及通信装置409。通信装置409可以允许电子设备400与其他设备进行无线或有线通信以交换数据。虽然图4示出了具有各种装置的电子设备400,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置409从网络上被下载和安装,或者从存储装置408被安装,或者从ROM 402被安装。在该计算机程序被处理装置401执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述实施例中的渲染图像的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言-诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言-诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)-连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (12)
1.一种渲染图像的方法,其特征在于,包括:
获取图像;
确定所述图像中的人手对象的位置信息;
根据所述人手对象的位置信息确定渲染参数;
根据所述渲染参数渲染所述图像。
2.根据权利要求1所述的渲染图像的方法,其特征在于,所述渲染参数包括镜头效果参数。
3.根据权利要求2所述的渲染图像的方法,其特征在于,所述镜头效果参数包括鱼眼镜头参数,和/或光圈参数。
4.根据权利要求1-3中任一所述的渲染图像的方法,其特征在于,根据所述人手对象的位置信息确定渲染参数,包括:将所述人手对象的位置信息通过映射关系映射为所述渲染参数。
5.根据权利要求1-3中任一所述的渲染图像的方法,其特征在于,根据所述人手对象的位置信息确定渲染参数,包括:
在所述人手对象的位置信息属于第一区间的情况下,确定所述渲染参数包括第一渲染参数;
在所述人手对象的位置信息属于第二区间的情况下,确定所述渲染参数包括第二渲染参数。
6.根据权利要求1-3中任一所述的渲染图像的方法,其特征在于,所述人手对象的位置信息包括所述人手对象的坐标。
7.根据权利要求1-3中任一所述的渲染图像的方法,其特征在于,确定所述图像中的人手对象的位置信息,包括:
识别所述图像中的人手对象的第一关键点和第二关键点;
确定所述第一关键点和所述第二关键点之间的距离,所述人手对象的位置信息包括所述第一关键点和所述第二关键点之间的距离。
8.根据权利要求1-3中任一所述的渲染图像的方法,其特征在于,确定所述图像中的人手对象的位置信息,包括:
识别所述图像中的左手对象和右手对象;
确定所述左手对象和所述右手对象之间的距离,所述人手对象的位置信息包括所述左手对象和所述右手对象之间的距离。
9.根据权利要求1-3中任一所述的渲染图像的方法,其特征在于,确定所述图像中的人手对象的位置信息,包括:
确定所述图像的预设范围中的所述人手对象的位置信息;和/或
在所述图像中的人手对象符合预设姿势的情况下,确定所述图像中的人手对象的位置信息。
10.一种渲染图像的装置,其特征在于,包括:
图像获取模块,用于获取图像;
位置信息确定模块,用于确定所述图像中的人手对象的位置信息;
渲染参数确定模块,用于根据所述人手对象的位置信息确定渲染参数;
渲染模块,用于根据所述渲染参数渲染所述图像。
11.一种电子设备,包括:
存储器,用于存储计算机可读指令;以及
处理器,用于运行所述计算机可读指令,使得所述处理器运行时实现根据权利要求1-9中任意一项所述的渲染图像的方法。
12.一种非暂态计算机可读存储介质,用于存储计算机可读指令,当所述计算机可读指令由计算机执行时,使得所述计算机执行权利要求1-9中任意一项所述的渲染图像的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910341736.8A CN110047126B (zh) | 2019-04-25 | 2019-04-25 | 渲染图像的方法、装置、电子设备和计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910341736.8A CN110047126B (zh) | 2019-04-25 | 2019-04-25 | 渲染图像的方法、装置、电子设备和计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110047126A true CN110047126A (zh) | 2019-07-23 |
CN110047126B CN110047126B (zh) | 2023-11-24 |
Family
ID=67279485
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910341736.8A Active CN110047126B (zh) | 2019-04-25 | 2019-04-25 | 渲染图像的方法、装置、电子设备和计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110047126B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111178170A (zh) * | 2019-12-12 | 2020-05-19 | 青岛小鸟看看科技有限公司 | 一种手势识别方法和一种电子设备 |
WO2022142388A1 (zh) * | 2020-12-29 | 2022-07-07 | 北京达佳互联信息技术有限公司 | 特效显示方法及电子设备 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006018554A1 (fr) * | 2004-07-28 | 2006-02-23 | Sagem Communication | Procédé de tramage d'une d'image |
CN103765274A (zh) * | 2011-08-31 | 2014-04-30 | 富士胶片株式会社 | 镜头装置和具有该镜头装置的成像装置 |
CN106021922A (zh) * | 2016-05-18 | 2016-10-12 | 妙智科技(深圳)有限公司 | 三维医学影像控制设备、方法和系统 |
CN106331492A (zh) * | 2016-08-29 | 2017-01-11 | 广东欧珀移动通信有限公司 | 一种图像处理方法及终端 |
US20170140552A1 (en) * | 2014-06-25 | 2017-05-18 | Korea Advanced Institute Of Science And Technology | Apparatus and method for estimating hand position utilizing head mounted color depth camera, and bare hand interaction system using same |
CN106937054A (zh) * | 2017-03-30 | 2017-07-07 | 维沃移动通信有限公司 | 一种移动终端的拍照虚化方法及移动终端 |
CN107395965A (zh) * | 2017-07-14 | 2017-11-24 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
WO2018011105A1 (en) * | 2016-07-13 | 2018-01-18 | Koninklijke Philips N.V. | Systems and methods for three dimensional touchless manipulation of medical images |
US9898183B1 (en) * | 2012-09-19 | 2018-02-20 | Amazon Technologies, Inc. | Motions for object rendering and selection |
CN107948514A (zh) * | 2017-11-30 | 2018-04-20 | 广东欧珀移动通信有限公司 | 图像虚化处理方法、装置及移动设备 |
CN109544445A (zh) * | 2018-12-11 | 2019-03-29 | 维沃移动通信有限公司 | 一种图像处理方法、装置及移动终端 |
US20190114835A1 (en) * | 2017-10-16 | 2019-04-18 | Microsoft Technology Licensing, Llc | User interface discovery and interaction for three-dimensional virtual environments |
-
2019
- 2019-04-25 CN CN201910341736.8A patent/CN110047126B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2006018554A1 (fr) * | 2004-07-28 | 2006-02-23 | Sagem Communication | Procédé de tramage d'une d'image |
CN103765274A (zh) * | 2011-08-31 | 2014-04-30 | 富士胶片株式会社 | 镜头装置和具有该镜头装置的成像装置 |
US9898183B1 (en) * | 2012-09-19 | 2018-02-20 | Amazon Technologies, Inc. | Motions for object rendering and selection |
US20170140552A1 (en) * | 2014-06-25 | 2017-05-18 | Korea Advanced Institute Of Science And Technology | Apparatus and method for estimating hand position utilizing head mounted color depth camera, and bare hand interaction system using same |
CN106021922A (zh) * | 2016-05-18 | 2016-10-12 | 妙智科技(深圳)有限公司 | 三维医学影像控制设备、方法和系统 |
WO2018011105A1 (en) * | 2016-07-13 | 2018-01-18 | Koninklijke Philips N.V. | Systems and methods for three dimensional touchless manipulation of medical images |
CN106331492A (zh) * | 2016-08-29 | 2017-01-11 | 广东欧珀移动通信有限公司 | 一种图像处理方法及终端 |
CN106937054A (zh) * | 2017-03-30 | 2017-07-07 | 维沃移动通信有限公司 | 一种移动终端的拍照虚化方法及移动终端 |
CN107395965A (zh) * | 2017-07-14 | 2017-11-24 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
US20190114835A1 (en) * | 2017-10-16 | 2019-04-18 | Microsoft Technology Licensing, Llc | User interface discovery and interaction for three-dimensional virtual environments |
CN107948514A (zh) * | 2017-11-30 | 2018-04-20 | 广东欧珀移动通信有限公司 | 图像虚化处理方法、装置及移动设备 |
CN109544445A (zh) * | 2018-12-11 | 2019-03-29 | 维沃移动通信有限公司 | 一种图像处理方法、装置及移动终端 |
Non-Patent Citations (1)
Title |
---|
梅继红等: "基于数据手套的虚拟操作技术研究", 《系统仿真学报》 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111178170A (zh) * | 2019-12-12 | 2020-05-19 | 青岛小鸟看看科技有限公司 | 一种手势识别方法和一种电子设备 |
CN111178170B (zh) * | 2019-12-12 | 2023-07-04 | 青岛小鸟看看科技有限公司 | 一种手势识别方法和一种电子设备 |
WO2022142388A1 (zh) * | 2020-12-29 | 2022-07-07 | 北京达佳互联信息技术有限公司 | 特效显示方法及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN110047126B (zh) | 2023-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110047124A (zh) | 渲染视频的方法、装置、电子设备和计算机可读存储介质 | |
WO2020199931A1 (zh) | 人脸关键点检测方法及装置、存储介质和电子设备 | |
CN110047122A (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
CN110766777A (zh) | 虚拟形象的生成方法、装置、电子设备及存储介质 | |
CN110288547A (zh) | 用于生成图像去噪模型的方法和装置 | |
JP7387202B2 (ja) | 3次元顔モデル生成方法、装置、コンピュータデバイス及びコンピュータプログラム | |
CN110058685A (zh) | 虚拟对象的显示方法、装置、电子设备和计算机可读存储介质 | |
CN110062176A (zh) | 生成视频的方法、装置、电子设备和计算机可读存储介质 | |
CN108491809A (zh) | 用于生成近红外图像生成模型的方法和装置 | |
CN110378846A (zh) | 一种处理图像磨皮的方法、装置、介质和电子设备 | |
CN110084154A (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
CN110062157A (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
CN104574358B (zh) | 从聚焦堆图像进行场景分割的方法和设备 | |
WO2022042290A1 (zh) | 一种虚拟模型处理方法、装置、电子设备和存储介质 | |
CN110070499A (zh) | 图像处理方法、装置和计算机可读存储介质 | |
CN110502974A (zh) | 一种视频图像的展示方法、装置、设备、及可读存储介质 | |
CN110070551A (zh) | 视频图像的渲染方法、装置和电子设备 | |
CN110069125B (zh) | 虚拟对象的控制方法和装置 | |
CN107851308A (zh) | 用于识别目标物体的系统和方法 | |
CN110035236A (zh) | 图像处理方法、装置和电子设备 | |
CN109961016A (zh) | 面向智能家居场景的多手势精准分割方法 | |
CN110211195A (zh) | 生成图像集合的方法、装置、电子设备和计算机可读存储介质 | |
CN110070555A (zh) | 图像处理方法、装置、硬件装置 | |
CN109981989A (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 | |
CN110047126A (zh) | 渲染图像的方法、装置、电子设备和计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |