CN109242940A - 三维动态图像的生成方法和装置 - Google Patents

三维动态图像的生成方法和装置 Download PDF

Info

Publication number
CN109242940A
CN109242940A CN201710330523.6A CN201710330523A CN109242940A CN 109242940 A CN109242940 A CN 109242940A CN 201710330523 A CN201710330523 A CN 201710330523A CN 109242940 A CN109242940 A CN 109242940A
Authority
CN
China
Prior art keywords
dimensional
object model
animation
dynamic images
target object
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710330523.6A
Other languages
English (en)
Other versions
CN109242940B (zh
Inventor
彭向阳
李斌
刘文婷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201710330523.6A priority Critical patent/CN109242940B/zh
Publication of CN109242940A publication Critical patent/CN109242940A/zh
Application granted granted Critical
Publication of CN109242940B publication Critical patent/CN109242940B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/003D [Three Dimensional] image rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明公开了一种三维动态图像的生成方法和装置。其中,该方法包括:从获取到的照片中识别出目标对象的对象特征;根据对象特征对目标对象构建三维对象模型;对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。本发明解决了相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题。

Description

三维动态图像的生成方法和装置
技术领域
本发明涉及互联网领域,具体而言,涉及一种三维动态图像的生成方法和装置。
背景技术
三维模型是对象的多边形表示,通常用计算机或者其它视频设备进行显示,显示的物体可以是现实世界的实体,也可以是虚构的物体,任何物理自然界存在的东西都可以用三维模型表示,如人、动物、自然环境等。
随着科技的发展,三维模型被应用的领域越来越多,如虚拟现实VR、增强现实AR、混合现实MR等场景,以VR为例,用户有截取并保留场景中三维模型(如自己的三维模型)的动态图像的需求,相关技术在截取图像时,采用等时间隔方式获取帧图片,然后将帧图片组成动态图像,由于是采用等时间隔方式获取帧图片,而三维模型的关键动作并不是按照等时间隔的方式进行的,从而导致得到的动态图像并不能还原实际动作,甚至存在较大差距。
针对上述相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种三维动态图像的生成方法和装置,以至少解决相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题。
根据本发明实施例的一个方面,提供了一种三维动态图像的生成方法,该方法包括:从获取到的照片中识别出目标对象的对象特征;根据对象特征对目标对象构建三维对象模型;对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
根据本发明实施例的另一方面,还提供了一种三维动态图像的生成装置,该装置包括:识别单元,用于从获取到的照片中识别出目标对象的对象特征;构建单元,用于根据对象特征对目标对象构建三维对象模型;图像获取单元,用于对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
在本发明实施例中,服务器从获取到的照片中识别出目标对象的对象特征;然后根据对象特征对目标对象进行构建,得到目标对象的三维对象模型;在对三维对象模型进行动画渲染操作时,对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像,由于得到的三维动态图像中包括用于反映目标对象的关键动作的关键帧,使得得到的三维动态图像能够还原该对象的实际行为动作,可以解决了相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题,进而达到通过动态图像来准确还原实际动作的技术效果。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的三维动态图像的生成方法的硬件环境的示意图;
图2是根据本发明实施例的一种可选的三维动态图像的生成方法的流程图;
图3是根据本发明实施例的一种可选的三维动态图像的生成方法的流程图;
图4是根据本发明实施例的可选的图像的示意图;
图5是根据本发明实施例的可选的个人形成渲染的示意图;
图6是根据本发明实施例的可选的静态展示图的示意图;
图7是根据本发明实施例的可选的动态展示图的示意图;
图8是根据本发明实施例的可选的关键帧的示意图;
图9是根据本发明实施例的可选的图像分享的示意图;
图10是根据本发明实施例的一种可选的三维动态图像的生成方法的流程图;
图11是根据本发明实施例的一种可选的三维动态图像的生成装置的示意图;以及
图12是根据本发明实施例的一种终端的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本发明实施例,提供了一种三维动态图像的生成方法的方法实施例。
可选地,在本实施例中,上述三维动态图像的生成方法可以应用于如图1所示的由服务器102和终端104所构成的硬件环境中。如图1所示,服务器102通过网络与终端104进行连接,上述网络包括但不限于:广域网、城域网或局域网,终端104并不限定于PC、手机、平板电脑等。本发明实施例的三维动态图像的生成方法可以由服务器102来执行,也可以由终端104来执行,还可以是由服务器102和终端104共同执行。其中,终端104执行本发明实施例的三维动态图像的生成方法也可以是由安装在其上的客户端来执行。
在由服务器或终端单独来执行本申请的三维动态图像的生成方法时,可直接在服务器或终端上执行与本申请提供的方法对应的程序即可。
在由服务器和终端共同来执行本申请的三维动态图像的生成方法时,需要服务器和终端进行交互,本申请所提供的方法可以应用服务的形式由服务器提供给终端进行使用,具体可以在终端上安装该应用服务的客户端来使用服务器提供的服务,下面结合图2进行说明。
图2是根据本发明实施例的一种可选的三维动态图像的生成方法的流程图,如图2所示,该方法可以包括以下步骤:
步骤S202,服务器从获取到的照片中识别出目标对象的对象特征。
上述图片可以是保存在服务器本地的,也可以是终端上传给服务器的。
上述的目标对象可以为人物、动物、实体对象(如建筑、山体等)等三维的对象。
在目标对象为人物或动物时,对象特征指人物或者动物的外观特征,如头部的相关特征、身体躯干的相关特征、服饰的特征等;在目标对象为实体对象时,对象特征为实体的外部特征,如形状、高矮、长宽等。
在目标对象为人物时,三维对象模型为三维人物模型;在目标对象为动物时,三维对象模型为三维动物模型。
步骤S204,根据对象特征对目标对象构建三维对象模型。
即根据对象特征对该目标对象进行还原,构建该对象的三维对象模型。
步骤S206,对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
在对三维对象模型进行动画渲染操作时,得到的是目标对象的动画。
在对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作时,包括以下两种截图方式:
(1)在对三维对象模型进行动画渲染操作的过程中,动画渲染操作和截图操作是同时进行的,在动画渲染操作输出的动画视频流中,只要检测到包括关键帧的动画出现,则对该关键帧进行截图;
(2)在对三维对象模型进行的动画渲染操作完成之后,对得到的完整的动画中的关键帧进行截图操作。
需要说明的是,关键帧用于反映对三维对象模型进行动画渲染操作时,三维对象模型执行的关键动作,关键帧即三维对象模型运动或者变化中的关键动作所处的那一帧,关键帧与关键帧之间的普通帧可以根据关键帧进行补充,而如果缺少了关键帧时,则不能根据该关键帧邻接的普通帧来补充关键帧,若动态图像缺少关键帧则不能呈现三维对象的关键动作,从而不能还原三维对象的实际动作。
通过上述步骤S202至步骤S206,服务器从获取到的照片中识别出目标对象的对象特征;然后根据对象特征对目标对象进行构建,得到目标对象的三维对象模型;在对三维对象模型进行动画渲染操作时,对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像,由于得到的三维动态图像中包括用于反映目标对象的关键动作的关键帧,使得得到的三维动态图像能够还原该对象的实际行为动作,可以解决了相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题,进而达到通过动态图像来准确还原实际动作的技术效果。
在本申请的实施例中,提供了一种在三维模型静态展示和在执行给定动态动作时,通过配置检测关键帧、利用三维渲染摄像机截取关键帧图片,后期对关键帧图片处理,生成连续的动态动画资源的方案,可利用社交软件来传播得到的三维动态图像。下面结合图2以目标对象为人物为例进行详述:
在步骤S202提供的技术方案中,服务器从获取到的照片中识别出目标对象的对象特征。
照片的采集可以通过终端实现,一种可选的实施方式是:在用户启动终端上提供应用服务的客户端之后,由客户端提示用户上传照片,上传的照片可以从在线相册或者本地相册选取,或者通过终端的摄像头实时采集。
在步骤S204提供的技术方案中,在根据对象特征对目标对象构建三维对象模型时,可使用对象面部特征构建初始三维对象模型,对象特征包括对象面部特征;使用头部参数和服装参数对初始三维对象模型进行对象渲染操作,得到三维对象模型。
可选地,在使用对象面部特征构建初始三维对象模型时,可利用对象面部特征与模型集合中各个模型的面部特征进行比对,将其中最为接近的模型作为初始三维对象模型,这里使用的面部特征可以为面部形状;或者使用预设的三维对象模型构造算法(如Oslim算法),构造具备该对象面部特征的初始三维对象模型。
可选地,使用头部参数和服装参数对初始三维对象模型进行对象渲染操作,得到三维对象模型时,可为初始三维对象模型设定背景;然后使用头部参数和服装参数对位于背景中的初始三维对象模型进行对象渲染操作,得到三维对象模型。
上述的头部参数包括用于设置五官的位置、形状、颜色等属性的参数,设置发型的参数,设置脸部颜色、形状等属性的参数。通过头部参数可以对初始三维对象模型进行初始化。
在服务器从获取到的照片中识别出目标对象的对象特征时,包括识别出在此使用的头部参数。
上述的背景可以包括模型的场景、周围环境等。
在步骤S206提供的技术方案中,对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
可选地,在对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,是指对动画渲染操作得到的目标对象的动画中由预定的关键帧时间配置信息指示的多个关键帧进行截取,得到多个三维静态图像;然后将多个三维静态图像按时间顺序生成为三维动态图像。
需要说明的是,上述的配置信息是用于配置目标对象的动作及动作时间的信息,如表1所示,记录了每个执行的动所处的时间,以及对应的帧的类型(包括普通帧和关键帧)。
表1
在截取图像时,先根据配置信息确定关键帧所在的时刻,如第1秒、第5秒以及第7秒所在的帧,在动画的时间到达第1秒、第5秒以及第7秒时,执行截取图像的操作。
可选地,在将多个三维静态图像按时间顺序生成为三维动态图像时,可先获取为待生成的三维动态图像设定的图像尺寸,该图像尺寸可以是客户端上预先设置的,也可以是根据多个三维静态图像的图像尺寸确定的(如以多个三维静态图像的图像尺寸中尺寸最小的为标准);然后按照图像尺寸对多个三维静态图像进行尺寸调整,将每个三维静态图像调整为上述图像尺寸的图像;然后将经过尺寸调整后的多个三维静态图像按时间顺序生成为三维动态图像。
例如,对于上述的采集到的第1秒、第5秒以及第7秒的关键帧,则可以按照时间顺序,即按照如下顺序:第1秒的关键帧、第5秒的关键帧、第7秒的关键帧,组成上述的三维静态图像。
可选地,可以在终端上安装目标应用(也即前述的应用服务)的客户端,客户端上登录有用户帐号,在对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像之后,用户可将三维动态图像发送给目标应用中的目标帐号,该目标帐号为该用户的好友。
作为一种可选的实施例,本申请提供的技术方案适用于对三维模型静态或者动态地截取关键帧输出,作为图片、GIF资源使用或者传播,提升软件运行效率和用户体验。其主要技术方案如图3所示:
步骤S302,用户拍照上传到云端服务器,云端程序利用人脸识别技术识别照片中人物的面部特征。
步骤S304,个人形象模块将识别出的面部特征(即对象特征)存储至服务器的个人形象、动画云端配置模块。
步骤S306,个人形象模块从配置模块获取渲染配置、截图配置等。
步骤S308,个人形象模块渲染个人形象。
可利用三维重建技术,根据云端识别到的人物面部特征重建三维人物模型(即三维对象模型),使用默认的头部、服装渲染用户个人形象。
可选地,如图4所示,在终端上,应用可以通过提供应用服务器的客户端选择个性三维人物模型(即初始三维对象模型)的头部装饰、服装装扮个人形象。
如图5所示,最终得到的个人形象受到三方面的影响,其一是个人面部特征,其二是服务器的头饰服饰配置,其二是初始动作配置。
步骤S310,截图模块对渲染得到的个人形象进行截图。具体包括如下两种截图方式:
(1)三维模型静态展示图截取
步骤S11,在模型准备阶段获取待渲染的面部特征,并获取头部、服装装饰等。
步骤S12,在模型展示阶段,按给定的背景渲染模型进行渲染。
步骤S13,在执行步骤S12的同时,对模型渲染相机镜头进行截取,以获取模型静态展示图。
(2)三维模型动态展示图(即三维动态图像)截取
步骤S21,在模型准备阶段获取待渲染的面部特征,并获取头部、服装装饰等。
步骤S22,在模型动画展示阶段,按给定的背景渲染模型,并按照动画配置渲染动画。
步骤S23,获取关键帧时间配置,并启动截图程序。
步骤S24,在执行步骤S22的同时,在关键帧时机到来时对模型渲染相机镜头进行截取,获取多张模型静态展示图。
步骤S25,进行图片加工处理,对截取的关键帧图片进行大小调整,增加水印等处理,对动态展示图截取的一组关键帧图片可以组成一个动画资源GIF,更好的还原动态展示过程、也使资源的使用更加方便。
在步骤S25中,可以直接对关键帧进行大小调整、增加水印等处理后得到静态的展示图,如图6所示;也可组成一个动画资源GIF(即动态三维图像),如图7所示,每个小的图像表示一个GIF。
图8示出了表1中的关键帧的图像,第1秒的关键帧A、第5秒的关键帧C以及第7秒的关键帧B。
步骤S312,在客户端上展示三维动态图像或者静态图像。
上述的客户端可以为社交应用的客户端,可以在客户端上展示得到的图像,用户可将静态图片或者GIF资源展示给用户,用户可选择想要分享的资源,通过社交软件传播,如微信的朋友圈、发送给好友等。
如图9所示,对于静态图像,直接在客户端中展示该静态图像,并在图像下方展示分享按钮,用户可点击该按钮进行分享。对于动态图像,用户可也在客户端上进行相关操作,如发送给朋友、收藏、保存图片等操作。
步骤S314,用户在客户端上确认是否对图像进行分享。
步骤S316,在用户确认之后,分享模块将图像分享至朋友圈。
针对图3中个人形象渲染的相关流程,本申请还提供了一种优选实施例,如图10所示:
步骤S1002,用户利用终端上的客户端拍照,由客户端的个人形象模块获取拍摄得到的照片。
步骤S1004,完成照片拍摄后,由用户通过与个人形象模块的交互确认是否上传。
步骤S1006,在用户确认之后,个人形象模块上传图片给服务器侧的人脸识别模块,人脸识别模块对图像中的人脸面部特征进行识别和提取。
步骤S1008,个人形象模块将识别出的人脸面部特征存储至个人形象云端配置模块。
步骤S1010,配置模块将面部特征配置发送给客户端的人性形象模块,以根据识别出的面部特征在客户端中选择合适的人物模型。
如根据面部特征选择脸型接近的头部模型,然后根据五官的特征为其选择适配五官,得到初始的人物形象模型。
步骤S1012,配置模块下发个人形象装扮相关的配置信息给客户端的个人形象模块,以对人物形象模型的个人形象进行装扮。
步骤S1014,在客户端中渲染个人形象。
本申请的技术方案可以应用于虚拟现实、增强现实中,具体可以应用到虚拟现实、增强现实的应用(如第二世界)、社交应用(如微信等)中。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
实施例2
根据本发明实施例,还提供了一种用于实施上述三维动态图像的生成方法的三维动态图像的生成装置。图11是根据本发明实施例的一种可选的三维动态图像的生成装置的示意图,如图11所示,该装置可以包括:识别单元112、构建单元114以及图像获取单元116。
识别单元112,用于从获取到的照片中识别出目标对象的对象特征。
上述图片可以是保存在服务器本地的,也可以是终端上传给服务器的。
上述的目标对象可以为人物、动物、实体对象(如建筑、山体等)等三维的对象。
在目标对象为人物或动物时,对象特征指人物或者动物的外观特征,如头部的相关特征、身体躯干的相关特征、服饰的特征等;在目标对象为实体对象时,对象特征为实体的外部特征,如形状、高矮、长宽等。
在目标对象为人物时,三维对象模型为三维人物模型;在目标对象为动物时,三维对象模型为三维动物模型。
构建单元114,用于根据对象特征对目标对象构建三维对象模型。即根据对象特征对该目标对象进行还原,构建该对象的三维对象模型。
图像获取单元116,用于对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
在对三维对象模型进行动画渲染操作时,得到的是目标对象的动画。
在对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作时,包括以下两种截图方式:
(1)在对三维对象模型进行动画渲染操作的过程中,动画渲染操作和截图操作是同时进行的,在动画渲染操作输出的动画视频流中,只要检测到包括关键帧的动画出现,则对该关键帧进行截图;
(2)在对三维对象模型进行的动画渲染操作完成之后,对得到的完整的动画中的关键帧进行截图操作。
需要说明的是,关键帧用于反映对三维对象模型进行动画渲染操作时,三维对象模型执行的关键动作,关键帧即三维对象模型运动或者变化中的关键动作所处的那一帧,关键帧与关键帧之间的普通帧可以根据关键帧进行补充,而如果缺少了关键帧时,则不能根据该关键帧邻接的普通帧来补充关键帧,若动态图像缺少关键帧则不能呈现三维对象的关键动作,从而不能还原三维对象的实际动作。
需要说明的是,该实施例中的识别单元112可以用于执行本申请实施例1中的步骤S202,该实施例中的构建单元114可以用于执行本申请实施例1中的步骤S204,该实施例中的图像获取单元116可以用于执行本申请实施例1中的步骤S206。
此处需要说明的是,上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在如图1所示的硬件环境中,可以通过软件实现,也可以通过硬件实现。
通过上述模块,服务器从获取到的照片中识别出目标对象的对象特征;然后根据对象特征对目标对象进行构建,得到目标对象的三维对象模型;在对三维对象模型进行动画渲染操作时,对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像,由于得到的三维动态图像中包括用于反映目标对象的关键动作的关键帧,使得得到的三维动态图像能够还原该对象的实际行为动作,可以解决了相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题,进而达到通过动态图像来准确还原实际动作的技术效果。
在本申请的实施例中,提供了一种在三维模型静态展示和在执行给定动态动作时,通过配置检测关键帧、利用三维渲染摄像机截取关键帧图片,后期对关键帧图片处理,生成连续的动态动画资源的方案,可利用社交软件来传播得到的三维动态图像。
可选地,照片的采集可以通过终端实现,一种可选的实施方式是:在用户启动终端上提供应用服务的客户端之后,由客户端提示用户上传照片,上传的照片可以从在线相册或者本地相册选取,或者通过终端的摄像头实时采集。
可选地,构建单元包括:构建模块,用于使用对象面部特征构建初始三维对象模型,其中,对象特征包括对象面部特征;渲染模块,用于使用头部参数和服装参数对初始三维对象模型进行对象渲染操作,得到三维对象模型。
在使用对象面部特征构建初始三维对象模型时,可利用对象面部特征与模型集合中各个模型的面部特征进行比对,将其中最为接近的模型作为初始三维对象模型,这里使用的面部特征可以为面部形状;或者使用预设的三维对象模型构造算法(如Oslim算法),构造具备该对象面部特征的初始三维对象模型。
可选地,渲染模块还用于:为初始三维对象模型设定背景;使用头部参数和服装参数对位于背景中的初始三维对象模型进行对象渲染操作,得到三维对象模型。
上述的头部参数包括用于设置五官的位置、形状、颜色等属性的参数,设置发型的参数,设置脸部颜色、形状等属性的参数。通过头部参数可以对初始三维对象模型进行初始化。
在服务器从获取到的照片中识别出目标对象的对象特征时,包括识别出在此使用的头部参数。
上述的背景可以包括模型的场景、周围环境等。
可选地,图像获取单元包括:图像截取模块,用于对动画渲染操作得到的目标对象的动画中由预定的关键帧时间配置信息指示的多个关键帧进行截取,得到多个三维静态图像;图像生成模块,用于将多个三维静态图像按时间顺序生成为三维动态图像。
需要说明的是,上述的配置信息是用于配置目标对象的动作及动作时间的信息,如表1所示,记录了每个执行的动所处的时间,以及对应的帧的类型(包括普通帧和关键帧)。
可选地,图像生成模块还用于:获取为待生成的三维动态图像设定的图像尺寸;按照图像尺寸对多个三维静态图像进行尺寸调整;将经过尺寸调整后的多个三维静态图像按时间顺序生成为三维动态图像。
在截取图像时,先根据配置信息确定关键帧所在的时刻,如第1秒、第5秒以及第7秒所在的帧,在动画的时间到达第1秒、第5秒以及第7秒时,执行截取图像的操作。
可选地,在将多个三维静态图像按时间顺序生成为三维动态图像时,可先获取为待生成的三维动态图像设定的图像尺寸,该图像尺寸可以是客户端上预先设置的,也可以是根据多个三维静态图像的图像尺寸确定的(如以多个三维静态图像的图像尺寸中尺寸最小的为标准);然后按照图像尺寸对多个三维静态图像进行尺寸调整,将每个三维静态图像调整为上述图像尺寸的图像;然后将经过尺寸调整后的多个三维静态图像按时间顺序生成为三维动态图像。
例如,对于上述的采集到的第1秒、第5秒以及第7秒的关键帧,则可以按照时间顺序,即按照如下顺序:第1秒的关键帧、第5秒的关键帧、第7秒的关键帧,组成上述的三维静态图像。
可选地,可以在终端上安装目标应用(也即前述的应用服务)的客户端,客户端上登录有用户帐号,在对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像之后,用户可将三维动态图像发送给目标应用中的目标帐号,该目标帐号为该用户的好友。
本申请的技术方案可以应用于虚拟现实、增强现实中,具体可以应用到虚拟现实、增强现实的应用(如第二世界)、社交应用(如微信等)中。
需要说明的是,本实施例中的软件模块或者单元与前述实施例中的方法对应,本实施例中的软件模块或者单元的具体实施方式在前述方法实施例中已具体描述,在此不再赘述。
此处需要说明的是,上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。需要说明的是,上述模块作为装置的一部分可以运行在如图1所示的硬件环境中,可以通过软件实现,也可以通过硬件实现,其中,硬件环境包括网络环境。
实施例3
根据本发明实施例,还提供了一种用于实施上述三维动态图像的生成方法的服务器或终端。
图12是根据本发明实施例的一种终端的结构框图,如图12所示,该终端可以包括:一个或多个(图12中仅示出一个)处理器1201、存储器1203、以及传输装置1205(如上述实施例中的发送装置),如图12所示,该终端还可以包括输入输出设备1207。
其中,存储器1203可用于存储软件程序以及模块,如本发明实施例中的三维动态图像的生成方法和装置对应的程序指令/模块,处理器1201通过运行存储在存储器1203内的软件程序以及模块,从而执行各种功能应用以及数据处理,即实现上述的三维动态图像的生成方法。存储器1203可包括高速随机存储器,还可以包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器1203可进一步包括相对于处理器1201远程设置的存储器,这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
上述的传输装置1205用于经由一个网络接收或者发送数据,还可以用于处理器与存储器之间的数据传输。上述的网络具体实例可包括有线网络及无线网络。在一个实例中,传输装置1205包括一个网络适配器(Network Interface Controller,NIC),其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中,传输装置1205为射频(Radio Frequency,RF)模块,其用于通过无线方式与互联网进行通讯。
其中,具体地,存储器1203用于存储应用程序。
处理器1201可以通过传输装置1205调用存储器1203存储的应用程序,以执行下述步骤:从获取到的照片中识别出目标对象的对象特征;根据对象特征对目标对象构建三维对象模型;对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
处理器1201还用于执行下述步骤:使用对象面部特征构建初始三维对象模型,其中,对象特征包括对象面部特征;使用头部参数和服装参数对初始三维对象模型进行对象渲染操作,得到三维对象模型。
处理器1201还用于执行下述步骤:为初始三维对象模型设定背景;使用头部参数和服装参数对位于背景中的初始三维对象模型进行对象渲染操作,得到三维对象模型。
采用本发明实施例,服务器从获取到的照片中识别出目标对象的对象特征;然后根据对象特征对目标对象进行构建,得到目标对象的三维对象模型;在对三维对象模型进行动画渲染操作时,对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像,由于得到的三维动态图像中包括用于反映目标对象的关键动作的关键帧,使得得到的三维动态图像能够还原该对象的实际行为动作,可以解决了相关技术中对三维对象的动作进行采集得到的动态图像不能还原对象的实际动作的技术问题,进而达到通过动态图像来准确还原实际动作的技术效果。
可选地,本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例,本实施例在此不再赘述。
本领域普通技术人员可以理解,图12所示的结构仅为示意,终端可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile InternetDevices,MID)、PAD等终端设备。图12其并不对上述电子装置的结构造成限定。例如,终端还可包括比图12中所示更多或者更少的组件(如网络接口、显示装置等),或者具有与图12所示不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(RandomAccess Memory,RAM)、磁盘或光盘等。
实施例4
本发明的实施例还提供了一种存储介质。可选地,在本实施例中,上述存储介质可以用于执行三维动态图像的生成方法的程序代码。
可选地,在本实施例中,上述存储介质可以位于上述实施例所示的网络中的多个网络设备中的至少一个网络设备上。
可选地,在本实施例中,存储介质被设置为存储用于执行以下步骤的程序代码:
S31,从获取到的照片中识别出目标对象的对象特征;
S32,根据对象特征对目标对象构建三维对象模型;
S33,对三维对象模型进行动画渲染操作,并对动画渲染操作得到的目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:
S41,使用对象面部特征构建初始三维对象模型,其中,对象特征包括对象面部特征;
S42,使用头部参数和服装参数对初始三维对象模型进行对象渲染操作,得到三维对象模型。
可选地,存储介质还被设置为存储用于执行以下步骤的程序代码:
S51,为初始三维对象模型设定背景;
S52,使用头部参数和服装参数对位于背景中的初始三维对象模型进行对象渲染操作,得到三维对象模型。
可选地,本实施例中的具体示例可以参考上述实施例1和实施例2中所描述的示例,本实施例在此不再赘述。
可选地,在本实施例中,上述存储介质可以包括但不限于:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在上述计算机可读取的存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在存储介质中,包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的客户端,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (13)

1.一种三维动态图像的生成方法,其特征在于,包括:
从获取到的照片中识别出目标对象的对象特征;
根据所述对象特征对所述目标对象构建三维对象模型;
对所述三维对象模型进行动画渲染操作,并对所述动画渲染操作得到的所述目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
2.根据权利要求1所述的方法,其特征在于,根据所述对象特征对所述目标对象构建三维对象模型包括:
使用对象面部特征构建初始三维对象模型,其中,所述对象特征包括所述对象面部特征;
使用头部参数和服装参数对所述初始三维对象模型进行对象渲染操作,得到所述三维对象模型。
3.根据权利要求2所述的方法,其特征在于,使用头部参数和服装参数对所述初始三维对象模型进行对象渲染操作,得到所述三维对象模型包括:
为所述初始三维对象模型设定背景;
使用所述头部参数和所述服装参数对位于所述背景中的所述初始三维对象模型进行对象渲染操作,得到所述三维对象模型。
4.根据权利要求1所述的方法,其特征在于,对所述动画渲染操作得到的所述目标对象的动画中的关键帧进行截图操作,得到三维动态图像包括:
对所述动画渲染操作得到的所述目标对象的动画中由预定的关键帧时间配置信息指示的多个关键帧进行截取,得到多个三维静态图像;
将所述多个三维静态图像按时间顺序生成为所述三维动态图像。
5.根据权利要求4所述的方法,其特征在于,将所述多个三维静态图像按时间顺序生成为所述三维动态图像包括:
获取为待生成的所述三维动态图像设定的图像尺寸;
按照所述图像尺寸对所述多个三维静态图像进行尺寸调整;
将经过尺寸调整后的所述多个三维静态图像按时间顺序生成为所述三维动态图像。
6.根据权利要求1至5中任一项所述的方法,其特征在于,在对所述动画渲染操作得到的所述目标对象的动画中的关键帧进行截图操作,得到三维动态图像之后,所述方法包括:
将所述三维动态图像发送给目标应用中的目标帐号。
7.根据权利要求1至5中任一项所述的方法,其特征在于,在从获取到的照片中识别出目标对象的对象特征之前,所述方法包括:
在目标应用的客户端中获取用户上传的照片。
8.根据权利要求1至5中任一项所述的方法,其特征在于,所述目标对象为人物,所述三维对象模型为三维人物模型;或,所述目标对象为动物,所述三维对象模型为三维动物模型。
9.一种三维动态图像的生成装置,其特征在于,包括:
识别单元,用于从获取到的照片中识别出目标对象的对象特征;
构建单元,用于根据所述对象特征对所述目标对象构建三维对象模型;
图像获取单元,用于对所述三维对象模型进行动画渲染操作,并对所述动画渲染操作得到的所述目标对象的动画中的关键帧进行截图操作,得到三维动态图像。
10.根据权利要求9所述的装置,其特征在于,所述构建单元包括:
构建模块,用于使用对象面部特征构建初始三维对象模型,其中,所述对象特征包括所述对象面部特征;
渲染模块,用于使用头部参数和服装参数对所述初始三维对象模型进行对象渲染操作,得到所述三维对象模型。
11.根据权利要求10所述的装置,其特征在于,所述渲染模块还用于:
为所述初始三维对象模型设定背景;
使用所述头部参数和所述服装参数对位于所述背景中的所述初始三维对象模型进行对象渲染操作,得到所述三维对象模型。
12.根据权利要求9所述的装置,其特征在于,所述图像获取单元包括:
图像截取模块,用于对所述动画渲染操作得到的所述目标对象的动画中由预定的关键帧时间配置信息指示的多个关键帧进行截取,得到多个三维静态图像;
图像生成模块,用于将所述多个三维静态图像按时间顺序生成为所述三维动态图像。
13.根据权利要求12所述的装置,其特征在于,所述图像生成模块还用于:
获取为待生成的所述三维动态图像设定的图像尺寸;
按照所述图像尺寸对所述多个三维静态图像进行尺寸调整;
将经过尺寸调整后的所述多个三维静态图像按时间顺序生成为所述三维动态图像。
CN201710330523.6A 2017-05-11 2017-05-11 三维动态图像的生成方法和装置 Active CN109242940B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710330523.6A CN109242940B (zh) 2017-05-11 2017-05-11 三维动态图像的生成方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710330523.6A CN109242940B (zh) 2017-05-11 2017-05-11 三维动态图像的生成方法和装置

Publications (2)

Publication Number Publication Date
CN109242940A true CN109242940A (zh) 2019-01-18
CN109242940B CN109242940B (zh) 2022-12-13

Family

ID=65082775

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710330523.6A Active CN109242940B (zh) 2017-05-11 2017-05-11 三维动态图像的生成方法和装置

Country Status (1)

Country Link
CN (1) CN109242940B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111405361A (zh) * 2020-03-27 2020-07-10 咪咕文化科技有限公司 一种视频获取方法、电子设备及计算机可读存储介质
CN111640204A (zh) * 2020-05-14 2020-09-08 广东小天才科技有限公司 三维对象模型的构建方法、构建装置、电子设备及介质
CN112330777A (zh) * 2020-11-03 2021-02-05 上海镱可思多媒体科技有限公司 基于三维动画的电机仿真运行数据生成方法、系统及终端
CN113450434A (zh) * 2020-03-27 2021-09-28 北京沃东天骏信息技术有限公司 一种生成动态图像的方法和装置
CN113658314A (zh) * 2020-05-12 2021-11-16 福建天泉教育科技有限公司 一种3d图片裁剪方法及终端
CN113658304A (zh) * 2021-07-19 2021-11-16 广州虎牙科技有限公司 目标对象的动画方法以及相关装置、设备
CN114445528A (zh) * 2021-12-15 2022-05-06 北京百度网讯科技有限公司 虚拟形象生成方法、装置、电子设备及存储介质
CN114445497A (zh) * 2022-03-01 2022-05-06 上海涛影医疗科技有限公司 图像定位及动态图像生成方法、装置、系统及存储介质
CN115661367A (zh) * 2022-12-12 2023-01-31 盾钰(上海)互联网科技有限公司 基于照片采集的动态混合变形的建模方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1845173A (zh) * 2006-04-11 2006-10-11 天津市秋宇科工贸有限公司 三维彩色动态图像的生成及显示方法
US20100265250A1 (en) * 2007-12-21 2010-10-21 David Koenig Method and system for fast rendering of a three dimensional scene
CN101968892A (zh) * 2009-07-28 2011-02-09 上海冰动信息技术有限公司 根据一张人脸照片自动调整三维人脸模型的方法
WO2015027953A1 (en) * 2013-09-02 2015-03-05 Tencent Technology (Shenzhen) Company Limited Method, apparatus and terminal device for dynamic image processing
CN105913477A (zh) * 2016-04-18 2016-08-31 北京小鸟看看科技有限公司 一种实现虚拟现实系统立体启动动画的方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1845173A (zh) * 2006-04-11 2006-10-11 天津市秋宇科工贸有限公司 三维彩色动态图像的生成及显示方法
US20100265250A1 (en) * 2007-12-21 2010-10-21 David Koenig Method and system for fast rendering of a three dimensional scene
CN101968892A (zh) * 2009-07-28 2011-02-09 上海冰动信息技术有限公司 根据一张人脸照片自动调整三维人脸模型的方法
WO2015027953A1 (en) * 2013-09-02 2015-03-05 Tencent Technology (Shenzhen) Company Limited Method, apparatus and terminal device for dynamic image processing
CN105913477A (zh) * 2016-04-18 2016-08-31 北京小鸟看看科技有限公司 一种实现虚拟现实系统立体启动动画的方法和装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113450434A (zh) * 2020-03-27 2021-09-28 北京沃东天骏信息技术有限公司 一种生成动态图像的方法和装置
CN111405361A (zh) * 2020-03-27 2020-07-10 咪咕文化科技有限公司 一种视频获取方法、电子设备及计算机可读存储介质
CN113450434B (zh) * 2020-03-27 2024-07-16 北京沃东天骏信息技术有限公司 一种生成动态图像的方法和装置
CN111405361B (zh) * 2020-03-27 2022-06-14 咪咕文化科技有限公司 一种视频获取方法、电子设备及计算机可读存储介质
CN113658314B (zh) * 2020-05-12 2023-09-15 福建天泉教育科技有限公司 一种3d图片裁剪方法及终端
CN113658314A (zh) * 2020-05-12 2021-11-16 福建天泉教育科技有限公司 一种3d图片裁剪方法及终端
CN111640204A (zh) * 2020-05-14 2020-09-08 广东小天才科技有限公司 三维对象模型的构建方法、构建装置、电子设备及介质
CN111640204B (zh) * 2020-05-14 2024-03-19 广东小天才科技有限公司 三维对象模型的构建方法、构建装置、电子设备及介质
CN112330777A (zh) * 2020-11-03 2021-02-05 上海镱可思多媒体科技有限公司 基于三维动画的电机仿真运行数据生成方法、系统及终端
CN112330777B (zh) * 2020-11-03 2022-11-18 上海镱可思多媒体科技有限公司 基于三维动画的电机仿真运行数据生成方法、系统及终端
CN113658304A (zh) * 2021-07-19 2021-11-16 广州虎牙科技有限公司 目标对象的动画方法以及相关装置、设备
CN114445528A (zh) * 2021-12-15 2022-05-06 北京百度网讯科技有限公司 虚拟形象生成方法、装置、电子设备及存储介质
CN114445528B (zh) * 2021-12-15 2022-11-11 北京百度网讯科技有限公司 虚拟形象生成方法、装置、电子设备及存储介质
CN114445497A (zh) * 2022-03-01 2022-05-06 上海涛影医疗科技有限公司 图像定位及动态图像生成方法、装置、系统及存储介质
CN115661367A (zh) * 2022-12-12 2023-01-31 盾钰(上海)互联网科技有限公司 基于照片采集的动态混合变形的建模方法及系统

Also Published As

Publication number Publication date
CN109242940B (zh) 2022-12-13

Similar Documents

Publication Publication Date Title
CN109242940A (zh) 三维动态图像的生成方法和装置
US12026817B2 (en) Entertaining mobile application for animating a single image of a human body and applying effects
JP6152125B2 (ja) プログラム、情報処理装置、情報処理システム及びアバター画像の生成方法
CN104170318B (zh) 使用交互化身的通信
CN106170083A (zh) 用于头戴式显示器设备的图像处理
CN108416832B (zh) 媒体信息的显示方法、装置和存储介质
CN105915766B (zh) 基于虚拟现实的控制方法和装置
JP2012519333A (ja) 画像変換システムおよび方法
CN109978975A (zh) 一种动作的迁移方法及装置、计算机设备
CN108874114A (zh) 实现虚拟对象情绪表达的方法、装置、计算机设备及存储介质
CN108648061A (zh) 图像生成方法和装置
JP6563580B1 (ja) コミュニケーションシステム及びプログラム
KR20160139633A (ko) 증강현실을 이용한 체험형 콘텐츠 제공 시스템 및 방법
CN111640200A (zh) 一种ar场景特效生成的方法及装置
CN114241132B (zh) 场景内容展示控制方法、装置、计算机设备及存储介质
CN104837066B (zh) 物品图像处理方法、装置和系统
CN116943191A (zh) 基于故事场景的人机互动方法、装置、设备及介质
CN110706320A (zh) 一种虚拟试衣方法、装置及系统
JP2021044797A (ja) Ar撮影記録双方向システム
CN112685581B (zh) 投影内容的推荐方法、装置、存储介质及电子设备
CN113873175B (zh) 视频播放方法、装置和存储介质及电子设备
JP2001216531A (ja) 3次元仮想空間参加者表示方法及び3次元仮想空間表示装置
KR20240020948A (ko) 디지털휴먼 컨텐츠 생성 시스템 및 이를 이용한 디지털휴먼 컨텐츠 생성 방법
TWI592894B (zh) 傳送排程人形玩偶圖像和信息的傳送端裝置、伺服器、系統和方法
CN114594859A (zh) 虚拟形象展示系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant