CN111696179A - 卡通三维模型和虚拟仿真人的生成方法、装置和存储介质 - Google Patents
卡通三维模型和虚拟仿真人的生成方法、装置和存储介质 Download PDFInfo
- Publication number
- CN111696179A CN111696179A CN202010371688.XA CN202010371688A CN111696179A CN 111696179 A CN111696179 A CN 111696179A CN 202010371688 A CN202010371688 A CN 202010371688A CN 111696179 A CN111696179 A CN 111696179A
- Authority
- CN
- China
- Prior art keywords
- cartoon
- dimensional model
- image
- target terminal
- real image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000013473 artificial intelligence Methods 0.000 claims description 32
- 238000012549 training Methods 0.000 claims description 31
- 238000002372 labelling Methods 0.000 claims description 11
- 230000002452 interceptive effect Effects 0.000 claims description 9
- 230000008569 process Effects 0.000 claims description 9
- 230000004044 response Effects 0.000 claims description 5
- 230000003993 interaction Effects 0.000 claims description 2
- 238000012545 processing Methods 0.000 abstract description 14
- 230000000694 effects Effects 0.000 abstract description 13
- 230000036651 mood Effects 0.000 abstract description 9
- 238000004590 computer program Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 206010012374 Depressed mood Diseases 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000007477 logistic regression Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/005—General purpose rendering architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/13—Edge detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30204—Marker
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Computer Graphics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种卡通三维模型和虚拟仿真人的生成方法、装置和存储介质。所述卡通三维模型的生成方法包括获取目标终端发出的生成请求和标注信息,从所述目标终端相应的数据库中获取卡通形象,将所述卡通形象和标注信息输入到经过训练的人工智能模型中,以及获取所述人工智能模型输出的卡通三维模型等步骤。本发明能够较好地满足用户的个性化需求,避免对大量特征点的几何信息进行处理导致的计算资源消耗和时间消耗,节省使用成本,提高处理速度;所输出的卡通三维模型包含了用户的心情等个性化信息,并以卡通的形式呈现,能够实现浪漫、温馨、有趣等显示效果。本发明广泛应用于图像处理技术领域。
Description
技术领域
本发明涉及图像处理技术领域,尤其是一种卡通三维模型和虚拟仿真人的生成方法、装置和存储介质。
背景技术
在虚拟现实和增强现实等领域,需要根据用户的形象,生成虚拟仿真人并显示出来。一些现有技术通过对用户的形象进行扫描,获取特征点的几何信息,构建相应的三维模型,从而实现虚拟仿真人的生成,这一过程需要消耗较多的硬件资源和软件资源。另一方面,现有技术的效果是生成尽可能贴近真实人形象的虚拟仿真人,这虽然能够达到逼真的显示效果,但在一些需要显示浪漫、温馨、有趣等显示效果的场合,现有技术不能满足要求。
发明内容
针对上述至少一个技术问题,本发明的目的在于提供一种卡通三维模型和虚拟仿真人的生成方法、装置和存储介质。
一方面,本发明实施例包括一种卡通三维模型的生成方法,包括:
获取目标终端发出的生成请求和标注信息;
从所述目标终端相应的数据库中获取卡通形象;所述数据库中的卡通形象由目标终端上传;
将所述卡通形象和标注信息输入到经过训练的人工智能模型中;
获取所述人工智能模型输出的卡通三维模型。
进一步地,所述卡通三维模型生成方法还包括以下步骤:
接收所述目标终端上传的现实图像;
对所述现实图像中被标记的区域进行边缘分析,提取得到卡通形象;
将所述卡通形象存储到与该目标终端相应的数据库中。
进一步地,所述卡通三维模型生成方法还包括以下步骤:
向所述目标终端发送至少一个三维模型模板;
获取所述目标终端上传的现实图像、标注信息和所选定的三维模型模板;
对所述现实图像中被标记的区域进行边缘分析,提取得到卡通形象;
确定所选定三维模型模板的调整参数,所述调整参数用于指示对相应的三维模型模板进行调整;
建立标签,所述标签与所选定的三维模型模板和调整参数有对应关系;
将所述卡通形象、标注信息和标签作为训练数据,存储到与该目标终端相应的数据库中。
进一步地,所述人工智能模型的训练过程包括:
从所有目标终端的数据库中获取所述训练数据;
将所述训练数据中的卡通形象和标注信息用作所述人工智能模型的输入,将所述训练数据中的标签用作所述人工智能模型的预期输出,对所述人工智能模型的参数进行调整;
当所述人工智能模型的参数收敛时结束训练过程。
进一步地,所述卡通三维模型生成方法还包括以下步骤:
从多个目标终端相应的数据库中获取卡通形象,确定所述卡通形象的风格特征;
当存在至少两个目标终端的风格特征之间的相关度超过预设的阈值,将这些卡通形象在这些目标终端的数据库之间共享。
另一方面,本发明实施例还包括一种卡通三维模型的生成方法,包括第一阶段和/或第二阶段:
在所述第一阶段内,获取现实图像,所述现实图像包含卡通形象,标记出所述卡通形象在所述现实图像中的区域,上传所述现实图像;
在所述第二阶段内,发出生成请求和标注信息,当检测到针对所述生成请求反馈的响应,接收卡通三维模型。
进一步地,所述卡通三维模型生成方法还包括第三阶段;在所述第三阶段内,获取现实图像,所述现实图像包含卡通形象,标记出所述卡通形象在所述现实图像中的区域,编辑得到标注信息,所述标注信息用于表示所述卡通形象的类型,接收至少一个三维模型模板,从这些三维模型模板中选定出一个,上传所述现实图像、标注信息和所选定的三维模型模板。
另一方面,本发明实施例还包括一种虚拟仿真人的生成方法,包括以下步骤:
检测交互操作;
执行实施例中所述的卡通三维模型的生成方法,以响应所述交互操作;
将所生成的卡通三维模型转换成虚拟仿真人。
另一方面,本发明实施例还包括一种存储介质,其中存储有处理器可执行的指令,所述处理器可执行的指令在由处理器执行时用于执行实施例所述的卡通三维模型的生成方法和虚拟仿真人的生成方法。
本发明的有益效果是:数据库中所存储的卡通形象是由用户筛选和上传的,因此卡通形象的数量可以得到较好的保证,由于卡通形象经过用户的选择,将这些卡通形象用于对人工智能模型进行训练,或者供人工智能模型进行处理从而输出卡通三维模型,能够较好地满足用户的个性化需求;由于使用经过训练的人工智能模型来输出卡通三维模型,避免对大量特征点的几何信息进行处理导致的计算资源消耗和时间消耗,节省使用成本,提高处理速度;所输出的卡通三维模型一方面包含了用户的心情等个性化信息,另一方面以卡通的形式呈现,能够实现浪漫、温馨、有趣等显示效果。
附图说明
图1为用于执行实施例的硬件系统架构示意图;
图2为实施例1中卡通三维模型的生成方法的流程示意图;
图3为实施例3中虚拟仿真人的生成方法的流程示意图。
具体实施方式
在以下所提到的实施例中,所涉及的硬件系统架构如图1所示,主要由服务器和至少一个终端设备组成,终端设备可以是手机和平板电脑等移动端,它们分别被不同的用户持有。服务器和任一终端设备之间可以建立连接、进行通信和断开连接,并且不同的终端设备之间是相互独立的,即服务器与任一终端设备之间的操作行为不影响其他终端设备。
服务器可以通过注册账号等方式对各个终端设备进行管理。服务器中设置总数据库,向注册成功的终端设备分配一定的存储空间,即实施例中提到的数据库,使得每个终端设备都有他对应的数据库。
实施例1
本实施例中的各步骤是由服务器执行的。
服务器保持对各终端设备随时响应的状态,执行以下步骤:
A1.接收目标终端上传的现实图像;这里所述的目标终端是指特定的终端,可由服务器选定某一个或某几个终端作为目标终端,也可以由终端向服务器申请成为目标终端,从而由目标终端向服务器上传现实图像;这里所述的现实图像可以是预先存储在目标终端上的图片,也可以是目标终端的持有者随手拍摄的图片,现实图像中包括卡通形象;目标终端也可以自行或者在服务器的指示下,将卡通形象所在区域标记出来,使得服务器更容易锁定卡通形象并进行分析;
A2.服务器执行图像提取算法,对所述现实图像中被标记的区域进行边缘分析,提取得到卡通形象,而对于现实图像的其余部分则进行放弃,仅保留卡通形象部分;
A3.通过目标终端IP地址或者编号等身份信息,在总数据库中查找到与这个目标终端相应的数据库,将所述卡通形象存储到与该数据库中。
通过执行上述步骤A1-A3,服务器可以随时地从终端设备获取卡通形象,并将卡通形象补充到相应的数据库中,供读取出来由人工智能模型生成卡通三维模型,这使得数据库具有广泛的数据来源,并且由于数据库中的卡通形象是由终端设备即用户自己拍摄上传的,相当于由终端设备进行了个性化的筛选,因此根据这些卡通形象生成的卡通三维模型将更好地贴近终端设备用户的个性。
服务器保持对各终端设备随时响应的状态,执行以下步骤:
B1.向所述目标终端发送至少一个三维模型模板;这里所述的三维模型模板是由服务器预先建好并存储在总数据库中的三维模型,执行本步骤时,服务器可以将三维模型模板的原始数据发送到目标终端,也可以将三维模型模板的缩略图或者关键信息发送到目标终端,供用户了解;目标终端接收到三维模型模板之后,将其显示出来供用户观看,并指示用户从多个三维模型模板中选定出一个,用户操作目标终端进行选定,目标终端记录下用户所选定的三维模型模板对应的编号并进行上传;
B2.获取所述目标终端上传的现实图像、标注信息和所选定的三维模型模板;执行本步骤之前,服务器等待目标终端执行一系列操作,以准备好需要上传的现实图像、标注信息和所选定的三维模型模板的编号;这里所述的现实图像可以是预先存储在目标终端上的图片,也可以是目标终端的持有者随手拍摄的图片,现实图像中包括卡通形象;目标终端也可以自行或者在服务器的指示下,将卡通形象所在区域标记出来,使得服务器更容易锁定卡通形象并进行分析;这里所述的标注信息是用户操作目标终端对卡通形象的备注,其可以使用约定的标准格式来表示,例如使用数字“1”表示该卡通形象反映出用户的愉悦心情,使用数字“2”表示该卡通形象反映出用户的郁闷心情,使用数字“3”表示该卡通形象反映出用户的愤怒心情;目标终端在上传三维模型模板时,既可以上传三维模型模板的原始数据、缩略图或者关键信息,也可以上传三维模型模板的编号;
B3.服务器执行图像提取算法,对所述现实图像中被标记的区域进行边缘分析,提取得到卡通形象,而对于现实图像的其余部分则进行放弃,仅保留卡通形象部分;
B4.确定所选定三维模型模板的调整参数,所述调整参数用于指示对相应的三维模型模板进行调整;由于三维模型模板是预设设定好的,具有一定的离散性,向目标终端设备提供的三维模型模板可能与用户所喜爱的三维模型之间存在一定的偏差,这些偏差可以通过调整参数来修正,因此可以由用户自行设定调整参数并上传到服务器,或者由服务器来匹配生成调整参数;
B5.建立标签,所述标签与所选定的三维模型模板和调整参数有对应关系;本实施例中,所述标签是一对有序数对(x,y),其中x表示所选定的三维模型模板的编号,y表示调整参数或其编号;
B6.将所述卡通形象、标注信息和标签作为训练数据,存储到与该目标终端相应的数据库中。
通过执行上述步骤B1-B6,服务器可以随时地从终端设备获取卡通形象、标注信息和标签,从而形成训练数据,使得数据库中有足够的训练数据用于对人工智能模型进行训练,并且由于卡通形象、标注信息以及标签所对应的三维模型模板是由终端设备即用户自己拍摄、编辑、选择和上传的,相当于由终端设备进行了个性化的筛选,因此这些训练数据训练得到的人工智能模型的处理能力将更好地贴近终端设备用户的个性。
服务器还可以执行以下步骤:
C1.从多个目标终端相应的数据库中获取卡通形象,确定所述卡通形象的风格特征;例如,服务器可以获取对象A对应数据库中存储的卡通形象、对象B对应数据库中存储的卡通形象以及对象C对应数据库中存储的卡通形象,分别将这些卡通形象输入到VGG-19-FT等神经网络中提取风格特征并量化表示;如果从每个对象对应数据库中提取了多个卡通形象,则可以对这些卡通形象的风格特征求平均值,作为这个对象对应卡通形象的风格特征;
C2.当存在至少两个目标终端的风格特征之间的相关度超过预设的阈值,将这些卡通形象在这些目标终端的数据库之间共享;分别确定对象A的风格特征与对象B的风格特征之间的相关度、对象A的风格特征与对象C的风格特征之间的相关度、对象B的风格特征与对象C的风格特征之间的相关度;如果对象A的风格特征与对象B的风格特征之间的相关度大于预设的阈值,那么表明对象A与对象B个人偏好以及个性风格具有较大的相似性,这样,用于对人工智能模型进行训练的训练数据,以及用于供人工智能模型进行处理从而输出卡通三维模型的卡通形象可以是相同的,因此,将对象A的卡通形象复制到对象B的数据库,将对象B的卡通形象复制到对象A的数据库,从而实现卡通形象的共享。通过共享卡通形象,可以扩展数据库中卡通形象的数量和多样性,同时保持所生成的卡通三维模型所反映出的个人偏好以及个性风格稳定。
服务器中运行人工智能模型,所述人工智能模型可以是卷积神经网络、长短期记忆人工神经网络、整合移动平均自回归模型、支持向量机、逻辑回归模型和Xgboost模型等。在服务器维护时间或者服务器空闲时,对人工智能模型执行以下训练过程:
P1.从所有目标终端的数据库中获取所述训练数据;本步骤中,所获取的训练数据的来源是所有目标终端的数据库,即总数据库;由于不同目标终端的训练数据一般具有不同的风格,这可以突破单个目标终端的限制,对人工智能模型进行多样化的训练;
P2.将所述训练数据中的卡通形象和标注信息用作所述人工智能模型的输入,将所述训练数据中的标签用作所述人工智能模型的预期输出,对所述人工智能模型的参数进行调整,使得人工智能模型的输出结果与预期输出之间的误差尽量小;
P3.当所述人工智能模型的参数收敛,则表明人工智能模型的输出结果与预期输出之间的误差已经达到了局部最小值,则对人工智能模型的训练过程完成。
在完成对人工智能模型的训练之后,人工智能模型具有了对卡通形象和标注信息进行接收和处理,从而输出相应的三维模型模板的编号以及调整参数(或其编号)的能力。根据三维模型模板的编号,可以从数据库中读取出三维模型模板;根据调整参数,可以对读取出的三维模型模板进行调整,从而得到卡通三维模型作为最终结果,这等价于由人工智能模板直接输出了卡通三维模型。
目标终端向服务器发出生成请求。参照图2,服务器执行以下步骤:
S1.获取目标终端发出的生成请求和标注信息;用户操作目标终端,根据自己的心情编辑标注信息,例如使用数字“1”表示自己的愉悦心情,使用数字“2”表示自己的郁闷心情,使用数字“3”表示自己的愤怒心情;目标终端可以分别发送生成请求和标注信息,也可以将标注信息封装在生成请求中进行发送;
S2.从所述目标终端相应的数据库中获取卡通形象;服务器通过目标终端IP地址或者编号等身份信息,在总数据库中查找到与这个目标终端相应的数据库,然后读取出卡通形象;
S3.将所述卡通形象和标注信息输入到经过训练的人工智能模型中;
S4.获取所述人工智能模型输出的卡通三维模型。
本实施例中,数据库中所存储的卡通形象是由用户筛选和上传的,因此卡通形象的数量可以得到较好的保证,由于卡通形象经过用户的选择,将这些卡通形象用于对人工智能模型进行训练,或者供人工智能模型进行处理从而输出卡通三维模型,能够较好地满足用户的个性化需求;由于使用经过训练的人工智能模型来输出卡通三维模型,避免对大量特征点的几何信息进行处理导致的计算资源消耗和时间消耗,节省使用成本,提高处理速度;所输出的卡通三维模型一方面包含了用户的心情等个性化信息,另一方面以卡通的形式呈现,能够实现浪漫、温馨、有趣等显示效果。
实施例2
由实施例1的介绍可知,服务器执行一些步骤时需要目标终端执行相应的步骤以进行配合。
本实施例中,目标终端被设定为三个工作阶段,目标终端可以在一个时间段内仅执行其中一个阶段或者其中两个阶段,也可以执行全部三个阶段。
在第一阶段内,目标终端执行以下步骤:
D1.获取现实图像,所述现实图像包含卡通形象;具体地,可以通过拍摄或者绘图等方式得到现实图像;
D2.由用户标记出所述卡通形象在所述现实图像中的区域,从而方便服务器对卡通形象进行识别和提取;
D3.向服务器上传所述现实图像。
本实施例中的步骤D1-D3与实施例1中所述的步骤A1-A3对应,即目标终端执行步骤D1-D3,服务器执行步骤A1-A2,实现目标终端与服务器之间的通信。
在第二阶段内,目标终端执行以下步骤:
E1.向服务器发出生成请求和标注信息;
E2.当检测到针对所述生成请求反馈的响应,接收服务器发送的卡通三维模型。
本实施例中的步骤E1-E2与实施例1中所述的步骤S1-S4对应,即目标终端执行步骤E1-E2,服务器执行步骤S1-S4,实现目标终端与服务器之间的通信。
在第三阶段内,目标终端执行以下步骤:
F1.获取现实图像,所述现实图像包含卡通形象;
F2.标记出所述卡通形象在所述现实图像中的区域;
F3.编辑得到标注信息,所述标注信息用于表示所述卡通形象的类型;
F4.接收至少一个三维模型模板;
F5.从这些三维模型模板中选定出一个;
F6.上传所述现实图像、标注信息和所选定的三维模型模板。
本实施例中的步骤F1-F6与实施例1中所述的步骤B1-B6对应,即目标终端执行步骤F1-F6,服务器执行步骤B1-B6,实现目标终端与服务器之间的通信。
本实施例中,目标终端所执行的步骤使得服务器可以执行实施例1中所述的卡通三维模型生成方法,从而达到相应的技术效果,因此,本实施例中目标终端所执行的卡通三维模型生成方法也能够达到与实施例1中所述的技术效果。
实施例3
本实施例中所述的虚拟仿真人的生成方法,是基于实施例1中的卡通三维模型生成方法而执行的。参照图3,虚拟仿真人的生成方法包括以下步骤:
Q1.检测交互操作;本实施例中,一个或多个执行者可以通过键盘、触摸屏等交互操作执行交互操作;一个或多个执行者也可以通过面部表情或者手势等动作执行交互操作,通过拍摄画面,从画面中识别出交互操作;
Q2.执行实施例1中的卡通三维模型的生成方法,即步骤S1-S4等,以响应所述交互操作;
Q3.执行步骤S1-S4将获得卡通三维模型,根据所生成的卡通三维模型,进一步进行上色、渲染、添加背景或者拟人化转换等处理,从而得到虚拟仿真人。
通过执行步骤Q1-Q3,可以利用实施例1中的卡通三维模型的生成方法所得的结果,对用户做出的交互操作进行响应,将卡通三维模型进一步转换成虚拟仿真人。由于实施例1中所生成的卡通三维模型包含了用户的心情等个性化信息,另一方面以卡通的形式呈现,能够实现浪漫、温馨、有趣等显示效果,因此本实施例中所生成的虚拟仿真人也具有相同的技术效果。
实施例4
本实施例中,一种计算机装置,包括存储器和处理器,所述存储器用于存储至少一个程序,所述处理器用于加载所述至少一个程序以执行实施例1或实施例2中所述的虚拟仿真人的生成方法。当执行实施例1中所述的虚拟仿真人的生成方法时,计算机装置可以作为服务器,当执行实施例2中所述的虚拟仿真人的生成方法时,计算机装置可以作为终端,实现与实施例1和实施例2中所述的相同的技术效果。
本实施例中,一种存储介质,其中存储有处理器可执行的指令,所述处理器可执行的指令在由处理器执行时用于执行实施例中所述的虚拟仿真人的生成方法,实现与实施例中所述的相同的技术效果。
需要说明的是,如无特殊说明,当某一特征被称为“固定”、“连接”在另一个特征,它可以直接固定、连接在另一个特征上,也可以间接地固定、连接在另一个特征上。此外,本公开中所使用的上、下、左、右等描述仅仅是相对于附图中本公开各组成部分的相互位置关系来说的。在本公开中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。此外,除非另有定义,本实施例所使用的所有的技术和科学术语与本技术领域的技术人员通常理解的含义相同。本实施例说明书中所使用的术语只是为了描述具体的实施例,而不是为了限制本发明。本实施例所使用的术语“和/或”包括一个或多个相关的所列项目的任意的组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种元件,但这些元件不应限于这些术语。这些术语仅用来将同一类型的元件彼此区分开。例如,在不脱离本公开范围的情况下,第一元件也可以被称为第二元件,类似地,第二元件也可以被称为第一元件。本实施例所提供的任何以及所有实例或示例性语言(“例如”、“如”等)的使用仅意图更好地说明本发明的实施例,并且除非另外要求,否则不会对本发明的范围施加限制。
应当认识到,本发明的实施例可以由计算机硬件、硬件和软件的组合、或者通过存储在非暂时性计算机可读存储器中的计算机指令来实现或实施。所述方法可以使用标准编程技术-包括配置有计算机程序的非暂时性计算机可读存储介质在计算机程序中实现,其中如此配置的存储介质使得计算机以特定和预定义的方式操作——根据在具体实施例中描述的方法和附图。每个程序可以以高级过程或面向目标终端的编程语言来实现以与计算机系统通信。然而,若需要,该程序可以以汇编或机器语言实现。在任何情况下,该语言可以是编译或解释的语言。此外,为此目的该程序能够在编程的专用集成电路上运行。
此外,可按任何合适的顺序来执行本实施例描述的过程的操作,除非本实施例另外指示或以其他方式明显地与上下文矛盾。本实施例描述的过程(或变型和/或其组合)可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可作为共同地在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用)、由硬件或其组合来实现。所述计算机程序包括可由一个或多个处理器执行的多个指令。
进一步,所述方法可以在可操作地连接至合适的任何类型的计算平台中实现,包括但不限于个人电脑、迷你计算机、主框架、工作站、网络或分布式计算环境、单独的或集成的计算机平台、或者与带电粒子工具或其它成像装置通信等等。本发明的各方面可以以存储在非暂时性存储介质或设备上的机器可读代码来实现,无论是可移动的还是集成至计算平台,如硬盘、光学读取和/或写入存储介质、RAM、ROM等,使得其可由可编程计算机读取,当存储介质或设备由计算机读取时可用于配置和操作计算机以执行在此所描述的过程。此外,机器可读代码,或其部分可以通过有线或无线网络传输。当此类媒体包括结合微处理器或其他数据处理器实现上文所述步骤的指令或程序时,本实施例所述的发明包括这些和其他不同类型的非暂时性计算机可读存储介质。当根据本发明所述的方法和技术编程时,本发明还包括计算机本身。
计算机程序能够应用于输入数据以执行本实施例所述的功能,从而转换输入数据以生成存储至非易失性存储器的输出数据。输出信息还可以应用于一个或多个输出设备如显示器。在本发明优选的实施例中,转换的数据表示物理和有形的目标终端,包括显示器上产生的物理和有形目标终端的特定视觉描绘。
以上所述,只是本发明的较佳实施例而已,本发明并不局限于上述实施方式,只要其以相同的手段达到本发明的技术效果,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。在本发明的保护范围内其技术方案和/或实施方式可以有各种不同的修改和变化。
Claims (10)
1.一种卡通三维模型的生成方法,其特征在于,包括以下步骤:
获取目标终端发出的生成请求和标注信息;
从所述目标终端相应的数据库中获取卡通形象;所述数据库中的卡通形象由目标终端上传;
将所述卡通形象和标注信息输入到经过训练的人工智能模型中;
获取所述人工智能模型输出的卡通三维模型。
2.根据权利要求1所述的方法,其特征在于,还包括以下步骤:
接收所述目标终端上传的现实图像;
对所述现实图像中被标记的区域进行边缘分析,提取得到卡通形象;
将所述卡通形象存储到与该目标终端相应的数据库中。
3.根据权利要求1所述的方法,其特征在于,还包括以下步骤:
向所述目标终端发送至少一个三维模型模板;
获取所述目标终端上传的现实图像、标注信息和所选定的三维模型模板;
对所述现实图像中被标记的区域进行边缘分析,提取得到卡通形象;
确定所选定三维模型模板的调整参数,所述调整参数用于指示对相应的三维模型模板进行调整;
建立标签,所述标签与所选定的三维模型模板和调整参数有对应关系;
将所述卡通形象、标注信息和标签作为训练数据,存储到与该目标终端相应的数据库中。
4.根据权利要求3所述的方法,其特征在于,所述人工智能模型的训练过程包括:
从所有目标终端的数据库中获取所述训练数据;
将所述训练数据中的卡通形象和标注信息用作所述人工智能模型的输入,将所述训练数据中的标签用作所述人工智能模型的预期输出,对所述人工智能模型的参数进行调整;
当所述人工智能模型的参数收敛时结束训练过程。
5.根据权利要求1-4任一项所述的方法,其特征在于,还包括以下步骤:
从多个目标终端相应的数据库中获取卡通形象,确定所述卡通形象的风格特征;
当存在至少两个目标终端的风格特征之间的相关度超过预设的阈值,将这些卡通形象在这些目标终端的数据库之间共享。
6.一种卡通三维模型的生成方法,其特征在于,包括第一阶段和/或第二阶段:
在所述第一阶段内,获取现实图像,所述现实图像包含卡通形象,标记出所述卡通形象在所述现实图像中的区域,上传所述现实图像;
在所述第二阶段内,发出生成请求和标注信息,当检测到针对所述生成请求反馈的响应,接收卡通三维模型。
7.根据权利要求6所述的方法,其特征在于,还包括第三阶段;在所述第三阶段内,获取现实图像,所述现实图像包含卡通形象,标记出所述卡通形象在所述现实图像中的区域,编辑得到标注信息,所述标注信息用于表示所述卡通形象的类型,接收至少一个三维模型模板,从这些三维模型模板中选定出一个,上传所述现实图像、标注信息和所选定的三维模型模板。
8.一种虚拟仿真人的生成方法,其特征在于,包括以下步骤:
检测交互操作;
执行权利要求1-5任一项所述的卡通三维模型的生成方法,以响应所述交互操作;
将所生成的卡通三维模型转换成虚拟仿真人。
9.一种计算机装置,用作服务器或终端,其特征在于,包括存储器和处理器,所述存储器用于存储至少一个程序,所述处理器用于加载所述至少一个程序以执行权利要求1-8任一项所述方法。
10.一种存储介质,其中存储有处理器可执行的指令,其特征在于,所述处理器可执行的指令在由处理器执行时用于执行如权利要求1-8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010371688.XA CN111696179A (zh) | 2020-05-06 | 2020-05-06 | 卡通三维模型和虚拟仿真人的生成方法、装置和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010371688.XA CN111696179A (zh) | 2020-05-06 | 2020-05-06 | 卡通三维模型和虚拟仿真人的生成方法、装置和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111696179A true CN111696179A (zh) | 2020-09-22 |
Family
ID=72476954
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010371688.XA Pending CN111696179A (zh) | 2020-05-06 | 2020-05-06 | 卡通三维模型和虚拟仿真人的生成方法、装置和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111696179A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114549284A (zh) * | 2022-01-14 | 2022-05-27 | 北京有竹居网络技术有限公司 | 图像信息处理方法、装置和电子设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108510437A (zh) * | 2018-04-04 | 2018-09-07 | 科大讯飞股份有限公司 | 一种虚拟形象生成方法、装置、设备以及可读存储介质 |
US20180268595A1 (en) * | 2017-03-20 | 2018-09-20 | Google Llc | Generating cartoon images from photos |
CN109308727A (zh) * | 2018-09-07 | 2019-02-05 | 腾讯科技(深圳)有限公司 | 虚拟形象模型生成方法、装置及存储介质 |
CN109427083A (zh) * | 2017-08-17 | 2019-03-05 | 腾讯科技(深圳)有限公司 | 三维虚拟形象的显示方法、装置、终端及存储介质 |
CN110245638A (zh) * | 2019-06-20 | 2019-09-17 | 北京百度网讯科技有限公司 | 视频生成方法和装置 |
CN110956691A (zh) * | 2019-11-21 | 2020-04-03 | Oppo广东移动通信有限公司 | 一种三维人脸重建方法、装置、设备及存储介质 |
-
2020
- 2020-05-06 CN CN202010371688.XA patent/CN111696179A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20180268595A1 (en) * | 2017-03-20 | 2018-09-20 | Google Llc | Generating cartoon images from photos |
CN109427083A (zh) * | 2017-08-17 | 2019-03-05 | 腾讯科技(深圳)有限公司 | 三维虚拟形象的显示方法、装置、终端及存储介质 |
CN108510437A (zh) * | 2018-04-04 | 2018-09-07 | 科大讯飞股份有限公司 | 一种虚拟形象生成方法、装置、设备以及可读存储介质 |
CN109308727A (zh) * | 2018-09-07 | 2019-02-05 | 腾讯科技(深圳)有限公司 | 虚拟形象模型生成方法、装置及存储介质 |
CN110245638A (zh) * | 2019-06-20 | 2019-09-17 | 北京百度网讯科技有限公司 | 视频生成方法和装置 |
CN110956691A (zh) * | 2019-11-21 | 2020-04-03 | Oppo广东移动通信有限公司 | 一种三维人脸重建方法、装置、设备及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114549284A (zh) * | 2022-01-14 | 2022-05-27 | 北京有竹居网络技术有限公司 | 图像信息处理方法、装置和电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112598785B (zh) | 虚拟形象的三维模型生成方法、装置、设备及存储介质 | |
US10789453B2 (en) | Face reenactment | |
US11062494B2 (en) | Electronic messaging utilizing animatable 3D models | |
CN111626218B (zh) | 基于人工智能的图像生成方法、装置、设备及存储介质 | |
CN110163054B (zh) | 一种人脸三维图像生成方法和装置 | |
KR101906431B1 (ko) | 2d 이미지 인식에 기반한 3d 모델링 방법 및 그 시스템 | |
CN109964255B (zh) | 使用3d视频数据的3d打印 | |
US20230057566A1 (en) | Multimedia processing method and apparatus based on artificial intelligence, and electronic device | |
KR102068993B1 (ko) | 다시점 영상 정합을 이용한 아바타 생성 방법 및 장치 | |
US20220284678A1 (en) | Method and apparatus for processing face information and electronic device and storage medium | |
US20230087879A1 (en) | Electronic device and method for generating user avatar-based emoji sticker | |
WO2022076797A1 (en) | Computer architecture for generating footwear digital asset | |
CN113870401A (zh) | 表情生成方法、装置、设备、介质和计算机程序产品 | |
CN111798549A (zh) | 舞蹈的编辑方法、装置及计算机存储介质 | |
KR102399255B1 (ko) | 인공지능을 이용한 웹툰 제작 시스템 및 방법 | |
CN111696179A (zh) | 卡通三维模型和虚拟仿真人的生成方法、装置和存储介质 | |
KR102659290B1 (ko) | 모자이크 생성 장치 및 방법 | |
JP7388751B2 (ja) | 学習データ生成装置、学習データ生成方法および学習データ生成プログラム | |
CN111696181A (zh) | 超次元模型和虚拟仿真人的生成方法、装置和存储介质 | |
CN111696180A (zh) | 一种虚拟仿真人的生成方法、系统、装置和存储介质 | |
CN113762059A (zh) | 图像处理方法、装置、电子设备及可读存储介质 | |
CN116366909B (zh) | 虚拟物品处理方法、装置、电子设备及存储介质 | |
KR102500164B1 (ko) | 객체의 감성 정보를 자동으로 추출하는 감성정보 분석 시스템 및 이를 활용한 감성정보 분석 방법 | |
JP7390767B1 (ja) | ブロックオブジェクトの設計図を出力する方法 | |
CN117270721B (zh) | 基于多用户交互xr场景的数字形象渲染方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |