CN110827378A - 虚拟形象的生成方法、装置、终端及存储介质 - Google Patents

虚拟形象的生成方法、装置、终端及存储介质 Download PDF

Info

Publication number
CN110827378A
CN110827378A CN201911053933.6A CN201911053933A CN110827378A CN 110827378 A CN110827378 A CN 110827378A CN 201911053933 A CN201911053933 A CN 201911053933A CN 110827378 A CN110827378 A CN 110827378A
Authority
CN
China
Prior art keywords
target object
avatar
image
presenting
model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911053933.6A
Other languages
English (en)
Other versions
CN110827378B (zh
Inventor
张树鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201911053933.6A priority Critical patent/CN110827378B/zh
Publication of CN110827378A publication Critical patent/CN110827378A/zh
Priority to PCT/CN2020/114797 priority patent/WO2021082760A1/zh
Priority to US17/773,559 priority patent/US20220405986A1/en
Application granted granted Critical
Publication of CN110827378B publication Critical patent/CN110827378B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/451Execution arrangements for user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/761Proximity, similarity or dissimilarity measures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2213/00Indexing scheme for animation
    • G06T2213/12Rule based animation

Abstract

本公开实施例提供一种虚拟形象的生成方法、装置、终端及存储介质;方法包括:响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;基于所述图像采集界面,采集目标对象的帧图像;基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象;通过本公开,能够实现个性化虚拟形象的创建。

Description

虚拟形象的生成方法、装置、终端及存储介质
技术领域
本公开实施例涉及视频处理技术,尤其涉及一种虚拟形象的生成方法、装置、终端及存储介质。
背景技术
随着互联网产业的高速发展,人工智能使得“虚拟世界”的应用越来越多,从动漫到直播、到短视频的运营等,都涉及到“虚拟形象”的构建。相关技术中,大多采用通用的模板为用户提供“虚拟形象”,模板式的“虚拟形象”都比较相似,缺乏个性化,用户体验感不高。
发明内容
有鉴于此,本公开实施例提供一种虚拟形象的生成方法、装置、终端及存储介质。
第一方面,本公开实施例提供了一种虚拟形象的生成方法,包括:
响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
基于所述图像采集界面,采集目标对象的帧图像;
基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
上述方案中,所述呈现目标对象的图像采集界面之前,所述方法还包括:
响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;
响应于针对所述资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,所述虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
上述方案中,所述方法还包括:
在所述采集目标对象的帧图像的过程中,接收到针对当前的应用进程的后退指令;
响应于所述后退指令,呈现包括所述虚拟形象图标的工具栏,所述虚拟形象图标在所述工具栏中被聚焦。
上述方案中,所述呈现目标对象的图像采集界面,包括:
加载包括图像扫描框的图像扫描素材;
在所述图像采集界面中呈现所述图像扫描框,所述图像扫描框与所述目标对象的轮廓相匹配。
上述方案中,所述基于所述图像采集界面,采集目标对象的帧图像,包括:
基于所述图像采集界面中呈现的所述图像扫描框,采集所述目标对象的帧图像;
当采集的所述帧图像中所述目标对象的轮廓与所述图像扫描框不匹配时,呈现提示信息,所述提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
上述方案中,所述基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,包括:
基于采集的目标对象的帧图像,获取所述目标对象的头部各部分的特征;
发送携带所述目标对象的头部各部分的特征的获取请求;
接收返回的所述目标对象的虚拟形象模型;
其中,所述头部各部分的特征,用于供预测所述头部各部分所属的类别,以基于预测得到的类别确定所述头部各部分对应的素材,所述头部各部分对应的素材,用于组合生成所述虚拟形象模型。
上述方案中,所述方法还包括:
生成对应所述目标对象的虚拟形象的虚拟形象图标,所述虚拟形象图标,用于接收到点击操作时呈现所述目标对象的虚拟形象;
添加对应所述目标对象的虚拟形象的虚拟形象图标至所述图像采集界面中的工具栏。
上述方案中,所述方法还包括:
确定生成的所述虚拟形象图标的数量;
当所述虚拟形象图标的数量达到数量阈值时,关闭触发所述虚拟形象的生成指令的功能入口。
上述方案中,所述方法还包括:
基于所述图像采集界面,采集多帧连续的所述目标对象的帧图像;
获取所述多帧连续的帧图像中所述目标对象的关键点变化信息;
基于所述关键点变化信息,动态的呈现所述目标对象的虚拟形象。
上述方案中,所述渲染并呈现所述目标对象的虚拟形象之后,所述方法还包括:
接收到针对所述目标对象的虚拟形象的修改指令;
基于所述修改指令,获取更新的所述目标对象的虚拟形象模型;
基于所述更新的虚拟形象模型,更新呈现的所述目标对象的虚拟形象。
上述方案中,所述渲染并呈现所述目标对象的虚拟形象之后,所述方法还包括:
获取当前登录的目标用户的用户信息;
建立所述用户信息与所述虚拟形象模型的关联关系,以在所述目标用户再次登录时,基于所述用户信息及所述关联关系,获取所述虚拟形象模型。
第二方面,本公开实施例提供了一种虚拟形象的生成装置,包括:
第一呈现模块,用于响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
采集模块,用于基于所述图像采集界面,采集目标对象的帧图像;
获取模块,用于基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
第二呈现模块,用于基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
上述方案中,所述第一呈现模块,还用于响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;
响应于针对所述资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,所述虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
上述方案中,所述第一呈现模块,还用于在所述采集目标对象的帧图像的过程中,接收到针对当前的应用进程的后退指令;
响应于所述后退指令,呈现包括所述虚拟形象图标的工具栏,所述虚拟形象图标在所述工具栏中被聚焦。
上述方案中,所述第一呈现模块,用于加载包括图像扫描框的图像扫描素材;
在所述图像采集界面中呈现所述图像扫描框,所述图像扫描框与所述目标对象的轮廓相匹配。
上述方案中,所述采集模块,用于基于所述图像采集界面中呈现的所述图像扫描框,采集所述目标对象的帧图像;
当采集的所述帧图像中所述目标对象的轮廓与所述图像扫描框不匹配时,呈现提示信息,所述提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
上述方案中,所述获取模块,用于基于采集的目标对象的帧图像,获取所述目标对象的头部各部分的特征;
发送携带所述目标对象的头部各部分的特征的获取请求;
接收返回的所述目标对象的虚拟形象模型;
其中,所述头部各部分的特征,用于供预测所述头部各部分所属的类别,以基于预测得到的类别确定所述头部各部分对应的素材,所述头部各部分对应的素材,用于组合生成所述虚拟形象模型。
上述方案中,所述装置还包括:
添加模块,用于生成对应所述目标对象的虚拟形象的虚拟形象图标,所述虚拟形象图标,用于接收到点击操作时呈现所述目标对象的虚拟形象;
添加对应所述目标对象的虚拟形象的虚拟形象图标至所述图像采集界面中的工具栏。
上述方案中,所述添加模块,还用于确定生成的所述虚拟形象图标的数量;
当所述虚拟形象图标的数量达到数量阈值时,关闭触发所述虚拟形象的生成指令的功能入口。
上述方案中,所述第二呈现模块,还用于基于所述图像采集界面,采集多帧连续的所述目标对象的帧图像;
获取所述多帧连续的帧图像中所述目标对象的关键点变化信息;
基于所述关键点变化信息,动态的呈现所述目标对象的虚拟形象。
上述方案中,所述装置还包括:
修改模块,用于接收到针对所述目标对象的虚拟形象的修改指令;
基于所述修改指令,获取更新的所述目标对象的虚拟形象模型;
基于所述更新的虚拟形象模型,更新呈现的所述目标对象的虚拟形象。
上述方案中,所述装置还包括:
获取模块,用于获取当前登录的目标用户的用户信息;
建立所述用户信息与所述虚拟形象模型的关联关系,以在所述目标用户再次登录时,基于所述用户信息及所述关联关系,获取所述虚拟形象模型。
第三方面,本公开实施例提供了一种终端,包括:
存储器,用于存储可执行指令;
处理器,用于执行所述可执行指令时,实现本公开实施例提供的上述虚拟形象的生成方法。
第四方面,本公开实施例提供了一种存储介质,存储有可执行指令,所述可执行指令被执行时,用于实现本公开实施例提供的上述虚拟形象的生成方法。
应用本公开上述实施例具有如下有益效果:
应用本公开上述实施例,通过采集目标对象的帧图像,获取对应目标对象的虚拟形象模型,基于该虚拟形象模型,渲染得到对应目标对象的虚拟形象;这里,该虚拟形象模型的头部各部分与采集的目标对象的头部相应部分的相似度满足相似度条件,因此虚拟形象是根据目标对象的头部各部分特征生成的,不同的目标对象对应不同的虚拟形象,实现了个性化虚拟形象的创建,提高了用户体验。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1为本公开实施例提供的虚拟形象的生成系统的架构示意图;
图2为本公开实施例提供的电子设备的结构示意图;
图3为本公开实施例提供的虚拟形象的生成方法的流程示意图一;
图4为本公开实施例提供的图像采集界面的示意图一;
图5为本公开实施例提供的图像采集界面的示意图二;
图6为本公开实施例提供的图像扫描框的示意图一;
图7为本公开实施例提供的图像扫描框的示意图二;
图8为本公开实施例提供的响应于后退指令时呈现的工具栏示意图一;
图9为本公开实施例提供的响应于后退指令时呈现的工具栏示意图二;
图10为本公开实施例提供的创建虚拟形象的等待示意图;
图11为本公开实施例提供的虚拟形象添加示意图;
图12为本公开实施例提供的虚拟形象修改界面的示意图;
图13为本公开实施例提供的虚拟形象的生成方法的流程示意图二;
图14为本公开实施例提供的虚拟形象的生成装置的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例,相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
应当理解,本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行,和/或并行执行。此外,方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括,即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”;术语“另一实施例”表示“至少一个另外的实施例”;术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
对本公开实施例进行进一步详细说明之前,对本公开实施例中涉及的名词和术语进行说明,本公开实施例中涉及的名词和术语适用于如下的解释。
1)虚拟形象,通过智能识别,将用户的表情、动作、神态和语言等实时转化成虚拟人物的一举一动,其面部表情、动作神态、声音语调可完全复制用户本人。
2)响应于,用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
基于上述对本公开实施例中涉及的名词和术语的解释,下面参见图1,图1为本公开实施例提供的虚拟形象的生成系统的架构示意图,为实现支撑一个示例性应用,终端400(包括终端400-1、终端400-2)通过网络300连接服务器200,网络300可以是广域网或者局域网,又或者是二者的组合,使用无线或有线链路实现数据传输。
终端400(如终端400-1),用于响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;基于图像采集界面,采集目标对象的帧图像;基于采集的目标对象的帧图像,获取对应目标对象的虚拟形象模型;基于虚拟形象模型,渲染并呈现目标对象的虚拟形象;
终端400(如终端400-1),还用于基于采集的目标对象的帧图像,发送对应目标对象的虚拟形象模型的获取请求;
服务器200,用于接收对应目标对象的虚拟形象模型的获取请求;基于获取请求,生成对应目标对象的虚拟形象模型,并发送给终端。
这里,在实际应用中,终端400可以为智能手机、平板电脑、笔记本电脑等各种类型的用户终端,还可以为可穿戴计算设备、个人数字助理(PDA)、台式计算机、蜂窝电话、媒体播放器、导航设备、游戏机、电视机、或者这些数据处理设备或其他数据处理设备中任意两个或多个的组合;服务器200既可以为单独配置的支持各种业务的一个服务器,亦可以配置为一个服务器集群。
下面参见图2,图2为本公开实施例提供的电子设备的结构示意图。电子设备可以是各种终端,包括移动电话、笔记本电脑、数字广播接收器、个人数字助理(PDA,PersonalDigital Assistant)、平板电脑(PAD)、便携式多媒体播放器(PMP,Portable MediaPlayer)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字电视(TV)、台式计算机等等的固定终端。图2示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图2所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等)210,其可以根据存储在只读存储器(ROM,Read-Only Memory)220中的程序或者从存储装置280加载到随机访问存储器(RAM,Random Access Memory)230中的程序而执行各种适当的动作和处理。在RAM 230中,还存储有电子设备操作所需的各种程序和数据。处理装置210、ROM 220以及RAM 230通过总线240彼此相连。输入/输出(I/O,Input/Output)接口250也连接至总线240。
通常,以下装置可以连接至I/O接口250:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置260;包括例如液晶显示器(LCD,LiquidCrystal Display)、扬声器、振动器等的输出装置270;包括例如磁带、硬盘等的存储装置280;以及通信装置290。通信装置290可以允许电子设备与其他设备进行无线或有线通信以交换数据。
特别地,根据本公开实施例,所提供的流程图描述的过程可以被实现为计算机软件程序。例如,本公开实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,计算机程序可以通过通信装置290从网络上被下载和安装,或者从存储装置280被安装,或者从ROM 220被安装。在计算机程序被处理装置220执行时,执行本公开实施例的虚拟形象的生成方法中的功能。
需要说明的是,本公开实施例上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、RAM、ROM、可擦式可编程只读存储器(EPROM,ErasableProgrammable Read Only Memory)、闪存、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
在本公开实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括电线、光缆、射频(RF,Radio Frequency)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行本公开实施例提供的虚拟形象的生成方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开实施例中操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络,包括局域网(LAN,Local Area Network))和广域网(WAN,Wide Area Network),以连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本公开实施例提供的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定,例如,第一获取单元还可以被描述为“获取至少两个网际协议地址的单元”。
本公开实施例中描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA,Field-Programmable Gate Array)、专用集成电路(ASIC,Application SpecificIntegrated Circuit)、专用标准产品(ASSP,Application Specific Standard Parts))、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
在本公开实施例的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
下面说明本公开实施例提供的虚拟形象的生成方法。参见图3,图3为本公开实施例提供的虚拟形象的生成方法的流程示意图一,本公开实施例提供的虚拟形象的生成方法包括:
步骤301:终端响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面。
在一些实施例中,终端安装有具有视频拍摄功能的客户端,比如短视频APP,终端可以根据用户针对客户端的操作指令,执行相应的步骤。在实际应用中,当用户存在拍摄虚拟形象相关视频的需求时,可以在终端显示的视图界面通过滑动、点击等操作,触发虚拟形象的生成指令。
在一些实施例中,终端可通过如下方式来响应用户操作,触发虚拟形象的生成指令:响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;响应于针对资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,该虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
当终端检测到用户点击自身显示的拍摄按键时,基于该点击操作,通过视图界面呈现图像采集界面,该图像采集界面可以包含资源功能项以满足用户的视频拍摄需求,比如拍摄道具等。通过检测用户在包含资源功能项的页面的点击操作,向用户呈现包含如贴纸、滤镜、虚拟形象等多种拍摄道具图标的工具栏。用户可以通过点击操作选择需要的资源功能项。
示例性地,参见图4,图4为本公开实施例提供的图像采集界面的示意图一。由图4可知,该图像采集界面包含道具、视频拍摄等按键,当用户点击“道具”按键时,即点击操作资源功能项时,终端可呈现包含多种道具图标的工具栏。参见图5,图5为本公开实施例提供的图像采集界面的示意图二,图5所示的图像采集界面呈现了包含贴纸、虚拟形象等多种道具图标的工具栏。
如此,当终端检测到用户选择的拍摄道具图标为虚拟形象图标时,基于该虚拟形象图标,接收用户点击操作时触发的虚拟形象的生成指令。进而基于虚拟形象的生成指令,执行对应的响应操作,向用户呈现包含目标对象的图像采集界面。
示例性地,继续参见图5可知,当用户点击虚拟形象图标时,终端即呈现虚拟形象图标为被选中状态,即可以通过方框圈住虚拟形象图标;另外用户点击虚拟形象图标即触发了虚拟形象的生成指令,图像采集界面则可以呈现包含目标对象的预览帧图像。
在一些实施例中,终端可以通过如下方式呈现图像采集界面:加载包括图像扫描框的图像扫描素材;在图像采集界面中呈现图像扫描框,该图像扫描框与目标对象的轮廓相匹配。
终端在呈现图像采集界面时,可以加载包括特效、背景音乐等图像扫描素材以增加视频拍摄的体验感,同时,该图像采集界面还可以呈现图像扫描框,该图像扫描框是基于目标对象设置的,与目标对象的轮廓相匹配,以使用户拍摄的视频从整体上看起来更清晰和舒适。
步骤302:基于图像采集界面,采集目标对象的帧图像。
基于上述呈现的图像采集界面,通过摄像头等图像采集设备采集目标对象的帧图像。
在一些实施例中,可以通过如下方式采集目标对象的帧图像:基于图像采集界面中呈现的图像扫描框,采集目标对象的帧图像;当采集的帧图像中目标对象的轮廓与图像扫描框不匹配时,呈现提示信息,该提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
通过上述图像采集界面呈现的图像扫描框,来采集目标对象的帧图像,当终端检测到采集的帧图像中,目标对象的轮廓与该图像扫描框不匹配,即目标对象的轮廓没有完全落入图像扫描框的范围时,可以向用户呈现对应的提示信息,以提示用户调整自身的拍摄姿势、拍摄角度和拍摄距离等,从而使得采集的目标对象的轮廓与图像扫描框相匹配。
示例性地,参见图6,图6为本公开实施例提供的图像扫描框的示意图一,由图6可知,当终端呈现图像采集界面并检测到目标对象时,呈现图像扫描框,并通过显示文字“请将面部放入框内”的方式提示用户在进行虚拟形象创建时,需要将面部放在图像扫描框内。而如果终端检测到目标对象的轮廓不在上述图像扫描框内时,则可以通过文字“请正脸拍摄”“请移动面部至框内”等提示用户调整拍摄姿势、角度或者距离,参见图7,图7为本公开实施例提供的图像扫描框的示意图二,图7中目标对象的轮廓不在与图像扫描框不匹配。
另外,在采集目标对象的帧图像的过程中,如果接收到针对当前的应用进程的后退指令;响应于后退指令,呈现包括虚拟形象图标的工具栏,虚拟形象图标在工具栏中被聚焦。
在一些实施例中,如果在目标对象的帧图像采集过程中,接收到用户针对当前的应用进程的后退指令时,则根据该后退指令,在视图界面呈现包含虚拟形象图标的工具栏,由于图像采集过程并未完成,针对目标对象的虚拟形象也未建立,此时呈现的虚拟形象图标为系统默认的虚拟形象图标,即原始虚拟形象图标。
而如果检测到用户是在已创建虚拟形象后,再次创建虚拟形象时,接收到用户触发的后退指令,则呈现包含已创建虚拟形象对应的虚拟形象图标的工具栏。
具体的在接收到后退指令呈现工具栏时,可以聚焦在上述虚拟形象图标上,即控制选择框位于虚拟形象图标上。
示例性地,参见图8,图8为本公开实施例提供的响应于后退指令时呈现的工具栏示意图一,图8中为用户第一次创建虚拟形象时,触发后退指令,当终端此时接收到用户触发的后退指令,则呈现包含原始虚拟形象图标的工具栏,并控制选择框位于该原始虚拟形象图标上;参见图9,图9为本公开实施例提供的响应于后退指令时呈现的工具栏示意图二,图9中为用户在已完成首次虚拟形象创建后,再次创建虚拟形象时触发后退指令,当终端此时接收到用户触发的后退指令,则呈现包含用户首次创建的虚拟形象对应的虚拟形象图标的工具栏,同样的,也控制选择框位于该虚拟形象图标上。
步骤303:基于采集的目标对象的帧图像,获取对应目标对象的虚拟形象模型,虚拟形象模型的头部各部分与目标对象的头部相应部分的相似度满足相似度条件。
终端在采集了目标对象的帧图像之后,基于该帧图像获取对应目标对象的虚拟形象模型,以达到针对不同用户构建不同虚拟形象的目的。
在一些实施例中,可以通过如下方式获取对应目标对象的虚拟形象模型:基于采集的目标对象的帧图像,获取目标对象的头部各部分的特征;发送携带目标对象的头部各部分的特征的获取请求;接收返回的目标对象的虚拟形象模型;其中,该头部各部分的特征,用于供预测头部各部分所属的类别,以基于预测得到的类别确定头部各部分对应的素材;该头部各部分对应的素材,用于组合生成所述虚拟形象模型。
这里,虚拟形象模型的头部各部分包括以下至少之一:眼部、发部、耳朵、嘴巴、鼻子、眉毛、胡子、脸型。
在采集到包含目标对象的帧图像后,识别帧图像中目标对象的头部不同部分,具体的,可以针对包含目标对象的帧图像进行人脸关键点检测,确定目标对象的人脸关键点,基于确定的人脸关键点,采用人脸对齐算法进行人脸对齐,以识别帧图像中该目标对象的头部不同部分,进而确定目标对象的头部各部分对应的图像区域。
基于确定的目标对象的头部各部分对应的图像区域,对采集的帧图像进行区域分割,得到对应目标对象头部不同部分的图像;分别对头部不同部分的图像进行特征提取,获取目标对象的头部各部分的特征,即获取表征头部各部分特征的特征向量。
终端在向服务器发送虚拟形象模型的获取请求时,可以携带上述得到的目标对象的头部各部分的特征。
服务器在接收到该携带目标对象的头部各部分特征的获取请求后,分别对得到的各部分的特征进行特征相似度匹配,得到头部各部分所属的类别;或者还可以分别将表征头部各部分特征的特征向量,输入到神经网络模型进行所属类别的预测,以确定头部各部分所属的类别。这里,头部各部分所属的类别可以是不同属性的不同种类的任意组合。示例性地,头发所属的类别的属性可以包括长度、卷曲程度、发色,分别对应的种类可以包括光头、短发、中长发、长发;卷发、直发;黑色、棕色、黄色。通过将帧图像中头发的特征、与预设的多种类别的头发的特征进行相似度匹配,从而确定帧图像中头发所属的类别,如,黑色中长直发。
继续基于确定的头部各部分所属的类型,确定头部各部分对应的素材,将该素材进行组合,以生成对应目标对象的虚拟形象模型。
这里,上述步骤中目标对象的头部各部分特征的提取由终端完成,在本公开实施例中,该特征提取的过程还可以由服务器完成。具体的,服务器可以通过预先训练得到的目标神经网络模型来实现:即首先通过目标神经网络模型的特征提取层,对头部的各目标部分对应的图像进行特征提取,得到目标部分对应不同属性的特征向量;然后通过目标神经网络模型的特征拼接层,对得到的对应不同属性的特征向量进行向量拼接,得到对应各目标部分的特征向量;最后通过目标神经网络模型的分类层,根据各目标部分对应的特征向量,对各目标部分所属的类别进行预测,以确定所述目标部分所属的类别,进而继续执行后续生成虚拟形象模型的步骤。
由于虚拟形象创建过程中,分析帧图像特征、下载资源、匹配头部各部分素材等步骤都需要耗费时间,在一些实施例中,还可以通过文字提示的方式,以减免用户等待的焦虑情绪。参见图10,图10为本公开实施例提供的创建虚拟形象的等待示意图,通过呈现文字“正在识别并创建形象请稍等…”,提示用户虚拟形象正在生成过程中。
服务器基于上述步骤,根据目标对象的头部各部分的特征构建对应目标对象的虚拟形象模型,该虚拟形象模型的头部各部分与目标对象的头部各相应部分的相似度是满足预设的相似度条件的,以实现不同的目标对象可以生成不同的虚拟形象。根据接收的终端的虚拟形象模型的获取请求,将该虚拟形象模型发送给对应的终端。
终端接收服务器返回的对象目标对象的虚拟形象模型。
在一些实施例中,终端获取的虚拟形象模型也可以是本地存储的,此时,终端直接通过接口从虚拟形象模型的存储位置调用即可。
步骤304:基于虚拟形象模型,渲染并呈现目标对象的虚拟形象。
根据接收的虚拟形象模型,通过图形处理器GPU等的渲染处理,得到目标对象的虚拟形象并呈现。
在一些实施例中,经过渲染得到目标对象的虚拟形象之后,还可以动态呈现该虚拟形象:基于图像采集界面,采集多帧连续的目标对象的帧图像;获取多帧连续的帧图像中目标对象的关键点变化信息;基于关键点变化信息,动态呈现目标对象的虚拟形象。
在针对目标对象生成对应的虚拟形象之后,还可以通过动态呈现该虚拟形象以提高用户视频拍摄体验,即使得该虚拟形象可以根据目标对象的头部各部分的变化而变化。
具体的,针对目标对象,终端通过图像采集界面,采集多帧连续的帧图像;识别各帧图像中的目标对象的关键点的位置,比如头部轮廓、眼睛、眉毛等,确定每相邻两个帧图像中的关键点的位置变化情况,进而得到多帧图像中的目标对象的关键点的位置连续变化的信息;基于各关键点的位置连续变化的信息,控制虚拟形象中对应各关键点的部位进行变化,以实现动态呈现目标对象的虚拟形象的目的。
在一些实施例中,经过渲染得到目标对象的虚拟形象之后,还可以将该虚拟形象保存:生成对应目标对象的虚拟形象的虚拟形象图标,该虚拟形象图标用于接收到点击操作时呈现目标对象的虚拟形象;添加对应目标对象的虚拟形象的虚拟形象图标至图像采集界面中的工具栏。
针对目标对象的虚拟形象生成之后,可以保存该用户创建的虚拟形象以便后续使用,具体的,可以针对该目标对象的虚拟形象,生成对应的虚拟形象图标,该虚拟形象图标可以使虚拟形象的缩略图;将该虚拟形象图标添加到图像采集界面的工具栏中,以供用户后续选择使用。
需要说明的是,这里添加的虚拟形象图标和上述提到的工具栏中默认呈现的虚拟形象图标的作用是不一样的,当该虚拟形象图标被选中时,终端接收到用户点击操作,可以直接呈现对应该目标对象的虚拟形象,即该虚拟形象图标对应的虚拟形象,不需要重新创建虚拟形象。
在一些实施例中,还可以控制虚拟形象图标的数量:确定生成的虚拟形象图标的数量;当虚拟形象图标的数量达到数量阈值时,关闭触发虚拟形象的生成指令的功能入口。
当前支持用户创作的虚拟形象的数量是有限的,因此需要对生成的虚拟形象图标的数量进行控制。可以预先设置虚拟形象图标的数量上限阈值,当确定虚拟形象图标的数量达到该数量阈值时,则可以关闭触发虚拟形象的生成指令的功能入口。
示例性地,参见图11,图11为本公开实施例提供的虚拟形象添加示意图,用户可以通过点击图11左边图中的“+”按钮,创建用户对应的虚拟形象,终端根据用户的操作,将对应该用户的虚拟形象的虚拟形象图标添加到工具栏中;当确定虚拟形象图标的数量达到数量阈值时,比如预设的数量阈值为3个,当虚拟形象图标达到3个时,则关闭触发虚拟形象的生成指令的功能入口,即不再显示“+”按钮,即图11右边图所示。
在一些实施例中,渲染并呈现目标对象的虚拟形象之后,还可以通过如下方式对其进行修改:接收到针对目标对象的虚拟形象的修改指令;基于修改指令,获取更新的目标对象的虚拟形象模型;基于更新的虚拟形象模型,更新呈现的目标对象的虚拟形象。
当用户对构建的虚拟形象不是很满意、或者想进一步完善改进虚拟形象时,可以通过点击操作,选择其中的某一个虚拟形象图标,触发虚拟形象的修改指令。参见图12,图12为本公开实施例提供的虚拟形象修改界面的示意图,图12中,终端显示用户共创建了两个虚拟形象,当接收到用户的点击操作时,通过选择框框住用户指定修改的虚拟形象对应的虚拟形象图标,并在图像采集界面显示“修改形象”的按钮以供用户执行修改操作。
终端接收到用户针对虚拟形象的修改指令之后,重新呈现图像采集界面,具体可以重复执行上述步骤301-步骤305,通过服务器再次构建对应该目标对象的虚拟形象模型并更新,进而获取更新后的虚拟形象模型;基于更新后的虚拟形象模型,通过渲染等处理更新呈现的目标对象的虚拟形象。
此外,终端还可以针对不同的头部各部位,对虚拟形象模型进行部分修改,比如,针对发部,向服务器发送修改虚拟形象模型发部的请求,以使服务器识别采集的图像帧中的头发部位的变化情况,对原来的虚拟形象模型的发部做相应的修改,并将更新后的虚拟形象模型返回终端;进而终端基于更新后的虚拟形象模型,通过渲染等处理更新呈现的目标对象的虚拟形象。
在一些实施例中,还可以通过以下方式建立用户与虚拟形象模型之间的关联关系:获取当前登录的目标用户的用户信息;建立用户信息与虚拟形象模型的关联关系,以在目标用户再次登录时,基于用户信息及关联关系,获取虚拟形象模型。
在实际应用中,客户端通常设置有用户登录功能以针对该用户保存相应的数据信息,因此,在本公开实施例中,还可以通过弹出登录页面提示用户登录客户端,以便后续实时保存该用户相关的用户信息。
当基于上述步骤构建对应目标对象的虚拟形象之后,还可以获取当前登录的目标用户的用户信息,比如可以向服务器发送用户信息获取请求;从而,将获取的用户信息与该用户的虚拟形象模型进行关联,构建用户信息与虚拟形象模型的关联关系,以使终端该目标用户再次登录时,可以基于该目标用户的用户信息与关联关系,直接获取对应的虚拟形象模型进而快速生成虚拟形象。
另外,上述关联关系可以保存在服务器,也可以保存在终端,具体的如果该关联关系保存在服务器,则用户不管以哪个终端登录都能快速生成对应的虚拟形象;而如果关联关系保存在终端,则不能支持跨终端使用,在更换终端时,仍需要重新建立虚拟形象模型。在本公开实施例中,可以根据需要选择关联关系的存储位置,在此不作限定。
下面以一个具体的实施例,继续说明本公开实施例提供的虚拟形象的生成方法。参见图13,图13为本公开实施例提供的虚拟形象的生成方法的流程示意图二,本公开实施例提供的虚拟形象的生成方法包括:
步骤1301:终端响应于针对拍摄按键的点击操作,呈现包含资源功能项的图像采集界面。
步骤1302:响应于针对资源功能项的点击操作,呈现包括虚拟形象图标的工具栏。
这里,虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令,用户可以通过点击该工具栏中的虚拟形象图标触发虚拟形象生成指令。
步骤1303:响应于触发的虚拟形象生成指令,呈现目标对象的图像采集界面。
步骤1304:在图像采集界面呈现包括图像扫描框的图像扫描素材。
这里,图像扫描框与目标对象的轮廓相匹配,可以用于提示用户调整拍摄距离、拍摄姿势、拍摄角度等。
步骤1305:基于图像采集界面,采集目标对象的帧图像。
这里,如果在图像采集过程中,接收到用户针对当前的应用进程的后退指令,则呈现包含虚拟形象图标的工具栏,并控制选择框位于该虚拟形象图标。
步骤1306:基于采集的帧图像,获取目标对象的头部各部分的特征。
步骤1307:向服务器发送携带目标对象的头部各部分的特征的虚拟形象模型获取请求。
步骤1308:服务器接收虚拟形象模型获取请求,基于目标对象的头部各部分的特征,确定头部各部分所属的类别。
这里,服务器既可以通过解析获取请求,得到携带目标对象的头部各部分的特征,还可以通过神经网络模型,实现头部各部分的特征提取。
步骤1309:服务器基于头部各部分所属的类别确定头部各部分对应的素材。
步骤1310:组合目标对象的头部各部分对应的素材,得到对应目标对象的虚拟形象模型并发送给终端。
步骤1311:终端基于返回的虚拟形象模型,渲染并呈现目标对象的虚拟形象。
这里,终端可通过采集多帧连续的目标对象的帧图像,基于帧图像中目标对象的关键点变化信息,动态的呈现目标对象的虚拟形象。
步骤1312:生成对应虚拟形象的虚拟形象图标,并添加至图像采集界面中的工具栏。
这里,终端可以通过设置虚拟形象图标的数量阈值,控制虚拟形象的创建,具体的,当虚拟形象图标的数量达到阈值时,关闭触发虚拟形象的生成指令的功能入口。
步骤1313:响应于针对虚拟形象的修改指令,获取更新后的目标对象的虚拟形象。
步骤1314:基于更新的虚拟形象模型,更新呈现的目标对象的虚拟形象。
步骤1315:建立当前登陆的目标用户的用户信息与虚拟形象的关联关系。
该关联关系可以保存在终端,也可以保存在服务器,以使目标用户再次登录时,基于用户信息及关联关系,直接获取对应的虚拟形象模型。
应用本公开上述实施例具有如下有益效果:
应用本公开上述实施例,通过采集目标对象的帧图像,获取对应目标对象的虚拟形象模型,基于该虚拟形象模型,渲染得到对应目标对象的虚拟形象;这里,该虚拟形象模型的头部各部分与采集的目标对象的头部相应部分的相似度满足相似度条件,因此虚拟形象是根据目标对象的头部各部分特征生成的,不同的目标对象对应不同的虚拟形象,实现了个性化虚拟形象的创建,提高了用户体验。
下面说明实现本公开实施例提供的虚拟形象的生成装置中的单元和/或模块。可以理解地,虚拟形象的生成装置中的单元或模块可以采用软件(例如上述的计算机软件程序中存储的计算机程序)的方式在如图2所示的电子设备中实现,也可以采用上述的硬件逻辑部件(例如FPGA、ASIC、SOC和CPLD)的方式在如图2所示的电子设备中实现。
参见图14,图14是实现本公开实施例的虚拟形象的生成装置1400的一个可选的结构示意图,示出了以下模块:第一呈现模块1410、采集模块1420、获取模块1430和第二呈现模块1440,将在下文说明各个模块的功能。
需要指出,上述模块的分类并不构成对电子设备本身的限定,例如一些模块可以拆分为两个或以上的子模块,或者,一些模块可以合并为一个新的模块。
还需要指出,上述模块的名称在某种情况下并不构成对模块本身的限定,例如,上述“第一呈现模块1410”也可以被描述为“用于响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面”的模块。
基于同样的理由,电子设备中未详尽描述的单元和/或模块不代表相应的单元和/或模块的缺省,凡是电子设备所执行的操作都可以通过电子设备中的相应的单元和/或模块实现。
继续参见图14,图14为本公开实施例提供的虚拟形象的生成装置1400的结构示意图,所述装置包括:
第一呈现模块1410,用于响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
采集模块1420,用于基于所述图像采集界面,采集目标对象的帧图像;
获取模块1430,用于基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
第二呈现模块1440,用于基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
在一些实施例中,所述第一呈现模块1410,还用于响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;
响应于针对所述资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,所述虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
在一些实施例中,所述第一呈现模块1410,还用于在所述采集目标对象的帧图像的过程中,接收到针对当前的应用进程的后退指令;
响应于所述后退指令,呈现包括所述虚拟形象图标的工具栏,所述虚拟形象图标在所述工具栏中被聚焦。
在一些实施例中,所述第一呈现模块1410,用于加载包括图像扫描框的图像扫描素材;
在所述图像采集界面中呈现所述图像扫描框,所述图像扫描框与所述目标对象的轮廓相匹配。
在一些实施例中,所述采集模块1420,用于基于所述图像采集界面中呈现的所述图像扫描框,采集所述目标对象的帧图像;
当采集的所述帧图像中所述目标对象的轮廓与所述图像扫描框不匹配时,呈现提示信息,所述提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
在一些实施例中,所述获取模块1430,用于基于采集的目标对象的帧图像,获取所述目标对象的头部各部分的特征;
发送携带所述目标对象的头部各部分的特征的获取请求;
接收返回的所述目标对象的虚拟形象模型;
其中,所述头部各部分的特征,用于供预测所述头部各部分所属的类别,以基于预测得到的类别确定所述头部各部分对应的素材,所述头部各部分对应的素材,用于组合生成所述虚拟形象模型。
在一些实施例中,所述装置还包括:
添加模块1450,用于生成对应所述目标对象的虚拟形象的虚拟形象图标,所述虚拟形象图标,用于接收到点击操作时呈现所述目标对象的虚拟形象;
添加对应所述目标对象的虚拟形象的虚拟形象图标至所述图像采集界面中的工具栏。
在一些实施例中,所述添加模块1450,还用于确定生成的所述虚拟形象图标的数量;
当所述虚拟形象图标的数量达到数量阈值时,关闭触发所述虚拟形象的生成指令的功能入口。
在一些实施例中,所述第二呈现模块1440,还用于基于所述图像采集界面,采集多帧连续的所述目标对象的帧图像;
获取所述多帧连续的帧图像中所述目标对象的关键点变化信息;
基于所述关键点变化信息,动态的呈现所述目标对象的虚拟形象。
在一些实施例中,所述装置还包括:
修改模块1460,用于接收到针对所述目标对象的虚拟形象的修改指令;
基于所述修改指令,获取更新的所述目标对象的虚拟形象模型;
基于所述更新的虚拟形象模型,更新呈现的所述目标对象的虚拟形象。
在一些实施例中,所述装置还包括:
获取模块1470,用于获取当前登录的目标用户的用户信息;
建立所述用户信息与所述虚拟形象模型的关联关系,以在所述目标用户再次登录时,基于所述用户信息及所述关联关系,获取所述虚拟形象模型。
这里需要指出的是:以上涉及虚拟形象的生成装置的描述,与上述方法描述是类似的,同方法的有益效果描述,不做赘述,对于本公开实施例所述虚拟形象的生成装置实施例中未披露的技术细节,请参照本公开方法实施例的描述。
本公开实施例还提供了一种终端,所述终端包括:
存储器,用于存储可执行程序;
处理器,用于执行所述可执行程序时,实现本公开实施例提供的虚拟形象的生成方法。
本公开实施例还提供一种存储介质,存储有可执行指令,所述可执行指令被执行时,用于实现本公开实施例提供的虚拟形象的生成方法。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,包括:
响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
基于所述图像采集界面,采集目标对象的帧图像;
基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;
响应于针对所述资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,所述虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
在所述采集目标对象的帧图像的过程中,接收到针对当前的应用进程的后退指令;
响应于所述后退指令,呈现包括所述虚拟形象图标的工具栏,所述虚拟形象图标在所述工具栏中被聚焦。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
所述呈现目标对象的图像采集界面,包括:
加载包括图像扫描框的图像扫描素材;
在所述图像采集界面中呈现所述图像扫描框,所述图像扫描框与所述目标对象的轮廓相匹配。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
所述基于所述图像采集界面,采集目标对象的帧图像,包括:
基于所述图像采集界面中呈现的所述图像扫描框,采集所述目标对象的帧图像;
当采集的所述帧图像中所述目标对象的轮廓与所述图像扫描框不匹配时,呈现提示信息,所述提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
所述基于采集的目标对象的帧图像,发送对应所述目标对象的虚拟形象的获取请求,包括:
基于采集的目标对象的帧图像,获取所述目标对象的头部各部分的特征;
发送携带所述目标对象的头部各部分的特征的获取请求;
接收返回的所述目标对象的虚拟形象模型;
其中,所述头部各部分的特征,用于供预测所述头部各部分所属的类别,以基于预测得到的类别确定所述头部各部分对应的素材,所述头部各部分对应的素材,用于组合生成所述虚拟形象模型。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
生成对应所述目标对象的虚拟形象的虚拟形象图标,所述虚拟形象图标,用于接收到点击操作时呈现所述目标对象的虚拟形象;
添加对应所述目标对象的虚拟形象的虚拟形象图标至所述图像采集界面中的工具栏。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
确定生成的所述虚拟形象图标的数量;
当所述虚拟形象图标的数量达到数量阈值时,关闭触发所述虚拟形象的生成指令的功能入口。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
基于所述图像采集界面,采集多帧连续的所述目标对象的帧图像;
获取所述多帧连续的帧图像中所述目标对象的关键点变化信息;
基于所述关键点变化信息,动态的呈现所述目标对象的虚拟形象。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
接收到针对所述目标对象的虚拟形象的修改指令;
基于所述修改指令,获取更新的所述目标对象的虚拟形象模型;
基于所述更新的虚拟形象模型,更新呈现的所述目标对象的虚拟形象。
根据本公开的一个或多个实施例,本公开实施例提供了一种虚拟形象的生成方法,还包括:
获取当前登录的目标用户的用户信息;
建立所述用户信息与所述虚拟形象模型的关联关系,以在所述目标用户再次登录时,基于所述用户信息及所述关联关系,获取所述虚拟形象模型。
根据本公开的一个或多个实施例,本公开实施例还提供了一种虚拟形象的生成装置,包括:
第一呈现模块,用于响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
采集模块,用于基于所述图像采集界面,采集目标对象的帧图像;
获取模块,用于基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
第二呈现模块,用于基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
以上描述仅为本公开的实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
此外,虽然采用特定次序描绘了各操作,但是这不应当理解为要求这些操作以所示出的特定次序或以顺序次序执行来执行。在一定环境下,多任务和并行处理可能是有利的。同样地,虽然在上面论述中包含了若干具体实现细节,但是这些不应当被解释为对本公开的范围的限制。在单独的实施例的上下文中描述的某些特征还可以组合地实现在单个实施例中。相反地,在单个实施例的上下文中描述的各种特征也可以单独地或以任何合适的子组合的方式实现在多个实施例中。
尽管已经采用特定于结构特征和/或方法逻辑动作的语言描述了本主题,但是应当理解所附权利要求书中所限定的主题未必局限于上面描述的特定特征或动作。相反,上面所描述的特定特征和动作仅仅是实现权利要求书的示例形式。

Claims (20)

1.一种虚拟形象的生成方法,其特征在于,所述方法包括:
响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
基于所述图像采集界面,采集目标对象的帧图像;
基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
2.如权利要求1所述的方法,其特征在于,所述呈现目标对象的图像采集界面之前,所述方法还包括:
响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;
响应于针对所述资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,所述虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
3.如权利要求2所述的方法,其特征在于,所述方法还包括:
在所述采集目标对象的帧图像的过程中,接收到针对当前的应用进程的后退指令;
响应于所述后退指令,呈现包括所述虚拟形象图标的工具栏,所述虚拟形象图标在所述工具栏中被聚焦。
4.如权利要求1所述的方法,其特征在于,所述呈现目标对象的图像采集界面,包括:
加载包括图像扫描框的图像扫描素材;
在所述图像采集界面中呈现所述图像扫描框,所述图像扫描框与所述目标对象的轮廓相匹配。
5.如权利要求4所述的方法,其特征在于,所述基于所述图像采集界面,采集目标对象的帧图像,包括:
基于所述图像采集界面中呈现的所述图像扫描框,采集所述目标对象的帧图像;
当采集的所述帧图像中所述目标对象的轮廓与所述图像扫描框不匹配时,呈现提示信息,所述提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
6.如权利要求1所述的方法,其特征在于,所述基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,包括:
基于采集的目标对象的帧图像,获取所述目标对象的头部各部分的特征;
发送携带所述目标对象的头部各部分的特征的获取请求;
接收返回的所述目标对象的虚拟形象模型;
其中,所述头部各部分的特征,用于供预测所述头部各部分所属的类别,以基于预测得到的类别确定所述头部各部分对应的素材,所述头部各部分对应的素材,用于组合生成所述虚拟形象模型。
7.如权利要求1所述的方法,其特征在于,所述方法还包括:
生成对应所述目标对象的虚拟形象的虚拟形象图标,所述虚拟形象图标,用于接收到点击操作时呈现所述目标对象的虚拟形象;
添加对应所述目标对象的虚拟形象的虚拟形象图标至所述图像采集界面中的工具栏。
8.如权利要求7所述的方法,其特征在于,所述方法还包括:
确定生成的所述虚拟形象图标的数量;
当所述虚拟形象图标的数量达到数量阈值时,关闭触发所述虚拟形象的生成指令的功能入口。
9.如权利要求1所述的方法,其特征在于,所述方法还包括:
基于所述图像采集界面,采集多帧连续的所述目标对象的帧图像;
获取所述多帧连续的帧图像中所述目标对象的关键点变化信息;
基于所述关键点变化信息,动态的呈现所述目标对象的虚拟形象。
10.如权利要求1所述的方法,其特征在于,所述渲染并呈现所述目标对象的虚拟形象之后,所述方法还包括:
接收到针对所述目标对象的虚拟形象的修改指令;
基于所述修改指令,获取更新的所述目标对象的虚拟形象模型;
基于所述更新的虚拟形象模型,更新呈现的所述目标对象的虚拟形象。
11.如权利要求1所述的方法,其特征在于,所述渲染并呈现所述目标对象的虚拟形象之后,所述方法还包括:
获取当前登录的目标用户的用户信息;
建立所述用户信息与所述虚拟形象模型的关联关系,以在所述目标用户再次登录时,基于所述用户信息及所述关联关系,获取所述虚拟形象模型。
12.一种虚拟形象的生成装置,其特征在于,所述装置包括:
第一呈现模块,用于响应于通过视图界面触发的虚拟形象的生成指令,呈现目标对象的图像采集界面;
采集模块,用于基于所述图像采集界面,采集目标对象的帧图像;
获取模块,用于基于采集的目标对象的帧图像,获取对应所述目标对象的虚拟形象模型,所述虚拟形象模型的头部各部分与所述目标对象的头部相应部分的相似度满足相似度条件;
第二呈现模块,用于基于所述虚拟形象模型,渲染并呈现所述目标对象的虚拟形象。
13.如权利要求12所述的装置,其特征在于,
所述第一呈现模块,还用于响应于针对呈现的拍摄按键的点击操作,呈现包含资源功能项的图像采集界面;
响应于针对所述资源功能项的点击操作,呈现包括虚拟形象图标的工具栏,所述虚拟形象图标用于接收到点击操作时触发所述虚拟形象的生成指令。
14.如权利要求12所述的装置,其特征在于,
所述第一呈现模块,用于加载包括图像扫描框的图像扫描素材;
在所述图像采集界面中呈现所述图像扫描框,所述图像扫描框与所述目标对象的轮廓相匹配。
15.如权利要求14所述的装置,其特征在于,
所述采集模块,用于基于所述图像采集界面中呈现的所述图像扫描框,采集所述目标对象的帧图像;
当采集的所述帧图像中所述目标对象的轮廓与所述图像扫描框不匹配时,呈现提示信息,所述提示信息用于提示调整以下至少之一:拍摄姿势、拍摄角度、拍摄距离。
16.如权利要求12所述的装置,其特征在于,
所述获取模块,用于基于采集的目标对象的帧图像,获取所述目标对象的头部各部分的特征;
发送携带所述目标对象的头部各部分的特征的获取请求;
接收返回的所述目标对象的虚拟形象模型;
其中,所述头部各部分的特征,用于供预测所述头部各部分所属的类别,以基于预测得到的类别确定所述头部各部分对应的素材,所述头部各部分对应的素材,用于组合生成所述虚拟形象模型。
17.如权利要求12所述的装置,其特征在于,
所述第二呈现模块,还用于基于所述图像采集界面,采集多帧连续的所述目标对象的帧图像;
获取所述多帧连续的帧图像中所述目标对象的关键点变化信息;
基于所述关键点变化信息,动态的呈现所述目标对象的虚拟形象。
18.如权利要求12所述的装置,其特征在于,所述装置还包括:
修改模块,用于接收到针对所述目标对象的虚拟形象的修改指令;
基于所述修改指令,获取更新的所述目标对象的虚拟形象模型;
基于所述更新的虚拟形象模型,更新呈现的所述目标对象的虚拟形象。
19.一种终端,其特征在于,所述终端包括:
存储器,用于存储可执行指令;
处理器,用于执行所述可执行指令时,实现如权利要求1至11任一项所述的虚拟形象的生成方法。
20.一种存储介质,其特征在于,存储有可执行指令,所述可执行指令被执行时,用于实现如权利要求1至11任一项所述的虚拟形象的生成方法。
CN201911053933.6A 2019-10-31 2019-10-31 虚拟形象的生成方法、装置、终端及存储介质 Active CN110827378B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201911053933.6A CN110827378B (zh) 2019-10-31 2019-10-31 虚拟形象的生成方法、装置、终端及存储介质
PCT/CN2020/114797 WO2021082760A1 (zh) 2019-10-31 2020-09-11 虚拟形象的生成方法、装置、终端及存储介质
US17/773,559 US20220405986A1 (en) 2019-10-31 2020-09-11 Virtual image generation method, device, terminal and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911053933.6A CN110827378B (zh) 2019-10-31 2019-10-31 虚拟形象的生成方法、装置、终端及存储介质

Publications (2)

Publication Number Publication Date
CN110827378A true CN110827378A (zh) 2020-02-21
CN110827378B CN110827378B (zh) 2023-06-09

Family

ID=69551820

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911053933.6A Active CN110827378B (zh) 2019-10-31 2019-10-31 虚拟形象的生成方法、装置、终端及存储介质

Country Status (3)

Country Link
US (1) US20220405986A1 (zh)
CN (1) CN110827378B (zh)
WO (1) WO2021082760A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111612876A (zh) * 2020-04-27 2020-09-01 北京小米移动软件有限公司 表情生成方法、装置及存储介质
CN111638794A (zh) * 2020-06-04 2020-09-08 上海商汤智能科技有限公司 一种虚拟文物的显示控制方法及装置
CN111798559A (zh) * 2020-06-03 2020-10-20 体知(上海)信息技术有限公司 一种虚拟形象特征的选择装置与方法
CN111813491A (zh) * 2020-08-19 2020-10-23 广州汽车集团股份有限公司 一种车载助手的拟人化交互方法、装置及汽车
CN112053370A (zh) * 2020-09-09 2020-12-08 脸萌有限公司 基于增强现实的显示方法、设备及存储介质
CN112598785A (zh) * 2020-12-25 2021-04-02 游艺星际(北京)科技有限公司 虚拟形象的三维模型生成方法、装置、设备及存储介质
WO2021082760A1 (zh) * 2019-10-31 2021-05-06 北京字节跳动网络技术有限公司 虚拟形象的生成方法、装置、终端及存储介质
CN112785490A (zh) * 2020-12-30 2021-05-11 维沃移动通信有限公司 图像处理方法、装置及电子设备
CN113485596A (zh) * 2021-07-07 2021-10-08 游艺星际(北京)科技有限公司 虚拟模型的处理方法、装置、电子设备及存储介质
CN113516739A (zh) * 2020-04-09 2021-10-19 上海米哈游天命科技有限公司 一种动画处理方法、装置、存储介质及电子设备
CN113938696A (zh) * 2021-10-13 2022-01-14 广州方硅信息技术有限公司 基于自定义虚拟礼物的直播互动方法、系统及计算机设备
CN114385285A (zh) * 2021-11-30 2022-04-22 重庆长安汽车股份有限公司 一种基于汽车ai智慧助手的形象创建方法
CN115291772A (zh) * 2022-08-16 2022-11-04 北京字跳网络技术有限公司 页面显示方法、装置、设备及存储介质
CN115699097A (zh) * 2020-06-10 2023-02-03 斯纳普公司 用于图像处理的软件开发工具包

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115797851B (zh) * 2023-02-09 2023-05-05 安徽米娱科技有限公司 一种动漫视频处理方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101847268A (zh) * 2010-04-29 2010-09-29 北京中星微电子有限公司 一种基于人脸图像的卡通人脸图形生成方法和装置
CN102542586A (zh) * 2011-12-26 2012-07-04 暨南大学 一种基于移动终端的个性化卡通肖像生成系统及方法
CN103631370A (zh) * 2012-08-28 2014-03-12 腾讯科技(深圳)有限公司 一种控制虚拟形象的方法及装置
CN109857311A (zh) * 2019-02-14 2019-06-07 北京达佳互联信息技术有限公司 生成人脸三维模型的方法、装置、终端及存储介质
US10375313B1 (en) * 2018-05-07 2019-08-06 Apple Inc. Creative camera
US10452896B1 (en) * 2016-09-06 2019-10-22 Apple Inc. Technique for creating avatar from image data

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8692830B2 (en) * 2010-06-01 2014-04-08 Apple Inc. Automatic avatar creation
US10155168B2 (en) * 2012-05-08 2018-12-18 Snap Inc. System and method for adaptable avatars
US9940541B2 (en) * 2015-07-15 2018-04-10 Fyusion, Inc. Artificially rendering images using interpolation of tracked control points
CN106708850A (zh) * 2015-11-13 2017-05-24 百度在线网络技术(北京)有限公司 基于图像模板的图像生成方法和装置
US10529115B2 (en) * 2017-03-20 2020-01-07 Google Llc Generating cartoon images from photos
CN107589889A (zh) * 2017-09-21 2018-01-16 北京金山安全软件有限公司 一种图像处理触发方法、装置、电子设备及存储介质
WO2019164266A1 (en) * 2018-02-23 2019-08-29 Samsung Electronics Co., Ltd. Electronic device for generating image including 3d avatar reflecting face motion through 3d avatar corresponding to face and method of operating same
KR20190101832A (ko) * 2018-02-23 2019-09-02 삼성전자주식회사 전자 장치 및 아바타 기반의 커스텀 객체 운용 방법
KR102565755B1 (ko) * 2018-02-23 2023-08-11 삼성전자주식회사 얼굴의 특징점의 움직임에 따라 모션이 수행된 아바타를 표시하는 전자 장치와 이의 동작 방법
US10607065B2 (en) * 2018-05-03 2020-03-31 Adobe Inc. Generation of parameterized avatars
CN108717719A (zh) * 2018-05-23 2018-10-30 腾讯科技(深圳)有限公司 卡通人脸图像的生成方法、装置及计算机存储介质
JP7135472B2 (ja) * 2018-06-11 2022-09-13 カシオ計算機株式会社 表示制御装置、表示制御方法及び表示制御プログラム
KR102530264B1 (ko) * 2018-08-08 2023-05-09 삼성전자 주식회사 아바타에 대응하는 속성에 따른 아이템을 제공하는 방법 및 장치
CN109636886B (zh) * 2018-12-19 2020-05-12 网易(杭州)网络有限公司 图像的处理方法、装置、存储介质和电子装置
CN109992187B (zh) * 2019-04-11 2021-12-10 北京字节跳动网络技术有限公司 一种控制方法、装置、设备及存储介质
CN110827378B (zh) * 2019-10-31 2023-06-09 北京字节跳动网络技术有限公司 虚拟形象的生成方法、装置、终端及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101847268A (zh) * 2010-04-29 2010-09-29 北京中星微电子有限公司 一种基于人脸图像的卡通人脸图形生成方法和装置
CN102542586A (zh) * 2011-12-26 2012-07-04 暨南大学 一种基于移动终端的个性化卡通肖像生成系统及方法
CN103631370A (zh) * 2012-08-28 2014-03-12 腾讯科技(深圳)有限公司 一种控制虚拟形象的方法及装置
US10452896B1 (en) * 2016-09-06 2019-10-22 Apple Inc. Technique for creating avatar from image data
US10375313B1 (en) * 2018-05-07 2019-08-06 Apple Inc. Creative camera
CN109857311A (zh) * 2019-02-14 2019-06-07 北京达佳互联信息技术有限公司 生成人脸三维模型的方法、装置、终端及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
又酷又有温度: "没有iPhone X也能玩,一键生成3D动画头像的拍视频神器来了", 《HTTPS://WWW.IFANR.COM/APP/1157912》 *

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021082760A1 (zh) * 2019-10-31 2021-05-06 北京字节跳动网络技术有限公司 虚拟形象的生成方法、装置、终端及存储介质
CN113516739B (zh) * 2020-04-09 2023-05-16 上海米哈游天命科技有限公司 一种动画处理方法、装置、存储介质及电子设备
CN113516739A (zh) * 2020-04-09 2021-10-19 上海米哈游天命科技有限公司 一种动画处理方法、装置、存储介质及电子设备
CN111612876A (zh) * 2020-04-27 2020-09-01 北京小米移动软件有限公司 表情生成方法、装置及存储介质
CN111798559A (zh) * 2020-06-03 2020-10-20 体知(上海)信息技术有限公司 一种虚拟形象特征的选择装置与方法
CN111638794A (zh) * 2020-06-04 2020-09-08 上海商汤智能科技有限公司 一种虚拟文物的显示控制方法及装置
CN115699097A (zh) * 2020-06-10 2023-02-03 斯纳普公司 用于图像处理的软件开发工具包
CN111813491B (zh) * 2020-08-19 2020-12-18 广州汽车集团股份有限公司 一种车载助手的拟人化交互方法、装置及汽车
CN111813491A (zh) * 2020-08-19 2020-10-23 广州汽车集团股份有限公司 一种车载助手的拟人化交互方法、装置及汽车
US11587280B2 (en) 2020-09-09 2023-02-21 Beijing Zitiao Network Technology Co., Ltd. Augmented reality-based display method and device, and storage medium
CN112053370A (zh) * 2020-09-09 2020-12-08 脸萌有限公司 基于增强现实的显示方法、设备及存储介质
CN112598785B (zh) * 2020-12-25 2022-03-25 游艺星际(北京)科技有限公司 虚拟形象的三维模型生成方法、装置、设备及存储介质
CN112598785A (zh) * 2020-12-25 2021-04-02 游艺星际(北京)科技有限公司 虚拟形象的三维模型生成方法、装置、设备及存储介质
CN112785490A (zh) * 2020-12-30 2021-05-11 维沃移动通信有限公司 图像处理方法、装置及电子设备
CN112785490B (zh) * 2020-12-30 2024-03-05 维沃移动通信有限公司 图像处理方法、装置及电子设备
CN113485596A (zh) * 2021-07-07 2021-10-08 游艺星际(北京)科技有限公司 虚拟模型的处理方法、装置、电子设备及存储介质
CN113485596B (zh) * 2021-07-07 2023-12-22 游艺星际(北京)科技有限公司 虚拟模型的处理方法、装置、电子设备及存储介质
CN113938696A (zh) * 2021-10-13 2022-01-14 广州方硅信息技术有限公司 基于自定义虚拟礼物的直播互动方法、系统及计算机设备
CN113938696B (zh) * 2021-10-13 2024-03-29 广州方硅信息技术有限公司 基于自定义虚拟礼物的直播互动方法、系统及计算机设备
CN114385285A (zh) * 2021-11-30 2022-04-22 重庆长安汽车股份有限公司 一种基于汽车ai智慧助手的形象创建方法
CN114385285B (zh) * 2021-11-30 2024-02-06 重庆长安汽车股份有限公司 一种基于汽车ai智慧助手的形象创建方法
CN115291772A (zh) * 2022-08-16 2022-11-04 北京字跳网络技术有限公司 页面显示方法、装置、设备及存储介质

Also Published As

Publication number Publication date
WO2021082760A1 (zh) 2021-05-06
CN110827378B (zh) 2023-06-09
US20220405986A1 (en) 2022-12-22

Similar Documents

Publication Publication Date Title
CN110827378B (zh) 虚拟形象的生成方法、装置、终端及存储介质
CN110766777B (zh) 虚拟形象的生成方法、装置、电子设备及存储介质
CN110782515A (zh) 虚拟形象的生成方法、装置、电子设备及存储介质
CN111476871B (zh) 用于生成视频的方法和装置
CN110298906B (zh) 用于生成信息的方法和装置
CN111368685B (zh) 关键点的识别方法、装置、可读介质和电子设备
JP2021528742A (ja) 画像処理方法及び装置、電子機器、並びに記憶媒体
CN110827379A (zh) 虚拟形象的生成方法、装置、终端及存储介质
CN110796721A (zh) 虚拟形象的颜色渲染方法、装置、终端及存储介质
CN112527115B (zh) 用户形象生成方法、相关装置及计算机程序产品
CN109145970B (zh) 基于图像的问答处理方法和装置、电子设备及存储介质
CN114331820A (zh) 图像处理方法、装置、电子设备及存储介质
CN113806306B (zh) 媒体文件处理方法、装置、设备、可读存储介质及产品
WO2023185671A1 (zh) 风格图像生成方法、装置、设备及介质
CN112351327A (zh) 人脸图像的处理方法、装置、终端及存储介质
WO2023207381A1 (zh) 图像处理方法、装置、电子设备和存储介质
CN110619602B (zh) 一种图像生成方法、装置、电子设备及存储介质
CN109949213B (zh) 用于生成图像的方法和装置
CN110046571B (zh) 用于识别年龄的方法和装置
CN116596748A (zh) 图像风格化处理方法、装置、设备、存储介质和程序产品
CN115272151A (zh) 图像处理方法、装置、设备及存储介质
CN115937356A (zh) 图像处理方法、装置、设备及介质
CN111586295B (zh) 图像生成方法、装置和电子设备
CN113655933A (zh) 文本标注方法及装置、存储介质及电子设备
CN111260756A (zh) 用于发送信息的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant