CN115619912A - 一种基于虚拟现实技术的动漫人物展示系统及方法 - Google Patents

一种基于虚拟现实技术的动漫人物展示系统及方法 Download PDF

Info

Publication number
CN115619912A
CN115619912A CN202211329833.3A CN202211329833A CN115619912A CN 115619912 A CN115619912 A CN 115619912A CN 202211329833 A CN202211329833 A CN 202211329833A CN 115619912 A CN115619912 A CN 115619912A
Authority
CN
China
Prior art keywords
model
demonstration
action
data
cartoon character
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211329833.3A
Other languages
English (en)
Other versions
CN115619912B (zh
Inventor
郑德权
吕念
雷俊文
吴毅峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Zhugegua Technology Co ltd
Original Assignee
Shenzhen Zhugegua Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Zhugegua Technology Co ltd filed Critical Shenzhen Zhugegua Technology Co ltd
Priority to CN202211329833.3A priority Critical patent/CN115619912B/zh
Publication of CN115619912A publication Critical patent/CN115619912A/zh
Application granted granted Critical
Publication of CN115619912B publication Critical patent/CN115619912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00Animation
    • G06T13/203D [Three Dimensional] animation
    • G06T13/403D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation

Abstract

本发明提出一种基于虚拟现实技术的动漫人物展示系统及方法,通过获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;分别获取每个所述演示人员的人物特征数据;根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;将每个所述演示人员的站位数据与动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;最后,将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。通过本发明的方案,增加了群体动作训练的趣味性,并且可以快速、精确地确定各个演示人员的站位点。

Description

一种基于虚拟现实技术的动漫人物展示系统及方法
技术领域
本发明涉及虚拟现实技术领域,具体涉及一种基于虚拟现实技术的动漫人物展示系统及方法。
背景技术
虚拟现实是指借助计算机系统及传感器技术人为创造一些三维场景或三维物体,在人造的三维场景中,每个物体相对于系统的坐标系都有一个位置与姿态。虚拟现实创造出一种崭新的人机交互状态,可以通过调动用户所有的感官,带来更加真实的、身临其境的体验,广泛应用于游戏、社交、教育等领。
目前,对于由多个人员进行群体性动作演示训练的场景,如舞蹈排练、体操排练、队列动作演示训练等,在训练或表演过程中都存在需要解决的难题,如人员缺席、人员在单独被隔离的情况下进行群体动作练习等,并没有利用虚拟现实技术来进行解决的有效方案。
发明内容
本发明正是基于上述问题,提出了一种基于虚拟现实技术的动漫人物展示系统及方法,通过本发明实施例的方案,可以根据每个演示人员的不同特点生成个性化的动漫人物,增加了群体动作训练的趣味性;另外,通过投影各个动漫人物到训练场地,可以快速且精确地确定各个演示人员的站位点。
有鉴于此,本发明的一方面提出了一种基于虚拟现实技术的动漫人物展示系统,应用于群体动作演示训练,包括:确定模块、获取模块、生成模块、处理模块和投影模块;
所述确定模块,用于获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;
所述获取模块,用于分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;
所述生成模块,用于根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;
所述处理模块,用于根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;
所述处理模块,还用于将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;
所述投影模块,用于将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。
可选地,还包括智能镜;
所述获取模块,还用于采集所述演示人员的现场演示视频数据;
所述智能镜,用于接收所述现场演示视频数据,并显示所述演示人员的演示视频。
可选地,所述人物特征数据至少包括人脸图像、身材数据、性别数据;
在所述根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型的步骤中,所述生成模块具体用于:
根据所述人脸图像从标准动漫模型库中选择每个所述演示人员对应的动漫模型;
根据所述身材数据和所述性别数据对所述动漫模型进行修正,得到所述基础动漫人物模型。
可选地,在所述采集所述演示人员的现场演示视频数据的步骤之后,所述处理模块还用于:
根据所述现场演示视频数据判断所述群体动作演示组是否存在缺席人员;
当存在人员缺席时,从所述动漫人物模型确定所述缺席人员对应的第一动漫人物模型;
将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;
将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
可选地,所述处理模块,还用于:
检测所述演示人员的动作是否符合所述演示动作模型;
当不符合时,发出提示信息,并在所述智能镜里以所述动漫人物模型显示纠正画面。
本发明的另一方面一种基于虚拟现实技术的动漫人物展示方法,应用于群体动作演示训练,包括:
获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;
分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;
根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;
根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;
将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;
将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。
可选地,所述方法还包括:
采集所述演示人员的现场演示视频数据;
将所述所述现场演示视频数据发送至智能镜;
控制所述智能镜显示所述演示人员的演示视频。
可选地,所述人物特征数据至少包括人脸图像、身材数据、性别数据;
所述根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型的步骤,包括:
根据所述人脸图像从标准动漫模型库中选择每个所述演示人员对应的动漫模型;
根据所述身材数据和所述性别数据对所述动漫模型进行修正,得到所述基础动漫人物模型。
可选地,所述采集所述演示人员的现场演示视频数据的步骤之后,还包括:
根据所述现场演示视频数据判断所述群体动作演示组是否存在缺席人员;
当存在人员缺席时,从所述动漫人物模型确定所述缺席人员对应的第一动漫人物模型;
将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;
将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
可选地,所述方法还包括:
检测所述演示人员的动作是否符合所述演示动作模型;
当不符合时,发出提示信息,并在所述智能镜里以所述动漫人物模型显示纠正画面。
采用本发明的技术方案,基于虚拟现实技术的动漫人物展示系统设置确定模块、获取模块、生成模块、处理模块和投影模块;所述确定模块,用于获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;所述获取模块,用于分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;所述生成模块,用于根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;所述处理模块,用于根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;所述处理模块,还用于将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;所述投影模块,用于将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。通过本发明实施例的方案,可以根据每个演示人员的不同特点生成个性化的动漫人物,增加了群体动作训练的趣味性;另外,通过投影各个动漫人物到训练场地,可以快速且精确地确定各个演示人员的站位点。
附图说明
图1是本发明一个实施例提供的基于虚拟现实技术的动漫人物展示系统的示意框图;
图2是本发明另一个实施例提供的基于虚拟现实技术的动漫人物展示方法流程图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是,在不冲突的情况下,本申请的实施例及实施例中的特征可以相互组合。
在下面的描述中阐述了很多具体细节以便于充分理解本发明,但是,本发明还可以采用其他不同于在此描述的方式来实施,因此,本发明的保护范围并不受下面公开的具体实施例的限制。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
下面参照图1至图2来描述根据本发明一些实施方式提供的一种基于虚拟现实技术的动漫人物展示系统及方法。
如图1所示,本发明一个实施例提供一种基于虚拟现实技术的动漫人物展示系统,应用于群体动作演示训练,包括:确定模块、获取模块、生成模块、处理模块和投影模块;
所述确定模块,用于获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;
所述获取模块,用于分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;
所述生成模块,用于根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;
所述处理模块,用于根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;
所述处理模块,还用于将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;
所述投影模块,用于将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。
可以理解的是,在实际生活中,存在由多个人员进行群体性动作演示训练的场景,如舞蹈排练、体操排练、队列动作演示训练等。在本发明的实施例中,所述演示动作模型包括人员数量、人员性别比例、人员身材要求数据、人员站位数据、各个人员基于时间的动作序列、随身道具数据等;首先,根据所述演示动作模型从备选演示人员总数据中选择多个演示人员作为群体动作演示组。其次,分别获取所述群体动作演示组内每个所述演示人员的人物特征数据,其中,所述人物特征数据至少包括人脸图像、身材数据、性别数据、健康数据、运动能力评估数据等中的一种;所述人物特征数据可以通过摄像装置、生理数据采集装置等进行采集后再进行处理得到。接着,根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型,比如可以从标准动漫模型库选择与所述人物特征数据相匹配的动漫模型作为对应的基础动漫人物模型(或者将相匹配的动漫模型根据预设的方法进行修正后作为对应的基础动漫人物模型)。然后,根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列,并将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型,以控制每个所述动漫人物模型运动;最后,将所述动漫人物模型投射到训练场地以定位各个所述演示人员的站位点。
采用该实施例的技术方案,所述动漫人物展示系统包括:确定模块、获取模块、生成模块、处理模块和投影模块;所述确定模块,用于获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;所述获取模块,用于分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;所述生成模块,用于根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;所述处理模块,用于根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;所述处理模块,还用于将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;所述投影模块,用于将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。通过本发明实施例的方案,可以根据每个演示人员的不同特点生成个性化的动漫人物,增加了群体动作训练的趣味性;另外,通过投影各个动漫人物到训练场地,可以快速且精确地确定各个演示人员的站位点。
应当知道的是,图1所示的基于虚拟现实技术的动漫人物展示系统的框图仅作示意,其所示出的各模块的数量并不对本发明的保护范围进行限定。
在本发明一些可能的实施方式中,还包括智能镜;
所述获取模块,还用于采集所述演示人员的现场演示视频数据;
所述智能镜,用于接收所述现场演示视频数据,并显示所述演示人员的演示视频。
应当说明的是,在本发明的实施例中,所述智能镜可以是像镜子一样显示所述演示人员的镜像的电子显示设备,如可以为通过摄像头实时获取所述演示人员的图像数据并呈现出镜面显示效果的显示器。通过获取模块采集所述演示人员的现场演示视频数据,对所述现场演示视频数据进行预处理后发送至所述智能镜;所述智能镜接收所述现场演示视频数据,并显示所述演示人员的演示视频。通过本实施的方案,可以让演示人员从智能镜里清楚观察到自身的动作以及其他人员的动作,有利于避免失误和纠正动作。
在本发明一些可能的实施方式中,所述人物特征数据至少包括人脸图像、身材数据、性别数据;
在所述根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型的步骤中,所述生成模块具体用于:
根据所述人脸图像从标准动漫模型库中选择每个所述演示人员对应的动漫模型;
根据所述身材数据和所述性别数据对所述动漫模型进行修正,得到所述基础动漫人物模型。
可以理解的是,为了生成更匹配的动漫人物模型,在本发明的实施例中,可以预先设置好标准动漫模型库,所述标准动漫模型库中包含有标准动漫人物构件,如头部构件、脸部构件、五官构件、四肢构件、皮肤构件、毛发构件和服饰构件等;采集的所述人物特征数据至少包括人脸图像、身材数据、性别数据,以及包含有由各个标准动漫人物构件构成的标准动漫模型;根据从所述人物特征数据中提取的人脸数据,可以从标准动漫模型库中选择每个所述演示人员的人脸数据对应的动漫模型(如人脸相似度达到预设值的动漫模型),再根据所述身材数据和所述性别数据对所述动漫模型进行修正(如修改身材比例、更换能区别性别的服饰等),得到所述基础动漫人物模型。
在本发明一些可能的实施方式中,在所述采集所述演示人员的现场演示视频数据的步骤之后,所述处理模块还用于:
根据所述现场演示视频数据判断所述群体动作演示组是否存在缺席人员;
当存在人员缺席时,从所述动漫人物模型确定所述缺席人员对应的第一动漫人物模型;
将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;
将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
可以理解的是,在实际的训练或表演中,可能会出现有人员因特殊情况而缺席的状况,为了保证良好的训练效果,在本发明的实施例中,首先,对所述现场演示视频数据进行人脸识别,以判断所述群体动作演示组是否存在缺席人员;当存在人员缺席时,从所述动漫人物模型中确定所述缺席人员对应的第一动漫人物模型,如前每个所述所述动漫人物模型中包含有其对应的动作序列,将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
进一步地,为了更好的视觉效果,可以在将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据后,根据所述动画视频数据,通过三维投影技术及相关设备将缺席人员的所述第一动漫人物模型的三维动画投影到训练场地或表演场地。
在本发明一些可能的实施方式中,所述处理模块,还用于:
检测所述演示人员的动作是否符合所述演示动作模型;
当不符合时,发出提示信息,并在所述智能镜里以所述动漫人物模型显示纠正画面。
可以理解的是,在训练过程中难免会出现动作失误、变形或者忘记动作的情况,为了提高训练效率,在本发明的实施例中,首先检测所述演示人员的动作是否符合所述演示动作模型;当不符合时,发出提示信息,如通过智能镜进行语音提示、声光提示、文字提示等;并且在所述智能镜里以所述动漫人物模型显示纠正画面,如播放出现错误的人员对应动漫人物模型的标准动作动画视频。
请参见图2,本发明的另一实施例提供一种基于虚拟现实技术的动漫人物展示方法,应用于群体动作演示训练,包括:
获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;
分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;
根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;
根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;
将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;
将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。
可以理解的是,在实际生活中,存在由多个人员进行群体性动作演示训练的场景,如舞蹈排练、体操排练、队列动作演示训练等。在本发明的实施例中,所述演示动作模型包括人员数量、人员性别比例、人员身材要求数据、人员站位数据、各个人员基于时间的动作序列、随身道具数据等;首先,根据所述演示动作模型从备选演示人员总数据中选择多个演示人员作为群体动作演示组。其次,分别获取所述群体动作演示组内每个所述演示人员的人物特征数据,其中,所述人物特征数据至少包括人脸图像、身材数据、性别数据、健康数据、运动能力评估数据等中的一种;所述人物特征数据可以通过摄像装置、生理数据采集装置等进行采集后再进行处理得到。接着,根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型,比如可以从标准动漫模型库选择与所述人物特征数据相匹配的动漫模型作为对应的基础动漫人物模型(或者将相匹配的动漫模型根据预设的方法进行修正后作为对应的基础动漫人物模型)。然后,根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列,并将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型,以控制每个所述动漫人物模型运动;最后,将所述动漫人物模型通过三维投影技术及相关设备投射到训练场地以定位各个所述演示人员的站位点。
采用该实施例的技术方案,通过获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;再分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;最后,将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。通过本发明实施例的方案,可以根据每个演示人员的不同特点生成个性化的动漫人物,增加了群体动作训练的趣味性;另外,通过投影各个动漫人物到训练场地,可以快速且精确地确定各个演示人员的站位点。
在本发明一些可能的实施方式中,所述方法还包括:
采集所述演示人员的现场演示视频数据;
将所述所述现场演示视频数据发送至智能镜;
控制所述智能镜显示所述演示人员的演示视频。
应当说明的是,在本发明的实施例中,所述智能镜可以是像镜子一样显示所述演示人员的镜像的电子显示设备,如可以为通过摄像头实时获取所述演示人员的图像数据并呈现出镜面显示效果的显示器。通过采集所述演示人员的现场演示视频数据,对所述现场演示视频数据进行预处理后发送至所述智能镜,控制所述智能镜以镜像的形式显示所述演示人员的演示视频。通过本实施的方案,可以让演示人员从智能镜里清楚观察到自身的动作以及其他人员的动作,有利于避免失误和纠正动作。
在本发明一些可能的实施方式中,所述人物特征数据至少包括人脸图像、身材数据、性别数据;
所述根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型的步骤,包括:
根据所述人脸图像从标准动漫模型库中选择每个所述演示人员对应的动漫模型;
根据所述身材数据和所述性别数据对所述动漫模型进行修正,得到所述基础动漫人物模型。
可以理解的是,为了生成更匹配的动漫人物模型,在本发明的实施例中,可以预先设置好标准动漫模型库,所述标准动漫模型库中包含有标准动漫人物构件,如头部构件、脸部构件、五官构件、四肢构件、皮肤构件、毛发构件和服饰构件等;采集的所述人物特征数据至少包括人脸图像、身材数据、性别数据,以及包含有由各个标准动漫人物构件构成的标准动漫模型;根据从所述人物特征数据中提取的人脸数据,可以从标准动漫模型库中选择每个所述演示人员的人脸数据对应的动漫模型(如人脸相似度达到预设值的动漫模型),再根据所述身材数据和所述性别数据对所述动漫模型进行修正(如修改身材比例、更换能区别性别的服饰等),得到所述基础动漫人物模型。
在本发明一些可能的实施方式中,所述采集所述演示人员的现场演示视频数据的步骤之后,还包括:
根据所述现场演示视频数据判断所述群体动作演示组是否存在缺席人员;
当存在人员缺席时,从所述动漫人物模型确定所述缺席人员对应的第一动漫人物模型;
将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;
将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
可以理解的是,在实际的训练或表演中,可能会出现有人员因特殊情况而缺席的状况,为了保证良好的训练效果,在本发明的实施例中,首先,对所述现场演示视频数据进行人脸识别,以判断所述群体动作演示组是否存在缺席人员;当存在人员缺席时,从所述动漫人物模型中确定所述缺席人员对应的第一动漫人物模型,如前每个所述所述动漫人物模型中包含有其对应的动作序列,将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
进一步地,为了更好的视觉效果,可以在将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据后,根据所述动画视频数据,通过三维投影技术及相关设备将缺席人员的所述第一动漫人物模型的三维动画投影到训练场地或表演场地。
在本发明一些可能的实施方式中,所述方法还包括:
检测所述演示人员的动作是否符合所述演示动作模型;
当不符合时,发出提示信息,并在所述智能镜里以所述动漫人物模型显示纠正画面。
可以理解的是,在训练过程中难免会出现动作失误、变形或者忘记动作的情况,为了提高训练效率,在本发明的实施例中,首先检测所述演示人员的动作是否符合所述演示动作模型;当不符合时,发出提示信息,如通过智能镜进行语音提示、声光提示、文字提示等;并且在所述智能镜里以所述动漫人物模型显示纠正画面,如播放出现错误的人员对应动漫人物模型的标准动作动画视频。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,可轻易想到变化或替换,均可作各种更动与修改,包含上述不同功能、实施步骤的组合,包含软件和硬件的实施方式,均在本发明的保护范围。

Claims (10)

1.一种基于虚拟现实技术的动漫人物展示系统,应用于群体动作演示训练,其特征在于,包括:确定模块、获取模块、生成模块、处理模块和投影模块;
所述确定模块,用于获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;
所述获取模块,用于分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;
所述生成模块,用于根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;
所述处理模块,用于根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;
所述处理模块,还用于将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;
所述投影模块,用于将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。
2.根据权利要求1所述的基于虚拟现实技术的动漫人物展示系统,其特征在于,还包括智能镜;
所述获取模块,还用于采集所述演示人员的现场演示视频数据;
所述智能镜,用于接收所述现场演示视频数据,并显示所述演示人员的演示视频。
3.根据权利要求2所述的基于虚拟现实技术的动漫人物展示系统,其特征在于,所述人物特征数据至少包括人脸图像、身材数据、性别数据;
在所述根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型的步骤中,所述生成模块具体用于:
根据所述人脸图像从标准动漫模型库中选择每个所述演示人员对应的动漫模型;
根据所述身材数据和所述性别数据对所述动漫模型进行修正,得到所述基础动漫人物模型。
4.根据权利要求3所述的基于虚拟现实技术的动漫人物展示系统,其特征在于,在所述采集所述演示人员的现场演示视频数据的步骤之后,所述处理模块还用于:
根据所述现场演示视频数据判断所述群体动作演示组是否存在缺席人员;
当存在人员缺席时,从所述动漫人物模型确定所述缺席人员对应的第一动漫人物模型;
将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;
将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
5.根据权利要求4所述的基于虚拟现实技术的动漫人物展示系统,其特征在于,所述处理模块,还用于:
检测所述演示人员的动作是否符合所述演示动作模型;
当不符合时,发出提示信息,并在所述智能镜里以所述动漫人物模型显示纠正画面。
6.一种基于虚拟现实技术的动漫人物展示方法,应用于群体动作演示训练,其特征在于,包括:
获取演示动作模型,并根据所述演示动作模型确定多个演示人员作为群体动作演示组;
分别获取所述群体动作演示组内每个所述演示人员的人物特征数据;
根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型;
根据所述演示动作模型和所述人物特征模型分别确定每个所述演示人员的站位数据与动作序列;
将每个所述演示人员的所述站位数据与所述动作序列分别融合到每个所述演示人员对应的所述基础动漫人物模型,得到动漫人物模型;
将所述动漫人物模型投射到训练场地以定位所述演示人员的站位点。
7.根据权利要求6所述的基于虚拟现实技术的动漫人物展示方法,其特征在于,所述方法还包括:
采集所述演示人员的现场演示视频数据;
将所述所述现场演示视频数据发送至智能镜;
控制所述智能镜显示所述演示人员的演示视频。
8.根据权利要求7所述的基于虚拟现实技术的动漫人物展示方法,其特征在于,所述人物特征数据至少包括人脸图像、身材数据、性别数据;
所述根据所述人物特征数据分别生成每个所述演示人员对应的基础动漫人物模型的步骤,包括:
根据所述人脸图像从标准动漫模型库中选择每个所述演示人员对应的动漫模型;
根据所述身材数据和所述性别数据对所述动漫模型进行修正,得到所述基础动漫人物模型。
9.根据权利要求8所述的基于虚拟现实技术的动漫人物展示方法,其特征在于,所述采集所述演示人员的现场演示视频数据的步骤之后,还包括:
根据所述现场演示视频数据判断所述群体动作演示组是否存在缺席人员;
当存在人员缺席时,从所述动漫人物模型确定所述缺席人员对应的第一动漫人物模型;
将所述第一动漫人物模型按其对应的动作序列生成所述第一动漫人物模型的动画视频数据;
将所述动画视频数据与所述现场演示视频数据融合,得到融合后的现场演示视频数据。
10.根据权利要求9所述的基于虚拟现实技术的动漫人物展示方法,其特征在于,所述方法还包括:
检测所述演示人员的动作是否符合所述演示动作模型;
当不符合时,发出提示信息,并在所述智能镜里以所述动漫人物模型显示纠正画面。
CN202211329833.3A 2022-10-27 2022-10-27 一种基于虚拟现实技术的动漫人物展示系统及方法 Active CN115619912B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211329833.3A CN115619912B (zh) 2022-10-27 2022-10-27 一种基于虚拟现实技术的动漫人物展示系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211329833.3A CN115619912B (zh) 2022-10-27 2022-10-27 一种基于虚拟现实技术的动漫人物展示系统及方法

Publications (2)

Publication Number Publication Date
CN115619912A true CN115619912A (zh) 2023-01-17
CN115619912B CN115619912B (zh) 2023-06-13

Family

ID=84876396

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211329833.3A Active CN115619912B (zh) 2022-10-27 2022-10-27 一种基于虚拟现实技术的动漫人物展示系统及方法

Country Status (1)

Country Link
CN (1) CN115619912B (zh)

Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102693091A (zh) * 2012-05-22 2012-09-26 深圳市环球数码创意科技有限公司 一种三维虚拟角色的实现方法及其系统
CN103578135A (zh) * 2013-11-25 2014-02-12 恒德数字舞美科技有限公司 虚拟影像与真实场景相结合的舞台交互集成系统及实现方法
CN205334369U (zh) * 2015-09-22 2016-06-22 深圳数虎图像股份有限公司 基于动作捕捉的舞台表演系统
CN107248195A (zh) * 2017-05-31 2017-10-13 珠海金山网络游戏科技有限公司 一种增强现实的主播方法、装置和系统
CN107277599A (zh) * 2017-05-31 2017-10-20 珠海金山网络游戏科技有限公司 一种虚拟现实的直播方法、装置和系统
CN108200445A (zh) * 2018-01-12 2018-06-22 北京蜜枝科技有限公司 虚拟形象的虚拟演播系统及方法
CN108304064A (zh) * 2018-01-09 2018-07-20 上海大学 基于被动式光学动作捕捉的多人虚拟预演系统
CN108376487A (zh) * 2018-02-09 2018-08-07 冯侃 基于虚拟现实中的肢体训练系统及方法
CN108831218A (zh) * 2018-06-15 2018-11-16 邹浩澜 基于虚拟现实的远程教学系统
CN108986190A (zh) * 2018-06-21 2018-12-11 珠海金山网络游戏科技有限公司 一种基于三维动画中非人形角色的虚拟主播的方法和系统
CN110013678A (zh) * 2019-05-09 2019-07-16 浙江棱镜文化传媒有限公司 沉浸式互动全景全息剧院演出系统、方法及应用
CN110650354A (zh) * 2019-10-12 2020-01-03 苏州大禹网络科技有限公司 虚拟动漫角色直播方法、系统、设备及存储介质
CN111369652A (zh) * 2020-02-28 2020-07-03 长沙千博信息技术有限公司 一种基于多个单独手语动作产生连续手语动作的方法
CN111640193A (zh) * 2020-06-05 2020-09-08 浙江商汤科技开发有限公司 文字处理方法、装置、计算机设备及存储介质
CN111698543A (zh) * 2020-05-28 2020-09-22 厦门友唱科技有限公司 基于演唱场景的交互实现方法、介质及系统
CN112882575A (zh) * 2021-02-24 2021-06-01 宜春职业技术学院(宜春市技术工人学校) 一种全景舞蹈动作建模方法及舞蹈教学辅助系统
CN113012504A (zh) * 2021-02-24 2021-06-22 宜春职业技术学院(宜春市技术工人学校) 一种多人舞蹈教学互动投影方法、装置及设备
CN113240782A (zh) * 2021-05-26 2021-08-10 完美世界(北京)软件科技发展有限公司 基于虚拟角色的流媒体生成方法及装置
CN113822970A (zh) * 2021-09-23 2021-12-21 广州博冠信息科技有限公司 直播控制方法、装置、存储介质与电子设备
CN114363689A (zh) * 2022-01-11 2022-04-15 广州博冠信息科技有限公司 直播控制方法、装置、存储介质及电子设备
CN114419285A (zh) * 2020-11-23 2022-04-29 宁波新文三维股份有限公司 应用于复合型剧场的虚拟人物表演控制方法和系统
CN115187108A (zh) * 2022-07-21 2022-10-14 湖南芒果无际科技有限公司 基于虚拟舞台的分布式彩排方法及系统

Patent Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102693091A (zh) * 2012-05-22 2012-09-26 深圳市环球数码创意科技有限公司 一种三维虚拟角色的实现方法及其系统
CN103578135A (zh) * 2013-11-25 2014-02-12 恒德数字舞美科技有限公司 虚拟影像与真实场景相结合的舞台交互集成系统及实现方法
CN205334369U (zh) * 2015-09-22 2016-06-22 深圳数虎图像股份有限公司 基于动作捕捉的舞台表演系统
CN107248195A (zh) * 2017-05-31 2017-10-13 珠海金山网络游戏科技有限公司 一种增强现实的主播方法、装置和系统
CN107277599A (zh) * 2017-05-31 2017-10-20 珠海金山网络游戏科技有限公司 一种虚拟现实的直播方法、装置和系统
CN108304064A (zh) * 2018-01-09 2018-07-20 上海大学 基于被动式光学动作捕捉的多人虚拟预演系统
CN108200445A (zh) * 2018-01-12 2018-06-22 北京蜜枝科技有限公司 虚拟形象的虚拟演播系统及方法
CN108376487A (zh) * 2018-02-09 2018-08-07 冯侃 基于虚拟现实中的肢体训练系统及方法
CN108831218A (zh) * 2018-06-15 2018-11-16 邹浩澜 基于虚拟现实的远程教学系统
CN108986190A (zh) * 2018-06-21 2018-12-11 珠海金山网络游戏科技有限公司 一种基于三维动画中非人形角色的虚拟主播的方法和系统
CN110013678A (zh) * 2019-05-09 2019-07-16 浙江棱镜文化传媒有限公司 沉浸式互动全景全息剧院演出系统、方法及应用
CN110650354A (zh) * 2019-10-12 2020-01-03 苏州大禹网络科技有限公司 虚拟动漫角色直播方法、系统、设备及存储介质
CN111369652A (zh) * 2020-02-28 2020-07-03 长沙千博信息技术有限公司 一种基于多个单独手语动作产生连续手语动作的方法
CN111698543A (zh) * 2020-05-28 2020-09-22 厦门友唱科技有限公司 基于演唱场景的交互实现方法、介质及系统
CN111640193A (zh) * 2020-06-05 2020-09-08 浙江商汤科技开发有限公司 文字处理方法、装置、计算机设备及存储介质
CN114419285A (zh) * 2020-11-23 2022-04-29 宁波新文三维股份有限公司 应用于复合型剧场的虚拟人物表演控制方法和系统
CN112882575A (zh) * 2021-02-24 2021-06-01 宜春职业技术学院(宜春市技术工人学校) 一种全景舞蹈动作建模方法及舞蹈教学辅助系统
CN113012504A (zh) * 2021-02-24 2021-06-22 宜春职业技术学院(宜春市技术工人学校) 一种多人舞蹈教学互动投影方法、装置及设备
CN113240782A (zh) * 2021-05-26 2021-08-10 完美世界(北京)软件科技发展有限公司 基于虚拟角色的流媒体生成方法及装置
CN113822970A (zh) * 2021-09-23 2021-12-21 广州博冠信息科技有限公司 直播控制方法、装置、存储介质与电子设备
CN114363689A (zh) * 2022-01-11 2022-04-15 广州博冠信息科技有限公司 直播控制方法、装置、存储介质及电子设备
CN115187108A (zh) * 2022-07-21 2022-10-14 湖南芒果无际科技有限公司 基于虚拟舞台的分布式彩排方法及系统

Also Published As

Publication number Publication date
CN115619912B (zh) 2023-06-13

Similar Documents

Publication Publication Date Title
CN109432753B (zh) 动作矫正方法、装置、存储介质及电子设备
CN109815776B (zh) 动作提示方法和装置、存储介质及电子装置
CN108304762B (zh) 一种人体姿态匹配方法及其设备、存储介质、终端
CN111080759B (zh) 一种分镜效果的实现方法、装置及相关产品
JP2022505998A (ja) 拡張現実データの提示方法、装置、電子機器及び記憶媒体
CN111640197A (zh) 一种增强现实ar特效控制方法、装置及设备
CN113946211A (zh) 基于元宇宙的多个对象的交互方法及相关设备
CN110782482A (zh) 运动评估方法、装置、计算机设备及存储介质
CN111638797A (zh) 一种展示控制方法及装置
CN112528768A (zh) 视频中的动作处理方法、装置、电子设备及存储介质
CN111639613B (zh) 一种增强现实ar特效生成方法、装置及电子设备
CN111667588A (zh) 人物图像处理方法、装置、ar设备以及存储介质
CN114332374A (zh) 一种虚拟显示方法、设备以及存储介质
CN112905014A (zh) Ar场景下的交互方法、装置、电子设备及存储介质
CN111652983A (zh) 一种增强现实ar特效生成方法、装置及设备
CN111651058A (zh) 历史场景的控制展示方法、装置、电子设备及存储介质
JPWO2018135246A1 (ja) 情報処理システム及び情報処理装置
CN108833964B (zh) 一种实时的连续帧信息植入识别系统
CN113556599A (zh) 视频教学方法、装置、电视机及存储介质
CN111464859B (zh) 一种在线视频展示的方法、装置、计算机设备及存储介质
CN107544660B (zh) 一种信息处理方法及电子设备
CN115619912B (zh) 一种基于虚拟现实技术的动漫人物展示系统及方法
CN111491195B (zh) 一种在线视频展示的方法及装置
CN113345110A (zh) 特效展示方法、装置、电子设备及存储介质
CN111625103A (zh) 雕塑展示方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant