CN112581572A - 一种动作采集方法、系统、装置及计算机存储介质 - Google Patents
一种动作采集方法、系统、装置及计算机存储介质 Download PDFInfo
- Publication number
- CN112581572A CN112581572A CN202011432260.8A CN202011432260A CN112581572A CN 112581572 A CN112581572 A CN 112581572A CN 202011432260 A CN202011432260 A CN 202011432260A CN 112581572 A CN112581572 A CN 112581572A
- Authority
- CN
- China
- Prior art keywords
- motion
- moving object
- virtual
- skeleton
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000009471 action Effects 0.000 title claims abstract description 59
- 238000000034 method Methods 0.000 title claims abstract description 53
- 230000033001 locomotion Effects 0.000 claims abstract description 274
- 238000013507 mapping Methods 0.000 claims abstract description 36
- 238000007781 pre-processing Methods 0.000 claims abstract description 15
- 210000000988 bone and bone Anatomy 0.000 claims description 33
- 125000006850 spacer group Chemical group 0.000 claims description 3
- 230000008569 process Effects 0.000 abstract description 12
- 238000010586 diagram Methods 0.000 description 8
- 241001465754 Metazoa Species 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 238000000354 decomposition reaction Methods 0.000 description 1
- 210000001513 elbow Anatomy 0.000 description 1
- 210000003414 extremity Anatomy 0.000 description 1
- 210000000245 forearm Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000002985 plastic film Substances 0.000 description 1
- 210000002832 shoulder Anatomy 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T13/00—Animation
- G06T13/20—3D [Three Dimensional] animation
- G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Processing Or Creating Images (AREA)
Abstract
本申请公开了一种动作采集方法、系统、装置及计算机存储介质,用于降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。本申请方法包括:获取运动物体的动作视频,所述动作视频的内容包含所述运动物体的运动动作,所述运动物体包含若干定位片;对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息;根据所述运动轨迹信息反向分析得到运动物体的运动参数;建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系;根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动。
Description
技术领域
本申请涉及数据处理领域,尤其涉及一种动作采集方法、系统、装置及计算机存储介质。
背景技术
动作采集一般是指通过在运动物体的关键部位上述安装动作采集设备,再经过计算机处理后得到三维空间中的运动轨迹。而常用的运动采集设备从原理上说可分为机械式、声学式、电磁式、主动光学式和被动光学式,不同原理的设备各有其优缺点。近年来,动作采集被广泛应用于虚拟现实、三维游戏、人体生物工程学等很多领域。
现有技术中,动作采集在动画制作领域尤其常见,通过在人的身上安装非常多的传感器,再通过专业的动作采集设备采集各种动作,再交由计算机将这些动作复制到动画角色上。但这些传感器和动作采集设备的使用过于专业,需要借助场地、设备和人员的支持,且成本昂贵,使得一般用户无法获得并使用。
发明内容
为了解决上述技术问题,本申请提供了一种动作采集方法、系统、装置及计算机存储介质,用于降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。
本申请第一方面提供了一种动作采集方法,所述方法应用于三维虚拟世界,所述三维虚拟世界中包含有虚拟模型,所述虚拟模型配置有虚拟骨骼,所述方法包括:
获取运动物体的动作视频,所述动作视频的内容包含所述运动物体的运动动作,所述运动物体包含若干定位片;
对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息;
根据所述运动轨迹信息反向分析得到所述运动物体的运动参数;
建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系;
根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动。
可选的,在所述建立所述若干个定位片中每一个定位片与所述虚拟骨骼的各个骨骼之间的映射关系之前,所述方法还包括:
获取所述运动物体的预设信息,所述预设信息包括所述运动物体的外形信息和骨骼信息;
在所述三维虚拟世界中根据所述外形信息创建虚拟模型;
根据所述骨骼信息为所述虚拟模型配置虚拟骨骼。
可选的,所述对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息包括:
将所述动作视频分解得到若干视频帧;
在每个所述视频帧中提取所述定位片的位置数据;
根据所述位置数据计算得到定位片的运动轨迹信息。
可选的,所述建立所述若干个定位片中每一个定位片与所述虚拟骨骼的各个骨骼之间的映射关系包括:
确定所述若干个定位片之间的第一位置关系;
确定所述虚拟骨骼中各个骨骼之间的第二位置关系;
根据所述第一位置关系和所述第二位置关系建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系。
可选的,所述根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动包括:
根据所述映射关系为所述虚拟骨骼中各个骨骼匹配对应的运动参数;
根据所述运动参数控制所述虚拟骨骼中各个骨骼的运动。
可选的,所述根据所述运动轨迹信息反向分析得到所述运动物体的运动参数包括:
根据所述运动轨迹信息计算目标运动参数,所述目标运动参数包括运动速度参数、运动方向参数和运动角度参数;
将所述目标运动参数确定为所述运动物体的运动参数。
可选的,所述根据所述运动轨迹信息反向分析得到所述运动物体的运动参数包括:
根据所述运动轨迹信息在模板数据库中匹配模板运动参数,所述模板数据库中预存有模板动作和与所述模板动作对应的模板运动参数;
将所述模板运动参数确定为所述运动物体的运动参数。
本申请第二方面提供了一种动作采集系统,所述系统包括:
第一获取单元,用于获取运动物体的动作视频,所述动作视频的内容包含所述运动物体的运动动作,所述运动物体包含若干定位片;
预处理单元,用于对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息;
分析单元,用于根据所述运动轨迹信息反向分析得到运动物体的运动参数;
建立单元,用于建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系;
控制单元,用于根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动。
本申请第三方面提供了一种动作采集装置,所述装置包括:
处理器、存储器、输入输出单元以及总线;
所述处理器与所述存储器、所述输入输出单元以及所述总线相连;
所述存储器保存有程序,所述处理器调用所述程序以执行第一方面以及第一方面中任一项可选的动作采集方法。
本申请第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质上保存有程序,所述程序在计算机上执行时执行第一方面以及第一方面中任一项可选的动作采集方法。
从以上技术方案可以看出,本申请具有以下优点:
通过在运动物体上设置定位片,拍摄下运动物体的动作视频,并通过分析视频中所记录的定位片的运动轨迹信息,得到运动物体的运动参数,再将这些运动参数映射到三维虚拟世界的虚拟模型对应的虚拟骨骼上,以控制虚拟模型模仿运动物体进行运动。本发明不受设备和空间的限制,可有效降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。
附图说明
为了更清楚地说明本申请中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请提供的动作采集方法一个实施例流程示意图;
图2为本申请提供的动作采集方法另一个实施例流程示意图;
图3为本申请提供的动作采集系统一个实施例结构示意图;
图4为本申请提供的动作采集系统另一个实施例结构示意图;
图5为本申请提供的动作采集装置一个实施例结构示意图。
具体实施方式
本申请提供了一种动作采集方法、系统、装置及计算机存储介质,用于降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。
需要说明的是,本申请提供的动作采集方法,可以应用于终端也可以应用于系统,还可以应用于服务器上,例如终端可以是智能手机或电脑、平板电脑、智能电视、智能手表、便携计算机终端也可以是台式计算机等固定终端。为方便阐述,本申请中以终端为执行主体进行举例说明。
请参阅图1,图1为本申请提供的动作采集方法的一个实施例,该方法应用于三维虚拟世界,该三维虚拟世界中包含有虚拟模型,该虚拟模型配置有虚拟骨骼,该方法包括:
101、获取运动物体的动作视频,获取运动物体的动作视频,该动作视频的内容包含该运动物体的运动动作,该运动物体包含若干定位片;
在实际应用中,三维虚拟世界中可以包含有例如天空、地面以及河流等虚拟景像,三维虚拟世界中还包含若干虚拟模型,本申请中的虚拟模型可以是虚拟的人物、动物以及科幻角色等角色对象,而虚拟模型配置有与角色对象形态对应的虚拟骨骼。本申请通过采集现实环境中运动物体的动作,以此来控制三维虚拟世界中虚拟模型的运动。
在进行动作采集前,需要在被采集的运动物体上设置定位片,并采用拍摄设备对其进行拍摄得到动作视频。具体的,可以在运动物体的一些关键骨骼部位设置定位片。需要说明的是,该定位片可以为普通纸片、反光纸,塑料片等可以用作标记的普通物品,一般可以采用粘贴方式或其他简单的方式设置在运动物体上,此处不做具体限定,该定位片的作用是使得终端通过采集其位置的变化来分析对应骨骼的运动,从而采集骨骼的相关运动参数。
由于动作视频中记录有各定位片的位置变化,所以终端可以通过获取该动作视频来完成动作采集。需要说明的是,终端所获取到的动作视频可以是通过手机或计算机摄像头等摄像装置实时采集运动物体的姿态动作的视频数据,也可以是用户通过手机或计算机等设备上传包含了运动物体的姿态动作的视频数据。
102、对该动作视频进行预处理,以获取该定位片的运动轨迹信息;
终端在获取到该动作视频后,需要对该动作视频进行预处理,以得到定位片的运动轨迹信息。需要说明的是,该预处理是指通过对动作视频进行相应的图像处理,以使得终端能够根据特征捕捉动作视频中的定位片位置。具体的,若定位片粘贴在运动物体的关键骨骼部位,定位片的运动轨迹信息在一定程度上即可代表运动物体关键骨骼处的运动轨迹信息。
103、根据该运动轨迹信息反向分析得到该运动物体的运动参数;
终端根据所获取到的定位片运动轨迹信息,对其进行反向分析得到运动物体的各种运动参数。具体的,运动参数包括运动方向、速度、角度、远近程度等。而反向分析具体是指将定位片的运动轨迹信息进行分解、重构,以推理出运动物体的运动参数。
104、建立该若干个定位片中每一个定位片与该虚拟骨骼中各个骨骼之间的映射关系;
将虚拟模型的虚拟骨骼中各个骨骼与每一个定位片之间建立映射关系,即找到与定位片位置对应的虚拟模型中的骨骼,并将其一一对应起来,以使得终端能够根据运动物体的运动参数来对应的配置虚拟模型中的虚拟骨骼的骨骼。
需要说明的是,虚拟骨骼中的各个骨骼包括虚拟骨骼的虚拟骨干与虚拟骨骼节点。
105、根据该映射关系和该运动参数控制该虚拟骨骼的运动。
根据各定位片与各骨骼之间的映射关系,将运动物体各个关键骨骼位置的运动参数设置到对应的骨骼上,使得终端根据这些运动参数来控制虚拟骨骼的运动,从而实现虚拟模型模仿运动物体进行运动。
下面对用户A使用本申请提供的动作采集方法的实际应用场景进行举例描述:
用户A首先在身体关键骨骼处贴上定位片,这个定位片可以为普通纸片或反光片等,再通过拍摄设备为用户A拍摄下动作视频,并上传至终端。例如用户A在手部、前臂、上臂位置分别粘贴上定位片,再拍摄下用户A挥手的动作上传至终端。由于该动作视频中记录有用户A挥手过程中手臂上各定位片的运动轨迹信息,因此终端在获取到该动作视频后可以根据这些定位片的运动轨迹信息反向分析出用户A手臂上的各骨骼的运动参数,例如运动方向、速度、角度、远近等参数。而在三维虚拟世界中,存在有与用户A外形相似的虚拟模型,虚拟模型按照人体骨骼结构配置有虚拟骨骼,终端通过将分析得到的运动参数对应设置到虚拟骨骼中,从而使得该虚拟模型可以根据这些运动参数模仿用户A挥手的动作。
在本实施例中,通过在运动物体上设置定位片,拍摄下运动物体的动作视频,并通过分析视频中所记录的定位片的运动轨迹信息,得到运动物体的运动参数,再将这些运动参数映射到三维虚拟世界的虚拟模型对应的虚拟骨骼上,以控制虚拟模型模仿运动物体进行运动。本发明不受设备和空间的限制,可有效降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。
下面对本申请中提供的动作采集方法进行详细说明,请参阅图2,图2为本申请提供的动作采集方法的另一实施例,该方法包括:
201、获取运动物体的动作视频,该动作视频的内容包含该运动物体的运动动作,该运动物体包含若干定位片;
在本实施例中,步骤201与前述步骤101类似,此处不再赘述。
需要说明的是,当运动物体为人时,可以在运动物体的头部、肩膀、肘部、腕部、膝部等位置粘贴定位片;而运动物体为动物时,可以在运动物体的头部以及四肢等位置粘贴定位片。
202、将该动作视频分解得到若干视频帧;
在获取到运动物体的动作视频后,需要对动作视频进行预处理以得到定位片的运动轨迹信息。具体的,终端将动作视频分解为至少一张图片,其中,每张图片对应动作视频的一帧图像。
203、在每个该视频帧中提取该定位片的位置数据;
终端对每张图片进行图像处理,提取每张图片中每一个定位片的二维坐标数据,并结合定位片的二维坐标数据和定位片的尺寸变化确定定位片在预设三维坐标系中的三维坐标数据。
204、根据该位置数据计算得到定位片的运动轨迹信息;
终端根据所提取到的每张图片中每一个定位片的二维坐标数据和三维坐标数据,进行计算得出每一个定位片的运动轨迹信息,以使得终端可以根据定位片的运动轨迹信息推理运动物体的运动轨迹。
205、根据该运动轨迹信息反向分析得到运动物体的运动参数;
终端根据所获取到的定位片运动轨迹信息,对其进行反向分析得到运动物体的各种运动参数。具体的,运动参数包括运动方向、速度、角度、远近程度等。而反向分析具体是指将定位片的运动轨迹信息进行分解、重构,以推理出运动物体的运动参数。
在实际应用中,终端可以通过多种方式来根据该运动轨迹信息反向分析确定运动物体的运动参数,以下将进行详细说明。
一、终端可以根据定位片的运动轨迹信息来计算得出运动物体的运动参数,终端具体执行如下步骤:
根据该运动轨迹信息计算目标运动参数,该目标运动参数包括运动速度参数、运动方向参数和运动角度参数;
将该目标运动参数确定为该运动物体的运动参数。
具体的,由于定位片粘贴在运动物体上,定位片的运动轨迹在一定程度上即可代表运动物体的运动轨迹,因此终端可以将每一个定位片的运动轨迹信息进行拆解、并计算得出每一个定位片的运动速度、运动方向、运动角度等参数,再将这些参数确定为运动物体的运动参数。
二、终端可以通过根据定位片的运动轨迹信息来匹配预设的模板动作(模板运动参数)来得到运动物体的运动参数,终端具体执行如下步骤:
根据该运动轨迹信息在模板数据库中匹配模板运动参数,该模板数据库中预存有模板动作和与该模板动作对应的模板运动参数;
将该模板运动参数确定为该运动物体的运动参数。
具体的,开发人员可以预存一些常见的模板动作在模板数据库中,例如挥手、跑步等,并配置与这些模板动作对应模板运动参数,以使得终端根据定位片的运动轨迹信息,在模板数据库中提取与该运动轨迹信息相符的模板动作,并将执行这个模板动作所需要的模板运动参数确定为运动物体的运动参数。
206、获取该运动物体的预设信息,该预设信息包括该运动物体的外形信息和骨骼信息;
在实现动作采集之前,还需要先在三维虚拟世界中创建与运动物体(被采集对象)相似的虚拟模型。用户在进行动作采集前,预先向终端输入运动物体的外形信息和骨骼信息,终端则可以通过获取到的外形信息和骨骼信息来搭建虚拟模型。
207、在该三维虚拟世界中根据该外形信息创建虚拟模型;
终端在三维虚拟世界中,根据获取到的运动物体的外形信息创建虚拟模型,该虚拟模型可以是虚拟的人物、动物以及科幻角色等角色对象。
208、根据该骨骼信息为该虚拟模型配置虚拟骨骼;
骨骼信息包括各主要骨骼之间的连接关系、层级关系、依附关系等。在创建虚拟模型后,终端根据获取到的骨骼信息为虚拟模型配置虚拟骨骼,而该骨骼信息中包含的若干骨骼需要与运动物体上粘贴的定位片相对应,以使得终端能够在实现动作采集后,对虚拟模型进行控制。
需要说明的是,步骤206至步骤208为在三维虚拟世界中创建虚拟模型的过程,该过程可以在步骤201前执行,也可以在步骤201后、步骤209前执行,即可以在终端获取运动物体的动作视频前就预先创建虚拟模型,也可以在终端分析得到运动参数后再创建虚拟模型,具体执行顺序此处不做限定。
209、确定该若干个定位片之间的第一位置关系;
为了建立每个定位片与虚拟骨骼中每个骨骼的映射关系,终端需要先根据各定位片的位置数据确定各定位片之间的第一位置关系。
210、确定该虚拟骨骼中各个骨骼之间的第二位置关系;
终端还需要根据所获取到的预设信息中的骨骼信息来确定虚拟骨骼中各个骨骼之间的第二位置关系。
211、根据该第一位置关系和该第二位置关系建立该若干个定位片中每一个定位片与该虚拟骨骼中各个骨骼之间的映射关系;
终端根据所确定的若干个定位片之间的第一位置关系和虚拟骨骼中各个骨骼之间的第二位置关系来建立映射,使得终端能够找到与定位片位置对应的虚拟模型中的骨骼,并将其一一对应起来,从而能够根据由每个定位片运动轨迹信息反向分析得到的运动参数来配置对应的骨骼。
212、根据该映射关系为该虚拟骨骼中各个骨骼匹配对应的运动参数;
终端根据映射关系,将每个定位片所对应的运动参数与虚拟骨骼中各个骨骼相匹配,将运动参数设置到对应的骨骼上。
213、根据该运动参数控制该虚拟骨骼中各个骨骼的运动。
终端根据运动参数控制虚拟骨骼中各个骨骼的运动,从而实现虚拟模型模仿运动物体进行运动。
在本实施例中,通过在运动物体的关键骨骼位置上设置定位片,拍摄下运动物体的动作视频,并通过分析视频中所记录的定位片的运动轨迹信息,得到运动物体关键骨骼的运动参数,再将这些运动参数映射到三维虚拟世界的虚拟模型对应的虚拟骨骼上,以控制虚拟模型模仿运动物体进行运动。本发明不受设备和空间的限制,可有效降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。
请参阅图3,图3为本申请提供的动作采集系统一个实施例,该系统包括:
第一获取单元301,用于获取运动物体的动作视频,该动作视频的内容包含该运动物体的运动动作,该运动物体包含若干定位片;
预处理单元302,用于对该动作视频进行预处理,以获取该定位片的运动轨迹信息;
分析单元303,用于根据该运动轨迹信息反向分析得到该运动物体的运动参数;
建立单元304,用于建立该若干个定位片中每一个定位片与虚拟骨骼中各个骨骼之间的映射关系;
控制单元305,用于根据该映射关系和该运动参数控制该虚拟骨骼的运动。
在本实施例中,通过在运动物体上设置定位片,拍摄下运动物体的动作视频,第一获取单元301和预处理单元302通过分析视频中所记录的定位片的运动轨迹信息,分析单元303进行反向分析得到运动物体的运动参数,建立单元304再将这些运动参数映射到三维虚拟世界的虚拟模型对应的虚拟骨骼上,控制单元305控制虚拟模型模仿运动物体进行运动。本发明不受设备和空间的限制,可有效降低动作采集的难度,简化动作采集的过程,并且降低动作采集成本。
下面对本申请提供的动作采集系统进行详细说明,请参阅图4,图4为本申请提供的动作采集系统另一个实施例,该系统包括:
第一获取单元401,获取运动物体的动作视频,该动作视频的内容包含该运动物体的运动动作,该运动物体包含若干定位片;
预处理单元402,用于对该动作视频进行预处理,以获取该定位片的运动轨迹信息;
分析单元403,根据该运动轨迹信息反向分析得到该运动物体的运动参数;
建立单元404,用于建立该若干个定位片中每一个定位片与虚拟骨骼中各个骨骼之间的映射关系;
控制单元405,用于根据该映射关系和该运动参数控制该虚拟骨骼的运动。
在本实施例中,该预处理单元402具体包括:
分解模块4021,用于将该动作视频分解得到若干视频帧;
提取模块4022,用于在每个该视频帧中提取该定位片的位置数据;
计算模块4023,用于根据该位置数据计算得到定位片的运动轨迹信息。
在本实施例中,该动作采集系统进一步包括:
第二获取单元406,用于获取该运动物体的预设信息,该预设信息包括该运动物体的外形信息和骨骼信息;
创建单元407,用于在该三维虚拟世界中根据该外形信息创建虚拟模型;
配置单元408,用于根据该骨骼信息为该虚拟模型配置虚拟骨骼。
在本实施例中,该建立单元404具体包括:
第一确定模块4041,用于确定该若干个定位片之间的第一位置关系;
第二确定模块4042,用于确定该虚拟骨骼中各个骨骼之间的第二位置关系;
建立模块4043,用于根据该第一位置关系和该第二位置关系建立该若干个定位片中每一个定位片与该虚拟骨骼中各个骨骼之间的映射关系。
该控制单元405具体用于:根据该映射关系为该虚拟骨骼中各个骨骼匹配对应的运动参数,并根据该运动参数控制该虚拟骨骼中各个骨骼的运动。
本实施例系统中,各单元及模块的功能与前述图2所示方法实施例中的步骤对应,此处不再赘述。
本申请还提供了一种动作采集装置,请参阅图5,图5为本申请提供的动作采集装置一个实施例,该装置包括:
处理器501、存储器502、输入输出单元503、总线504;
处理器501与存储器502、输入输出单元503以及总线504相连;
存储器502保存有程序,处理器501调用程序以执行如上任一动作采集方法。
本申请还涉及一种计算机可读存储介质,计算机可读存储介质上保存有程序,其特征在于,当程序在计算机上运行时,使得计算机执行如上任一动作采集方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,read-onlymemory)、随机存取存储器(RAM,random access memory)、磁碟或者光盘等各种可以存储程序代码的介质。
Claims (10)
1.一种动作采集方法,其特征在于,所述方法应用于三维虚拟世界,所述三维虚拟世界中包含有虚拟模型,所述虚拟模型配置有虚拟骨骼,所述方法包括:
获取运动物体的动作视频,所述动作视频的内容包含所述运动物体的运动动作,所述运动物体包含若干定位片;
对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息;
根据所述运动轨迹信息反向分析得到所述运动物体的运动参数;
建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系;
根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动。
2.根据权利要求1所述的方法,其特征在于,在所述建立所述若干个定位片中每一个定位片与所述虚拟骨骼的各个骨骼之间的映射关系之前,所述方法还包括:
获取所述运动物体的预设信息,所述预设信息包括所述运动物体的外形信息和骨骼信息;
在所述三维虚拟世界中根据所述外形信息创建虚拟模型;
根据所述骨骼信息为所述虚拟模型配置虚拟骨骼。
3.根据权利要求1所述的方法,其特征在于,所述对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息包括:
将所述动作视频分解得到若干视频帧;
在每个所述视频帧中提取所述定位片的位置数据;
根据所述位置数据计算得到定位片的运动轨迹信息。
4.根据权利要求1所述的方法,其特征在于,所述建立所述若干个定位片中每一个定位片与所述虚拟骨骼的各个骨骼之间的映射关系包括:
确定所述若干个定位片之间的第一位置关系;
确定所述虚拟骨骼中各个骨骼之间的第二位置关系;
根据所述第一位置关系和所述第二位置关系建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系。
5.根据权利要求1所述的方法,其特征在于,所述根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动包括:
根据所述映射关系为所述虚拟骨骼中各个骨骼匹配对应的运动参数;
根据所述运动参数控制所述虚拟骨骼中各个骨骼的运动。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述根据所述运动轨迹信息反向分析得到所述运动物体的运动参数包括:
根据所述运动轨迹信息计算目标运动参数,所述目标运动参数包括运动速度参数、运动方向参数和运动角度参数;
将所述目标运动参数确定为所述运动物体的运动参数。
7.根据权利要求1至5中任一项所述的方法,其特征在于,所述根据所述运动轨迹信息反向分析得到所述运动物体的运动参数包括:
根据所述运动轨迹信息在模板数据库中匹配模板运动参数,所述模板数据库中预存有模板动作和与所述模板动作对应的模板运动参数;
将所述模板运动参数确定为所述运动物体的运动参数。
8.一种动作采集系统,其特征在于,所述系统包括:
第一获取单元,用于获取运动物体的动作视频,所述动作视频的内容包含所述运动物体的运动动作,所述运动物体包含若干定位片;
预处理单元,用于对所述动作视频进行预处理,以获取所述定位片的运动轨迹信息;
分析单元,用于根据所述运动轨迹信息反向分析得到所述运动物体的运动参数;
建立单元,用于建立所述若干个定位片中每一个定位片与所述虚拟骨骼中各个骨骼之间的映射关系;
控制单元,用于根据所述映射关系和所述运动参数控制所述虚拟骨骼的运动。
9.一种动作采集装置,其特征在于,所述装置包括:
处理器、存储器、输入输出单元以及总线;
所述处理器与所述存储器、所述输入输出单元以及所述总线相连;
所述存储器保存有程序,所述处理器调用所述程序以执行如权利要求1至7中任一项所述方法。
10.一种计算机可读存储介质,所述计算机可读存储介质上保存有程序,所述程序在计算机上执行时执行如权利要求1至7中任一项所述方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011432260.8A CN112581572A (zh) | 2020-12-10 | 2020-12-10 | 一种动作采集方法、系统、装置及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011432260.8A CN112581572A (zh) | 2020-12-10 | 2020-12-10 | 一种动作采集方法、系统、装置及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112581572A true CN112581572A (zh) | 2021-03-30 |
Family
ID=75130669
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011432260.8A Pending CN112581572A (zh) | 2020-12-10 | 2020-12-10 | 一种动作采集方法、系统、装置及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112581572A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114248266A (zh) * | 2021-09-17 | 2022-03-29 | 之江实验室 | 双臂机器人的拟人化动作轨迹生成方法及装置、电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1040418A (ja) * | 1996-04-25 | 1998-02-13 | Matsushita Electric Ind Co Ltd | 3次元骨格構造の動き送受信装置、および動き送受信方法 |
US20060228101A1 (en) * | 2005-03-16 | 2006-10-12 | Steve Sullivan | Three-dimensional motion capture |
US20120143374A1 (en) * | 2010-12-03 | 2012-06-07 | Disney Enterprises, Inc. | Robot action based on human demonstration |
-
2020
- 2020-12-10 CN CN202011432260.8A patent/CN112581572A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1040418A (ja) * | 1996-04-25 | 1998-02-13 | Matsushita Electric Ind Co Ltd | 3次元骨格構造の動き送受信装置、および動き送受信方法 |
US20060228101A1 (en) * | 2005-03-16 | 2006-10-12 | Steve Sullivan | Three-dimensional motion capture |
US20120143374A1 (en) * | 2010-12-03 | 2012-06-07 | Disney Enterprises, Inc. | Robot action based on human demonstration |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114248266A (zh) * | 2021-09-17 | 2022-03-29 | 之江实验室 | 双臂机器人的拟人化动作轨迹生成方法及装置、电子设备 |
CN114248266B (zh) * | 2021-09-17 | 2024-03-26 | 之江实验室 | 双臂机器人的拟人化动作轨迹生成方法及装置、电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111652121B (zh) | 一种表情迁移模型的训练方法、表情迁移的方法及装置 | |
CN109145788B (zh) | 基于视频的姿态数据捕捉方法和系统 | |
CN111556278B (zh) | 一种视频处理的方法、视频展示的方法、装置及存储介质 | |
CN109815776B (zh) | 动作提示方法和装置、存储介质及电子装置 | |
CN109035415B (zh) | 虚拟模型的处理方法、装置、设备和计算机可读存储介质 | |
CN112198959A (zh) | 虚拟现实交互方法、装置及系统 | |
CN112148189A (zh) | 一种ar场景下的交互方法、装置、电子设备及存储介质 | |
CN114363689B (zh) | 直播控制方法、装置、存储介质及电子设备 | |
CN108595004A (zh) | 基于虚拟现实vr的多人交互方法、装置及相应设备 | |
CN112882576A (zh) | Ar交互方法、装置、电子设备及存储介质 | |
CN109529350A (zh) | 一种应用于游戏中的动作数据处理方法及其装置 | |
CN114092670A (zh) | 一种虚拟现实显示方法、设备以及存储介质 | |
CN112637665A (zh) | 增强现实场景下的展示方法、装置、电子设备及存储介质 | |
CN112581572A (zh) | 一种动作采集方法、系统、装置及计算机存储介质 | |
Qianwen | Application of motion capture technology based on wearable motion sensor devices in dance body motion recognition | |
CN103700128B (zh) | 移动设备及其增强显示方法 | |
CN109407826A (zh) | 球类运动模拟方法、装置、存储介质及电子设备 | |
CN109426336A (zh) | 一种虚拟现实辅助选型设备 | |
CN111694427A (zh) | Ar虚拟摇蜜互动体验系统、方法、电子设备及存储介质 | |
CN115454256A (zh) | 一种数字誓词碑装置 | |
CN116485953A (zh) | 数据处理方法、装置、设备和可读存储介质 | |
CN113407031B (zh) | Vr交互方法、系统、移动终端及计算机可读存储介质 | |
CN113724176B (zh) | 一种多摄像头动作捕捉无缝衔接方法、装置、终端及介质 | |
CN115437498A (zh) | 虚拟场景控制方法、设备和存储介质 | |
CN115442519A (zh) | 视频处理方法、装置及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |