CN104766345A - 基于衣服特征点的身体扫描及运动捕捉方法 - Google Patents

基于衣服特征点的身体扫描及运动捕捉方法 Download PDF

Info

Publication number
CN104766345A
CN104766345A CN201510162393.0A CN201510162393A CN104766345A CN 104766345 A CN104766345 A CN 104766345A CN 201510162393 A CN201510162393 A CN 201510162393A CN 104766345 A CN104766345 A CN 104766345A
Authority
CN
China
Prior art keywords
clothes
grid
point
feature points
scanning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510162393.0A
Other languages
English (en)
Other versions
CN104766345B (zh
Inventor
欧剑
毛英华
王勇
李怡雯
张清雅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Elephant Virtual Reality Technology Co., Ltd.
Original Assignee
欧剑
毛英华
王勇
李怡雯
张清雅
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 欧剑, 毛英华, 王勇, 李怡雯, 张清雅 filed Critical 欧剑
Priority to CN201510162393.0A priority Critical patent/CN104766345B/zh
Publication of CN104766345A publication Critical patent/CN104766345A/zh
Application granted granted Critical
Publication of CN104766345B publication Critical patent/CN104766345B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Image Processing (AREA)

Abstract

一种基于衣服特征点的身体扫描及捕捉方法,其步骤如下:衣服带有图像特征点集合的纹理,对纹理进行单元格剖分及ID编号,根据衣服的接缝生成数字化的模型,将纹理印刷到模板上后,制成真实可穿的衣服;当使用者穿着衣服在单目摄像头前,电脑或者手机上的程序识别出衣服上对应的特征点,并通过特征点的ID号索引到他所在的网格i;通过特征点反求出所在网格i的空间位置和朝向,直到所有的网格都遍历完毕;通过所有的网格三维信息计算出人体的三维信息,并可以利用三维信息将虚拟数字衣服与在摄像头影像进行合成,实现虚拟试衣。本发明把标记点衣服和身体扫描技术、运动捕捉技术相结合,开创了一种全新的人体三维扫描方式,能够推广应用到广泛的领域行业,具有重大的现实意义。

Description

基于衣服特征点的身体扫描及运动捕捉方法
技术领域
本发明涉及一种身体扫描及运动捕捉方法,具体涉及一种基于衣服特征点的身体扫描及运动捕捉方法。
背景技术
三维人体扫描是通过数字转换器、照相机或扫描仪获得与区域图像类似的等高线图,再由模型软件处理转换为空间点,以点数据云显示虚拟模型、关键标志,也可以称之为非接触式三维扫描,是现代化人体测量技术的主要特征之一。目前主要有五种典型的三维人体扫描测量方法,包括二维摄影技术扫描、白光技术扫描、激光技术扫描、红外线技术扫描和立体视觉技术扫描。常见的三维扫描系统有VitronicVitus、Telmat、[TC]2 以及Cyberware-WB等,扫描时间长、精度较低是其主要问题,提取图像信息的方法仍不完善, 影响其潜在运用,同时也是三维人体扫描技术研究和改进的方向。
运动捕捉技术,也称动作捕捉,是一个通过在时域上跟踪一些关键点的运动来记录生物运动,然后将其转换成可用的数学表达并合成一个单独的3D运动的过程,涉及尺寸测量、物理空间里物体的定位及方位测定等方面可以由计算机直接理解处理的数据。在运动物体的关键部位设置跟踪器,由Motion capture系统捕捉跟踪器位置,再经过计算机处理后得到三维空间坐标的数据,当数据被计算机识别后,可以应用在游戏设计、步态分析、虚拟现实、人机工程等领域。目前主要使用的动作捕捉技术有光学式、机械式、电磁式、声学式及基于视频序列的捕捉式5种,对环境和运动的限制较大,实时性不够好。
运动捕捉多采用标记点对关键部位进行标记,光学运动捕获系统在人体各关节点上粘贴标记球,利用多个摄像机从不同角度拍摄,然后运用跟踪分析出图像上标记点的坐标,最后得出标记点的三维运动数据。标记点摆放方案的设计是关键环节,在捕捉人物时,标记点必须覆盖所有需要捕捉的骨骼,并需要考虑人体骨骼的自由度。光学运动捕捉系统会出现数据的欠缺, 如标记点被物体遮挡而未能正确地被摄像机记录下来等,同时不适当的摆放会降低运动捕捉精度,扫描结果也会严重失真。
发明内容
本发明的目的是提供一种基于衣服特征点的身体扫描及运动捕捉方法,把标记点衣服和身体扫描技术、运动捕捉技术相结合,开创了一种全新的人体三维扫描方式,能够推广应用到广泛的领域行业,具有重大的现实意义。
本发明的目的是通过以下技术方案实现的:
一种基于衣服特征点的身体扫描及运动捕捉方法,主要思想是利用特定标记点的衣服,通过人体扫描技术和运动捕捉技术,实时记录捕捉人体三维特征及运动信息,并建立数字化三维人体数据及运动模型,包括以下两部分内容:
一、构建一套具有编码特征点信息的紧身衣服版型:
(1)衣服带有图像特征点集合的纹理,采用平面网格划分方法或三角剖分的方法对纹理进行单元格剖分及ID编号,利用计算机程序根据衣服的接缝生成数字化的模型,将纹理印刷到模板上后,制成真实可穿的衣服;
或:将印有标记图案的版型衣服块通过数字化的方式扫描进系统中,对扫描的衣服进行分离,并采用平面网格划分方法或三角剖分的方法进行单元格剖分及ID编号,对扫描的衣服分块进行数字化缝合,生成数字化的衣服;
带有图像特征点集合的纹理和标记图案可以根据需要自行设计,保证有足够的特征点用于3D形状的捕捉。
二、基于特征点衣服的运动捕捉
(2)当使用者穿着衣服在单目摄像头前,电脑或者手机上的程序就可以识别出衣服上对应的特征点,并通过特征点的ID号索引到他所在的网格i;
(3)通过特征点反求出所在网格i的空间位置和朝向;
(4)对每一个网格都重复采用(2)-(3)步骤,直到所有的网格都遍历完毕;
(5)通过所有的网格三维信息计算出人体的三维信息,并可以利用三维信息将虚拟数字衣服与在摄像头影像进行合成,实现虚拟试衣。
本发明具有如下优点:
1、编码特征点的衣服是本发明的关键内容,根据衣服特征点进行的扫描和运动捕捉,能精确记录下人体数据,并生成数字化人体模型。基于编码特征点的衣服,能够解决光学运动捕捉中运动受限、人体遮挡的问题,贴合人体的紧身设计,能使采集到的人体数据更加真实、精准,同时,衣服造价成本较低,真正实现了人性化、大众化的设计构想。
2、光学式动作捕捉为目前应用较为广泛的方案,其实现主要原理为:利用分布在空间中固定位置的多台摄像机通过对捕捉对象上特定光点(Marker)的监视和跟踪完成动作捕捉,但是标记点佩戴不是十分方便,标记点易混淆和遮挡。基于特征点衣服的运动捕捉,对动作无限制,捕捉精度较高,成本低廉,算法的时间复杂度也相比较低,为运动捕捉技术的探索提供了一个新的范式。
附图说明
图1为紧身衣服版型;
图2为数字化衣服模型;
图3为可以穿在人身上的真实衣服;
图4为通过特征点的ID号索引到所在的网格。
具体实施方式
下面结合附图对本发明的技术方案作进一步的说明,但并不局限于此,凡是对本发明技术方案进行修改或者等同替换,而不脱离本发明技术方案的精神和范围,均应涵盖在本发明的保护范围中。
具体实施方式一:本实施方式提供了一种基于衣服特征点的身体扫描及运动捕捉方法,具体实施步骤如下:
1、构建一套具有编码特征点信息的紧身衣服版型。衣服是带有一定特征点的纹理,我们按照一定的规律对其进行划分,如上面平面网格划分方法(或者采取三角剖分的方法),每一个剖分单元内都保证拥有足够(至少在24个以上)的图像特征点集合P。图像特征点集合P除了具有图像特征点以外,还具有所在的网格的ID号(如图1)。
2、利用计算机程序根据数字化版型生成数字化的衣服。计算机程序根据衣服的接缝生成了数字化的模型(如图2)。
3、将纹理印刷到衣服模板上,并且制作出可以穿着在人身上的真实的衣服(如图3)。
4、当使用者穿着衣服在单目摄像头前,电脑或者手机上的程序就可以识别出衣服上对应的特征点,并通过特征点的ID号索引到他所在的网格i(如图4)。
5、通过LU方法或者网格i中的特征点反求出所在网格i的空间位置和朝向。
6、对每一个网格都重复采用4-5步骤,直到所有的网格都遍历完毕。
7、这样衣服的每一个网格的空间信息都被解算出来了,由于衣服是紧贴着人体,因此人体的三维信息就可以通过所有的网格三维信息被计算出来。
具体实施方式二:本实施方式提供了另外一种实现基于衣服特征点的身体扫描及运动捕捉方法,具体实施步骤如下:
1、将印有标记图案的版型衣服块通过数字化的方式扫描进系统中;
2、对扫描的衣服进行分离,也同样进行单元格剖分及编号;
3、对扫描的衣服分块进行数字化缝合,生成数字化的衣服;
4、当使用者穿着衣服在单目摄像头前,电脑或者手机上的程序就可以识别出衣服上对应的特征点,并通过特征点的ID号索引到他所在的网格i;
5、通过LU方法或者网格i中的特征点反求出所在网格i的空间位置和朝向;
6、对每一个网格都重复采用4-5步骤,直到所有的网格都遍历完毕;
7、这样衣服的每一个网格的空间信息都被解算出来了,由于衣服是紧贴着人体,因此人体的三维信息就可以通过所有的网格三维信息被计算出来。

Claims (2)

1.一种基于衣服特征点的身体扫描及捕捉方法,其特征在于所述方法步骤如下:
(1)衣服带有图像特征点集合的纹理,采用平面网格划分方法或三角剖分的方法对纹理进行单元格剖分及ID编号,利用计算机程序根据衣服的接缝生成数字化的模型,将纹理印刷到模板上后,制成真实可穿的衣服;
(2)当使用者穿着衣服在单目摄像头前,电脑或者手机上的程序就可以识别出衣服上对应的特征点,并通过特征点的ID号索引到他所在的网格i;
(3)通过特征点反求出所在网格i的空间位置和朝向;
(4)对每一个网格都重复采用(2)-(3)步骤,直到所有的网格都遍历完毕;
(5)通过所有的网格三维信息计算出人体的三维信息。
2.一种基于衣服特征点的身体扫描及运动捕捉方法,其特征在于所述方法步骤如下:
(1)将印有标记图案的版型衣服块通过数字化的方式扫描进系统中,对扫描的衣服进行分离,并采用平面网格划分方法或三角剖分的方法进行单元格剖分及ID编号,对扫描的衣服分块进行数字化缝合,生成数字化的衣服;
(2)当使用者穿着衣服在单目摄像头前,电脑或者手机上的程序就可以识别出衣服上对应的特征点,并通过特征点的ID号索引到他所在的网格i;
(3)通过特征点反求出所在网格i的空间位置和朝向;
(4)对每一个网格都重复采用(2)-(3)步骤,直到所有的网格都遍历完毕;
(5)通过所有的网格三维信息计算出人体的三维信息。
CN201510162393.0A 2015-04-08 2015-04-08 基于衣服特征点的身体扫描及运动捕捉方法 Active CN104766345B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510162393.0A CN104766345B (zh) 2015-04-08 2015-04-08 基于衣服特征点的身体扫描及运动捕捉方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510162393.0A CN104766345B (zh) 2015-04-08 2015-04-08 基于衣服特征点的身体扫描及运动捕捉方法

Publications (2)

Publication Number Publication Date
CN104766345A true CN104766345A (zh) 2015-07-08
CN104766345B CN104766345B (zh) 2018-09-25

Family

ID=53648150

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510162393.0A Active CN104766345B (zh) 2015-04-08 2015-04-08 基于衣服特征点的身体扫描及运动捕捉方法

Country Status (1)

Country Link
CN (1) CN104766345B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107168520A (zh) * 2017-04-07 2017-09-15 北京小鸟看看科技有限公司 基于单目摄像头的追踪方法、vr设备和vr头戴设备
CN107248171A (zh) * 2017-05-17 2017-10-13 同济大学 一种基于三角剖分的单目视觉里程计尺度恢复方法
CN108120397A (zh) * 2017-12-27 2018-06-05 中国科学院长春光学精密机械与物理研究所 用于标志点快速固定的三维扫描测量辅助装置
CN109196561A (zh) * 2017-02-15 2019-01-11 斯戴尔米有限公司 用于针对试衣可视化进行三维衣服网格变形和分层的系统和方法
CN110037705A (zh) * 2019-04-25 2019-07-23 北京新睿搏创科技有限公司 一种测量人体尺寸的方法及系统
CN112132963A (zh) * 2020-10-27 2020-12-25 苏州光魔方智能数字科技有限公司 一种VirtualStar系统智能化交互平台
CN112717364A (zh) * 2020-12-08 2021-04-30 怀化学院 一种舞蹈动作指导及纠正系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101578613A (zh) * 2005-08-26 2009-11-11 索尼株式会社 在运动捕捉中使用的标记
CN104036532A (zh) * 2014-05-29 2014-09-10 浙江工业大学 基于三维到二维服装图案无缝映射的服装制作方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101578613A (zh) * 2005-08-26 2009-11-11 索尼株式会社 在运动捕捉中使用的标记
CN104036532A (zh) * 2014-05-29 2014-09-10 浙江工业大学 基于三维到二维服装图案无缝映射的服装制作方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109196561A (zh) * 2017-02-15 2019-01-11 斯戴尔米有限公司 用于针对试衣可视化进行三维衣服网格变形和分层的系统和方法
CN109196561B (zh) * 2017-02-15 2022-10-28 唯衣時尚科技有限公司 用于针对试衣可视化进行三维衣服网格变形和分层的系统和方法
CN107168520A (zh) * 2017-04-07 2017-09-15 北京小鸟看看科技有限公司 基于单目摄像头的追踪方法、vr设备和vr头戴设备
CN107168520B (zh) * 2017-04-07 2020-12-18 北京小鸟看看科技有限公司 基于单目摄像头的追踪方法、vr设备和vr头戴设备
CN107248171A (zh) * 2017-05-17 2017-10-13 同济大学 一种基于三角剖分的单目视觉里程计尺度恢复方法
CN107248171B (zh) * 2017-05-17 2020-07-28 同济大学 一种基于三角剖分的单目视觉里程计尺度恢复方法
CN108120397A (zh) * 2017-12-27 2018-06-05 中国科学院长春光学精密机械与物理研究所 用于标志点快速固定的三维扫描测量辅助装置
CN110037705A (zh) * 2019-04-25 2019-07-23 北京新睿搏创科技有限公司 一种测量人体尺寸的方法及系统
CN112132963A (zh) * 2020-10-27 2020-12-25 苏州光魔方智能数字科技有限公司 一种VirtualStar系统智能化交互平台
CN112717364A (zh) * 2020-12-08 2021-04-30 怀化学院 一种舞蹈动作指导及纠正系统

Also Published As

Publication number Publication date
CN104766345B (zh) 2018-09-25

Similar Documents

Publication Publication Date Title
CN104766345A (zh) 基于衣服特征点的身体扫描及运动捕捉方法
CN107423729B (zh) 一种面向复杂视觉场景下的远距离类脑三维步态识别系统及实现方法
CN101853528B (zh) 一种手持式三维型面信息提取方法及其提取仪
CN103279186B (zh) 融合光学定位与惯性传感的多目标运动捕捉系统
CN101310289B (zh) 捕捉和处理面部运动数据
TWI466062B (zh) 重建三維模型的方法與三維模型重建裝置
CN102848389B (zh) 基于视觉运动捕捉的机械臂标定及跟踪系统实现方法
JP7015152B2 (ja) キーポイントデータに関する加工装置、方法及びプログラム
CN108154550A (zh) 基于rgbd相机的人脸实时三维重建方法
CN103345064A (zh) 一种集成3d识别的帽子及帽子的3d识别方法
CN103500010B (zh) 一种视频人手指尖定位方法
CN109460150A (zh) 一种虚拟现实人机交互系统及方法
CN109758756B (zh) 基于3d相机的体操视频分析方法及系统
CN110633005A (zh) 一种光学式无标记的三维人体动作捕捉方法
Zhang et al. A practical robotic grasping method by using 6-D pose estimation with protective correction
CN108492017A (zh) 一种基于增强现实的产品质量信息传递方法
CN102729250A (zh) 象棋开局摆棋系统和方法
CN108170166A (zh) 机器人的跟随控制方法及其智能装置
CN107077739A (zh) 使用单目相机的三维标记模型构建和实时跟踪
CN112184898A (zh) 一种基于动作识别的数字人体建模方法
CN113487674B (zh) 一种人体位姿估计系统和方法
CN108010122A (zh) 一种人体三维模型重建与测量的方法及系统
CN110348344A (zh) 一种基于二维和三维融合的特殊人脸表情识别的方法
CN113421286B (zh) 一种动作捕捉系统及方法
CN207529394U (zh) 一种面向复杂视觉场景下的远距离类脑三维步态识别系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20180814

Address after: 518000 Guangdong, Shenzhen, Nanshan District, Guangdong Province, Shahe Road, Guangdong 2009, the United States science and technology building 1403-2

Applicant after: Shenzhen ruer New Technology Co., Ltd.

Address before: 150000 No. 92, West Da Zhi street, Nangang District, Harbin, Heilongjiang.

Applicant before: Ou Jian

Applicant before: Mao Yinghua

Applicant before: Wang Yong

Applicant before: Li Yiwen

Applicant before: Zhang Qingya

GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190228

Address after: 518000 Zhigu Science Park H Block 122, No. 4 Yintian Road, Xixiang Street, Baoan District, Shenzhen City, Guangdong Province

Patentee after: Shenzhen Elephant Virtual Reality Technology Co., Ltd.

Address before: 518000 Guangdong, Shenzhen, Nanshan District, Guangdong Province, Shahe Road, Guangdong 2009, the United States science and technology building 1403-2

Patentee before: Shenzhen ruer New Technology Co., Ltd.