CN115830229A - 一种数字虚拟人3d模型采集装置 - Google Patents

一种数字虚拟人3d模型采集装置 Download PDF

Info

Publication number
CN115830229A
CN115830229A CN202211482861.9A CN202211482861A CN115830229A CN 115830229 A CN115830229 A CN 115830229A CN 202211482861 A CN202211482861 A CN 202211482861A CN 115830229 A CN115830229 A CN 115830229A
Authority
CN
China
Prior art keywords
human body
model
data
acquiring
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211482861.9A
Other languages
English (en)
Other versions
CN115830229B (zh
Inventor
王立军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu August Information Technology Inc
Original Assignee
Jiangsu August Information Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu August Information Technology Inc filed Critical Jiangsu August Information Technology Inc
Priority to CN202211482861.9A priority Critical patent/CN115830229B/zh
Publication of CN115830229A publication Critical patent/CN115830229A/zh
Application granted granted Critical
Publication of CN115830229B publication Critical patent/CN115830229B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Processing Or Creating Images (AREA)

Abstract

本发明提供了一种数字虚拟人3D模型采集装置,包括:采集模块,用于根据虚拟场景,采集用户真实的人体身体数据和人体互动数据;建立模块,用于根据标准人体数据建立虚拟人体模型,并根据人体身体数据,在所述虚拟人体模型上,建立人体动作3D模型;显示控制模块,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,从所述人体动作3D模型中选取最优动作3D模型进行显示,通过建立虚拟人体模型和人体动作3D模型,最终结合人体互动数据确定出最优动作3D模型进行显示,实现虚拟数字人与用户的有效互动,提高用户体验感。

Description

一种数字虚拟人3D模型采集装置
技术领域
本发明涉及虚拟数字人领域,特别涉及一种数字虚拟人3D模型采集装置。
背景技术
随着科学技术的发展和现代工业技术的需要,3D虚拟数字人视频需求量急速增加,成为娱乐生活重要的组成部分,让人们体验到前所未有的感觉。为了让人们更加好的在场景里面更好的交互,已经更加接近真实的感觉,在虚拟环境中的人与人的真实交互就显得尤为重要,而真实交互的第一步就是要求数字虚拟人动作与人类接近,因此,如何实现虚拟数字人与用户的有效互动,提高用户体验感,是目前在虚拟数字人领域需要解决的一个问题。
发明内容
本发明提供一种一种数字虚拟人3D模型采集装置,实现虚拟数字人与用户的有效互动,提高用户体验感。
一种数字虚拟人3D模型采集装置,包括:
采集模块,用于根据虚拟场景,采集用户真实的人体身体数据和人体互动数据;
建立模块,用于根据标准人体数据建立虚拟人体模型,并根据人体身体数据,在所述虚拟人体模型上,建立人体动作3D模型;
显示控制模块,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,从所述人体动作3D模型中选取最优动作3D模型进行显示。
优选的,所述采集模块,包括:
获取单元,用于从大数据库中,获取在所述虚拟场景下用户场景图像;
识别单元,用于对所述用户场景图像进行识别,提取得到单独人体图像,对所述单独人体图像进行数据采集,得到人体身体数据;
分析单元,基于所有单独人体图像的人体身体数据,得到人体互动数据。
优选的,所述识别单元,包括:
图像获取单元,用于对所述所述用户场景图像进行识别,获取在多个方向的单独人体图像;
图像处理单元,用于对每个单独人体图像进行灰度化处理,得到在第一阈值的第一单波段图像和在第二阈值的第二单波图像,并获取第一单波图像的第一人体特征,获取第二单波图像的第二人体特征,且将所述第一单波图像和第二单波图像进行图像配准,并获取配准图像的第三人体特征;
数据整合单元,用于从所述第一人体特征、第二人体特征和第三人体特征中分别提取满足采集标准的第一人体数据、第二人体数据和第三人体数据,并进行整合得到单人体数据,且整合在不同方向的单人体数据,得到人体身体数据。
优选的,所述分析单元,包括:
特征获取单元,用于获取在同一时间点的用户场景图像中的多个人体身体数据,并基于多个人体身体数据,得到对应的动作特征;
标签建立单元,用于对多个人体身体数据对应的多个动作特征之间建立关联标签;
标签选取单元,用于对在不同时间点的不同用户场景图像对应的关联标签之间进行相似度判断,获取相似度大于预设相似度取值的目标关联标签;
数据融合单元,用于根据所述目标关联标签,建立多个动作特征之间的互动数据,所述互动数据和单独人体数据进行融合,得到人体互动数据。
优选的,所述建立模块,包括:
坐标获取单元,用于根据标准人体数据,得到人体关键点坐标,基于所述人体关键点坐标,建立虚拟人体模型;
匹配建立单元,用于将所述人体身体数据与所述虚拟人体模型进行特征匹配,根据匹配结果,建立人体动作3D模型。
优选的,所述匹配建立单元,包括:
模型调整单元,用于根据所述人体身体数据确定人体的相对于虚拟人体模型的整体旋转角度,并在空间坐标系下,对所述虚拟人体模型按照所述旋转角度进行旋转,得到基础人体模型,并确定所述基础人体模型的关键点坐标;
匹配单元,用于将所述人体身体数据与基础人体模型进行第一匹配,得到第一匹配结果,按照人体部位,对第一配结果进行划分,得到部位匹配结果,并从部位匹配结果中提取大于第一匹配度的第一部位,以及小于或等级第一匹配度的第二部位;
模型建立单元,用于利用第一方式确定第一部位的定位坐标,利用第二方式确定第二部位的定位坐标,并基于第一部位和第二部位的定位坐标,在所述基础人体模型的基础上,建立人体动作3D模型。
优选的,所述模型建立单元,包括:
第一确定单元,用于从所述基础人体模型中获取所述第一部位的第一关键点坐标,并从第一匹配结果中获取第一部位的整体偏差幅度,根据所述整体偏差幅度确定修正方向和修正值,并对所述第一关键点坐标进行修正得到第一修正关键点坐标作为人体动作3D模型的第一部位的定位坐标。
优选的,所述模型建立单元,还包括:
第二确定单元,用于从所述人体身体数据中获取所述第二部位的部位特征,基于所述部位特征建立部位坐标,并根据所述部位坐标对确定第二部位形态的重要度,对部位特征进行分类,得到主关键点坐标和从关键点坐标,从所述基础人体模型中获取所述第二部位的第二关键点坐标,建立所述主关键点坐标和部分第二关键点坐标的映射关系,根据所述映射关系和主关键点坐标,对所述部分第二关键点坐标进行更新得到最新部分第二关键点坐标,根据所述主关键点坐标和从关键点坐标之间的先对坐标关系,对最新部分第二关键点坐标进行完善得到全部的最新第二关键点坐标,作为人体动作3D模型的第二部位的定位坐标。
优选的,所述显示控制模块,包括:
模型选取单元,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,确定虚拟人动作,并从所述人体动作3D模型中选取满足所述虚拟人动作的模型作为最优动作3D模型;
显示单元,用于确定当前动作3D模型和最优动作3D模型的衔接特征,利用所述衔接特征,将对所述当前动作3D模型的显示衔接到对最优动作3D模型的显示。
优选的,所述显示单元,包括:
差异比较单元,用于将所述当前动作3D模型和最优动作3D模型进行差异比较,确定出需移动坐标和移动数值,以及移动部位;
特征确定单元,用于基于所述移动部位的常规移动特征,结合所述移动坐标和移动数值,确定当前动作3D模型和最优动作3D模型的衔接特征;
计算单元,用于根据所述衔接特征,对当前动作3D模型和最优动作3D模型之间的衔接度进行计算;
衔接单元,用于判断衔接度是否满足预设衔接值,若是,将对当前动作3D模型的显示衔接到对最优动作3D模型的显示,否则,重新确定衔接特征。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种数字虚拟人3D模型采集装置的结构图;
图2为本发明实施例所述采集模块的结构图;
图3为本发明实施例所述建立模块的结构图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
实施例1
本发明实施例提供一种数字虚拟人3D模型采集装置,如图1所示,包括:
采集模块,用于根据虚拟场景,采集用户真实的人体身体数据和人体互动数据;
建立模块,用于根据标准人体数据建立虚拟人体模型,并根据人体身体数据,在所述虚拟人体模型上,建立人体动作3D模型;
显示控制模块,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,从所述人体动作3D模型中选取最优动作3D模型进行显示。
在该实施例中,所述人体身体数据包括用户的身体尺寸数据和动作数据。
在该实施例中,所述人体互动数据为至少两个人之间的肢体动作互动数据。
在该实施例中,所述虚拟人体模型为3D虚拟人的身体尺寸数据确定。
在该实施例中,所述人体动作3D模型包括了多种动作的人体3D模型。上述设计方案的有益效果是:通过建立虚拟人体模型和人体动作3D模型,最终结合人体互动数据确定出最优动作3D模型进行显示,实现虚拟数字人与用户的有效互动,提高用户体验感。
实施例2
基于实施例1的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,如图2所示,所述采集模块,包括:
获取单元,用于从大数据库中,获取在所述虚拟场景下用户场景图像;
识别单元,用于对所述用户场景图像进行识别,提取得到单独人体图像,对所述单独人体图像进行数据采集,得到人体身体数据;
分析单元,基于所有单独人体图像的人体身体数据,得到人体互动数据。
在该实施例中,例如所述虚拟场景为对话场景,则获取用户在该场景下真实的对话图像作为用户场景图像。
上述设计方案的有益效果是:通过对用户场景图像进行识别和分析,得到人体身体数据和人体互动数据,见3D模型的建立提供数据基础。
实施例3
基于实施例2的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述识别单元,包括:
图像获取单元,用于对所述所述用户场景图像进行识别,获取在多个方向的单独人体图像;
图像处理单元,用于对每个单独人体图像进行灰度化处理,得到在第一阈值的第一单波段图像和在第二阈值的第二单波图像,并获取第一单波图像的第一人体特征,获取第二单波图像的第二人体特征,且将所述第一单波图像和第二单波图像进行图像配准,并获取配准图像的第三人体特征;
数据整合单元,用于从所述第一人体特征、第二人体特征和第三人体特征中分别提取满足采集标准的第一人体数据、第二人体数据和第三人体数据,并进行整合得到单人体数据,且整合在不同方向的单人体数据,得到人体身体数据。
在该实施例中,所述所述第一预设和第二阈值根据实际情况设定,得到的第一单波段图像和第二单波图像在图像特征呈现上不同。
在该实施例中,所述采集标准为预先设定,例如轮廓数据从第一人体特征获取,像素值特征从第二人体特征获取。
上述设计方案的有益效果是:通过获取单独人体图像在不同阈值单波的图像来分别得到对应的人体特征,保证得到人体特征的准确性,并根据采集标准来从不同的人体特征下采集得到对应的人体数据,保证得到人体数据能够准确反应实际人体的特征,最终合在不同方向的单人体数据,得到人体身体数据,保证得到的人体身体数据全面性。
实施例4
基于实施例2的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述分析单元,包括:
特征获取单元,用于获取在同一时间点的用户场景图像中的多个人体身体数据,并基于多个人体身体数据,得到对应的动作特征;
标签建立单元,用于对多个人体身体数据对应的多个动作特征之间建立关联标签;
标签选取单元,用于对在不同时间点的不同用户场景图像对应的关联标签之间进行相似度判断,获取相似度大于预设相似度取值的目标关联标签;
数据融合单元,用于根据所述目标关联标签,建立多个动作特征之间的互动数据,所述互动数据和单独人体数据进行融合,得到人体互动数据。
在该实施例中,例如A人体身体数据对应a动作特征的数目为50,A人体身体数据对应b动作特征的数目为20,则将A人体身体数据对应a动作特征的关联标签作为目标关联标签。
在该实施例中,所述互动数据为例如当甲出现第一动作特征时,与甲互动的虚拟乙应该展示第二动作特征。
上述设计方案的有益效果是:通过根据在同一时间点下人体身体数据之间的动作特征关联度,建立互动数据,和单独人体数据进行融合,得到人体互动数据,为确定动作模型的展示提供数据基础。
实施例5
基于实施例1的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,如图3所示,所述建立模块,包括:
坐标获取单元,用于根据标准人体数据,得到人体关键点坐标,基于所述人体关键点坐标,建立虚拟人体模型;
匹配建立单元,用于将所述人体身体数据与所述虚拟人体模型进行特征匹配,根据匹配结果,建立人体动作3D模型。
在该实施例中,所述人体关键点坐标例如为脸部坐标点、手部坐标点等,为三维坐标点。
在该实施例中,将所述人体身体数据与所述虚拟人体模型进行特征匹配具体为将脸部数据和虚拟人体模型中的脸部坐标点进行匹配,确定映射关系。
上述设计方案的有益效果是:通过利用人体关键点坐标建立虚拟人体模型,保证虚拟人体模型的准确性,并将所述人体身体数据与所述虚拟人体模型进行特征匹配,根据匹配结果,建立人体动作3D模型,保证建立得到的人体动作3D模型与虚拟人体模型之间的紧密性,保证了人体动作3D模型的质量,为实现虚拟数字人与用户的有效互动,提高用户体验感提供基础。
实施例6
基于实施例5的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述匹配建立单元,包括:
模型调整单元,用于根据所述人体身体数据确定人体的相对于虚拟人体模型的整体旋转角度,并在空间坐标系下,对所述虚拟人体模型按照所述旋转角度进行旋转,得到基础人体模型,并确定所述基础人体模型的关键点坐标;
匹配单元,用于将所述人体身体数据与基础人体模型进行第一匹配,得到第一匹配结果,按照人体部位,对第一配结果进行划分,得到部位匹配结果,并从部位匹配结果中提取大于第一匹配度的第一部位,以及小于或等级第一匹配度的第二部位;
模型建立单元,用于利用第一方式确定第一部位的定位坐标,利用第二方式确定第二部位的定位坐标,并基于第一部位和第二部位的定位坐标,在所述基础人体模型的基础上,建立人体动作3D模型。
在该实施例中,所述第一方式为:从所述基础人体模型中获取所述第一部位的第一关键点坐标,并从第一匹配结果中获取第一部位的整体偏差幅度,根据所述整体偏差幅度确定修正方向和修正值,并对所述第一关键点坐标进行修正得到第一修正关键点坐标作为人体动作3D模型的第一部位的定位坐标。
在该实施例中,所述第二方式为:从所述人体身体数据中获取所述第二部位的部位特征,基于所述部位特征建立部位坐标,并根据所述部位坐标对确定第二部位形态的重要度,对部位特征进行分类,得到主关键点坐标和从关键点坐标,从所述基础人体模型中获取所述第二部位的第二关键点坐标,建立所述主关键点坐标和部分第二关键点坐标的映射关系,根据所述映射关系和主关键点坐标,对所述部分第二关键点坐标进行更新得到最新部分第二关键点坐标,根据所述主关键点坐标和从关键点坐标之间的先对坐标关系,对最新部分第二关键点坐标进行完善得到全部的最新第二关键点坐标,作为人体动作3D模型的第二部位的定位坐标。
在该实施例中,所述第一部位为与基础人体模型的姿态基本相同的部位,例如腿部,第二部位为与基础人体模型的姿态不同的部位,例如基础人体模型的手部为放下姿态,二人体身体数据确定的为抬起姿态。
上述设计方案的有益效果是:首先根据人体身体数据对所述虚拟人体模型进行角度调整,得到基础人体模型,在所述基础人体模型的基础上,以身体部位的单元,根据人体身体数据对身体部位的坐标点进行调整,调整方式根据人体身体数据和基础人体模型的匹配度来分配不同的调整方式,保证得到人体动作3D模型的效率和准确性。
实施例7
基于实施例6的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述模型建立单元,包括:
第一确定单元,用于从所述基础人体模型中获取所述第一部位的第一关键点坐标,并从第一匹配结果中获取第一部位的整体偏差幅度,根据所述整体偏差幅度确定修正方向和修正值,并对所述第一关键点坐标进行修正得到第一修正关键点坐标作为人体动作3D模型的第一部位的定位坐标。
上述设计方案的有益效果是:通过确定整体偏差幅度来对第一部位的第一关键点坐标进行整体修正,提高确定人体动作3D模型的第一部位的定位坐标的效率,节约资源。
实施例8
基于实施例6的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述模型建立单元,还包括:
第二确定单元,用于从所述人体身体数据中获取所述第二部位的部位特征,基于所述部位特征建立部位坐标,并根据所述部位坐标对确定第二部位形态的重要度,对部位特征进行分类,得到主关键点坐标和从关键点坐标,从所述基础人体模型中获取所述第二部位的第二关键点坐标,建立所述主关键点坐标和部分第二关键点坐标的映射关系,根据所述映射关系和主关键点坐标,对所述部分第二关键点坐标进行更新得到最新部分第二关键点坐标,根据所述主关键点坐标和从关键点坐标之间的先对坐标关系,对最新部分第二关键点坐标进行完善得到全部的最新第二关键点坐标,作为人体动作3D模型的第二部位的定位坐标。
上述设计方案的有益效果是:首先通过从人体身体数据获取第二部位的不为特征,并建立对应的坐标系得到部位坐标,且对部位坐标进行分类,得到主关键点坐标和从关键点坐标,以主关键点坐标为主结合第二关键点坐标,得到最新部分第二关键点坐标,根据所述主关键点坐标和从关键点坐标之间的先对坐标关系,对最新部分第二关键点坐标进行完善得到全部的最新第二关键点坐标,作为人体动作3D模型的第二部位的定位坐标,保证得到的第二部位的定位坐标的准确性,从而提高人体动作3D模型的观赏性,给用户带来良好体验。
实施例9
基于实施例1的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述显示控制模块,包括:
模型选取单元,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,确定虚拟人动作,并从所述人体动作3D模型中选取满足所述虚拟人动作的模型作为最优动作3D模型;
显示单元,用于确定当前动作3D模型和最优动作3D模型的衔接特征,利用所述衔接特征,将所述当前动作3D模型的显示衔接到最优动作3D模型的显示。
在该实施例中,由于当前动作3D模型到最优动作3D模型的转变幅度过大,需要衔接特征进行衔接,保证转换的流畅性。
上述设计方案的有益效果是:确定出最优动作3D模型进行显示,实现虚拟数字人与用户的有效互动,提高用户体验感。
实施例10
基于实施例9的基础上,本发明实施例提供一种数字虚拟人3D模型采集装置,所述显示单元,包括:
差异比较单元,用于将所述当前动作3D模型和最优动作3D模型进行差异比较,确定出需移动坐标和移动数值,以及移动部位;
特征确定单元,用于基于所述移动部位的常规移动特征,结合所述移动坐标和移动数值,确定当前动作3D模型和最优动作3D模型的衔接特征;
计算单元,用于根据所述衔接特征,对当前动作3D模型和最优动作3D模型之间的衔接度进行计算;
所述衔接度F的计算公式如下:
Figure BDA0003960813000000111
其中,τ表示所述衔接特征的整体移动幅度,A表示所述常规移动特征的标准移动幅度,ε表示所述衔接特征的衔接精度,取值为(1,10),n表示移动坐标的个数,ΔDi表示第i个移动坐标的移动幅值,m表示移动坐标的移动次数,Δdij表示第i移动坐标在第j次移动的移动幅值,γ0表示所述移动部位的历史平均衔接精度,取值为(1,10);
衔接单元,用于判断衔接度是否满足预设衔接值,若是,将对当前动作3D模型的显示衔接到对最优动作3D模型的显示,否则,重新确定衔接特征。
在该实施例中,重新确定衔接特征例如可以通过改变衔接精度获得。
在该实施例中,衔接特征的整体移动幅度越大对应的衔接度的影响越大。
在该实施例中,在计算衔接度时,考虑衔接精度和移动部位的历史平均衔接精度,提高衔接度确定的准确性。
上述设计方案的有益效果是:通过根据移动部位的常规移动特征,结合所述移动坐标和移动数值,确定当前动作3D模型和最优动作3D模型的衔接特征,实现对当前动作3D模型的显示衔接到对最优动作3D模型的显示,提高用户体验感。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种数字虚拟人3D模型采集装置,其特征在于,包括:
采集模块,用于根据虚拟场景,采集用户真实的人体身体数据和人体互动数据;
建立模块,用于根据标准人体数据建立虚拟人体模型,并根据人体身体数据,在所述虚拟人体模型上,建立人体动作3D模型;
显示控制模块,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,从所述人体动作3D模型中选取最优动作3D模型进行显示。
2.根据权利要求1所述的一种数字虚拟人3D模型采集装置,其特征在于,所述采集模块,包括:
获取单元,用于从大数据库中,获取在所述虚拟场景下用户场景图像;
识别单元,用于对所述用户场景图像进行识别,提取得到单独人体图像,对所述单独人体图像进行数据采集,得到人体身体数据;
分析单元,基于所有单独人体图像的人体身体数据,得到人体互动数据。
3.根据权利要求2所述的一种数字虚拟人3D模型采集装置,其特征在于,所述识别单元,包括:
图像获取单元,用于对所述所述用户场景图像进行识别,获取在多个方向的单独人体图像;
图像处理单元,用于对每个单独人体图像进行灰度化处理,得到在第一阈值的第一单波段图像和在第二阈值的第二单波图像,并获取第一单波图像的第一人体特征,获取第二单波图像的第二人体特征,且将所述第一单波图像和第二单波图像进行图像配准,并获取配准图像的第三人体特征;
数据整合单元,用于从所述第一人体特征、第二人体特征和第三人体特征中分别提取满足采集标准的第一人体数据、第二人体数据和第三人体数据,并进行整合得到单人体数据,且整合在不同方向的单人体数据,得到人体身体数据。
4.根据权利要求2所述的一种数字虚拟人3D模型采集装置,其特征在于,所述分析单元,包括:
特征获取单元,用于获取在同一时间点的用户场景图像中的多个人体身体数据,并基于多个人体身体数据,得到对应的动作特征;
标签建立单元,用于对多个人体身体数据对应的多个动作特征之间建立关联标签;
标签选取单元,用于对在不同时间点的不同用户场景图像对应的关联标签之间进行相似度判断,获取相似度大于预设相似度取值的目标关联标签;
数据融合单元,用于根据所述目标关联标签,建立多个动作特征之间的互动数据,所述互动数据和单独人体数据进行融合,得到人体互动数据。
5.根据权利要求1所述的一种数字虚拟人3D模型采集装置,其特征在于,所述建立模块,包括:
坐标获取单元,用于根据标准人体数据,得到人体关键点坐标,基于所述人体关键点坐标,建立虚拟人体模型;
匹配建立单元,用于将所述人体身体数据与所述虚拟人体模型进行特征匹配,根据匹配结果,建立人体动作3D模型。
6.根据权利要求5所述的一种数字虚拟人3D模型采集装置,其特征在于,所述匹配建立单元,包括:
模型调整单元,用于根据所述人体身体数据确定人体的相对于虚拟人体模型的整体旋转角度,并在空间坐标系下,对所述虚拟人体模型按照所述旋转角度进行旋转,得到基础人体模型,并确定所述基础人体模型的关键点坐标;
匹配单元,用于将所述人体身体数据与基础人体模型进行第一匹配,得到第一匹配结果,按照人体部位,对第一配结果进行划分,得到部位匹配结果,并从部位匹配结果中提取大于第一匹配度的第一部位,以及小于或等级第一匹配度的第二部位;
模型建立单元,用于利用第一方式确定第一部位的定位坐标,利用第二方式确定第二部位的定位坐标,并基于第一部位和第二部位的定位坐标,在所述基础人体模型的基础上,建立人体动作3D模型。
7.根据权利要求6所述的一种数字虚拟人3D模型采集装置,其特征在于,所述模型建立单元,包括:
第一确定单元,用于从所述基础人体模型中获取所述第一部位的第一关键点坐标,并从第一匹配结果中获取第一部位的整体偏差幅度,根据所述整体偏差幅度确定修正方向和修正值,并对所述第一关键点坐标进行修正得到第一修正关键点坐标作为人体动作3D模型的第一部位的定位坐标。
8.根据权利要求6所述的一种数字虚拟人3D模型采集装置,其特征在于,所述模型建立单元,还包括:
第二确定单元,用于从所述人体身体数据中获取所述第二部位的部位特征,基于所述部位特征建立部位坐标,并根据所述部位坐标对确定第二部位形态的重要度,对部位特征进行分类,得到主关键点坐标和从关键点坐标,从所述基础人体模型中获取所述第二部位的第二关键点坐标,建立所述主关键点坐标和部分第二关键点坐标的映射关系,根据所述映射关系和主关键点坐标,对所述部分第二关键点坐标进行更新得到最新部分第二关键点坐标,根据所述主关键点坐标和从关键点坐标之间的先对坐标关系,对最新部分第二关键点坐标进行完善得到全部的最新第二关键点坐标,作为人体动作3D模型的第二部位的定位坐标。
9.根据权利要求1所述的一种数字虚拟人3D模型采集装置,其特征在于,所述显示控制模块,包括:
模型选取单元,用于根据用户在所述虚拟场景下的当前动作,利用所述人体互动数据,确定虚拟人动作,并从所述人体动作3D模型中选取满足所述虚拟人动作的模型作为最优动作3D模型;
显示单元,用于确定当前动作3D模型和最优动作3D模型的衔接特征,利用所述衔接特征,将对所述当前动作3D模型的显示衔接到对最优动作3D模型的显示。
10.根据权利要求9所述的一种数字虚拟人3D模型采集装置,其特征在于,所述显示单元,包括:
差异比较单元,用于将所述当前动作3D模型和最优动作3D模型进行差异比较,确定出需移动坐标和移动数值,以及移动部位;
特征确定单元,用于基于所述移动部位的常规移动特征,结合所述移动坐标和移动数值,确定当前动作3D模型和最优动作3D模型的衔接特征;
计算单元,用于根据所述衔接特征,对当前动作3D模型和最优动作3D模型之间的衔接度进行计算;
衔接单元,用于判断衔接度是否满足预设衔接值,若是,将对当前动作3D模型的显示衔接到对最优动作3D模型的显示,否则,重新确定衔接特征。
CN202211482861.9A 2022-11-24 2022-11-24 一种数字虚拟人3d模型采集装置 Active CN115830229B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211482861.9A CN115830229B (zh) 2022-11-24 2022-11-24 一种数字虚拟人3d模型采集装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211482861.9A CN115830229B (zh) 2022-11-24 2022-11-24 一种数字虚拟人3d模型采集装置

Publications (2)

Publication Number Publication Date
CN115830229A true CN115830229A (zh) 2023-03-21
CN115830229B CN115830229B (zh) 2023-10-13

Family

ID=85531174

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211482861.9A Active CN115830229B (zh) 2022-11-24 2022-11-24 一种数字虚拟人3d模型采集装置

Country Status (1)

Country Link
CN (1) CN115830229B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106548675A (zh) * 2016-11-08 2017-03-29 湖南拓视觉信息技术有限公司 虚拟军事训练方法及装置
US20200126295A1 (en) * 2018-10-22 2020-04-23 The Hong Kong Polytechnic University Method and/or system for reconstructing from images a personalized 3d human body model and thereof
CN114387836A (zh) * 2021-12-15 2022-04-22 上海交通大学医学院附属第九人民医院 一种虚拟手术模拟方法、装置、电子设备及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106548675A (zh) * 2016-11-08 2017-03-29 湖南拓视觉信息技术有限公司 虚拟军事训练方法及装置
US20200126295A1 (en) * 2018-10-22 2020-04-23 The Hong Kong Polytechnic University Method and/or system for reconstructing from images a personalized 3d human body model and thereof
CN114387836A (zh) * 2021-12-15 2022-04-22 上海交通大学医学院附属第九人民医院 一种虚拟手术模拟方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN115830229B (zh) 2023-10-13

Similar Documents

Publication Publication Date Title
CN108829232B (zh) 基于深度学习的人体骨骼关节点三维坐标的获取方法
CN110222665B (zh) 一种基于深度学习和姿态估计的监控中人体动作识别方法
JP3512992B2 (ja) 画像処理装置および画像処理方法
CN112069933A (zh) 基于体态识别和人体生物力学的骨骼肌肉受力估计方法
CN103400119B (zh) 基于人脸识别技术的混合显示眼镜交互展示方法
CN111881887A (zh) 基于多摄像头的运动姿态监测和指导方法及装置
CN110728220A (zh) 基于人体动作骨骼信息的体操辅助训练方法
CN109176512A (zh) 一种体感控制机器人的方法、机器人及控制装置
Fillbrandt et al. Extraction of 3D hand shape and posture from image sequences for sign language recognition
CN111862299A (zh) 人体三维模型构建方法、装置、机器人和存储介质
CN110555408B (zh) 一种基于自适应映射关系的单摄像头实时三维人体姿态检测方法
CN110428470B (zh) 一种基于脑电辅助的增强现实眼镜眼动交互自标定方法
CN111881888A (zh) 基于姿态识别的智能桌控制方法及装置
CN117671738B (zh) 基于人工智能的人体姿态识别系统
CN115202485B (zh) 一种基于xr技术的姿态同步互动展馆展示系统
CN113077519A (zh) 一种基于人体骨架提取的多相机外参自动标定方法
JP2000322577A (ja) 画像照合装置及びその画像照合方法並びにその制御プログラムを記録した記録媒体
CN114495169A (zh) 一种人体姿态识别的训练数据处理方法、装置及设备
CN114387679B (zh) 基于递归卷积神经网络实现视线估计与注意力分析的系统及其方法
CN113822174B (zh) 视线估计的方法、电子设备及存储介质
JP3272584B2 (ja) 領域抽出装置及びそれを用いた方向検出装置
WO2022018811A1 (ja) 被写体の3次元姿勢推定装置、3次元姿勢推定方法、及びプログラム
CN116580169B (zh) 一种数字人驱动方法及装置、电子设备和存储介质
CN117831120A (zh) 基于人体骨骼点运动特征的动作识别系统及方法
CN115830229A (zh) 一种数字虚拟人3d模型采集装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant