CN105787941A - 一种混合现实仿真系统的快速配准方法 - Google Patents
一种混合现实仿真系统的快速配准方法 Download PDFInfo
- Publication number
- CN105787941A CN105787941A CN201610112630.7A CN201610112630A CN105787941A CN 105787941 A CN105787941 A CN 105787941A CN 201610112630 A CN201610112630 A CN 201610112630A CN 105787941 A CN105787941 A CN 105787941A
- Authority
- CN
- China
- Prior art keywords
- calibrated
- coordinate system
- virtual
- reality
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明涉及一种混合现实仿真系统的快速配准方法，包括：提供一虚拟被标定体、一现实被标定体，且虚拟被标定体与现实被标定体具有相同的形状，并且具有相同的姿态Qt，同时虚拟被标定体和现实被标定体的同一端点被定义为标定点B；建立虚拟空间的全局坐标系XYZ；建立虚拟被标定体的局部坐标系XYZ；最后，对现实被标定体进行快速配准。采用本发明所述方法对混合现实仿真系统配准后，使用现实被标定体进行操作时，现实被标定体的操作动作可以与虚拟被标定体的操作动作准确吻合，从而实现真实操作在虚拟场景中的同步及可视化操作，并且配准方法简单快速易操作，应用领域广，包括医学、军事、运动、工业制造、动画制作等领域混合现实仿真系统。
Description
技术领域
本发明属于混合现实仿真技术领域，具体涉及一种混合现实仿真系统的快速配准方法。
背景技术
混合现实技术是虚拟现实技术的进一步发展，该技术通过在虚拟环境中引入现实场景信息，在虚拟世界、现实世界和用户之间搭起一个交互反馈的信息回路，以增强用户体验的真实感。混合现实技术的研究具有很强的现实意义，混合现实仿真系统在实际操作时，需要进行标定才能使现实的操作动作与虚拟的操作动作同步，因此有必要发明一种混合现实仿真系统的快速配准方法，来使现实的操作动作与虚拟的操作动作达到准确同步的效果。
发明内容
为解决上述问题，本发明公开了一种混合现实仿真系统的快速配准方法。
本发明所采用的技术方案为：一种混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟被标定体、一现实被标定体，且虚拟被标定体与现实被标定体具有相同的形状，并且具有相同的姿态Qt，同时虚拟被标定体和现实被标定体的同一端点被定义为标定点B；
（2）建立虚拟空间的全局坐标系XYZ，坐标原点为O；建立虚拟被标定体的局部坐标系XYZ，坐标原点为O；
（3）对于不包含活塞类结构的现实被标定体，提供一定位传感器，并通过连接件设置于现实被标定体的非两端位置，定位传感器所处的位置定义为采样点P；定义虚拟被标定体的一端点为局部坐标系XYZ的坐标原点O；
开启电磁跟踪系统和计算机系统，采用三点定位的方法将定位传感器所捕捉采样点P的磁场空间坐标系数据变换为全局坐标系XYZ的数据，包括反映其空间位置的位置数据P0和反映其空间姿态的姿态数据Q0，则采样点P在局部坐标系XYZ中的坐标为：
空间位置
空间姿态
局部坐标系XYZ中坐标原点O与定位传感器采样点P的偏移为-P，变换至全局坐标系XYZ中偏移为-QP，不管操作时现实被标定体在什么位置，不会影响此偏移，故，由定位传感器采集的空间位置数据P和空间姿态数据Q确定的局部坐标系XYZ中坐标原点O在全局坐标系XYZ中的坐标为：
空间位置
空间姿态
最后，虚拟全局空间记录上述坐标标定点位置数据和姿态数据并与虚拟被标定体进行相对位置的相应锁定，完成混合现实仿真系统中不包含活塞类结构的现实被标定体的快速配准；
与（3）并列的：
（4）对于具有活塞类结构的现实被标定体，提供两个定位传感器，分别通过连接件，在现实被标定体的空筒前端安装第一传感器，在活塞柄末端安装第二传感器，第二传感器所处的位置定义为采样点P；第一传感器所处的位置定义为局部坐标系XYZ的坐标原点O；开启电磁跟踪系统和计算机系统，开始配准：
第一传感器采集其所处位置的全局坐标系XYZ的数据P0和Q0；
将现实被标定体的活塞完全推下，标定第一点P1，第二传感器采集第一点的全局坐标系XYZ的数据P1和Q1，由此可得出采样点P1点在局部坐标系XYZ中的坐标为：
保持现实被标定体的第步的状态，将活塞拔出至最大刻度，标定第二点P2，第二传感器采集第二点的全局坐标系XYZ的数据P2和Q2，由此可得出采样点P2点在局部坐标系XYZ中的坐标为：
保持现实被标定体的第步的状态，将活塞顺时针旋转一第一角度θ1，标定第三点P3，第二传感器采集第三点的全局坐标系XYZ的数据P3和Q3，由此可得出采样点P3点在局部坐标系XYZ中的坐标为：
保持现实被标定体的第步的状态，将活塞再顺时针旋转一第二角度θ2，标定第四点P4，第二传感器采集第四点的全局坐标系XYZ的数据P4和Q4，由此可得出采样点P4点在局部坐标系XYZ中的坐标为：
最后，虚拟全局空间记录上述坐标采样点数据并与虚拟被标定体进行相对位置的相应锁定，完成混合现实仿真系统中具有活塞类结构的现实被标定体的快速配准；
进一步，具有活塞类结构的现实被标定体在推注操作时的评价方法如下：
在现实被标定体进行推注操作时，第一传感器的全局坐标系数据为和，第二传感器的全局坐标系数据为和，则，第二传感器在局部坐标系XYZ中的坐标为：
由，，，可得出现实被标定体推注的极限长度：
其中，N为现实被标定体的轴向方向：
那么，现实被标定体当前相对的推注量为：
最后，计算机系统记录以上推注量数据并与操作要求的标准推注量进行比较，完成具有活塞类结构的现实被标定体推注量操作的评价；
与（3）并列的：
（5）对于具有旋转关节结构的被标定体，按照第（3）步进行锁定配准。
进一步，所述第一角度θ1的要求0○＜θ1＜360○。
进一步，所述第二角度θ2的要求0○＜θ2＜360○且θ2≠360○-θ1。
进一步，所述具有旋转关节结构的被标定体，其相邻关节两端被标定体具有同一标定点。
本发明所述的混合现实仿真系统的快速配准方法，有益效果在于：采用本发明快速配准方法对混合现实仿真系统配准后，使用现实被标定体进行仿真操作时，现实被标定体的操作动作可以与虚拟被标定体的操作动作准确吻合，从而实现真实操作在场景中的同步及可视化操作，并且配准方法简单快速、易操作，应用领域广，包括医学、军事、运动、工业制造、动画制作等领域混合现实仿真系统。
附图说明
图1是本发明混合现实仿真系统实施例1虚拟妇科检查仿真系统的示意图。
图2是本发明混合现实仿真系统实施例2虚拟枪械射击仿真系统的示意图。
图3是本发明混合现实仿真系统实施例3虚拟胸腔穿刺仿真系统的示意图。
图4是本发明混合现实仿真系统实施例4虚拟人体动画仿真系统的示意图。
图5是本发明混合现实仿真系统实施例5虚拟臀部注射仿真系统的示意图。
图6是本发明混合现实仿真系统实施例6虚拟机器人涂胶仿真系统的示意图。
具体实施方式
下面结合附图详细说明本发明的具体实施方式，被标定体可以为：手指、指套、穿刺针、手臂、注射器、机器人涂胶装置、机器人手臂、手术器械、动画制作工具、危险实验操作训练工具等。
在本发明的权利要求书和说明书中，为了清楚的表述本发明，多次出现了“姿态“这一名词，现对它说明如下：本发明所述的姿态是采用四元数据来描述的。
实施例1
图1是本发明混合现实仿真系统实施例1虚拟妇科检查仿真系统的示意图，本发明所述混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟3D妇科模型101、虚拟3D检查手指102、虚拟3D检查指套103；提供一妇科模型104、一检查手指106、一检查指套105并戴在检查手指106上；虚拟3D妇科模型101与妇科模型104具有相同的形状、大小和姿态；虚拟3D检查指套103与检查指套105具有相同的形状、大小和姿态；虚拟3D检查手指102与检查手指106具有相同的形状、大小和姿态Qt1，姿态Qt1优选虚拟3D检查手指102的指尖与虚拟3D妇科模型101肛门表面接触，并且虚拟3D检查手指102平行于水平面；同时带有检查指套105的检查手指106的指尖与妇科模型104的肛门表面接触，并且检查手指106平行于水平面；虚拟3D检查手指102和检查手指106的指尖端点被定义为标定点B；妇科模型104可采用3D打印、模具成型或数控机床（CNC,Computernumericalcontrol）加工而制成，虚拟3D妇科模型101、虚拟3D检查手指102和虚拟3D检查指套103可采用3D扫描或计算机绘制而成；
（2）建立虚拟3D妇科模型101的全局坐标系XYZ，坐标原点为O；建立虚拟3D检查手指102的局部坐标系XYZ，坐标原点为O；
（3）提供一定位传感器107，并通过连接件设置于检查指套105于靠近检查手指106指尖的位置处，定位传感器107所处的位置定义为采样点P；虚拟3D检查手指102的指尖端点定义为局部坐标系XYZ的坐标原点O；
开启电磁跟踪系统和计算机系统，采用三点定位的方法将定位传感器107所捕捉采样点P的磁场空间坐标系数据变换为全局坐标系XYZ的数据，包括反映其空间位置的位置数据P0和反映其空间姿态的姿态数据Q0，则采样点P在局部坐标系XYZ中的坐标为：
空间位置
空间姿态
局部坐标系XYZ中坐标原点O与定位传感器107采样点P的偏移为-P，变换至全局坐标系XYZ中偏移为-QP，不管检查训练时带有检查指套105的检查手指106在什么位置，不会影响此偏移，故，由定位传感器107采集的空间位置数据P和空间姿态数据Q确定的局部坐标系XYZ中坐标原点O在全局坐标系XYZ中的坐标为：
空间位置
空间姿态
最后，虚拟全局空间记录上述坐标标定点位置数据和姿态数据并与虚拟3D检查手指102进行相对位置的相应锁定，完成混合现实仿真系统中检查指套105和检查手指106的快速配准，使用带有检查指套105的检查手指106对妇科模型104进行仿真检查训练时，手指的检查动作可以与虚拟3D检查手指的检查动作准确吻合，从而实现真实操作在3D场景中的同步及可视化操作，并且配准方法简单快速、易操作，可应用于医学妇科检查的培训和考核。
实施例2
图2是本发明混合现实仿真系统实施例2虚拟枪械射击仿真系统的示意图，本发明所述混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟3D枪械模型201、虚拟3D叩击手指202、虚拟3D叩击指套203；提供一枪械204、一叩击手指206、一叩击指套205并戴在叩击手指206上；虚拟3D枪械模型201与枪械204具有相同的形状、大小和姿态；虚拟3D叩击指套203与叩击指套205具有相同的形状、大小和姿态；虚拟3D叩击手指202与叩击手指206具有相同的形状、大小和姿态Qt2，姿态Qt2优选虚拟3D叩击手指202的指尖与虚拟3D枪械模型201的扳机侧面接触，并且垂直于扳机侧面；同时带有叩击指套205的叩击手指206的指尖与枪械204的扳机侧面接触，并且垂直于扳机侧面；虚拟3D叩击手指202和叩击手指206的指尖端点被定义为标定点B；虚拟3D枪械模型201、虚拟3D叩击手指202和虚拟3D叩击指套203可采用3D扫描或计算机绘制而成；
（2）建立虚拟3D枪械模型201的全局坐标系XYZ，坐标原点为O；建立虚拟3D叩击手指202的局部坐标系XYZ，坐标原点为O；
（3）提供一定位传感器207，并通过连接件设置于叩击指套205靠近指尖的位置处，定位传感器207所处的位置定义为采样点P；虚拟3D叩击手指202的指尖端点定义为局部坐标系XYZ的坐标原点O；
开启电磁跟踪系统和计算机系统，采用三点定位的方法将定位传感器207所捕捉采样点P的磁场空间坐标系数据变换为全局坐标系XYZ的数据，包括反映其空间位置的位置数据P0和反映其空间姿态的姿态数据Q0，则采样点P在局部坐标系XYZ中的坐标为：
空间位置
空间姿态
局部坐标系XYZ中坐标原点O与定位传感器207采样点P的偏移为-P，变换至全局坐标系XYZ中偏移为-QP，不管射击训练时带有叩击指套205的叩击手指206在什么位置，不会影响此偏移，故，由定位传感器207采集的空间位置数据P和空间姿态数据Q确定的局部坐标系XYZ中坐标原点O在全局坐标系XYZ中的坐标为：
空间位置
空间姿态
最后，虚拟全局空间记录上述坐标标定点位置数据和姿态数据并与虚拟3D叩击手指202进行相对位置的相应锁定，完成混合现实仿真系统中叩击指套205和叩击手指206的快速配准，使用带有叩击指套的叩击手指对现实枪械进行仿真射击训练时，叩击手指的叩击动作可以与虚拟3D叩击手指的叩击动作准确吻合，从而实现真实操作在3D场景中的同步及可视化操作，并且配准方法简单快速、易操作，可用于军事或运动射击项目时的射击动作分析，提高技战水平。
实施例3
图3是本发明混合现实仿真系统实施例3虚拟胸腔穿刺仿真系统的示意图，本发明所述混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟3D穿刺模型301、虚拟3D穿刺针302；提供一穿刺模型303、一穿刺针304；虚拟3D穿刺模型301与穿刺模型303具有相同的形状、大小和姿态；虚拟3D穿刺针302与穿刺针304具有相同的形状、大小和姿态Qt3，姿态Qt3优选虚拟3D穿刺针302与虚拟3D穿刺模型301接触点所处曲面的法线重合；同时穿刺针304与穿刺模型303接触点所处曲面的法线重合；虚拟3D穿刺针302和穿刺针304的针尖端点被定义为标定点B；穿刺模型303可采用3D打印、模具成型或数控机床（CNC,Computernumericalcontrol）加工而制成，虚拟3D穿刺模型301、虚拟3D穿刺针302可采用3D扫描或计算机绘制而成；
（2）建立虚拟3D穿刺模型301的全局坐标系XYZ，坐标原点为O；建立虚拟3D穿刺针302的局部坐标系XYZ，坐标原点为O；
（5）提供一定位传感器305，并通过连接件设置于穿刺针304的靠近针尖的位置处，定位传感器305所处的位置定义为采样点P；虚拟3D穿刺针302的针尖定义端点为局部坐标系XYZ的坐标原点O；
开启电磁跟踪系统和计算机系统，采用三点定位的方法将定位传感器305所捕捉采样点P的磁场空间坐标系数据变换为全局坐标系XYZ的数据，包括反映其空间位置的位置数据P0和反映其空间姿态的姿态数据Q0，则采样点P在局部坐标系XYZ中的坐标为：
空间位置
空间姿态
局部坐标系XYZ中坐标原点O与定位传感器305采样点P的偏移为-P，变换至全局坐标系XYZ中偏移为-QP，不管穿刺训练时穿刺针304在什么位置，不会影响此偏移，故，由定位传感器305采集的空间位置数据P和空间姿态数据Q确定的局部坐标系XYZ中坐标原点O在全局坐标系XYZ中的坐标为：
空间位置
空间姿态
最后，虚拟全局空间记录上述坐标标定点位置数据和姿态数据并与虚拟3D穿刺针302进行相对位置的相应锁定，完成混合现实仿真系统中穿刺针304的快速配准，使用穿刺针对穿刺模型进行操作训练时，穿刺针的操作动作可以与虚拟3D穿刺针的操作动作准确吻合，从而实现真实操作在3D场景中的同步及可视化操作，并且配准方法简单快速、易操作，可应用于医学穿刺的培训和考核。
实施例4
图4是本发明混合现实仿真系统实施例4虚拟人体动画仿真系统的示意图，本发明所述混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟3D人体模型401、虚拟3D手臂模型402；虚拟3D人体模型401与人体403具有相同的形状、大小和姿态；虚拟3D手臂模型402与手臂404具有相同的形状、大小和姿态Qt4，姿态Qt4优选虚拟3D手臂模型402与水平面垂直；同时手臂404与水平面垂直；虚拟3D手臂模型402和手臂404的肘关节端点被定义为标定点B；虚拟3D人体模型401、虚拟3D手臂模型402可采用3D扫描或计算机绘制而成；
（2）建立虚拟3D人体模型401的全局坐标系XYZ，坐标原点为O；建立虚拟3D手臂模型402的局部坐标系XYZ，坐标原点为O；
（3）提供一定位传感器405，并通过连接件设置于手臂404的靠近肘关节的位置处，定位传感器405所处的位置定义为采样点P；虚拟3D手臂模型402的肘关节端点定义为局部坐标系XYZ的坐标原点O；
开启电磁跟踪系统和计算机系统，采用三点定位的方法将定位传感器405所捕捉采样点P的磁场空间坐标系数据变换为全局坐标系XYZ的数据，包括反映其空间位置的位置数据P0和反映其空间姿态的姿态数据Q0，则采样点P在局部坐标系XYZ中的坐标为：
空间位置
空间姿态
局部坐标系XYZ中坐标原点O与定位传感器405采样点P的偏移为-P，变换至全局坐标系XYZ中偏移为-QP，不管手臂404在什么位置，不会影响此偏移，故，由定位传感器405采集的空间位置数据P和空间姿态数据Q确定的局部坐标系XYZ中坐标原点O在全局坐标系XYZ中的坐标为：
空间位置
空间姿态
最后，虚拟全局空间记录上述坐标标定点位置数据和姿态数据并与虚拟3D手臂模型402进行相对位置的相应锁定，完成混合现实仿真系统中手臂404（具有旋转关节结构的被标定体）的快速配准，手臂的操作动作可以与虚拟3D手臂模型的操作动作准确吻合，从而实现真实操作在3D场景中的同步及可视化操作，并且配准方法简单快速、易操作，可应用于人体动画的模拟以及人体运动的分析。
实施例5
图5是本发明混合现实仿真系统实施例5虚拟臀部注射仿真系统的示意图，本发明所述混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟3D臀部注射模型501、虚拟3D注射器502；提供一臀部注射模型503、一注射器504；虚拟3D臀部注射模型501与臀部注射模型503具有相同的形状、大小和姿态；虚拟3D注射器502与注射器504具有相同的形状、大小和姿态Qt5，姿态Qt5优选虚拟3D注射器502与虚拟3D臀部注射模型501接触点所处曲面的法线重合；同时注射器504与臀部注射模型503接触点所处曲面的法线重合；虚拟3D注射器502和注射器504的针尖端点被定义为标定点B；臀部注射模型503可采用3D打印、模具成型或数控机床（CNC,Computernumericalcontrol）加工而制成，虚拟3D臀部注射模型501、虚拟3D注射器502可采用3D扫描或计算机绘制而成；
（2）建立虚拟3D臀部注射模型501的全局坐标系XYZ，坐标原点为O；建立虚拟3D注射器502的局部坐标系XYZ，坐标原点为O；
（3）提供两个定位传感器，分别通过连接件在注射器504的针筒前端安装第一传感器505，在注射器的活塞柄末端安装第二传感器506，第二传感器506所处的位置定义为采样点Px；第一传感器505所处的位置定义为局部坐标系XYZ的坐标原点O；开启电磁跟踪系统和计算机系统，开始配准：
第一传感器505采集其所处位置的全局坐标系XYZ的数据P0和Q0；
将注射器504的活塞完全推下，标定第一点P1，第二传感器506采集第一点的全局坐标系XYZ的数据P1和Q1，由此可得出采样点P1点在局部坐标系XYZ中的坐标为：
保持注射器504的第步的状态，将活塞拔出至最大刻度，标定第二点P2，第二传感器506采集第二点的全局坐标系XYZ的数据P2和Q2，由此可得出采样点P2点在局部坐标系XYZ中的坐标为：
保持注射器504的第步的状态，将活塞顺时针旋转一第一角度θ1，标定第三点P3，要求0○＜θ1＜360○，第一角度θ1优选120○，第二传感器506采集第三点的全局坐标系XYZ的数据P3和Q3，由此可得出采样点P3点在局部坐标系XYZ中的坐标为：
保持注射器504的第步的状态，将活塞再顺时针旋转一第二角度θ2，标定第四点P4，要求0○＜θ2＜360○且θ2≠360○-θ1，第二角度θ2优选120○，第二传感器506采集第四点的全局坐标系XYZ的数据P4和Q4，由此可得出采样点P4点在局部坐标系XYZ中的坐标为：
最后，虚拟全局空间记录上述坐标采样点数据并与虚拟3D注射器502进行相对位置的相应锁定，完成混合现实仿真系统中注射器504（具有活塞类结构的被标定体）的快速配准；
进一步，注射器504在推注操作时的评价方法如下：
在注射器504进行推注操作时，第一传感器505的全局坐标系数据为和，第二传感器506的全局坐标系数据为和，则，第二传感器506在局部坐标系XYZ中的坐标为：
由，，，可得出注射器504推注的极限长度：
其中，N为注射器504的轴向方向：
那么，注射器504当前相对的推注量为：
最后，计算机系统记录以上推注量数据并与训练操作要求的标准推注量进行比较，完成注射器504推注操作的评价。采用本发明配准方法对混合现实仿真系统配准后，使用注射器（具有活塞类结构的被标定体）对医学模型进行操作训练时，注射器的操作动作可以与虚拟3D注射器的操作动作准确吻合，包括推注状态，从而实现真实操作在3D场景中的同步及可视化操作，并且配准方法简单快速、易操作，可用于医学注射操作的培训及考核。
实施例6
图6是本发明混合现实仿真系统实施例6虚拟机器人涂胶仿真系统的示意图，本发明所述混合现实仿真系统的快速配准方法，包括：
（1）提供一虚拟3D汽车风挡玻璃模型601、虚拟3D机器人涂胶装置602；提供一汽车风挡玻璃603、一机器人涂胶装置604；虚拟3D汽车风挡玻璃模型601与汽车风挡玻璃603具有相同的形状、大小和姿态；虚拟3D机器人涂胶装置602与机器人涂胶装置604具有相同的形状、大小和姿态Qt6，姿态Qt6优选虚拟3D机器人涂胶装置602出胶口与虚拟3D汽车风挡玻璃模型601接触，并且虚拟3D机器人涂胶装置602的活塞方向与接触点所处曲面的法线重合；同时机器人涂胶装置604出胶口与汽车风挡玻璃模型603接触，并且机器人涂胶装置604的活塞方向与接触点所处曲面的法线重合；虚拟3D机器人涂胶装置602和机器人涂胶装置604的出胶口端点被定义为标定点B；虚拟3D汽车风挡玻璃模型601、虚拟3D机器人涂胶装置602可采用3D扫描或计算机绘制而成；
（2）建立虚拟3D汽车风挡玻璃模型601的全局坐标系XYZ，坐标原点为O；建立虚拟3D机器人涂胶装置602的局部坐标系XYZ，坐标原点为O；
（3）提供两个定位传感器，分别通过连接件在机器人涂胶装置604的胶筒前端安装第一传感器605，在活塞末端安装第二传感器606，第二传感器606所处的位置定义为采样点Px；第一传感器605所处的位置定义为局部坐标系XYZ的坐标原点O；开启电磁跟踪系统和计算机系统，开始配准：
第一传感器605采集其所处位置的全局坐标系XYZ的数据P0和Q0；
将机器人涂胶装置604的活塞完全推下，标定第一点P1，第二传感器606采集第一点的全局坐标系XYZ的数据P1和Q1，由此可得出采样点P1点在局部坐标系XYZ中的坐标为：
保持机器人涂胶装置604的第步的状态，将活塞拔出至最大刻度，标定第二点P2，第二传感器606采集第二点的全局坐标系XYZ的数据P2和Q2，由此可得出采样点P2点在局部坐标系XYZ中的坐标为：
保持机器人涂胶装置604的第步的状态，将活塞顺时针旋转一第一角度θ1，标定第三点P3，要求0○＜θ1＜360○，第一角度θ1优选120○，第二传感器606采集第三点的全局坐标系XYZ的数据P3和Q3，由此可得出采样点P3点在局部坐标系XYZ中的坐标为：
保持机器人涂胶装置604的第步的状态，将活塞再顺时针旋转一第二角度θ2，标定第四点P4，要求0○＜θ2＜360○且θ2≠360○-θ1，第二角度θ2优选120○，第二传感器606采集第四点的全局坐标系XYZ的数据P4和Q4，由此可得出采样点P4点在局部坐标系XYZ中的坐标为：
最后，虚拟全局空间记录上述坐标采样点数据并与虚拟3D机器人涂胶装置602进行相对位置的相应锁定，完成混合现实仿真系统中机器人涂胶装置604（具有活塞类结构的被标定体）的快速配准；
进一步，机器人涂胶装置604在推注操作时的评价方法如下：
在机器人涂胶机604进行推注操作时，第一传感器605的全局坐标系数据为和，第二传感器606的全局坐标系数据为和，则，第二传感器606在局部坐标系XYZ中的坐标为：
由，，，可得出机器人涂胶装置604推注的极限长度：
其中，N为机器人涂胶装置604的轴向方向：
那么，机器人涂胶装置604当前相对的推注量为：
最后，计算机系统记录以上推注量数据并与操作要求的标准推注量进行比较，完成机器人涂胶装置604推注量操作的评价。采用本发明配准方法对混合现实仿真系统配准后，使用机器人涂胶装置（具有活塞类结构的被标定体）对汽车风挡玻璃进行涂胶操作时，机器人涂胶装置的操作动作可以与虚拟3D机器人涂胶装置的操作动作准确吻合，包括推注状态，从而实现真实操作在3D场景中的同步及可视化操作，并且配准方法简单快速、易操作，可应用于机器人涂胶装置对汽车风挡玻璃涂胶工艺的技术及工艺质量分析。
以上表示了本发明的优选实施例，应该理解的是，本领域技术人员可以修改在此描述的本发明，而仍然实现本发明的有利效果。因此，以上描述并不作为对本发明的限制，凡依本发明所做的任何变更，皆属本发明的保护范围之内。
Claims (4)
1.一种混合现实仿真系统的快速配准方法，其特征在于，包括：
（1）提供一虚拟被标定体、一现实被标定体，且虚拟被标定体与现实被标定体具有相同的形状，并且具有相同的姿态Qt，同时虚拟被标定体和现实被标定体的同一端点被定义为标定点B；
（2）建立虚拟空间的全局坐标系XYZ，坐标原点为O；建立虚拟被标定体的局部坐标系XYZ，坐标原点为O；
（3）对于不包含活塞类结构的现实被标定体，提供一定位传感器，并通过连接件设置于现实被标定体的非两端位置，定位传感器所处的位置定义为采样点P；定义虚拟被标定体的一端点为局部坐标系XYZ的坐标原点O；
开启电磁跟踪系统和计算机系统，采用三点定位的方法将定位传感器所捕捉采样点P的磁场空间坐标系数据变换为全局坐标系XYZ的数据，包括反映其空间位置的位置数据P0和反映其空间姿态的姿态数据Q0，则采样点P在局部坐标系XYZ中的坐标为：
空间位置
空间姿态
局部坐标系XYZ中坐标原点O与定位传感器采样点P的偏移为-P，变换至全局坐标系XYZ中偏移为-QP，不管操作时现实被标定体在什么位置，不会影响此偏移，故，由定位传感器采集的空间位置数据P和空间姿态数据Q确定的局部坐标系XYZ中坐标原点O在全局坐标系XYZ中的坐标为：
空间位置
空间姿态
最后，虚拟全局空间记录上述坐标标定点位置数据和姿态数据并与虚拟被标定体进行相对位置的相应锁定，完成混合现实仿真系统中不包含活塞类结构的现实被标定体的快速配准；
与（3）并列的：
（4）对于具有活塞类结构的现实被标定体，提供两个定位传感器，分别通过连接件，在现实被标定体的空筒前端安装第一传感器，在活塞柄末端安装第二传感器，第二传感器所处的位置定义为采样点P；第一传感器所处的位置定义为局部坐标系XYZ的坐标原点O；开启电磁跟踪系统和计算机系统，开始配准：
第一传感器采集其所处位置的全局坐标系XYZ的数据P0和Q0；
将现实被标定体的活塞完全推下，标定第一点P1，第二传感器采集第一点的全局坐标系XYZ的数据P1和Q1，由此可得出采样点P1点在局部坐标系XYZ中的坐标为：
保持现实被标定体的第步的状态，将活塞拔出至最大刻度，标定第二点P2，第二传感器采集第二点的全局坐标系XYZ的数据P2和Q2，由此可得出采样点P2点在局部坐标系XYZ中的坐标为：
保持现实被标定体的第步的状态，将活塞顺时针旋转一第一角度θ1，标定第三点P3，第二传感器采集第三点的全局坐标系XYZ的数据P3和Q3，由此可得出采样点P3点在局部坐标系XYZ中的坐标为：
保持现实被标定体的第步的状态，将活塞再顺时针旋转一第二角度θ2，标定第四点P4，第二传感器采集第四点的全局坐标系XYZ的数据P4和Q4，由此可得出采样点P4点在局部坐标系XYZ中的坐标为：
最后，虚拟全局空间记录上述坐标采样点数据并与虚拟被标定体进行相对位置的相应锁定，完成混合现实仿真系统中具有活塞类结构的现实被标定体的快速配准；
进一步，具有活塞类结构的现实被标定体在推注操作时的评价方法如下：
在现实被标定体进行推注操作时，第一传感器的全局坐标系数据为和，第二传感器的全局坐标系数据为和，则，第二传感器在局部坐标系XYZ中的坐标为：
由，，，可得出现实被标定体推注的极限长度：
其中，N为现实被标定体的轴向方向：
那么，现实被标定体当前相对的推注量为：
最后，计算机系统记录以上推注量数据并与操作要求的标准推注量进行比较，完成具有活塞类结构的现实被标定体推注量操作的评价；
与（3）并列的：
（5）对于具有旋转关节结构的被标定体，按照第（3）步进行锁定配准。
2.根据权利要求1所述的一种混合现实仿真系统的快速配准方法，其特征在于：所述第一角度θ1的要求0○＜θ1＜360○。
3.根据权利要求1所述的一种混合现实仿真系统的快速配准方法，其特征在于：所述第二角度θ2的要求0○＜θ2＜360○且θ2≠360○-θ1。
4.根据权利要求1所述的一种混合现实仿真系统的快速配准方法，其特征在于：所述具有旋转关节结构的被标定体，其相邻关节两端被标定体具有同一标定点。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610112630.7A CN105787941B (zh) | 2016-03-01 | 2016-03-01 | 一种混合现实仿真系统的快速配准方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610112630.7A CN105787941B (zh) | 2016-03-01 | 2016-03-01 | 一种混合现实仿真系统的快速配准方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105787941A true CN105787941A (zh) | 2016-07-20 |
| CN105787941B CN105787941B (zh) | 2020-01-03 |
Family
ID=56386533
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610112630.7A Active CN105787941B (zh) | 2016-03-01 | 2016-03-01 | 一种混合现实仿真系统的快速配准方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN105787941B (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107714006A (zh) * | 2016-08-12 | 2018-02-23 | 深圳市掌网科技股份有限公司 | 一种基于虚拟现实头戴式显示装置的远程互动系统及方法 |
| CN107958491A (zh) * | 2017-12-06 | 2018-04-24 | 河南省水利勘测设计研究有限公司 | 移动增强现实虚拟坐标与施工现场坐标匹配方法 |
| CN109620406A (zh) * | 2019-01-29 | 2019-04-16 | 北京和华瑞博科技有限公司 | 用于全膝关节置换术的显示及配准方法 |
| CN109767499A (zh) * | 2018-12-29 | 2019-05-17 | 北京诺亦腾科技有限公司 | 基于mr设备的多用户沉浸式交互方法、系统及存储介质 |
| CN110070788A (zh) * | 2019-03-18 | 2019-07-30 | 叶哲伟 | 一种基于混合现实的人体3d经络穴位可视化方法 |
| CN110689624A (zh) * | 2019-10-11 | 2020-01-14 | 北京华宁全视科技有限公司 | 一种将混合现实场景中虚拟模型与实物配准的方法 |
| CN111260793A (zh) * | 2020-01-10 | 2020-06-09 | 中国电子科技集团公司第三十八研究所 | 面向增强和混合现实的远程虚实高精度匹配定位的方法 |
| CN111508285A (zh) * | 2020-04-24 | 2020-08-07 | 中国人民解放军总医院 | 一种基于混合现实的医学急救培训方法及系统 |
| CN111524433A (zh) * | 2020-05-29 | 2020-08-11 | 深圳华鹊景医疗科技有限公司 | 一种针灸训练系统和方法 |
| CN112057139A (zh) * | 2020-07-31 | 2020-12-11 | 常州锦瑟医疗信息科技有限公司 | 基于混合现实技术的手术定位系统 |
| US11288877B2 (en) | 2020-01-10 | 2022-03-29 | 38th Research Institute, China Electronics Technology Group Corp. | Method for matching a virtual scene of a remote scene with a real scene for augmented reality and mixed reality |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101727182A (zh) * | 2010-01-28 | 2010-06-09 | 南京航空航天大学 | 头盔式虚拟现实环境中参与者实际手的可视化方法和系统 |
| US20110037212A1 (en) * | 2009-08-06 | 2011-02-17 | Par Systems, Inc. | Support assemblies for a flexible fixture |
| CN103247056A (zh) * | 2013-05-29 | 2013-08-14 | 中国人民解放军第三军医大学第一附属医院 | 人体骨关节系统三维模型-二维影像空间配准方法 |
| CN103841924A (zh) * | 2011-08-15 | 2014-06-04 | 康复米斯公司 | 用于修正接合部关节置换植入物的修正系统、工具和方法 |
-
2016
- 2016-03-01 CN CN201610112630.7A patent/CN105787941B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110037212A1 (en) * | 2009-08-06 | 2011-02-17 | Par Systems, Inc. | Support assemblies for a flexible fixture |
| CN101727182A (zh) * | 2010-01-28 | 2010-06-09 | 南京航空航天大学 | 头盔式虚拟现实环境中参与者实际手的可视化方法和系统 |
| CN103841924A (zh) * | 2011-08-15 | 2014-06-04 | 康复米斯公司 | 用于修正接合部关节置换植入物的修正系统、工具和方法 |
| CN103247056A (zh) * | 2013-05-29 | 2013-08-14 | 中国人民解放军第三军医大学第一附属医院 | 人体骨关节系统三维模型-二维影像空间配准方法 |
Cited By (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107714006A (zh) * | 2016-08-12 | 2018-02-23 | 深圳市掌网科技股份有限公司 | 一种基于虚拟现实头戴式显示装置的远程互动系统及方法 |
| CN107958491B (zh) * | 2017-12-06 | 2021-05-14 | 河南省水利勘测设计研究有限公司 | 移动增强现实虚拟坐标与施工现场坐标匹配方法 |
| CN107958491A (zh) * | 2017-12-06 | 2018-04-24 | 河南省水利勘测设计研究有限公司 | 移动增强现实虚拟坐标与施工现场坐标匹配方法 |
| CN109767499A (zh) * | 2018-12-29 | 2019-05-17 | 北京诺亦腾科技有限公司 | 基于mr设备的多用户沉浸式交互方法、系统及存储介质 |
| CN109620406A (zh) * | 2019-01-29 | 2019-04-16 | 北京和华瑞博科技有限公司 | 用于全膝关节置换术的显示及配准方法 |
| CN109620406B (zh) * | 2019-01-29 | 2021-08-17 | 北京和华瑞博医疗科技有限公司 | 用于全膝关节置换术的显示及配准方法 |
| CN110070788A (zh) * | 2019-03-18 | 2019-07-30 | 叶哲伟 | 一种基于混合现实的人体3d经络穴位可视化方法 |
| CN110689624A (zh) * | 2019-10-11 | 2020-01-14 | 北京华宁全视科技有限公司 | 一种将混合现实场景中虚拟模型与实物配准的方法 |
| CN110689624B (zh) * | 2019-10-11 | 2023-03-03 | 北京华宁全视科技有限公司 | 一种将混合现实场景中虚拟模型与实物配准的方法 |
| CN111260793B (zh) * | 2020-01-10 | 2020-11-24 | 中国电子科技集团公司第三十八研究所 | 面向增强和混合现实的远程虚实高精度匹配定位的方法 |
| CN111260793A (zh) * | 2020-01-10 | 2020-06-09 | 中国电子科技集团公司第三十八研究所 | 面向增强和混合现实的远程虚实高精度匹配定位的方法 |
| US11288877B2 (en) | 2020-01-10 | 2022-03-29 | 38th Research Institute, China Electronics Technology Group Corp. | Method for matching a virtual scene of a remote scene with a real scene for augmented reality and mixed reality |
| CN111508285A (zh) * | 2020-04-24 | 2020-08-07 | 中国人民解放军总医院 | 一种基于混合现实的医学急救培训方法及系统 |
| CN111524433A (zh) * | 2020-05-29 | 2020-08-11 | 深圳华鹊景医疗科技有限公司 | 一种针灸训练系统和方法 |
| CN112057139A (zh) * | 2020-07-31 | 2020-12-11 | 常州锦瑟医疗信息科技有限公司 | 基于混合现实技术的手术定位系统 |
| CN112057139B (zh) * | 2020-07-31 | 2022-02-22 | 常州锦瑟医疗信息科技有限公司 | 基于混合现实技术的手术定位系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105787941B (zh) | 2020-01-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105787941A (zh) | 一种混合现实仿真系统的快速配准方法 | |
| Jacobson et al. | Tangible and modular input device for character articulation | |
| CN106445130B (zh) | 一种用于手势识别的动作捕捉手套及其校准方法 | |
| CN103975292B (zh) | 磁触控笔 | |
| CN103489214A (zh) | 增强现实系统中基于虚拟模型预处理的虚实遮挡处理方法 | |
| Yang et al. | Assembly operation process planning by mapping a virtual assembly simulation to real operation | |
| CN108268129A (zh) | 对动作捕捉手套上的多个传感器进行校准的方法和装置及动作捕捉手套 | |
| CN101567093B (zh) | 一种三维手势模型的初始化方法 | |
| CN105023294B (zh) | 结合传感器与Unity3D的定点移动增强现实方法 | |
| CN103714221A (zh) | 一种利用人体形态参数调整三维人体的变形方法 | |
| CN104864851B (zh) | 一种基于矩形周长和面积加权约束的单目视觉位姿测量方法 | |
| CN108921929A (zh) | 一种识别系统及训练方法及单张单目图像的识别方法 | |
| KR101338918B1 (ko) | 지하시설물 3차원 모델링 시스템 및 방법 | |
| CN108145975A (zh) | 一种三维运动物体的磁场正演系统和方法 | |
| CN103400411B (zh) | 三维实体建模的方法和系统 | |
| Igarashi et al. | Knitty: 3D Modeling of Knitted Animals with a Production Assistant Interface. | |
| CN103488287A (zh) | 一种数据手套输入方法 | |
| Henshall et al. | Towards a high fidelity simulation of the kidney biopsy procedure | |
| CN104021208B (zh) | 一种实体群建模系统数据定义和存取方法 | |
| Wang et al. | Correction of start-up time difference-induced measurement errors of a high-speed binocular stereovision system | |
| Shepherd et al. | Visualizing the" hidden" variables in robot programs | |
| CN111000631A (zh) | 基于Unity3D体渲染的内窥镜模拟方法及系统 | |
| TWI286719B (en) | System of simulating flight navigation and the method of using the same | |
| KR20200063727A (ko) | 제스처 인식 방법 및 장치 | |
| Kim et al. | Sensor-display registration for 3d physical user interaction using a flat-panel display |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |