CN102147661A - 柔性物体力触觉再现形变模型验证装置和方法 - Google Patents

柔性物体力触觉再现形变模型验证装置和方法 Download PDF

Info

Publication number
CN102147661A
CN102147661A CN201110074126XA CN201110074126A CN102147661A CN 102147661 A CN102147661 A CN 102147661A CN 201110074126X A CN201110074126X A CN 201110074126XA CN 201110074126 A CN201110074126 A CN 201110074126A CN 102147661 A CN102147661 A CN 102147661A
Authority
CN
China
Prior art keywords
flexible article
deformation model
pedestal
stepper motor
interactive tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201110074126XA
Other languages
English (en)
Other versions
CN102147661B (zh
Inventor
陆熊
万文章
张丹
周小超
徐晨曦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN201110074126XA priority Critical patent/CN102147661B/zh
Publication of CN102147661A publication Critical patent/CN102147661A/zh
Application granted granted Critical
Publication of CN102147661B publication Critical patent/CN102147661B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开一种柔性物体力触觉再现形变模型验证装置,包括基座、步进电机、平移台、六维力传感器、夹具、至少四个摄像头、摄像头支架和托盘,其中,所述的步进电机固定于基座上,而平移台可移动地设于基座上,并与步进电机连接,在步进电机的控制下在竖直方向移动;六维力传感器和夹具均固定于平移台上;托盘和摄像头支架均固定于基座上,而所有摄像头均匀分布于摄像头支架上。此种验证装置可实时采集柔性物体在多种交互工具作用下的作用力和图像数据,从而达到验证柔性物体力触觉再现形变模型准确性和真实性的目的,具有精度高、分辨率高的特点。本发明还公开一种柔性物体力触觉再现形变模型验证方法。

Description

柔性物体力触觉再现形变模型验证装置和方法
技术领域
本发明属于力触觉再现技术领域,特别涉及一种应用于力触觉再现虚拟环境中柔性物体形变模型的准确性和真实性的验证装置和验证方法。
背景技术
力触觉再现技术,是一种新兴的人机交互技术,它借助力触觉再现设备和计算仿真环境使得操作者可以触摸、感知和操纵虚拟物体。柔性物体,是相对于刚性体而言的,指在外力作用下或是在运动过程中会产生变形的物体,比如肝脏等组织、器官。
形变的准确性和真实性是柔性物体力触觉再现模型的重要特性,是指虚拟环境要给人真实感,而且虚拟环境所做出的反应要符合客观规律。为了验证虚拟的柔性物体在多种交互方式下所产生的效果,通常有两种方式。一是对比现有的同类型的实验数据,二是通过实验装置采集柔性物体形变的实测数据。如韩国的光学三维形变分析仪结合一维力传感器的装置,由于拍摄时交互工具会遮挡物体的部分表面,所以不能形成全面的三维形变模型,而且测量的作用力数据比较简单,仅限于一维情况。另外,仪器价格又十分昂贵。
因此,本发明人针对现有技术的缺陷和不足,进行深入研究,本案由此产生。
发明内容
本发明所要解决的技术问题是针对前述背景技术中的缺陷和不足,提供一种柔性物体力触觉再现形变模型验证装置和方法,其可实时采集柔性物体在多种交互工具作用下的作用力和图像数据,从而达到验证柔性物体力触觉再现形变模型准确性和真实性的目的,具有精度高、分辨率高的特点。
本发明为解决上述技术问题,所采用的解决方案是:
一种柔性物体力触觉再现形变模型验证装置,包括基座、步进电机、平移台、六维力传感器、夹具、至少四个摄像头、摄像头支架和托盘,其中,所述的步进电机固定于基座上,而平移台可移动地设于基座上,并与步进电机连接,在步进电机的控制下在竖直方向移动;六维力传感器和夹具均固定于平移台上;托盘和摄像头支架均固定于基座上,而所有摄像头均匀分布于摄像头支架上。
上述基座呈L型,包括竖直方向的移动轴和水平方向的底座,其中,步进电机固定于移动轴的顶部,平移台移动设于移动轴上,摄像头支架和托盘固定于底座上。
上述摄像头支架为圆环形。
一种柔性物体力触觉再现形变模型验证方法,包括如下步骤:
(1)将柔性物体置于托盘上;
(2)通过步进电机控制交互工具以设定的速度接近柔性物体;
(3)利用六维力传感器采集交互工具的作用力,并判断交互工具是否接触到柔性物体,当确认接触后,再控制交互工具离开柔性物体;
(4)控制交互工具与托盘上的柔性物体进行交互,六维力传感器同步采集交互工具的作用力,摄像头采集柔性物体的形变图像,前述作用力和图像传输给计算机,结合时间一并存储;
(5)交互结束后,根据存储的柔性物体表面的视频信息,通过三维重建技术构建柔性物体的三维形变模型;
(6)根据已经构建的柔性物体三维形变模型,结合交互工具受到的作用力信息,验证虚拟现实中柔性物体力触觉再现形变模型的准确性和真实性。
采用上述方案后,本发明具有以下优点:
(1)计算机控制步进电机,从而控制平移台的移动,自动化程度高,精确度高,可以满足交互需求;
(2)四个摄像头实时拍摄工具与柔性物体的交互过程,事后通过三维重建技术可以全面再现被操作柔性物体的形变过程,真实可靠;
(3)真实柔性物体的三维形变图像,结合当时通过六维力传感器获得的作用力信息,效果逼真,可以有效地验证柔性物体力触觉再现形变模型的准确性和真实性。
附图说明
图1是本发明验证装置的结构示意图;
图2是本发明验证方法的工作流程示意图。
具体实施方式
以下将结合附图以及具体实验实例,对本发明的结构及实现过程进行详细描述。
首先参考图1所示,本发明提供一种柔性物体力触觉再现形变模型验证装置,包括基座8、步进电机1、平移台2、六维力传感器3、夹具4、摄像头5、摄像头支架6和托盘7,以下将分别介绍。
基座8呈L型,具有一个位于竖直方向的移动轴81和设于水平面的底座82。
步进电机1固定于基座8中移动轴81的顶部。
平移台2可移动地设于移动轴81上,并与步进电机1连接,在步进电机1的控制下沿移动轴81上下移动,调节工具与柔性物体的距离。
六维力传感器3和夹具4均固定于平移台2上,并随平移台2同步移动,其中的夹具4用于夹持各种与柔性物体进行交互的工具,而六维力传感器3则可精确感受到夹具4所夹持交互工具受到的作用力,并传输给计算机。
托盘7设于底座82上,用于放置柔性物体,如肝脏等组织、器官。
摄像头支架6呈圆环形,设于底座82上,用于固定摄像头5;在本实施例中,共装设有4个摄像头5(由于被观测物体的表面需要同时从不同角度拍摄的两幅图片才能恢复它的三维信息,因此至少四个摄像头才能实现全方位拍摄,当然也可采用更多数目个摄像头,不以本实施例为限),均匀分布于摄像头支架6上,用于全方位观测托盘7中柔性物体的形变,并将图像数据传输给计算机进行处理,用于恢复柔性物体的形变过程。
实际操作时,首先将交互工具(如针、棒等)利用夹具4夹持,并将柔性物体置于托盘7上;通过计算机控制步进电机1,进而控制平移台2带动夹具4上的交互工具靠近托盘7上的柔性物体,并对其进行操作;在此过程中,摄像头支架6上的四个摄像头5从不同角度将柔性物体的形变过程记录下来,并传输给计算机;六维力传感器3感测交互工具受到的作用力,并通过其中的作用力测试模块传输给计算机。操作完成后,根据摄像头5采集到的图像,计算机可以利用三维重建技术全面恢复柔性物体的形变过程,结合形变过程中交互工具的受力情况,就可以真实地反应柔性物体的形变特征。对比虚拟现实中柔性物体力触觉再现形变模型在相同工具下的交互效果,就可以很好地验证模型的准确性和真实性。
另外,本发明还提供一种基于前述柔性物体力触觉再现形变模型验证装置的验证方法,具体步骤为:
(1)确定世界坐标系,固定摄像头,采用匹配算法标定摄像头的外部参数;
(2)将柔性物体放置在托盘上,选择交互工具并将它固定在夹具上;
(3)通过步进电机控制交互工具以设定的速度接近柔性物体;
(4)根据六维力传感器获得的作用力数据判断交互工具是否接触到柔性物体,确认接触后,再移动工具离开柔性物体;
(5)此时,开始操作工具与托盘上的柔性物体进行交互,六维传感器和摄像头同时将工具受到的作用力和柔性物体形变图像传输给计算机,结合时间一并存储;
(6)当交互操作结束后,根据存储的柔性物体表面的视频信息,通过三维重建技术构建柔性物体的三维形变模型;
(7)根据已经构建的柔性物体三维形变模型,结合交互工具受到的作用力信息,就可以有效地验证虚拟现实中柔性物体力触觉再现形变模型的准确性和真实性。
以上实施例仅为说明本发明的技术思想,不能以此限定本发明的保护范围,凡是按照本发明提出的技术思想,在技术方案基础上所做的任何改动,均落入本发明保护范围之内。

Claims (4)

1.一种柔性物体力触觉再现形变模型验证装置,其特征在于:包括基座、步进电机、平移台、六维力传感器、夹具、至少四个摄像头、摄像头支架和托盘,其中,所述的步进电机固定于基座上,而平移台可移动地设于基座上,并与步进电机连接,在步进电机的控制下在竖直方向移动;六维力传感器和夹具均固定于平移台上;托盘和摄像头支架均固定于基座上,而所有摄像头均匀分布于摄像头支架上。
2.如权利要求1所述的柔性物体力触觉再现形变模型验证装置,其特征在于:所述基座呈L型,包括竖直方向的移动轴和水平方向的底座,其中,步进电机固定于移动轴的顶部,平移台移动设于移动轴上,摄像头支架和托盘固定于底座上。
3.如权利要求1所述的柔性物体力触觉再现形变模型验证装置,其特征在于:所述摄像头支架为圆环形。
4.一种基于如权利要求1所述的柔性物体力触觉再现形变模型验证装置的验证方法,其特征在于包括如下步骤:
(1)将柔性物体置于托盘上;
(2)通过步进电机控制交互工具以设定的速度接近柔性物体;
(3)利用六维力传感器采集交互工具的作用力,并判断交互工具是否接触到柔性物体,当确认接触后,再控制交互工具离开柔性物体;
(4)控制交互工具与托盘上的柔性物体进行交互,六维力传感器同步采集交互工具的作用力,摄像头采集柔性物体的形变图像,前述作用力和图像传输给计算机,结合时间一并存储;
(5)交互结束后,根据存储的柔性物体表面的视频信息,通过三维重建技术构建柔性物体的三维形变模型;
(6)根据已经构建的柔性物体三维形变模型,结合交互工具受到的作用力信息,验证虚拟现实中柔性物体力触觉再现形变模型的准确性和真实性。
CN201110074126XA 2011-03-28 2011-03-28 柔性物体力触觉再现形变模型验证装置和方法 Expired - Fee Related CN102147661B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110074126XA CN102147661B (zh) 2011-03-28 2011-03-28 柔性物体力触觉再现形变模型验证装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110074126XA CN102147661B (zh) 2011-03-28 2011-03-28 柔性物体力触觉再现形变模型验证装置和方法

Publications (2)

Publication Number Publication Date
CN102147661A true CN102147661A (zh) 2011-08-10
CN102147661B CN102147661B (zh) 2013-01-23

Family

ID=44421963

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110074126XA Expired - Fee Related CN102147661B (zh) 2011-03-28 2011-03-28 柔性物体力触觉再现形变模型验证装置和方法

Country Status (1)

Country Link
CN (1) CN102147661B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106650237A (zh) * 2016-11-16 2017-05-10 南京信息工程大学 一种支持力触觉反馈的虚拟柔性体手术仿真系统
CN114179082A (zh) * 2021-12-07 2022-03-15 南京工程学院 一种基于接触力信息的图像力触觉检测装置及再现方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030176770A1 (en) * 2000-03-16 2003-09-18 Merril Gregory L. System and method for controlling force applied to and manipulation of medical instruments
CN1776358A (zh) * 2005-11-23 2006-05-24 宁铎 一种非接触式测量物体在三维空间位移和形变的新方法
DE102008004421B3 (de) * 2008-01-14 2009-04-16 Hugo Kern Und Liebers Gmbh & Co. Kg Platinen- Und Federnfabrik Verfahren und Vorrichtung zum Messen des Verformungsverhaltens einer Feder
CN101441205A (zh) * 2008-11-17 2009-05-27 江苏科技大学 生物软组织力反馈触觉建模的测试系统
JP2009113033A (ja) * 2007-10-17 2009-05-28 Hitachi Chem Co Ltd 三次元形状樹脂成形品に回路を形成する回路形成装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030176770A1 (en) * 2000-03-16 2003-09-18 Merril Gregory L. System and method for controlling force applied to and manipulation of medical instruments
CN1776358A (zh) * 2005-11-23 2006-05-24 宁铎 一种非接触式测量物体在三维空间位移和形变的新方法
JP2009113033A (ja) * 2007-10-17 2009-05-28 Hitachi Chem Co Ltd 三次元形状樹脂成形品に回路を形成する回路形成装置
DE102008004421B3 (de) * 2008-01-14 2009-04-16 Hugo Kern Und Liebers Gmbh & Co. Kg Platinen- Und Federnfabrik Verfahren und Vorrichtung zum Messen des Verformungsverhaltens einer Feder
CN101441205A (zh) * 2008-11-17 2009-05-27 江苏科技大学 生物软组织力反馈触觉建模的测试系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106650237A (zh) * 2016-11-16 2017-05-10 南京信息工程大学 一种支持力触觉反馈的虚拟柔性体手术仿真系统
CN114179082A (zh) * 2021-12-07 2022-03-15 南京工程学院 一种基于接触力信息的图像力触觉检测装置及再现方法

Also Published As

Publication number Publication date
CN102147661B (zh) 2013-01-23

Similar Documents

Publication Publication Date Title
CN107514983B (zh) 一种基于三维测量技术测量物体表面积的系统及方法
CN106873550A (zh) 模拟装置以及模拟方法
CN106441087B (zh) 一种基于图像处理的工件多尺寸多参数测量方法
CN103481285B (zh) 基于现实虚拟技术的高压带电作业机器人控制系统及方法
EP2538241A3 (en) Advanced remote nondestructive inspection system and process
CN107121090A (zh) 一种3d曲面玻璃的快速测量方法
CN104677330A (zh) 一种小型双目立体视觉测距系统
CN109064552A (zh) 一种文物虚拟修复方法和修复系统
CN107560547B (zh) 一种扫描系统及扫描方法
CN106323286B (zh) 一种机器人坐标系与三维测量坐标系的变换方法
CN102147661B (zh) 柔性物体力触觉再现形变模型验证装置和方法
CN107918954A (zh) 用于2d兴趣点的3d映射的方法
CN202182939U (zh) 探针卡检测装置
CN103592182B (zh) 随载下材料微观组织结构实时图像观测采集平台及方法
CN203704883U (zh) 三维测量系统
Kohut et al. Application of modal analysis supported by 3D vision-based measurements
CN106643566B (zh) 一种自动测量轮毂轮辐初始角度的方法
Milosevic et al. Digital image correlation analysis of biomaterials
JP2007307580A (ja) 鋳型キャビティ面の計測方法およびその記憶媒体
CN202634612U (zh) 一种信息物理图像融合装置
JP2000306096A (ja) 仮想カメラ画像形成方法
CN104792614A (zh) 一种基于同步化方法测量岩样抗拉强度的方法
CN103901235B (zh) 定位装置和定位方法
Zhang et al. Automatic microassembly method based on teaching playback and visual servo
JP4481383B2 (ja) 形状検証システムおよび形状検証方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130123

CF01 Termination of patent right due to non-payment of annual fee