CN103093653A - 一种增强现实培训系统及方法 - Google Patents
一种增强现实培训系统及方法 Download PDFInfo
- Publication number
- CN103093653A CN103093653A CN2013100225674A CN201310022567A CN103093653A CN 103093653 A CN103093653 A CN 103093653A CN 2013100225674 A CN2013100225674 A CN 2013100225674A CN 201310022567 A CN201310022567 A CN 201310022567A CN 103093653 A CN103093653 A CN 103093653A
- Authority
- CN
- China
- Prior art keywords
- mobile phone
- equipment
- panel computer
- camera
- model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种增强现实培训系统和方法,其只对设备的复杂关键部件建立3D仿真动作模型,其它的部件不进行建模,当摄像头对准设备的复杂关键部件时,3D仿真动作模型会覆盖在手机或平板电脑的屏幕画面中设备相应的复杂关键部件上,这样可以突出3D仿真动作模型,可在设备现场对员工进行培训,实现以较低成本实现仿真效果较好的培训。通过本发明方法还可结合真实的设备了解设备运行情况同时降低设备运转耗能和安全风险。
Description
技术领域
本发明涉及一种仿真培训系统及方法。
背景技术
在一些复杂且危险的设备培训过程中,往往通过建立复杂的仿真3D模型放置于3D引擎中,通过鼠标、键盘或是其它外设对其进行交互操作,与现实机器的操作还是有区别。且建立与实际培训设备结构一样的3D模型需要投入很多的成本。
发明内容
本发明的目的是提供一种成本较低、仿真效果更好的增强现实培训系统。
本发明的另一目的是提供一种成本较低、仿真效果更好的增强现实培训方法。
为了实现上述目的,本发明采用如下技术方案:
一种增强现实培训系统,包括带摄像头的平板手机或平板电脑,内置于所述手机或平板电脑里的3DMAX软件,及内置于所述手机或平板电脑里的仿真培训模拟软件;
通过所述手机或平板电脑的摄像头对设备进行拍照,得到设备照片;再通过所述手机或平板电脑中的3DMAX软件对所述设备照片中设备的复杂关键部件建立3D仿真模型;根据此复杂关键部件的真实动作情况,在所述手机或平板电脑中进行3D仿真模型的仿真动作模型制作,得到3D仿真动作模型;再通过所述仿真培训软件利用所述设备照片制作出可识别的目标图片;所述仿真培训软件可对来自摄像头的图像与目标图片进行对照,当匹配时,系统可调出所述3D仿真动作模型,覆盖在来自摄像头的图像上的设备的复杂关键部件上,并在所述手机或平板电脑的屏幕中显示;可通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互;可在通过手机或平板电脑的摄像头直接观察设备的情况下,通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互。
一种增强现实培训系统,通过如下步骤实现:
A、通过带摄像头的手机或平板电脑在设备现场对设备进行张拍照,得到设备照片;
B、利用步骤A中得到的设备照片对设备的复杂关键部件通过3DMAX软件进行3D建模,得到3D仿真模型;
C、根据设备的复杂关键部件的真实动作情况,进行3D仿真模型的仿真动作模型制作,得到3D仿真动作模型;
D、通过仿真培训软件利用设备照片制作出可识别的目标图片;
E、通过仿真培训软件识别来自摄像头的图像与目标图片,当来自摄像头的图像与目标图片相匹配时,系统可调出在步骤C中做好的3D仿真动作模型,并将此3D仿真动作模型覆盖在来自摄像头的图像中的设备的复杂关键部件上并在屏幕中显示;
F、可通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互;或可在通过手机或平板电脑的摄像头直接观察设备的情况下,通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互。
采用上述方案后,本发明的增强现实培训系统和方法,只对设备的复杂关键部件建立3D仿真动作模型,其它的部件不进行建模,当摄像头对准设备的复杂关键部件时,3D仿真动作模型会覆盖在手机或平板电脑的屏幕画面中设备相应的复杂关键部件上,这样可以突出3D仿真动作模型,可在设备现场对员工进行培训,实现以较低成本实现仿真效果较好的培训。通过本发明方法还可结合真实的设备了解设备运行情况同时降低设备运转耗能和安全风险。
具体实施方式
本发明的增强现实培训系统,包括带摄像头的手机或平板电脑,内置于所述手机或平板电脑里的3DMAX软件,及内置于所述手机或平板电脑里的仿真培训模拟软件。
通过所述手机或平板电脑的摄像头对设备进行拍照,得到设备照片;再通过所述手机或平板电脑中的3DMAX软件对所述设备照片中设备的复杂关键部件建立3D仿真模型;根据此复杂关键部件的真实动作情况,在所述手机或平板电脑中进行3D仿真模型的仿真动作模型制作,得到3D仿真动作模型;再通过所述仿真培训软件利用所述设备照片制作出可识别的目标图片;所述仿真培训软件可对来自摄像头的图像与目标图片进行对照,当匹配时,系统可调出所述3D仿真动作模型,覆盖在来自摄像头的图像上的设备的复杂关键部件上,并在所述手机或平板电脑的屏幕中显示;可通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互;可在通过手机或平板电脑的摄像头直接观察设备的情况下,通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互。
本发明的一种增强现实培训系统,通过如下步骤实现:
A、通过带摄像头的手机或平板电脑在设备现场对设备进行拍照,特别是对设备的复杂关键部件的各个角度进行拍照,得到设备照片;
B、利用步骤A中得到的设备照片对设备的复杂关键部件通过3DMAX软件进行3D建模,得到3D仿真模型;
C、根据设备的复杂关键部件的真实动作情况,进行3D仿真模型的仿真动作模型制作,得到3D仿真动作模型;具体的做法是:先针对设备的复杂关键部件的结构进行测量和分解,根据步骤A所得的设备照片,按照真实比例通过3D MAX软件对设备的复杂关键部件进行建模,根据设备的复杂关键部件实际运动情况,针对每个运动的过程进行动作分解,在3D MAX软件中对步骤B建立好的3D仿真模型进行模拟动作制作,得到3D仿真动作模型,再把做好的3D仿真动作模型导入3D引擎中,通过编写程序控制3D仿真动作模型运动并组合各种动作;
D、通过仿真培训软件利用设备照片制作出针对设备的复杂关键部件的可识别的目标图片,把目标图片载入到培训系统中进行存储,与步骤A所得的设备照片通过一定的算法进行图像相似度的比较,并确定设备照片中设备的复杂关键部件的坐标及角度,做为3D仿真动作模型表现的坐标与角度;
E、当手机或平板电脑的摄像头对准设备时,手机或平板电脑的屏幕上会显示摄像头看到的内容(图像),通过仿真培训软件可识别来自摄像头的图像与目标图片,当来自摄像头的图像与目标图片相匹配时,系统可调出在步骤C中做好的3D仿真动作模型,并将此3D仿真动作模型覆盖在来自摄像头的图像中的设备的复杂关键部件上并在屏幕中显示;
F、可通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互,达到观察设备各个角度及工作情况的目的。如:当手指向左划动时,3D仿真动作模型向左转动,当手指向右划动时,3D仿真动作模型向右转动,当手指向上划动时,3D仿真动作模型向上翻动等等;
或,可在通过手机或平板电脑的摄像头直接观察设备的情况下,通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互。如:双击手机或平板电脑的屏幕时,跳出菜单,再点击“动作1”,3D仿真动作模型就会进行对应于“动作1”的运动。
本发明的增强现实培训系统和方法,只对设备的复杂关键部件建立3D仿真动作模型,其它的部件不进行建模,当摄像头对准设备的复杂关键部件时,3D仿真动作模型会覆盖在平板手机或平板电脑的屏幕画面中设备相应的复杂关键部件上,这样可以突出3D仿真动作模型,可在设备现场对员工进行培训,实现以较低成本实现仿真效果较好的培训。通过本发明方法还可结合真实的设备了解设备运行情况同时降低设备运转耗能和安全风险。
Claims (2)
1.一种增强现实培训系统,其特征在于:包括带摄像头的平板手机或平板电脑,内置于所述手机或平板电脑里的3DMAX软件,及内置于所述手机或平板电脑里的仿真培训模拟软件;
通过所述手机或平板电脑的摄像头对设备进行拍照,得到设备照片;再通过所述手机或平板电脑中的3DMAX软件对所述设备照片中设备的复杂关键部件建立3D仿真模型;根据此复杂关键部件的真实动作情况,在所述手机或平板电脑中进行3D仿真模型的仿真动作模型制作,得到3D仿真动作模型;再通过所述仿真培训软件利用所述设备照片制作出可识别的目标图片;所述仿真培训软件可对来自摄像头的图像与目标图片进行对照,当匹配时,系统可调出所述3D仿真动作模型,覆盖在来自摄像头的图像上的设备的复杂关键部件上,并在所述手机或平板电脑的屏幕中显示;可通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互;可在通过手机或平板电脑的摄像头直接观察设备的情况下,通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互。
2.一种增强现实培训系统,其特征在于,通过如下步骤实现:
A、通过带摄像头的手机或平板电脑在设备现场对设备进行张拍照,得到设备照片;
B、利用步骤A中得到的设备照片对设备的复杂关键部件通过3DMAX软件进行3D建模,得到3D仿真模型;
C、根据设备的复杂关键部件的真实动作情况,进行3D仿真模型的仿真动作模型制作,得到3D仿真动作模型;
D、通过仿真培训软件利用设备照片制作出可识别的目标图片;
E、通过仿真培训软件识别来自摄像头的图像与目标图片,当来自摄像头的图像与目标图片相匹配时,系统可调出在步骤C中做好的3D仿真动作模型,并将此3D仿真动作模型覆盖在来自摄像头的图像中的设备的复杂关键部件上并在屏幕中显示;
F、可通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互;或可在通过手机或平板电脑的摄像头直接观察设备的情况下,通过手指操作手机或平板电脑的可触摸屏幕,实现与所述3D仿真动作模型的交互。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2013100225674A CN103093653A (zh) | 2013-01-21 | 2013-01-21 | 一种增强现实培训系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2013100225674A CN103093653A (zh) | 2013-01-21 | 2013-01-21 | 一种增强现实培训系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103093653A true CN103093653A (zh) | 2013-05-08 |
Family
ID=48206170
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2013100225674A Pending CN103093653A (zh) | 2013-01-21 | 2013-01-21 | 一种增强现实培训系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103093653A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105184858A (zh) * | 2015-09-18 | 2015-12-23 | 上海历影数字科技有限公司 | 一种增强现实移动终端的方法 |
CN105575202A (zh) * | 2016-03-03 | 2016-05-11 | 南京康尼机电股份有限公司 | 一种用于轨道交通门系统的多媒体教学方法 |
CN106652590A (zh) * | 2017-03-27 | 2017-05-10 | 深圳未来立体教育科技有限公司 | 教学方法、教学识别体及教学系统 |
CN107132912A (zh) * | 2017-03-24 | 2017-09-05 | 广西七三科技有限公司 | 一种gis与bim增强现实在建筑规划的互动演示方法及系统 |
CN107742259A (zh) * | 2017-10-31 | 2018-02-27 | 国网山东省电力公司济阳县供电公司 | 一种具有ar功能的配电线路施工培训系统 |
CN108847057A (zh) * | 2018-06-29 | 2018-11-20 | 北京师范大学 | 一种光电效应实验的虚实结合展示系统及方法 |
CN110930773A (zh) * | 2019-11-20 | 2020-03-27 | 深圳前海维度新科有限公司 | 一种具有增强现实教学功能的智能黑板 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001317898A (ja) * | 2000-05-08 | 2001-11-16 | Mitsubishi Heavy Ind Ltd | 機雷処分具訓練装置および機雷処分具訓練プログラムを記録した記録媒体 |
JP2003067424A (ja) * | 2001-08-28 | 2003-03-07 | Crc Solutions Corp | ラティス構造による曲面モデルの軽量化手法を利用したWebベースのCAEシステム |
CN101067827A (zh) * | 2007-06-14 | 2007-11-07 | 上海创图网络科技发展有限公司 | 一种基于浏览器的三维网页实现方法 |
CN101149843A (zh) * | 2007-10-10 | 2008-03-26 | 深圳先进技术研究院 | 一种数字城市的继承式自动生成及实时更新方法 |
CN101894124A (zh) * | 2010-05-14 | 2010-11-24 | 北京联合大学 | 一种三维物体的显示方法 |
CN102147658A (zh) * | 2011-02-12 | 2011-08-10 | 华为终端有限公司 | 实现扩增实境互动的方法、扩增实境互动装置及移动终端 |
CN201946139U (zh) * | 2011-01-31 | 2011-08-24 | 殷继彬 | 动感信息阅读交互装置 |
CN102722106A (zh) * | 2011-03-29 | 2012-10-10 | 上海晟昊信息科技有限公司 | 一种沉浸式虚拟现实仿真交互展示方法及其展示系统 |
CN102831257A (zh) * | 2011-06-17 | 2012-12-19 | 上海日浦信息技术有限公司 | 一种道路交通虚拟标志标线的模拟试验平台的建立方法 |
-
2013
- 2013-01-21 CN CN2013100225674A patent/CN103093653A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001317898A (ja) * | 2000-05-08 | 2001-11-16 | Mitsubishi Heavy Ind Ltd | 機雷処分具訓練装置および機雷処分具訓練プログラムを記録した記録媒体 |
JP2003067424A (ja) * | 2001-08-28 | 2003-03-07 | Crc Solutions Corp | ラティス構造による曲面モデルの軽量化手法を利用したWebベースのCAEシステム |
CN101067827A (zh) * | 2007-06-14 | 2007-11-07 | 上海创图网络科技发展有限公司 | 一种基于浏览器的三维网页实现方法 |
CN101149843A (zh) * | 2007-10-10 | 2008-03-26 | 深圳先进技术研究院 | 一种数字城市的继承式自动生成及实时更新方法 |
CN101894124A (zh) * | 2010-05-14 | 2010-11-24 | 北京联合大学 | 一种三维物体的显示方法 |
CN201946139U (zh) * | 2011-01-31 | 2011-08-24 | 殷继彬 | 动感信息阅读交互装置 |
CN102147658A (zh) * | 2011-02-12 | 2011-08-10 | 华为终端有限公司 | 实现扩增实境互动的方法、扩增实境互动装置及移动终端 |
CN102722106A (zh) * | 2011-03-29 | 2012-10-10 | 上海晟昊信息科技有限公司 | 一种沉浸式虚拟现实仿真交互展示方法及其展示系统 |
CN102831257A (zh) * | 2011-06-17 | 2012-12-19 | 上海日浦信息技术有限公司 | 一种道路交通虚拟标志标线的模拟试验平台的建立方法 |
Non-Patent Citations (2)
Title |
---|
刘向铜等: "基于3Dmax的虚拟现实的建立过程的探讨", 《西部探矿工程》 * |
谷骁勇等: "基于3DMAX技术的机械形体装配与运行的仿真", 《科技广场》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105184858A (zh) * | 2015-09-18 | 2015-12-23 | 上海历影数字科技有限公司 | 一种增强现实移动终端的方法 |
CN105575202A (zh) * | 2016-03-03 | 2016-05-11 | 南京康尼机电股份有限公司 | 一种用于轨道交通门系统的多媒体教学方法 |
CN107132912A (zh) * | 2017-03-24 | 2017-09-05 | 广西七三科技有限公司 | 一种gis与bim增强现实在建筑规划的互动演示方法及系统 |
CN106652590A (zh) * | 2017-03-27 | 2017-05-10 | 深圳未来立体教育科技有限公司 | 教学方法、教学识别体及教学系统 |
CN106652590B (zh) * | 2017-03-27 | 2019-11-22 | 深圳未来立体教育科技有限公司 | 教学方法、教学识别体及教学系统 |
CN107742259A (zh) * | 2017-10-31 | 2018-02-27 | 国网山东省电力公司济阳县供电公司 | 一种具有ar功能的配电线路施工培训系统 |
CN108847057A (zh) * | 2018-06-29 | 2018-11-20 | 北京师范大学 | 一种光电效应实验的虚实结合展示系统及方法 |
CN110930773A (zh) * | 2019-11-20 | 2020-03-27 | 深圳前海维度新科有限公司 | 一种具有增强现实教学功能的智能黑板 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103093653A (zh) | 一种增强现实培训系统及方法 | |
CN102930753B (zh) | 加油站虚拟培训系统及应用 | |
CN105374251A (zh) | 一种基于沉浸式输入、输出设备的矿用虚拟现实培训系统 | |
CN102609991B (zh) | 三维实体模型轻量化优化方法 | |
WO2016150292A1 (zh) | 一种融合真实环境的虚实结合的交互方法及系统 | |
CN104575132A (zh) | 基于自然图像识别与增强现实技术的互动教育方法和系统 | |
CN107705636A (zh) | 一种基于增强现实技术的船舶实验教学系统 | |
CN106910251A (zh) | 基于ar和移动终端的模型仿真方法 | |
CN104851134A (zh) | 虚拟触发与真实物体触发相结合的扩增实境系统及其方法 | |
CN106502401B (zh) | 一种图像控制方法及装置 | |
CN204695223U (zh) | 一种基于增强现实的模型展示系统 | |
CN113680054A (zh) | 基于计算机视觉库的游戏交互方法及装置 | |
CN103927204A (zh) | 一种网页版三维在线游戏的实现方法 | |
CN103700128A (zh) | 移动设备及其增强显示方法 | |
CN103680248A (zh) | 船舶机舱虚拟现实仿真系统 | |
Zhang et al. | Application of simulation and virtual reality to physical education and athletic training | |
Newton et al. | The situation engine: a hyper-immersive platform for construction workplace simulation and learning | |
CN115861496A (zh) | 基于动捕系统的电力场景虚拟人体驱动方法及装置 | |
Hu et al. | A rapid development method of virtual assembly experiments based on 3d game engine | |
Wang et al. | I’m tired of demos: an adaptive MR remote collaborative platform | |
CN115797517A (zh) | 虚拟模型的数据处理方法、装置、设备和介质 | |
Shen et al. | Research of marine engine room 3-D visual simulation system for the training of marine engineers | |
CN104035560A (zh) | 一种基于摄像头的人机实时交互方法 | |
CN103995620A (zh) | 一种空中触控系统 | |
Saini | Manoeuvring drone (Tello ans Tello EDU) using body poses or gestures |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20130508 |
|
RJ01 | Rejection of invention patent application after publication |