CN103485784B - 基于虚拟现实技术的采煤机远程操纵系统及远程控制方法 - Google Patents

基于虚拟现实技术的采煤机远程操纵系统及远程控制方法 Download PDF

Info

Publication number
CN103485784B
CN103485784B CN201310468301.2A CN201310468301A CN103485784B CN 103485784 B CN103485784 B CN 103485784B CN 201310468301 A CN201310468301 A CN 201310468301A CN 103485784 B CN103485784 B CN 103485784B
Authority
CN
China
Prior art keywords
data
virtual
hole
coal
machine
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310468301.2A
Other languages
English (en)
Other versions
CN103485784A (zh
Inventor
马宏伟
张旭辉
吴海雁
周元华
赵友军
毛清华
刘海涛
姜俊英
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian University of Science and Technology
Original Assignee
Xian University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian University of Science and Technology filed Critical Xian University of Science and Technology
Priority to CN201310468301.2A priority Critical patent/CN103485784B/zh
Publication of CN103485784A publication Critical patent/CN103485784A/zh
Application granted granted Critical
Publication of CN103485784B publication Critical patent/CN103485784B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种基于虚拟现实技术的采煤机远程操纵系统及其远程控制方法,该系统包括控制平台、井下工控台、井下控制器、外部硬件与虚拟软件数据接口、虚拟工作平台,其中控制平台由远程操纵装置、数据采集模块组成。远程控制方法包括:远程操纵装置发出控制指令,由井下工控台接收并由井下控制器驱动井下三机工作,并且将井下三机工作状态数据实时进行采集及处理,由数据采集模块上传至控制平台;同时,操纵装置发出的控制指令,由软硬件数据接口进行采集并发送至虚拟工作平台,由内部编写的程序完成虚拟样机的驱动,此外,控制平台还将井下三机工作状态数据实时发送给虚拟工作平台,对虚拟样机进行修正,实现井下三机与虚拟样机的同步运行,从而完成采煤机的远程监控。本发明设计合理,实用性强,推广应用价值高。

Description

基于虚拟现实技术的采煤机远程操纵系统及远程控制方法
技术领域
本发明涉及远程监控技术领域,尤其是涉及一种采煤机远程操纵系统及方法。
背景技术
采煤机是是煤炭生产中主要的机械设备,决定着综采工作面的生产效率。虽然采煤机控制系统具有监测和故障诊断功能,但由于煤炭开采是典型的复杂时变系统,特别是采煤工作面中设备多、空间环境复杂,其中人、机、环境诸多因素相互交错,并行发生,致使工作人员不能及时掌控采煤机的各项运行参数,因此,实现综采工作面的自动化成为当今煤矿领域研究的一个重点,采煤机远程控制系统便是其中重要的一块内容。目前国内尚无成熟的采煤机远程控制系统,大多数煤矿普遍采用安装摄像头的方式进行远程监控,由于采煤机的工作环境复杂、恶劣,往往造成摄像头采集图像不清晰,给远程控制带来很大难度;或利用采煤机控制器监视采煤机运行时的电流、电压、速度、温度、摇臂角度等参数,直接将参数显示或进行图形建模显示,由采煤机工作人员进行操作并实时监测采煤机工作状态。但由于监测的采煤机运行参数不直观的显示方式,使得工作人员很难准确判断采煤机的工作状态,因此该控制方式也存在很大的弊端。
发明内容
本发明的目的是针对上述现有技术的不足,提供一种基于虚拟现实技术的采煤机远程操纵系统及其远程控制方法,该系统设计新颖合理,结构紧凑,实现方便,智能化程度高。
本发明的技术方案是:一种基于虚拟现实技术的采煤机远程操纵系统,其特征在于:所述系统包括控制平台、井下工控台、井下控制器、外部硬件与虚拟软件数据接口、虚拟工作平台,其中控制平台由远程操纵装置、数据采集模块组成,主要完成控制操作、与井下工控台之间数据的传输以及与虚拟样机之间数据的传输;井下工控台通过井下控制器完成对井下三机的控制以及数据的采集、处理;虚拟工作平台实现井下三机工作状态的展示;外部硬件与虚拟软件接口利用VC++实现,完成软硬件间数据的传输。
所述的虚拟工作平台选用Quest3D作为软件平台,完成模型的载入、模型动态编程、模型效果生成,实现采煤机及其环境的动态实时显示。
所述的数据采集模块,利用高速采集卡、Quest3D提供的SDK包以及MYSQL数据库,完成远程操作装置中数据的采集及传输。
所述的远程操纵装置中的操纵手柄与井下工作面采煤机械操作流程一致,通过数据采集模块与井下工控台完成控制平台与井下三机之间的数据传输。
所述的井下工控台负责远程操纵装置与各种井下控制器之间数据的传输。
所述的井下控制器负责对井下设备进行控制以及各个传感器数据的采集,与井下中控台实现数据的传输。
高速采集卡直接采集控制平台发送的控制指令及数据,利用Quest3D提供的SDK包,在VisualC++环境下,遵循Quest3DSDK的接口标准,使用回调函数技术,进行了自定义管线的编写,将外部的数据传输到Quest3D。
所述的自定义管线编写分为五个步骤:首先包含库文件;添加Quest3D模版;然后编写管线代码,实现数据传送的功能;最后导出管线;在Quest3D中调用,将采集的数据实时传送给虚拟样机,虚拟样机通过实时读取数据实现采煤机工作状态真实再现。
一种基于虚拟现实技术的采煤机远程操纵系统的远程控制方法,其特征在于:远程操纵装置发出控制指令,由井下工控台接收并由井下控制器驱动井下三机工作,并且将井下三机工作状态数据实时进行采集及处理,由数据采集模块上传至控制平台;同时,操纵装置发出的控制指令,由软硬件数据接口进行采集并发送至虚拟工作平台,由内部编写的程序完成虚拟样机的驱动,此外,控制平台还将井下三机工作状态数据实时发送给虚拟工作平台,对虚拟样机进行修正,实现井下三机与虚拟样机的同步运行,从而完成采煤机的远程监控。
根据虚拟工作平台中要真实再现的采煤机实时状态,进行传感器的选择。
有益效果
本发明设计新颖合理,实现方便,使用操作便捷。采用传感检测技术对采煤机的工况数据进行采集、分析和处理;基于虚拟现实技术构建了采煤机的监控平台;利用自动控制技术驱动监控平台中的采煤机三维模型以及真实采煤机动作,实现了基于虚拟现实技术的采煤机控制系统,为采煤机的远程监控提供了新的解决途径。能够使得远程控制装置与井下设备进行可靠事实通信,将井下设备及环境信息以三维动态的形式展示在虚拟平台。
附图说明
图1是本发明的方法流程图。
图2是本发明的系统结构框图。
图3是本发明的软件调用方式图。
图4是本发明的虚拟平台实现方法图。
具体实施方式
如图1所示,基于虚拟现实的采煤机控制系统工作原理:首先,远程操纵装置发出控制指令,由井下工控台接收并驱动井下三机(采煤机、刮板输送机、液压支架,后面简称“三机”)工作,并且将井下三机工作状态数据实时进行采集及处理,由数据采集模块上传至控制平台;同时,远程操纵装置发出的控制指令,由软硬件数据接口进行采集并发送至虚拟工作平台,由内部编写的程序完成虚拟设备的驱动。此外,控制平台还将工作状态数据实时发送给虚拟设备进行修正,实现井下三机与虚拟样机的同步运行,从而完成采煤机的远程监控。
根据采煤机虚拟工作平台中要真实再现的采煤机实时状态,进行传感器的选择。采煤机端安装有位移编码器、红外传感器、(摇臂)陀螺仪、油缸位移传感器、(机身)陀螺仪,分别将采煤机的工作状态进行数据采集,并配备有液压支架位移传感器、压力传感器、刮板输送机传感器,对液压支架和刮板输送机进行定位。
如图2所示,该系统由控制平台、井下工控台、井下控制器、外部硬件与虚拟软件数据接口、虚拟工作平台组成,系统功能保留了原有采煤机的本地操作和无线遥控功能,增加了远程状态监视、故障报警和控制等功能。控制平台由远程操纵装置、数据采集模块组成,主要完成控制操作、与井下工控台之间数据的传输以及与虚拟样机之间数据的传输。井下工控台通过井下控制器完成对井下三机的控制以及数据的采集、处理。选择Quest3D软件构建虚拟工作平台,主要完成模型的载入、逻辑编程,实现井下三机工作状态的显示。外部控制硬件与虚拟软件接口利用vc++实现,完成软硬件间数据的传输。
所述的虚拟工作平台界面分为井下采煤机工作状态真实再现区、工作参数显示区两个功能区,通过该平台界面的场景切换按钮,可按照需要切换不同的Scene和Camera,为工作人员对采煤机各个部位的监控提供方便。
如图3所示,本发明软件调用过程是:高速采集卡直接采集控制台发送的控制指令及数据,利用Quest3D提供的SDK包,在VisualC++环境下,遵循Quest3DSDK的接口标准,使用“回调函数”技术,进行了自定义管线的编写,将外部的数据传输到Quest3D。“自定义管线”编写分为五个步骤:首先包含库文件;添加Quest3D模版;然后编写管线代码,实现数据传送的功能;最后导出管线;在Quest3D中调用,将采集的数据实时传送给虚拟样机,虚拟样机通过实时读取数据实现采煤机工作状态真实再现。
如图4所示,虚拟工作平台的搭建方法是:首先,建立三维模型,根据相关规定和总体设计需求,在建模软件Solidworks中根据特定型号的采煤机结构及尺寸完成3D建模和虚拟场景的构造。所建模型基于真实井下环境,在确保模型必要精确度和逼真度的同时,减少纹理精细度、降低细节等级并减少图形复杂度以提高系统运行效率。然后进行模型动态编程,将模型导入Quest3D进行组装,通过Quest3D内部优化Channel引擎,对仿真进行优化。使用软件内置的逻辑编程工具箱实现虚拟操作系统与外界之间的互交方式。最后完成模型效果生成,对模型进行贴图烘焙、灯光材质,实时渲染模型并将其三维显示,完成虚拟平台的搭建。
需要说明的是:以上所述仅为本发明的优选实施例,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述实施例所记载的技术方案进行修改,或者对其中部分技术特征进行同等替换。
凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (4)

1.一种基于虚拟现实技术的采煤机远程操纵系统,其特征在于:所述系统包括控制平台、井下工控台、井下控制器、外部硬件与虚拟软件数据接口、虚拟工作平台,其中控制平台由远程操纵装置、数据采集模块组成,主要完成控制操作、与井下工控台之间数据的传输以及与虚拟样机之间数据的传输;井下工控台通过井下控制器完成对井下三机的控制以及数据的采集、处理;虚拟工作平台实现井下三机工作状态的展示;外部硬件与虚拟软件接口利用VC++实现,完成软硬件间数据的传输;
其中虚拟工作平台选用Quest3D作为软件平台,完成模型的载入、模型动态编程、模型效果生成,实现采煤机及其环境的动态实时显示;
所述数据采集模块,利用高速采集卡、Quest3D提供的SDK包以及MYSQL数据库,完成远程操作装置中数据的采集及传输;
所述远程操纵装置中的操纵手柄与井下工作面采煤机械操作流程一致,通过数据采集模块与井下工控台完成控制平台与井下三机之间的数据传输;
所述井下工控台负责远程操纵装置与各种井下控制器之间数据的传输;
所述井下控制器负责对井下设备进行控制以及各个传感器数据的采集,与井下中控台实现数据的传输,根据虚拟工作平台中要真实再现的采煤机实时状态,进行传感器的选择。
2.如权利要求1所述的一种基于虚拟现实技术的采煤机远程操纵系统,其特征在于:高速采集卡直接采集控制平台发送的控制指令及数据,利用Quest3D提供的SDK包,在VisualC++环境下,遵循Quest3DSDK的接口标准,使用回调函数技术,进行了自定义管线的编写,将外部的数据传输到Quest3D。
3.如权利要求2所述的一种基于虚拟现实技术的采煤机远程操纵系统,其特征在于自定义管线编写分为五个步骤:首先包含库文件;添加Quest3D模版;然后编写管线代码,实现数据传送的功能;最后导出管线;在Quest3D中调用,将采集的数据实时传送给虚拟样机,虚拟样机通过实时读取数据实现采煤机工作状态真实再现。
4.一种基于虚拟现实技术的采煤机远程操纵系统的远程控制方法,其特征在于:远程操纵装置发出控制指令,由井下工控台接收并由井下控制器驱动井下三机工作,并且将井下三机工作状态数据实时进行采集及处理,由数据采集模块上传至控制平台;同时,操纵装置发出的控制指令,由软硬件数据接口进行采集并发送至虚拟工作平台,由内部编写的程序完成虚拟样机的驱动,此外,控制平台还将井下三机工作状态数据实时发送给虚拟工作平台,对虚拟样机进行修正,实现井下三机与虚拟样机的同步运行,从而完成采煤机的远程监控。
CN201310468301.2A 2013-09-30 2013-09-30 基于虚拟现实技术的采煤机远程操纵系统及远程控制方法 Active CN103485784B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310468301.2A CN103485784B (zh) 2013-09-30 2013-09-30 基于虚拟现实技术的采煤机远程操纵系统及远程控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310468301.2A CN103485784B (zh) 2013-09-30 2013-09-30 基于虚拟现实技术的采煤机远程操纵系统及远程控制方法

Publications (2)

Publication Number Publication Date
CN103485784A CN103485784A (zh) 2014-01-01
CN103485784B true CN103485784B (zh) 2015-11-18

Family

ID=49826329

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310468301.2A Active CN103485784B (zh) 2013-09-30 2013-09-30 基于虚拟现实技术的采煤机远程操纵系统及远程控制方法

Country Status (1)

Country Link
CN (1) CN103485784B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103867205B (zh) * 2014-03-11 2016-04-20 西安科技大学 一种掘进机远程控制系统及方法
CN103853558A (zh) * 2014-03-11 2014-06-11 西安科技大学 一种通用的虚拟操控装置数据接口及其实现方法
CN104141505B (zh) * 2014-06-30 2016-02-10 中国矿业大学 一种基于惯性测量的矿用液压支架手势控制系统及方法
EP3341814A4 (en) * 2015-09-23 2019-05-01 IntegenX Inc. SYSTEMS AND METHODS FOR LIVE HELP
CN105447230B (zh) * 2015-11-13 2018-10-12 中国矿业大学 一种基于地理信息系统的综采设备数字样机分析系统与方法
CN105405350B (zh) * 2015-12-22 2018-05-15 青岛杰瑞工控技术有限公司 一种基于钻柱排管一体化技术的模拟培训系统
CN105405335A (zh) * 2015-12-28 2016-03-16 西安科技大学 一种煤矿综采工作面远程控制虚拟培训系统
CN105971604B (zh) * 2016-06-21 2018-01-05 孙峰 远红外热成像跟踪掘进机切割头虚拟仿真遥控装置
CN106313086B (zh) * 2016-08-21 2018-07-06 西安科技大学 一种煤矿救援机器人远程控制系统和控制方法
CN106568424B (zh) * 2016-10-27 2017-11-07 西安科技大学 基于机器视觉的采煤机摇臂采高检测方法
CN106570877B (zh) * 2016-10-27 2017-12-05 西安科技大学 基于采煤机虚拟样机与真实图像配准的采煤机位姿定位系统及方法
CN106774223B (zh) * 2017-02-14 2017-10-31 广州秉优信息科技有限公司 一种生产线三视图智能联动方法、系统
CN107539747A (zh) * 2017-08-01 2018-01-05 龙口矿业集团有限公司 新型遥控皮带输送机
CN107905786A (zh) * 2017-10-24 2018-04-13 北京天地玛珂电液控制系统有限公司 一种基于透明工作面的采煤方法和系统
CN110118870B (zh) * 2018-02-06 2023-04-07 深圳市帝迈生物技术有限公司 血细胞分析仪及运行方法
CN109268010B (zh) * 2018-09-22 2020-07-03 太原理工大学 一种虚拟现实矿井综采工作面的远程巡检干预方法
CN109783962B (zh) * 2019-01-23 2023-05-26 太原理工大学 基于虚拟现实物理引擎的综采装备协同推进仿真方法
CN116122814B (zh) * 2022-12-30 2024-01-23 天地上海采掘装备科技有限公司 一种采煤机选型方法、系统及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201638462U (zh) * 2010-04-28 2010-11-17 徐州翰林科技有限公司 采煤机虚拟实训操作教学仪
CN102759909A (zh) * 2012-06-14 2012-10-31 中国矿业大学 基于不同地质条件的电牵引采煤机工作状态虚拟仿真系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7773074B2 (en) * 2005-06-28 2010-08-10 Siemens Medical Solutions Usa, Inc. Medical diagnostic imaging three dimensional navigation device and methods
KR100836481B1 (ko) * 2006-09-08 2008-06-09 주식회사 케이티 3d 가상지도상의 사용자의 아바타 객체의 위치 및 활동정보를 현실 세계로 광고하는 시스템 및 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201638462U (zh) * 2010-04-28 2010-11-17 徐州翰林科技有限公司 采煤机虚拟实训操作教学仪
CN102759909A (zh) * 2012-06-14 2012-10-31 中国矿业大学 基于不同地质条件的电牵引采煤机工作状态虚拟仿真系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
基于虚拟机的采煤机远程监控平台关键技术;倪文峰等;《煤炭科学技术》;20090225(第02期);第76-78页,第81页 *
运动分析系统和虚拟运动场景交互的研究;曹润;《中国优秀硕士学位论文全文数据库 信息科技辑》;20121015(第10期);I138-3047 *
采煤机远程监控关键技术的研究;徐志鹏等;《内江科技》;20110525(第05期);第113页,第153页 *

Also Published As

Publication number Publication date
CN103485784A (zh) 2014-01-01

Similar Documents

Publication Publication Date Title
CN103485784B (zh) 基于虚拟现实技术的采煤机远程操纵系统及远程控制方法
CN111177942B (zh) 矿井无人化综掘工作面数字孪生智能监控系统
CN102759909A (zh) 基于不同地质条件的电牵引采煤机工作状态虚拟仿真系统
CN103867205B (zh) 一种掘进机远程控制系统及方法
CN109989751B (zh) 一种综采三机跨平台远程实时运动跟踪方法
Xie et al. Framework for a closed-loop cooperative human Cyber-Physical System for the mining industry driven by VR and AR: MHCPS
CN106407624B (zh) 一种虚拟采煤机记忆截割方法
CN111522894A (zh) 一种基于时态gis的煤矿可视化管控系统
CN105405335A (zh) 一种煤矿综采工作面远程控制虚拟培训系统
CN109268010A (zh) 一种虚拟现实矿井综采工作面的远程巡检干预方法
CN205540230U (zh) 一种采煤机的远程控制装置
CN204366968U (zh) 基于三维体感摄影机的多自由度仿人机器人
CN108280876A (zh) 一种基于动态三维模型场景式虚拟展现的工业监控系统
CN103064296A (zh) 一种水下机器人辅助控制系统
CN109685878A (zh) 一种基于三维模型的隧道掘进机展示方法及系统
CN110977981A (zh) 一种机器人虚拟现实同步系统及同步方法
CN112965399A (zh) 一种面向工程机械设备的半实物仿真试验方法及装置
CN113746936B (zh) 一种vr与ar分布式协作的综采工作面智能监控系统
CN113411546B (zh) 一种基于ar的采煤机可视化监测方法
CN104700403A (zh) 一种基于kinect的手势控制液压支架的虚拟示教系统及方法
CN116091602A (zh) 一种掘进机器人数字孪生交互方法及系统
CN115546416A (zh) 基于web的轻量级3D可视化方法及系统
CN108037763A (zh) 水下机器人控制装置
CN114893237A (zh) 一种优化极薄煤层综采工作面支架电控及自动化系统
CN205176612U (zh) 一种智能粉尘控制系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant