CN108492378A - 一种基于ar图像增强技术的故障排除方法 - Google Patents

一种基于ar图像增强技术的故障排除方法 Download PDF

Info

Publication number
CN108492378A
CN108492378A CN201810215120.1A CN201810215120A CN108492378A CN 108492378 A CN108492378 A CN 108492378A CN 201810215120 A CN201810215120 A CN 201810215120A CN 108492378 A CN108492378 A CN 108492378A
Authority
CN
China
Prior art keywords
image
enhancement techniques
image enhancement
personal computer
troubleshooting methodology
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810215120.1A
Other languages
English (en)
Inventor
赵焱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Zhi Ge Electric Power Technology Co Ltd
Original Assignee
Nanjing Zhi Ge Electric Power Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Zhi Ge Electric Power Technology Co Ltd filed Critical Nanjing Zhi Ge Electric Power Technology Co Ltd
Priority to CN201810215120.1A priority Critical patent/CN108492378A/zh
Publication of CN108492378A publication Critical patent/CN108492378A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2016—Rotation, translation, scaling

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Architecture (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提供一种基于AR图像增强技术的故障排除方法。本发明的方法包括如下步骤：（1）通过相机拍摄已知画面图形，并将拍摄的图像实时上传到工控机；（2）根据图形在相机中的位置确定工业设备位置坐标；（3）通过对已知图形分析对比，从工控机的系统库中取出工业设备模型，并和真实世界重叠展示，立体的呈现在手持设备的画面中；（4）通过对图像的特征点的提取区分，做到图像的旋转。使用该方法能够大大提高工作效率。并且能更准确的了解故障问题，为安全生产提供有力保障。

Description

一种基于AR图像增强技术的故障排除方法
技术领域：
本发明涉及一种基于AR图像增强技术的故障排除方法，属于电子技术领域。
背景技术：
目前随着自动化程度越来越高，单独的监控程序已经逐渐无法满足复杂情况下的障碍排除，需要人员根据的情况实时前往现场勘查情况作出正确应对措施，这种排除往往很耗费时间，在大规模的园区，效率无法的得到保证。在安全要求颇高的企业单位中，这种矛盾尤为明显。
发明内容：
本发明的目的是针对上述存在的问题提供一种基于AR图像增强技术的故障排除方法，巡检人员，在检查工业设备时候通过手持设备扫描设备图标，系统将会把设备的各种参数，以及传感器采集到的实时数据通过3D建模的方式立体展现在维修人员面前，巡检人员可以直观的了解到设备基本构造，各个部件运转情况，快速排查可能出现的问题的环境以及因素。大大提高工作效率。并且能更准确的了解故障问题，为安全生产提供有力保障。
上述的目的通过以下的技术方案实现：
一种基于AR图像增强技术的故障排除方法，该方法包括如下步骤：
（1）通过相机拍摄已知画面图形，并将拍摄的图像实时上传到工控机；
（2）根据图形在相机中的位置确定工业设备位置坐标；
（3）通过对已知图形分析对比，从工控机的系统库中取出工业设备模型，并和真实世界重叠展示，立体的呈现在手持设备的画面中；
（4）通过对图像的特征点的提取区分，做到图像的旋转。
所述的基于AR图像增强技术的故障排除方法，所述工业设备上安装有用于采集数据的传感器，所述传感器采集到的数据实时发送到工控机。
所述的基于AR图像增强技术的故障排除方法，所述手持设备上设置有显示屏。
所述的基于AR图像增强技术的故障排除方法，所述工控机中设置有真实环境识别系统、三维交互跟踪系统、虚拟场景渲染系统。
所述的基于AR图像增强技术的故障排除方法，所述三维交互跟踪系统根据设备特征点检索系统库中的工艺设备模型特征点，进行比对，找到正确的模型设备。
有益效果：
本发明采用虚拟现实和现实相结合，根据特定图形获取目标信息，通过三维交互跟踪找到设备模型，并根据设备特性点实现模型旋转，放大等功能，清晰的展现设备内部构造已经各部位实时参数。三维交互跟踪会根据设备特征点检索3D模型库中的模型特征点，进行比对，找到正确的模型设备。可以帮助巡检人员定制巡检路线，实时在地图展示每台设备的运行情况，标注问题设备方便定制巡检路线，在可以通过扫描设备图形立体展示设备，将传感器采集到的数据实时展示在设备立体模型上，帮助选件人员快速定位设备故障。
附图说明：
图1是本发明的流程图。
具体实施方式：
本实施例的一种基于AR图像增强技术的故障排除方法，该方法包括如下步骤：
（1）通过相机拍摄已知画面图形，并将拍摄的图像实时上传到工控机；
（2）根据图形在相机中的位置确定工业设备位置坐标；
（3）通过对已知图形分析对比，从工控机的系统库中取出工业设备模型，并和真实世界重叠展示，立体的呈现在手持设备的画面中；
（4）通过对图像的特征点的提取区分，做到图像的旋转。图像旋转可以更好的看清楚设备当时运行状态，设备上各种传感器实时采集的数据，会根据设备模型，准确显示在设备上，更直观的了解设备运行状态，已经负载情况。当设备存在问题或者故障，AR的实时交互层会将故障点更新在设备模型上，直观的发现故障位置，在通过相关采集数据，准确定位设备问题，快速排出故障。
所述的基于AR图像增强技术的故障排除方法，所述工业设备上安装有用于采集数据的传感器，所述传感器采集到的数据实时发送到工控机。
所述的基于AR图像增强技术的故障排除方法，所述手持设备上设置有显示屏。
所述的基于AR图像增强技术的故障排除方法，所述工控机中设置有真实环境识别系统、三维交互跟踪系统、虚拟场景渲染系统。所述三维交互跟踪系统根据设备特征点检索系统库中的工艺设备模型特征点，进行比对，找到正确的模型设备。此系统可以将园区模型以地图形态展示在手持设备上，园区设备根据坐标，立体分布在园区地图中。选件人员可以根据自身定位，以及设备实施状态定制巡检路线。
本发明方案所公开的技术手段不仅限于上述技术手段所公开的技术手段，还包括由以上技术特征等同替换所组成 的技术方案。本发明的未尽事宜，属于本领域技术人员的公知常识。

Claims (5)

1.一种基于AR图像增强技术的故障排除方法，其特征是：该方法包括如下步骤：
（1）通过相机拍摄已知画面图形，并将拍摄的图像实时上传到工控机；
（2）根据图形在相机中的位置确定工业设备位置坐标；
（3）通过对已知图形分析对比，从工控机的系统库中取出工业设备模型，并和真实世界重叠展示，立体的呈现在手持设备的画面中；
（4）通过对图像的特征点的提取区分，做到图像的旋转。
2.根据权利要求1所述的基于AR图像增强技术的故障排除方法，其特征是：所述工业设备上安装有用于采集数据的传感器，所述传感器采集到的数据实时发送到工控机。
3.根据权利要求1所述的基于AR图像增强技术的故障排除方法，其特征是：所述手持设备上设置有显示屏。
4.根据权利要求1所述的基于AR图像增强技术的故障排除方法，其特征是：所述工控机中设置有真实环境识别系统、三维交互跟踪系统、虚拟场景渲染系统。
5.根据权利要求1所述的基于AR图像增强技术的故障排除方法，其特征是：所述三维交互跟踪系统根据设备特征点检索系统库中的工艺设备模型特征点，进行比对，找到正确的模型设备。
CN201810215120.1A 2018-03-15 2018-03-15 一种基于ar图像增强技术的故障排除方法 Pending CN108492378A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810215120.1A CN108492378A (zh) 2018-03-15 2018-03-15 一种基于ar图像增强技术的故障排除方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810215120.1A CN108492378A (zh) 2018-03-15 2018-03-15 一种基于ar图像增强技术的故障排除方法

Publications (1)

Publication Number Publication Date
CN108492378A true CN108492378A (zh) 2018-09-04

Family

ID=63339733

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810215120.1A Pending CN108492378A (zh) 2018-03-15 2018-03-15 一种基于ar图像增强技术的故障排除方法

Country Status (1)

Country Link
CN (1) CN108492378A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109506318A (zh) * 2018-11-19 2019-03-22 珠海格力电器股份有限公司 一种故障报警的方法及装置
CN110636256A (zh) * 2019-08-27 2019-12-31 四川科华天府科技有限公司 基于ar的工业故障诊断方法、装置、设备及存储介质
CN110716511A (zh) * 2019-08-27 2020-01-21 四川科华天府科技有限公司 一种基于ar技术的立体定位方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102831401A (zh) * 2012-08-03 2012-12-19 樊晓东 对无特定标记目标物体跟踪、三维叠加及交互的方法及系统
CN106097425A (zh) * 2016-06-07 2016-11-09 天津天大求实电力新技术股份有限公司 基于增强现实技术的电力设备信息提取与展示方法及系统
CN106340217A (zh) * 2016-10-31 2017-01-18 华中科技大学 基于增强现实技术的制造装备智能系统及其实现方法
AU2017210636A1 (en) * 2015-07-06 2017-08-24 Accenture Global Services Limited Augmented reality based component replacement and maintenance
CN206672041U (zh) * 2017-03-14 2017-11-24 北京大合创新科技发展有限公司 一种基于增强现实的矿用设备智能巡检和维护辅助系统
CN107798391A (zh) * 2016-08-31 2018-03-13 王振福 一种采用增强现实技术的设备故障的分析与维修系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102831401A (zh) * 2012-08-03 2012-12-19 樊晓东 对无特定标记目标物体跟踪、三维叠加及交互的方法及系统
AU2017210636A1 (en) * 2015-07-06 2017-08-24 Accenture Global Services Limited Augmented reality based component replacement and maintenance
CN106097425A (zh) * 2016-06-07 2016-11-09 天津天大求实电力新技术股份有限公司 基于增强现实技术的电力设备信息提取与展示方法及系统
CN107798391A (zh) * 2016-08-31 2018-03-13 王振福 一种采用增强现实技术的设备故障的分析与维修系统
CN106340217A (zh) * 2016-10-31 2017-01-18 华中科技大学 基于增强现实技术的制造装备智能系统及其实现方法
CN206672041U (zh) * 2017-03-14 2017-11-24 北京大合创新科技发展有限公司 一种基于增强现实的矿用设备智能巡检和维护辅助系统

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
PALMARINI R, ERKOYUNCU J A, ROY R, ET AL.: "A systematic review of augmented reality applications in maintenance", 《ROBOTICS AND COMPUTER-INTEGRATED MANUFACTURING》 *
王巍，王志强，赵继军，申艳光: "基于移动平台的增强现实研究", 《计算机科学》 *
王廷魁; 顾星月; 杨喆文; 李治川: "增强现实(AR)技术在设备维护中的应用", 《工程研究》 *
郝佳恺，赵广怀，温明时，高 鹏，王哲敏，李金友: "AR 技术在电力设备检修作业中的应用", 《2017年"电子技术应用"智能电网会议论文集》 *
齐文平; 姚京松; 刘晓芳; 吴军: "增强现实(AR)技术在电力设备智能巡检中", 《电子产品世界》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109506318A (zh) * 2018-11-19 2019-03-22 珠海格力电器股份有限公司 一种故障报警的方法及装置
CN110636256A (zh) * 2019-08-27 2019-12-31 四川科华天府科技有限公司 基于ar的工业故障诊断方法、装置、设备及存储介质
CN110716511A (zh) * 2019-08-27 2020-01-21 四川科华天府科技有限公司 一种基于ar技术的立体定位方法及系统
CN110716511B (zh) * 2019-08-27 2022-08-09 四川科华天府科技有限公司 一种基于ar技术的立体定位方法及系统

Similar Documents

Publication Publication Date Title
CN108810473B (zh) 一种在移动平台上实现gps映射摄像机画面坐标的方法及系统
KR101871764B1 (ko) 가상현실 기반의 시설관리 플랫폼 구축 시스템
Torres Calderon et al. Synthesizing pose sequences from 3D assets for vision-based activity analysis
CN108492378A (zh) 一种基于ar图像增强技术的故障排除方法
CN111222190B (zh) 一种古建筑管理系统
CN109816794A (zh) 一种基于管网属性数据的三维可视化系统及方法
CN107784038A (zh) 一种传感器数据的标注方法
Ahmadian Fard Fini et al. Using existing site surveillance cameras to automatically measure the installation speed in prefabricated timber construction
CN111192321A (zh) 目标物三维定位方法与装置
US20210097760A1 (en) System and method for collecting geospatial object data with mediated reality
CN112432641A (zh) 基于点云数字孪生技术的变电站操作票执行方法
CN106289180A (zh) 运动轨迹的计算方法及装置、终端
WO2020211593A1 (zh) 交通道路的数字化重建方法、装置和系统
Salem et al. BIM and VR/AR technologies: From project development to lifecycle asset management
Chen et al. Markerless augmented reality for facility management: Automated spatial registration based on style transfer generative network
CN115649501A (zh) 一种无人机夜行照明系统及方法
CN110276379B (zh) 一种基于视频图像分析的灾情信息快速提取方法
Gimeno et al. An augmented reality (AR) CAD system at construction sites
CN113627005B (zh) 一种智能视觉监控方法
CN107798010A (zh) 一种传感器数据的标注装置
Amer et al. Decentralized visual 3D mapping of scattered work locations for high-frequency tracking of indoor construction activities
CN112464757A (zh) 一种基于高清视频的目标实时定位和轨迹重构方法
CN115984516A (zh) 基于slam算法的增强现实方法及相关设备
CN115982824A (zh) 施工现场工人空间管理方法、装置、电子设备及存储介质
CN114048541A (zh) 基于数字孪生的资产空间标记方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180904

RJ01 Rejection of invention patent application after publication