CN105227912B - 一种基于标准化3d模型的视频智能纠错系统及方法 - Google Patents

一种基于标准化3d模型的视频智能纠错系统及方法 Download PDF

Info

Publication number
CN105227912B
CN105227912B CN201510613492.6A CN201510613492A CN105227912B CN 105227912 B CN105227912 B CN 105227912B CN 201510613492 A CN201510613492 A CN 201510613492A CN 105227912 B CN105227912 B CN 105227912B
Authority
CN
China
Prior art keywords
model
module
error correction
service personnel
standardization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510613492.6A
Other languages
English (en)
Other versions
CN105227912A (zh
Inventor
王勤湖
周峰
何继强
洪振旻
夏玉秋
陆达
戴忠华
张士朋
刘军生
张永贵
于海峰
曾晓晖
秦余新
陈杰
余波
朱旭东
杨光
高琅琅
何孝园
李大伟
黄立民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China General Nuclear Power Corp
CGN Power Co Ltd
Daya Bay Nuclear Power Operations and Management Co Ltd
Lingdong Nuclear Power Co Ltd
Original Assignee
China General Nuclear Power Corp
CGN Power Co Ltd
Daya Bay Nuclear Power Operations and Management Co Ltd
Lingdong Nuclear Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China General Nuclear Power Corp, CGN Power Co Ltd, Daya Bay Nuclear Power Operations and Management Co Ltd, Lingdong Nuclear Power Co Ltd filed Critical China General Nuclear Power Corp
Priority to CN201510613492.6A priority Critical patent/CN105227912B/zh
Publication of CN105227912A publication Critical patent/CN105227912A/zh
Application granted granted Critical
Publication of CN105227912B publication Critical patent/CN105227912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明公开了一种基于标准化3D模型的视频智能纠错系统及方法,该视频智能纠错系统包括:第一建模模块,用于预先对检修人员的装备建立标准化的3D模型,并将其存入第一模型数据库;第一视频模块,用于捕获及传输现场检修人员的装备图像;第一对比模块,用于将所述装备图像与预先建立的3D模型进行对比,并判断装备佩戴是否齐全或佩戴位置是否正确;第一提醒模块,用于在判断装备佩戴不齐全或佩戴位置不正确时,向现场检修人员发出纠错提醒信号。实施本发明的技术方案,减少安全风险事件的发生。

Description

一种基于标准化3D模型的视频智能纠错系统及方法
技术领域
本发明涉及核电领域,尤其涉及一种基于标准化3D模型的视频智能纠错系统及方法。
背景技术
在核电厂中,对一些重大设备的检修,经常需要检修人员到现场进行。检修人员在现场进行工作的过程中,偶尔会出现装备佩戴不齐全或佩戴位置不合适的问题。另外,在遇到复杂情况时,虽然有相关专家提供远程支持,但是由于对设备不熟悉而引起操作失误的问题。这些问题都会给现场检修人员和设备带来安全风险。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述存在安全风险的缺陷,提供一种基于标准化3D模型的视频智能纠错方法及系统,能避免安全风险。
本发明解决其技术问题所采用的技术方案是:构造一种基于标准化3D模型的视频智能纠错系统,包括:
第一建模模块,用于预先对检修人员的装备建立标准化的3D模型,并将其存入第一模型数据库;
第一视频模块,用于捕获及传输现场检修人员的装备图像;
第一对比模块,用于将所述装备图像与预先建立的3D模型进行对比,并判断装备佩戴是否齐全或佩戴位置是否正确;
第一提醒模块,用于在判断装备佩戴不齐全或佩戴位置不正确时,向现场检修人员发出纠错提醒信号。
在本发明所述的基于标准化3D模型的视频智能纠错系统中,还包括:
触发模块,用于在接收到检修人员或远程支持的专家输入的触发指令,或,探测到检修人员进入特定区域时,向所述第一视频模块发送触发信号。
本发明还构造一种基于标准化3D模型的视频智能纠错系统,包括:
第二建模模块,用于预先对待维修的设备建立标准化的3D模型,并将其存入第二模型数据库;
音频通话模块,用于捕获及传输远程支持的专家所发出的语音指令;
语音识别模块,用于对所述语音指令进行语音识别,以获取相应的操作指令;
指令数据库,用于存储操作指令所对应的设备部件;
第二视频模块,用于捕获及传输现场的检修人员的操作图像;
第二对比模块,用于从所述指令数据库中调出所识别的操作指令所对应的设备部件,并在所述3D模型中定位出所述设备部件,而且,将所述操作图像与3D模型中所定位出的设备部件进行对比,并判断检修人员操作的部件是否正确;
第二提醒模块,用于在判断检修人员操作不正确时,向现场的检修人员发出纠错提醒信号。
在本发明所述的基于标准化3D模型的视频智能纠错系统中,
所述音频通话模块,还用于实现远程支持的专家与现场的检修人员之间的音频通话。
本发明还构造一种基于标准化3D模型的视频智能纠错方法,包括:
S11.捕获及传输现场检修人员的装备图像;
S12.将所述装备图像与3D模型进行对比,并判断检修人员的装备佩戴是否齐全或佩戴位置是否正确,其中,所述3D模型是预先对检修人员的装备建立的标准化的3D模型;
S13.在判断装备佩戴不齐全或佩戴位置不正确时,向现场检修人员发出纠错提醒信号。
在本发明所述的基于标准化3D模型的视频智能纠错方法中,所述步骤S1为:
在接收到检修人员或远程支持的专家输入的触发指令,或,探测到检修人员进入特定区域时,捕获及传输现场检修人员的装备图像。
本发明还构造一种基于标准化3D模型的视频智能纠错方法,包括:
S21.捕获及传输远程支持的专家所发出的语音指令
S22.对所述语音指令进行语音识别,以获取相应的操作指令;
S23.捕获及传输现场的检修人员的操作图像;
S24.从指令数据库中调出所识别的操作指令所对应的设备部件,并在所述3D模型中定位出所述设备部件,而且,将所述操作图像与3D模型中所定位出的设备部件进行对比,并判断检修人员操作的部件是否正确,其中,所述指令数据库存储有操作指令所对应的设备部件,所述3D模型是预先对待维修的设备建立的标准化的3D模型;
S25.在判断检修人员操作不正确时,向现场的检修人员发出纠错提醒信号。
在本发明所述的基于标准化3D模型的视频智能纠错方法中,还包括:
音频通话模块实现远程支持的专家与现场的检修人员之间的音频通话。
实施本发明的技术方案,通过将现场的图像与标准化的3D模型进行对比,可判断装备佩戴是否齐全或佩戴位置是否正确,或者,检修人员操作的部件是否正确,当判断不正确时,可进行及时纠错提醒,从而减少安全风险事件的发生。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明基于标准化3D模型的视频智能纠错系统实施例一的逻辑图;
图2是本发明基于标准化3D模型的视频智能纠错系统实施例二的逻辑图;
图3是本发明基于标准化3D模型的视频智能纠错方法实施例一的流程图;
图4是本发明基于标准化3D模型的视频智能纠错方法实施例二的流程图。
具体实施方式
图1是本发明基于标准化3D模型的视频智能纠错系统实施例一的逻辑图,该视频智能纠错系统包括第一建模模块11、第一模型数据库12、第一视频模块13、第一对比模块14和第一提醒模块15。其中,第一建模模块11用于预先对检修人员的装备建立标准化的3D模型,并将其存入第一模型数据库12。第一视频模块13用于捕获及传输现场检修人员的装备图像。第一对比模块14用于将所述装备图像与预先建立的3D模型进行对比,并判断装备佩戴是否齐全或佩戴位置是否正确。第一提醒模块15用于在判断装备佩戴不齐全或佩戴位置不正确时,向现场检修人员发出纠错提醒信号,在一个例子中,该纠错提醒信号可以为音频信号,在另一个例子中,该纠错提醒信号也可以触发现场的报警闪光灯进行闪烁。另外,在判断装备佩戴不齐全或佩戴位置不正确时,还可同时向现场检修人员发送3D模型中装备佩戴齐全及佩戴位置正确的图像,以指导现场的检修人员进行更正。
在上述实施例的基础上,进一步地,该视频智能纠错系统还包括触发模块,该触发模块用于在接收到检修人员或远程支持的专家输入的触发指令,或,探测到检修人员进入特定区域时,向第一视频模块13发送触发信号,此时第一视频模块13才开始捕获及传输现场检修人员的装备图像。当然,在其它实施例中,第一视频模块13一直处于开启状态。
图2是本发明基于标准化3D模型的视频智能纠错系统实施例二的逻辑图,该视频智能纠错系统包括第二建模模块21、第二模型数据库22、第二视频模块23、第二对比模块24、第二提醒模块25、音频通话模块26、语音识别模块27和指令数据库28。其中,第二建模模块21用于预先对待维修的设备建立标准化的3D模型,并将其存入第二模型数据库22。音频通话模块26用于捕获及传输远程支持的专家所发出的语音指令。语音识别模块27用于对所述语音指令进行语音识别,以获取相应的操作指令。指令数据库28用于存储操作指令所对应的设备部件。第二视频模块23用于捕获及传输现场的检修人员的操作图像。第二对比模块24用于从指令数据库28中调出所识别的操作指令所对应的设备部件,并在所述3D模型中定位出所述设备部件,而且,将所述操作图像与3D模型中所定位出的设备部件进行对比,并判断检修人员操作的部件是否正确。第二提醒模块25用于在判断检修人员操作不正确时,向现场的检修人员发出纠错提醒信号,在一个例子中,该纠错提醒信号可以为音频信号,在另一个例子中,该纠错提醒信号还可以触发现场的报警闪光灯进行闪烁。另外,在判断操作不正确时,还可同时向现场的检修人员发送3D模型中正确的操作部件的图像,以指导现场的检修人员进行更正。
在上述实施例的基础上,进一步地,该音频通话模块26还用于实现远程支持的专家与现场的检修人员之间的音频通话,以便于现场的检修人员在出现问题时,及时请教远程支持的专家。
图3是本发明基于标准化3D模型的视频智能纠错方法实施例一的流程图,该视频智能纠错方法包括:
S11.捕获及传输现场检修人员的装备图像;
S12.将所述装备图像与3D模型进行对比,并判断检修人员的装备佩戴是否齐全或佩戴位置是否正确,其中,所述3D模型是预先对检修人员的装备建立的标准化的3D模型;
S13.在判断装备佩戴不齐全或佩戴位置不正确时,向现场检修人员发出纠错提醒信号。
优选地,所述步骤S1为:
在接收到检修人员或远程支持的专家输入的触发指令,或,探测到检修人员进入特定区域时,捕获及传输现场检修人员的装备图像。
图4是本发明基于标准化3D模型的视频智能纠错方法实施例二的流程图,该实施例的视频智能纠错方法包括:
S21.捕获及传输远程支持的专家所发出的语音指令,在此需说明的是,当现场的检修人员听到专家所发出的语音指令时,开始进行相应设备部件的操作;
S22.对所述语音指令进行语音识别,以获取相应的操作指令;
S23.捕获及传输现场的检修人员的操作图像;
S24.从指令数据库中调出所识别的操作指令所对应的设备部件,并在所述3D模型中定位出所述设备部件,而且,将所述操作图像与3D模型中所定位出的设备部件进行对比,并判断检修人员操作的部件是否正确,其中,所述指令数据库存储有操作指令所对应的设备部件,所述3D模型是预先对待维修的设备建立的标准化的3D模型;
S25.在判断检修人员操作不正确时,向现场的检修人员发出纠错提醒信号。
在上述实施例的基础上,该视频智能纠错方法还包括:音频通话模块实现远程支持的专家与现场的检修人员之间的音频通话,这样,在维修过程中,现场的检修人员若发现疑难问题,可及时请教远程支持的专家。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。

Claims (4)

1.一种基于标准化3D模型的视频智能纠错系统,其特征在于,包括:
第二建模模块,用于预先对待维修的设备建立标准化的3D模型,并将其存入第二模型数据库;
音频通话模块,用于捕获及传输远程支持的专家所发出的语音指令;
语音识别模块,用于对所述语音指令进行语音识别,以获取相应的操作指令;
指令数据库,用于存储操作指令所对应的设备部件;
第二视频模块,用于捕获及传输现场的检修人员的操作图像;
第二对比模块,用于从所述指令数据库中调出所识别的操作指令所对应的设备部件,并在所述3D模型中定位出所述设备部件,而且,将所述操作图像与3D模型中所定位出的设备部件进行对比,并判断检修人员操作的部件是否正确;
第二提醒模块,用于在判断检修人员操作不正确时,向现场的检修人员发出纠错提醒信号。
2.根据权利要求1所述的基于标准化3D模型的视频智能纠错系统,其特征在于,
所述音频通话模块,还用于实现远程支持的专家与现场的检修人员之间的音频通话。
3.一种基于标准化3D模型的视频智能纠错方法,其特征在于,包括:
步骤S21.捕获及传输远程支持的专家所发出的语音指令;
步骤S22.对所述语音指令进行语音识别,以获取相应的操作指令;
步骤S23.捕获及传输现场的检修人员的操作图像;
步骤S24.从指令数据库中调出所识别的操作指令所对应的设备部件,并在所述3D模型中定位出所述设备部件,而且,将所述操作图像与3D模型中所定位出的设备部件进行对比,并判断检修人员操作的部件是否正确,其中,所述指令数据库存储有操作指令所对应的设备部件,所述3D模型是预先对待维修的设备建立的标准化的3D模型;
步骤S25.在判断检修人员操作不正确时,向现场的检修人员发出纠错提醒信号。
4.根据权利要求3所述的基于标准化3D模型的视频智能纠错方法,其特征在于,还包括:
音频通话模块实现远程支持的专家与现场的检修人员之间的音频通话。
CN201510613492.6A 2015-09-23 2015-09-23 一种基于标准化3d模型的视频智能纠错系统及方法 Active CN105227912B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510613492.6A CN105227912B (zh) 2015-09-23 2015-09-23 一种基于标准化3d模型的视频智能纠错系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510613492.6A CN105227912B (zh) 2015-09-23 2015-09-23 一种基于标准化3d模型的视频智能纠错系统及方法

Publications (2)

Publication Number Publication Date
CN105227912A CN105227912A (zh) 2016-01-06
CN105227912B true CN105227912B (zh) 2018-11-30

Family

ID=54996556

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510613492.6A Active CN105227912B (zh) 2015-09-23 2015-09-23 一种基于标准化3d模型的视频智能纠错系统及方法

Country Status (1)

Country Link
CN (1) CN105227912B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109886617A (zh) * 2019-01-11 2019-06-14 北京明略软件系统有限公司 库存管理方法及装置
CN113011614A (zh) * 2021-04-23 2021-06-22 贵州兴泰科技有限公司 设备检修服务大数据云平台

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1553382A (zh) * 2003-05-28 2004-12-08 鸿富锦精密工业(深圳)有限公司 基于cad平台之计算机辅助验证系统及方法
CN102789514A (zh) * 2012-04-20 2012-11-21 青岛理工大学 一种机械设备拆装3d在线诱导系统的诱导方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102874210B (zh) * 2012-06-18 2016-01-20 浙江吉利汽车研究院有限公司杭州分公司 一种防止安全带假系的装置
US9542417B2 (en) * 2013-11-27 2017-01-10 Eagle View Technologies, Inc. Preferred image retrieval
US10733651B2 (en) * 2014-01-01 2020-08-04 Andrew S Hansen Methods and systems for identifying physical objects
CN104063690B (zh) * 2014-06-25 2017-08-25 广州卓腾科技有限公司 基于人脸识别技术的身份认证方法、装置及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1553382A (zh) * 2003-05-28 2004-12-08 鸿富锦精密工业(深圳)有限公司 基于cad平台之计算机辅助验证系统及方法
CN100395759C (zh) * 2003-05-28 2008-06-18 鸿富锦精密工业(深圳)有限公司 一种基于cad平台的计算机辅助验证系统及方法
CN102789514A (zh) * 2012-04-20 2012-11-21 青岛理工大学 一种机械设备拆装3d在线诱导系统的诱导方法

Also Published As

Publication number Publication date
CN105227912A (zh) 2016-01-06

Similar Documents

Publication Publication Date Title
CN110264679A (zh) 配电柜监测系统及方法
CN104732710A (zh) 雷管自动装填生产线人员在岗状态自动监控方法及装置
KR101775529B1 (ko) 승강기 유지보수지원시스템
CN105227912B (zh) 一种基于标准化3d模型的视频智能纠错系统及方法
CN106707988A (zh) 一种用于发动机在线装配控制的mes系统
CN108466889B (zh) 电梯报警救援智能终端系统及方法
TW200622896A (en) Automatic activation and deactivation of wireless network adapter
CN109635899A (zh) 一种使用二维码的设备报修方法及系统
CN104821900B (zh) 基于移动平台应用的电力通信网应急抢修全程管控系统
CN106976778A (zh) 一种电梯救援应急处理系统和方法
KR101066559B1 (ko) 기계장비의 원격 보수를 위한 감시 시스템
CN108463040A (zh) 一种照明设备的智能控制系统
IL304621B1 (en) A system for removing and compressing trash from an airplane
EP1259076A3 (en) Remote monitoring system
CN202748921U (zh) 一种新型报警系统
CN105812750A (zh) 一种电力调度监控系统的移动式反违章单兵装备
CN103538600A (zh) 轨道交通的车站接/发车作业系统及其控制方法
CN106211620B (zh) 一种贴片机自动复机方法及系统
US7757014B2 (en) Method for disconnecting a transceiver from a bus in multipoint/multidrop architecture
CN115301638B (zh) 一种压力管道激光除锈系统及除锈方法
CN101152758B (zh) 注塑模具浇注系统废料脱模控制系统及其控制方法
CN104391463A (zh) 螺丝防漏锁智能控制设备及方法
CN207587015U (zh) 变电站巡检可视化系统
JP2010011434A5 (zh)
CN208256082U (zh) 自动分绞机远程操控系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant