CN113556530A - 一种基于可穿戴ar设备的轨道交通智能检修系统和方法 - Google Patents

一种基于可穿戴ar设备的轨道交通智能检修系统和方法 Download PDF

Info

Publication number
CN113556530A
CN113556530A CN202110828601.1A CN202110828601A CN113556530A CN 113556530 A CN113556530 A CN 113556530A CN 202110828601 A CN202110828601 A CN 202110828601A CN 113556530 A CN113556530 A CN 113556530A
Authority
CN
China
Prior art keywords
intelligent
wearable
maintenance
equipment
rail transit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110828601.1A
Other languages
English (en)
Inventor
胡明伟
赵千
何国庆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Green Smart City Technology Co ltd
Original Assignee
Shenzhen Green Smart City Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Green Smart City Technology Co ltd filed Critical Shenzhen Green Smart City Technology Co ltd
Priority to CN202110828601.1A priority Critical patent/CN113556530A/zh
Publication of CN113556530A publication Critical patent/CN113556530A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194Transmission of image signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type

Abstract

本发明公开一种基于可穿戴AR设备的轨道交通智能检修系统和方法,包括:可穿戴式AR眼镜智能终端,用于采集检修设备的视频图像数据和音频数据;后台分析系统,用于将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。采用本发明的技术方案,促使其严格按流程执行车辆检修作业,并对关键作业步骤进行卡控,同时实现现场维修人员与后方管理人员的音视频实时交互,达到远程作业指导和协助。

Description

一种基于可穿戴AR设备的轨道交通智能检修系统和方法
技术领域
本发明属于轨道交通智慧运维领域,具体涉及一种基于可穿戴AR设备的轨道交通智能检修系统及方法。
背景技术
目前,我国城市轨道交通和城际轨道交通运营里程增长较快,运营检修任务繁重,车辆检修是保证轨道交通系统运行安全的主要手段之一,检修需确保其作业流程规范、准确、高效以及作业人员安全。但列车检修面临窗口期短、作业任务繁重、专业分工细且专业性强、熟练检修人员短缺等困境。随着轨道交通系统自动化、综合化、智能化程度的不断提升,提升车辆检修安全和效率也越来越受到关注,加强检修作业流程标准化、规范化、可视化、无纸化是提高检修管理水平、提升作业效率、保证列车安全运行的重要措施。
轨道交通行业中车辆设备的一项检修作业通常要依靠两位或两位以上检修人员前往现场检修设备(A角承担主要检修任务,B角负责校核、监控和记录),检修人员根据操作手册和经验判断是否发生故障和是否需要维护,进而进行检修作业并记录设备故障和检修作业信息。后方轨道交通管理人员通过远程语音通话与现场检修人员联络,提供远程指导并掌握现场列车设备检修情况。然而现有的检修作业存在耗时长、执行成本高,人工投入多、劳动强度大、实时交互性差等不足,特别是在检修过程中,受作业场地、设备空间的限制,部分检修作业仅能由单人操作完成,难以实现多人协作,后方管理者无法掌握前方检修人员的作业进度及监控作业质量,容易因检修任务繁重造成漏检、质量不达标或人员受伤等弊病。
发明内容
本发明要解决的技术问题是,本发明提供一种基于可穿戴AR设备的轨道交通智能检修系统及方法,以解决上述问题。
为实现上述目的,本发明采用如下的技术方案:
一种基于可穿戴AR设备的轨道交通智能检修系统,包括:
可穿戴式AR眼镜智能终端,用于采集检修设备的视频图像数据和音频数据;
后台分析系统,用于将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。
作为优选,所述可穿戴AR眼镜智能终端包括:高清摄像头、语音通话装置、智能调节镜片、智能控制装置、双向通讯装置和电源;智能控制装置分别连接高清摄像头、语音通话装置、智能调节镜片、双向通讯装置和电源。
作为优选,所述摄像头用于采集检修设备的视频图像数据,包括固接在AR眼镜上的摄像头和可拆卸式外接摄像头,所述可拆卸式外接摄像头用于对列车底部或肢体难于接近的设备内部进行内窥检测,其采集数据无线传输到智能控制装置。
作为优选,所述语音通话装置包括麦克风、耳机和外放扬声器,所述语音通话装置用于实现检修人员与后台管理者或技师的实时语音交互、或者与后台计算机的语音交互。
作为优选,智能调节镜片用于呈现交互界面,并可以根据外界光照强度调节成像清晰度。
作为优选,所述智能控制装置用于提供高清摄像头、语音通话装置、智能调节镜片的控制和运算,并对高清摄像头、语音通话装置、智能调节镜片提供电源供应。
作为优选,双向通讯装置为蜂窝无线通讯设备或WiFi设备。
作为优选,所述后台分析系统还包括:云服务器数据库用于存储可穿戴AR眼镜智能终端发送的视频图像数据和音频数据。
一种基于可穿戴AR设备的轨道交通智能检修方法,包括以下步骤:
采集检修设备的视频图像数据和音频数据;
将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。
作为优选,还包括:存储可穿戴AR眼镜智能终端发送的视频图像数据和音频数据。
本发明的基于可穿戴AR设备的轨道交通智能检修系统及方法,具有以下特点:第一,基于检修人员第一视角,实现现场维修人员与后方管理人员的音视频实时交互,达到远程作业指导和协助;第二,提升作业流程的规范化和作业质量,在作业者眼前投屏作业步骤的文字和图片,促使其严格按流程执行车辆检修作业,并对关键作业步骤进行卡控;第三,作业过程云端记录存储和操作过程留痕,以备作业过程和质量追溯。
附图说明
图1为本发明基于可穿戴AR设备的轨道交通智能检修系统的结构示意图;
图2为本发明基于可穿戴AR设备的轨道交通智能检修系统的数据交互示意图;
图3为本发明可穿戴AR眼镜智能终端结构示意图;
图4为本发明基于可穿戴AR设备的轨道交通智能检修方法的流程图。
具体实施方式
为更好的说明本发明,下面结合附图与实施过程对本发明进一步说明。
如图1、2所示,本发明提供一种基于可穿戴AR设备的轨道交通智能检修系统包括:可穿戴AR眼镜智能终端和后台分析系统;后台分析系统与可穿戴AR眼镜智能终端实现双向交互,其包括语音交互、图像交互、预警提示、作业监测,其中,
可穿戴式AR眼镜智能终端,用于采集检修设备的视频图像数据和音频数据;
后台分析系统,用于将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。
进一步,如图3所示,所述可穿戴AR眼镜智能终端包括:高清摄像头、语音通话装置、智能调节镜片、智能控制装置、双向通讯装置和电源;智能控制装置分别连接高清摄像头、语音通话装置、智能调节镜片、双向通讯装置和电源。
进一步,所述摄像头用于采集检修设备的视频图像数据,包括固接在AR眼镜上的摄像头和可拆卸式外接摄像头,所述可拆卸式外接摄像头用于对列车底部或肢体难于接近的设备内部进行内窥检测,其采集数据无线传输到智能控制装置。
进一步,所述语音通话装置包括麦克风、耳机和外放扬声器,所述语音通话装置用于实现检修人员与后台管理者或技师的实时语音交互、或者与后台计算机的语音交互。
进一步,智能调节镜片用于呈现交互界面,并可以根据外界光照强度调节成像清晰度。所述交互界面是显示检修操作步骤,使用者能通过语音控制交互界面的动作,如上/下一项、上、下一页、放大/缩小、确认/拒绝/忽略。后台分析系统的结果以图像等形式显示到可穿戴AR眼镜智能终端的镜片上,当检修人员的遇到检修难题时提供远程指导,并在检修人员操作出错时给予报警提示。
进一步,所述智能控制装置用于提供高清摄像头、语音通话装置、智能调节镜片的控制和运算,并对高清摄像头、语音通话装置、智能调节镜片提供电源供应。
进一步,双向通讯装置为蜂窝无线通讯设备或WiFi设备。
进一步,所述后台分析系统还包括:云服务器数据库用于存储可穿戴AR眼镜智能终端发送的视频图像数据和音频数据。
本发明的基于可穿戴AR设备的轨道交通智能检修系统的具体实施过程包括:
1、通过后台系统派发任务给特定的检修人员,检修人员收到检修任务后,根据相应的检修任务进行检修前的任务准备,并在车辆段控制中心提交相应的检修作业授权申报。
2、检修人员穿戴AR眼镜智能终端到达检修车间,所述智能终端上可显示检修任务情况、检修过程步骤、检修器械位置;
3、在智能终端上选择检查安全防护设备,检查防护服、绝缘手套、安全帽等是否完好,并进行正确穿戴;
4、穿戴好安全防护设备后,在智能终端上确认,并开始正式检修工作;
5、根据智能移动终端上的任务步骤提示,进行检修工作;通过摄像头图像识别对检修设备和控制仪表进行数据采集,将视频信息和图像信息传输回后台分析系统,并实时给出诊断和分析,将检修步骤回传到AR眼镜智能镜片上显示;
6、通过AR眼镜智能终端与后台分析系统建立远程监控,将检修人员第一视角的语音、视频信息实时回传,方便专家和管理者远程协助与监督;
7、后台分析系统对实时监测到的仪表指数和识别的图像进行诊断,若诊断结果为故障,则发出预警信息,预警信息会同步到AR眼镜智能终端上;
8、检修人员检修过程的视频、语音、操作决策会实时存储到后台,方便管理人员不定期查阅调取。
如图4所示,本发明还提供一种基于可穿戴AR设备的轨道交通智能检修方法,包括以下步骤:
步骤S1、采集检修设备的视频图像数据和音频数据;
步骤S2、将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。
进一步,还包括:存储可穿戴AR眼镜智能终端发送的视频图像数据和音频数据。
本发明的有益效果:
1)能够实现基于轨道交通车辆检修人员第一视角的检修作业实时信息的高效全流程采集,信息包括:视频、图像、音频、位置和人员身份信息。
2)提供对各作业人员的全过程作业历史查询和回溯留痕,有助于检修质量争议的解决、检修过程的示范培训。
3)能够实现后台管理人员对固定点作业和流动检修作业的实时监控,克服固定摄像头覆盖不全,无法接近待检修部件且存在盲区的不足,使管理者不必到达现场,即可高效掌握和指导现场检修,降低检修人员受伤和发生危险的机率;
4)通过预先设置必选作业步骤和人工智能图像识别算法,实现对关键作业步骤进行卡控,若检修人员操作不当或毁损AR眼镜即可触发向后台人员的报警。
5)通过语音和图像实时交互,能实现多人远程协同作业,高级技术人员远程即可对复杂、专业性强、有危险的作业做出指导,系统对出错操作进行报警提示,有效的提高了检修效率和准确率。
6)当作业完成可向现场检修人员提供当次作业小结,按不同的统计口径(指定时间、指定作业流程、指定作业人员),向后台管理人员提供作业统计分析报告。
本发明一种基于可穿戴AR设备的轨道交通智能检修系统和方法,将AR技术应用到轨道交通车辆段检修工作中,目的是辅助现场作业,提高作业效率、质量和安全性。解放检修人员双手,以第一视角引导检修人员完成复杂和高强度作业,检修人员不必记忆操作要点和复杂的步骤;在轨道交通设备的检修过程中实现与管理者远程共享信息和互动,实现对关键作业步骤进行卡控,同时在检修人员操作失误和设备异常时给予报警提示,帮助检修人员解决检修过程中的难点,安全高效的完成检修任务;在云端保存作业记录,向管理人员提供统计分析报告。
以上列举仅仅是对本发明的举例说明,并不构成对本发明的保护范围的限制,凡是与本发明相同或相似的设计均属于本发明的保护范畴之内。

Claims (10)

1.一种基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,包括:
可穿戴式AR眼镜智能终端,用于采集检修设备的视频图像数据和音频数据;
后台分析系统,用于将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。
2.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,所述可穿戴AR眼镜智能终端包括:高清摄像头、语音通话装置、智能调节镜片、智能控制装置、双向通讯装置和电源;智能控制装置分别连接高清摄像头、语音通话装置、智能调节镜片、双向通讯装置和电源。
3.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,所述摄像头用于采集检修设备的视频图像数据,包括固接在AR眼镜上的摄像头和可拆卸式外接摄像头,所述可拆卸式外接摄像头用于对列车底部或肢体难于接近的设备内部进行内窥检测。
4.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,所述语音通话装置包括麦克风、耳机和外放扬声器,所述语音通话装置用于实现检修人员与后台管理者或技师的实时语音交互、或者与后台计算机的语音交互。
5.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,智能调节镜片用于呈现交互界面,并可以根据外界光照强度调节成像清晰度。
6.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,所述智能控制装置用于提供高清摄像头、语音通话装置、智能调节镜片的控制和运算,并对高清摄像头、语音通话装置、智能调节镜片提供电源供应。
7.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统其特征在于,双向通讯装置为蜂窝无线通讯设备或WiFi设备。
8.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修系统,其特征在于,所述后台分析系统还包括:云服务器数据库用于存储可穿戴AR眼镜智能终端发送的视频图像数据和音频数据。
9.一种基于可穿戴AR设备的轨道交通智能检修方法,其特征在于,包括以下步骤:
采集检修设备的视频图像数据和音频数据;
将所述视频图像数据、音频数据与预存车辆信息模型库进行比对,以根据对比结果对检修操作关键流程进行卡口控制。
10.如权利要求1所述的基于可穿戴AR设备的轨道交通智能检修方法,其特征在于,还包括:存储可穿戴AR眼镜智能终端发送的视频图像数据和音频数据。
CN202110828601.1A 2021-07-22 2021-07-22 一种基于可穿戴ar设备的轨道交通智能检修系统和方法 Pending CN113556530A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110828601.1A CN113556530A (zh) 2021-07-22 2021-07-22 一种基于可穿戴ar设备的轨道交通智能检修系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110828601.1A CN113556530A (zh) 2021-07-22 2021-07-22 一种基于可穿戴ar设备的轨道交通智能检修系统和方法

Publications (1)

Publication Number Publication Date
CN113556530A true CN113556530A (zh) 2021-10-26

Family

ID=78103975

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110828601.1A Pending CN113556530A (zh) 2021-07-22 2021-07-22 一种基于可穿戴ar设备的轨道交通智能检修系统和方法

Country Status (1)

Country Link
CN (1) CN113556530A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114815779A (zh) * 2022-04-25 2022-07-29 深圳市希车智能科技有限公司 基于ar与vr的汽车远程交互诊断方法、系统及其存储介质
CN117558453A (zh) * 2024-01-12 2024-02-13 成都泰盟软件有限公司 一种基于大数据模型的ar体格检查辅助系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107172390A (zh) * 2017-05-12 2017-09-15 广州市和佳电子科技有限公司 一种基于智能眼镜为终端平台的可视化系统及实现方法
CN108170273A (zh) * 2017-12-28 2018-06-15 南京华讯方舟通信设备有限公司 一种基于hololens眼镜的专家远程指导系统及实现方法
CN112153267A (zh) * 2020-10-22 2020-12-29 国网江苏省电力有限公司镇江供电分公司 基于ar智能眼镜的人眼视角局限空间作业远程监护系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107172390A (zh) * 2017-05-12 2017-09-15 广州市和佳电子科技有限公司 一种基于智能眼镜为终端平台的可视化系统及实现方法
CN108170273A (zh) * 2017-12-28 2018-06-15 南京华讯方舟通信设备有限公司 一种基于hololens眼镜的专家远程指导系统及实现方法
CN112153267A (zh) * 2020-10-22 2020-12-29 国网江苏省电力有限公司镇江供电分公司 基于ar智能眼镜的人眼视角局限空间作业远程监护系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114815779A (zh) * 2022-04-25 2022-07-29 深圳市希车智能科技有限公司 基于ar与vr的汽车远程交互诊断方法、系统及其存储介质
CN117558453A (zh) * 2024-01-12 2024-02-13 成都泰盟软件有限公司 一种基于大数据模型的ar体格检查辅助系统

Similar Documents

Publication Publication Date Title
CN111611855B (zh) 一种变电站三维可视化机器人智能巡检系统
CN111722714B (zh) 一种基于ar技术的数字化变电站计量运检辅助方法
CN113556530A (zh) 一种基于可穿戴ar设备的轨道交通智能检修系统和方法
CN110865917A (zh) 基于ar技术的电力机房巡检作业方法、系统及应用
CN109271881B (zh) 一种变电站内人员安全管控方法、装置及服务器
CN109448155A (zh) 基于ar技术的设备巡视方法
CN108879440A (zh) 基于可穿戴增强现实显示终端和云平台的智能检修系统及方法
CN202649815U (zh) 一种基于机器人技术的变电站全景自动巡检系统
CN108664125B (zh) 一种电力变压器检修异常及缺陷模拟设备
CN112153267B (zh) 基于ar智能眼镜的人眼视角局限空间作业远程监护系统
CN112085232A (zh) 一种基于增强现实技术的运检系统及方法
CN105005281A (zh) 基于谷歌眼镜的智能变电站巡检实时数据展示系统及方法
CN111920129A (zh) 一种智能安全帽系统
CN113747111A (zh) 一种基于ar眼镜的交互式变电消缺远程视频会诊支持系统
CN114078224A (zh) 一种基于5g网络架构的基建现场监控系统及方法
CN114663996A (zh) 基于ar增强现实技术的智能设备巡检系统
CN106485420A (zh) 一种应用于铁路车辆检修作业过程的综合评价方法和系统
CN111275941A (zh) 工地安全管理系统
CN112906441B (zh) 用于通信行业查勘维护的图像识别系统及方法
CN110995660A (zh) 一种基于ar技术的铁路应急协作支持与巡检系统
CN213128247U (zh) 一种智能安全帽系统
CN207503280U (zh) 电力综合实训管理控制系统
CN116152945A (zh) 一种基于ar技术的矿下巡检系统及方法
CN116277001A (zh) 一种基于数字孪生的连铸机器人管理方法及其系统
CN213799697U (zh) 一种铁路电务检修作业监控管理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination