CN111612933A - 基于边缘云服务器的增强现实智能巡检系统 - Google Patents

基于边缘云服务器的增强现实智能巡检系统 Download PDF

Info

Publication number
CN111612933A
CN111612933A CN202010419929.3A CN202010419929A CN111612933A CN 111612933 A CN111612933 A CN 111612933A CN 202010419929 A CN202010419929 A CN 202010419929A CN 111612933 A CN111612933 A CN 111612933A
Authority
CN
China
Prior art keywords
inspection
cloud server
edge cloud
information
glasses
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010419929.3A
Other languages
English (en)
Inventor
刘鹤
李国刚
赵汀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qiwang Network Technology Co ltd
Original Assignee
Shanghai Qiwang Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qiwang Network Technology Co ltd filed Critical Shanghai Qiwang Network Technology Co ltd
Priority to CN202010419929.3A priority Critical patent/CN111612933A/zh
Publication of CN111612933A publication Critical patent/CN111612933A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C1/00Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people
    • G07C1/20Checking timed patrols, e.g. of watchman
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing

Abstract

本发明公开了一种基于边缘云服务器的增强现实智能巡检系统,包括巡检点标识物,设置在巡检设备上,包括识别信息;AR眼镜,获取识别信息,根据识别信息从边缘云服务器中获取巡检信息以及巡检任务,生成巡检结果上报至边缘云服务器;采集端,采集巡检设备的相关信息并发送至边缘云服务器;管理端管理边缘云服务器存储的巡检任务或通过边缘云服务器下发巡检任务;边缘云服务器,建立各巡检设备相互对应的巡检信息、存储管理端下发的巡检任务;定位装置对AR眼镜进行定位。本发明通过内容本地化降低了内容时延,提升用户体验。

Description

基于边缘云服务器的增强现实智能巡检系统
技术领域
本发明涉及智能巡检技术领域,更具体地,涉及一种基于边缘云服务器的增强现实智能巡检系统。
背景技术
目前,我国的工业经济正在飞速发展,设备的大型化、综合化、自动化、连续化程度越来越高,设备巡视作为设备管理人员获取设备运行第一手资料的主要手段,在公安、保安、油田、水力、电力、博物馆等设备管理中得到广泛的应用,通过电子巡检系统,我们可以及时发现设备存在的异常和缺陷,并为消除缺陷赢得宝贵的时间,最大限度地保证生产的正常进行。
但当前使用较多的利用巡更棒巡检器等手持巡检终端配合巡更点、通讯座、管理软件构成的电子巡检系统仍然存在以下问题:巡检人员的双手无法得到解放,无法集中精力专心工作,工作效率低下;出现漏检,巡检过程工作量非常大,设备的漏检和数据管理差错、缺失不可避免。
因此,如何提供一种基于增强现实的智能巡检系统是本领域技术人员亟需解决的问题。
发明内容
有鉴于此,本发明提供了一种基于边缘云服务器的增强现实智能巡检系统,包括:巡检点标识物、AR眼镜、边缘云服务器、采集端、管理端和定位装置,其中,
所述巡检点标识物设置在巡检设备上,且所述巡检点标识物上包括识别信息;
所述AR眼镜与所述边缘云服务器相耦接,用于获取AR眼镜前方的巡检点标识物上所述识别信息,根据所述识别信息从所述边缘云服务器中获取巡检信息以及巡检任务,根据巡检信息和巡检任务生成巡检结果上报至所述边缘云服务器;
所述采集端与所述边缘云服务器相耦接,用于采集巡检设备的相关信息并发送至所述边缘云服务器,所述边缘云服务器对所述巡检设备的相关信息进行处理建立所述各巡检设备相互对应的巡检信息;
所述管理端与所述边缘云服务器相耦接,用于管理所述服务器存储的巡检任务或通过所述边缘云服务器下发巡检任务;
所述边缘云服务器分别与所述采集端、管理端和AR眼镜相耦接,用于建立各巡检设备相互对应的巡检信息、存储管理端下发的巡检任务;
所述定位装置与所述AR眼镜相耦接,用于对所述AR眼镜进行定位。
可选的,所述AR眼镜包括摄像模块、传感模块和分析模块,其中,
所述摄像模块,用于获取AR眼镜前方的识别信息发送至所述分析模块;
所述传感模块,用于捕获所述AR眼镜佩戴者的头部姿态信息、巡检现场的环境信息和所述识别信息,将所述头部姿态信息、巡检现场的环境信息和所述识别信息发送至所述分析模块;
所述分析模块,用于根据所述头部姿态信息调整所述摄像模块的拍摄角度,在所述识别信息中识别出巡检任务中的巡检设备,提取所述环境信息和所述巡检设备的设备信息,根据所述环境信息和所述巡检设备的设备信息生成巡检报告并发送至所述边缘云服务器。
可选的,所述巡检信息包括巡检人员姓名、巡检时间、巡检轨迹、巡检数量、巡检设备名称和巡检完毕信息,所述巡检信息的格式包括图片、文字。
可选的,所述边缘云服务器通过数据交换设备分别与所述采集端和管理端相耦接。
可选的,所述识别信息包括二维码。
可选的,所述定位装置包括GPS定位装置和/或WIFI定位装置。
可选的,所述采集端包括移动采集设备。
可选的,所述管理端包括桌面计算设备。
可选的,所述AR眼镜还包括语音交互模块,用于实现AR眼镜的佩戴者与巡检管理者的实时语音交互。
可选的,所述AR眼镜包括双目镜或单目镜。
与现有技术相比,本发明提供的基于边缘云服务器的增强现实智能巡检系统,至少实现了如下的有益效果:
本发明智能巡检系统基于边缘云服务器,边缘云服务器缓存需要推送的AR眼镜音视频内容,基于定位技术和地理位置信息一一对应。根据管理端发起的应用请求,MEC服务器通过深度包解析判断应用内容,结合位置信息确定推送AR内容并发送给用户,MEC服务器解决方案一方面通过内容本地化降低了内容时延,提升用户体验;另一方面基于位置,大大增强了AR眼镜的应用效果和价值;
本发明通过采用AR眼镜与采集端、管理端、边缘云服务器、巡检点标识物和定位装置有机连接,形成一种能充分利用了增强现实(AR)技术的巡检系统,可以将巡检流程中涉及的巡检设备相关的文字、图像、视频、3D动画、电子手册文件等内容以可视化方式近眼显示给巡检人员,方便巡检人员进行巡检,而且能方便巡检人员利用增强现实智能巡检设备发出协助请求,并将收到的协助信息以可视化方式近眼显示给巡检人员来完全巡检工作;
本发明的AR眼镜通过虚拟信息、真实环境和图像融合三个显示通道来实现虚实环境的视觉融合;校准从视点观察到的虚景与实景,实现虚实空间的三维注册;对输入的原始数据流进行处理并进行合理的映射;使得设备的输入信息具有各自的语义解释,以便于语义模型的提取,形成知识库;根据手势的变化结合系统上下文信息及其他相关数据,经过一系列逻辑判断来推断数据中心运维的操作意图。
当然,实施本发明的任一产品必不特定需要同时达到以上所述的所有技术效果。
通过以下参照附图对本发明的示例性实施例的详细描述,本发明的其它特征及其优点将会变得清楚。
附图说明
被结合在说明书中并构成说明书的一部分的附图示出了本发明的实施例,并且连同其说明一起用于解释本发明的原理。
图1是本发明提供的一种基于边缘云服务器的增强现实智能巡检系统结构示意图;
图2是本发明提供的又一种基于边缘云服务器的增强现实智能巡检系统结构示意图。
具体实施方式
现在将参照附图来详细描述本发明的各种示例性实施例。应注意到:除非另外具体说明,否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本发明的范围。
以下对至少一个示例性实施例的描述实际上仅仅是说明性的,决不作为对本发明及其应用或使用的任何限制。
对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论,但在适当情况下,所述技术、方法和设备应当被视为说明书的一部分。
在这里示出和讨论的所有例子中,任何具体值应被解释为仅仅是示例性的,而不是作为限制。因此,示例性实施例的其它例子可以具有不同的值。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步讨论。
实施例1:
结合图1,本实施例提供了一种基于边缘云服务器3的AR眼镜2智能巡检系统,参照图1,包括巡检点标识物1、AR眼镜2、边缘云服务器3、采集端4、管理端5和定位装置6。
巡检点标识物1设置在巡检设备上,且巡检点标识物1上包括识别信息;
AR眼镜2与边缘云服务器3相耦接,用于获取AR眼镜2前方的巡检点标识物1上识别信息,根据识别信息从边缘云服务器3中获取巡检信息以及巡检任务,根据巡检信息和巡检任务生成巡检结果上报至边缘云服务器3;
采集端4与边缘云服务器3相耦接,用于采集巡检设备的相关信息并发送至边缘云服务器3,边缘云服务器3对巡检设备的相关信息进行处理建立各巡检设备相互对应的巡检信息;
管理端5与边缘云服务器3相耦接,用于管理边缘云服务器存储的巡检任务或通过边缘云服务器3下发巡检任务;
边缘云服务器3分别与采集端4、管理端5和AR眼镜2相耦接,用于建立各巡检设备相互对应的巡检信息、存储管理端5下发的巡检任务;
定位装置6与AR眼镜2相耦接,用于对AR眼镜2进行定位。
可以理解的是边缘云服务器3是分布在网络边缘侧,提供实时数处理、分析决策的小规模云数据中心。“边缘云”或“MEC(Mobile Edge Clouds)移动边缘云”设备可以允许协同边缘网络节点(比如基站,接入点,交换机,路由器)进行计算和存储能力的配置,从而可以实现分布式计算。对于一个MEC(这个简称在这里代表边缘云)系统,MEC服务器将配置在无线接入网络侧(网络边缘),并提供计算和存储资源,由此可以最小化终端设备的服务时延、节省网络带宽、减少交叉拥堵、实现更好的定位和文本识别抉择,同时对于省掉云端传输和处理来说,安全和私密的问题也减缓了很多。基于MEC网络的专一性,网络运营商也可以在MEC服务中提供额外的附加服务以提升终端的户体验。除此之外,基于MEC的硬件设备平台,网络运营商还可以允许第三方接入他们的基础设施进行应用开发,成为应用服务提供商和内容提供商,由此可以贴近用户开发文本认知服务等。由MEC应用开发平台所建立的生态系统,可以促进不能被传统的远端“云”或其他服务解决的创新性新应用的产生,其具有以下特点:
本地网络状态认知,MEC配置在无线接入侧的边缘,需要能实时接入无线网络和信道信息的功能。
本地用户场景认知,可以定位并感知本地用户场景。
分布式,MEC的资源、应用和服务会分布式地部署在不同的位置,而且可能处于无线接入网的不同层(基站、接入点、交换机、路由器、网关、移动设备)。
异构性,相对于专用的数据中心(计划好的设备的网络),因为处于多变的网络连接和带宽,MEC节点处理和存储资源一定是可变的,从而导致其异构性。
移动性,移动设备通过不可靠的无线链路接入MEC服务器,而且他们的网络附着点也会经常变动。而且MEC服务可能本身就托管在移动设备上。因而,MEC的移动性支持很关键。
超低时延,MEC应该需要实现极致的低时延,比如为了支持交互式网络应用(机器人,虚拟增强现实,实时交互的工业控制系统),时延应该被控制在几毫秒之内。这些应该是高度时间敏感型的应用,端到端的响应时间需要控制在人类可忍受的范围之内。
“中央云”协作,MEC作为传统集中式云的补充,不能完全替代传统云。MEC贴近移动设备而能提供本地场景感知的处理,并且时延很低。但是远端的传统云可提供全局的集中式控制,而且具有更有强的计算和存储能力。因此,很多应用的执行需要从移动终端设备、边缘云网络节点和远端云进行两端式处理。
当然本发明中的基于边缘云服务器3的AR眼镜2智能巡检系统具有上述边缘云的全部特征,这里不再赘述。
本发明基于边缘云服务器3的AR眼镜2智能巡检系统,以增强现实近眼显示的方式为巡检人员展示巡检信息,从展现形式和交互方式等方面来解决当前基于巡检器的巡检方式不能解放巡检人员双手的问题;也能帮助巡检人员检验数据的完整性以及提醒漏检;实现了巡检的可视化,可以广泛应用于石油、水力、电力、铁路、机场、邮政、公安、军队、医院等各个领域。
本发明智能巡检系统基于边缘云服务器3,边缘云服务器3缓存需要推送的AR眼镜2音视频内容,基于定位技术和地理位置信息一一对应。根据管理端5发起的应用请求,MEC服务器通过深度包解析判断应用内容,结合位置信息确定推送AR内容并发送给用户,MEC服务器解决方案一方面通过内容本地化降低了内容时延,提升用户体验;另一方面基于位置,大大增强了AR眼镜2的应用效果和价值;
本发明通过采用AR眼镜2与采集端4、管理端5、边缘云服务器3、巡检点标识物1和定位装置6有机连接,形成一种能充分利用了增强现实(AR)技术的巡检系统,可以将巡检流程中涉及的巡检设备相关的文字、图像、视频、3D动画、电子手册文件等内容以可视化方式近眼显示给巡检人员,方便巡检人员进行巡检,而且能方便巡检人员利用增强现实智能巡检设备发出协助请求,并将收到的协助信息以可视化方式近眼显示给巡检人员来完全巡检工作。
实施例2:
参照图2,本发明又提供了一种基于边缘云服务器3的AR眼镜2智能巡检系统,包括:巡检点标识物1、AR眼镜2、边缘云服务器3、采集端4、管理端5和定位装置6。
巡检点标识物1设置在巡检设备上,且巡检点标识物1上包括识别信息;
在一些可选的实施例中,识别信息包括二维码。
AR眼镜2与边缘云服务器3相耦接,用于获取AR眼镜2前方的巡检点标识物1上识别信息,根据识别信息从边缘云服务器3中获取巡检信息以及巡检任务,根据巡检信息和巡检任务生成巡检结果上报至边缘云服务器3;
巡检员需要登录AR眼镜2,接收从边缘云服务器3下达的巡检任务。根据巡检员登录的账号以加密的形式发送到边缘云服务器3比对,根据该账号对应的权限加载不同的用户页面,边缘云服务器3认可后登录系统接收巡检任务,任务变更时,AR眼镜2以振动或声音的方式给出提示。
在一些可选的实施例中,AR眼镜2包括摄像模块21、传感模块22和分析模块23,其中,
摄像模块21,用于获取AR眼镜2前方的识别信息发送至分析模块23;
传感模块22,用于捕获AR眼镜2佩戴者的头部姿态信息、巡检现场的环境信息和识别信息,将头部姿态信息、巡检现场的环境信息和识别信息发送至分析模块23;
分析模块23,用于根据头部姿态信息调整摄像模块21的拍摄角度,在识别信息中识别出巡检任务中的巡检设备,提取环境信息和巡检设备的设备信息,根据环境信息和巡检设备的设备信息生成巡检报告并发送至边缘云服务器3。
该AR眼镜2通过虚拟信息、真实环境和图像融合三个显示通道来实现虚实环境的视觉融合;校准从视点观察到的虚景与实景,实现虚实空间的三维注册;对输入的原始数据流进行处理并进行合理的映射;使得设备的输入信息具有各自的语义解释,以便于语义模型的提取,形成知识库;根据手势的变化结合系统上下文信息及其他相关数据,经过一系列逻辑判断来推断数据中心运维的操作意图。
在一些可选的实施例中实施例中,AR眼镜2还包括语音交互模块,用于实现AR眼镜2的佩戴者与巡检管理者的实时语音交互。
优选的,AR眼镜2包括双目镜或单目镜。
在一些可选的实施例中,巡检信息包括巡检人员姓名、巡检时间、巡检轨迹、巡检数量、巡检设备名称和巡检完毕信息,巡检信息的格式包括图片、文字。
采集端4与边缘云服务器3相耦接,用于采集巡检设备的相关信息并发送至边缘云服务器3,边缘云服务器3对巡检设备的相关信息进行处理建立各巡检设备相互对应的巡检信息;
在一些可选的实施例中,采集端4包括移动采集设备。
管理端5与边缘云服务器3相耦接,用于管理边缘云服务器存储的巡检任务或通过边缘云服务器3下发巡检任务;
在一些优选的实施例中,管理端5包括桌面计算设备。
边缘云服务器3分别与采集端4、管理端5和AR眼镜2相耦接,用于建立各巡检设备相互对应的巡检信息、存储管理端5下发的巡检任务;
在一些可选的实施例中,边缘云服务器3通过数据交换设备分别与采集端4和管理端5相耦接。
定位装置6与AR眼镜2相耦接,用于对AR眼镜2进行定位。对巡检员的位置进行精准定位。
在一些可选的实施例中,定位装置6包括GPS定位装置6和/或WIFI定位装置6。全封闭环境没有GPS信号时,自动快速切换到WIFI定位;在半封闭环境下,GPS信号弱,同时存在GPS信号和WIFI信号,定位装置6接收两种定位模式的位置数据,例如可以使用卡尔曼滤波框架和逆反向累计概率函数将GPS和WIFI定位数据进行融合,获取最优估计值;在开放环境下,没有WIFI信号时,采用GPS定位,有WIFI信号时,采用WIFI辅助GPS定位,终端接收位置数据,采用卡尔曼滤波、最小二乘法或联邦卡尔曼滤波处理数据,获取最优位置。
本实施例的工作流程为:
利用移动采集设备先去对所有需要纳入巡检的设备进行设备信息的采集入库,包括设备名称、操作手册和检修记录等相关巡检信息,格式为文字、图片、视频和3D效果。
采集完的巡检信息会在管理端5的后台管理软件端读取显示,管理人员,会对所采集的巡检信息是否合乎标准,是否完善进行筛选审核,并与设备信息ID进行匹配绑定;同时还会对每个审核通过的设备生成一套二维码,二维码信息可以打印也可以以电子屏显示的方式,展现在巡检设备上。
审核通过的巡检设备,可以对设备添加事件,设定巡检顺序、巡检频率、巡检检查项等巡检内容,同时可以将设备添加到某条巡检任务的工作流中。
巡检人员在AR眼镜2端登录自己的账号,启动巡检程序后,便可以接受到来自管理软件端分配的巡检任务。
具体的,分析模块23从来自摄像模块21采集的图像数据中识别出巡检点标识物1上的二维码,从二维码中识别出设备ID,根据设备ID从服务器中获取该设备的巡检信息以及巡检任务;巡检信息包含巡检人员姓名、巡检时间、巡检轨迹、巡检数量、巡检设备名称和巡检完毕信息等;结合巡检信息和巡检任务生成辅助信息图像;分析模块23将辅助信息图像传输给边缘云服务器3。
在一些可选的实施例中,AR眼镜2还把包括显示模块,显示模板将辅助信息图像悬浮在AR眼镜2与待巡检的设备之间,或者将辅助信息图像贴合在待巡检的设备表面;对于文档视频等辅助资料,辅助信息图像悬浮在设备与AR眼镜2之间较为合适;对于箭头等用于操作指导的辅助资料,辅助信息图像贴合在设备的表面较为合适。
当巡检人员遇到难以做出决策的巡检项目或者遭遇紧急事故需要处理,而以其自身的知识经验和现有的数据信息无法解决现场问题时,巡检人员可以通过AR眼镜2的摄像头以其第一视角将现场复杂的情景通过边缘云服务器3直接传送到远程专家处,专家可通过平板、手机、PC等设备随时随地通过边缘云服务器3对佩戴AR眼镜2的现场巡检人员进行援助,由于获得的是巡检人员第一视角就如亲临现场进行观察,远程专家可通过边缘云服务器3将语音和增强现实电子白板直接叠加在巡检人员的视野中的操作对象上,现场巡检人员犹如获得现场专家的指导一样处理棘手问题,极大的减少了沟通和交流成本。
边缘云服务器3在整个巡检过程中始终会和管理端5、AR眼镜2端进行数据交互。一个功能是实时的记录采集端4、管理人员对所有数据做的操作,以及对设备的状态切换进行变更,以及记录操作日志;二是实时接收AR眼镜2的资源请求,并按要求返回需要的多媒体信息;以及满足AR眼镜2的远程协助需求。
通过增强现实(AR)技术,可以将巡检设备相关的文字、图像、视频、3D动画等内容以可视化的巡检流程,并投射到巡检人员的视野中。
现场的巡检人员只需佩戴配套的AR眼镜2进行巡检时还可以启动AR远程协助,管理团队技术人员便可以在远程实时的协助现场巡检人员进行巡检问题的排查,保证操作的准确性。
佩戴AR眼镜2的巡检人员,完全解放了巡检人员的双手,可以更好的用来操控,以及降低了一些高空作业、攀爬作业的危险性,并使其能集中精力完成任务;并可以让管理人员实时了解到巡查现场的环境、临时突发状况,查看以巡检人员第一视角的工作状况,提高巡检人员的安全性。
通过AR眼镜2采集的数据,配合边缘云服务器3大数据平台的分析,得到巡检人员某个领域的巡查表现与预期的差距或者巡检业务中某个巡检点存在严重缺陷,可以提示巡查人员应强化培训对应领域的相关技能,有利于提升整体巡检人员的全局业务能力,最终基于该系统也会诞生一套智能化培训。
通过上述实施例可知,本发明智能巡检系统基于边缘云服务器,边缘云服务器缓存需要推送的AR眼镜音视频内容,基于定位技术和地理位置信息一一对应。根据管理端发起的应用请求,MEC服务器通过深度包解析判断应用内容,结合位置信息确定推送AR内容并发送给用户,MEC服务器解决方案一方面通过内容本地化降低了内容时延,提升用户体验;另一方面基于位置,大大增强了AR眼镜的应用效果和价值;
本发明通过采用AR眼镜与采集端、管理端、边缘云服务器、巡检点标识物和定位装置有机连接,形成一种能充分利用了增强现实(AR)技术的巡检系统,可以将巡检流程中涉及的巡检设备相关的文字、图像、视频、3D动画、电子手册文件等内容以可视化方式近眼显示给巡检人员,方便巡检人员进行巡检,而且能方便巡检人员利用增强现实智能巡检设备发出协助请求,并将收到的协助信息以可视化方式近眼显示给巡检人员来完全巡检工作;
本发明的AR眼镜通过虚拟信息、真实环境和图像融合三个显示通道来实现虚实环境的视觉融合;校准从视点观察到的虚景与实景,实现虚实空间的三维注册;对输入的原始数据流进行处理并进行合理的映射;使得设备的输入信息具有各自的语义解释,以便于语义模型的提取,形成知识库;根据手势的变化结合系统上下文信息及其他相关数据,经过一系列逻辑判断来推断数据中心运维的操作意图。
虽然已经通过例子对本发明的一些特定实施例进行了详细说明,但是本领域的技术人员应该理解,以上例子仅是为了进行说明,而不是为了限制本发明的范围。本领域的技术人员应该理解,可在不脱离本发明的范围和精神的情况下,对以上实施例进行修改。本发明的范围由所附权利要求来限定。

Claims (10)

1.一种基于边缘云服务器的增强现实智能巡检系统,其特征在于,包括:巡检点标识物、AR眼镜、边缘云服务器、采集端、管理端和定位装置,其中,
所述巡检点标识物设置在巡检设备上,且所述巡检点标识物上包括识别信息;
所述AR眼镜与所述边缘云服务器相耦接,用于获取AR眼镜前方的巡检点标识物上所述识别信息,根据所述识别信息从所述边缘云服务器中获取巡检信息以及巡检任务,根据巡检信息和巡检任务生成巡检结果上报至所述边缘云服务器;
所述采集端与所述边缘云服务器相耦接,用于采集巡检设备的相关信息并发送至所述边缘云服务器,所述边缘云服务器对所述巡检设备的相关信息进行处理建立所述各巡检设备相互对应的巡检信息;
所述管理端与所述边缘云服务器相耦接,用于管理所述服务器存储的巡检任务或通过所述边缘云服务器下发巡检任务;
所述边缘云服务器分别与所述采集端、管理端和AR眼镜相耦接,用于建立各巡检设备相互对应的巡检信息、存储管理端下发的巡检任务;
所述定位装置与所述AR眼镜相耦接,用于对所述AR眼镜进行定位。
2.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述AR眼镜包括摄像模块、传感模块和分析模块,其中,
所述摄像模块,用于获取AR眼镜前方的识别信息发送至所述分析模块;
所述传感模块,用于捕获所述AR眼镜佩戴者的头部姿态信息、巡检现场的环境信息和所述识别信息,将所述头部姿态信息、巡检现场的环境信息和所述识别信息发送至所述分析模块;
所述分析模块,用于根据所述头部姿态信息调整所述摄像模块的拍摄角度,在所述识别信息中识别出巡检任务中的巡检设备,提取所述环境信息和所述巡检设备的设备信息,根据所述环境信息和所述巡检设备的设备信息生成巡检报告并发送至所述边缘云服务器。
3.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述巡检信息包括巡检人员姓名、巡检时间、巡检轨迹、巡检数量、巡检设备名称和巡检完毕信息,所述巡检信息的格式包括图片、文字。
4.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述边缘云服务器通过数据交换设备分别与所述采集端和管理端相耦接。
5.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述识别信息包括二维码。
6.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述定位装置包括GPS定位装置和/或WIFI定位装置。
7.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述采集端包括移动采集设备。
8.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述管理端包括桌面计算设备。
9.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述AR眼镜还包括语音交互模块,用于实现AR眼镜的佩戴者与巡检管理者的实时语音交互。
10.根据权利要求1所述的基于边缘云服务器的增强现实智能巡检系统,其特征在于,所述AR眼镜包括双目镜或单目镜。
CN202010419929.3A 2020-05-18 2020-05-18 基于边缘云服务器的增强现实智能巡检系统 Pending CN111612933A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010419929.3A CN111612933A (zh) 2020-05-18 2020-05-18 基于边缘云服务器的增强现实智能巡检系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010419929.3A CN111612933A (zh) 2020-05-18 2020-05-18 基于边缘云服务器的增强现实智能巡检系统

Publications (1)

Publication Number Publication Date
CN111612933A true CN111612933A (zh) 2020-09-01

Family

ID=72198528

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010419929.3A Pending CN111612933A (zh) 2020-05-18 2020-05-18 基于边缘云服务器的增强现实智能巡检系统

Country Status (1)

Country Link
CN (1) CN111612933A (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112291707A (zh) * 2020-11-09 2021-01-29 济南浪潮高新科技投资发展有限公司 基于云边端框架的信息叠加和共享的方法及系统
CN112365623A (zh) * 2020-12-03 2021-02-12 国网信息通信产业集团有限公司 一种电力巡检系统
CN112396718A (zh) * 2020-10-09 2021-02-23 广东电网有限责任公司阳江供电局 基于ar技术的现场施工安全及质量监督研究系统
CN112422680A (zh) * 2020-11-18 2021-02-26 中国联合网络通信集团有限公司 一种通信方法及装置
CN112651516A (zh) * 2020-11-27 2021-04-13 国网河南省电力公司郑州供电公司 基于ar技术的变电站机房的智能巡检系统及方法
CN112734969A (zh) * 2020-12-08 2021-04-30 国网辽宁省电力有限公司锦州供电公司 一种可穿戴式智能设备在输电作业中的应用方法
CN112750525A (zh) * 2021-01-21 2021-05-04 北京中科医信科技有限公司 一种医疗设备巡检管理方法、装置、设备及存储介质
CN113452746A (zh) * 2021-05-11 2021-09-28 华翔翔能科技股份有限公司 一种泵站运维巡查管理方法及系统
CN113506383A (zh) * 2021-07-09 2021-10-15 中国飞机强度研究所 一种飞机强度试验巡检方法及系统
CN113628347A (zh) * 2021-07-16 2021-11-09 炫彩互动网络科技有限公司 基于边缘计算的云ar实景共享方法及系统
CN113973106A (zh) * 2021-10-21 2022-01-25 广西电网有限责任公司崇左供电局 一种通信运检作业远程监管的装置和方法
CN114070851A (zh) * 2021-11-15 2022-02-18 中国电信集团系统集成有限责任公司 一种基于mec边缘云的业务恢复方法、存储介质及系统
CN114153315A (zh) * 2021-12-02 2022-03-08 浙江科顿科技有限公司 一种增强现实的分布式服务器智能眼镜系统及控制方法
CN114663996A (zh) * 2020-12-22 2022-06-24 宝武装备智能科技有限公司 基于ar增强现实技术的智能设备巡检系统
CN115035626A (zh) * 2022-05-19 2022-09-09 成都中科大旗软件股份有限公司 一种基于ar的景区智能巡检系统及方法
CN115190120A (zh) * 2021-03-22 2022-10-14 中国联合网络通信集团有限公司 多媒体数据交互方法、装置及系统
CN116805435A (zh) * 2023-08-23 2023-09-26 四川川西数据产业有限公司 一种数电机房智能巡检装置
CN117197412A (zh) * 2023-10-09 2023-12-08 西安大地测绘股份有限公司 一种基于ar的公路病害智能巡检系统及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107578487A (zh) * 2017-09-19 2018-01-12 北京枭龙科技有限公司 一种基于增强现实智能设备的巡检系统
CN107610269A (zh) * 2017-09-12 2018-01-19 国网上海市电力公司 一种基于ar的电网大数据智能巡检系统及其智能巡检方法
CN110400388A (zh) * 2019-07-02 2019-11-01 上海德衡数据科技有限公司 一种基于增强现实的智能巡检系统
CN110443909A (zh) * 2019-08-16 2019-11-12 广东工业大学 一种基于增强现实的巡检系统和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107610269A (zh) * 2017-09-12 2018-01-19 国网上海市电力公司 一种基于ar的电网大数据智能巡检系统及其智能巡检方法
CN107578487A (zh) * 2017-09-19 2018-01-12 北京枭龙科技有限公司 一种基于增强现实智能设备的巡检系统
CN110400388A (zh) * 2019-07-02 2019-11-01 上海德衡数据科技有限公司 一种基于增强现实的智能巡检系统
CN110443909A (zh) * 2019-08-16 2019-11-12 广东工业大学 一种基于增强现实的巡检系统和方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
王尚广: "《移动边缘计算》", 31 August 2017 *

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112396718A (zh) * 2020-10-09 2021-02-23 广东电网有限责任公司阳江供电局 基于ar技术的现场施工安全及质量监督研究系统
CN112291707A (zh) * 2020-11-09 2021-01-29 济南浪潮高新科技投资发展有限公司 基于云边端框架的信息叠加和共享的方法及系统
CN112422680A (zh) * 2020-11-18 2021-02-26 中国联合网络通信集团有限公司 一种通信方法及装置
CN112651516A (zh) * 2020-11-27 2021-04-13 国网河南省电力公司郑州供电公司 基于ar技术的变电站机房的智能巡检系统及方法
CN112365623A (zh) * 2020-12-03 2021-02-12 国网信息通信产业集团有限公司 一种电力巡检系统
CN112734969A (zh) * 2020-12-08 2021-04-30 国网辽宁省电力有限公司锦州供电公司 一种可穿戴式智能设备在输电作业中的应用方法
CN114663996A (zh) * 2020-12-22 2022-06-24 宝武装备智能科技有限公司 基于ar增强现实技术的智能设备巡检系统
CN112750525A (zh) * 2021-01-21 2021-05-04 北京中科医信科技有限公司 一种医疗设备巡检管理方法、装置、设备及存储介质
CN115190120A (zh) * 2021-03-22 2022-10-14 中国联合网络通信集团有限公司 多媒体数据交互方法、装置及系统
CN115190120B (zh) * 2021-03-22 2024-03-01 中国联合网络通信集团有限公司 多媒体数据交互方法、装置及系统
CN113452746A (zh) * 2021-05-11 2021-09-28 华翔翔能科技股份有限公司 一种泵站运维巡查管理方法及系统
CN113506383A (zh) * 2021-07-09 2021-10-15 中国飞机强度研究所 一种飞机强度试验巡检方法及系统
CN113628347A (zh) * 2021-07-16 2021-11-09 炫彩互动网络科技有限公司 基于边缘计算的云ar实景共享方法及系统
CN113973106A (zh) * 2021-10-21 2022-01-25 广西电网有限责任公司崇左供电局 一种通信运检作业远程监管的装置和方法
CN114070851A (zh) * 2021-11-15 2022-02-18 中国电信集团系统集成有限责任公司 一种基于mec边缘云的业务恢复方法、存储介质及系统
CN114153315A (zh) * 2021-12-02 2022-03-08 浙江科顿科技有限公司 一种增强现实的分布式服务器智能眼镜系统及控制方法
CN115035626A (zh) * 2022-05-19 2022-09-09 成都中科大旗软件股份有限公司 一种基于ar的景区智能巡检系统及方法
CN116805435A (zh) * 2023-08-23 2023-09-26 四川川西数据产业有限公司 一种数电机房智能巡检装置
CN116805435B (zh) * 2023-08-23 2023-10-31 四川川西数据产业有限公司 一种数电机房智能巡检装置
CN117197412A (zh) * 2023-10-09 2023-12-08 西安大地测绘股份有限公司 一种基于ar的公路病害智能巡检系统及方法
CN117197412B (zh) * 2023-10-09 2024-04-05 西安大地测绘股份有限公司 一种基于ar的公路病害智能巡检系统及方法

Similar Documents

Publication Publication Date Title
CN111612933A (zh) 基于边缘云服务器的增强现实智能巡检系统
CN110400388A (zh) 一种基于增强现实的智能巡检系统
CN107578487A (zh) 一种基于增强现实智能设备的巡检系统
Geraldes et al. UAV-based situational awareness system using deep learning
WO2017211136A1 (zh) 一种智能交通管理方法及系统、计算机存储介质
CN110471804B (zh) 设备调试方法、装置及电子设备
CN202058215U (zh) 在线安全巡查系统
CN108322475A (zh) 一种基于mr直播的设备远程协作维修方法及系统
CN106228497A (zh) 一种多工作模式应急指挥系统及其工作方法
CN109376660B (zh) 一种目标监测方法、装置及系统
EP3220636A1 (en) Video monitoring method and device
CN207039655U (zh) 一种可远程协助操作的网络安全应急处置装置
CN107071297A (zh) 一种用于电力信通机房展示的虚拟现实系统
US11443613B2 (en) Real-time crime center solution with text-based tips and panic alerts
CN106506256B (zh) 一种基于平台+插件的设备监控系统及方法
CN109522996A (zh) 固定标识物自动识别控制系统
CN108109207A (zh) 一种可视化立体建模方法及系统
CN107845143A (zh) 一种基于虚拟现实的装修现场展示系统
CN112306233A (zh) 一种巡检方法、系统和巡检管理平台
US20240064237A1 (en) Real-time crime center solution with dispatch directed digital media payloads
CN109711504A (zh) 固定标识物自动识别控制方法
CN107872648A (zh) 一种基于三维建模的室内装修施工场景监控系统
JP2003318941A (ja) 統合的システム
CN204810307U (zh) 无人机穿戴式维修保障支持系统
CN106377401A (zh) 导盲前端设备、导盲后端设备及导盲系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200901

RJ01 Rejection of invention patent application after publication