CN108322475A - 一种基于mr直播的设备远程协作维修方法及系统 - Google Patents

一种基于mr直播的设备远程协作维修方法及系统 Download PDF

Info

Publication number
CN108322475A
CN108322475A CN201810162082.8A CN201810162082A CN108322475A CN 108322475 A CN108322475 A CN 108322475A CN 201810162082 A CN201810162082 A CN 201810162082A CN 108322475 A CN108322475 A CN 108322475A
Authority
CN
China
Prior art keywords
information
remote
terminal
equipment
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810162082.8A
Other languages
English (en)
Inventor
蒋喆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Pu Wang Intelligent Technology Co Ltd
Original Assignee
Chengdu Pu Wang Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Pu Wang Intelligent Technology Co Ltd filed Critical Chengdu Pu Wang Intelligent Technology Co Ltd
Priority to CN201810162082.8A priority Critical patent/CN108322475A/zh
Publication of CN108322475A publication Critical patent/CN108322475A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明属于设备维修技术领域，公开了一种基于MR直播的设备远程协作维修方法及系统。本发明中的方法中，首先建立MR直播远程协作连接；其次获取与当前事故设备相关的三维模型；然后将采集的当前数据信息、视频流及音频流实时发送；再对获取的三维模型进行操作及标记，并将三维模型、操作信息及标记信息实时发送；最后对获取的三维模型进行解析，并将解析信息实时发送。本发明中的系统包括现场终端、远程终端及云服务器；现场终端及远程终端均包括数据存储模块、数据处理模块、人机界面、操作模块及加载模块。本发明减少时间等待消耗成本，减少排除故障时间，提高现场维修质量。

Description

一种基于MR直播的设备远程协作维修方法及系统
技术领域
本发明属于设备维修技术领域，具体涉及一种基于MR直播的设备远程协作维修方法及系统。
背景技术
设备制造业中，设备一旦发生故障，会给企业带来重大经济损失，因此设备的维修管理十分重要。现代企业运用了大量的先进设备，促进了企业生产活动，提高了企业的生产效率；但同时带来了许多新问题，先进设备具备技术性比较强、设备结构庞大复杂、工序多等特点，因此给企业的设备维修管理工作带来了很大的挑战。在传统设备维修中，一线维修人员在无法排除的设备故障情况下，会根据自己的知识体系将现场情况进行相关的图文描述，然后将故障具体情况通过相关系统发送至行业专家，专家根据具体情况相关图文描述进行分析提出解决方案，一线维修人员在收到回复后再进行设备维修。
上述现有的维修方式虽然能够解决设备的故障问题，但是存在以下缺陷：
a.故障详细描述不完整、不准确到位；一线维修人员的故障描述往往根据自己的知识储备能力，进行相关观察描述，在提交的故障详细描述中需提供的数据存在信息不完整、描述不准确、不到位，更有甚者，在一线维修人员知识储备低下的情况，还会出现错误信息的传达；
b.数据信息不直观；行业专家在对故障情况进行分析提出解决方案后，一般通过文字描述或语音表达，一线维修员在收到解决方案信息后，在没有直观数据信息参考的情况，由于知识储备的限制，而发生理解偏差或无法理解的情况；
c.高成本的时间等待；在实际情况中，由于一线维修人员的故障描述不准确，或故障情况严重时，故障现场需等待行业专家到达后进行指导方能对设备进行维修，因此造成长时间的等待成本，造成企业运营成本的不必要消耗及经济损失。
发明内容
为了解决现有技术存在的上述问题，本发明目的在于提供一种为企业减少时间等待消耗成本、减少排除故障时间、提高现场维修质量、降低因设备故障而造成的经济损失、提高故障维修信息共享情况、充分发挥企业整体维修保障效能、降低公司运营成本的基于MR直播的设备远程协作维修方法及系统。
本发明所采用的技术方案为：
一种基于MR直播的设备远程协作维修方法，包括以下步骤：
S1.远程终端与事故设备现场的现场终端建立MR直播远程协作连接；
S2.现场终端对事故设备进行数据采集、视频采集及音频采集，得到事故设备的当前数据信息、视频流及音频流，并将采集的当前数据信息、视频流及音频流实时发送至远程终端；
S3.远程终端获取步骤S2中的当前数据信息、视频流及音频流，获取完成后进行解析，并将解析信息实时传送至现场终端。
作为优选，上述的方法还包括以下步骤：
S4.现场终端根据步骤S3中的解析信息进行操作，并实时判断当前事故设备的障碍是否排除；
S5.当步骤S4中的判断结果为否时，重复进行步骤S2至S4，当步骤S4中的判断结果为是时，生成当前事故设备的维修解决方案，并将维修解决方案同步至云服务器，现场终端与远程终端之间的MR直播远程协作连接断开。
作为优选，所述的步骤S1中，远程终端与事故设备现场的现场终端建立MR直播远程协作连接时，具体步骤如下：
S101.现场终端通过扫描二维码或输入应用码登录APP，进入APP界面，向1台以上的远程终端发起连接请求，并实时从云服务器中获取应用配置信息；
S102.远程终端获取步骤S101中的连接请求，现场终端与远程终端建立MR直播远程协作连接，远程终端发送建立连接信息至云服务器后，继续步骤S2。
作为优选，所述的步骤S101中，现场终端从云服务器中获取应用配置信息后，具体步骤如下：
S101a.现场终端判断应用配置信息中是否含有埋点信息；
S101b.当步骤S101a中的判断结果为否时，继续步骤S102，当步骤S101a中的判断结果为是时，现场终端与存储服务器建立通信连接，根据埋点信息从存储服务器中获取表单；
S101c.现场终端将步骤S101b中获取的表单进行填写后实时将已填写表单发送至云服务器，并继续判断是否允许远程终端获取已填写表单；
S101d.当步骤S101c中的判断结果为否时，继续步骤S102，当步骤S101c中的判断结果为是时，远程终端从云服务器中实时获取已填写表单进行填写后实时将反馈表单发送至云服务器，然后继续判断当前埋点信息操作是否完成；
S101e.当步骤S101d中的判断结果为是时，继续步骤S102，当步骤S101d中的判断结果为是时，重复步骤S101c及步骤S101d。
作为优选，所述的步骤S5中，现场终端与远程终端之间的MR直播远程协作连接断开时，具体步骤如下：
S501.现场终端判断应用配置信息中是否含有埋点信息；
S502.当步骤S501中的判断结果为否时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤S501中的判断结果为是时，现场终端根据埋点信息从存储服务器中获取表单，将获取的表单进行填写后实时将结束表单发送至云服务器，并继续判断是否允许远程终端获取结束表单；
S503.当步骤S502中的判断结果为否时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤502中的判断结果为是时，远程终端从云服务器中实时获取结束表单进行填写后实时将最终表单发送至云服务器，然后继续判断当前埋点信息操作是否完成；
S504.当步骤503中的判断结果为是时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤503中的判断结果为是时，重复步骤S502及步骤S503。
作为优选，所述的步骤S502及步骤101b中，现场终端从存储服务器中获取表单的同时，存储服务器获取远程终端及现场终端的ID信息并形成操作日志进行存储。
作为优选，所述的步骤S1至步骤S3中，现场终端或远程终端随时从云服务器中获取当前事故设备的三维模型及与当前三维模型相关的预存文件。
作为优选，所述的步骤S1至步骤S3中，现场终端或远程终端获取三维模型后，对获取的当前三维模型进行操作及标记，并将当前三维模型、操作信息及标记信息实时发送至云服务器，其他现场终端或其他远程终端实时从云服务器中获取上述的当前三维模型、操作信息及标记信息。
作为优选，所述的操作信息包括移动操作信息、拆分操作信息、层进操作信息、旋转操作信息及缩放操作信息；所述的标记信息包括基于三维模型的AR标记信息及基于预存文件的AR标记信息；AR标记采用自由涂鸦标记的方式。
作为优选，所述的步骤S2中，现场终端从云服务器中获取当前事故设备的参数信息，并在现场终端的人机界面中实时展示当前事故设备及其对应设备的各个部件的当前数据信息及历史数据信息。
作为优选，所述的当前数据信息及历史数据信息的格式为音频、视频、图片和/或文本。
作为优选，所述的步骤S5中，所述的维修解决方案中包括三维模型、当前数据信息、视频流、音频流、操作信息、标记信息及解析信息；所述的解析信息包括远程操作信息、远程标记信息、远程视频流及远程音频流的一种或几种。
一种实现上述方法的基于MR直播的设备远程协作维修系统，包括现场终端、远程终端及云服务器；所述的现场终端及远程终端均包括数据存储模块、数据处理模块、人机界面、操作模块及加载模块；所述的现场终端及远程终端均通过无线通信模块与云服务器通信连接。
作为优选，所述的现场终端及远程终端均还包括与数据处理模块通信连接的辅助子系统；所述的辅助子系统包括录屏采集模块、音频输出模块、音频采集模块、数据采集模块及输入模块；所述的操作模块与输入模块通信连接；所述的操作模块包括手势识别模块、语音识别模块及图像识别模块。
与现有技术相比，本发明的有益效果为：
1)通过直播技术的远程实时信息交互的专家协作，一线维修人员可与行业专家在网络畅通的情况下进行远程实时信息交互，同时专家可以通过现场直播视频直观地看到现场故障发生情况，专家可在任何地点登录后进行技术支持，从根本上改变了传统的设备维修方式，建立了新的设备维修体系结构，使得事故设备的维修得到更准确的推理分析，从而降低因故障描述不准确、不完整等情况造成的时间等待成本；
2)通过基于MR技术的远程实时交互，本发明在远程实时交互中，加入了设备的三维模型，对三维模型进行拆分、层进、旋转、移动、AR标记，同时引用相关图文资料辅助事故设备维修讲解及指导过程，从而辅助双方可以更好的理解，使远程实时协作更高效；
3)通过设备维修技术支持数据库，为下一次快速准确排故提供充分意见，提高维修水平排故效率，同时为相关人员提供更完善、客观的数据信息，为学习者提供更多参考的学习资料；
4)结合云服务器及存储服务器，可以实时查询相关事故设备通过传感器收集的数据信息，从而专家及一线维修人员可高效的排故，同时生成相关的维修解决方案，同时将维修解决方案及设备维修远程协作从申请到结束的过程进行录屏保存至云服务器，为下一次快速准确排故提供充分意见，提高维修水平排故效率；
5)本发明为企业减少时间等待消耗成本，减少排除故障时间，提高现场维修质量，降低因设备故障而造成的经济损失，提高故障维修信息共享情况，便于公司内部人员的信息查询及培训学习，充分发挥企业整体维修保障效能，降低公司运营成本。
附图说明
图1是本发明中方法的流程框图。
具体实施方式
下面结合附图及具体实施例对本发明做进一步阐释。
实施例：
本实施例提供一种基于MR直播的设备远程协作维修方法及系统。
其中，一种基于MR直播的设备远程协作维修方法，包括以下步骤：
S1.远程终端与事故设备现场的现场终端建立MR直播远程协作连接；
本实施例中，远程终端与事故设备现场的现场终端建立MR直播远程协作连接时，具体步骤如下：
S101.现场终端通过扫描二维码或输入应用码登录APP，进入APP界面，向1台以上的远程终端发起连接请求，并实时从云服务器中获取应用配置信息；
本实施例中，现场终端从云服务器中获取应用配置信息后，具体步骤如下：
S101a.现场终端判断应用配置信息中是否含有埋点信息；
S101b.当步骤S101a中的判断结果为否时，继续步骤S102，当步骤S101a中的判断结果为是时，现场终端与存储服务器建立通信连接，根据埋点信息从存储服务器中获取表单；
S101c.现场终端将步骤S101b中获取的表单进行填写后实时将已填写表单发送至云服务器，并继续判断是否允许远程终端获取已填写表单；
S101d.当步骤S101c中的判断结果为否时，继续步骤S102，当步骤S101c中的判断结果为是时，远程终端从云服务器中实时获取已填写表单进行填写后实时将反馈表单发送至云服务器，然后继续判断当前埋点信息操作是否完成；
S101e.当步骤S101d中的判断结果为是时，继续步骤S102，当步骤S101d中的判断结果为是时，重复步骤S101c及步骤S101d。
S2.现场终端对事故设备进行数据采集、视频采集及音频采集，得到事故设备的当前数据信息、视频流及音频流，并将采集的当前数据信息、视频流及音频流实时发送至远程终端；当前数据信息通过获取与现场终端耦合的各个传感器的检测数据得到。视频流通过与现场终端耦合的摄像头及录制现场终端的人机界面得到，音频流通过与现场终端耦合的麦克风得到；
本实施例中，步骤S2中，现场终端从云服务器中获取当前事故设备的参数信息，并在现场终端的人机界面中实时展示当前事故设备及其对应设备的各个部件的当前数据信息及历史数据信息；当前数据信息及历史数据信息的格式为音频、视频、图片和/或文本。
S3.远程终端获取步骤S2中的当前数据信息、视频流及音频流，获取完成后进行解析，并将解析信息实时传送至现场终端。
本实施例中，步骤S1至步骤S3中，现场终端或远程终端随时从云服务器中获取当前事故设备的三维模型及与当前三维模型相关的预存文件；现场终端或远程终端获取三维模型后，对获取的当前三维模型进行操作及标记，并将当前三维模型、操作信息及标记信息实时发送至云服务器，其他现场终端或其他远程终端实时从云服务器中获取上述的当前三维模型、操作信息及标记信息。
本实施例中，操作信息包括移动操作信息、拆分操作信息、层进操作信息、旋转操作信息及缩放操作信息；标记信息包括基于三维模型的AR标记信息及基于预存文件的AR标记信息；AR标记采用自由涂鸦标记的方式。
本实施例中，基于MR直播的设备远程协作维修方法还包括以下步骤：
S4.现场终端根据步骤S3中的解析信息进行操作，并实时判断当前事故设备的障碍是否排除；
S5.当步骤S4中的判断结果为否时，重复进行步骤S2至S4，当步骤S4中的判断结果为是时，生成当前事故设备的维修解决方案，并将维修解决方案同步至云服务器，现场终端与远程终端之间的MR直播远程协作连接断开；
本实施例中，现场终端与远程终端之间的MR直播远程协作连接断开时，具体步骤如下：
S501.现场终端判断应用配置信息中是否含有埋点信息；
S502.当步骤S501中的判断结果为否时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤S501中的判断结果为是时，现场终端根据埋点信息从存储服务器中获取表单，将获取的表单进行填写后实时将结束表单发送至云服务器，并继续判断是否允许远程终端获取结束表单；
S503.当步骤S502中的判断结果为否时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤502中的判断结果为是时，远程终端从云服务器中实时获取结束表单进行填写后实时将最终表单发送至云服务器，然后继续判断当前埋点信息操作是否完成；
S504.当步骤503中的判断结果为是时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤503中的判断结果为是时，重复步骤S502及步骤S503。
本实施例中，步骤S502及步骤101b中，现场终端从存储服务器中获取表单的同时，存储服务器获取远程终端及现场终端的ID信息并形成操作日志进行存储。
本实施例中，步骤S5中，维修解决方案中包括三维模型、当前数据信息、视频流、音频流、操作信息、标记信息及解析信息；解析信息包括远程操作信息、远程标记信息、远程视频流及远程音频流的一种或几种；同时，云服务器可接入第三方系统数据库，接入的第三方系统数据库包含当前事故现场相关设备实时传感数据、历史传感数据及其他数据，其他数据包含模型、音视图文数据信息，云服务器可通过相关查询条件，以模糊查询方式进行相关视频资源查询、观看、学习。
一种实现上述方法的基于MR直播的设备远程协作维修系统，包括现场终端、远程终端及云服务器；现场终端及远程终端可以但不仅限于为基于IOS操作系统或基于Andriod操作系统的移动终端。
现场终端及远程终端均包括数据存储模块、数据处理模块、人机界面、操作模块及加载模块；现场终端及远程终端均通过无线通信模块与云服务器通信连接。
数据存储模块，用于获取并存储当前用户在当前场景中所获取的模型数据及音视图文文件文件，并存储本地相关操作数据、静态数据信息及APP配置信息等。
数据处理模块，用于当现场终端或远程终端获取到图片、音频、视频和/或文本等信息时，分析处理上述数据信息，并将处理结果输出至人机界面，然后实时将处理结果通过无线通信模块发送至云服务器。
人机界面，用于将获取的与现场设备场景相关的模型、音视图文文件进行输出显示。
加载模块，用于从数据存储模块中获取与现场设备场景相关的模型或音视图文文件时，将其加载至人机界面，呈现相关三维模型或音视图文文件。
在现场终端或远程终端运行时，会从数据存储模块中加载操作系统，并且由数据处理模块执行，在APP运行时，也会从数据存储模块中加载，并由数据处理模块执行，APP运行在操作系统之上，实现各种功能，如MR直播即时通信、模型操作同步、文件操作同步等；APP可以独立于操作系统提供的，也可以是操作系统自带的。
无线通信模块可以包括射频接收机和发射机和/或光(例如红外)接收机和发射机。无线通信模块的设计和实施方式取决于现场终端及远程终端所支持的一个或多个通信网络；本实施例中，无线通信模块可以支持LTE、3G、4G、GSM、GPRS、EDGE、Wi-Fi、WiMax以及Bluebooth等多种通信制式或通信方式。
本实施例中，现场终端及远程终端均还包括与数据处理模块通信连接的辅助子系统；辅助子系统包括录屏采集模块、音频输出模块、音频采集模块、数据采集模块及输入模块；操作模块与输入模块通信连接；操作模块包括手势识别模块、语音识别模块及图像识别模块。
本实施例中，录屏采集模块、音频输出模块、音频采集模块、数据采集模块及输入模块可以通过外设接口与数据处理模块通信连接；其中，录屏采集模块耦合了摄像头，用于实时记录现场终端的人机界面的视频及拍摄当前事故设备的现状视频，现场终端通过录屏采集模块获取人机界面及摄像头的拍摄范围内的视频数据信息，并向云服务器推送当前事故设备所在的场景现场发生的直播视频流数据；音频采集模块与麦克风相耦合，以便帮助实施启用音频记录功能，如音频记录、语音存储、语音分析等功能，远程终端及现场终端通过音频采集模块获取当前事故设备所在的场景现场发生的音频流数据，并向云服务器推送当前事故设备所在的场景现场发生的直播视频流数据；音频输出模块耦合了扬声器，当现场终端通过无线通信模块接收端到来自云服务器、远程终端或其他现场终端的音频流时，可以实时通过扬声器输出进行播放；输入模块包括触摸屏控制器和/或1个以上其他输入控制器，触摸屏控制器耦合了可触摸操作的人机界面，1个以上其他输入控制器可以耦合其他输入设备，如键盘、输入按钮及输入笔等，现场终端及远程终端通过输入模块对当前音视图文文件进行AR标记操作，现场终端获取输入模块的AR标记信息，通过无线通信模块将其传送至远程终端，远程终端获取信息后，进行解析及其他相关操作。
本发明旨在提供一种基于MR直播的设备远程协作维修方法及系统，通过现场终端及远程终端向云端服务器进行用户信息确认并登陆；现场终端或移动终端向其他终端发起连接申请；2个以上移动终端进行连接后进行数据通信；现场终端或移动终端通过云服务器实时获取模型数据、音视图文数据及现场设备相关数据信息；录屏采集模块获取远程协作中从协作申请到设备维修完成的整个过程，并将整个流程以视频、音频、文字相结合的方式上传至云服务器进行保存；多个终端之间通过无线通信模块、数据存储模块、数据处理模块、人机界面及加载模块可在网络连接情况下任一时间地点进行远程连接，进行写作设备维修；云服务器中可用相关条件进行模糊查询，查询出当前时间节点前所需设备故障维修相关资源文件，从而通过直观完整的数据信息进行参考学习，辅助维修。
本发明不局限于上述可选的实施方式，任何人在本发明的启示下都可得出其他各种形式的产品。上述具体实施方式不应理解成对本发明的保护范围的限制，本发明的保护范围应当以权利要求书中界定的为准，并且说明书可以用于解释权利要求书。

Claims (14)

1.一种基于MR直播的设备远程协作维修方法，其特征在于：包括以下步骤：
S1.远程终端与事故设备现场的现场终端建立MR直播远程协作连接；
S2.现场终端对事故设备进行数据采集、视频采集及音频采集，得到事故设备的当前数据信息、视频流及音频流，并将采集的当前数据信息、视频流及音频流实时发送至远程终端；
S3.远程终端获取步骤S2中的当前数据信息、视频流及音频流，获取完成后进行解析，并将解析信息实时传送至现场终端。
2.根据权利要求1所述的基于MR直播的设备远程协作维修方法，其特征在于：还包括以下步骤：
S4.现场终端根据步骤S3中的解析信息进行操作，并实时判断当前事故设备的障碍是否排除；
S5.当步骤S4中的判断结果为否时，重复进行步骤S2至S4，当步骤S4中的判断结果为是时，生成当前事故设备的维修解决方案，并将维修解决方案同步至云服务器，现场终端与远程终端之间的MR直播远程协作连接断开。
3.根据权利要求2所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S1中，远程终端与事故设备现场的现场终端建立MR直播远程协作连接时，具体步骤如下：
S101.现场终端通过扫描二维码或输入应用码登录APP，进入APP界面，向1台以上的远程终端发起连接请求，并实时从云服务器中获取应用配置信息；
S102.远程终端获取步骤S101中的连接请求，现场终端与远程终端建立MR直播远程协作连接，远程终端发送建立连接信息至云服务器后，继续步骤S2。
4.根据权利要求3所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S101中，现场终端从云服务器中获取应用配置信息后，具体步骤如下：
S101a.现场终端判断应用配置信息中是否含有埋点信息；
S101b.当步骤S101a中的判断结果为否时，继续步骤S102，当步骤S101a中的判断结果为是时，现场终端与存储服务器建立通信连接，根据埋点信息从存储服务器中获取表单；
S101c.现场终端将步骤S101b中获取的表单进行填写后实时将已填写表单发送至云服务器，并继续判断是否允许远程终端获取已填写表单；
S101d.当步骤S101c中的判断结果为否时，继续步骤S102，当步骤S101c中的判断结果为是时，远程终端从云服务器中实时获取已填写表单进行填写后实时将反馈表单发送至云服务器，然后继续判断当前埋点信息操作是否完成；
S101e.当步骤S101d中的判断结果为是时，继续步骤S102，当步骤S101d中的判断结果为是时，重复步骤S101c及步骤S101d。
5.根据权利要求4所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S5中，现场终端与远程终端之间的MR直播远程协作连接断开时，具体步骤如下：
S501.现场终端判断应用配置信息中是否含有埋点信息；
S502.当步骤S501中的判断结果为否时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤S501中的判断结果为是时，现场终端根据埋点信息从存储服务器中获取表单，将获取的表单进行填写后实时将结束表单发送至云服务器，并继续判断是否允许远程终端获取结束表单；
S503.当步骤S502中的判断结果为否时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤502中的判断结果为是时，远程终端从云服务器中实时获取结束表单进行填写后实时将最终表单发送至云服务器，然后继续判断当前埋点信息操作是否完成；
S504.当步骤503中的判断结果为是时，现场终端与远程终端之间的MR直播远程协作连接断开，当步骤503中的判断结果为是时，重复步骤S502及步骤S503。
6.根据权利要求5所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S502及步骤101b中，现场终端从存储服务器中获取表单的同时，存储服务器获取远程终端及现场终端的ID信息并形成操作日志进行存储。
7.根据权利要求2所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S1至步骤S3中，现场终端或远程终端随时从云服务器中获取当前事故设备的三维模型及与当前三维模型相关的预存文件。
8.根据权利要求7所述的基于MR直播的设备远程协作维修方法，其特征在于：现场终端或远程终端获取三维模型后，对获取的当前三维模型进行操作及标记，并将当前三维模型、操作信息及标记信息实时发送至云服务器，其他现场终端或其他远程终端实时从云服务器中获取上述的当前三维模型、操作信息及标记信息。
9.根据权利要求8所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的操作信息包括移动操作信息、拆分操作信息、层进操作信息、旋转操作信息及缩放操作信息；所述的标记信息包括基于三维模型的AR标记信息及基于预存文件的AR标记信息；AR标记采用自由涂鸦标记的方式。
10.根据权利要求9所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S5中，所述的维修解决方案中包括三维模型、当前数据信息、视频流、音频流、操作信息、标记信息及解析信息；所述的解析信息包括远程操作信息、远程标记信息、远程视频流及远程音频流的一种或几种。
11.根据权利要求1-10任一所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的步骤S2中，现场终端从云服务器中获取当前事故设备的参数信息，并在现场终端的人机界面中实时展示当前事故设备及其对应设备的各个部件的当前数据信息及历史数据信息。
12.根据权利要求11所述的基于MR直播的设备远程协作维修方法，其特征在于：所述的当前数据信息的格式及历史数据信息的格式均为音频、视频、图片和/或文本。
13.一种基于MR直播的设备远程协作维修系统，其特征在于：包括现场终端、远程终端及云服务器；所述的现场终端及远程终端均包括数据存储模块、数据处理模块、人机界面、操作模块及加载模块；所述的现场终端及远程终端均通过无线通信模块与云服务器通信连接。
14.根据权利要求13所述的基于MR直播的设备远程协作维修系统，其特征在于：所述的现场终端及远程终端均还包括与数据处理模块通信连接的辅助子系统；所述的辅助子系统包括录屏采集模块、音频输出模块、音频采集模块、数据采集模块及输入模块；所述的操作模块与输入模块通信连接；所述的操作模块包括手势识别模块、语音识别模块及图像识别模块。
CN201810162082.8A 2018-02-27 2018-02-27 一种基于mr直播的设备远程协作维修方法及系统 Pending CN108322475A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810162082.8A CN108322475A (zh) 2018-02-27 2018-02-27 一种基于mr直播的设备远程协作维修方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810162082.8A CN108322475A (zh) 2018-02-27 2018-02-27 一种基于mr直播的设备远程协作维修方法及系统

Publications (1)

Publication Number Publication Date
CN108322475A true CN108322475A (zh) 2018-07-24

Family

ID=62900821

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810162082.8A Pending CN108322475A (zh) 2018-02-27 2018-02-27 一种基于mr直播的设备远程协作维修方法及系统

Country Status (1)

Country Link
CN (1) CN108322475A (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109462637A (zh) * 2018-10-17 2019-03-12 广东电网有限责任公司 基于电力设备3d模型库的mr专家远程协作方法及系统
CN109635957A (zh) * 2018-11-13 2019-04-16 广州裕申电子科技有限公司 一种基于ar技术的设备维修辅助方法和系统
CN109711564A (zh) * 2018-12-07 2019-05-03 珠海格力电器股份有限公司 一种空调故障的显示方法、装置、存储介质及终端
CN110474979A (zh) * 2019-08-13 2019-11-19 北京软通智城科技有限公司 一种远程协助系统、方法、平台及存储介质
CN110889514A (zh) * 2019-10-17 2020-03-17 中国民用航空飞行学院 空中交通管制台站设备应急抢修远程支援系统及方法
CN111553974A (zh) * 2020-04-21 2020-08-18 北京金恒博远科技股份有限公司 一种基于混合现实的数据可视化远程协助方法及系统
CN111683219A (zh) * 2020-07-07 2020-09-18 中国电建集团华东勘测设计研究院有限公司 水电站设备故障远程诊断系统及方法
CN112865994A (zh) * 2019-11-27 2021-05-28 Oppo广东移动通信有限公司 远程辅助修复方法及相关装置
CN113347408A (zh) * 2021-06-16 2021-09-03 广州广日电梯工业有限公司 电梯故障处理的交互方法、交互装置以及存储介质
CN113992925A (zh) * 2021-10-12 2022-01-28 江西创成微电子有限公司 直播场景下的通知运维人员的方法和系统、终端设备
CN114189699A (zh) * 2020-09-15 2022-03-15 阿里巴巴集团控股有限公司 政务服务信息提供方法、装置及电子设备
CN115051974A (zh) * 2022-05-30 2022-09-13 深圳市中视典数字科技有限公司 一种远程指导方法、远程指导系统、电子设备及存储介质
CN116319727A (zh) * 2023-03-03 2023-06-23 北京尚优力达科技有限公司 一种远程在线标记方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105578132A (zh) * 2015-12-14 2016-05-11 西安科技大学 带式输送机远程视频维修辅助诊断系统
CN106374382A (zh) * 2016-09-21 2017-02-01 厦门亿力吉奥信息科技有限公司 电网设备故障检修方法及其系统
CN107172390A (zh) * 2017-05-12 2017-09-15 广州市和佳电子科技有限公司 一种基于智能眼镜为终端平台的可视化系统及实现方法
CN107491174A (zh) * 2016-08-31 2017-12-19 中科云创（北京）科技有限公司 用于远程协助的方法、装置、系统及电子设备
CN107547554A (zh) * 2017-09-08 2018-01-05 北京枭龙科技有限公司 一种基于增强现实的智能设备远程协助系统
CN107547870A (zh) * 2017-08-29 2018-01-05 南京西普水泥工程集团有限公司 一种在线诊断系统与方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105578132A (zh) * 2015-12-14 2016-05-11 西安科技大学 带式输送机远程视频维修辅助诊断系统
CN107491174A (zh) * 2016-08-31 2017-12-19 中科云创（北京）科技有限公司 用于远程协助的方法、装置、系统及电子设备
CN106374382A (zh) * 2016-09-21 2017-02-01 厦门亿力吉奥信息科技有限公司 电网设备故障检修方法及其系统
CN107172390A (zh) * 2017-05-12 2017-09-15 广州市和佳电子科技有限公司 一种基于智能眼镜为终端平台的可视化系统及实现方法
CN107547870A (zh) * 2017-08-29 2018-01-05 南京西普水泥工程集团有限公司 一种在线诊断系统与方法
CN107547554A (zh) * 2017-09-08 2018-01-05 北京枭龙科技有限公司 一种基于增强现实的智能设备远程协助系统

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109462637A (zh) * 2018-10-17 2019-03-12 广东电网有限责任公司 基于电力设备3d模型库的mr专家远程协作方法及系统
CN109635957A (zh) * 2018-11-13 2019-04-16 广州裕申电子科技有限公司 一种基于ar技术的设备维修辅助方法和系统
CN109711564A (zh) * 2018-12-07 2019-05-03 珠海格力电器股份有限公司 一种空调故障的显示方法、装置、存储介质及终端
CN110474979A (zh) * 2019-08-13 2019-11-19 北京软通智城科技有限公司 一种远程协助系统、方法、平台及存储介质
CN110889514A (zh) * 2019-10-17 2020-03-17 中国民用航空飞行学院 空中交通管制台站设备应急抢修远程支援系统及方法
CN112865994A (zh) * 2019-11-27 2021-05-28 Oppo广东移动通信有限公司 远程辅助修复方法及相关装置
CN112865994B (zh) * 2019-11-27 2023-07-07 Oppo广东移动通信有限公司 远程辅助修复方法及相关装置
CN111553974A (zh) * 2020-04-21 2020-08-18 北京金恒博远科技股份有限公司 一种基于混合现实的数据可视化远程协助方法及系统
CN111683219A (zh) * 2020-07-07 2020-09-18 中国电建集团华东勘测设计研究院有限公司 水电站设备故障远程诊断系统及方法
CN114189699A (zh) * 2020-09-15 2022-03-15 阿里巴巴集团控股有限公司 政务服务信息提供方法、装置及电子设备
CN113347408A (zh) * 2021-06-16 2021-09-03 广州广日电梯工业有限公司 电梯故障处理的交互方法、交互装置以及存储介质
CN113347408B (zh) * 2021-06-16 2023-02-17 广州广日电梯工业有限公司 电梯故障处理的交互方法、交互装置以及存储介质
CN113992925A (zh) * 2021-10-12 2022-01-28 江西创成微电子有限公司 直播场景下的通知运维人员的方法和系统、终端设备
CN113992925B (zh) * 2021-10-12 2023-11-14 江西创成微电子有限公司 直播场景下的通知运维人员的方法和系统、终端设备
CN115051974A (zh) * 2022-05-30 2022-09-13 深圳市中视典数字科技有限公司 一种远程指导方法、远程指导系统、电子设备及存储介质
CN116319727A (zh) * 2023-03-03 2023-06-23 北京尚优力达科技有限公司 一种远程在线标记方法及系统

Similar Documents

Publication Publication Date Title
CN108322475A (zh) 一种基于mr直播的设备远程协作维修方法及系统
CN109859829B (zh) 一种基于微信公众平台的医疗设备报修系统及其运行方法
CN111612933A (zh) 基于边缘云服务器的增强现实智能巡检系统
CN106744111A (zh) 基于蓝牙和移动数据通信技术的电梯维保管理系统及方法
CN106828969B (zh) 一种民航飞机故障远程传输和智能分析支持系统
CN105868936B (zh) 一种应用于变电设备一体化运维检修的智能运检系统
CN107516165A (zh) 一种基于bim的工程监理信息化管理系统
CN106022649A (zh) 工程项目监理、造价、招标、咨询的综合管理系统
CN109299908A (zh) 一种远程可视化协助系统
CN107240166A (zh) 点检终端及其数据处理方法
CN107240164A (zh) 安保巡检系统的数据处理与装置
CN107240165A (zh) 安保巡检系统
CN107239868A (zh) 用于安保巡检系统的终端信息处理方法及装置
CN103150618B (zh) 输电网工作计划生成系统和方法
CN104483842A (zh) 一种调控一体自动化主站比对方法
KR102239962B1 (ko) 문서서식 기반 정보화 플랫폼 제공 장치
CN206298231U (zh) 基于蓝牙和移动数据通信技术的电梯维保管理装置
CN104966140B (zh) 电网协同作业的移动工程师站
CN111062504A (zh) 一种基于ar技术的智能配电站运维系统及方法
CN109878760A (zh) 一种通用航空飞机故障远程协助平台及修复方法
CN103971311A (zh) 一种基于人机协同的推理演练方法和系统
CN104134170A (zh) 一种基于移动通讯技术的便携式二次故障处理平台
CN115047841A (zh) 一种基于云平台的风电机组远程故障诊断系统
CN109936814A (zh) 一种对讲终端、语音对讲协同调度方法及其系统
CN109711572A (zh) 一种光伏电站的移动式运维任务处理系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180724