CN113741687B - 基于ar眼镜的工业空调控制通讯方法、系统及存储介质 - Google Patents

基于ar眼镜的工业空调控制通讯方法、系统及存储介质 Download PDF

Info

Publication number
CN113741687B
CN113741687B CN202110911367.9A CN202110911367A CN113741687B CN 113741687 B CN113741687 B CN 113741687B CN 202110911367 A CN202110911367 A CN 202110911367A CN 113741687 B CN113741687 B CN 113741687B
Authority
CN
China
Prior art keywords
air conditioner
industrial air
data
configuration
glasses
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110911367.9A
Other languages
English (en)
Other versions
CN113741687A (zh
Inventor
彭慧
林俊辉
鲁仁全
李大宇
吴昊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong University of Technology
Original Assignee
Guangdong University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong University of Technology filed Critical Guangdong University of Technology
Priority to CN202110911367.9A priority Critical patent/CN113741687B/zh
Publication of CN113741687A publication Critical patent/CN113741687A/zh
Application granted granted Critical
Publication of CN113741687B publication Critical patent/CN113741687B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/30Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/56Remote control
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • F24F11/63Electronic processing
    • F24F11/64Electronic processing using pre-stored data
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/70Control systems characterised by their outputs; Constructional details thereof
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/88Electrical aspects, e.g. circuits
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明公开了一种基于AR眼镜的工业空调控制通讯方法、装置及存储介质,该方法包括:S100:设计CAN配置后台界面及所述工业空调数据显示操作交互界面模型,通过游戏引擎软件搭建虚拟场景并连接云端服务器,将构建完整的虚拟场景导入至所述AR眼镜中,并全息展示于现实空间里;S200:通过所述AR眼镜的手势识别和语音识别功能实现人机交互,所述人机交互的内容包括所述CAN配置后台参数和所述工业空调数据;S300:搭建CAN整合解析模块;S400:将所述工业空调的CAN整合解析模块与服务器联通;S500:将上位机与所述工业空调的CAN整合解析模块联通。

Description

基于AR眼镜的工业空调控制通讯方法、系统及存储介质
技术领域
本发明涉及工业空调控制领域,尤其涉及一种基于增强现实(augmentedreality,AR)眼镜的工业空调控制通讯方法、系统,及存储介质。
背景技术
随着大型工业产品各部件之间的互联性越来越强,可视化的能力也会越来越关键。而在AR中,用户不光能获取大量的新型生产数据,还能与之互动,经由数字界面实时控制真实的机器。AR云也会在用户与工作之间担任重要的角色,它可适应不同的地理位置、传感器数据和具体机器类型,提供一致的使用体验。而5G网络可以让我们快速访问云数据,与AR结合后,会成为一种非常强大的解决方案。相较于VR,AR的拓展空间、想象空间更大,近年来吸引了越来越多巨头的目光,不论是底层技术、硬件形态还是应用落地都有了长足的发展。AR头显,以及AR眼镜也在军工、营销、教育、企业培训等领域广泛应用,逐渐成为生产力工具的重要一部分,帮助企业降本增效。
新一代的AR眼镜基本都加入了多样的交互方式,体验也从简单的叠加向更深度融合进阶。基于算法技术提升,AR设备具备了对环境、光线感知、平面检测等功能,跟现实环境之前的交互不再只是以往单纯的叠加,通过对现实环境三维重构,实现了真正的混合现实体验。此外,手势识别、语音交互、眼球追踪等相关技术与逐渐被融入到AR设备中。如HoloLens 2具备出色的手势识别系统,不仅能识别单手25个关节点信息,并且能够识别自然手势,自定义手势操作,支持捏、拉、按等动作,达到低延时的自然手势交互。新加入的眼球追踪功能也为用户体验带来了新的交互性,此外语音指令、导航、与3D对象的交互、虚拟协作都带来了更为深度融合的体验。
在工业控制中,控制局域网络(controller area network,CAN)总线控制是一种非常有效的方式,是一种有效支持分布式控制系统的串行通信网络。由于其高性能、高可靠性以及低成本而越来越受到人们的重视,被广泛应用于诸多领域,而且能够检测出产生的任何错误。而工业空调作为大型解决方案中的其中一个大型部件,CAN通信在各个部件之间作为信息快速传输的直通车。面对市面上各个产品应用厂家与工业空调通讯的CAN通信协议的定义不同,如果针对每个产品应用厂家单独开发出一套与之要求匹配的CAN通讯功能的工业空调软件,往往会占用很高的开发、生产成本和工时。所以如何快速、精确的配置工业空调的CAN通讯参数,减少开发成本则成为亟需解决的问题。
发明内容
鉴于上述现有技术的不足,本发明的目的在于解决现有技术中存在的兼容性问题,结合AR技术,提供一种基于AR眼镜的工业空调控制通讯方法、系统及存储介质。本发明不仅能够解决由于各个产品应用方的CAN通信协议定义不同导致工业空调软件无法兼容的问题,而且能够通过AR可视化操作,能够有效提高产品的开发以及维修效率。
有鉴于此,本申请第一方面提供了一种基于AR眼镜的工业空调控制通讯方法,其特征在于,所述方法应用于工业空调控制通讯系统,所述工业空调控制通讯系统包括工业空调与增强现实AR眼镜,所述工业空调具有控制局域网络CAN通讯功能与网络接入功能,所述工业空调配置有产品应用方的CAN通讯协议;所述AR眼镜用于展示所述工业空调的运行数据,以及操控所述工业空调的运行状态;所述工业空调配置的所述CAN通讯协议与不同产品应用方的要求协议具有对应关系,所述对应关系为所述控制通讯系统的特征,所述方法包括:S100:设计CAN配置后台界面及所述工业空调数据显示操作交互界面模型,通过游戏引擎软件搭建虚拟场景并连接云端服务器,将构建完整的虚拟场景导入至所述AR眼镜中,并全息展示于现实空间里;S200:通过所述AR眼镜的手势识别和语音识别功能实现人机交互,所述人机交互的内容包括所述CAN配置后台参数和所述工业空调数据;S300:搭建CAN整合解析模块;S400:将所述工业空调的CAN整合解析模块与服务器联通;S500:将上位机与所述工业空调的CAN整合解析模块联通。
可选的,结合第一方面,在一种可能的实现方式中,所述S200还包括:S210:搭建一个具有权限登录的虚拟场景,并为所述虚拟场景的组件添加响应事件,当用户通过人机交互触发所述响应事件时,所述AR眼镜响应并通过服务器下发所设定的权限指令,其中,不同权限对应不同的CAN配置后台和所述工业空调数据显示操作策略;其中,权限登录对象包括三种:测试工程师权限、产线工程师权限和普通用户权限,其中,权限大小为所述测试工程师权限大于所述产线工程师权限大于所述普通用户权限。
可选的,结合第一方面,在一种可能的实现方式中,所述人机交互触发所述响应事件的方式包括:虚拟按键点击、虚拟键盘输入、语音识别、视线跟随、移动、旋转、缩放,所述权限登录的虚拟场景包括应用对象用户名及密码输入、确认登录、AR眼镜用户名及密码存储。
可选的,结合第一方面,在一种可能的实现方式中,所述S300还包括:S310:搭建CAN驱动层,根据CAN参数配置后台所配置的接收帧与发送帧的帧ID以及帧格式,分别确认需要接收的CAN报文与需要发送的CAN报文,并执行对应的收发操作;所述CAN驱动层用于按照CAN配置后台所配置的发送帧格式对待发送的CAN数据进行封装,发送帧的格式包括标准帧格式和扩展帧格式;S320:搭建CAN逻辑处理层,根据CAN参数配置后台所配置的发送帧规则,对所述CAN驱动层接收的CAN报文解析成具体的数据;根据CAN参数配置后台所配置的发送帧规则,对CAN应用层需发送的数据封装成完整的CAN报文;S330:搭建所述CAN应用层,针对所述CAN逻辑处理器解析后的接收帧报文数据由外部逻辑调用以操作应用,将需发送的工业空调的数据上传至所述CAN逻辑处理层封装成发送帧报文。
可选的,结合第一方面,在一种可能的实现方式中,所述S320中的CAN逻辑处理层,用于根据CAN参数配置后台所配置的参数规则,发送帧需整合的数据包括数字量数据、模拟量数据以及闲置数据这三种类型,接收帧需解析的数据包括数字量数据和模拟量数据这两种数据类型。
可选的,结合第一方面,在一种可能的实现方式中,所述数字量数据至少包括所述工业空调的模式状态、开关状态以及相关部件的开关状态,所述模拟量数据至少包括所述工业空调的温度大小、高低压传感器数值及相关部件运行数据。
可选的,结合第一方面,在一种可能的实现方式中,所述发送和接收共用一个缓存区,所述CAN驱动层传入所述缓存区指针并在所述缓存区内进行操作。
可选的,结合第一方面,在一种可能的实现方式中,所述CAN整合解析模块提供生命计数和通讯错误状态接口,以供所述工业空调判断当前的CAN通讯状态。
可选的,结合第一方面,在一种可能的实现方式中,所述工业空调的CAN整合解析模块与服务器联通的方式包括:S410:所述工业空调的CAN整合解析模块将运行数据通过网络传输至服务器,通过所述服务器将所述运行数据通过网络实时反馈至所述AR眼镜,以使得所述工业空调数据显示操作交互界面中的数据通过所述AR眼镜呈现出来;S420:所述AR眼镜通过手势识别和语音识别在所述工业空调数据显示操作交互界面上将操作指令通过网络传输至所述服务器,通过所述服务器将操作指令通过网络反馈给所述工业空调的CAN整合解析模块,从而控制所述工业空调执行相应的操作指令。
可选的,结合第一方面,在一种可能的实现方式中,所述S200中,所述CAN参数配置后台内容包括通用配置参数以及特定帧配置参数,其中,搭建CAN参数配置后台虚拟场景时,为特定帧配置参数项添加可扩展数目属性,能够自由增减CAN报文帧对象。
可选的,结合第一方面,在一种可能的实现方式中,所述通用配置参数包括波特率和通讯超时时间,所述特定帧配置参数包括帧ID、帧格式、帧类型、数字量配置规则、模拟量配置规则及闲置数据配置规则。
可选的,结合第一方面,在一种可能的实现方式中,所述数字量配置规则、所述模拟量配置规则及所述闲置数据配置规则,均需要根据应用方的通信协议要求定义指定数据存放的字节位置、所占大小以及开始位。
可选的,结合第一方面,在一种可能的实现方式中,所述方法还包括:对S200中的人机交互在CAN参数配置后台上进行配置,其中,根据应用对象的不同包括如下三种配置方式:若所述应用对象为所述产线工程师,当操作配置大批量产线工业空调时,根据应用方的通信协议要求在CAN参数配置后台上进行相应配置,配置完成后导出CAN配置数据包,并将所述CAN配置数据包上传至云端服务器存储,通过服务器网络传输至指定地址,所述产线工程师直接从所述指定地址中提取所述CAN配置数据包,并将所述CAN配置数据包批量烧入所述大批量产线工业空调中,以实现批量配置所述大批量产线工业空调的CAN通讯协议;若所述应用对象为所述测试工程师,当查看和配置所述工业空调的CAN参数配置后台时,根据测试要求在所述CAN参数配置后台上进行相应配置,所述测试工程师没有导出所述CAN配置数据包操作的权限;若所述应用对象为所述普通用户,则没有导出所述CAN配置数据包操作的权限,以及查看和操作所述工业空调的CAN参数配置后台权限。
可选的,结合第一方面,在一种可能的实现方式中,所述方法还包括:对S200中工业空调数据进行显示与操作控制,其中,根据应用对象的不同包括如下三种显示与操作控制的方式:若所述应用对象为所述产线工程师,则数据显示至少包括所述工业空调的问题、各高低压传感器数值以及各部件运行状态,所述操作控制至少包括所述工业空调的开启与关闭、温度控制、空调运行模式控制以及各运行部件的单独控制;若所述应用对象为所述测试工程师,则数据显示与操作控制的权限最大,所述数据显示包括展示所有所述工业空调通过服务器上传的数据,所述操作控制包括所述工业空调开放的所有控制功能;若所述应用对象为所述普通用户,则数据显示只包括所述工业空调温度、空调当前运行模式状态、所述操作控制只包括所述工业空调的开启与关闭、温度控制与所述工业空调运行模式的控制。
本申请第二方面提供了一种AR眼镜的工业空调控制通讯系统,其特征在于,所述系统包括:工业空调与增强现实AR眼镜,所述工业空调具有控制局域网络CAN通讯功能与网络接入功能,所述工业空调配置有产品应用方的CAN通讯协议;所述AR眼镜用于展示所述工业空调的运行数据,以及操控所述工业空调的运行状态;
所述工业空调配置的所述CAN通讯协议与不同产品应用方的要求协议具有对应关系,所述AR眼镜的工业空调控制通讯系统用于执行本申请第一方面至第一方面任意一种实现方式中所述的基于AR眼镜的工业空调控制通讯方法。
本申请第三方面提供了一种非易失性计算机可读存储介质,其特征在于,所述非易失性计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行时,可使得所述一个或多个处理器执行本申请第一方面至第一方面任意一种可能的实现方式中所述的基于AR眼镜的工业空调控制通讯方法。
本申请具有如下有益效果:
1、工业空调CAN协议的可控配置,使得各个产品应用方都可以兼容同一款工业空调控制软件,仅需在CAN参数配置后台上配置与自身CAN通讯要求相匹配的CAN配置参数,能够降低大量开发、生产成本。而且有利于现场测试维护人员可直接不需要修改空调控制软件来配置上送与下发的数据,能够提高测试维修效率。
2、全息CAN参数配置后台、工业空调数据显示操作交互界面与真实世界完美融合起来,使得操作人员拥有AR眼镜就可以通过手势操控、眼球跟踪和语音操控进行AR可视化工作,无需额外的外部设备,实时查看工业空调运行数据以及操纵工业空调运行状态,提高测试工作效率,降低维修成本。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1为本发明提供的一种基于AR眼镜的工业空调控制通讯方法流程图;
图2为本发明提供的一种控制流程示意图;
图3为本发明提供的一种CAN整合解析模块的框架图;
图4为本发明提供的一种CAN逻辑处理层的框架图;
图5为本发明提供的一种CAN参数配置后台的交互示意图;
图6为本发明提供的一种工业空调数据显示操作交互界面的示意图;
图7为本发明提供的一种基于AR眼镜的工业空调控制通讯系统的结构示意图。
具体实施方式
本申请实施例提供了一种基于AR眼镜的工业空调控制通讯方法、系统及存储介质,能够解决由于各个产品应用方的CAN通信协议定义不同导致工业空调软件无法兼容的问题,而且能够通过AR可视化操作,能够有效提高产品的开发以及维修效率。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。在本申请中,“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b或c中的至少一项(个),可以表示:a,b,c,a和b,a和c,b和c或a和b和c,其中a、b和c可以是单个,也可以是多个。值得注意的是,“至少一项(个)”还可以解释成“一项(个)或多项(个)”。
需要说明的是,本申请中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其他实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
本申请实施例中出现的第一、第二等描述,仅作示意与区分描述对象之用,没有次序之分,也不表示本申请实施例中对设备个数的特别限定,不能构成对本申请实施例的任何限制。
本申请提供了一种基于AR眼镜的工业空调控制通讯方法,所述方法应用于工业空调控制通讯系统,所述工业空调控制通讯系统包括工业空调与增强现实AR眼镜,所述工业空调具有控制局域网络CAN通讯功能与网络接入功能,所述工业空调配置有产品应用方的CAN通讯协议;所述AR眼镜用于展示所述工业空调的运行数据,以及操控所述工业空调的运行状态;所述工业空调配置的所述CAN通讯协议与不同产品应用方的要求协议具有对应关系,所述对应关系为所述控制通讯系统的特征,请参见图1,该方法包括:
S1:设计CAN配置后台界面及所述工业空调数据显示操作交互界面模型,通过游戏引擎软件搭建虚拟场景并连接云端服务器,将构建完整的虚拟场景导入至所述AR眼镜中,并全息展示于现实空间里;
S2:通过所述AR眼镜的手势识别和语音识别功能实现人机交互,所述人机交互的内容包括所述CAN配置后台参数和所述工业空调数据;
S3:搭建CAN整合解析模块;
S4:将所述工业空调的CAN整合解析模块与服务器联通;
S5:将上位机与所述工业空调的CAN整合解析模块联通。
本申请提供的这种基于AR眼镜的工业空调控制通讯方法中包含基于AR头戴式眼镜以及CAN整合解析模块,用于在所述工业空调内快速整合配置对应产品应用方的CAN通讯协议,通过AR眼镜全息展示所述工业空调的运行数据和操控所述工业空调的运行状态。所述工业空调的CAN通讯协议配置与不同产品应用方的要求协议之间有明确的对应关系,将此作为控制通讯系统的特征;
请参见图2,图2提供了一种控制流程示意图。请参见该示意图,可知,本申请提供的基于AR眼镜的工业空调控制通讯方法具体可以包括如下步骤:
S100:设计CAN配置后台界面及所述工业空调数据显示操作交互界面模型,并以此通过游戏引擎软件搭建虚拟场景并连接云端服务器,将构建完整的虚拟场景打包导入至AR眼镜中,全息展示在现实空间里。在虚实结合过程中,需根据AR眼镜的空间扫描技术快速扫描周围环境,确定工业空调位置,避免可视化AR界面出现嵌入物体内部的问题。通过Vuforia的Vumark技术,每台工业空调出厂所定义的Vumark的编号不同,AR眼镜可通过扫描Vumark条形码来提取条形码中所存贮的编号来确定具体的工业空调,进而在云端服务器提取对应编号工业空调上传的数据信息。
S200:通过AR眼镜的手势识别和语音识别功能来实现人机交互,具体人机交互内容为CAN参数配置后台和所述工业空调数据显示操作。
S300:搭建CAN整合解析模块。如图3和图4所示,CAN整合解析模块具备中枢整合解析功能,作为云端服务器、上位机以及工业空调之间的CAN报文数据逻辑处理站,软件架构为一个多输入多输出模块。
S400:将所述工业空调的CAN整合解析模块与服务器相联通。
S500:将上位机与所述工业空调的CAN整合解析模块相联通。根据应用场景的不同,上位机有以下两种形式:(A)中央监控后台:在大型工业空调解决方案领域,多台工业空调彼此之间通过CAN通讯线连接至CAN总线网络,而中央监控后台则作为终端上位机接收多台机房空调的数据状态信息并可进行单独操控。(B)整车人机交互界面(HMI):在新能源车用空调领域,车用空调与车用各部件通过CAN通讯线连接至CAN总线网络,而整车的人机交互界面作为终端上位机接收车用空调的运行状态数据并可进行操控。
更进一步的,在上述S200中,还可以包括如下步骤:
S210:设计者需设定好针对不同应用对象所需显示以及可操作的数据内容,具体过程为,搭建一个权限登录的虚拟场景,为虚拟组件添加事件响应,当用户通过人机交互触发响应事件时,AR眼镜响应并通过服务器下发所设定的权限指令,不同权限对应不同的CAN配置后台和所述工业空调数据显示操作策略。
其中权限登录对象包括三种,分别为产线工程师权限、测试工程师权限和普通用户权限,权限大小范围应为测试工程师权限>产线工程师权限>普通用户权限。
更进一步的,在步骤S210中,人机交互触发响应事件的方式包括:
虚拟按键点击、虚拟键盘输入、语音识别、视线跟随、移动、旋转、缩放。权限登录的虚拟场景功能包括应用对象用户名和密码输入、确认登录、AR眼镜用户名及密码存储。用户登录时输入的应用对象用户名和密码数据上传至云端服务器,云端服务器对输入的信息与预先存贮的正确用户名和密码进行比对验证,若比对正确,则通过网络返回对应应用对象确认登录的数据信息,权限登录确认后进入不同应用对象对应权限界面。若比对错误,则通过网络返回登录失败信息,AR虚拟界面弹出显示登录失败提示界面。
请参见图3,在上述步骤S300中,还包括如下步骤:
S310:搭建CAN驱动层。根据CAN参数配置后台所配置的接受帧与发送帧的帧ID和帧格式来分别确认需要接收的CAN报文与需要发送的CAN报文,并执行对应的收发操作。同时该层还需按照CAN配置后台所配置的发送帧格式对需发送的CAN数据进行封装,发送帧格式分为标准帧格式和扩展帧格式。
S320:搭建CAN逻辑处理层。根据CAN参数配置后台所配置的接收帧规则,对所述CAN驱动层接收的CAN报文解析成具体的数据。根据CAN参数配置后台所配置的发送帧规则,对CAN应用层需发送的数据封装成完整的CAN报文。
S330:搭建CAN应用层。针对所述CAN逻辑处理层解析后的接收帧报文数据由外部逻辑调用进行操作应用,同时将需发送的所述工业空调的数据上传至所述CAN逻辑处理层封装成发送帧报文。
其中,CAN逻辑处理层中根据CAN参数配置后台所配置的参数规则,发送帧需整合的数据包括数字量数据、模拟量数据以及闲置数据这三种类型,接收帧需解析的数据包括数字量数据和模拟量数据这两种类型。其中的数字量数据至少应包括所述工业空调的模式状态、开关状态及相关部件开关状态,模拟量数据至少应包括所述工业空调的温度大小、高低压传感器数值及相关部件运行数据。
发送和接收最终共用一个缓存区,CAN驱动层传入该缓存区指针并操作。CAN整合解析模块需提供生命计数和通讯错误状态接口供所述工业空调判断当前的CAN通讯状态。
如图5与图6所示,AR眼镜与工业空调间具体联通形式包括以下内容:
(1)所述工业空调的CAN整合解析模块将运行数据通过网络传输至服务器,然后经过服务器将数据通过网络实时反馈给AR眼镜,最终所述工业空调数据显示操作交互界面与CAN参数配置后台中的数据通过AR眼镜呈现出来。
(2)AR眼镜通过手势识别和语音识别在所述工业空调数据显示操作交互界面上将操作指令通过网络传输至服务器,然后经过服务器将操作指令通过网络反馈给所述工业空调的CAN整合解析模块,进而控制所述工业空调执行相应操作指令。
其中,步骤S200中,CAN参数配置后台内容包括通用配置参数以及特定帧配置参数,搭建CAN参数配置后台虚拟场景时,为特定帧配置参数项添加可扩展数目属性,可自由增减CAN报文帧对象。
通用配置参数包括配置波特率和通讯超时时间,特定帧配置参数包括帧ID、帧格式、帧类型、数字量配置规则、模拟量配置规则及闲置数据配置规则。
数字量配置规则、模拟量配置规则及闲置数据配置规则需根据应用方的通信协议要求定义指定数据存放的字节位置、所占大小以及从哪一位开始。以扩展帧格式的数据为例,扩展帧数据为8个字节,数字量的配置规则为将空调开关状态放置第7个字节的第3位,占据大小为1Bit。
该方法还包括:对S200中工业空调数据进行显示与操作控制,其中,根据应用对象的不同包括如下三种显示与操作控制的方式:
(1)当应用对象为产线工程师,需操作配置大批量产线工业空调时。根据应用方的通信协议要求在CAN参数配置后台上进行相应配置,配置完成后一键导出CAN配置数据包,并把数据包上传至云端服务器存储,通过服务器网络传输至指定地址,产线工程师直接从所述指定地址提取所述CAN配置数据包。将所述CAN配置数据包批量烧入所述大批量产线工业空调中,以实现批量配置所述大批量产线工业空调的CAN通讯协议。
(2)当应用对象为测试工程师,需查看和配置所述工业空调的CAN参数配置后台时。根据测试要求在CAN参数配置后台上进行相应配置,但没有进行一键导出CAN配置数据包操作的权限。
(3)当应用对象为普通用户,则没有查看和操作所述工业空调的CAN参数配置后台以及一键导出CAN配置数据包操作的权限。
人机交互在工业空调进行数据显示操作,根据应用对象的不同在配置上包括如下三种:
(1)当应用对象为产线工程师时,数据显示至少应包括所述空调温度、各高低压传感器数值以及各部件运行状态,操作控制至少应包括所述空调开启与关闭、温度控制、空调运行模式控制及各运行部件单独控制。
(2)当应用对象为测试工程师时,数据显示与操作控制的权限为最大,数据显示展示所有所述工业空调通过服务器上传的数据,操作控制可操作应用所述工业空调开放的所有控制功能。
(3)当应用对象为普通用户时,数据显示只包括所述空调温度、空调当前运行模式状态,操作控制只包括所述空调开启与关闭、温度控制、空调运行模式控制。
图7是本申请实施例提供的一种基于AR眼镜的工业空调控制通讯系统的结构示意图,该基于AR眼镜的工业空调控制通讯系统400可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上处理器(cemtrml processimg umits,CPU)410(例如,一个或一个以上处理器)和存储器420,一个或一个以上存储应用程序433或数据432的存储介质430(例如一个或一个以上海量存储设备)。其中,存储器420和存储介质430可以是短暂存储或持久存储。存储在存储介质430的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对基于AR眼镜的工业空调控制通讯系统400中的一系列指令操作。更进一步地,处理器410可以设置为与存储介质430通信,在基于进化算法的电镀线行车调度装置400上执行存储介质430中的一系列指令操作。
基于AR眼镜的工业空调控制通讯系统400还可以包括一个或一个以上电源440,一个或一个以上有线或无线网络接口430,一个或一个以上输入输出接口460,和/或,一个或一个以上操作系统431,例如Wimdows Serve,Nmc OS X,Umix,Limux,FreeBSD等等。本领域技术人员可以理解,图7示出的基于AR眼镜的工业空调控制通讯系统并不构成对数据处理设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
本申请还提供一种计算机可读存储介质,该计算机可读存储介质可以为非易失性计算机可读存储介质,该计算机可读存储介质也可以为易失性计算机可读存储介质,所述计算机可读存储介质中存储有指令,当所述指令在计算机上运行时,使得计算机执行所述基于AR眼镜的工业空调控制通讯方法的步骤。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(remd-omly nenory,RON)、随机存取存储器(rmmdon mccess nenory,RMN)、磁碟或者光盘等各种可以存储程序代码的介质。
在本申请所提供的实施例中,应该理解到,所揭露的方法,在没有超过本申请的精神和范围内,可以通过其他的方式实现。当前的实施例只是一种示范性的例子,不应该作为限制,所给出的具体内容不应该限制本申请的目的。例如,一些特征可以忽略,或不执行。
本申请方案所公开的技术手段不仅限于上述实施方式所公开的技术手段,还包括由以上技术特征任意组合所组成的技术方案。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本申请的保护范围。
以上对本申请实施例所提供的一种基于AR眼镜的工业空调控制通讯方法、系统及存储介质进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (14)

1.一种基于AR眼镜的工业空调控制通讯方法,其特征在于,所述方法应用于工业空调控制通讯系统,所述工业空调控制通讯系统包括工业空调与增强现实AR眼镜,所述工业空调具有控制局域网络CAN通讯功能与网络接入功能,所述工业空调配置有产品应用方的CAN通讯协议;所述AR眼镜用于展示所述工业空调的运行数据,以及操控所述工业空调的运行状态;所述工业空调配置的所述CAN通讯协议与不同产品应用方的要求协议具有对应关系,所述对应关系为所述控制通讯系统的特征,所述方法包括:S100:设计CAN配置后台界面及所述工业空调数据显示操作交互界面模型,通过游戏引擎软件搭建虚拟场景并连接云端服务器,将构建完整的虚拟场景导入至所述AR眼镜中,并全息展示于现实空间里;S200:通过所述AR眼镜的手势识别和语音识别功能实现人机交互,所述人机交互的内容包括所述CAN配置后台参数和所述工业空调数据;S300:搭建CAN整合解析模块;S400:将所述工业空调的CAN整合解析模块与服务器联通;S500:将上位机与所述工业空调的CAN整合解析模块联通;
所述S200还包括:S210:搭建一个具有权限登录的虚拟场景,并为所述虚拟场景的组件添加响应事件,当用户通过人机交互触发所述响应事件时,所述AR眼镜响应并通过服务器下发所设定的权限指令,其中,不同权限对应不同的CAN配置后台和所述工业空调数据显示操作策略;其中,权限登录对象包括三种:测试工程师权限、产线工程师权限和普通用户权限,其中,权限大小为所述测试工程师权限大于所述产线工程师权限大于所述普通用户权限;
所述人机交互触发所述响应事件的方式包括:虚拟按键点击、虚拟键盘输入、语音识别、视线跟随、移动、旋转、缩放,所述权限登录的虚拟场景包括应用对象用户名及密码输入、确认登录、AR眼镜用户名及密码存储。
2.根据权利要求1所述的方法,其特征在于,所述S300还包括:S310:搭建CAN驱动层,根据CAN参数配置后台所配置的接收帧与发送帧的帧ID以及帧格式,分别确认需要接收的CAN报文与需要发送的CAN报文,并执行对应的收发操作;所述CAN驱动层用于按照CAN配置后台所配置的发送帧格式对待发送的CAN数据进行封装,发送帧的格式包括标准帧格式和扩展帧格式;S320:搭建CAN逻辑处理层,根据CAN参数配置后台所配置的发送帧规则,对所述CAN驱动层接收的CAN报文解析成具体的数据;根据CAN参数配置后台所配置的发送帧规则,对CAN应用层需发送的数据封装成完整的CAN报文;S330:搭建所述CAN应用层,针对所述CAN逻辑处理器解析后的接收帧报文数据由外部逻辑调用以操作应用,将需发送的工业空调的数据上传至所述CAN逻辑处理层封装成发送帧报文。
3.根据权利要求2所述的方法,其特征在于,所述S320中的CAN逻辑处理层,用于根据CAN参数配置后台所配置的参数规则,发送帧需整合的数据包括数字量数据、模拟量数据以及闲置数据这三种类型,接收帧需解析的数据包括数字量数据和模拟量数据这两种数据类型。
4.根据权利要求3所述的方法,其特征在于,所述数字量数据至少包括所述工业空调的模式状态、开关状态以及相关部件的开关状态,所述模拟量数据至少包括所述工业空调的温度大小、高低压传感器数值及相关部件运行数据。
5.根据权利要求2所述的方法,其特征在于,所述发送和接收共用一个缓存区,所述CAN驱动层传入所述缓存区指针并在所述缓存区内进行操作。
6.根据权利要求2所述的方法,其特征在于,所述CAN整合解析模块提供生命计数和通讯错误状态接口,以供所述工业空调判断当前的CAN通讯状态。
7.根据权利要求1所述的方法,其特征在于,所述S400中,所述工业空调的CAN整合解析模块与服务器联通的方式包括:S410:所述工业空调的CAN整合解析模块将运行数据通过网络传输至服务器,通过所述服务器将所述运行数据通过网络实时反馈至所述AR眼镜,以使得所述工业空调数据显示操作交互界面中的数据通过所述AR眼镜呈现出来;S420:所述AR眼镜通过手势识别和语音识别在所述工业空调数据显示操作交互界面上将操作指令通过网络传输至所述服务器,通过所述服务器将操作指令通过网络反馈给所述工业空调的CAN整合解析模块,从而控制所述工业空调执行相应的操作指令。
8.根据权利要求1所述的方法,其特征在于,所述S200中,所述CAN参数配置后台内容包括通用配置参数以及特定帧配置参数,其中,搭建CAN参数配置后台虚拟场景时,为特定帧配置参数项添加可扩展数目属性,能够自由增减CAN报文帧对象。
9.根据权利要求8所述的方法,其特征在于,所述通用配置参数包括波特率和通讯超时时间,所述特定帧配置参数包括帧ID、帧格式、帧类型、数字量配置规则、模拟量配置规则及闲置数据配置规则。
10.根据权利要求9所述的方法,其特征在于,所述数字量配置规则、所述模拟量配置规则及所述闲置数据配置规则,均需要根据应用方的通信协议要求定义指定数据存放的字节位置、所占大小以及开始位。
11.根据权利要求1所述的方法,其特征在于,所述方法还包括:对S200中的人机交互在CAN参数配置后台上进行配置,其中,根据应用对象的不同包括如下三种配置方式:若所述应用对象为所述产线工程师,当操作配置大批量产线工业空调时,根据应用方的通信协议要求在CAN参数配置后台上进行相应配置,配置完成后导出CAN配置数据包,并将所述CAN配置数据包上传至云端服务器存储,通过服务器网络传输至指定地址,所述产线工程师直接从所述指定地址中提取所述CAN配置数据包,并将所述CAN配置数据包批量烧入所述大批量产线工业空调中,以实现批量配置所述大批量产线工业空调的CAN通讯协议;若所述应用对象为所述测试工程师,当查看和配置所述工业空调的CAN参数配置后台时,根据测试要求在所述CAN参数配置后台上进行相应配置,所述测试工程师没有导出所述CAN配置数据包操作的权限;若所述应用对象为所述普通用户,则没有导出所述CAN配置数据包操作的权限,以及查看和操作所述工业空调的CAN参数配置后台权限。
12.根据权利要求1所述的方法,其特征在于,所述方法还包括:对S200中工业空调数据进行显示与操作控制,其中,根据应用对象的不同包括如下三种显示与操作控制的方式:若所述应用对象为所述产线工程师,则数据显示至少包括所述工业空调的问题、各高低压传感器数值以及各部件运行状态,所述操作控制至少包括所述工业空调的开启与关闭、温度控制、空调运行模式控制以及各运行部件的单独控制;若所述应用对象为所述测试工程师,则数据显示与操作控制的权限最大,所述数据显示包括展示所有所述工业空调通过服务器上传的数据,所述操作控制包括所述工业空调开放的所有控制功能;若所述应用对象为所述普通用户,则数据显示只包括所述工业空调温度、空调当前运行模式状态、所述操作控制只包括所述工业空调的开启与关闭、温度控制与所述工业空调运行模式的控制。
13.一种基于AR眼镜的工业空调控制通讯系统,其特征在于,所述系统包括:工业空调与增强现实AR眼镜,所述工业空调具有控制局域网络CAN通讯功能与网络接入功能,所述工业空调配置有产品应用方的CAN通讯协议;所述AR眼镜用于展示所述工业空调的运行数据,以及操控所述工业空调的运行状态;所述工业空调配置的所述CAN通讯协议与不同产品应用方的要求协议具有对应关系,所述AR眼镜的工业空调控制通讯系统用于执行权利要求1至12中任意一项所述的基于AR眼镜的工业空调控制通讯方法。
14.一种非易失性计算机可读存储介质,其特征在于,所述非易失性计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个或多个处理器执行时,可使得所述一个或多个处理器执行权利要求1至12中任一项所述的基于AR眼镜的工业空调控制通讯方法。
CN202110911367.9A 2021-08-10 2021-08-10 基于ar眼镜的工业空调控制通讯方法、系统及存储介质 Active CN113741687B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110911367.9A CN113741687B (zh) 2021-08-10 2021-08-10 基于ar眼镜的工业空调控制通讯方法、系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110911367.9A CN113741687B (zh) 2021-08-10 2021-08-10 基于ar眼镜的工业空调控制通讯方法、系统及存储介质

Publications (2)

Publication Number Publication Date
CN113741687A CN113741687A (zh) 2021-12-03
CN113741687B true CN113741687B (zh) 2023-05-23

Family

ID=78730459

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110911367.9A Active CN113741687B (zh) 2021-08-10 2021-08-10 基于ar眼镜的工业空调控制通讯方法、系统及存储介质

Country Status (1)

Country Link
CN (1) CN113741687B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115033503B (zh) * 2022-05-24 2024-04-12 南京航空航天大学 一种基于增强现实的设备控制方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015125066A1 (en) * 2014-02-19 2015-08-27 Fieldbit Ltd. System and method for facilitating equipment maintenance using smartglasses
CN104595974B (zh) * 2014-12-31 2017-05-10 广东美的制冷设备有限公司 空调器、服务器及空调系统
CN104468630A (zh) * 2014-12-31 2015-03-25 北京海尔广科数字技术有限公司 智能家电的访问控制方法及装置
CN106997235B (zh) * 2016-01-25 2018-07-13 亮风台(上海)信息科技有限公司 用于实现增强现实交互和展示的方法、设备
CN107181654B (zh) * 2017-06-30 2020-01-17 珠海格力电器股份有限公司 控制局域网络can通讯方法和系统及空调系统
CN107680165B (zh) * 2017-09-25 2021-01-26 中国电子科技集团公司第二十八研究所 基于HoloLens的电脑操作台全息展现与自然交互应用方法
US11986963B2 (en) * 2018-03-05 2024-05-21 The Regents Of The University Of Colorado Augmented reality coordination of human-robot interaction
CN109059200A (zh) * 2018-06-27 2018-12-21 珠海格力电器股份有限公司 基于ar的空调集中控制系统及其控制方法
CN111240473A (zh) * 2020-01-02 2020-06-05 江西方兴科技有限公司 基于ar技术的高速公路机电设备人机交互系统及方法

Also Published As

Publication number Publication date
CN113741687A (zh) 2021-12-03

Similar Documents

Publication Publication Date Title
CN103116302B (zh) 定制告警呈现的系统和方法
CN109327551B (zh) 将物联网设备接入物联网平台的方法及装置、服务器
CN105045970B (zh) 基于Unity动态生成三维场景的仿真系统及其实现方法
US8898633B2 (en) Devices, systems, and methods for configuring a programmable logic controller
US10198422B2 (en) Information-processing equipment based on a spreadsheet
US20180061269A1 (en) Control and safety system maintenance training simulator
EP2530547A2 (en) Systems and methods of extracting, storing, and serving device definition file information
US20150156285A1 (en) Message tunneling in industrial networks
CN102809948B (zh) 用于块实例化的系统和方法
CN105082540A (zh) 一种通过3d切片装置控制3d打印机的方法
CN113741687B (zh) 基于ar眼镜的工业空调控制通讯方法、系统及存储介质
CN104503896A (zh) 用于批设备调试和解调试的系统和方法
CN101867505A (zh) 一种网络仿真方法和装置
CN108247632A (zh) 一种基于ros的协作机器人控制系统
CN103905410A (zh) 一种将自定义协议转换成Modbus协议的多路通讯协议转换器
WO2015066228A2 (en) Data capture on a serial device
CN114978925B (zh) 一种物模型创建方法及系统
CN108293199A (zh) 提供事件管理服务的电子装置和方法
CN106448422A (zh) 基于vr装置的机器人培训系统及培训方法
CN111402234B (zh) 一种机器视觉检测系统
CN108540516B (zh) 一种运行状态信息获取方法、控制终端、网络设备及系统
CN107407923A (zh) Plc控制数据生成装置、plc控制数据生成方法、以及plc控制数据生成程序
US9628341B2 (en) Incorporating FDT/DTM technology into a native control system monitoring application
CN113436320B (zh) 基于ifc模型文件的3d模型生成系统及方法
CN112947752B (zh) 一种基于智能设备的协同式人机交互控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant