CN113220121B - 一种基于投影显示的ar紧固件辅助装配系统及方法 - Google Patents

一种基于投影显示的ar紧固件辅助装配系统及方法 Download PDF

Info

Publication number
CN113220121B
CN113220121B CN202110487087.XA CN202110487087A CN113220121B CN 113220121 B CN113220121 B CN 113220121B CN 202110487087 A CN202110487087 A CN 202110487087A CN 113220121 B CN113220121 B CN 113220121B
Authority
CN
China
Prior art keywords
assembly
fastener
module
guide
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110487087.XA
Other languages
English (en)
Other versions
CN113220121A (zh
Inventor
王淑侠
韩澍
何卫平
康晶晶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northwestern Polytechnical University
Original Assignee
Northwestern Polytechnical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northwestern Polytechnical University filed Critical Northwestern Polytechnical University
Priority to CN202110487087.XA priority Critical patent/CN113220121B/zh
Publication of CN113220121A publication Critical patent/CN113220121A/zh
Application granted granted Critical
Publication of CN113220121B publication Critical patent/CN113220121B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/04Manufacturing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Computer Interaction (AREA)
  • Manufacturing & Machinery (AREA)
  • General Health & Medical Sciences (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • Computer Hardware Design (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)
  • General Factory Administration (AREA)

Abstract

本发明公开了一种基于投影显示的AR紧固件辅助装配系统及方法,包括工艺数据库模块、AR智能引导模块、装配检测模块和集成控制模块;将抽象的装配指导工艺以AR可视化的方式投影在装配操作现场,并对装配结果予以实时检测反馈,降低作业人员认知负担,提高装配效率,降低装配错误率。本发明通过投影显示的AR技术将复杂抽象的紧固件装配工艺信息进行AR可视化,无缝融合于物理装配场景,简明直观地呈现于操作者眼前,降低了对装配操作者的研读工艺的认知水平和经验判断能力的要求。

Description

一种基于投影显示的AR紧固件辅助装配系统及方法
技术领域
本发明属于AR技术领域,具体涉及一种AR紧固件辅助装配系统及方法。
背景技术
增强现实技术(AR)是一项将真实世界与虚拟世界“无缝”集成融合的新兴技术。在智能制造系统中,增强现实技术提供了人、机、物融合共通的交互方式,打破了虚拟物体和现实环境的边界,人与制造系统融为一体。在制造业中,增强现实技术由于其具有虚实结合的独特性,特别是在复杂产品的辅助装配领域有着明显的优势和广阔的应用前景。
在高端装备制造产业中,装配环节是产品生命周期的重要组成部分,关系到产品的质量、成本和性能。特别是在航空航天制造领域,产品装配具有多品种、变批量的特点,人工装配操作仍占据重要地位。现阶段的产品装配工艺趋于分支多样化、密集化,不同零部件的数量与装配要求差异巨大,装配位置空间狭小,操作工况复杂,而且产品的零部件数量、种类繁多,装配件之间协调关系复杂,质量要求高,对装配操作人员的工艺理解水平和操作熟练程度有着较高要求。
AR技术的在人工辅助装配领域的应用,解决了装配步骤繁琐、装配工艺可视化程度低的问题,这对于提高整个产品的质量,缩短制造时间具有重要意义。但是,现阶段基于AR的辅助装配,大多是针对单个零件的装配引导指示,局限于固定操作规程,辅助引导的目的大多侧重于特征指示、路径规划、装配位姿等装配过程,这种按步引导的方式适用于装配过程中相同零件数量较少,结构复杂、约束较多,装配先后顺序要求严格的特定零部件装配,不适用于紧固件的批量引导装配。紧固件的装配工艺操作流程相对简单,要求将同一装配工序中将相同型号的紧固件正确、高效地装配至对应位置,装配过程一般以零件组为单位,相同型号紧固件具有完全互换性,因而对零件装配的路径、顺序没有严格要求,针对这种情况的辅助装配的目的应侧重于装配结果,防止紧固件的错装漏装,提高装配效率。
增强现实技术在紧固件辅助装配领域的应用,大大提高了装配工艺信息可视化水平,在真实的装配场景中融合叠加虚拟的数字图像形式的引导信息,降低装配人员对装配工艺的认知成本,简化操作与决策难度,提高装配作业人员的真实感和准确度,提高紧固件的装配效率和质量。
文献“申请公布号为CN109491497A中国发明专利”公开了一种基于增强现实技术的人工辅助装配应用系统,包括内容编辑子系统及实时引导子系统,将增强装配工艺以三维模型、图像的形式渲染在真实装配场景中,引导现场工人的装配操作,减少了认知记忆负担,提高装配效率。但是这种以装配过程为导向的AR引导方式,适用于相同零件数量较少、结构复杂、约束较多,装配先后顺序要求严格的产品装配场景,不适用于紧固件的批量装配引导。同一装配工步的紧固件具有完全互换性,没有严格的装配先后的顺序要求,是零件组为单位,而且该系统缺少检测反馈环节,造成装配工艺的不连续,影响作业效率。
发明内容
为了克服现有技术的不足,本发明提供了一种基于投影显示的AR紧固件辅助装配系统及方法,包括工艺数据库模块、AR智能引导模块、装配检测模块和集成控制模块;将抽象的装配指导工艺以AR可视化的方式投影在装配操作现场,并对装配结果予以实时检测反馈,降低作业人员认知负担,提高装配效率,降低装配错误率。本发明通过投影显示的AR技术将复杂抽象的紧固件装配工艺信息进行AR可视化,无缝融合于物理装配场景,简明直观地呈现于操作者眼前,降低了对装配操作者的研读工艺的认知水平和经验判断能力的要求。
本发明解决其技术问题所采用的技术方案如下:
一种基于投影显示的AR紧固件辅助装配系统,包括工艺数据库模块、AR智能引导模块、装配检测模块和集成控制模块;
所述工艺数据库模块包括计算机、工艺数据库和CAD系统,负责存储和管理装配工艺数据,能够扩展外部CAD系统以导入装配模型与工艺信息;
所述AR智能引导模块包括显示端计算机、数据投影仪和工业相机,实现虚实融合,将装配模型和工艺信息可视化呈现;
所述装配检测模块包括检测相机和图像处理单元,用于分析判断装配结果;
所述集成控制模块由服务器构成,对辅助装配系统的运行进行集成控制,负责与其他三个模块间的指令控制、通信传输,分析处理各模块单元的关联逻辑。
一种基于投影显示的AR紧固件辅助装配方法,包括如下步骤:
步骤1:建立辅助装配系统各模块间的客户端/服务器通信架构,工艺数据库模块和AR智能引导模块作为两个独立的客户端,集成控制模块和装配检测模块的图像处理单元集成在服务器端计算机上,服务器端和客户端采用基于TCP网络协议的Socket通信;在工艺数据库的计算机和显示端计算机安装虚拟现实渲染引擎Unity和软件开发环境VisualStudio;
步骤2:联合标定数据投影仪和工业相机组成的AR智能引导模块;首先,标定工业相机,求解工业相机的内部参数矩阵和外部参数矩阵;数据投影仪在同一标定板的空白位置投影棋盘格标定板,根据纸质标定板和投影标定板共平面的约束关系,求解数据投影仪的内部参数矩阵和外部参数矩阵,实现AR智能引导模块的标定;
步骤3:在工艺数据库的计算机中导入CAD装配模型库,在虚拟现实渲染引擎Unity中构建虚拟装配场景,将CAD装配模型库中的资源模型以OBJ或FBX格式导入其中;
步骤4:定义紧固件的装配工艺序列,将装配引导步骤及AR调用资源以XML文件进行保存,通过在XML文件的节点元素标签中保存紧固件的孔位、型号及引导资源信息,最后形成结构化XML工艺文件;
步骤5:按照装配工艺步骤,将相同工步的同型号紧固件分组包装,并通过QR码记录关联紧固件组的型号、数量、装配序列信息;
步骤6:基于客户端/服务器通信机制,服务器端调用数据库端的XML工艺文件,将加载的XML树形层级结构数据转化为编程语言的类,并完成类和对象的初始化,同时将其层级数据始化转化为字节码,向可视化端发送加载虚拟引导场景数据,调用CAD模型和引导标识,经服务器发送至投影可视化端,实现虚实融合、装配指导;
步骤7:装配操作人员扫描QR码读取紧固件组的基本信息,按照AR投影引导序列将对应紧固件组装配完成;
步骤8:检测相机采集紧固件装配现场图像,提取紧固件装配特征,定位装配紧固件孔位,并进行局部图像分割,与装配完成的紧固件模板进行特征匹配,从而判定装配状态,集成控制模块根据检测结果在对应的装配孔位进行装配操作反馈提示,直至当前序列的紧固件组全部装配完成。
本发明的有益效果如下:
本发明通过投影显示的AR技术将复杂抽象的紧固件装配工艺信息进行AR可视化,无缝融合于物理装配场景,简明直观地呈现于操作者眼前,降低了对装配操作者的研读工艺的认知水平和经验判断能力的要求,提高了紧固件的人工装配效率,降低了紧固件的装配错误率;通过对紧固件的分组包装,QR码关联信息,可以追踪紧固件装配流程,强化物料管理;通过AR技术和机器视觉技术将装配操作引导与装配结果检测两个阶段融合一体,提高辅助装配作业过程的连续性和一体化水平,提高了紧固件辅助装配的智能化水平。
附图说明
图1为本发明系统的功能模块框架图。
图2为本发明系统软件架构图。
图3为本发明存储紧固件引导信息的XML工艺文件节点结构图。
图4为本发明装配工艺数据传输流程图。
图5为本发明模型引导资源的传输流程图。
图6为本发明紧固件的辅助装配引导场景。
图7为本发明紧固件的装配检测反馈示意图。
具体实施方式
下面结合附图和实施例对本发明进一步说明。
针对大数量、多种类、易混淆的紧固件装配场景,本发明提供一种基于增强现实的紧固件辅助装配系统,将抽象的装配指导工艺以AR可视化的方式投影在装配操作现场,并对装配结果予以实时检测反馈,降低作业人员认知负担,提高装配效率,降低装配错误率。
如图1所示,一种基于投影显示的AR紧固件辅助装配系统,包括工艺数据库模块、AR智能引导模块、装配检测模块和集成控制模块;
所述工艺数据库模块包括计算机、工艺数据库和CAD系统,负责存储和管理装配工艺数据,能够扩展外部CAD系统以导入装配模型与工艺信息;
所述AR智能引导模块包括显示端计算机、数据投影仪和工业相机,实现虚实融合,将装配模型和工艺信息可视化呈现;
所述装配检测模块包括检测相机和图像处理单元,用于分析判断装配结果;
所述集成控制模块由服务器构成,对辅助装配系统的运行进行集成控制,负责与其他三个模块间的指令控制、通信传输,分析处理各模块单元的关联逻辑。
一种基于投影显示的AR紧固件辅助装配方法,包括如下步骤:
步骤1:如图2所示,建立辅助装配系统各模块间的客户端/服务器通信架构,工艺数据库模块和AR智能引导模块作为两个独立的客户端,集成控制模块和装配检测模块的图像处理单元集成在服务器端计算机上,服务器端和客户端采用基于TCP网络协议的Socket通信;在工艺数据库的计算机和显示端计算机安装虚拟现实渲染引擎Unity和软件开发环境Visual Studio;
步骤2:联合标定数据投影仪和工业相机组成的AR智能引导模块;首先,标定工业相机,求解工业相机的内部参数矩阵和外部参数矩阵;数据投影仪在同一标定板的空白位置投影棋盘格标定板,根据纸质标定板和投影标定板共平面的约束关系,求解数据投影仪的内部参数矩阵和外部参数矩阵,实现虚拟现实渲染引擎Unity中的虚拟场景坐标系、相机坐标系和投影坐标系的有机统一,完成AR智能引导模块的标定;
步骤3:在工艺数据库的计算机中导入CAD装配模型库,在虚拟现实渲染引擎Unity中构建虚拟装配场景,将CAD装配模型库中的资源模型以OBJ或FBX格式导入其中;
步骤4:定义紧固件的装配工艺序列,将装配引导步骤及AR调用资源以XML文件进行保存,通过在XML文件的节点元素标签中保存紧固件的孔位、型号及引导资源信息,最后形成如图3的结构化XML工艺文件,XML装配工艺数据传输流程如图4所示;
在系统搭建基于WampServer的传输环境,服务器访问数据库端,可视化端下载引导资源模型,完成FBX或OBJ格式的转换,以便于在虚拟现实引擎Unity中使用,最后在Unity的场景中创建可以在客户端中直接调用的Asset-bundle资源,发送至可视化端计算机,CAD模型等引导资源的传输流程如图5所示。
步骤5:按照装配工艺步骤,将相同工步的同型号紧固件分组包装,并通过QR码记录关联紧固件组的型号、数量、装配序列信息;
步骤6:基于客户端/服务器通信机制,服务器端调用数据库端的XML工艺文件,将加载的XML树形层级结构数据转化为编程语言的类,并完成类和对象的初始化,同时将其层级数据始化转化为字节码,向可视化端发送加载虚拟引导场景数据,调用CAD模型和引导标识,经服务器发送至投影可视化端,实现虚实融合、装配指导;
步骤7:服务器发出装配引导指令,可视化端投影仪按照装配工艺以紧固件包装组为单位序列在对应紧固件的装配孔位投影引导信息,操作人员完成装配,如图6所示,装配操作人员扫描QR码读取紧固件组的基本信息,按照AR投影引导序列将对应紧固件组装配完成;
步骤8:检测相机采集紧固件装配现场图像,提取紧固件装配特征,定位装配紧固件孔位,并进行局部图像分割,与装配完成的紧固件模板进行特征匹配,设定阈值,从而判定装配状态,集成控制模块根据检测结果在对应的装配孔位进行装配操作反馈提示,直至当前序列的紧固件组全部装配完成,将紧固件的检测结果通过可视化端的数据投影仪投射在装配场景中,对操作人员进行结果反馈,如图7所示。

Claims (2)

1.一种基于投影显示的AR紧固件辅助装配方法,其特征在于,包括如下步骤:
步骤1:建立辅助装配系统各模块间的客户端/服务器通信架构,工艺数据库模块和AR智能引导模块作为两个独立的客户端,集成控制模块和装配检测模块的图像处理单元集成在服务器端计算机上,服务器端和客户端采用基于TCP网络协议的Socket通信;在工艺数据库的计算机和显示端计算机安装虚拟现实渲染引擎Unity和软件开发环境Visual Studio;
步骤2:联合标定数据投影仪和工业相机组成的AR智能引导模块;首先,标定工业相机,求解工业相机的内部参数矩阵和外部参数矩阵;数据投影仪在同一标定板的空白位置投影棋盘格标定板,根据纸质标定板和投影标定板共平面的约束关系,求解数据投影仪的内部参数矩阵和外部参数矩阵,实现AR智能引导模块的标定;
步骤3:在工艺数据库的计算机中导入CAD装配模型库,在虚拟现实渲染引擎Unity中构建虚拟装配场景,将CAD装配模型库中的资源模型以OBJ或FBX格式导入其中;
步骤4:定义紧固件的装配工艺序列,将装配引导步骤及AR调用资源以XML文件进行保存,通过在XML文件的节点元素标签中保存紧固件的孔位、型号及引导资源信息,最后形成结构化XML工艺文件;
步骤5:按照装配工艺步骤,将相同工步的同型号紧固件分组包装,并通过QR码记录关联紧固件组的型号、数量、装配序列信息;
步骤6:基于客户端/服务器通信机制,服务器端调用数据库端的XML工艺文件,将加载的XML树形层级结构数据转化为编程语言的类,并完成类和对象的初始化,同时将其层级数据始化转化为字节码,向可视化端发送加载虚拟引导场景数据,调用CAD模型和引导标识,经服务器发送至投影可视化端,实现虚实融合、装配指导;
步骤7:装配操作人员扫描QR码读取紧固件组的基本信息,按照AR投影引导序列将对应紧固件组装配完成;
步骤8:检测相机采集紧固件装配现场图像,提取紧固件装配特征,定位装配紧固件孔位,并进行局部图像分割,与装配完成的紧固件模板进行特征匹配,从而判定装配状态,集成控制模块根据检测结果在对应的装配孔位进行装配操作反馈提示,直至当前序列的紧固件组全部装配完成。
2.一种采用如权利要求1所述装配方法的系统,其特征在于,包括工艺数据库模块、AR智能引导模块、装配检测模块和集成控制模块;
所述工艺数据库模块包括计算机、工艺数据库和CAD系统,负责存储和管理装配工艺数据,能够扩展外部CAD系统以导入装配模型与工艺信息;
所述AR智能引导模块包括显示端计算机、数据投影仪和工业相机,实现虚实融合,将装配模型和工艺信息可视化呈现;
所述装配检测模块包括检测相机和图像处理单元,用于分析判断装配结果;
所述集成控制模块由服务器构成,对辅助装配系统的运行进行集成控制,负责与其他三个模块间的指令控制、通信传输,分析处理各模块单元的关联逻辑。
CN202110487087.XA 2021-05-04 2021-05-04 一种基于投影显示的ar紧固件辅助装配系统及方法 Active CN113220121B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110487087.XA CN113220121B (zh) 2021-05-04 2021-05-04 一种基于投影显示的ar紧固件辅助装配系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110487087.XA CN113220121B (zh) 2021-05-04 2021-05-04 一种基于投影显示的ar紧固件辅助装配系统及方法

Publications (2)

Publication Number Publication Date
CN113220121A CN113220121A (zh) 2021-08-06
CN113220121B true CN113220121B (zh) 2023-05-09

Family

ID=77090760

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110487087.XA Active CN113220121B (zh) 2021-05-04 2021-05-04 一种基于投影显示的ar紧固件辅助装配系统及方法

Country Status (1)

Country Link
CN (1) CN113220121B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113673894B (zh) * 2021-08-27 2024-02-02 东华大学 一种基于数字孪生的多人协作ar装配方法和系统
CN113759860A (zh) * 2021-11-09 2021-12-07 北京胜能能源科技有限公司 一种可视化装配系统和装配方法、设备和介质

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110018742A (zh) * 2019-04-03 2019-07-16 北京八亿时空信息工程有限公司 一种网络虚拟旅游系统及其构建方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140176661A1 (en) * 2012-12-21 2014-06-26 G. Anthony Reina System and method for surgical telementoring and training with virtualized telestration and haptic holograms, including metadata tagging, encapsulation and saving multi-modal streaming medical imagery together with multi-dimensional [4-d] virtual mesh and multi-sensory annotation in standard file formats used for digital imaging and communications in medicine (dicom)
CN103473111A (zh) * 2013-08-16 2013-12-25 运软网络科技(上海)有限公司 一种仿脑计算虚拟化的方法和系统
CN107170050A (zh) * 2017-06-05 2017-09-15 北京寰和通创科技有限公司 物联图元的3d场景建立方法及系统
WO2020054905A1 (ko) * 2018-09-13 2020-03-19 주식회사 이엠아이티 스마트글라스를 활용한 증강현실 설비 조립 가이드 시스템
CN109491497A (zh) * 2018-10-19 2019-03-19 华中科技大学 一种基于增强现实技术的人工辅助装配应用系统
CN110238831B (zh) * 2019-07-23 2020-09-18 青岛理工大学 基于rgb-d图像及示教器的机器人示教系统及方法
CN111968228B (zh) * 2020-06-28 2021-11-05 成都飞机工业(集团)有限责任公司 一种基于航空装配的增强现实自定位方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110018742A (zh) * 2019-04-03 2019-07-16 北京八亿时空信息工程有限公司 一种网络虚拟旅游系统及其构建方法

Also Published As

Publication number Publication date
CN113220121A (zh) 2021-08-06

Similar Documents

Publication Publication Date Title
CN113220121B (zh) 一种基于投影显示的ar紧固件辅助装配系统及方法
US20210132583A1 (en) Management platform for digital twin workshop for automated assembly of circuit breakers
CN107220064B (zh) 一种数控系统界面组态开发方法
CN106846468B (zh) 一种基于ros系统的机械臂建模及运动规划实现方法
CN106843124A (zh) 一种自动化仓库三维实时监控方法和系统
CN113673894B (zh) 一种基于数字孪生的多人协作ar装配方法和系统
CN112949041B (zh) 一种基于数字孪生的自动化立体仓库构建方法
CN115877736B (zh) 基于数字孪生的多机器人协同作业仿真监控方法
Vyatkin et al. Formal modeling and verification in the software engineering framework of IEC 61499: a way to self-verifying systems
CN108399244B (zh) 用于核电厂风险监测技术的图形化组态管理系统和方法
CN110910193B (zh) 一种基于rpa技术的订单信息录入方法及其装置
CN113505054B (zh) 一种无人机控制站的网络数据静态测试系统和测试方法
Xie et al. A cloud service platform for the seamless integration of digital design and rapid prototyping manufacturing
CN112235316A (zh) 一种仪器集成的数据通信方法
CN115311416A (zh) 一种创建三维场景的方法
Sawada et al. Open controller architecture OSEC-II: architecture overview and prototype systems
CN115185508A (zh) 一种基于图元的算法组态工具和方法
CN115032914A (zh) 一种机器人智能仿真调试平台
CN111660294B (zh) 一种液压重载机械臂增强现实操控系统
CN112233208B (zh) 机器人状态处理方法、装置、计算设备和存储介质
CN115033503B (zh) 一种基于增强现实的设备控制方法
US20240103476A1 (en) Method and apparatus for modifying parameters of kinematic pairs and production line system
KR20200032596A (ko) 증강현실과 가상현실이 통합된 듀얼 리얼리티 환경에서 제조 서비스 정보 제공 방법 및 단말
CN113986431B (zh) 一种机器人自动生产线可视化调试方法及系统
CN115033997B (zh) 基于ar的建筑施工设计系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant