CN115346413A - 一种基于虚实融合的装配指导方法及系统 - Google Patents
一种基于虚实融合的装配指导方法及系统 Download PDFInfo
- Publication number
- CN115346413A CN115346413A CN202210998276.8A CN202210998276A CN115346413A CN 115346413 A CN115346413 A CN 115346413A CN 202210998276 A CN202210998276 A CN 202210998276A CN 115346413 A CN115346413 A CN 115346413A
- Authority
- CN
- China
- Prior art keywords
- virtual
- real
- assembly
- data
- fusion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004927 fusion Effects 0.000 title claims abstract description 104
- 238000000034 method Methods 0.000 title claims abstract description 37
- 230000009471 action Effects 0.000 claims abstract description 7
- 230000033001 locomotion Effects 0.000 claims description 34
- 238000005516 engineering process Methods 0.000 claims description 19
- 239000011521 glass Substances 0.000 claims description 17
- 230000003190 augmentative effect Effects 0.000 claims description 7
- 230000008569 process Effects 0.000 abstract description 8
- 238000004088 simulation Methods 0.000 abstract description 3
- 238000005457 optimization Methods 0.000 abstract description 2
- 230000036544 posture Effects 0.000 description 18
- 238000012545 processing Methods 0.000 description 11
- 238000011156 evaluation Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000035479 physiological effects, processes and functions Effects 0.000 description 2
- 230000033764 rhythmic process Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 238000011900 installation process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
Abstract
本发明公开了一种基于虚实融合的装配指导方法及系统，属于人因工程装配仿真技术领域，方法包括：获取环境数据、虚拟物体数据、现实影像和虚拟场景；对环境数据和虚拟物体数据进行融合得到虚实融合数据，对现实影像和虚拟场景进行融合得到虚实融合影像；根据虚实融合数据和虚实融合影像对装配人员的装配状态和动作进行指导，直至完成装配；本发明通过上述技术方案能够将虚拟物体叠加至现实环境，以实现虚实融合，便于为装配人员的装配过程提供指导和反馈，最终能够给出不同位置零件组的最佳装配次序，减少了装配人员的装配次数，提高了组件的装配效率，实现对装配工艺质量的优化。
Description
技术领域
本发明涉及一种基于虚实融合的装配指导方法及系统，属于人因工程装配仿真技术领域。
背景技术
在实际的工业制造中，大量的技术产品设备需要人工进行装配，这些技术产品的结构普遍较为复杂，产品价格较为昂贵，而装配是按照一定的精度标准和技术要求，将一组零散的零件按合理的工艺流程连接起来，这就对装配人员的专业装配技能要求较高；在传统的装配教学和实践中，不是通过说明书进行学习，就是需要专业技术人员进行现场指导，这不仅需要配置大量的教学人员，而且还会受到装配的场地和设备数量、型号等因素的限制，装配人员即便在现场实习，也很难接触到装配部件的内部构造，造成学员对装配部件内部结构认知的难度大、效率低等问题。
发明内容
本发明的目的在于提供一种基于虚实融合的装配指导方法及系统，解决现有技术中装配难度大、效率低等问题。
为实现以上目的，本发明是采用下述技术方案实现的：
第一方面，本发明提供了一种基于虚实融合的装配指导方法，包括：
获取环境数据、虚拟物体数据、现实影像和虚拟场景；
对环境数据和虚拟物体数据进行融合得到虚实融合数据，对现实影像和虚拟场景进行融合得到虚实融合影像；
根据虚实融合数据和虚实融合影像对装配人员的装配状态和动作进行指导，直至完成装配。
结合第一方面，进一步的，所述环境数据和虚拟物体数据通过硬件设备采集得到；
所述硬件设备包括动作捕捉设备，用于记录装配人员在现实环境中的运动轨迹和人体姿态信息，从而绘制虚拟物体，获得虚拟物体数据；
所述硬件设备还包括环境采集设备，用于采集现实环境中的环境数据。
结合第一方面，进一步的，所述现实影像通过头戴式显示设备中的摄像装置采集得到；
所述虚拟场景通过以下方法得到：
头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，得到虚拟场景。
结合第一方面，进一步的，通过虚实融合技术对环境数据和虚拟物体数据进行虚实融合，将虚拟物体和现实环境融合起来，得到虚实融合数据；通过虚实融合技术对现实影像和虚拟场景进行虚实融合，得到虚实融合影像。
第二方面，本发明还提供了一种用于实现第一方面任一项所述方法的基于虚实融合的装配指导系统，包括动作捕捉设备、环境采集设备、头戴式显示设备和控制单元；
动作捕捉设备用于采集虚拟物体数据，环境采集设备用于采集环境数据，头戴式显示设备用于采集虚拟场景和现实影像；
控制单元用于将环境数据和虚拟物体数据进行融合得到虚实融合数据，将现实影像和虚拟场景进行融合得到虚实融合影像，并发送给头戴式显示设备；
装配人员在头戴式显示设备中显示的虚实融合影像和虚实融合数据的指导下完成装配。
结合第二方面，进一步的，所述动作捕捉设备记录装配人员在现实环境中的运动轨迹和人体姿态信息，从而绘制虚拟物体，获得虚拟物体数据。
结合第二方面，进一步的，所述头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，得到虚拟场景；
所述头戴式显示设备包括增强现实的AR眼镜和虚拟现实的VR眼镜，AR眼镜中的摄像装置拍摄现实环境中的现实影像。
结合第二方面，进一步的，所述控制单元通过虚实融合技术对环境数据和虚拟物体数据进行虚实融合，将虚拟物体和现实环境融合起来，得到虚实融合数据；通过虚实融合技术对现实影像和虚拟场景进行虚实融合，得到虚实融合影像。
结合第二方面，进一步的，还包括生理采集设备，用于实时采集装配人员的生理参数，并将生理参数传输给头戴式显示设备进行显示。
结合第二方面，进一步的，所述环境采集单元包括摄像头传感器，用于采集现实环境中的图像信息，从而得到环境数据。
与现有技术相比，本发明所达到的有益效果是：
本发明提供的一种基于虚实融合的装配指导方法及系统，通过将环境数据和虚拟物体数据进行融合得到虚实融合数据，将现实影像和虚拟场景进行融合得到虚实融合影像，能够将虚拟物体叠加至现实环境，以实现虚实融合，便于为装配人员的装配过程提供指导和反馈；通过虚拟仿真开发来融合虚拟装配和增强现实技术，并满足以装配的指导信息为基础，虚实融合影响和装配实物相一致，最终得到的系统能够实现针对装配过程中的零部件学习、实时指导；提出基于头戴式显示设备的人-机器人的协作装配方法，构建真人和虚拟机器的协作仿真环境，实现人和机器人之间的手眼交互；通过上述方案本发明最终能够给出不同位置零件组的最佳装配次序，减少了装配人员的装配次数，提高了组件的装配效率，实现对装配工艺质量的优化。
附图说明
图1是本发明实施例提供的一种基于虚实融合的装配指导方法的流程图之一；
图2是本发明实施例提供的一种基于虚实融合的装配指导系统的示意图；
图3是本发明实施例提供的一种基于虚实融合的装配指导方法的流程图之二。
具体实施方式
下面结合附图对本发明作进一步描述，以下实施例仅用于更加清楚地说明本发明的技术方案，而不能以此来限制本发明的保护范围。
实施例1
如图1所示，本发明实施例提供的一种基于虚实融合的装配指导方法，包括如下步骤：
S1、获取环境数据、虚拟物体数据、现实影像和虚拟场景。
通过环境采集设备采集现实环境中的环境数据，在本实施例中环境采集设备为摄像头传感器，用于采集现实环境中的图像信息，从而得到环境数据。
通过动作捕捉设备记录装配人员在现实环境中的运动轨迹和人体姿态信息，以获得在现实环境中的运动轨迹数据和人体姿态信息数据，用于基于上述的运动轨迹数据和人体姿态信息数据绘制虚拟物体，以获得实时绘制的虚拟物体数据。
通过头戴式显示设备中的摄像装置采集得到现实影像，头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，得到虚拟场景；头戴式显示设备包括增强现实的AR眼镜和虚拟现实的VR眼镜，摄像装置设置在AR眼镜中。
S2、对环境数据和虚拟物体数据进行融合得到虚实融合数据，对现实影像和虚拟场景进行融合得到虚实融合影像。
通过虚实融合技术对环境数据和虚拟物体数据进行虚实融合，将虚拟物体和现实环境融合起来，得到虚实融合数据；通过虚实融合技术对现实影像和虚拟场景进行虚实融合，得到虚实融合影像。
S3、根据虚实融合数据和虚实融合影像对装配人员的装配状态和动作进行指导，直至完成装配。
步骤S2中融合得到的虚实融合数据和虚实融合影像能够导入头戴式显示设备当中，在进行装配时，装配人员能够实时得到根据虚实融合数据和虚实融合影像给出的指导，完成装配。
实施例2
本发明实施例提供的一种用于实现实施例1所述方法的基于虚实融合的装配指导系统，包括动作捕捉设备、环境采集设备、头戴式显示设备、生理采集设备和控制单元。
动作捕捉设备，用于记录装配人员在现实环境中的运动轨迹和人体姿态信息，以获得在现实环境中的运动轨迹数据和人体姿态信息数据，用于基于上述的运动轨迹数据和人体姿态信息数据绘制虚拟物体，以获得实时绘制的虚拟物体数据；动作捕捉设备采集到虚拟物体数据后将其传输给控制单元进行虚实融合。
环境采集设备，用于采集现实环境中的环境数据，在本实施例中环境采集设备为摄像头传感器，用于采集现实环境中的图像信息，从而得到环境数据；环境采集设备采集到环境数据后将其传输给控制单元进行虚实融合。
头戴式显示设备包括增强现实的AR眼镜和虚拟现实的VR眼镜，在AR眼镜中还设置有摄像装置，摄像装置用于采集现实影像，头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，从而得到虚拟场景；头戴式显示设备在得到现实影像和虚拟场景后将其传输给控制单元进行虚实融合。
控制单元，通过虚实融合技术将环境数据和虚拟物体数据进行融合得到虚实融合数据，将现实影像和虚拟场景进行融合得到虚实融合影像，并发送给头戴式显示设备；装配人员在头戴式显示设备中显示的虚实融合影像和虚实融合数据的指导下完成装配。
生理采集设备用于采集装配人员的生理数据，包括进行心率监测和眼听视觉等参数的采集，用于实时获取装配人员的生理参数，以将其传输给头戴式显示设备，从而反馈给装配人员，用于装配人员对自身状况进行判断，从而对后续的操作和装配进行适当的安排，便于装配人员掌握装配节奏。
实施例3
如图2所示，本发明实施例提供的一种用于实现实施例1所述方法的基于虚实融合的装配指导系统，包括硬件、数据库和评估与处理模块。
硬件包括动作捕捉设备、环境采集设备、头戴式显示设备和生理采集设备，头戴式显示设备包括增强现实的AR眼镜和虚拟现实的VR眼镜。
动作捕捉设备，用于记录装配人员在现实环境中的运动轨迹和人体姿态信息，以获得在现实环境中的运动轨迹数据和人体姿态信息数据，用于基于上述的运动轨迹数据和人体姿态信息数据绘制虚拟物体，以获得实时绘制的虚拟物体数据；动作捕捉设备采集到虚拟物体数据后将其传输给控制单元进行虚实融合。
环境采集设备，用于采集现实环境中的环境数据，在本实施例中环境采集设备为摄像头传感器，用于采集现实环境中的图像信息，从而得到环境数据；环境采集设备采集到环境数据后将其传输给控制单元进行虚实融合。
头戴式显示设备包括增强现实的AR眼镜和虚拟现实的VR眼镜，在AR眼镜中还设置有摄像装置，摄像装置用于采集现实影像，头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，从而得到虚拟场景；头戴式显示设备在得到现实影像和虚拟场景后将其传输给控制单元进行虚实融合。
生理采集设备用于采集装配人员的生理数据，包括进行心率监测和眼听视觉等参数的采集，用于实时获取装配人员的生理参数，以将其传输给头戴式显示设备，从而反馈给装配人员，用于装配人员对自身状况进行判断，从而对后续的操作和装配进行适当的安排，便于装配人员掌握装配节奏；生理采集设备还用于进行采集数据的初始化，用于设备连接、姿态校准和动作捕捉工作。
数据库包括场景、工具、设备、操作序列和工装序列，硬件中采集到的当前姿态和作业任务参数，将会导入到数据库当中，用于为系统提供环境模型、工装模型以及装配信息的导入接口，数据导入上述模型后对数据进行轻量化设置，并用于进行增强现实场景展示、人员操控反馈工作。
评估与处理模块包括人体姿态评估单元、位置记录处理单元和数据存储处理单元。
人体姿态评估单元用于对装配人员的姿态进行规划和反馈，在本实施例中，人体姿态评估单元采用自由惯性测量单元、视觉里程计和视觉惯性里程计所组成的群组中的任一种或几种的组合。
位置记录处理单元采用同时定位与地图构建技术，装配人员在室内环境下不断移动时，通过增强现实获取不同角度一系列连续的深度图，不断进行迭代，整合并精确建立环境模型。
数据存储处理单元用于将来自环境采集单元的环境数据和来自动作捕捉设备的虚拟物体数据进行虚实融合，将虚拟物体数据和现实环境融合起来，得到虚实融合数据；还用于将来自头戴式显示设备的现实影像和虚拟场景进行虚实融合，得到虚实融合影像；并将虚实融合数据和虚实融合影像导入到头戴式显示设备中，对装配人员目前的装配状态和动作进行反馈和指导。
采用虚实融合的虚拟装配技术，能够有效地克服传统装配教学中硬件资源的限制问题，降低培训投入的成本，提高装配人员的学习效率；同时，通过在现实安装过程中指导装配活动的进行，可以提高产品装配的质量和效率。
基于虚实融合的虚拟装配系统可以有效地解决传统虚拟装配系统中存在的问题，使用户在观察到虚拟部件的同时获取现实装配环境中的信息；在系统运行时，仅需要渲染虚拟装配模型，可以大大的节省实体建模的工作量以及系统运行的资源消耗；另一方面，虚实融合的虚拟装配系统在提高装配感知度的同时，可以大大提高产品的设计者和装配人员的工作热情和工作效率，提高企业的竞争力。
实施例4
实施例3所述的系统也能够用于实施图3所示的一种基于虚实融合的装配指导方法，包括如下步骤：
步骤一：基于三维建模构建虚拟场景，包括装配人员和装配场景（及实施例1至3中所述的现实环境）以及装配维修的场景，然后将零件模型载入到虚拟场景中。
步骤二：通过web端计算机本地数据库动态加载零件模型并布局到三维建模中的虚拟场景；装配人员穿戴上头戴式现实设备和动作捕捉设备，头戴式现实设备和动作捕捉设备连接到搭建好的三维建模虚拟场景里，身临其境的置入该虚拟场景中，进行装配维修操作；同时穿戴生理采集设备，实时采集人体在该维修工作中的心率、眼动视听觉等生理参数，并将其传输给头戴式显示设备进行反馈。
步骤三：利用UDP通信将采集到的生理参数以及虚拟场景的布局参数实时导入web端数据库，进行评估分析，进而得到最合适的工作环境的空间布局方案。
步骤四：用鼠标选择装配零件，系统自动识别装配约束，如果存在装配约束，在约束作用下进行装配操作，否则用户利用鼠标等外部设备控制零件模型靠近目标，进行碰撞检测，系统根据碰撞结构与数据库中装配约束进行比较，若存在装配约束，在约束作用下进行装配。
步骤五：评估与处理模块对采集来自硬件和数据库的数据进行分析处理，以将所处理后的数据反馈到头戴式显示设备中，供操作人员进行分析和装配。
步骤六：经步骤一、步骤二、步骤三、步骤四、步骤五得到的结论等，通过分类加权，不仅考虑了每个评价指标各自对装配效率的影响，也考虑了各个指标间相互关系的影响。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质（包括但不限于磁盘存储器、CD-ROM、光学存储器等）上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备（系统）、和计算机程序产品的流程图和／或方框图来描述的。应理解可由计算机程序指令实现流程图和／或方框图中的每一流程和／或方框、以及流程图和／或方框图中的流程和／或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和／或方框图一个方框或多个方框中指定的功能的步骤。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明技术原理的前提下，还可以做出若干改进和变形，这些改进和变形也应视为本发明的保护范围。
Claims (10)
1.一种基于虚实融合的装配指导方法，其特征在于，包括：
获取环境数据、虚拟物体数据、现实影像和虚拟场景；
对环境数据和虚拟物体数据进行融合得到虚实融合数据，对现实影像和虚拟场景进行融合得到虚实融合影像；
根据虚实融合数据和虚实融合影像对装配人员的装配状态和动作进行指导，直至完成装配。
2.根据权利要求1所述的一种基于虚实融合的装配指导方法，其特征在于，所述环境数据和虚拟物体数据通过硬件设备采集得到；
所述硬件设备包括动作捕捉设备，用于记录装配人员在现实环境中的运动轨迹和人体姿态信息，从而绘制虚拟物体，获得虚拟物体数据；
所述硬件设备还包括环境采集设备，用于采集现实环境中的环境数据。
3.根据权利要求1所述的一种基于虚实融合的装配指导方法，其特征在于，所述现实影像通过头戴式显示设备中的摄像装置采集得到；
所述虚拟场景通过以下方法得到：
头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，得到虚拟场景。
4.根据权利要求1所述的一种基于虚实融合的装配指导方法，其特征在于，通过虚实融合技术对环境数据和虚拟物体数据进行虚实融合，将虚拟物体和现实环境融合起来，得到虚实融合数据；通过虚实融合技术对现实影像和虚拟场景进行虚实融合，得到虚实融合影像。
5.一种用于实现权利要求1-4任一项所述方法的基于虚实融合的装配指导系统，其特征在于，包括动作捕捉设备、环境采集设备、头戴式显示设备和控制单元；
动作捕捉设备用于采集虚拟物体数据，环境采集设备用于采集环境数据，头戴式显示设备用于采集虚拟场景和现实影像；
控制单元用于将环境数据和虚拟物体数据进行融合得到虚实融合数据，将现实影像和虚拟场景进行融合得到虚实融合影像，并发送给头戴式显示设备；
装配人员在头戴式显示设备中显示的虚实融合影像和虚实融合数据的指导下完成装配。
6.根据权利要求5所述的一种基于虚实融合的装配指导系统，其特征在于，所述动作捕捉设备记录装配人员在现实环境中的运动轨迹和人体姿态信息，从而绘制虚拟物体，获得虚拟物体数据。
7.根据权利要求5所述的一种基于虚实融合的装配指导系统，其特征在于，所述头戴式显示设备对所述现实影像采用数字孪生技术复制生成原始虚拟场景，在原始虚拟场景中增加虚拟画面，得到虚拟场景；
所述头戴式显示设备包括增强现实的AR眼镜和虚拟现实的VR眼镜，AR眼镜中的摄像装置拍摄现实环境中的现实影像。
8.根据权利要求5所述的一种基于虚实融合的装配指导系统，其特征在于，所述控制单元通过虚实融合技术对环境数据和虚拟物体数据进行虚实融合，将虚拟物体和现实环境融合起来，得到虚实融合数据；通过虚实融合技术对现实影像和虚拟场景进行虚实融合，得到虚实融合影像。
9.根据权利要求5所述的一种基于虚实融合的装配指导系统，其特征在于，还包括生理采集设备，用于实时采集装配人员的生理参数，并将生理参数传输给头戴式显示设备进行显示。
10.根据权利要求5所述的一种基于虚实融合的装配指导系统，其特征在于，所述环境采集单元包括摄像头传感器，用于采集现实环境中的图像信息，从而得到环境数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210998276.8A CN115346413A (zh) | 2022-08-19 | 2022-08-19 | 一种基于虚实融合的装配指导方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202210998276.8A CN115346413A (zh) | 2022-08-19 | 2022-08-19 | 一种基于虚实融合的装配指导方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN115346413A true CN115346413A (zh) | 2022-11-15 |
Family
ID=83954308
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202210998276.8A Pending CN115346413A (zh) | 2022-08-19 | 2022-08-19 | 一种基于虚实融合的装配指导方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN115346413A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116778119A (zh) * | 2023-06-26 | 2023-09-19 | 中国信息通信研究院 | 基于增强现实的人机协同装配系统 |
| CN117173240A (zh) * | 2023-11-03 | 2023-12-05 | 天津信天电子科技有限公司 | 伺服控制驱动器的ar辅助装配方法、装置、设备及介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160125654A1 (en) * | 2013-05-22 | 2016-05-05 | Kawasaki Jukogyo Kabushiki Kaisha | Component assembly work support system and component assembly method |
| CN109859538A (zh) * | 2019-03-28 | 2019-06-07 | 中广核工程有限公司 | 一种基于混合现实的关键设备培训系统及方法 |
| CN111083391A (zh) * | 2018-10-19 | 2020-04-28 | 舜宇光学（浙江）研究院有限公司 | 虚实融合系统及其方法 |
| CN111438499A (zh) * | 2020-03-30 | 2020-07-24 | 华南理工大学 | 一种基于5g+工业ar的使用无约束力反馈的装配方法 |
| CN112346572A (zh) * | 2020-11-11 | 2021-02-09 | 南京梦宇三维技术有限公司 | 一种虚实融合实现方法、系统和电子设备 |
| CN113936122A (zh) * | 2021-10-18 | 2022-01-14 | 中国人民解放军国防科技大学 | 一种虚实融合维修性试验场景构建方法、装置和设备 |
| CN114332421A (zh) * | 2021-12-29 | 2022-04-12 | 中国电子科技集团公司第三十八研究所 | 一种考虑人因的增强现实辅助装配系统 |
-
2022
- 2022-08-19 CN CN202210998276.8A patent/CN115346413A/zh active Pending
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20160125654A1 (en) * | 2013-05-22 | 2016-05-05 | Kawasaki Jukogyo Kabushiki Kaisha | Component assembly work support system and component assembly method |
| CN111083391A (zh) * | 2018-10-19 | 2020-04-28 | 舜宇光学（浙江）研究院有限公司 | 虚实融合系统及其方法 |
| CN109859538A (zh) * | 2019-03-28 | 2019-06-07 | 中广核工程有限公司 | 一种基于混合现实的关键设备培训系统及方法 |
| CN111438499A (zh) * | 2020-03-30 | 2020-07-24 | 华南理工大学 | 一种基于5g+工业ar的使用无约束力反馈的装配方法 |
| CN112346572A (zh) * | 2020-11-11 | 2021-02-09 | 南京梦宇三维技术有限公司 | 一种虚实融合实现方法、系统和电子设备 |
| CN113936122A (zh) * | 2021-10-18 | 2022-01-14 | 中国人民解放军国防科技大学 | 一种虚实融合维修性试验场景构建方法、装置和设备 |
| CN114332421A (zh) * | 2021-12-29 | 2022-04-12 | 中国电子科技集团公司第三十八研究所 | 一种考虑人因的增强现实辅助装配系统 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116778119A (zh) * | 2023-06-26 | 2023-09-19 | 中国信息通信研究院 | 基于增强现实的人机协同装配系统 |
| CN116778119B (zh) * | 2023-06-26 | 2024-03-12 | 中国信息通信研究院 | 基于增强现实的人机协同装配系统 |
| CN117173240A (zh) * | 2023-11-03 | 2023-12-05 | 天津信天电子科技有限公司 | 伺服控制驱动器的ar辅助装配方法、装置、设备及介质 |
| CN117173240B (zh) * | 2023-11-03 | 2024-02-06 | 天津信天电子科技有限公司 | 伺服控制驱动器的ar辅助装配方法、装置、设备及介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106340217B (zh) | 基于增强现实技术的制造装备智能系统及其实现方法 | |
| US11440179B2 (en) | System and method for robot teaching based on RGB-D images and teach pendant | |
| CN115346413A (zh) | 一种基于虚实融合的装配指导方法及系统 | |
| CN105665970B (zh) | 用于焊接机器人的路径点自动生成系统和方法 | |
| CN111633644A (zh) | 一种结合智能视觉的工业机器人数字孪生系统及其运行方法 | |
| CN110047150A (zh) | 一种基于增强现实的复杂设备操作运行在位仿真系统 | |
| CN109352658A (zh) | 工业机器人定位操控方法、系统及计算机可读存储介质 | |
| CN107656505A (zh) | 使用增强现实设备控制人机协作的方法、装置和系统 | |
| CN106530293A (zh) | 手工装配视觉检测防错方法及系统 | |
| KR102001214B1 (ko) | 가상 현실 기반 양팔로봇 교시 장치 및 방법 | |
| CN106548675A (zh) | 虚拟军事训练方法及装置 | |
| CN110065068A (zh) | 一种基于逆向工程的机器人装配作业演示编程方法及装置 | |
| CN108596148A (zh) | 一种基于计算机视觉的建筑工人劳动状态分析系统及方法 | |
| CN115390677B (zh) | 一种基于虚拟现实的装配仿真人机工效评价系统及方法 | |
| CN109591013A (zh) | 一种柔性装配仿真系统及其实现方法 | |
| CN110977981A (zh) | 一种机器人虚拟现实同步系统及同步方法 | |
| CN105500370A (zh) | 一种基于体感技术的机器人离线示教编程系统及方法 | |
| CN107577159A (zh) | 扩增实境仿真系统 | |
| CN116386414A (zh) | 一种基于数字镜影的人机工效学调整线训练系统及方法 | |
| CN110142769B (zh) | 基于人体姿态识别的ros平台在线机械臂示教系统 | |
| CN115100563A (zh) | 一种基于视频分析的生产过程交互与监测智能场景 | |
| EP3637330B1 (en) | Content creation system | |
| CN109213306A (zh) | 一种机器人远程控制平台及其设计方法 | |
| CN112085223A (zh) | 一种用于机械维修的诱导系统及方法 | |
| CN107391710B (zh) | 机器操作监督系统及服务器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |