CN210222693U - 虚拟装配系统 - Google Patents
虚拟装配系统 Download PDFInfo
- Publication number
- CN210222693U CN210222693U CN201921514949.8U CN201921514949U CN210222693U CN 210222693 U CN210222693 U CN 210222693U CN 201921514949 U CN201921514949 U CN 201921514949U CN 210222693 U CN210222693 U CN 210222693U
- Authority
- CN
- China
- Prior art keywords
- virtual
- upper computer
- virtual assembly
- virtual reality
- picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000003238 somatosensory effect Effects 0.000 claims abstract description 19
- 230000009471 action Effects 0.000 claims abstract description 16
- 230000003993 interaction Effects 0.000 claims abstract description 14
- 230000000694 effects Effects 0.000 abstract description 3
- 238000000034 method Methods 0.000 description 13
- 238000012549 training Methods 0.000 description 11
- 230000008569 process Effects 0.000 description 10
- 238000004891 communication Methods 0.000 description 5
- 230000007613 environmental effect Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 3
- 230000002452 interceptive effect Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000004247 hand Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 210000000697 sensory organ Anatomy 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本实用新型涉及虚拟现实技术领域，提供了一种虚拟装配系统，包括：摄像机、上位机、虚拟现实显示设备、体感交互设备和3D显示屏；所述摄像机，与所述上位机连接，用于采集环境图像，并将所述环境图像传输至上位机；所述上位机，用于生成虚拟装配画面；所述虚拟现实显示设备，与所述上位机连接，用于显示所述虚拟装配画面和所述环境图像；所述体感交互设备，与所述上位机连接，用于采集操作指令和动作信息，并将所述操作指令和动作信息传输至所述上位机；所述3D显示屏，与所述上位机连接，用于显示所述上位机生成的虚拟装配画面。讲授教师在通过虚拟现实显示设备进行虚拟装配的讲授时，可以通过所述环境图像获取学员的听讲画面，提高讲授效果。
Description
技术领域
本实用新型属于虚拟现实技术领域，尤其涉及一种虚拟装配系统。
背景技术
随着我国现代化建设，虽然现在多大部分装配工作已经由机器来完成，但是在一些复杂的部件上依旧难以离开工人的亲自操作，但是从事这一领域的新人们大多缺乏工作经验，与安全知识，培训成本和人为失误造成的生产事故和机械损毁的花销巨大，具体表现为：在实际培训和教学中，不仅受时间和空间上的限制，教学的枯燥讲解还会降低学员学习的积极性；另外为了增加学员的参与性，会进行真实的拆装学习，因此在出现错误操作会带来潜在的安全隐患，而且对部分精确度要求较高的产品也会带来损害。随着对装配要求的不断提高，装配技术越来越成为一门核心技能，该技能不仅需要对各个装配零件的功能有充分理解，还要对装配各个环节有深刻认识，通过传统的培训方式在短时间内培养合格的人才成为一件非常困难的工作，因此发展出了基于虚拟现实的虚拟装配的培训方式。
目前在虚拟装配培训时，为了提高学习效率和降低培训的虚拟设备成本，主要培训模式为多个学员在培训教室中，通过裸眼3D显示屏幕观看学习讲授老师在虚拟环境中的虚拟装配过程。然而，讲授老师在虚拟装配的过程中，需要佩戴虚拟头盔进行虚拟装配操作，因此只能看到虚拟装配画面，不便与学员进行沟通。
实用新型内容
有鉴于此，本实用新型实施例提供了一种虚拟装配系统，以解决现有的虚拟装配培训过程中，讲授老师与学员沟通不便利的问题。
本实用新型实施例提供了一种虚拟装配系统，包括：
摄像机、上位机、虚拟现实显示设备、体感交互设备和3D显示屏；
所述摄像机，与所述上位机连接，用于采集环境图像，并将所述环境图像传输至上位机；
所述上位机，用于生成虚拟装配画面；
所述虚拟现实显示设备，与所述上位机连接，用于显示所述虚拟装配画面和所述环境图像；
所述体感交互设备，与所述上位机连接，用于采集操作指令和动作信息，并将所述操作指令和动作信息传输至所述上位机；
所述3D显示屏，与所述上位机连接，用于显示所述上位机生成的虚拟装配画面。
可选的，所述上位机包括通过unity3D引擎生成所述虚拟装配画面的计算机。
可选的，所述体感交互设备包括体感控制器和动作捕捉手套。
可选的，所述虚拟现实显示设备包括虚拟现实头戴式显示器。
可选的，所述3D显示屏通过高清多媒体接口与所述上位机连接。
可选的，所述摄像机通过通用串行总线与所述上位机连接。
可选的，所述动作捕捉手套为Noitom Hi5 VR数据手套，所述Noitom Hi5VR数据手套通过无线网络与所述上位机连接。
可选的，所述体感控制器为LeapMotion设备，所述LeapMotion设备通过通用串行总线与所述上位机连接。
可选的，所述虚拟现实显示设备为HTC Vive设备，所述HTC Vive设备通过通用串行总线或高清多媒体接口与所述上位机连接。
可选的，所述虚拟现实显示设备为Oculus Rift设备，所述Oculus Rift设备通过通用串行总线或高清多媒体接口与所述上位机连接。
本实用新型实施例的虚拟装配系统，体感交互设备采集讲授老师装配的操作指令和动作信息，并将所述操作指令和动作信息传输至所述上位机，上位机生成虚拟装配画面；摄像机采集教室中学员学习时的环境图像传输至上位机；学员可以通过观看3D显示屏上显示的虚拟装配画面，学习讲授老师进行虚拟装配时的装配过程。讲授老师通过佩戴虚拟现实显示设备，同时接收上位机生成的虚拟装配画面和摄像机采集的环境图像，从而在进行虚拟装配时，可以通过实时采集的环境图像获取到教室中学员听讲的画面，便于在虚拟装配过程中与学员进行交流沟通。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本实用新型实施例提供的虚拟装配系统的结构示意框图；
图2是本实用新型实施例提供的一个虚拟装配系统的设备连接和功能示意图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本申请的描述。
为了说明本申请所述的技术方案，下面通过具体实施例来进行说明。
图1是本发明实施例提供的虚拟装配系统的结构示意框图，参考图1，虚拟装配系统可以包括：摄像机100、上位机200、虚拟现实显示设备300、体感交互设备400和3D显示屏500。
所述摄像机100，与所述上位机200连接，用于采集环境图像，并将所述环境图像传输至上位机200。
所述上位机200，用于生成虚拟装配画面。
所述虚拟现实显示设备300，与所述上位机200连接，用于显示所述虚拟装配画面和所述环境图像。
所述体感交互设备400，与所述上位机连接200，用于采集操作指令和动作信息，并将所述操作指令和动作信息传输至所述上位机200。
所述3D显示屏500，与所述上位机200连接，用于显示所述上位机200生成的虚拟装配画面。
本实用新型实施例中，所述摄像机设置于培训教室中，用于实时采集环境图像，其中，所述环境图像包含教室中学员学习时的图像信息；例如，将所述摄像机设置在讲台的位置，朝向对面的学生。当然，实际应用中，所述摄像机的个数还可以大于1个，分别设置在不同的位置，用于采集教室不同区域的学生的画面，所述上位机装配有提供生成虚拟装配画面的软件，用于生成虚拟装配画面，其中，所述虚拟装配画面还原真实设备装配的真实场景，并根据所述上位机接收的操作指令和动作信息，实现零件的抓取和装配；所述虚拟现实显示设备由讲授教师佩戴，用于显示所述虚拟装配画面和所述环境图像；所述体感交互设备由讲授教师操作，用于采集讲授教师在虚拟装配时的操作指令和动作信息，并将所述操作指令和动作信息传输至所述上位机；所述3D显示屏为裸眼3D显示屏，学员可以观看3D显示屏上显示的虚拟装配画面，学习讲授老师进行虚拟装配时的装配过程。本实施例提供的虚拟装配系统，讲授老师通过佩戴虚拟现实显示设备，同时接收上位机生成的虚拟装配画面和摄像机采集的环境图像，从而在进行虚拟装配时，可以实时获取到教室中学员听讲的画面，便于在虚拟装配过程中与学员进行交流沟通。
图2是本实用新型实施例提供的虚拟装配系统的设备连接和功能示意图，其只是本实用新型众多实施例中的一种形式，仅供参考理解，而非对其限制。
一些实施例中，所述上位机包括通过unity3D引擎生成所述虚拟装配画面的计算机。
本实用新型实施例中，所述上位机可以是计算机；通过Unity3D引擎可以创建诸如三维视频游戏、建筑可视化、实时三维动画等类型互动内容的多平台的综合型开发工具，本实用新型实施例中，所述计算机通过unity3D引擎渲染生成所述虚拟装配画面，并通过添加C#脚本、模型坐标设置、刚体设置和碰撞体设置，根据讲授教师的操作指令和动作信息操对设备模型的完成拾取及安装。
一些实施例中，所述体感交互设备包括体感控制器和动作捕捉手套。
本实用新型实施例中，所述体感交互设备可以包括体感控制器和动作捕捉手套。所述体感控制器对讲授教师的真实运动状态进行识别、跟踪和量化，将讲授教师进行虚拟装配时的身体动作信息和运动轨迹映射至虚拟装配环境中，完成人机交互。所述动作捕捉手套是一种多模式的虚拟现实硬件，可进行虚拟装配环景中物体的抓取、移动、旋转等动作；本实用新型实施例中，讲授教师通过佩戴动作捕捉手套，利用它的多模式性，对虚拟装配环境中的待装配虚拟零件进行操作。讲授教师也可以通过控制所述体感控制器和所述动作捕捉手套的操作按钮，发送对虚拟装配进行回放、暂停、继续等控制过程的操作指令。
一些实施例中，所述虚拟现实显示设备包括虚拟现实头戴式显示器。
本实用新型实施例中，所述虚拟现实头戴式显示器向眼睛发送光学信号，可以实现虚拟现实(VR)、增强现实(AR)和混合现实(MR)等不同效果；本实用新型实施例中，讲授教师通过佩戴所述虚拟现实头戴式显示器，同时接收上位机生成的虚拟装配画面和摄像机采集的环境图像，从而在进行虚拟装配时，可以实时获取到教室中学员听讲的画面，便于在虚拟装配过程中与学员进行交流沟通。其中，同时接收上位机生成的虚拟装配画面和摄像机采集的环境图像的形式有很多种，举例说明，所述摄像机采集的环境图像可以直接由所述上位机通过unity3D引擎渲染至所述虚拟装配画面中作为虚拟装配的背景；或者通过画面分割器，将所述虚拟装配画面和所述环境图像进行分割显示，其中，将所述虚拟装配画面和所述环境图像进行分割显示时，所述虚拟画面可以是全屏显示，并将所述环境图像置于所述虚拟画面任意不影响虚拟装配操作的位置。
一些实施例中，所述3D显示屏通过高清多媒体接口与所述上位机连接。
本实用新型实施例中，所述3D显示屏通过高清多媒体接口与所述上位机连接。HDMI(High Definition Multimedia Interface，高清多媒体接口)是一种全数字化视频和声音发送接口，可以发送未压缩的音频及视频信号。HDMI可用于机顶盒、DVD播放机、个人计算机、电视游乐器、综合扩大机、数字音响和电视机等设备。HDMI可以同时发送音频和视频信号，由于音频和视频信号采用同一条线材，简化了系统线路的安装难度。本实用新型实施例中，所述3D显示屏通过HDMI接口与所述上位机连接，接收并显示所述上位机生成的虚拟装配画面，供学员观看学习。
一些实施例中，所述摄像机通过通用串行总线与所述上位机连接。
本实用新型实施例中，所述摄像机通过通用串行总线与所述上位机连接，USB(通用串行总线)具有传输速度快、使用方便、支持热插拔、连接灵活、独立供电等优点，适用于摄像机和所述上位机的连接，并传输环境图像信息。
一些实施例中，所述动作捕捉手套为Noitom Hi5 VR数据手套，所述Noitom Hi5VR数据手套通过无线网络与所述上位机连接。
本实用新型实施例中，所述动作捕捉手套为Noitom Hi5 VR数据手套，Noitom Hi5VR数据手套是一种VR手套，可以提供全手稳定的动作捕捉、提供腕部震动和触觉反馈并支持单手或双手的使用模式。所述Noitom Hi5 VR支持2.4G抗同频干扰的无线通信；通过无线网络与所述上位机连接，可以使讲授教师进行虚拟装配操作时更加方便。
一些实施例中，所述体感控制器为LeapMotion设备，所述LeapMotion设备通过通用串行总线与所述上位机连接。
本实用新型实施例中，所述LeapMotion设备可通过手势的方式，通用串行总线与所述上位机连接进行输入，对虚拟装配目标模型进行操控。
一些实施例中，所述虚拟现实显示设备为HTC Vive设备，所述HTC Vive设备通过通用串行总线或高清多媒体接口与所述上位机连接。
本实用新型实施例中，HTC Vive包括一个头戴式显示器、两个单手持控制器、一个能于空间内同时追踪显示器与控制器的定位系统，并采用了一块OLED(OrganicLight-Emitting Diode，有机电激光显示)屏幕，单眼有效分辨率为1200x 1080，双眼合并分辨率为2160x 1200。2K分辨率降低了画面的颗粒感，使得讲授教师在进行虚拟装配时几乎感觉不到纱门效应。HTC Vive支持通用串行总线和高清多媒体双接口，本实用新型实施例中，HTC Vive设备可以通过通用串行总线或高清多媒体接口与所述上位机连接。
一些实施例中，所述虚拟现实显示设备为Oculus Rift设备，所述Oculus Rift设备通过通用串行总线或高清多媒体接口与所述上位机连接。
本实用新型实施例中，所述虚拟现实显示设备为Oculus Rift设备，所述OculusRift设备通过通用串行总线或高清多媒体接口与所述上位机连接。Oculus Rift是一款虚拟现实显示器，能够使使用者身体感官中视觉的部分具有沉浸式的体验，使用者佩戴后，看到的是整个虚拟环境；Oculus Rift设备支持Unity 3D。本实用新型实施例中，使用OculusRift设备可以提升讲授教师进行虚拟装配时视觉感官上的真实性。
通过上述实用新型提供的实施例，学员可以通过观看3D显示屏上显示的虚拟装配画面，学习讲授老师进行虚拟装配时的装配过程。讲授老师通过佩戴虚拟现实显示设备，同时接收上位机生成的虚拟装配画面和摄像机采集的环境图像，从而在进行虚拟装配时，实时获取到教室中学员听讲的画面，解决现有的虚拟装配培训过程中与学员沟通不便利的问题。
以上所述实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。
Claims (10)
1.一种虚拟装配系统，其特征在于，包括：摄像机、上位机、虚拟现实显示设备、体感交互设备和3D显示屏；
所述摄像机，与所述上位机连接，用于采集环境图像，并将所述环境图像传输至上位机；
所述上位机，用于生成虚拟装配画面；
所述虚拟现实显示设备，与所述上位机连接，用于显示所述虚拟装配画面和所述环境图像；
所述体感交互设备，与所述上位机连接，用于采集操作指令和动作信息，并将所述操作指令和动作信息传输至所述上位机；
所述3D显示屏，与所述上位机连接，用于显示所述上位机生成的虚拟装配画面。
2.如权利要求1所述的虚拟装配系统，其特征在于，所述上位机包括通过unity3D引擎生成所述虚拟装配画面的计算机。
3.如权利要求1所述的虚拟装配系统，其特征在于，所述体感交互设备包括体感控制器和动作捕捉手套。
4.如权利要求1所述的虚拟装配系统，其特征在于，所述虚拟现实显示设备包括虚拟现实头戴式显示器。
5.如权利要求1所述的虚拟装配系统，其特征在于，所述3D显示屏通过高清多媒体接口与所述上位机连接。
6.如权利要求1所述的虚拟装配系统，其特征在于，所述摄像机通过通用串行总线与所述上位机连接。
7.如权利要求3所述的虚拟装配系统，其特征在于，所述动作捕捉手套为Noitom Hi5VR数据手套，所述Noitom Hi5 VR数据手套通过无线网络与所述上位机连接。
8.如权利要求3所述的虚拟装配系统，其特征在于，所述体感控制器为LeapMotion设备，所述LeapMotion设备通过通用串行总线与所述上位机连接。
9.如权利要求4所述的虚拟装配系统，其特征在于，所述虚拟现实显示设备为HTC Vive设备，所述HTC Vive设备通过通用串行总线或高清多媒体接口与所述上位机连接。
10.如权利要求4所述的虚拟装配系统，其特征在于，所述虚拟现实显示设备为OculusRift设备，所述Oculus Rift设备通过通用串行总线或高清多媒体接口与所述上位机连接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201921514949.8U CN210222693U (zh) | 2019-09-11 | 2019-09-11 | 虚拟装配系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201921514949.8U CN210222693U (zh) | 2019-09-11 | 2019-09-11 | 虚拟装配系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN210222693U true CN210222693U (zh) | 2020-03-31 |
Family
ID=69920378
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201921514949.8U Expired - Fee Related CN210222693U (zh) | 2019-09-11 | 2019-09-11 | 虚拟装配系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN210222693U (zh) |
-
2019
- 2019-09-11 CN CN201921514949.8U patent/CN210222693U/zh not_active Expired - Fee Related
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN202855107U (zh) | 电力安全风险体验培训系统 | |
| CN111526118A (zh) | 一种基于混合现实的远程操作引导系统及方法 | |
| CN111240490A (zh) | 基于vr虚拟沉浸及环幕互动的设备绝缘试验培训系统 | |
| CN105374251A (zh) | 一种基于沉浸式输入、输出设备的矿用虚拟现实培训系统 | |
| CN107240317A (zh) | 一种利用ar实现远程教育的方法及设备 | |
| US11442685B2 (en) | Remote interaction via bi-directional mixed-reality telepresence | |
| CN210006245U (zh) | 一种用于电力设备培训的增强现实多人协同仿真系统 | |
| CN111986334A (zh) | Hololens和CAVE结合的虚拟体验系统及方法 | |
| CN111028579A (zh) | 一种基于vr现实的视觉教学系统 | |
| CN110977981A (zh) | 一种机器人虚拟现实同步系统及同步方法 | |
| CN108830944B (zh) | 光学透视式三维近眼显示系统及显示方法 | |
| CN112102667A (zh) | 一种基于vr交互的视频教学系统及方法 | |
| CN207123961U (zh) | 用于变电站培训的立体弧幕式的沉浸式多人协同训练装置 | |
| KR19990054791A (ko) | 무선조종 모형 항공기 시뮬레이션 시스템 | |
| CN107632702B (zh) | 一种采用光感应数据手套的全息投影系统及其工作方法 | |
| CN210222693U (zh) | 虚拟装配系统 | |
| Rosendo et al. | Towards the development of a 3D serious game for training in power network maintenance | |
| CN114979568A (zh) | 一种基于增强现实技术的远程作业指导方法 | |
| CN110457227A (zh) | 辅助开发人员或学生进行vr应用开发的系统及开发方法 | |
| Kishino et al. | Virtual space teleconferencing" Communication with realistic sensations" | |
| CN207182708U (zh) | 一种利用ar实现远程教育的设备 | |
| CN110262662A (zh) | 一种智能人机交互方法 | |
| CN110109550A (zh) | 一种vr沉浸式的系外行星探测演示系统 | |
| WO2022047768A1 (zh) | Hololens和CAVE结合的虚拟体验系统及方法 | |
| CN110827598B (zh) | 一种电子战装备虚拟操作训练系统及其训练方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200331 |