CN113687720A - 一种多人联机的虚拟现实教育系统及其使用方法 - Google Patents

一种多人联机的虚拟现实教育系统及其使用方法 Download PDF

Info

Publication number
CN113687720A
CN113687720A CN202110969669.1A CN202110969669A CN113687720A CN 113687720 A CN113687720 A CN 113687720A CN 202110969669 A CN202110969669 A CN 202110969669A CN 113687720 A CN113687720 A CN 113687720A
Authority
CN
China
Prior art keywords
module
scene
handle
teacher
dimensional
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110969669.1A
Other languages
English (en)
Inventor
仲于姗
付力娅
朱奕瑾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dalian Neusoft University of Information
Original Assignee
Dalian Neusoft University of Information
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dalian Neusoft University of Information filed Critical Dalian Neusoft University of Information
Priority to CN202110969669.1A priority Critical patent/CN113687720A/zh
Publication of CN113687720A publication Critical patent/CN113687720A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G06Q50/205—Education administration or guidance
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B7/00—Electrically-operated teaching apparatus or devices working with questions and answers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/012—Walk-in-place systems for allowing a user to walk in a virtual environment while constraining him to a given position in the physical environment

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • General Business, Economics & Management (AREA)
  • Electrically Operated Instructional Devices (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种多人联机的虚拟现实教育系统，其包括：按键采集信息模块、多人VR网络联机模块、VR场景模块和VR人机交互模块，多人VR网络联机模块包括服务器、客户端、VR手柄、头盔和UI界面，其中客户端包括教师端和学生端。本发明能把各类场景生动形象的展现出来，尤其是一些时间空间受限，无法还原的场景，让参与其中的学生获得更深刻的情景体验。本发明采用的多人联机虚拟现实交互，学生可以在多人的互动中找到协作学习的乐趣，提高学习的兴趣，尤其是在一些教育中，这种多人互动，使学生意识到团队协同作战的重要性。

Description

一种多人联机的虚拟现实教育系统及其使用方法
技术领域
本发明涉及人机交互领域，尤其涉及一种多人联机的虚拟现实教育系统及其使用方法。
背景技术
教育能增进人民的爱国情怀、培育人民的高尚情操、铸就人民的创新精神。然而随着科技的不断进步，以图书，影像，音频为主要教学媒介，以课堂，博物馆为主要场所的传统教育已经无法满足人们的需求。
传统的教育存在以下几个方面的缺点：1、采用单向传输，枯燥单调，容易引起兴趣疲劳；2、受到时间空间的限制，情境体验感薄弱；3、在现有的虚拟现实教育应用中，大部分采用单人虚拟现实交互体验的方式，缺少多人同步互动学习的方式。随着科技的发展，多人联机虚拟现实技术也成为了教育的重要宣传手段，如何基于虚拟现实技术，解决上述教育中存在的缺陷，是一件亟待解决的问题。
发明内容
本发明提供一种多人联机的虚拟现实教育系统及其使用方法，以克服现有教育系统中沉浸感薄弱，情境体验感薄弱，枯燥单调的技术问题。
为了实现上述目的，本发明的技术方案是：
一种多人联机的虚拟现实教育系统，其特征在于，包括：按键采集信息模块、多人VR网络联机模块、VR场景模块和VR人机交互模块；
按键采集信息模块用于根据用户指令控制多人VR网络联机模块、VR 场景模块和VR人机交互模块的信号流程；
多人VR网络联机模块包括服务器、客户端、VR手柄和头盔，其中客户端包括教师端和学生端；
服务器用于对在线的用户进行管理，进行系统的任务处理和系统中用户头盔和VR手柄的位置信息和旋转角度信息同步更新；
教师端通过VR人机交互模块将VR手柄和头盔通过UI界面进行VR教育课程的流程信号交互，并控制VR教育课程进行的流程信号发送给服务器，再由服务器反馈到学生端；
学生端用于实时获取学生用户头盔和VR手柄的位置信息和旋转信息，并将位置信息和旋转信息送给服务器，再由服务器把用户头盔和VR手柄的位置信息和旋转角度信息反馈给学生端和教师端；
VR场景模块包括三维模型设计模块、动画设计模块、视频设计模块和特效设计模块；
三维模型设计模块用于建模三维教育系统VR场景，通过SteamVR插件，使头盔控制Unity游戏引擎中摄像机运动，并将摄像机所视区域的VR 场景，通过Unity游戏引擎图形渲染技术形成逐帧图像，显示在教师端和学生端的电脑屏幕和头盔屏幕上，同时调用Unity游戏引擎中的碰撞检测技术，为三维教育系统VR场景添加碰撞组件；
动画设计模块用于设计和制作场景中角色动画和场景动画，并调用 Unity游戏引擎中的图形渲染技术，将用户所看到的区域角色动画和场景动画逐帧通过游戏引擎的图形渲染，显示在教师端和学生端的电脑和头盔的屏幕中；
视频设计模块用于将教育内容的视频素材导入Unity游戏引擎，调用 Unity游戏引擎中视频播放技术，调用VideoPlayer中的Play()和Pause() 方法实现视频素材在头盔的屏幕中的播放和暂停；
特效设计模块调用Unity游戏引擎中的粒子系统技术，制作粒子特效素材，粒子特效素材包括三维场景中的环境光照特效、精灵闪光特效、烟雾特效，当用户通过人机交互模块使用VR手柄与三维场景中的模型道具发生碰撞检测时，系统生成粒子特效素材，实现碰撞效果；
VR人机交互模块基于SteamVR软件，通过SteamVR中的房间设置功能，将头盔和VR手柄与SteamVR软件所提供的虚拟摄像机控制器和虚拟手柄控制器完成空间定位和配对，通过Unity引擎技术，将SteamVR中的虚拟摄像机控制器和虚拟手柄控制器导入三维教育系统VR场景中，使用户所使用的头盔和VR手柄可以控制三维教育系统VR场景中的摄像机和VR手柄道具模型的运动，进而使用户通过头盔和VR手柄与多人VR网络联机模块、VR场景模块和VR人机交互模块之间进行人机交互。
进一步的，还包括VR语音讲解模块，VR语音讲解模块调用Unity游戏引擎中的音频播放技术和TimeLine时间线技术，调用TimeLine中的 Playable Director中的Play()和Pause()方法控制客户端教育解说语音素材的播放和暂停。
进一步的，还包括VR答题系统模块，VR答题系统模块调用Unity游戏引擎技术中的UI组件，使用UI组件中的Canvas画布制作学生端的VR 答题面板，使用Canvas画布中的Text功能将预设好的题目显示在Canvas 画布上，从而将题目显示在学生端的答题面板上。
进一步的，所述按键采集信息模块包括教育课程按钮、控制面板按钮、下一步按钮、退出按钮和答题按钮。
同样的目的，一种多人联机的虚拟现实教育系统的使用方法，其特征在于：
步骤1、将服务器和客户端部署在局域网中，将电脑连接多人联机的虚拟现实教育系统，并进行VR空间定位，选择一台电脑作为教师机安装教师端，一台电脑作为服务器，其余电脑作为学生机安装学生端；
步骤2、开启服务器，教师打开教师端，教师佩戴头盔和VR手柄，通过VR人机交互模块，使用VR手柄选择教育课程按钮，进入三维教育系统 VR场景；学生开启学生端，通过多人VR网络联机模块，进入和教师端相同的三维教育系统VR场景；通过VR场景模块，三维教育系统VR场景显示在学生的头盔中，并通过多人VR网络联机模块，观察到其他学生在三维教育系统VR场景中的头盔和VR手柄运动效果；
步骤3、教师使用VR手柄点选三维教育系统VR场景中的UI交互界面的控制面板按钮，控制教育课程内容的进行进度；教师点击下一步按钮，将开启VR语音讲解模块和VR场景模块，播放教育内容的音频解说并在系统中加载与解说内容相关的VR场景素材，通过多人VR网络联机模块，使学生端和教师端的信息同步，同时通过VR人机交互模块，学生能够使用VR手柄与三维教育系统VR场景中的三维模型角色和道具进行互动；
步骤4、通过VR人机交互模块，教师使用VR手柄点选三维教育系统 VR场景中的UI交互界面控制面板中的答题按钮进入VR答题系统模块，通过多人VR网络联机模块，控制学生端弹出答题面板，通过VR人机交互模块，学生使用VR手柄点选答题面板中的选项，通过VR答题系统模块，完成题目的作答和正误的判断；
步骤5、教育课程结束后，通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面控制面板中的退出按钮，通过多人VR网络联机模块，使学生和教师一起退出系统。
进一步的，步骤3具体为：
步骤3.1、通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面的控制面板按钮；
步骤3.2、点击UI交互界面上下一步按钮，进行文字翻页，进而提示教师进行下一段教育的讲解，并开启VR语音讲解模块，播放讲解音效，完成教育内容的讲解；
步骤3.3、教师点选三维教育系统VR场景中的UI交互界面的控制面板按钮后，通过多人VR网络联机模块，向教师端和学生端发送指令，通过VR场景模块，调用Unity游戏引擎技术控制三维教育系统VR场景中动画、视频和特效的产生和播放；
步骤3.4、学生佩戴头盔和VR手柄,通过VR场景模块模块，观察三维教育系统VR场景的动画、视频和特效变化，聆听语音解说，并通过VR人机交互模块，使用VR手柄与三维教育系统VR场景中的道具模型进行碰撞，调用Unity游戏引擎的碰撞检测技术，触发场景中道具模型的生成、角色动画的播放、粒子特效的生成效果。
有益效果：
本发明将网络技术，虚拟现实技术融入教学，丰富了教育教学形式。
本发明能把各类场景生动形象的展现出来，尤其是一些时间空间受限，无法还原的场景，让参与其中的学生获得更深刻的情景体验。
本发明采用的多人联机虚拟现实交互，学生可以在多人的互动中找到协作学习的乐趣，提高学习的兴趣，尤其是在一些作战教育中，这种多人互动，使学生意识到团队协同作战的重要性。
本发明的VR答题系统可以帮助学生回顾所学知识，加深记忆。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明系统示意图；
图2为本发明使用流程图；
图3为本发明多人VR网络联机实现的流程图；
图4为本发明VR人机交互技术实现流程图；
图5为本发明VR语音讲解实现流程图；
图6为本发明VR场景实现的流程图；
图7为本发明VR答题系统实现流程图；
图8为本发明多台VR计算机网络联机附图；
图9为本发明系统中VR教学场景示意图；
图10为本发明系统中VR场景切换意图；
图11为本发明系统中VR答题场景示意图；
图12为本发明学生进入系统后VR场景的效果图；
图13为本发明教师和学生进入系统后VR场景的效果图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本实施例提供了一种多人联机的虚拟现实教育系统，如图1，图3-13，包括：按键采集信息模块、多人VR网络联机模块、VR场景模块和VR人机交互模块；
按键采集信息模块用于根据用户指令控制多人VR网络联机模块、VR 场景模块和VR人机交互模块的信号流程；所述按键采集信息模块包括教育课程按钮、控制面板按钮、下一步按钮、退出按钮和答题按钮；
多人VR网络联机模块包括服务器、客户端、VR手柄和头盔，其中客户端包括教师端和学生端；
服务器用于对在线的用户进行管理，进行系统的任务处理和系统中用户头盔和VR手柄的位置信息和旋转角度信息同步更新；
教师端通过VR人机交互模块将VR手柄和头盔通过UI界面进行VR教育课程的流程信号交互，并控制VR教育课程进行的流程信号发送给服务器，再由服务器反馈到学生端；
学生端用于实时获取学生用户头盔和VR手柄的位置信息和旋转信息，并将位置信息和旋转信息送给服务器，再由服务器把用户头盔和VR手柄的位置信息和旋转角度信息反馈给学生端和教师端；
VR场景模块包括三维模型设计模块、动画设计模块、视频设计模块和特效设计模块；
三维模型设计模块用于建模三维教育系统VR场景，通过SteamVR插件，使头盔控制Unity游戏引擎中摄像机运动，并将摄像机所视区域的VR 场景，通过Unity游戏引擎图形渲染技术形成逐帧图像，显示在教师端和学生端的电脑屏幕和头盔屏幕上，同时调用Unity游戏引擎中的碰撞检测技术，为三维教育系统VR场景添加碰撞组件；
动画设计模块用于场景中角色动画和场景动画的设计和制作，并调用 Unity游戏引擎中的图形渲染技术，将用户所看到的区域角色动画和场景动画逐帧通过游戏引擎的图形渲染，显示在教师端和学生端的电脑和头盔的屏幕中；
视频设计模块用于将教育内容的视频素材导入Unity游戏引擎，调用 Unity游戏引擎中视频播放技术，使用VideoPlayer组件和C#编程，调用 VideoPlayer中的Play()和Pause()方法实现视频素材在头盔的屏幕中的播放和暂停；
特效设计模块调用Unity游戏引擎中的粒子系统技术，制作粒子特效素材，粒子特效素材包括三维场景中的环境光照特效、精灵闪光特效、烟雾特效，当用户通过人机交互模块使用VR手柄与三维场景中的模型道具发生碰撞检测时，系统生成粒子特效素材，实现碰撞效果；此外当用户挥动VR手柄时，产生粒子特效，使其紧跟VR手柄实现闪烁拖尾效果。
VR人机交互模块基于SteamVR软件，通过SteamVR中的房间设置功能，将头盔和VR手柄与SteamVR软件所提供的虚拟摄像机控制器和虚拟手柄控制器完成空间定位和配对，通过Unity引擎技术，将SteamVR中的虚拟摄像机控制器和虚拟手柄控制器导入三维教育系统VR场景中，使用户所使用的头盔和VR手柄可以控制三维教育系统VR场景中的摄像机和VR手柄道具模型的运动，进而使用户通过头盔和VR手柄与多人VR网络联机模块、VR场景模块和VR人机交互模块之间进行人机交互。
在具体应用中，VR人机交互模块的作用为：
1.教师和学生通过佩戴头盔和VR手柄硬件，控制VR教育系统中的摄像机和VR手柄模型的运动，并将用户头盔和VR手柄的在VR场景中的运动数据传递给多人VR网络联机模块，实现多人VR角色动作的画面同步效果；2.调用Unity中的碰撞检测技术，为手柄模型添加碰撞检查功能组件，使教师和学生在佩戴头盔和VR手柄后既可以360度观看和触控VR场景模块中的模型，动画，视频和特效，又可以通过VR手柄与VR场景模块中的模型进行碰撞检测，触发模型动画，视频播放和暂停，特效产生等效果； 3.调用Unity中的碰撞检测技术，教师通过VR手柄点击VR场景中的UI 交互界面按钮，并通过多人网络联机模块，控制所有学生机中VR教育课程的进度和语音讲解模块中教学语音的播放，使所有学生机中课程的进度保持一致；4.调用Unity中的碰撞检测技术，学生通过VR手柄触碰VR场景中答题板上的答案控制器，完成答题模块中的选择答案选项的功能，并将学生答题的结果通过多人VR网络联机模块，反馈给各个学生段用户。
在具体实施例中，还包括VR语音讲解模块，VR语音讲解模块调用 Unity游戏引擎中的音频播放技术和TimeLine时间线技术，通过C#编程，调用TimeLine中的PlayableDirector中的Play()和Pause()方法控制客户端教育解说语音素材的播放和暂停。
在具体实施例中，还包括VR答题系统模块，VR答题系统模块调用 Unity游戏引擎技术中的UI组件，使用UI组件中的Canvas画布制作学生端的VR答题面板，使用Canvas画布中的Text功能将预设好的题目显示在Canvas画布上，从而将题目显示在学生端的答题面板上。
同样的目的，如图2，实施例2提供一种多人联机的虚拟现实教育系统的使用方法，其特征在于：
步骤1、将服务器和客户端部署在局域网中，将电脑连接多人联机的虚拟现实教育系统，并进行VR空间定位，选择一台电脑作为教师机安装教师端，一台电脑作为服务器，其余电脑作为学生机安装学生端；
步骤2、开启服务器，教师打开教师端，教师佩戴头盔和VR手柄，通过VR人机交互模块，使用VR手柄选择教育课程按钮，进入三维教育系统 VR场景；学生开启学生端，通过多人VR网络联机模块，进入和教师端相同的三维教育系统VR场景；通过VR场景模块，三维教育系统VR场景显示在学生的头盔中，并通过多人VR网络联机模块，观察到其他学生在三维教育系统VR场景中的头盔和VR手柄运动效果；
步骤3、教师使用VR手柄点选三维教育系统VR场景中的UI交互界面的控制面板按钮，控制教育课程内容的进行进度；教师点击下一步按钮，将开启VR语音讲解模块和VR场景模块，播放教育内容的音频解说并在系统中加载与解说内容相关的VR场景素材，通过多人VR网络联机模块，使学生端和教师端的信息同步，同时通过VR人机交互模块，学生能够使用VR手柄与三维教育系统VR场景中的三维模型角色和道具进行互动；
步骤4、通过VR人机交互模块，教师使用VR手柄点选三维教育系统 VR场景中的UI交互界面控制面板中的答题按钮进入VR答题系统模块，通过多人VR网络联机模块，控制学生端弹出答题面板，通过VR人机交互模块，学生使用VR手柄点选答题面板中的选项，通过VR答题系统模块，完成题目的作答和正误的判断；
步骤5、教育课程结束后，通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面控制面板中的退出按钮，通过多人VR网络联机模块，使学生和教师一起退出系统。
在具体实施例中，步骤3具体为：
步骤3.1、通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面的控制面板按钮；
步骤3.2、点击UI交互界面上下一步按钮，进行文字翻页，进而提示教师进行下一段教育的讲解，并开启VR语音讲解模块，播放讲解音效，完成教育内容的讲解；
步骤3.3、教师点选三维教育系统VR场景中的UI交互界面的控制面板按钮后，通过多人VR网络联机模块，向教师端和学生端发送指令，通过VR场景模块，调用Unity游戏引擎技术控制三维教育系统VR场景中动画、视频和特效的产生和播放；
步骤3.4、学生佩戴头盔和VR手柄,通过VR场景模块模块，观察三维教育系统VR场景的动画、视频和特效变化，聆听语音解说，并通过VR人机交互模块，使用VR手柄与三维教育系统VR场景中的道具模型进行碰撞，调用Unity游戏引擎的碰撞检测技术，触发场景中道具模型的生成、角色动画的播放、粒子特效的生成效果。
在具体实施例中，如图4，步骤3.1实现步骤具体为：
步骤3.1.1、基于Unity游戏引擎中的SteamVR插件，将头盔和VR手柄硬件传感器与Unity游戏引擎开发场景中的摄像机和三维手柄控制模型匹配，当用户佩戴头盔和VR手柄运动时，可以控制游戏引擎开发场景中的摄像机和手柄模型运动；
步骤3.1.2、在Unity游戏引擎开发场景中，基于碰撞检测技术，为三维手柄控制模型添加碰撞检测组件，并为VR手柄触碰的模型道具或UI 界面上的按钮添加碰撞检测组件。
步骤3.1.3、基于Unity游戏引擎，采用现有的C#编写程序，为三维手柄模型添加脚本组件，三维手柄控制模型与三维场景中的道具或按钮发生触碰时时，调用脚本组件中的OnCollisionEnter()函数，启动碰撞检测后的触发效果。
在具体实施例中，如图5，步骤3.2实现具体步骤为：
步骤3.2.1、根据教育内容，撰写讲解稿；
步骤3.2.2、并录制讲解音频，并将音频素材导入Unity游戏引擎；
步骤3.2.3、基于Unity游戏引擎，采用现有的C#编写程序，调用Unity 中的AudioSource组件控制音频的播放和暂停；
在具体实施例中，如图6，步骤3.3实现具体步骤为：
步骤3.3.1、收集教育内容的图文音视频素材；
步骤3.3.2、根据收集的素材，基于三维建模软件，进行三维场景的建模、角色动画的制作；
步骤3.3.3、将建好的模型、角色动画、视频素材导入Unity游戏引擎，在Unity游戏引擎中，使用动画组件、视频播放组件、粒子特效组件完成系统场景的搭建；
步骤3.3.4、基于Unity游戏引擎的图形渲染技术，将VR场景渲染在电脑或头盔的屏幕上；
在具体实施例中，如图7，步骤4实现具体步骤为：
步骤4.1、根据教育内容编写选择题题库；
步骤4.2、将题库导入Unity游戏引擎，通过C#程序将题库文件读入系统，并显示在系统场景中创建的题目显示面板上；
步骤4.3、每个选择题的选项均由带有碰撞检测组件的三维模型道具表示。用户使用VR手柄控制模型，触碰选项三维模型道具，完成题目答案的选择。
步骤4.4、系统获取用户选择结果，与写入程序中的正确结果比对，将答题结果反馈给用户，显示在用户的题目显示面板上。
如图3，步骤2具体为：
步骤2.1、通过网线、交换机将服务器和多台计算机连网形成一个小型的局域网；
步骤2.2、除服务器以外的计算机安装SteamVR,连接HTC VIVE硬件头盔和VR手柄设备；
步骤2.3、基于PhotonServer和Unity游戏引擎开发客户端和服务器；
步骤2.4、将开发的服务器和客户端分别部署在服务器和教师机与学生机上；
步骤2.5、开启服务器程序，开启多个客户端，用户登录系统，完成多人VR网络联机效果；
最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (6)

1.一种多人联机的虚拟现实教育系统，其特征在于，包括：按键采集信息模块、多人VR网络联机模块、VR场景模块和VR人机交互模块；
按键采集信息模块用于根据用户指令控制多人VR网络联机模块、VR场景模块和VR人机交互模块的信号流程；
多人VR网络联机模块包括服务器、客户端、VR手柄和头盔，其中客户端包括教师端和学生端；
服务器用于对在线的用户进行管理，进行系统的任务处理和系统中用户头盔和VR手柄的位置信息和旋转角度信息同步更新；
教师端通过VR人机交互模块将VR手柄和头盔通过UI界面进行VR教育课程的流程信号交互，并控制VR教育课程进行的流程信号发送给服务器，再由服务器反馈到学生端；
学生端用于实时获取学生用户头盔和VR手柄的位置信息和旋转信息，并将位置信息和旋转信息送给服务器，再由服务器把用户头盔和VR手柄的位置信息和旋转角度信息反馈给学生端和教师端；
VR场景模块包括三维模型设计模块、动画设计模块、视频设计模块和特效设计模块；
三维模型设计模块用于建模三维教育系统VR场景，通过SteamVR插件，使头盔控制Unity游戏引擎中摄像机运动，并将摄像机所视区域的VR场景，通过Unity游戏引擎图形渲染技术形成逐帧图像，显示在教师端和学生端的电脑屏幕和头盔屏幕上，同时调用Unity游戏引擎中的碰撞检测技术，为三维教育系统VR场景添加碰撞组件；
动画设计模块用于设计和制作场景中角色动画和场景动画，并调用Unity游戏引擎中的图形渲染技术，将用户所看到的区域角色动画和场景动画逐帧通过游戏引擎的图形渲染，显示在教师端和学生端的电脑和头盔的屏幕中；
视频设计模块用于将教育内容的视频素材导入Unity游戏引擎，调用Unity游戏引擎中视频播放技术，调用VideoPlayer中的Play()和Pause() 方法实现视频素材在头盔的屏幕中的播放和暂停；
特效设计模块调用Unity游戏引擎中的粒子系统技术，制作粒子特效素材，粒子特效素材包括三维场景中的环境光照特效、精灵闪光特效、烟雾特效，当用户通过人机交互模块使用VR手柄与三维场景中的模型道具发生碰撞检测时，系统生成粒子特效素材，实现碰撞效果；
VR人机交互模块基于SteamVR软件，通过SteamVR中的房间设置功能，将头盔和VR手柄与SteamVR软件所提供的虚拟摄像机控制器和虚拟手柄控制器完成空间定位和配对，通过Unity引擎技术，将SteamVR中的虚拟摄像机控制器和虚拟手柄控制器导入三维教育系统VR场景中，使用户所使用的头盔和VR手柄可以控制三维教育系统VR场景中的摄像机和VR手柄道具模型的运动，进而使用户通过头盔和VR手柄与多人VR网络联机模块、VR场景模块和VR人机交互模块之间进行人机交互。
2.如权利要求1所述的一种多人联机的虚拟现实教育系统，其特征在于：还包括VR语音讲解模块，VR语音讲解模块调用Unity游戏引擎中的音频播放技术和TimeLine时间线技术，调用TimeLine中的Playable Director中的Play()和Pause()方法控制客户端教育解说语音素材的播放和暂停。
3.如权利要求2所述的一种多人联机的虚拟现实教育系统，其特征在于：还包括VR答题系统模块，VR答题系统模块调用Unity游戏引擎技术中的UI组件，使用UI组件中的Canvas画布制作学生端的VR答题面板，使用Canvas画布中的Text功能将预设好的题目显示在Canvas画布上，从而将题目显示在学生端的答题面板上。
4.如权利要求3所述的一种多人联机的虚拟现实教育系统，其特征在于：所述按键采集信息模块包括教育课程按钮、控制面板按钮、下一步按钮、退出按钮和答题按钮。
5.一种如权利要求4所述的多人联机的虚拟现实教育系统的使用方法，其特征在于：
步骤1、将服务器和客户端部署在局域网中，将电脑连接多人联机的虚拟现实教育系统，并进行VR空间定位，选择一台电脑作为教师机安装教师端，一台电脑作为服务器，其余电脑作为学生机安装学生端；
步骤2、开启服务器，教师打开教师端，教师佩戴头盔和VR手柄，通过VR人机交互模块，使用VR手柄选择教育课程按钮，进入三维教育系统VR场景；学生开启学生端，通过多人VR网络联机模块，进入和教师端相同的三维教育系统VR场景；通过VR场景模块，三维教育系统VR场景显示在学生的头盔中，并通过多人VR网络联机模块，观察到其他学生在三维教育系统VR场景中的头盔和VR手柄运动效果；
步骤3、教师使用VR手柄点选三维教育系统VR场景中的UI交互界面的控制面板按钮，控制教育课程内容的进行进度；教师点击下一步按钮，将开启VR语音讲解模块和VR场景模块，播放教育内容的音频解说并在系统中加载与解说内容相关的VR场景素材，通过多人VR网络联机模块，使学生端和教师端的信息同步，同时通过VR人机交互模块，学生能够使用VR手柄与三维教育系统VR场景中的三维模型角色和道具进行互动；
步骤4、通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面控制面板中的答题按钮进入VR答题系统模块，通过多人VR网络联机模块，控制学生端弹出答题面板，通过VR人机交互模块，学生使用VR手柄点选答题面板中的选项，通过VR答题系统模块，完成题目的作答和正误的判断；
步骤5、教育课程结束后，通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面控制面板中的退出按钮，通过多人VR网络联机模块，使学生和教师一起退出系统。
6.如权利要求5所述的一种多人联机的虚拟现实教育系统的使用方法，其特征在于，步骤3具体为：
步骤3.1、通过VR人机交互模块，教师使用VR手柄点选三维教育系统VR场景中的UI交互界面的控制面板按钮；
步骤3.2、点击UI交互界面上下一步按钮，进行文字翻页，进而提示教师进行下一段教育的讲解，并开启VR语音讲解模块，播放讲解音效，完成教育内容的讲解；
步骤3.3、教师点选三维教育系统VR场景中的UI交互界面的控制面板按钮后，通过多人VR网络联机模块，向教师端和学生端发送指令，通过VR场景模块，调用Unity游戏引擎技术控制三维教育系统VR场景中动画、视频和特效的产生和播放；
步骤3.4、学生佩戴头盔和VR手柄,通过VR场景模块模块，观察三维教育系统VR场景的动画、视频和特效变化，聆听语音解说，并通过VR人机交互模块，使用VR手柄与三维教育系统VR场景中的道具模型进行碰撞，调用Unity游戏引擎的碰撞检测技术，触发场景中道具模型的生成、角色动画的播放、粒子特效的生成效果。
CN202110969669.1A 2021-08-23 2021-08-23 一种多人联机的虚拟现实教育系统及其使用方法 Withdrawn CN113687720A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110969669.1A CN113687720A (zh) 2021-08-23 2021-08-23 一种多人联机的虚拟现实教育系统及其使用方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110969669.1A CN113687720A (zh) 2021-08-23 2021-08-23 一种多人联机的虚拟现实教育系统及其使用方法

Publications (1)

Publication Number Publication Date
CN113687720A true CN113687720A (zh) 2021-11-23

Family

ID=78581555

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110969669.1A Withdrawn CN113687720A (zh) 2021-08-23 2021-08-23 一种多人联机的虚拟现实教育系统及其使用方法

Country Status (1)

Country Link
CN (1) CN113687720A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114924666A (zh) * 2022-05-12 2022-08-19 上海云绅智能科技有限公司 一种应用场景的交互方法、装置、终端设备及存储介质
CN115050228A (zh) * 2022-06-15 2022-09-13 北京新唐思创教育科技有限公司 一种素材收集方法及装置、电子设备
CN117499748A (zh) * 2023-11-02 2024-02-02 江苏濠汉信息技术有限公司 一种基于边缘计算的课堂教学互动方法及系统
CN117528158A (zh) * 2024-01-03 2024-02-06 南京维赛客网络科技有限公司 应用于虚拟影院的多人同步观影方法、系统及存储介质

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114924666A (zh) * 2022-05-12 2022-08-19 上海云绅智能科技有限公司 一种应用场景的交互方法、装置、终端设备及存储介质
CN115050228A (zh) * 2022-06-15 2022-09-13 北京新唐思创教育科技有限公司 一种素材收集方法及装置、电子设备
CN115050228B (zh) * 2022-06-15 2023-09-22 北京新唐思创教育科技有限公司 一种素材收集方法及装置、电子设备
CN117499748A (zh) * 2023-11-02 2024-02-02 江苏濠汉信息技术有限公司 一种基于边缘计算的课堂教学互动方法及系统
CN117528158A (zh) * 2024-01-03 2024-02-06 南京维赛客网络科技有限公司 应用于虚拟影院的多人同步观影方法、系统及存储介质

Similar Documents

Publication Publication Date Title
Nebeling et al. 360proto: Making interactive virtual reality & augmented reality prototypes from paper
CN113687720A (zh) 一种多人联机的虚拟现实教育系统及其使用方法
Ponder et al. Immersive VR decision training: telling interactive stories featuring advanced virtual human simulation technologies
CN207037604U (zh) 交互式教学系统
US9305465B2 (en) Method and system for topic based virtual environments and expertise detection
JP2009145883A (ja) 学習システム、記憶媒体及び学習方法
JP6683864B1 (ja) コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム
Nagendran et al. AMITIES: Avatar-mediated interactive training and individualized experience system
JP2022500795A (ja) アバターアニメーション
JP2020080154A (ja) 情報処理システム
CN109391848A (zh) 一种互动广告系统
Horiuchi et al. Virtual stage linked with a physical miniature stage to support multiple users in planning theatrical productions
Sénécal et al. Modelling life through time: cultural heritage case studies
JP6892478B2 (ja) コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム
CN114189743A (zh) 数据传输方法、装置、电子设备和存储介质
Strutt et al. New Telematic Technology for the Remote Creation and Performance of Choreographic Work
Liu et al. Development of a cybercrime investigation simulator for immersive virtual reality
JP2021009351A (ja) コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム
Karreman How does motion capture mediate dance?
Birringer Interacting
Deac et al. Implementation of a Virtual Reality Collaborative Platform for Industry 4.0 Offices
CN115100004B (zh) 在线授课系统、方法、装置、设备及介质
Bitter et al. Effects of volumetric video capture on interactive storytelling in immersive augmented reality: a short film experiment
Kumaravel Interactive Cross-Dimensional Media for Collaboration and Guidance in Mixed Reality Environments
JP7195015B2 (ja) インストラクションシステム、プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20211123

WW01 Invention patent application withdrawn after publication