CN113867532A - 一种基于虚拟现实技能训练的评估系统及评估方法 - Google Patents

一种基于虚拟现实技能训练的评估系统及评估方法 Download PDF

Info

Publication number
CN113867532A
CN113867532A CN202111162712.XA CN202111162712A CN113867532A CN 113867532 A CN113867532 A CN 113867532A CN 202111162712 A CN202111162712 A CN 202111162712A CN 113867532 A CN113867532 A CN 113867532A
Authority
CN
China
Prior art keywords
scene
evaluation
action
model
motion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111162712.XA
Other languages
English (en)
Inventor
周强
杨大为
侍淳博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Qianqiu Intelligent Technology Co ltd
Original Assignee
Shanghai Qianqiu Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Qianqiu Intelligent Technology Co ltd filed Critical Shanghai Qianqiu Intelligent Technology Co ltd
Priority to CN202111162712.XA priority Critical patent/CN113867532A/zh
Publication of CN113867532A publication Critical patent/CN113867532A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • G06Q10/06398—Performance of employee with respect to a job function
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Mathematical Physics (AREA)
  • Biomedical Technology (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Evolutionary Computation (AREA)
  • Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Educational Administration (AREA)
  • Economics (AREA)
  • Computer Hardware Design (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Graphics (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明实施例适用于虚拟现实技术领域，提供了一种基于虚拟现实技能训练的评估系统和评估方法，所述的评估系统通过处理设备，获取预设评估内容，基于所述预设评估内容创建VR场景，基于动作指令使所述虚拟物在VR场景中展示动作；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果，能够根据需要进行技能评估的人员自身的学习水平的不同，提供VR场景的指导，从而在无人监督，使用者独自进行技能训练时，能够及时知晓当前技能训练动作是否标准，提高了技能训练的效果。

Description

一种基于虚拟现实技能训练的评估系统及评估方法
技术领域
本发明实施例属于虚拟现实技术领域，尤其涉及一种基于虚拟现实技能训练的评估系统及评估方法。
背景技术
虚拟现实(Virtual Reality，VR)技术是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真使用户沉浸到该环境中。
随着计算机硬件技术与软件系统的发展和改进，虚拟现实技术正被广泛应用于军事、医疗、管理、设计、教育、娱乐等各个领域。特别在技能训练领域，虚拟现实技术的引入不仅可以节约成本，降低风险，还能够提高训练人员的参与兴趣，带来良好的技能训练效果。
但现有的虚拟显示在进行技能训练时，更多的是被测对象通过一些交互设备，来感应被测对象的动作，然后将来自传感器的原始数据经过传感器处理成为融合信息，经设备产生的行为数据，输入虚拟环境并与被测对象进行交互，再将来自虚拟环境的配置和应用状态再反馈给传感器。
技能评估系统在质量控制、依从性、培训、提高工人效率和福祉方面具有有用的应用，目前，由于技能训练评估的条件限制，仍有大量的人员对技能训练的评估有着迫切需求，由于需要进行技能评估的人员自身的学习水平不同，且无人监督，在独自的进行技能训练时，既不知道技能训练动作是否标准，降低了技能训练的效果。
发明内容
本发明实施例的目的在于提供一种基于虚拟现实技能训练的评估系统及评估方法，旨在解决现有技术中需要进行技能评估的人员自身的学习水平不同，且无人监督，在独自的进行技能训练时，既不知道技能训练动作是否标准，降低了技能训练的效果的问题。为实现上述目的，本发明实施例提供了如下的技术方案。
第一方面，在本发明提供的一个优选实施方式中，提供了一种基于虚拟现实技能训练的评估系统，所述的评估系统包括头戴VR设备、动作捕捉设备和处理设备；
所述头戴VR设备，用于接收自所述处理设备发送的VR场景并显示；
所述动作捕捉设备，用于实时采集被测对象动作时的传感数据，并将所述传感数据发送给处理设备；
所述处理设备，用于获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物，基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
在本发明提供的一些实施例中，所述动作捕捉设备包括：
传感器单元，用于实时采集被测对象动作时的传感数据；
数据发送单元，用于将所述传感数据发送给动作驱动单元。
在本发明提供的一些实施例中，所述处理设备包括：
场景创建单元，用于获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
场景输出单元，用于基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；
动作评估单元，用于获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
在本发明提供的一些实施例中，所述处理设备还包括：
内容更新单元，用于根据所述动作评估结果推送预设训练内容并生成新的评估内容。
在本发明提供的一些实施例中，所述场景创建单元包括：
场景搭建模块，用于根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；
虚拟物模型模块，用于在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述头戴VR设备在VR场景中对应的初始位置；
实体模型模块，用于对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；
标准模型模块，用于基于标准模型数据库调取与所述实体模型相对应的多个标准模型；
场景形成模块，用于结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
在本发明提供的一些实施例中，所述动作评估单元包括：
标准获取模块，用于获取被测对象的动作信息采集标准；
模型创建模块，用于根据所述动作信息采集标准与标准录制样本动作得到评估模型；
评估分析模块，用于根据所述评估模型对当前被测对象的动作进行评估分析。
在本发明提供的一些实施例中，所述模型创建模块包括：
坐标获取子模块，用于利用传感器单元获取需要评估的被测肢体部位的坐标信息，以传感器单元的坐标轴为标准，保存为样本矩阵数据；
模型训练子模块，用于利用所述的样本矩阵数据，通过Tensorflow搭建神经网络评估模型，并将获取到的多组肢体部位的样本矩阵数据输所述入神经网络评估模型进行模型的训练，得到所述的评估模型。
第二方面，在本发明提供的另一个优选实施方式中，提供了一种基于虚拟现实技能训练的评估方法，所述方法包括：
获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；
获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；
根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
在本发明提供的一些实施例中，所述基于所述预设评估内容创建VR场景的步骤包括：
根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；
在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述动作捕捉设备在VR场景中对应的所述头戴VR设备上预设的起始位置；
对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；
基于标准模型数据库调取与所述实体模型相对应的多个标准模型；
结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
在本发明提供的一些实施例中，所述对所述动作数据进行分析，得到当前被测对象动作的分析结果的步骤包括：
获取被测对象的动作信息采集标准；
根据所述动作信息采集标准与标准录制样本动作得到评估模型；
根据所述评估模型对当前被测对象的动作进行评估分析。
与现有技术相比，本发明实施例提供的基于虚拟现实技能训练的评估系统的优势在于：本发明实施例提供的评估系统通过头戴VR设备接收自所述处理设备发送的VR场景并显示；通过动作捕捉设备实时采集被测对象动作时的传感数据；通过处理设备，获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物，基于动作指令使所述虚拟物在VR场景中展示动作；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果，能够根据需要进行技能评估的人员自身的学习水平的不同，提供VR场景的指导，并根据指导指令，使用者作出相应动作，通过获取使用者的动作数据，并对动作数据进行分析评估，得到对使用者的动作评估结果，从而在无人监督，使用者独自进行技能训练时，能够及时知晓当前技能训练动作是否标准，提高了技能训练的效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例。
图1为本发明实施例提供的一种基于虚拟现实技能训练的评估系统的结构框图；
图2为本发明实施例提供的一种基于虚拟现实技能训练的评估系统中场景创建单元的结构框图；
图3为本发明实施例提供的一种基于虚拟现实技能训练的评估系统中动作评估单元的结构框图；
图4为本发明实施例提供的一种基于虚拟现实技能训练的评估方法的实现流程图；
图5为本发明实施例提供的一种基于虚拟现实技能训练的评估方法的一个子流程图；
图6为本发明实施例提供的一种基于虚拟现实技能训练的评估方法的另一个子流程图；
图7为本发明实施例提供的一种计算机设备的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
目前，由于技能训练评估的条件限制，仍有大量的人员对技能训练的评估有着迫切需求，由于需要进行技能评估的人员自身的学习水平不同，且无人监督，在独自的进行技能训练时，既不知道技能训练动作是否标准，降低了技能训练的效果。
为解决上述问题，本发明实施例提供的基于虚拟现实技能训练的评估系统，通过头戴VR设备接收自所述处理设备发送的VR场景并显示；通过动作捕捉设备实时采集被测对象动作时的传感数据；通过处理设备，获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物，基于动作指令使所述虚拟物在VR场景中展示动作；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果，能够根据需要进行技能评估的人员自身的学习水平的不同，提供VR场景的指导，并根据指导指令，使用者作出相应动作，通过获取使用者的动作数据，并对动作数据进行分析评估，得到对使用者的动作评估结果，从而在无人监督，使用者独自进行技能训练时，能够及时知晓当前技能训练动作是否标准，提高了技能训练的效果。
在本发明实施例中，所述头戴VR设备是一种可穿戴于用户头部，且在用户眼睛前有一显示屏幕，常见的头戴VR设备以眼镜、头盔的形式存在。
在本发明实施例中，所述处理设备是能够提供图像信息对比功能的终端设备，例如平板电脑、笔记本电脑、台式计算机，也可以是具有图像信息处理能力的显示适配器，例如显卡，但并不局限于此。
图1为本发明实施例提供的一种基于虚拟现实技能训练的评估系统的结构示意图，为了便于说明，仅示出与本发明实施例相关的部分。
如图1所示，在本发明提供的一个优选实施例中，所述的基于虚拟现实技能训练的评估系统包括头戴VR设备100、动作捕捉设备200和处理设备300；
在本发明提供的优选实施方式中，所述头戴VR设备100与所述处理设备300之间、所述动作捕捉设备200与所述处理设备300之间均通过网络建立通信连接，用于所述头戴VR设备100与所述处理设备300之间、所述动作捕捉设备200与所述处理设备300之间的数据传输，网络可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
其中：
所述头戴VR设备100，用于接收自所述处理设备300发送的VR场景并显示；
在本发明提供的优选实施方式中，为更方便在用户的视野范围内显示VR场景所述的头戴VR设备100以眼镜、头盔的形式存在。
所述动作捕捉设备200，用于实时采集被测对象动作时的传感数据，并将所述传感数据发送给处理设备300；
在本发明实施例中，为更方便的获取测对象动作时的传感数据，将用于捕捉被测对象肢体动作的传感器放置在被测对象的肢体上，常见的是在被测对象的各个肢体上分别设置多个传感器装置，根据所述传感器的空间位置变化，将所述多个传感器获取的动作数据经过融合即可实时采集被测对象动作时的传感数据。
所述处理设备300，用于获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物，基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备100；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
在本发明实施例中，为实现对VR场景的创建，首先根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述头戴VR设备100在VR场景中对应的初始位置；对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；基于标准模型数据库调取与所述实体模型相对应的多个标准模型；结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
在本发明提供的一些实施例中，所述动作捕捉设备包括：
传感器单元201，用于实时采集被测对象动作时的传感数据；
在本发明实施例中，被测对象上穿戴的动作捕捉设备中的各种动作捕捉传感器，在被测对象运动时，可以采集被测对象的肢体位置、姿态等信息。
其中，在本发明实施例中，所述的传感器单元201包括但局限于：上肢动作捕捉传感器、下肢动作捕捉传感器、躯干动作捕捉传感器、头部动作捕捉传感器、手部动作捕捉传感器和脚部动作捕捉传感器。
数据发送单元202，用于将所述传感数据发送给动作驱动单元。
在本发明提供的一些实施例中，所述处理设备300包括：
场景创建单元301，用于获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
场景输出单元302，用于基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备100；
动作评估单元303，用于获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
在本发明提供的一些实施例中，所述处理设备300还包括：
内容更新单元304，用于根据所述动作评估结果推送预设训练内容并生成新的评估内容。
图2示例性的示出了本发明实施例提供的一种基于虚拟现实技能训练的评估系统中场景创建单元的结构框图；
如图2所示，在本发明提供的一些实施例中，所述场景创建单元301包括：
场景搭建模块3011，用于根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；
虚拟物模型模块3012，用于在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述头戴VR设备100在VR场景中对应的初始位置；
实体模型模块3013，用于对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；
标准模型模块3014，用于基于标准模型数据库调取与所述实体模型相对应的多个标准模型；
场景形成模块3015，用于结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
图3示例性的示出了本发明实施例提供的一种基于虚拟现实技能训练的评估系统中动作评估单元的结构框图；
如图3所示，在本发明提供的一些实施例中，所述动作评估单元303包括：
标准获取模块3031，用于获取被测对象的动作信息采集标准；
模型创建模块3032，用于根据所述动作信息采集标准与标准录制样本动作得到评估模型；
评估分析模块3033，用于根据所述评估模型对当前被测对象的动作进行评估分析。
进一步的，在本发明提供的一些优选实施例中，所述模型创建模块3032包括：
坐标获取子模块30321，用于利用传感器单元获取需要评估的被测肢体部位的坐标信息，以传感器单元的坐标轴为标准，保存为样本矩阵数据；
模型训练子模块30322，用于利用所述的样本矩阵数据，通过Tensorflow搭建神经网络评估模型，并将获取到的多组肢体部位的样本矩阵数据输所述入神经网络评估模型进行模型的训练，得到所述的评估模型。
图4为本发明实施例提供的一种基于虚拟现实技能训练的评估方法的实现流程图；
如图4所示，在本发明提供的另一个优选实施方式中，提供了一种基于虚拟现实技能训练的评估方法，所述方法包括：
步骤S401：获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
步骤S402：基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；
步骤S403：获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；
步骤S404：根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
图5为本发明实施例提供的一种基于虚拟现实技能训练的评估方法的一个子流程图；
如图5所示，在本发明提供的一些实施例中，所述基于所述预设评估内容创建VR场景的步骤S401包括：
S4011:根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；
S4012:在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述动作捕捉设备在VR场景中对应的所述头戴VR设备上预设的起始位置；
S4013:对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；
S4014:基于标准模型数据库调取与所述实体模型相对应的多个标准模型；
S4015:结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
图6为本发明实施例提供的一种基于虚拟现实技能训练的评估方法的另一个子流程图；
如图6所示，在本发明提供的一些实施例中，所述对所述动作数据进行分析，得到当前被测对象动作的分析结果的步骤S403包括：
步骤S4031:获取被测对象的动作信息采集标准；
步骤S4032:根据所述动作信息采集标准与标准录制样本动作得到评估模型；
步骤S4033:根据所述评估模型对当前被测对象的动作进行评估分析。
综上所述，本发明实施例提供的基于虚拟现实技能训练的评估系统的优势在于：本发明实施例提供的评估系统通过头戴VR设备接收自所述处理设备发送的VR场景并显示；通过动作捕捉设备实时采集被测对象动作时的传感数据；通过处理设备，获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物，基于动作指令使所述虚拟物在VR场景中展示动作；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果，能够根据需要进行技能评估的人员自身的学习水平的不同，提供VR场景的指导，并根据指导指令，使用者作出相应动作，通过获取使用者的动作数据，并对动作数据进行分析评估，得到对使用者的动作评估结果，从而在无人监督，使用者独自进行技能训练时，能够及时知晓当前技能训练动作是否标准，提高了技能训练的效果。
图7为本发明实施例提供的一种计算机设备的结构框图。
如图7所示，本发明实施例提供一种计算机设备，该计算机设备500包括处理器502，所述处理器502用于执行存储器501中存储的计算机程序时实现上述实施例所提供的基于虚拟现实技能训练的评估方法的步骤。所述方法包括：
获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；
获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；
根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
进一步的，在本发明提供的实时例中，所述的计算机设备500还具有通讯接口503，用于接收控制指令。
示例性的，计算机程序可以被分割成一个或多个模块，一个或者多个模块被存储在存储器中，并由处理器执行，以完成本发明。一个或多个模块可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述计算机程序在计算机装置中的执行过程。例如，计算机程序可以被分割成上述各个方法实施例提供的基于虚拟现实技能训练的评估方法的步骤。
本领域技术人员可以理解，上述计算机装置的描述仅仅是示例，并不构成对计算机装置的限定，可以包括比上述描述更多或更少的部件，或者组合某些部件，或者不同的部件，例如可以包括输入输出设备、网络接入设备、总线等。
所称处理器可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等，所述处理器是所述计算机装置的控制中心，利用各种接口和线路连接整个计算机装置的各个部分。
所述存储器可用于存储所述计算机程序和/或模块，所述处理器通过运行或执行存储在所述存储器内的计算机程序和/或模块，以及调用存储在存储器内的数据，实现所述计算机装置的各种功能。所述存储器可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序等；存储数据区可存储根据手机的使用所创建的数据等。此外，存储器可以包括高速随机存取存储器，还可以包括非易失性存储器，例如硬盘、内存、插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(SecureDigital,SD)卡，闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
所述计算机装置集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信号以及软件分发介质等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于虚拟现实技能训练的评估系统，其特征在于，所述的评估系统包括头戴VR设备、动作捕捉设备和处理设备；
所述头戴VR设备，用于接收自所述处理设备发送的VR场景并显示；
所述动作捕捉设备，用于实时采集被测对象动作时的传感数据，并将所述传感数据发送给处理设备；
所述处理设备，用于获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物，基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
2.根据权利要求1所述的基于虚拟现实技能训练的评估系统及评估方法，其特征在于，所述动作捕捉设备包括：
传感器单元，用于实时采集被测对象动作时的传感数据；
数据发送单元，用于将所述传感数据发送给动作驱动单元。
3.根据权利要求2所述的基于虚拟现实技能训练的评估系统，其特征在于，所述处理设备包括：
场景创建单元，用于获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
场景输出单元，用于基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；
动作评估单元，用于获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
4.根据权利要求3所述的基于虚拟现实技能训练的评估系统，其特征在于，所述处理设备还包括：
内容更新单元，用于根据所述动作评估结果推送预设训练内容并生成新的评估内容。
5.根据权利要求3或4所述的基于虚拟现实技能训练的评估系统及评估方法，其特征在于，所述场景创建单元包括：
场景搭建模块，用于根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；
虚拟物模型模块，用于在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述头戴VR设备在VR场景中对应的初始位置；
实体模型模块，用于对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；
标准模型模块，用于基于标准模型数据库调取与所述实体模型相对应的多个标准模型；
场景形成模块，用于结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
6.根据权利要求5所述的基于虚拟现实技能训练的评估系统，其特征在于，所述动作评估单元包括：
标准获取模块，用于获取被测对象的动作信息采集标准；
模型创建模块，用于根据所述动作信息采集标准与标准录制样本动作得到评估模型；
评估分析模块，用于根据所述评估模型对当前被测对象的动作进行评估分析。
7.根据权利要求6所述的基于虚拟现实技能训练的评估系统，其特征在于，所述模型创建模块包括：
坐标获取子模块，用于利用传感器单元获取需要评估的被测肢体部位的坐标信息，以传感器单元的坐标轴为标准，保存为样本矩阵数据；
模型训练子模块，用于利用所述的样本矩阵数据，通过Tensorflow搭建神经网络评估模型，并将获取到的多组肢体部位的样本矩阵数据输所述入神经网络评估模型进行模型的训练，得到所述的评估模型。
8.一种基于虚拟现实技能训练的评估方法，其特征在于，所述方法包括：
获取预设评估内容，基于所述预设评估内容创建VR场景，所述VR场景中有虚拟物；
基于动作指令使所述虚拟物在VR场景中展示动作，将所述VR场景发送给所述头戴VR设备；
获取被测对象的动作数据；对所述动作数据进行分析，得到当前被测对象动作的分析结果；
根据所述动作指令和所述分析结果，得出当前被测对象的动作评估结果。
9.根据权利要求8所述的基于虚拟现实技能训练的评估方法，其特征在于，所述基于所述预设评估内容创建VR场景的步骤包括：
根据预设评估内容进行场景的搭建并拍摄，以得到场景视频数据；
在所述VR场景中预设的起始位置生成虚拟物；其中，所述起始位置为所述动作捕捉设备在VR场景中对应的所述头戴VR设备上预设的起始位置；
对所述场景视频数据中的各个实体模型进行识别，确定每个所述实体模型的位置信息；
基于标准模型数据库调取与所述实体模型相对应的多个标准模型；
结合所述实体模型的位置信息将所述标准模型构建成与所述实体模型搭建的场景相一致的三维数字模型，将所述三维数字模型作为VR场景。
10.根据权利要求9所述的基于虚拟现实技能训练的评估方法，其特征在于，所述对所述动作数据进行分析，得到当前被测对象动作的分析结果的步骤包括：
获取被测对象的动作信息采集标准；
根据所述动作信息采集标准与标准录制样本动作得到评估模型；
根据所述评估模型对当前被测对象的动作进行评估分析。
CN202111162712.XA 2021-09-30 2021-09-30 一种基于虚拟现实技能训练的评估系统及评估方法 Pending CN113867532A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111162712.XA CN113867532A (zh) 2021-09-30 2021-09-30 一种基于虚拟现实技能训练的评估系统及评估方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111162712.XA CN113867532A (zh) 2021-09-30 2021-09-30 一种基于虚拟现实技能训练的评估系统及评估方法

Publications (1)

Publication Number Publication Date
CN113867532A true CN113867532A (zh) 2021-12-31

Family

ID=79001418

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111162712.XA Pending CN113867532A (zh) 2021-09-30 2021-09-30 一种基于虚拟现实技能训练的评估系统及评估方法

Country Status (1)

Country Link
CN (1) CN113867532A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114611906A (zh) * 2022-03-04 2022-06-10 北京体育大学 一种基于人机交互的战术决策训练效果评估方法及系统
CN114840074A (zh) * 2022-03-22 2022-08-02 深圳市触影设计有限公司 一种基于虚拟现实的情景式互动方法及系统
CN115543087A (zh) * 2022-10-14 2022-12-30 广州强基信息技术有限公司 一种虚拟环境技能实操的人工智能评分方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109675289A (zh) * 2018-12-07 2019-04-26 北京诺亦腾科技有限公司 基于vr和动作捕捉的运动评估系统
CN109765998A (zh) * 2018-12-07 2019-05-17 北京诺亦腾科技有限公司 基于vr和动作捕捉的运动评估方法、设备及存储介质
CN109859324A (zh) * 2018-12-29 2019-06-07 北京光年无限科技有限公司 一种基于虚拟人的动作教学方法及装置
CN112614399A (zh) * 2020-11-25 2021-04-06 武汉露娜芭蕾教育科技有限公司 一种基于虚拟现实的舞蹈教学设备及其教学方法
CN113181619A (zh) * 2021-04-09 2021-07-30 青岛小鸟看看科技有限公司 一种运动训练方法、装置和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109675289A (zh) * 2018-12-07 2019-04-26 北京诺亦腾科技有限公司 基于vr和动作捕捉的运动评估系统
CN109765998A (zh) * 2018-12-07 2019-05-17 北京诺亦腾科技有限公司 基于vr和动作捕捉的运动评估方法、设备及存储介质
CN109859324A (zh) * 2018-12-29 2019-06-07 北京光年无限科技有限公司 一种基于虚拟人的动作教学方法及装置
CN112614399A (zh) * 2020-11-25 2021-04-06 武汉露娜芭蕾教育科技有限公司 一种基于虚拟现实的舞蹈教学设备及其教学方法
CN113181619A (zh) * 2021-04-09 2021-07-30 青岛小鸟看看科技有限公司 一种运动训练方法、装置和系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114611906A (zh) * 2022-03-04 2022-06-10 北京体育大学 一种基于人机交互的战术决策训练效果评估方法及系统
CN114840074A (zh) * 2022-03-22 2022-08-02 深圳市触影设计有限公司 一种基于虚拟现实的情景式互动方法及系统
CN115543087A (zh) * 2022-10-14 2022-12-30 广州强基信息技术有限公司 一种虚拟环境技能实操的人工智能评分方法
CN115543087B (zh) * 2022-10-14 2023-04-07 广州强基信息技术有限公司 一种虚拟环境技能实操的人工智能评分方法

Similar Documents

Publication Publication Date Title
CN109902659B (zh) 用于处理人体图像的方法和装置
CN113867532A (zh) 一种基于虚拟现实技能训练的评估系统及评估方法
CN110807451B (zh) 人脸关键点检测方法、装置、设备及存储介质
CN108961369B (zh) 生成3d动画的方法和装置
WO2019198850A1 (ko) 사람의 얼굴을 이용한 동물 형상의 아바타를 생성하는 방법 및 시스템
CN110362209A (zh) 一种mr混合现实智能感知交互系统
CN113870395A (zh) 动画视频生成方法、装置、设备及存储介质
CN112101123B (zh) 一种注意力检测方法及装置
CN112927363A (zh) 体素地图构建方法及装置、计算机可读介质和电子设备
CN105955455A (zh) 一种在虚拟场景中添加对象的装置和方法
CN111222486A (zh) 手部姿态识别模型的训练方法、装置、设备及存储介质
EP3141985A1 (en) A gazed virtual object identification module, a system for implementing gaze translucency, and a related method
CN108388889A (zh) 用于分析人脸图像的方法和装置
CN111026267A (zh) Vr脑电意念控制接口系统
Sundstedt et al. A systematic review of visualization techniques and analysis tools for eye-tracking in 3D environments
CN112925470B (zh) 交互式电子白板的触摸控制方法、系统和可读介质
Krietemeyer et al. A shared realities workflow for interactive design using virtual reality and three-dimensional depth sensing
CN113611416B (zh) 基于虚拟现实技术心理场景评估方法及系统
CN115019396A (zh) 一种学习状态监测方法、装置、设备及介质
KR102163149B1 (ko) 서비스 프로토타이핑에서의 ux 프로파일링을 위한 실감형 테스트 시스템
CN115994981B (zh) 一种用于应急演练方案的三维自动推演方法
Bohao et al. User visual attention behavior analysis and experience improvement in virtual meeting
CN116204167B (zh) 一种全流程可视化编辑虚拟现实vr实现方法与系统
US20220343783A1 (en) Content control system, content control method, and content control program
JPWO2021030328A5 (zh)

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20211231