CN110047338A - 基于虚拟现实的模拟学习方法、装置和计算机介质 - Google Patents

基于虚拟现实的模拟学习方法、装置和计算机介质 Download PDF

Info

Publication number
CN110047338A
CN110047338A CN201910411193.2A CN201910411193A CN110047338A CN 110047338 A CN110047338 A CN 110047338A CN 201910411193 A CN201910411193 A CN 201910411193A CN 110047338 A CN110047338 A CN 110047338A
Authority
CN
China
Prior art keywords
virtual reality
virtual
reality scenario
user
simulation learning
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910411193.2A
Other languages
English (en)
Inventor
董琛
刘洋
郭伟荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shandong Lulin Network Technology Co Ltd
SHANDONG PHYSICAL CULTURE COLLEGE
Original Assignee
Shandong Lulin Network Technology Co Ltd
SHANDONG PHYSICAL CULTURE COLLEGE
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shandong Lulin Network Technology Co Ltd, SHANDONG PHYSICAL CULTURE COLLEGE filed Critical Shandong Lulin Network Technology Co Ltd
Priority to CN201910411193.2A priority Critical patent/CN110047338A/zh
Publication of CN110047338A publication Critical patent/CN110047338A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/06Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems

Abstract

本申请实施例提供一种基于虚拟现实的模拟学习方法、装置和计算机介质,该基于虚拟现实的模拟学习方法包括:呈现虚拟现实场景;获取用户的手势动作;在虚拟现实场景中显示与手势动作匹配的用户的操作;在虚拟现实场景中显示与操作对应的结果。本申请通过虚拟现实技术呈现用户需求的虚拟现实场景,并且用户可在虚拟现实场景中进行相关操作,以及在虚拟现实场景中还会显示与用户的操作对应的结果,从而在达到了用户学习的目的的同时,还能够避免用户实际操作过程中存在的问题。

Description

基于虚拟现实的模拟学习方法、装置和计算机介质
技术领域
本申请涉及虚拟现实技术领域,尤其涉及一种基于虚拟现实的模拟学习方法、装置和计算机介质。
背景技术
对于用户(例如学生)而言,经常需要完成某些任务,该任务主要在于熟练掌握新的技能或新的知识点,但由于工作繁多或课业繁重等多种因素,为了熟练掌握新的技能或新的知识点,可能需要用户进行反复练习。
目前,用户练习的方式一般为通过实际操作来进行练习。但是,在用户进行实际操作的过程中,会或多或少地存在着问题。例如,运动员在练习煎牛排的过程中,会存在着食材浪费、具有安全隐患等问题。再例如,学生在进行化学实验的过程中,也存在着具有安全隐患的问题。
针对相关技术中的上述问题,目前尚未提出有效的解决方案。
发明内容
本申请实施例的目的在于提供一种基于虚拟现实的模拟学习方法、装置和计算机介质,以解决现有技术中通过实际操作来进行练习存在着的问题。
有鉴于此,第一方面,本申请提供了一种基于虚拟现实的模拟学习方法,所述方法包括以下步骤:呈现虚拟现实场景;获取用户的手势动作;在虚拟现实场景中显示与手势动作匹配的用户的操作;在虚拟现实场景中显示与操作对应的结果。
因此,本申请通过虚拟现实技术呈现用户需求的虚拟现实场景,并且用户可在虚拟现实场景中进行相关操作,以及在虚拟现实场景中还会显示与用户的操作对应的结果,从而在达到了用户学习的目的的同时,还能够避免用户实际操作过程中存在的问题。
在一个可能的实施例中,虚拟现实场景为虚拟厨房场景,在虚拟现实场景中显示与手势动作匹配的用户的操作,包括:在虚拟厨房场景中显示操作,其中,操作包括调节炉火、放置食材或放置调料。
因此,在用户利用虚拟厨房场景进行烹饪学习的情况下,其避免了实际操作过程中存在的食材浪费、划伤手指等问题。
在一个可能的实施例中,虚拟现实场景为虚拟实验室场景,在虚拟现实场景中显示与手势动作匹配的用户的操作,包括:在虚拟实验室场景中显示操作,其中,操作包括物理实验相关的操作、化学实验相关的操作和生物实验相关的操作。
因此,在用户利用虚拟实验室场景进行模拟学习的情况下,其无需担心实际操作过程中存在着的炸伤等安全问题。
在一个可能的实施例中,模拟学习方法还包括:预先建立虚拟现实场景。
在一个可能的实施例中,预先建立虚拟现实场景,包括:根据原始参数预先建立虚拟现实场景;其中,在虚拟现实场景中显示与操作对应的结果,包括:根据操作调整原始参数,获得调整后的参数;在虚拟现实场景中显示与调整后的参数对应的结果。
第二方面,本申请提供了一种基于虚拟现实的模拟学习装置,所述装置包括:呈现模型,用于呈现虚拟现实场景;获取模块,用于获取用户的手势动作;显示模块,用于在虚拟现实场景中显示与手势动作匹配的用户的操作;显示模块,还用于在虚拟现实场景中显示与操作对应的结果。
在一个可能的实施例中,虚拟现实场景为虚拟厨房场景,显示模块,还用于在虚拟厨房场景中显示操作,其中,操作包括调节炉火、放置食材或放置调料。
在一个可能的实施例中,虚拟现实场景为虚拟实验室场景,显示模块,还用于在虚拟实验室场景中显示操作,其中,操作包括物理实验相关的操作、化学实验相关的操作和生物实验相关的操作。
在一个可能的实施例中,模拟学习装置还包括:建立模块,用于预先建立虚拟现实场景。
在一个可能的实施例中,建立模块,还用于根据原始参数预先建立虚拟现实场景;其中,模拟学习装置还包括:调整模块,用于根据操作调整原始参数,获得调整后的参数;显示模块,还用于在虚拟现实场景中显示与调整后的参数对应的结果。
第三方面,本申请还提供了一种计算机介质,计算机介质上存储有计算机程序,计算机程序被处理器运行时执行如第一方面或第一方面的任一可选的实现方式的方法。
第四方面,本申请提供一种电子设备,包括:处理器、存储器和总线,存储器存储有处理器可执行的机器可读指令,当电子设备运行时,处理器与存储器之间通过总线通信,机器可读指令被处理器执行时执行第一方面或第一方面的任一可选的实现方式的方法。
为使本申请实施例所要实现的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1是本申请实施例提供的一种基于虚拟现实的模拟学习方法的场景示意图;
图2是本申请实施例提供的一种基于虚拟现实的模拟学习方法的流程示意图;
图3是本申请实施例提供的一种基于虚拟现实的模拟学习煎牛排的方法的流程示意图;
图4是本申请实施例提供的一种动态数据库的参数配置的示意图;
图5是本申请实施例提供的一种事件列表的示意图;
图6是本申请实施例提供的一种基于虚拟现实的模拟学习装置的框图;
图7是本申请实施例提供的一种装置的示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,应当理解,本申请中附图仅起到说明和描述的目的,并不用于限定本申请的保护范围。另外,应当理解,示意性的附图并未按实物比例绘制。本申请中使用的流程图示出了根据本申请的一些实施例实现的操作。应该理解,流程图的操作可以不按顺序实现,没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外,本领域技术人员在本申请内容的指引下,可以向流程图添加一个或多个其他操作,也可以从流程图中移除一个或多个操作。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
现有的学习方法是用户在现实中动手进行实际操作,来达到学习的目的。例如,在学生进行烹饪学习的过程中,学生会通过在厨房进行烹饪的方式来达到学习的目的。
但是,在上述实际操作的过程中,会或多或少地存在一些问题。例如,在学生进行烹饪学习的过程中,可能存在着容易割伤手指、引起火灾、烫伤等安全隐患。另外,学生还可能会对某道菜进行反复的练习,从而也会引起食材浪费的问题。再例如,在学生进行化学实验的过程中,由于化学物质的特性,也存在着容易爆炸的安全隐患。
因此,本申请通过虚拟现实技术呈现用户需求的虚拟现实场景,并且用户可在虚拟现实场景中进行相关操作,以及在虚拟现实场景中还会显示与用户的操作对应的结果,从而在达到了用户学习的目的的同时,还能够避免用户实际操作过程中存在的问题。
请参照图1,图1示出了一种基于虚拟现实的模拟学习方法的场景示意图。如图1所示,计算机内可获取手柄发送的数据,以及虚拟现实头盔发送的数据,以及采集设备发送的数据。此外,计算机内还可安装有基于虚拟现实的模拟学习软件,该模拟学习软件可对用户的动作进行分析,也可更新动态数据库中的参数,也可根据更新后或调整后的参数输出对应的结果。
此外,该计算机可通过游戏引擎渲染出所需的虚拟现实场景,并且在计算机和虚拟现实头盔可通过电缆数据连接的情况下,计算机将虚拟现实场景呈现到虚拟现实头盔的显示器中。
应理解,计算机还可通过其他的方式与虚拟现实头盔进行连接,例如,计算机也可通过无线的方式来连接虚拟现实头盔,本申请对此不作限定。
还应理解,该计算机的型号类型和虚拟现实头盔的型号类型均可根据实际需求进行选择。例如,虚拟现实头盔可为三自由度的虚拟现实头盔,也可为六自由度的虚拟现实头盔,本申请对此不作限定。
此外,如图1所示,手柄还可通过无线的方式来与计算机数据连接,通过按下手柄上的按钮的方式来控制用户在虚拟现实场景的操作。例如,通过手柄上的按钮来切换虚拟现实场景中用户的手部的姿势,使得手部可在放松、点击、抓取等姿势之间切换。
另外,还可通过在手柄上安装传感器等方式,使得计算机能够获取手柄的摇晃轨迹,从而进一步控制在虚拟现实场景中用户的操作。
应理解,虽然上面示出了手柄通过无线来和计算机数据连接的方式,但本领域的技术人员还可根据实际需求来进行设置。例如,手柄可通过电缆的方式来与计算机数据连接,本申请对此不作限定。
还应理解,虽然本实施例对以手柄为感应设备进行了举例,但本领域的技术人员还可根据实际需求来进行设置。例如,还可将手柄替换为安装有传感器的感应手套,本申请对此不做限定。
另外,如图1所示,采集设备(如摄像头)还可通过电缆的方式来与计算机数据连接,该采集设备能够采集用户的动作。
应理解,该采集设备还可根据实际需求来进行器件的选择,例如,该采集设备可为传感器,本申请对此不作限定。
例如,在感应设备为手柄的情况下,采集设备可采集用户手中手柄的滑动轨迹,并将滑动轨迹对应的数据发送至计算机,计算机中的模拟学习软件对手柄的滑动轨迹对应的数据进行分析。在分析完成后,该模拟学习软件还控制虚拟现实场景中的用户执行与手柄的滑动轨迹匹配的操作并显示操作对应的结果,本申请对此不作限定。
应理解,上述模拟学习软件还可安装到虚拟现实头盔中,本申请对此不作限定。
此外,虽然图1中示出了手柄和采集设备共同出现的方案,但本领域的技术人员还可根据实际需求仅通过手柄和采集设备中的一种设备来获取用户的手势动作,本申请对此不作限定。
应理解,图1中示出的虚拟现实头盔和手柄还可称为其他的名字,只要保证具有相应的功能即可,本申请实施例并不局限于此。例如,虚拟现实头盔还可称为虚拟现实设备,或虚拟现实头戴。
请参照图2,图2是本申请实施例提供的一种基于虚拟现实的模拟学习方法的流程示意图,所述方法包括如下步骤:
步骤S210,预先建立虚拟现实场景。
在步骤S210中,可通过图像采集设备采集所需的现实场景的图像,并将现实场景的图像上传到计算机中。后续计算机可通过游戏引擎来渲染出与图像对应的虚拟现实场景,并将虚拟现实场景保存,以便后续在重复使用该图像对应的虚拟现实场景的情况下,无需再次建立,只需调用相关的数据即可。
例如,通过图像采集设备采集厨房的现实场景的图像,并将厨房的图像上传到计算机。该计算机通过厨房的图像来建立虚拟厨房场景,该虚拟厨房场景中可设置有厨具、食材、调料等,从而保证了通过虚拟厨房场景能够进行烹饪的学习,本申请对此不作限定。
再例如,通过图像采集设备采集实验室的现实场景的图像,并将实验室的图像上传到计算机。该计算机通过实验室的图像来建立虚拟实验室场景,该虚拟实验室场景中设置有实验器具、实验所需试剂等,从而保证了通过虚拟实验室场景能够进行实验的学习,本申请对此不作限定。
应理解,虽然本实施例对虚拟现实场景中的虚拟厨房场景和虚拟实验室场景进行了描述,但本领域的技术人员还可根据实际需求来建立所需的虚拟现实场景,本申请对此不作限定。
另外,在除单人之外的多人同时登录模拟学习软件的情况下,由于其预先建立了虚拟现实场景,从而在多人同时登录的情况下,只需调用每个用户选择的虚拟现实场景的相关数据即可,无需重复建立虚拟现实场景,进而满足了多人同时在线的模拟学习需求。
步骤S220,呈现虚拟现实场景。
在步骤S220中,在用户佩戴有虚拟现实头盔的情况下,用户可预先通过登录模拟学习软件来选择所需的虚拟现实场景,随后计算机将用户选择的虚拟现实场景呈现在虚拟现实头盔的显示器中。
例如,在用户登录模拟学习软件后,用户可通过模拟学习软件的操作界面来选择所需的虚拟厨房场景,并且该虚拟厨房场景可分为不同类型的虚拟厨房场景。随后,计算机将用户最终选择的虚拟厨房场景呈现到虚拟现实头盔的显示器中,本申请对此不作限定。
再例如,在用户登录模拟学习软件后,用户可通过模拟学习软件的操作界面来选择所需的虚拟实验室场景,并且该虚拟实验室场景可分为虚拟物理实验室场景、虚拟化学实验室场景和虚拟生物实验室场景。随后,计算机将用户最终选择的虚拟实验室场景呈现在虚拟现实头盔的显示器中,本申请对此不作限定。
步骤S230,获取用户的手势动作。
在步骤S230中,在用户的手上设置有感应设备的情况下,可通过采集设备来获取用户的手势动作。
例如,在用户所处房间的角落设置有采集设备的情况下,该采集设备可采集手柄相关的手势动作,其中,手势动作包括用户晃动手柄的动作、或左手按钮右手摆特定手势等,此外,用户按下手柄的相关信号,可通过无线的方式传输给计算,本申请对此不作限定。
再例如,在用户所处房间的角落设置有采集设备的情况下,该采集设备可采集感应手套相关的手势动作,其中,手势动作可为用户的手的摆动的动作、或用户的手摆出特定的手势等,本申请对此不作限定。
步骤S240,在虚拟现实场景中显示与手势动作匹配的用户的操作。
在步骤S240中,上述模拟学习软件可根据获取到的用户的手势动作,来确定与手势动作相匹配的用户的操作,并控制虚拟现实场景中的用户执行与手势动作匹配的操作。
例如,在虚拟现实环境为虚拟厨房场景的情况下,模拟学习软件可根据获取到的用户的手势动作,来确定与手势动作相匹配的用户的操作,并控制虚拟现实场景中的用户执行与手势动作相匹配的操作。其中,上述操作可包括调节炉火大小、放置食材或放置调料。在用户利用虚拟厨房场景进行烹饪学习的情况下,其避免了实际操作过程中存在的食材浪费、划伤手指等问题。
再例如,在虚拟现实环境为虚拟实验室场景的情况下,模拟学习软件可根据取到的用户的手势动作,来确定与手势动作相匹配的用户的操作,并控制虚拟现实场景中的用户执行与手势动作相匹配的操作。其中,上述操作可包括物理实验相关的操作、化学实验相关的操作和生物实验相关的操作,物理实验相关的操作可包括组装物理实验所需使用的仪器、温度测量或电阻测量等操作,化学实验相关的操作可包括不同试剂的混合、试剂的冷却或试剂的加热等操作,生物实验相关的操作可包括生物的解剖相关的操作、遗传相关的操作或生态实验相关的操作等。在用户利用虚拟实验室场景进行模拟学习的情况下,其无需担心实际操作过程中存在着的炸伤等安全问题。
应理解,虽然上面对虚拟厨房场景中的操作和虚拟实验室场景中的操作进行了举例,但本领域的技术人员还可根据实际需求设置相关操作,本申请对此不作限定。
还应理解,上述通过用户的手势动作确定与手势动作相匹配的用户的操作的方式可根据实际需求进行设置。例如,预先利用游戏引擎构建手势动作和虚拟现实环境中的操作的对应关系表,随后在模拟学习软件获取到用户实时的手势动作后,通过查询对应关系表来获取在虚拟现实环境中与用户的手势动作匹配的用户的操作,本申请对此不作限定。
另外,在虚拟现实场景为不同的虚拟现实场景的情况下,用户的相同的手势可在不同的虚拟现实环境中匹配相同的操作,也可在不同的虚拟现实环境中匹配不同的操作,本申请对此不做限定。
步骤S250,在虚拟现实场景中显示与操作对应的结果。
在步骤S250中,在动态数据库中存储有原始参数,该原始参数的初始状态可均为零。后续可根据上述原始参数来建立虚拟现实场景,并且模拟学习软件可根据操作来调整动态数据库中的原始参数,以获得调整后的参数。最后模拟学习软件在虚拟现实场景中显示与调整后的参数对应的结果。其中,该结果可为调整后的参数,也可为当前时间的烹饪状态,也可为当前时间的实验结果。
例如,在虚拟现实场景为虚拟厨房场景的情况下,动态数据库中存储的原始参数可包括炉火强度,后续根据上述原始参数来建立虚拟现实场景,后续用户的操作为打开炉火的情况下,更新动态数据库中的原始参数,即可更新炉火强度参数,从而模拟学习软件在虚拟现实场景中显示与调整后的炉火强度参数对应的结果。
应理解,虽然本实施例以虚拟厨房场景对应的动态数据库中的参数进行了举例,但本领域的技术人员可根据实际需求来对不同虚拟现实场景对应的动态数据库中的参数进行设置,本申请对此不作限定。
另外,该模拟学习软件的操作界面还可显示有学习模式和考核模式两种模式。其中,学习模式可为在虚拟现实场景中具有提示信息,用户可根据提示信息进行操作;考核模式可为用户在虚拟现实场景中自主的进行操作,计算机会记录用户的操作过程,并依据记录的操作过程进行后续评级或打分。
因此,本申请通过虚拟现实技术呈现用户需求的虚拟现实场景,并且用户可在虚拟现实场景中进行相关操作,以及在虚拟现实场景中还会显示与用户的操作对应的结果,从而在达到了用户学习的目的的同时,还能够避免用户实际操作过程中存在的问题。
为了更好的理解本申请的技术方案,下面以烹饪中的煎牛排的过程来对本申请的技术方案进行描述。当然应该理解,煎牛排的相关技术特征同样适用于其他的模拟学习过程,本申请对此不做限定。
请参见图3,图3是本申请实施例提供的一种基于虚拟现实的模拟学习煎牛排的方法的流程示意图,所述方法包括:
步骤S310,预先配置动态数据库中的原始参数,并根据原始参数预先建立虚拟现实场景。
在步骤S310中,如图4所示,图4是本申请实施例提供的一种动态数据库的参数配置的示意图。该动态数据库中的参数包括炉火强度、程序运行时间、牛肉当前营养含量、当前锅温、当前牛肉盐含量、牛肉当前位置与角度、当前锅内有量、当前牛肉胡椒粉含量、锅当前位置与角度、当前(B面)牛排成熟度和当前(A面)牛排成熟度。
其中,炉火强度用于表示炉火的大小,它取决于虚拟炉台控制器的设计以及使用状态。其中,虚拟炉台可以是旋钮式,或使用按钮指定温度,或现实世界中存在的各种炉台设计。使用者在虚拟世界中,使用手与虚拟炉台实现交互,控制温度。比如,旋转旋钮式虚拟炉台的旋钮,可实现对炉火强度的控制。
程序运行时间用于表示模拟学习软件的运行时间。
牛肉当前营养含量用于表示当前牛排的营养含量。其中,营养含量是根据炉火强度、当前锅温、当前锅内油量、当前(B面)牛排成熟度和当前(A面)牛排成熟度等多个参数来计算的,其可实时算出。
当前锅温用于表示当前时间的锅具的温度。
当前牛肉盐含量用于表示当前牛排中的盐的含量,它取决于用户在牛排上放盐的时长。
牛肉当前位置与角度用于表示当前时间的牛排在锅具内的位置,以及牛排的标准面(如A面)与锅具的底面之间的角度。
当前锅内油量用于表示当前时间锅内油的含量,它取决于用户往锅内放置油的时间。
当前牛肉胡椒粉含量用于表示当前时间的牛排上的胡椒粉的含量,它取决于用户在牛排上放置胡椒粉的时长。
锅当前位置与角度用于表示锅具当前所处的位置与锅具的底面和水平面之间的角度。
当前(B面)牛排成熟度和当前(A面)牛排成熟度用于表示牛排的相对两个面的熟度。
步骤S320,在虚拟现实头盔的显示器中呈现虚拟厨房场景。
步骤S330,询问用户是否结束,在用户确认没有结束的情况下,执行步骤S340,然而,在用户确认结束的情况下,执行步骤S370。
步骤S340,模拟学习软件检测交互事件Event是否触发。其中,该交互事件Event是与确定与用户的手势动作匹配的用户的操作相对应的事件。
在步骤S340中,请参照图5,图5是本申请实施例提供的一种事件列表的示意图。该事件列表中的事件包含调节炉火强度、牛肉A/B面接触锅表面、调料(盐、胡椒粉)置放区域与牛肉重叠、油放置区域与锅面重叠、抓起/放下锅和抓起/放下牛肉。
其中,调节炉火强度用于表示调节炉台上的旋钮,从而达到调节炉火强的目的。
牛肉A/B面接触锅表面用于表示牛排的那个面与锅具的底面接触。它可通过用户可对虚拟厨房场景中的牛排进行翻转,以达到牛肉A/B面接触锅表面的目的,其可通过对照锅的方向检测牛排的方向,以判断牛排的哪一面贴着锅面。
调料(盐、胡椒粉)置放区域与牛肉重叠用于表示用户可往牛排上放置调料,即虚拟厨房场景中的调料和油可被使用者拿起,并且洒落在肉/锅的置放区域。
油放置区域与锅面重叠用于表示锅具中放置油的区域。
抓起/放下锅用于表示用户可对虚拟厨房场景中的锅具进行操作。
抓起/放下牛肉用于表示用户可对虚拟厨房场景中的牛肉进行操作。
步骤S350,根据事件Event的触发类型,更新动态数据库中的参数。
在步骤S350中,在确定事件Event的触发类型后,根据用户在虚拟厨房场景中的操作来更新动态数据库中的参数。
例如,在确定事件Event的触发类型为调节炉火强度的情况下,用户可通过在虚拟厨房场景中的调节炉火强度的操作来更新动态数据库中对应的炉火强度,本申请对此不做限定。
步骤S360,显示数据库参数,并返回到步骤S330。
当然可以理解,在虚拟现实场景中显示与操作对应的结果可为数据库的参数,也可为模拟虚拟厨房场景中显示各个时间点的牛排、炉火等事物的状态。对应地,步骤S370的情况类似,不再重复描述。
步骤S370,显示数据库参数。
步骤S380,退出。
应理解,上述基于虚拟现实的模拟学习方法仅是示例性的,本领域技术人员根据上述的方法可以进行各种变形。
请参照图6,图6为本申请实施例提供的一种基于虚拟现实的模拟学习装置600的结构框图,该装置可以运行于电子设备上的模块、程序段或代码。应理解,该模拟学习装置600与上述图2方法实施例对应,能够执行图2方法实施例涉及的各个步骤,该模拟学习装置600具体的功能可以参见上文中的描述,为避免重复,此处适当省略详细描述。可选地,所述模拟学习装置600包括:
呈现模型610,用于呈现虚拟现实场景;
获取模块620,用于获取用户的手势动作;
显示模块630,用于在虚拟现实场景中显示与手势动作匹配的用户的操作;显示模块630,还用于在虚拟现实场景中显示与操作对应的结果。
在一个可能的实施例中,虚拟现实场景为虚拟厨房场景,显示模块630,还用于在虚拟厨房场景中显示操作,其中,操作包括调节炉火、放置食材或放置调料。
在一个可能的实施例中,虚拟现实场景为虚拟实验室场景,显示模块630,还用于在虚拟实验室场景中显示操作,其中,操作包括物理实验相关的操作、化学实验相关的操作和生物实验相关的操作。
在一个可能的实施例中,模拟学习装置还包括:建立模块(未示出),用于预先建立虚拟现实场景。
在一个可能的实施例中,建立模块,还用于根据原始参数预先建立虚拟现实场景;其中,模拟学习装置还包括:调整模块,用于根据操作调整原始参数,获得调整后的参数;显示模块,还用于在虚拟现实场景中显示与调整后的参数对应的结果。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置的具体工作过程,可以参考前述方法中的对应过程,在此不再过多赘述。
本申请还提供一种装置,图7为本申请实施例中的装置700的结构框图,如图7所示。装置700可以包括处理器710、通信接口720、存储器730和至少一个通信总线740。其中,通信总线740用于实现这些组件直接的连接通信。其中,本申请实施例中设备的通信接口720用于与其他节点设备进行信令或数据的通信。处理器710可以是一种集成电路芯片,具有信号的处理能力。上述的处理器710可以是通用处理器,包括中央处理器(CentralProcessing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器710也可以是任何常规的处理器等。
存储器730可以是,但不限于,随机存取存储器(Random Access Memory,RAM),只读存储器(Read Only Memory,ROM),可编程只读存储器(Programmable Read-OnlyMemory,PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,EEPROM)等。存储器730中存储有计算机可读取指令,当所述计算机可读取指令由所述处理器710执行时,装置700可以执行上述图2方法实施例涉及的各个步骤。
装置700还可以包括存储控制器、输入输出单元、采集装置。音频单元、显示单元8。
所述存储器730、存储控制器、处理器710、外设接口、输入输出单元、音频单元、显示单元各元件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通信总线740实现电性连接。所述处理器710用于执行存储器730中存储的可执行模块,例如装置300包括的软件功能模块或计算机程序。并且,装置300用于执行下述方法:呈现虚拟现实场景;获取用户的手势动作;在虚拟现实场景中显示与手势动作匹配的用户的操作;以及在虚拟现实场景中显示与操作对应的结果。
输入输出单元用于提供给用户输入数据实现用户与所述服务器(或本地终端)的交互。所述输入输出单元可以是,但不限于,鼠标和键盘等。
音频单元向用户提供音频接口,其可包括一个或多个麦克风、一个或者多个扬声器以及音频电路。
显示单元在所述电子设备与用户之间提供一个交互界面(例如用户操作界面)或用于显示图像数据给用户参考。在本实施例中,所述显示单元可以是虚拟现实头盔上的显示器,也可以是用于投放图像的屏幕等。
输入输出单元用于提供给用户输入数据实现用户与处理终端的交互。所述输入输出单元可以是,但不限于,鼠标和键盘等。
可以理解,图7所示的结构仅为示意,所述装置700还可包括比图7中所示更多或者更少的组件,或者具有与图7所示不同的配置。图7中所示的各组件可以采用硬件、软件或其组合实现。
本申请还提供一种计算机介质,该计算机介质上存储有计算机程序,该计算机程序被处理器运行时执行方法实施例所述的方法。
本申请还提供一种计算机程序产品,所述计算机程序产品在计算机上运行时,使得计算机执行方法实施例所述的方法。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统的具体工作过程,可以参考前述方法中的对应过程,在此不再过多赘述。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种基于虚拟现实的模拟学习方法,其特征在于,包括:
呈现虚拟现实场景;
获取用户的手势动作;
在所述虚拟现实场景中显示与所述手势动作匹配的用户的操作;
在所述虚拟现实场景中显示与所述操作对应的结果。
2.根据权利要求1所述的模拟学习方法,其特征在于,所述虚拟现实场景为虚拟厨房场景,所述在所述虚拟现实场景中显示与所述手势动作匹配的用户的操作,包括:
在所述虚拟厨房场景中显示所述操作,其中,所述操作包括调节炉火、放置食材或放置调料。
3.根据权利要求1所述的模拟学习方法,其特征在于,所述虚拟现实场景为虚拟实验室场景,所述在所述虚拟现实场景中显示与所述手势动作匹配的用户的操作,包括:
在所述虚拟实验室场景中显示所述操作,其中,所述操作包括物理实验相关的操作、化学实验相关的操作和生物实验相关的操作。
4.根据权利要求2或3所述的模拟学习方法,其特征在于,所述模拟学习方法还包括:
预先建立所述虚拟现实场景。
5.根据权利要求4所述的模拟学习方法,其特征在于,所述预先建立所述虚拟现实场景,包括:
根据原始参数预先建立所述虚拟现实场景;
其中,所述在所述虚拟现实场景中显示与所述操作对应的结果,包括:
根据所述操作调整所述原始参数,获得调整后的参数;
在所述虚拟现实场景中显示与所述调整后的参数对应的结果。
6.一种基于虚拟现实的模拟学习装置,其特征在于,包括:
呈现模型,用于呈现虚拟现实场景;
获取模块,用于获取用户的手势动作;
显示模块,用于在所述虚拟现实场景中显示与所述手势动作匹配的用户的操作;
所述显示模块,还用于在所述虚拟现实场景中显示与所述操作对应的结果。
7.根据权利要求6所述的模拟学习装置,其特征在于,所述虚拟现实场景为虚拟厨房场景,所述显示模块,还用于在所述虚拟厨房场景中显示所述操作,其中,所述操作包括调节炉火、放置食材或放置调料。
8.根据权利要求6所述的模拟学习装置,其特征在于,所述虚拟现实场景为虚拟实验室场景,所述显示模块,还用于在所述虚拟实验室场景中显示所述操作,其中,所述操作包括物理实验相关的操作、化学实验相关的操作和生物实验相关的操作。
9.根据权利要求7或8所述的模拟学习装置,其特征在于,所述模拟学习装置还包括:
建立模块,用于预先建立所述虚拟现实场景。
10.一种计算机介质,其特征在于,所述计算机介质上存储有计算机程序,所述计算机程序被处理器运行时执行如权利要求1-5任一所述的基于虚拟现实的模拟学习方法。
CN201910411193.2A 2019-05-17 2019-05-17 基于虚拟现实的模拟学习方法、装置和计算机介质 Pending CN110047338A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910411193.2A CN110047338A (zh) 2019-05-17 2019-05-17 基于虚拟现实的模拟学习方法、装置和计算机介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910411193.2A CN110047338A (zh) 2019-05-17 2019-05-17 基于虚拟现实的模拟学习方法、装置和计算机介质

Publications (1)

Publication Number Publication Date
CN110047338A true CN110047338A (zh) 2019-07-23

Family

ID=67282394

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910411193.2A Pending CN110047338A (zh) 2019-05-17 2019-05-17 基于虚拟现实的模拟学习方法、装置和计算机介质

Country Status (1)

Country Link
CN (1) CN110047338A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110782729A (zh) * 2019-11-05 2020-02-11 山东科技大学 一种煤页岩吸附/解吸评价实验仿真实训系统及教学与实践方法
CN110827605A (zh) * 2019-11-27 2020-02-21 国网江苏省电力有限公司技能培训中心 一种基于虚拟现实的培训方法和装置
CN111369852A (zh) * 2020-03-03 2020-07-03 山东女子学院 基于虚拟现实的基因编辑实验教学仿真方法及系统
CN111369854A (zh) * 2020-03-20 2020-07-03 广西生态工程职业技术学院 一种Vr虚拟现实实验室的操作系统及方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105867634A (zh) * 2016-04-25 2016-08-17 张锦浩 一种虚拟家庭烹饪学习系统
DE102015103735A1 (de) * 2015-03-13 2016-09-15 Airbus Defence and Space GmbH Verfahren und Vorrichtung zum Testen eines in einem Luftfahrzeug zu bedienenden Geräts
CN106448399A (zh) * 2016-08-31 2017-02-22 刘锦宏 基于虚拟现实技术的微创手术模拟方法
CN106530880A (zh) * 2016-08-31 2017-03-22 徐丽芳 基于虚拟现实技术的实验模拟方法
CN106873787A (zh) * 2017-04-10 2017-06-20 武汉大学 一种用于虚拟手术仿真教学的手势交互系统及方法
CN106990849A (zh) * 2017-05-08 2017-07-28 佛山市神风航空科技有限公司 一种基于虚拟现实的小型实验室
CN107221216A (zh) * 2017-05-24 2017-09-29 云南电网有限责任公司教育培训评价中心 基于虚拟现实技术的变电站安全案例式仿真培训方法
KR20180092637A (ko) * 2017-02-10 2018-08-20 한국전자통신연구원 가시광 기반의 전자 메뉴 시스템을 위한 테이블 인식 방법 및 이를 위한 장치
CN108711328A (zh) * 2018-05-16 2018-10-26 上海新奥新能源技术有限公司 一种加气站安全教育方法、装置及系统

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015103735A1 (de) * 2015-03-13 2016-09-15 Airbus Defence and Space GmbH Verfahren und Vorrichtung zum Testen eines in einem Luftfahrzeug zu bedienenden Geräts
CN105867634A (zh) * 2016-04-25 2016-08-17 张锦浩 一种虚拟家庭烹饪学习系统
CN106448399A (zh) * 2016-08-31 2017-02-22 刘锦宏 基于虚拟现实技术的微创手术模拟方法
CN106530880A (zh) * 2016-08-31 2017-03-22 徐丽芳 基于虚拟现实技术的实验模拟方法
KR20180092637A (ko) * 2017-02-10 2018-08-20 한국전자통신연구원 가시광 기반의 전자 메뉴 시스템을 위한 테이블 인식 방법 및 이를 위한 장치
CN106873787A (zh) * 2017-04-10 2017-06-20 武汉大学 一种用于虚拟手术仿真教学的手势交互系统及方法
CN106990849A (zh) * 2017-05-08 2017-07-28 佛山市神风航空科技有限公司 一种基于虚拟现实的小型实验室
CN107221216A (zh) * 2017-05-24 2017-09-29 云南电网有限责任公司教育培训评价中心 基于虚拟现实技术的变电站安全案例式仿真培训方法
CN108711328A (zh) * 2018-05-16 2018-10-26 上海新奥新能源技术有限公司 一种加气站安全教育方法、装置及系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李建: "《虚拟现实(VR)技术与应用》", 31 January 2018, 开封:河南大学出版 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110782729A (zh) * 2019-11-05 2020-02-11 山东科技大学 一种煤页岩吸附/解吸评价实验仿真实训系统及教学与实践方法
CN110827605A (zh) * 2019-11-27 2020-02-21 国网江苏省电力有限公司技能培训中心 一种基于虚拟现实的培训方法和装置
CN111369852A (zh) * 2020-03-03 2020-07-03 山东女子学院 基于虚拟现实的基因编辑实验教学仿真方法及系统
CN111369854A (zh) * 2020-03-20 2020-07-03 广西生态工程职业技术学院 一种Vr虚拟现实实验室的操作系统及方法

Similar Documents

Publication Publication Date Title
CN110047338A (zh) 基于虚拟现实的模拟学习方法、装置和计算机介质
EP3107429B1 (en) Methods and systems for food preparation in a robotic cooking kitchen
JP7117104B2 (ja) 電子小規模操作ライブラリを用いて計装環境内でドメイン特定アプリケーションを実行するためのロボット操作方法及びシステム
CN108778634A (zh) 包括机器人、存放装置及其容器的机器人厨房
JP2005504259A (ja) 料理法の全情報記録システム及びロボットによる自動料理システム
JP7010542B2 (ja) 作業分析装置、作業分析方法、及びプログラム
Baurley et al. Modalities of expression: Capturing embodied knowledge in cooking
Falcão et al. Ergonomics, Usability and Virtual Reality: a review applied to consumer product
Colvin et al. Multiple user motion capture and systems engineering
CN103744608B (zh) 一种信息处理方法及电子设备
TW202017626A (zh) 資訊處理裝置、中介裝置、模擬系統以及資訊處理方法
CN112543961A (zh) 训练处理装置、中介装置、训练系统以及训练处理方法
US20220331957A1 (en) Data processing device, data processing method, and cooking robot
Kováč et al. Integrated designing of production systems on the physical and virtual modelling base
US20220040844A1 (en) Information processing apparatus, information processing method and computer program
Kuhlang et al. Human Work Design: Modern Approaches for Designing Ergonomic and Productive Work in Times of Digital Transformation–An International Perspective
Hald et al. Testing augmented reality systems for spotting sub-surface impurities
JP7237316B2 (ja) 職業訓練装置
EP4011255A1 (en) Information processing device, information processing method, cooking robot, cooking method, and cooking instrument
US20230063302A1 (en) Data processing apparatus and data processing method
JP2019179209A (ja) 投影システム
Adam Towards more realism: Improving immersion of a virtual human-robot working cell and discussing the comparability with its real-world representation
US20210110348A1 (en) Information processing system, information processing apparatus, and non-transitory computer readable medium
KR20220119602A (ko) 정보 처리 장치, 정보 처리 방법
JP2023011488A (ja) システム、情報処理装置、方法、プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 570300 702, building 8, Palm Springs, No. 30, Qiuhai Avenue, Xiuying District, Haikou City, Hainan Province

Applicant after: SHANDONG SPORT University

Applicant after: Hainan Luolin Network Technology Co., Ltd

Address before: 250100 No. 10600 Century Avenue, Licheng District, Jinan City, Shandong Province

Applicant before: SHANDONG SPORT University

Applicant before: Shandong Luolin Network Technology Co., Ltd

CB02 Change of applicant information