CN115966119B - 基于vr技术的模拟旅游训练方法、系统、设备及介质 - Google Patents
基于vr技术的模拟旅游训练方法、系统、设备及介质 Download PDFInfo
- Publication number
- CN115966119B CN115966119B CN202211698088.XA CN202211698088A CN115966119B CN 115966119 B CN115966119 B CN 115966119B CN 202211698088 A CN202211698088 A CN 202211698088A CN 115966119 B CN115966119 B CN 115966119B
- Authority
- CN
- China
- Prior art keywords
- execution instruction
- audio
- instruction
- preset
- acquiring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本申请涉及一种基于VR技术的模拟旅游训练方法、系统、设备及介质,其包括步骤当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面。本申请具有提高工作人员对场景画面的引导介绍与用户实际体验的场景的同步性,提升用户体验感的效果。
Description
技术领域
本申请涉及智能分析的技术领域,尤其是涉及一种基于VR技术的模拟旅游训练方法、系统、设备及介质。
背景技术
基于VR技术的模拟旅游,是指利用VR虚拟现实技术,通过模拟或超现实景构建一个虚拟的三维立体旅游环境,用户足不出户既能体验形象逼真的风光美景。
普遍的,用户通过佩戴VR设备进入虚拟现实的旅游场景,且用户体验的实时场景画面同时在PC端进行播放,以供现场负责场景讲解的工作人员对用户进行体验引导,即充当导游角色,目前,工作人员在进行体验引导训练时,需要根据旅游场景画面的切换进行介绍和引导,而旅游场景画面的切换一般取决于画面的预设时长,易出现工作人员的引导介绍与画面不同步的情况,降低了用户的体验感,因此需要改进。
发明内容
为了提高工作人员对场景画面的引导介绍与用户实际体验的场景的同步性,提升用户体验感;本申请提供了一种基于VR技术的模拟旅游训练方法、系统、设备及介质。
本申请的上述发明目的一是通过以下技术方案得以实现的:
一种基于VR技术的模拟旅游训练方法,包括步骤:
当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;
将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;
当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;
将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面。
通过采用上述技术方案,工作人员对用户所体验的虚拟现实旅游进行引导介绍前,先开启音频采集终端,使音频采集终端发出语音启动指令,进而实时获取音频采集终端所采集的工作人员的音频数据,通过对工作人员的音频进行模糊匹配规则识别,能够识别出音频数据中与预设音频特征匹配的用于切换旅游场景画面的特征数据,再获取所被匹配到的预设音频特征的目标执行指令,将目标执行指令发送至VR设备终端,就能够完成旅游场景画面的切换,采用此方法,工作人员对于旅游场景画面的切换的主动性较强,即通过语音识别进行切换,当对用户引导过程中出现意外停顿的情况时,工作人员能够在处理意外情况后,仍通过语音识别保持旅游场景画面与引导介绍的同步性,提升用户体验感,同时,旅游场景的切换由语音识别决定,进而,工作人员能够根据用户的需求随意切换各种旅游场景,相比现有的固定旅游场景画面顺序,更能够满足用户的不同需求。
本申请在一较佳示例中:所述当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令的步骤,包括步骤:
当识别到与预设音频特征匹配的特征数据时,获取该预设音频特征关联的执行指令;
获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令;
若可执行,则将该执行指令作为目标执行指令;
若不可执行,则视为未获取到目标执行指令。
通过采用上述技术方案,在引导和介绍不同旅游场景画面的过程中,当出现识别到的特征数据并不适宜在当前旅游场景画面执行的情况,因此需要通过获取旅游场景画面的画面进度信息,通过当前旅游场景画面的进度,判断是否将识别到的执行指令作为目标执行指令,对执行指令是否能作为目标执行指令进行判断,能够避免旅游场景画面的误切换,旅游场景画面的切换更为可靠,提升用户体验感。
本申请在一较佳示例中:所述获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令的步骤,包括步骤:
基于当前旅游场景画面的画面进度信息,获取当前旅游场景画面的已执行指令;
基于已执行指令判断是否可执行当前的执行指令。
通过采用上述技术方案,通过画面进度进行能够获取当前旅游场景画面已经执行的指令,基于已执行的指令判断当前所识别到的特征数据匹配的预设音频特征的关联的执行指令是否可执行,即通过执行指令的前后关系判断,通过旅游场景画面中执行指令的关系,实现执行指令是否可作为目标执行指令地判断。
本申请在一较佳示例中:所述基于已执行指令判断是否可执行当前的执行指令的步骤,包括步骤:
获取当前预设音频特征关联的执行指令的执行逻辑关系;
基于该执行指令的执行逻辑关系,判断该执行指令的执行是否存在前置执行指令;
若存在前置执行指令且当前前置执行指令均为已执行指令,则将该执行指令作为目标执行指令。
通过采用上述技术方案,通过各旅游场景画面中前后执行指令之间的执行逻辑关系,例如B执行指令被作为目标执行指令的前置条件为,该执行指令的前置执行指令A在当前旅游场景画面中已被执行,或C执行指令被作为目标执行指令的前置条件为:作为前置执行指令的执行指令A和执行指令B是否均被执行,通过将旅游场景画面中各执行指令通过执行逻辑进行关联,能够对目标执行指令做出准确的判断。
本申请在一较佳示例中:若旅游场景画面的切换需识别用户的手势动作,则将音频数据输入音频识别模型,基于预设的模糊匹配规则从数据库中识别与预设音频特征匹配的特征数据的步骤之后,执行如下步骤:
当识别到与预设音频特征匹配的特征数据时,判断该预设音频特征是否关联当前旅游场景画面的用于解锁动作采集功能的解锁指令;
若是,则将解锁指令发送至VR设备终端,解锁VR设备终端的动作识别功能以识别用户的手势动作;
VR设备终端基于解锁指令解锁隐藏提示数据,隐藏提示数据用于展示在旅游场景画面以引导用户做出对应的动作。
通过采用上述技术方案,旅游场景画面的引导和介绍过程中,当画面的切换需要识别用户手势动作时,为了避免用户误触发手势使得旅游场景画面与当前引导不同步,通过语音识别功能对需要用户手势识别的执行指令进行前置的解锁,即用户进行手势识别以切换旅游场景画面前,需要工作人员通过语音识别生成解锁指令后,用户所做的切换旅游场景画面的手势才能被识别到。
且VR设备终端接收到解锁指令后,解锁隐藏的提示数据,用户通过穿戴的VR设备能够观看到提示数据,即提示动作,对用户做出的手势进行引导,方便用户顺利切换旅游场景画面。
本申请在一较佳示例中:音频采集终端用于供工作人员佩戴,所述当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据的步骤,包括步骤:
获取音频信号的分贝值;
将分贝值与音频分贝的预设值进行比较,过滤掉分贝值小于预设值的音频信号;
获取分贝值大于或等于预设值的音频信号,作为用于输入音频识别模型的音频数据。
通过采用上述技术方案,音频采集终端用于供工作人员佩戴,能够接收到工作人员较为清晰的音频,进一步,通过对音频的分贝值进行比较,并筛除分贝值较小的音频,能够减少除工作人员之外的例如用户或其他无关人员触发目标执行指令的情况,旅游场景的引导和介绍更为可靠,提升用户的体验感。
本申请的上述发明目的二是通过以下技术方案得以实现的:
一种基于VR技术的模拟旅游训练系统,包括:
采集启动模块,用于当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;
音频匹配模块,用于将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;
指令获取模块,用于当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;
指令发送模块,用于将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面。
通过采用上述技术方案,工作人员对用户所体验的虚拟现实旅游进行引导介绍前,先开启音频采集终端,使音频采集终端发出语音启动指令,进而实时获取音频采集终端所采集的工作人员的音频数据,通过对工作人员的音频进行模糊匹配规则识别,能够识别出音频数据中与预设音频特征匹配的用于切换旅游场景画面的特征数据,再获取所被匹配到的预设音频特征的目标执行指令,将目标执行指令发送至VR设备终端,就能够完成旅游场景画面的切换,采用此方法,工作人员对于旅游场景画面的切换的主动性较强,即通过语音识别进行切换,当对用户引导过程中出现意外停顿的情况时,工作人员能够在处理意外情况后,仍通过语音识别保持旅游场景画面与引导介绍的同步性,提升用户体验感,同时,旅游场景的切换由语音识别决定,进而,工作人员能够根据用户的需求随意切换各种旅游场景,相比现有的固定旅游场景画面顺序,更能够满足用户的不同需求。
可选的,指令获取模块包括:
指令关联子模块,用于当识别到与预设音频特征匹配的特征数据时,获取该预设音频特征关联的执行指令;
画面进度子模块,用于获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令;
执行判断子模块,用于若可执行,则将该执行指令作为目标执行指令;
执行判断子模块,用于若不可执行,则视为未获取到目标执行指令。
本申请的上述目的三是通过以下技术方案得以实现的:
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述一种基于VR技术的模拟旅游训练方法的步骤。
本申请的上述目的四是通过以下技术方案得以实现的:
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述一种基于VR技术的模拟旅游训练方法的步骤。
综上所述,本申请包括以下至少一种有益技术效果:
1.工作人员对于旅游场景画面的切换的主动性较强,即通过语音识别进行切换,当对用户引导过程中出现意外停顿的情况时,工作人员能够在处理意外情况后,仍通过语音识别保持旅游场景画面与引导介绍的同步性,提升用户体验感,同时,旅游场景的切换由语音识别决定,进而,工作人员能够根据用户的需求随意切换各种旅游场景,相比现有的固定旅游场景画面顺序,更能够满足用户的不同需求;
2.通过获取旅游场景画面的画面进度信息,通过当前旅游场景画面的进度,判断是否将识别到的执行指令作为目标执行指令,对执行指令是否能作为目标执行指令进行判断,能够避免旅游场景画面的误切换,旅游场景画面的切换更为可靠,提升用户体验感;
3.通过画面进度进行能够获取当前旅游场景画面已经执行的指令,基于已执行的指令判断当前所识别到的特征数据匹配的预设音频特征的关联的执行指令是否可执行,即通过执行指令的前后关系判断,通过旅游场景画面中执行指令的关系,实现执行指令是否可作为目标执行指令地判断;
4.通过对音频的分贝值进行比较,并筛除分贝值较小的音频,能够减少除工作人员之外的例如用户或其他无关人员触发目标执行指令的情况,旅游场景的引导和介绍更为可靠,提升用户的体验感。
附图说明
图1是本申请一种基于VR技术的模拟旅游训练方法实施例的一流程图;
图2是本申请一种基于VR技术的模拟旅游训练方法实施例中步骤S30的一实现流程图;
图3是本申请一种基于VR技术的模拟旅游训练方法实施例中步骤S322的一实现流程图;
图4是本申请一种基于VR技术的模拟旅游训练方法实施例中步骤S20之后的一实现流程图;
图5是本申请一种基于VR技术的模拟旅游训练方法实施例中步骤S10的一实现流程图;
图6是本申请一种计算机设备的一原理框图。
具体实施方式
以下结合附图1-6对本申请作进一步详细说明。
在一实施例中,如图1所示,本申请公开了一种基于VR技术的模拟旅游训练方法,具体包括如下步骤:
S10:当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;
在本实施例中,音频采集终端是指用于采集工作人员声音的设备终端,语音启动指令是指音频采集终端启动音频采集功能的指令,所采集的音频数据来自该引导用户体验虚拟现实旅游场景的工作人员。
具体的,工作人员启动音频采集终端后,音频采集终端发出语音启动指令,此时音频采集终端实时采集来自工作人员的音频数据。
S20:将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;
在本实施例中,音频识别模型设置于云平台,是经过训练的用于对音频数据进行特征识别的模型;特征数据的提取是基于FFT频域信息进行提取。
由于存在较多外界因素会导致提取的特征与原特征存在误差,需要通过模糊匹配规则来降低误差对结果的影响。比如FFT切段的过程会引入高频噪声,50Hz的工频也会引入噪声,所以一般取FFT频段时是选择64~3300Hz范围内的。模糊匹配方面,就可以把特征中每个值都做一下+/-1,生成大量子特征至索引库里查询。如上的识别结果只是一些点,说明这个点匹配出了一些结果,往往结果还很多。此时还需要将点连成段才算是有意义的结果。例如识别出来旅游场景名称为“喜马拉?山”的特征数据,中间的“雅”字未能识别出来,此时索引库里已经包含句子“喜马拉雅山”。那么就能大概匹配到索引库里的预设音频特征-喜马拉雅山。
具体的,将所获取到的音频数据输入至设置于云平台的音频识别模型,音频识别模型基于接收到的音频数据的特征数据,基于模糊匹配规则筛选出与特征数据匹配的预设音频特征,例如特征数据为“喜马拉雅山”则筛选出匹配的预设音频特征同样为“喜马拉雅山”。
S30:当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;
在本实施例中,目标执行指令是指能够控制当前旅游场景画面切换至与预设特征数据关联虚拟现实画面的指令。
具体的,机遇模糊匹配规则识别到与预设音频特征匹配的特征数据时,从预设置的音频数据库中筛选并获取该被匹配的预设音频特征的目标执行指令。
S40:将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面。
在本实施例中,VR设备终端是指用户用于体验虚拟现实旅游场景的设备,包括头戴式、手持式设备以及主系统显示屏。
具体的,将目标执行指令发送至VR设备终端,VR设备终端接收到目标执行指令后,基于目标执行指令将当前的旅游场景画面切换至与目标指令执行关联的预设音频特征的关联场景。
在一实施例中,参照图2,步骤S30包括步骤:
S31:当识别到与预设音频特征匹配的特征数据时,获取该预设音频特征关联的执行指令;
S32:获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令;
S33:若可执行,则将该执行指令作为目标执行指令;
S34:若不可执行,则视为未获取到目标执行指令。
在本实施例中,每个旅游场景均有一定时长,且在每个旅游场景画面中均会有供用户体验的项目,因此旅游场景画面是否能切换,还取决于用户是否完成每个场景中预设的必须参与的项目体验环节;因此画面进度信息是指当前画面的播放进度,也能够代表用户是否完成当前旅游场景画面的必要体验环节。
若用户未体验完当前旅游场景画面的必要体验环节,则触发的执行指令则未能作为目标执行指令,即旅游场景画面未能切换。
具体的,工作人员对当前旅游场景画面进行引导和介绍中,若触发了预设音频特征关联的执行指令,则基于当前画面进度信息,判断当前的执行指令是否可作为目标执行指令,若当前用户未完成旅游场景画面的必要体验环节,则该执行指令暂时不能作为目标执行指令。若用于当前已完成当前旅游场景画面的所有必要体验环节,则将该执行指令作为目标执行指令。
在一实施例中,步骤S32包括步骤:
S321:基于当前旅游场景画面的画面进度信息,获取当前旅游场景画面的已执行指令;
S322:基于已执行指令判断是否可执行当前的执行指令。
在本实施例中,已执行指令能够代表当前旅游场景画面用户的已体验项目。
在一实施例中,参照图3,步骤S322包括步骤:
S3221:获取当前预设音频特征关联的执行指令的执行逻辑关系;
S3222:基于该执行指令的执行逻辑关系,判断该执行指令的执行是否存在前置执行指令;
S3223:若存在前置执行指令且当前前置执行指令均为已执行指令,则将该执行指令作为目标执行指令。
在本实施例中,执行逻辑关系是指一个旅游场景画面中所有必要或非必要执行的指令之间发生前后关系。前置执行指令是在指执行某执行指令前需要执行的必要执行指令。
具体的,当接收到与当前识别预设音频特征关联的执行指令时,获取该执行指令在当前旅游场景画面中的执行逻辑关系,判断该执行指令在当前旅游场景画面中是否存在前置执行指令,若存在,则进一步判断该执行指令的所有前置执行指令是否均已被执行,即是否均成为已执行指令,若是,则将该执行指令作为目标执行指令,若存在未执行的前置指令,则当前的执行指令未能作为目标执行指令。
进一步的,在另一实施例中,步骤S3221之后,还执行如下步骤:
S3222A:基于该执行指令的执行逻辑关系,判断该执行指令的执行是否存在必要的前置执行指令,若存在,则进一步判断该前置执行指令是否为非必要前置执行指令;
S3223A:若存在前置执行指令但该前置执行指令为非必要前置执行指令,则将当前的执行指令作为目标执行指令;
在本实施例中,对前置执行指令进行必要性的判断,若为必要前置执行指令,则当前旅游场景画面的切换需要该必要前置执行指令被执行;若为非必要前置执行指令,则该非必要前置指令指令不一定要被执行,即可切换当前旅游场景画面。使得旅游场景画面的切换更为灵活。
在一实施例中,若旅游场景画面的切换需识别用户的手势动作,参照图4,步骤S20之后,执行如下步骤:
S21:当识别到与预设音频特征匹配的特征数据时,判断该预设音频特征是否关联当前旅游场景画面的用于解锁动作采集功能的解锁指令;
S22:若是,则将解锁指令发送至VR设备终端,解锁VR设备终端的动作识别功能以识别用户的手势动作;
S23:VR设备终端基于解锁指令解锁隐藏提示数据,隐藏提示数据用于展示在旅游场景画面以引导用户做出对应的动作。
在本实施例中,旅游场景画面中存在某些类似副本画面或子画面的展示需要感应用户的动作轨迹而解锁,动作轨迹通过用户手持的感应手柄的运动轨迹进行识别,例如旅游场景画面中切换画面需识别“推门”的动作。
隐藏提示数据用于展示在旅游场景画面中,例如“推门”动作的指令动画。
具体的,当识别到与预设音频特征匹配的特征数据时,通过判断该预设音频特征关联的执行指令是否为用于解锁动作采集功能的解锁指令;若是,则将解锁指令发哦是哪个至VR设备终端,VR设备终端接收到解锁指令后解锁相关的动作识别功能,进一步的,每个解锁指令仅解锁一个手势识别功能,例如A解锁指令仅解锁“推门”动作,B解锁指令解锁“拨动”的动作。
同时,VR设备终端基于解锁指令解锁隐藏提示的动画,以提示用户做出相应的解锁动作。
在一实施例中,音频采集终端用于供工作人员佩戴,参照图5,步骤S10的“实时获取音频采集终端所采集的音频数据”步骤,包括步骤:
S11:获取音频信号的分贝值;
S12:将分贝值与音频分贝的预设值进行比较,过滤掉分贝值小于预设值的音频信号;
S13:获取分贝值大于或等于预设值的音频信号,作为用于输入音频识别模型的音频数据。
在本实施例中,就音频信号通过分贝值大小比较进行过滤,能够筛除除工作人员外的其他干扰杂音,使得目标执行指令不易被误启动。
具体的,接收到音频采集终端发出的语音启动指令时,实时获取音频采集终端采集到的音频信号的分贝值,进一步将采集到的音频信号的分贝值与分贝的预设值进行比较,过滤掉分贝值小于预设值的音频信号,并将分贝值大于或等于预设值的音频信号作为用于输入音频识别模型的音频数据。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
在一实施例中,提供一种基于VR技术的模拟旅游训练系统,该一种基于VR技术的模拟旅游训练系统与上述实施例中一种基于VR技术的模拟旅游训练方法对应。该一种基于VR技术的模拟旅游训练系统包括:
采集启动模块,用于当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;
音频匹配模块,用于将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;
指令获取模块,用于当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;
指令发送模块,用于将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面。
可选的,指令获取模块包括:
指令关联子模块,用于当识别到与预设音频特征匹配的特征数据时,获取该预设音频特征关联的执行指令;
画面进度子模块,用于获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令;
执行判断子模块,用于若可执行,则将该执行指令作为目标执行指令;
执行判断子模块,用于若不可执行,则视为未获取到目标执行指令。
可选的,画面进度子模块包括:
已执行指令单元,用于基于当前旅游场景画面的画面进度信息,获取当前旅游场景画面的已执行指令;
判断单元,用于基于已执行指令判断是否可执行当前的执行指令。
可选的,判断单元包括:
逻辑获取子单元,用于获取当前预设音频特征关联的执行指令的执行逻辑关系;
前置判断子单元,用于基于该执行指令的执行逻辑关系,判断该执行指令的执行是否存在前置执行指令;
前置执行判断子单元,用于若存在前置执行指令且当前前置执行指令均为已执行指令,则将该执行指令作为目标执行指令。
可选的,还包括:
解锁判断模块,用于当识别到与预设音频特征匹配的特征数据时,判断该预设音频特征是否关联当前旅游场景画面的用于解锁动作采集功能的解锁指令;
解锁发送模块,用于若是,则将解锁指令发送至VR设备终端,解锁VR设备终端的动作识别功能以识别用户的手势动作;
VR设备终端基于解锁指令解锁隐藏提示数据,隐藏提示数据用于展示在旅游场景画面以引导用户做出对应的动作。
可选的,采集启动模块包括:
分贝获取子模块,用于获取音频信号的分贝值;
分贝比较子模块,用于将分贝值与音频分贝的预设值进行比较,过滤掉分贝值小于预设值的音频信号;
筛选子模块,用于获取分贝值大于或等于预设值的音频信号,作为用于输入音频识别模型的音频数据。
关于一种基于VR技术的模拟旅游训练系统的具体限定可以参见上文中对于一种基于VR技术的模拟旅游训练方法的限定,在此不再赘述。上述一种基于VR技术的模拟旅游训练系统中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储执行指令、解锁指令、执行逻辑关系以及分贝的预设值。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种基于VR技术的模拟旅游训练方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现一种基于VR技术的模拟旅游训练方法;
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现一种基于VR技术的模拟旅游训练方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (7)
1.一种基于VR技术的模拟旅游训练方法,其特征在于:包括步骤:
当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;
将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;
当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;
将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面;
所述当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令的步骤,包括步骤:
当识别到与预设音频特征匹配的特征数据时,获取该预设音频特征关联的执行指令;
获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令;
若可执行,则将该执行指令作为目标执行指令;
若不可执行,则视为未获取到目标执行指令;
所述获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令的步骤,包括步骤:
基于当前旅游场景画面的画面进度信息,获取当前旅游场景画面的已执行指令;
基于已执行指令判断是否可执行当前的执行指令。
2.根据权利要求1所述的一种基于VR技术的模拟旅游训练方法,其特征在于:所述基于已执行指令判断是否可执行当前的执行指令的步骤,包括步骤:
获取当前预设音频特征关联的执行指令的执行逻辑关系;
基于该执行指令的执行逻辑关系,判断该执行指令的执行是否存在前置执行指令;
若存在前置执行指令且当前前置执行指令均为已执行指令,则将该执行指令作为目标执行指令。
3.根据权利要求1所述的一种基于VR技术的模拟旅游训练方法,其特征在于:若旅游场景画面的切换需识别用户的手势动作,则将音频数据输入音频识别模型,基于预设的模糊匹配规则从数据库中识别与预设音频特征匹配的特征数据的步骤之后,执行如下步骤:
当识别到与预设音频特征匹配的特征数据时,判断该预设音频特征是否关联当前旅游场景画面的用于解锁动作采集功能的解锁指令;
若是,则将解锁指令发送至VR设备终端,解锁VR设备终端的动作识别功能以识别用户的手势动作;
VR设备终端基于解锁指令解锁隐藏提示数据,隐藏提示数据用于展示在旅游场景画面以引导用户做出对应的动作。
4.根据权利要求1所述的一种基于VR技术的模拟旅游训练方法,其特征在于:音频采集终端用于供工作人员佩戴,所述当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据的步骤,包括步骤:
获取音频信号的分贝值;
将分贝值与音频分贝的预设值进行比较,过滤掉分贝值小于预设值的音频信号;
获取分贝值大于或等于预设值的音频信号,作为用于输入音频识别模型的音频数据。
5.一种基于VR技术的模拟旅游训练系统,其特征在于,包括:
采集启动模块,用于当接收到来自音频采集终端的语音启动指令时,实时获取音频采集终端所采集的音频数据;
音频匹配模块,用于将音频数据输入音频识别模型,基于预设的模糊匹配规则识别与数据库中预设音频特征匹配的特征数据;
指令获取模块,用于当识别到与预设音频特征匹配的特征数据时,获取与该预设音频特征匹配的目标执行指令;
指令发送模块,用于将目标执行指令发送至VR设备终端,以使VR设备终端基于目标执行指令切换旅游场景画面;
指令获取模块包括:
指令关联子模块,用于当识别到与预设音频特征匹配的特征数据时,获取该预设音频特征关联的执行指令;
画面进度子模块,用于获取当前旅游场景画面的画面进度信息,基于画面进度信息判断当前的旅游场景画面是否可执行关联的执行指令;
执行判断子模块,用于若可执行,则将该执行指令作为目标执行指令;
执行判断子模块,用于若不可执行,则视为未获取到目标执行指令;
画面进度子模块包括:
已执行指令单元,用于基于当前旅游场景画面的画面进度信息,获取当前旅游场景画面的已执行指令;
判断单元,用于基于已执行指令判断是否可执行当前的执行指令。
6.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述一种基于VR技术的模拟旅游训练方法的步骤。
7.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述一种基于VR技术的模拟旅游训练方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211698088.XA CN115966119B (zh) | 2022-12-28 | 2022-12-28 | 基于vr技术的模拟旅游训练方法、系统、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211698088.XA CN115966119B (zh) | 2022-12-28 | 2022-12-28 | 基于vr技术的模拟旅游训练方法、系统、设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115966119A CN115966119A (zh) | 2023-04-14 |
CN115966119B true CN115966119B (zh) | 2023-07-21 |
Family
ID=85904562
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211698088.XA Active CN115966119B (zh) | 2022-12-28 | 2022-12-28 | 基于vr技术的模拟旅游训练方法、系统、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115966119B (zh) |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110611844A (zh) * | 2019-10-18 | 2019-12-24 | 网易(杭州)网络有限公司 | 应用中播放器的控制方法、装置和视频播放装置 |
CN112565856A (zh) * | 2019-09-25 | 2021-03-26 | 海信视像科技股份有限公司 | 显示设备和电视节目的切换方法 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11316769A (ja) * | 1996-06-11 | 1999-11-16 | Masanobu Kujirada | バ―チャルトラベルシステム |
JP2008118691A (ja) * | 1996-10-03 | 2008-05-22 | Masanobu Kujirada | 在宅旅行システム |
CN101674423B (zh) * | 2008-09-10 | 2013-02-20 | 新奥特(北京)视频技术有限公司 | 一种在线节目单驱动的字幕播出列表的生成方法 |
CN106157359B (zh) * | 2015-04-23 | 2020-03-10 | 中国科学院宁波材料技术与工程研究所 | 一种虚拟场景体验系统的设计方法 |
CN109065055B (zh) * | 2018-09-13 | 2020-12-11 | 三星电子(中国)研发中心 | 基于声音生成ar内容的方法、存储介质和装置 |
CN109918578A (zh) * | 2019-01-21 | 2019-06-21 | 广东康云科技有限公司 | 一种应用于文旅的智能浏览方法及系统 |
CN109696748A (zh) * | 2019-02-14 | 2019-04-30 | 郑州诚优成电子科技有限公司 | 一种用于同步翻译的增强现实字幕眼镜 |
CN110211222B (zh) * | 2019-05-07 | 2023-08-01 | 谷东科技有限公司 | 一种ar沉浸式旅游导览方法、装置、存储介质及终端设备 |
CN110069139B (zh) * | 2019-05-08 | 2022-03-25 | 上海优谦智能科技有限公司 | Vr技术实现旅游教学实践的体验系统 |
CN111047714A (zh) * | 2019-12-31 | 2020-04-21 | 西安帝凡合赢科技发展有限公司 | 一种虚拟旅游系统 |
CN112150318A (zh) * | 2020-09-23 | 2020-12-29 | 北京市商汤科技开发有限公司 | 增强现实信息交互方法、装置、电子设备和存储介质 |
CN112506465B (zh) * | 2020-12-01 | 2023-03-21 | 建信金融科技有限责任公司 | 全景漫游中场景切换的方法和装置 |
CN114449252B (zh) * | 2022-02-12 | 2023-08-01 | 北京蜂巢世纪科技有限公司 | 基于解说音频的现场视频动态调整方法、装置、设备、系统和介质 |
CN114913835A (zh) * | 2022-03-18 | 2022-08-16 | 上海合志信息技术有限公司 | 一种家庭ktv控制方法、装置、计算机设备以及存储介质 |
-
2022
- 2022-12-28 CN CN202211698088.XA patent/CN115966119B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112565856A (zh) * | 2019-09-25 | 2021-03-26 | 海信视像科技股份有限公司 | 显示设备和电视节目的切换方法 |
CN110611844A (zh) * | 2019-10-18 | 2019-12-24 | 网易(杭州)网络有限公司 | 应用中播放器的控制方法、装置和视频播放装置 |
Also Published As
Publication number | Publication date |
---|---|
CN115966119A (zh) | 2023-04-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10860345B2 (en) | System for user sentiment tracking | |
US20140028780A1 (en) | Producing content to provide a conversational video experience | |
CN112135160A (zh) | 直播中虚拟对象控制方法及装置、存储介质和电子设备 | |
KR20080050994A (ko) | 제스처/음성 융합 인식 시스템 및 방법 | |
CN110174942B (zh) | 眼动合成方法及装置 | |
CN109086276B (zh) | 数据翻译方法、装置、终端及存储介质 | |
CN109286848B (zh) | 一种终端视频信息的交互方法、装置及存储介质 | |
CN110544470B (zh) | 语音识别方法、装置、可读存储介质和电子设备 | |
CN104699676B (zh) | 基于语音识别的信息搜索方法和系统 | |
US11455510B2 (en) | Virtual-life-based human-machine interaction methods, apparatuses, and electronic devices | |
CN109360551B (zh) | 一种语音识别方法及装置 | |
CN109376363A (zh) | 一种基于耳机的实时语音翻译方法及装置 | |
CN113223123A (zh) | 图像处理方法和图像处理装置 | |
CN110349577B (zh) | 人机交互方法、装置、存储介质及电子设备 | |
CN114007064B (zh) | 特效同步评估方法、装置、设备及存储介质 | |
CN111899859A (zh) | 手术器械清点方法及装置 | |
CN104898589B (zh) | 一种用于智能管家机器人的智能应答方法和装置 | |
CN108108391A (zh) | 用于数据可视化的信息的处理方法以及装置 | |
CN113129893A (zh) | 一种语音识别方法、装置、设备及存储介质 | |
CN115966119B (zh) | 基于vr技术的模拟旅游训练方法、系统、设备及介质 | |
CN111966321A (zh) | 音量调节方法、ar设备及存储介质 | |
CN112002325B (zh) | 多语种语音交互方法和装置 | |
WO2013181633A1 (en) | Providing a converstional video experience | |
CN113761366A (zh) | 一种场景交互方法、装置、存储介质及电子设备 | |
CN113901267A (zh) | 动作视频的生成方法、装置、设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |