CN111105294A - 一种vr导览方法、系统、客户端、服务器及其存储介质 - Google Patents

一种vr导览方法、系统、客户端、服务器及其存储介质 Download PDF

Info

Publication number
CN111105294A
CN111105294A CN201911321933.XA CN201911321933A CN111105294A CN 111105294 A CN111105294 A CN 111105294A CN 201911321933 A CN201911321933 A CN 201911321933A CN 111105294 A CN111105294 A CN 111105294A
Authority
CN
China
Prior art keywords
scene
client
server
scenes
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911321933.XA
Other languages
English (en)
Inventor
王勇
黄朝敏
吴涵渠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Otto Intelligent Technology Co Ltd
Original Assignee
Wuhan Otto Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Otto Intelligent Technology Co Ltd filed Critical Wuhan Otto Intelligent Technology Co Ltd
Priority to CN201911321933.XA priority Critical patent/CN111105294A/zh
Publication of CN111105294A publication Critical patent/CN111105294A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种VR导览方法、系统、客户端、服务器及其存储介质,VR导览的方法,包括:在VR服务器建立场景库、场景分类库和场景特征库;在VR服务器建立场景导航菜单;在VR服务器计算分析语音信息,筛选符合条件的场景;在VR服务器接收VR客户端选择的符合条件的场景的设置信息,根据设置信息在场景库中确定场景并返回给VR客户端。通过场景分类、分析场景特征,场景导航菜单,语音信息识别,计算分析数据,解决了VR场景兼容语音控制的技术问题。用户在多个场景方便、快捷、准确地选择符合条件的场景,加强了VR场景选择装置文字输入功能,用户可以从大量场景中自由选择各种功能,快速定位符合条件的场景。

Description

一种VR导览方法、系统、客户端、服务器及其存储介质
技术领域
本发明属于VR技术领域,具体涉及一种VR导览方法、系统、客户端、服务器及其存储介质。
背景技术
在现代的商业环境下,现有技术的VR导览方法,包括:用户通过VR设备浏览场景前,首先打开多VR场景表单,然后是定位符合条件的场景,对于定位方法,除了根据表单分类层级逐级查找符合条件的场景的常规方式外,这里提供一种便捷查找方式:用户对着语音采集装置说出想要查看的场景特征,语音采集装置采集用户语音并传送给VR终端应用,VR终端应用调用语音语义解析装置解析出系统认识的文字信息,VR终端应用将文字信息传送到VR服务器,VR服务器调用搜索引擎匹配出符合要求的场景并返回VR终端应用,用户通过场景选择装置选择符合条件的场景并进入符合条件的场景,开启符合条件的场景的遨游之旅。
现有技术的VR导览方案借助VR设备,包括眼镜、手柄、座椅、服务器等实现场景导览,该VR导览方案加强了虚拟系统的逼真度和沉浸感,为用户提供更为真实的虚拟现实,提高用户体验,满足用户身临其境的即视感。但在应对多场景切换时却存在不便,由于VR设备不支持文字输入,只可通过手柄等触发事件向系统发起指令。在少量场景选项情况下,还可以应付,但在大量场景可选择时,光靠手柄触发事件向系统发起指令就显得笨拙不堪,影响客户的使用体验。因此,还需要一种新的技术来解决大量场景的筛选和定位问题并快速向系统发起操作指令。
发明内容
本发明的目的在于提供一种VR导览方法、系统、客户端、服务器及其机器可读存储介质,以解决上述技术问题。本发明采用科学的场景分类和场景特征,通过场景导航菜单,运用语音信息输入识别技术和计算分析,解决了VR场景兼容语音控制的技术问题,使得用户在多个场景方便、快捷、准确地选择符合条件的场景,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
为了实现上述目的,本发明采用如下技术方案:
第一方面,本申请实施例提供了一种VR导览的方法,包括:
步骤1、在VR服务器建立场景库、场景分类库和场景特征库;
步骤2、在VR服务器建立场景导航菜单;
步骤3、在VR服务器计算分析语音信息,筛选符合条件的场景;
步骤4、在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
优选地,所述场景库,包括预设场景,用以为VR客户端提供浏览的场景;所述场景分类库,包括多种场景和所述多种场景的场景分类信息,用以在步骤2在VR服务器建立场景导航菜单中为客户展示多种场景导航菜单;所述场景特征库,包括所述场景分类信息和/或场景的属性信息,用以在步骤3在VR服务器计算分析语音信息,筛选符合条件的场景中为客户匹配满足条件的符合条件的场景;所述场景分类信息和/或场景的属性信息可以通过系统或网页设置或输入其他属性信息。
优选地,在VR服务器建立场景库、场景分类库和场景特征库,包括:
将所述场景分类库中的场景分类信息传导到步骤2在VR服务器建立场景导航菜单,用以作为场景导航菜单的场景分类信息;
将所述场景特征库中的场景特征信息传导到步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,用以定位所述符合条件的场景的匹配元素。
优选地,所述步骤2在VR服务器建立场景导航菜单还包括:
根据所述场景分类信息,建立多种场景的导航菜单;
将所述场景导航菜单,传导到VR客户端,用以提供显示内容;
向所述VR客户端传导所述多种场景和/或按所述场景分类信息切换的符合条件的场景。
优选地,所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,包括:
接收VR客户端传导来的音频数据;
通过语义分析装置对从VR客户端采集来的音频数据进行分析,从而得到文字形式的说话内容;
通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景。
优选地,所述步骤:通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景,包括:
步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值;
步骤二、VR服务器向VR客户端传送所述匹配的场景及相似度数值,用以提供给VR客户端进行展示。
优选地,所述步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值,包括:
确定语音内容解析后得到的语音场景特征要素及数量并分析所述语音场景特征要素的语义;
若搜索得到的搜索场景特征要素与所述语音场景特征要素数量相同且语义相同,则匹配,并且场景相似度数值是最高级;
若搜索得到的搜索场景特征要素包括所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是中级;
若搜索得到的搜索场景特征要素包括部分所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是低级;
若搜索得到的搜索场景特征要素不包括任一个所述语音场景特征要素,则不匹配,场景相似度数值是0。
优选地,所述符合条件的场景包括:虚拟现实的内容和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端,用以将在所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,获得的符合条件的场景传导给VR客户端,供客户在VR客户端上选择并浏览所述符合条件的场景的虚拟现实和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端之前,还包括:
VR服务器接收并存储VR客户端传导来的客户选择的所述符合条件的场景。
第二方面,本申请实施例提供了一种VR客户端VR导览的方法,所述VR导览方法,用以提供给客户浏览内容和/或选择设置,实现客户在所述多种场景中按所述场景分类切换所述匹配获得的符合条件的场景,包括:
步骤1:VR客户端接收VR服务器传导的数据;
步骤2:VR客户端通过获取客户说话内容和/或短视频,传导给VR服务器;
步骤3:VR客户端将客户的语音通过语音识别技术识别成文字信息,通过文字信息与场景特征库做比对,找到所述符合条件的场景并计算相应场景的相似度;
步骤4:VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息
步骤5:VR客户端选择符合条件的场景及操作模式,传导给VR服务器;
步骤6:VR客户端通过手柄或者语音控制方式行进路线和方向在虚拟显示场景中游览。
第三方面,本申请实施例提供了一种VR客户端,用以VR导览,所述VR客户端包括:
接收发送模块,用以接收VR服务器传导的数据,向VR服务器发送数据;接收VR服务器传导的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;通过语音设备采集客户说话内容和/或短视频,并传导给VR服务器;VR客户端接受VR服务器传导来的相似度数值;
采集设备,用以采集客户说话内容和/或短视频;
计算分析模块,用以将客户的语音转化成文字信息,通过文字信息与特征库做比对来筛选多场景,找到客户关注的所述符合条件的场景;还用以统计VR服务器传导来的场景及场景相似度数值,并按场景相似度值由高到低排序;
设置输入模块,用以客户输入登陆信息,在所述找到客户关注的的所述符合条件的场景中进行选择;
场景展示模块,用以进行所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景,用手持选择设备选择虚拟现实场景中的路线,选择虚拟物品;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放。
存储模块,用以存储信息,包括传导的数据,语音,视频,指令。
第四方面,本申请实施例提供了一种VR导览装置,所述VR导览装置包括:
场景维护模块,用以建立和维护场景分类库和场景特征库,将线下场景维护到VR服务器存储,建立场景与场景分类库的归属关系,同时设置场景的特征库信息;
菜单模块,用以在VR服务器建立和维护场景导航菜单,建立菜单与场景的对应关系,建立菜单与场景资源的对应关系,为VR客户端提供展示的导航菜单;
计算分析模块,用以计算分析语音信息,筛选符合条件的场景;
采集模块,用以采集客户说话内容和/或短视频,将所采集的客户说话内容和/或短视频传导给VR服务器,从而为语音和/或语义识别、人脸识别提供输入数据;
设置输入模块,用以接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据VR客户端的设置信息在场景库中确定场景并返回给VR客户端。
场景展示模块,用以支持VR客户端实现所述在虚拟显示场景中游览,支持VR客户端根据用户选择的场景,从VR服务器获取场景资源并播放。
优选地,所述VR导览装置,还包括:
识别模块,用以识别语音和/或语义,分析文字形式的说话内容;
搜索引擎模块,用以搜索通过搜索引擎对所述场景特征库进行分析,通过快速高效的匹配算法,来对VR客户端传导的文字形式说话内容与场景的特征库进行快速算法匹配,实现智能快速搜索功能;
存储模块,用以存储信息,包括传导的数据,语音,视频,指令,场景资源,并对依存模块提供读写接口。
接收发送模块,用以接收VR客户端传导的数据;向VR客户端发送数据;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景及对应的场景相似度数值。接收VR客户端传导的数据,包括:VR客户端通过语音设备采集客户说话内容和/或短视频;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景的相似度数值。
第五方面,本申请实施例提供了一种VR导览服务器,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例任一所述的VR导览的方法。
第六方面,本申请实施例提供了一种VR导览系统,其特征在于,包括上述任一VR导览装置,及上述VR客户端。
第七方面,本申请实施例提供了一种存储介质,存储有机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例所述的方法。
由以上可见,本申请实施例提供的方案中,相对于现有技术,本发明具有以下有益效果:本发明采用科学的场景分类和场景特征,通过场景导航菜单,运用语音信息输入识别技术和计算分析,解决了VR场景兼容语音控制的技术问题,使得用户在多个场景方便、快捷、准确地选择符合条件的场景,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。本方案解决了VR场景选择装置文字输入功能弱的问题,实现了用户在大量场景中可以选择适合自己的具体功能,快速定位符合条件的场景;拓展VR应用系统的应用领域,可以应用于大型线上商城。
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
附图说明
图1为本发明一实施例的VR导览方法的流程图;
图2为本发明一实施例的VR客户端VR导览方法的流程图;
图3为本发明一实施例的VR客户端的结构示意图;
图4为本发明一实施例的VR导览装置的结构示意图。
具体实施方式
为了能够更清楚地理解本发明的上述目的、特征和优点,下面结合附图和具体实施方式对本发明进行详细描述。需要说明的是,在不冲突的情况下,本申请的实施方式及实施方式中的特征可以相互组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施方式的目的,不是旨在于限制本发明。
请参阅图1,图1为本发明一实施例的VR导览方法的流程图,该方法包括:
S100:在VR服务器建立场景库、场景分类库和场景特征库;
S102:在VR服务器建立场景导航菜单;
S104:在VR服务器计算分析语音信息,筛选符合条件的场景;
S106:在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
具体而言,所述场景库,包括所有预设场景,用以在步骤S106中为VR前端提供场景服务;所述场景库用以为VR客户端提供浏览的场景;所述场景分类库,包括多种场景和所述多种场景的场景分类信息,用以在步骤S102在VR服务器建立场景导航菜单中为客户展示多种场景导航菜单;所述场景特征库,包括所述场景分类信息和/或场景的其他属性信息,用以在步骤S104在VR服务器计算分析语音信息,筛选符合条件的场景中为客户匹配满足条件的符合条件的场景;
S100所述建立场景库、场景分类库和场景特征库,包括:
将所述场景分类库中的场景分类信息传导到S102在VR服务器建立场景导航菜单,用以作为场景导航菜单的场景分类信息;
将所述场景特征库中的场景特征信息传导到S104在VR服务器计算分析语音信息,筛选符合条件的场景,用以定位所述符合条件的场景的匹配元素;
具体而言,所述场景分类库中的场景分类信息用以在所述步骤S102在VR服务器建立场景导航菜单,作为场景导航菜单的场景分类信息;
所述场景特征库中的场景特征信息用以在所述步骤S104在VR服务器计算分析语音信息,筛选符合条件的场景,定位符合条件场景的匹配元素。
S102所述在VR服务器建立场景导航菜单,还包括:
根据所述场景分类信息,建立多种场景的导航菜单;
将所述场景导航菜单,传导到VR客户端,用以提供显示内容;
具体而言,S104所述计算分析语音信息是在VR服务器计算分析从VR客户端采集的语音信息;所述筛选符合条件的场景是在S100所建立的分类库和特征库中筛选目标符合条件的场景;
S104所述在VR服务器计算分析语音信息,筛选符合条件的场景,包括:
接收VR客户端传导来的音频数据;
通过语义分析装置对从VR客户端采集来的音频数据进行分析,从而得到文字形式的说话内容;
通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景;
向VR客户端传导所述获得匹配的所述符合条件的场景。
具体而言,步骤S104又包括:
步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值;本步骤又包括:
确定语音内容解析后得到的语音场景特征要素并分析所述语音场景特征要素的语义;
若搜索得到的搜索场景特征要素与所述语音场景特征要素语义相同,则匹配,并且场景相似度数值是最高级;
若搜索得到的搜索场景特征要素包括所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是中级;
若搜索得到的搜索场景特征要素包括部分所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是低级;
若搜索得到的搜索场景特征要素不包括任一个所述语音场景特征要素,则不匹配,场景相似度数值是0。
步骤二、VR服务器向VR客户端传送所述匹配的场景及相似度数值,用以提供给VR客户端进行展示,以用以客户端选择。
具体而言,S106所述VR客户端选择的符合条件的场景的设置信息是VR客户端从S104筛选场景中选择的符合条件的场景的设置信息;所述在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端,用以将在S104所述在VR服务器计算分析语音信息,筛选符合条件的场景,并传导给VR客户端,供客户在VR客户端上选择并浏览所述符合条件的场景的虚拟现实和/或现实内容;S106所述在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端之前,还包括:
VR服务器接收并存储VR客户端传导来的客户选择的所述符合条件的场景。
本方案通过引入语音语义解析技术来实现语音识别,从而实现语音控制来代替手柄、菜单导览,再结合搜索技术实现自动的语音导览功能,用以解决海量场景使用环境,导览不便问题,提高导览的效率和使用的方便性。
请参阅图2,图2为本发明一实施例的VR客户端VR导览的方法的流程图,所述方法包括:
S200:VR客户端接收VR服务器传导的数据;所述数据包括导航和/或场景数据;
VR客户端接收VR服务器传导的导航和/或场景数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容、语音搜索获取的符合条件的场景;;
S202:VR客户端通过获取客户说话内容和/或短视频,传导给VR服务器;
所述获取包括通过采集设备采集而来;VR客户端通过采集设备采集客户说话内容和/或短视频,并传导给VR服务器;客户对着语音采集装置说出想要查看的场景特征,语音采集装置采集客户语音并传送给VR客户端应用。
S204:VR客户端将客户的语音通过语音识别技术识别成文字信息,通过文字信息与场景特征库做比对,找到所述符合条件的场景并计算相应场景的相似度;
S206:VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息;
VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息,用以供客户端选择;
S208:VR客户端选择符合条件的场景及操作模式,传导给VR服务器;
VR客户端在服务端传到来的符合条件的场景中选择目标场景及语音操作/手柄操作模式,传导给VR服务器;
S210:VR客户端通过手柄或者语音控制方式行进路线和方向在虚拟显示场景中游览;
VR客户端实现所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放;所述符合条件的场景包括:虚拟现实的内容和/或现实内容。
请参阅图3,图3与上述一种VR客户端VR导览的方法相对应,本实施例还提供了一种VR客户端22,用以VR导览,包括:
接收发送模块10,用以接收VR服务器传导的数据,向VR服务器发送数据;
采集设备12,用以采集客户说话内容和/或短视频;
计算分析模块14,用以将客户的语音转化成文字信息,通过文字信息与特征库做比对来筛选多场景,找到客户关注的所述符合条件的场景;还用以统计VR服务器传导来的场景及场景相似度数值,并按场景相似度值由高到低排序;
设置输入模块16,用以客户输入登陆信息,在所述找到客户关注的的所述符合条件的场景中进行选择;
场景展示模块18,用以进行所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景,用手持选择设备选择虚拟现实场景中的路线,选择虚拟物品;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放。
存储模块20,用以存储信息,包括传导的数据,语音,视频,指令,场景资源。
图4为本发明一实施例的VR导览装置的结构示意图,所述VR导览装置30,包括;
场景维护模块32,用以建立和维护场景分类库和场景特征库,将线下场景维护到VR服务器存储,建立场景与场景分类库的归属关系,同时设置场景的特征库信息;
菜单模块34,用以在VR服务器建立和维护场景导航菜单,建立菜单与场景的对应关系,建立菜单与场景资源的对应关系,为VR客户端提供展示的导航菜单;
计算分析模块46,用以计算分析语音信息,筛选符合条件的场景;
采集模块36,用以采集客户说话内容和/或短视频,将所采集的客户说话内容和/或短视频传导给VR服务器,从而为语音和/或语义识别、人脸识别提供输入数据;
设置输入模块38,用以接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据VR客户端的设置信息在场景库中确定场景并返回给VR客户端。
场景展示模块40,用以支持VR客户端实现所述在虚拟显示场景中游览,支持VR客户端根据用户选择的场景,从VR服务器获取场景资源并播放。
所述VR导览装置,还包括:
识别模块42,用以识别语音和/或语义,分析文字形式的说话内容以及语音语义,为VR导览系统提供语音和/或语义识别能力,允许VR客户端直接通过语音输入查询条件,解决VR系统文字输入功能不足问题;
搜索引擎模块44,用以搜索通过搜索引擎对所述场景特征库进行分析,通过快速高效分词匹配算法,来对VR客户端传导的文字形式说话内容与场景的特征库进行快速算法匹配,实现智能快速搜索功能;
接收发送模块48,用以接收VR客户端传导的数据;向VR客户端发送数据;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容、语音搜索时符合条件的场景以及场景的相似度信息。
存储模块50,用以存储信息,包括传导的数据,语音,视频,指令,场景资源,并对依存模块提供读写接口。
VR服务器从VR客户端获得语音信息,通过语音语义识别模块的语音识别功能,识别出文字内容;通过搜索引擎的分词解析功能解析成语音分词,然后与场景特征库的场景特征进行比对,获得符合条件的场景及特征;通过语音语义识别模块的语义识别功能,比对语音分词与场景特征库的场景特征,获得符合条件的场景及特征;再利用计算分析模块,计算符合条件场景的相似度数据;最终获取到符合条件的场景及场景相似度数据。
本申请的一个实施例提供了一种VR导览服务器,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例任一所述的VR导览的方法。
本申请的一个实施例提供了一种VR导览系统,其特征在于,包括上述任一VR导览装置,及上述VR客户端。
本申请的一个实施例提供了一种存储介质,存储有机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器实现本申请实施例所述的方法。
所述系统/计算机装置集成的部件/模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施方式方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,所述计算机程序在被处理器执行时,可实现上述各个方法实施方式的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读存储介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-OnlyMemory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
在本发明所提供的几个具体实施方式中,应该理解到,所揭露的系统和方法,可以通过其它的方式实现。例如,以上所描述的系统实施方式仅仅是示意性的,例如,所述部件的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
另外,在本发明各个实施例中的各功能模块/部件可以集成在相同处理模块/部件中,也可以是各个模块/部件单独物理存在,也可以两个或两个以上模块/部件集成在相同模块/部件中。上述集成的模块/部件既可以采用硬件的形式实现,也可以采用硬件加软件功能模块/部件的形式实现。
对于本领域技术人员而言,显然本发明实施例不限于上述示范性实施例的细节,而且在不背离本发明实施例的精神或基本特征的情况下,能够以其他的具体形式实现本发明实施例。因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明实施例的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明实施例内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。系统、装置或终端权利要求中陈述的多个单元、模块或装置也可以由同一个单元、模块或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。

Claims (15)

1.一种VR导览方法,其特征在于,包括:
步骤1、在VR服务器建立场景库、场景分类库和场景特征库;
步骤2、在VR服务器建立场景导航菜单;
步骤3、在VR服务器计算分析语音信息,筛选符合条件的场景;
步骤4、在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端。
2.根据权利要求1所述的VR导览的方法,其特征在于,所述场景库,包括预设场景,用以为VR客户端提供浏览的场景;所述场景分类库,包括多种场景和所述多种场景的场景分类信息,用以在步骤2在VR服务器建立场景导航菜单中为客户展示多种场景导航菜单;所述场景特征库,包括所述场景分类信息和/或场景的属性信息,用以在步骤3在VR服务器计算分析语音信息,筛选符合条件的场景中为客户匹配满足条件的符合条件的场景。
3.根据权利要求1所述的VR导览的方法,其特征在于,步骤1所述在VR服务器建立场景库、场景分类库和场景特征库,包括:
将所述场景分类库中的场景分类信息传导到步骤2在VR服务器建立场景导航菜单,用以作为场景导航菜单的场景分类信息;
将所述场景特征库中的场景特征信息传导到步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,用以定位所述符合条件的场景的匹配元素。
4.根据权利要求1所述的VR导览的方法,其特征在于,所述步骤2在VR服务器建立场景导航菜单,还包括:
根据所述场景分类信息,建立多种场景的导航菜单;
将所述场景导航菜单,传导到VR客户端,用以提供显示内容;
5.根据权利要求1所述的VR导览的方法,其特征在于,所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,包括:
接收VR客户端传导来的音频数据;
通过语义分析装置对从VR客户端采集来的音频数据进行分析,从而得到文字形式的说话内容;
通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景。
6.根据权利要求5所述的VR导览的方法,其特征在于,所述通过搜索引擎到所述场景特征库进行比对匹配,用以获得匹配的所述符合条件的场景,包括:
步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值;
步骤二、VR服务器向VR客户端传送所述匹配的场景及相似度数值,用以提供给VR客户端进行展示。
7.根据权利要求6所述的VR导览的方法,其特征在于,所述步骤一、VR服务器调用搜索引擎,将所述文字形式的说话内容传递给搜索引擎,搜索引擎根据所述文字形式的说话内容与场景特征的匹配度,查找符合条件的场景并给出场景相似度数值,包括:
确定语音内容解析后得到的语音场景特征要素及数量并分析所述语音场景特征要素的语义;
若搜索得到的搜索场景特征要素与所述语音场景特征要素数量相同且语义相同,则匹配,并且场景相似度数值是最高级;
若搜索得到的搜索场景特征要素包括所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是中级;
若搜索得到的搜索场景特征要素包括部分所述语音场景特征要素,且搜索得到的搜索场景特征要素的数量大于所述语音场景特征要素的数量,则匹配,场景相似度数值是低级;
若搜索得到的搜索场景特征要素不包括任一个所述语音场景特征要素,则不匹配,场景相似度数值是0。
8.根据权利要求1所述的VR导览的方法,其特征在于,所述符合条件的场景包括:虚拟现实的内容和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端,用以将在所述步骤3在VR服务器计算分析语音信息,筛选符合条件的场景,获得的符合条件的场景传导给VR客户端,供客户在VR客户端上选择并浏览所述符合条件的场景的虚拟现实和/或现实内容;所述步骤4在VR服务器接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据所述设置信息在场景库中确定场景并返回给VR客户端之前,还包括:
VR服务器接收并存储VR客户端传导来的客户选择的所述符合条件的场景。
9.一种VR客户端VR导览的方法,其特征在于,所述VR导览方法,用以提供给客户浏览内容和/或选择设置,实现客户在所述多种场景中按所述场景分类切换所述匹配获得的符合条件的场景,包括:
步骤1:VR客户端接收VR服务器传导的数据;
步骤2:VR客户端通过获取客户说话内容和/或短视频,传导给VR服务器;
步骤3:VR客户端将客户的语音通过语音识别技术识别成文字信息,通过文字信息与场景特征库做比对,找到所述符合条件的场景并计算相应场景的相似度;
步骤4:VR客户端接受VR服务器传导来的符合条件的场景和相应的相似度数值,按相似度对场景进行由高到低排序,显示搜索到的所述符合条件的场景信息;
步骤5:VR客户端选择符合条件的场景及操作模式,传导给VR服务器;
步骤6:VR客户端通过手柄或者语音控制方式行进路线和方向在虚拟显示场景中游览。
10.一种VR客户端,用以VR导览,其特征在于,所述VR客户端包括:
接收发送模块,用以接收VR服务器传导的数据,向VR服务器发送数据;
采集设备,用以采集客户说话内容和/或短视频;
计算分析模块,用以将客户的语音转化成文字信息,通过文字信息与特征库做比对来筛选多场景,找到客户关注的所述符合条件的场景;还用以统计VR服务器传导来的场景及场景相似度数值,并按场景相似度值由高到低排序;
设置输入模块,用以客户输入登陆信息,在所述找到客户关注的的所述符合条件的场景中进行选择;
场景展示模块,用以进行所述在虚拟显示场景中游览,包括:客户用VR客户端观看所述符合条件的场景,用手持选择设备选择虚拟现实场景中的路线,选择虚拟物品;客户用VR客户端将所述符合条件的场景传导到其他显示设备上观看和/或存储后播放。
存储模块,用以存储信息,包括传导的数据,语音,视频,指令,场景资源。
11.一种VR导览装置,其特征在于,所述VR导览装置包括:
场景维护模块,用以建立和维护场景分类库和场景特征库,将线下场景维护到VR服务器存储,建立场景与场景分类库的归属关系,同时设置场景的特征库信息;
菜单模块,用以在VR服务器建立和维护场景导航菜单,建立菜单与场景的对应关系,建立菜单与场景资源的对应关系,为VR客户端提供展示的导航菜单;
计算分析模块,用以计算分析语音信息,筛选符合条件的场景;
采集模块,用以采集客户说话内容和/或短视频,将所采集的客户说话内容和/或短视频传导给VR服务器,从而为语音和/或语义识别、人脸识别提供输入数据;
设置输入模块,用以接收VR客户端选择的符合条件的场景的设置信息,VR服务器根据VR客户端的设置信息在场景库中确定场景并返回给VR客户端。
场景展示模块,用以支持VR客户端实现所述在虚拟显示场景中游览,支持VR客户端根据用户选择的场景,从VR服务器获取场景资源并播放。
12.根据权利要求11所述的VR导览装置,其特征在于,所述VR导览装置,还包括:
识别模块,用以识别语音和/或语义,分析文字形式的说话内容;
搜索引擎模块,用以搜索通过搜索引擎对所述场景特征库进行分析,通过快速高效的匹配算法,来对VR客户端传导的文字形式说话内容与场景的特征库进行快速算法匹配,实现智能快速搜索功能;
接收发送模块,用以接收VR客户端传导的数据;向VR客户端发送数据;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景及对应的场景相似度数值。接收VR客户端传导的数据,包括:VR客户端通过语音设备采集客户说话内容和/或短视频;向VR客户端发送的数据,包括:所述导航菜单,所述场景分类库全部或部分内容、所述场景特征库全部或部分内容;向VR客户端发送多种场景的相似度数值;
存储模块,用以存储信息,包括传导的数据,语音,视频,指令,场景资源,并对依存模块提供读写接口。
13.一种VR导览服务器,其特征在于,包括处理器和机器可读存储介质,所述机器可读存储介质存储有能够被所述处理器执行的机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器:实现权利要求1-8任一所述的方法步骤。
14.一种VR导览系统,其特征在于,包括如权利要求11或12所述的VR导览装置,及如权利要求10所述的VR客户端。
15.一种存储介质,其特征在于,存储有机器可执行指令,在被处理器调用和执行时,所述处理器可执行指令促使所述处理器:实现权利要求1-9任一所述的方法。
CN201911321933.XA 2019-12-20 2019-12-20 一种vr导览方法、系统、客户端、服务器及其存储介质 Pending CN111105294A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911321933.XA CN111105294A (zh) 2019-12-20 2019-12-20 一种vr导览方法、系统、客户端、服务器及其存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911321933.XA CN111105294A (zh) 2019-12-20 2019-12-20 一种vr导览方法、系统、客户端、服务器及其存储介质

Publications (1)

Publication Number Publication Date
CN111105294A true CN111105294A (zh) 2020-05-05

Family

ID=70423045

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911321933.XA Pending CN111105294A (zh) 2019-12-20 2019-12-20 一种vr导览方法、系统、客户端、服务器及其存储介质

Country Status (1)

Country Link
CN (1) CN111105294A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112434970A (zh) * 2020-12-12 2021-03-02 广东电力信息科技有限公司 一种基于智能数据采集的资质数据验证方法、装置
CN114092674A (zh) * 2022-01-24 2022-02-25 北京派瑞威行互联技术有限公司 多媒体数据分析方法和系统
CN114201039A (zh) * 2020-09-18 2022-03-18 聚好看科技股份有限公司 一种实现虚拟现实的显示设备
CN116700500A (zh) * 2023-08-07 2023-09-05 江西科技学院 多场景vr互动方法、系统及存储介质
CN116700500B (zh) * 2023-08-07 2024-05-24 江西科技学院 多场景vr互动方法、系统及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106371605A (zh) * 2016-09-19 2017-02-01 腾讯科技(深圳)有限公司 虚拟现实场景调节方法及装置
CN107300970A (zh) * 2017-06-05 2017-10-27 百度在线网络技术(北京)有限公司 虚拟现实交互方法和装置
US20180024630A1 (en) * 2016-07-21 2018-01-25 Google Inc. Editing cuts in virtual reality
CN109374002A (zh) * 2018-10-09 2019-02-22 北京京东尚科信息技术有限公司 导航方法和系统、计算机可读存储介质
CN110021200A (zh) * 2019-04-01 2019-07-16 广东芬莱信息科技有限公司 教学练考一体化的虚拟现实培训方法、装置及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180024630A1 (en) * 2016-07-21 2018-01-25 Google Inc. Editing cuts in virtual reality
CN106371605A (zh) * 2016-09-19 2017-02-01 腾讯科技(深圳)有限公司 虚拟现实场景调节方法及装置
CN107300970A (zh) * 2017-06-05 2017-10-27 百度在线网络技术(北京)有限公司 虚拟现实交互方法和装置
CN109374002A (zh) * 2018-10-09 2019-02-22 北京京东尚科信息技术有限公司 导航方法和系统、计算机可读存储介质
CN110021200A (zh) * 2019-04-01 2019-07-16 广东芬莱信息科技有限公司 教学练考一体化的虚拟现实培训方法、装置及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张慧,张明敏,潘志庚: "分布式VRML场景的实时浏览和交互观察" *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114201039A (zh) * 2020-09-18 2022-03-18 聚好看科技股份有限公司 一种实现虚拟现实的显示设备
CN114201039B (zh) * 2020-09-18 2023-08-29 聚好看科技股份有限公司 一种实现虚拟现实的显示设备
CN112434970A (zh) * 2020-12-12 2021-03-02 广东电力信息科技有限公司 一种基于智能数据采集的资质数据验证方法、装置
CN114092674A (zh) * 2022-01-24 2022-02-25 北京派瑞威行互联技术有限公司 多媒体数据分析方法和系统
CN116700500A (zh) * 2023-08-07 2023-09-05 江西科技学院 多场景vr互动方法、系统及存储介质
CN116700500B (zh) * 2023-08-07 2024-05-24 江西科技学院 多场景vr互动方法、系统及存储介质

Similar Documents

Publication Publication Date Title
JP6708717B2 (ja) ニュース推薦方法及び装置
CN107679211B (zh) 用于推送信息的方法和装置
JP6967612B2 (ja) 情報検索方法、装置及びシステム
US20160301639A1 (en) Method and system for providing recommendations during a chat session
CN111105294A (zh) 一种vr导览方法、系统、客户端、服务器及其存储介质
CN110162359B (zh) 新手引导信息的推送方法、装置及系统
CN107832338B (zh) 一种识别核心产品词的方法和系统
CN111782977A (zh) 兴趣点处理方法、装置、设备及计算机可读存储介质
CN110084658B (zh) 物品匹配的方法和装置
CN111026853B (zh) 目标问题的确定方法、装置、服务器和客服机器人
CN113806588B (zh) 搜索视频的方法和装置
CN114549874A (zh) 多目标图文匹配模型的训练方法、图文检索方法及装置
KR102601545B1 (ko) 지리 위치점 정렬 방법, 정렬 모델 트레이닝 방법 및 대응하는 장치
CN110990598A (zh) 资源检索方法、装置、电子设备及计算机可读存储介质
CN110059172B (zh) 基于自然语言理解的推荐答案的方法和装置
CN109992719B (zh) 用于确定推送优先级信息的方法和装置
CN111191133A (zh) 业务搜索处理方法、装置及设备
CN112532507A (zh) 用于呈现表情图像、用于发送表情图像的方法和设备
CN111429200B (zh) 一种内容关联方法及装置、存储介质、计算机设备
CN109710939B (zh) 用于确定主题的方法和装置
CN114880498B (zh) 事件信息展示方法及装置、设备和介质
CN115114123A (zh) 一种页面显示方法、装置、设备及介质
CN113076395A (zh) 语义模型训练、搜索显示方法、装置、设备及存储介质
CN109857838B (zh) 用于生成信息的方法和装置
CN113722593A (zh) 事件数据处理方法、装置、电子设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination