CN108771864B - 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法 - Google Patents

一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法 Download PDF

Info

Publication number
CN108771864B
CN108771864B CN201810470506.7A CN201810470506A CN108771864B CN 108771864 B CN108771864 B CN 108771864B CN 201810470506 A CN201810470506 A CN 201810470506A CN 108771864 B CN108771864 B CN 108771864B
Authority
CN
China
Prior art keywords
sound signal
live
virtual scene
equipment
service
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201810470506.7A
Other languages
English (en)
Other versions
CN108771864A (zh
Inventor
向敏明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Rainforest Interactive Entertainment Co ltd
Original Assignee
Beijing Rainforest Interactive Entertainment Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Rainforest Interactive Entertainment Co ltd filed Critical Beijing Rainforest Interactive Entertainment Co ltd
Priority to CN201810470506.7A priority Critical patent/CN108771864B/zh
Publication of CN108771864A publication Critical patent/CN108771864A/zh
Application granted granted Critical
Publication of CN108771864B publication Critical patent/CN108771864B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/52Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50Controlling the output signals based on the game progress
    • A63F13/54Controlling the output signals based on the game progress involving acoustic signals, e.g. for simulating revolutions per minute [RPM] dependent engine sounds in a driving game or reverberation against a virtual wall
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/80Special adaptations for executing a specific game genre or game mode
    • A63F13/837Shooting of targets
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6063Methods for processing data by generating or executing the game program for sound processing
    • A63F2300/6081Methods for processing data by generating or executing the game program for sound processing generating an output signal, e.g. under timing constraints, for spatialization
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Stereophonic System (AREA)

Abstract

本发明实施例涉及VR技术领域,公开一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特点为:在第一VR设备和第二VR设备在参与虚拟游戏PK之前,服务设备预先将第一VR设备为每一个进程时间段分别配置的、包括第一VR设备、第二VR设备均感兴趣的预设虚拟场景的预设虚拟场景子集合组汇聚成一个预设虚拟场景集合,并将第一VR设备上报的第一认证声音信号以及第二VR设备上报的第二认证声音信号合成得到默认声音信号与该预设虚拟场景集合进行绑定,其中,该默认声音信号和该预设虚拟场景集合,作为第一VR设备和第二VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据,从而有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。

Description

一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法
技术领域
本发明涉及虚拟现实(Virtual Reality,VR)技术领域,尤其涉及一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法。
背景技术
VR技术是一种可以创建和体验虚拟世界的计算机仿真系统,它利用计算机生成一种模拟环境,是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真以使用户沉浸到该环境中。随着VR技术的快速发展,利用VR设备(如VR头盔)来参与虚拟游戏PK已经成为了十分普遍的一种游戏方式。
在实践中发现,当两个用户各自使用VR设备来参与虚拟游戏PK时,两个用户只能被动的接受由服务设备推送的虚拟场景,而无法自主的触发虚拟场景的同步切换。
发明内容
本发明实施例公开了一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法,有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。
其中,一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法,所述双 VR设备包括第一VR设备和第二VR设备,所述第一VR设备和所述第二VR设备在参与虚拟游戏PK之前,所述方法包括:
服务设备向所述第一VR设备推送虚拟游戏对应的完整进程时间条,以使所述第一VR设备将所述完整进程时间条划分为若干个进程时间段,所述若干个进程时间段中的任意两者互不重叠;
所述服务设备检测所述第一VR设备为每一个所述进程时间段分别配置的预设虚拟场景子集合,每一个预设虚拟场景子集合包括若干个预设虚拟场景;其中,每一个预设虚拟场景携带用于表示对所述预设虚拟场景感兴趣的VR设备组,所述VR设备标签组包括所述第一VR设备的标识和所述第二VR设备的标识;
所述服务设备将每一个所述进程时间段分别配置的预设虚拟场景子集合组汇聚成一个预设虚拟场景集合;
所述服务设备获取所述第一VR设备上报的第一认证声音信号以及所述第二VR设备上报的第二认证声音信号;
所述服务设备对所述第一认证声音信号以及所述第二认证声音信号进行合成得到默认声音信号;
所述服务设备将所述默认声音信号与所述预设虚拟场景集合进行绑定,其中,所述默认声音信号和所述预设虚拟场景集合,作为所述第一VR设备和所述第二VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据。
作为一种可选的实施方式,本发明实施例中,所述服务设备将所述默认声音信号与所述预设虚拟场景集合进行绑定之后,所述方法还包括:
在所述第一VR设备和所述第二VR设备参与虚拟游戏PK时,所述服务设备获取所述第一VR设备上报的第一现场声音信号以及获取所述第二VR设备上报的第二现场声音信号;其中,所述第一现场声音信号是由所述第一VR设备对所述第一VR设备的第一佩戴用户发出的第一现场语句进行转换获得的第一现场声音信号;所述第二现场声音信号是由所述第二VR设备对所述第二VR 设备的第二佩戴用户发出的第二现场语句进行转换获得的第二现场声音信号;
所述服务设备对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号;
所述服务设备判断所述合成声音信号与所述默认声音信号是否匹配,若匹配,确定与所述默认声音信号绑定的所述预设虚拟场景集合;
所述服务设备根据所述虚拟游戏PK的当前进程时间,从所述虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景;
所述服务设备将与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景同步推送给所述第一VR设备和第二VR设备,以实现所述第一VR设备和第二VR设备的虚拟场景同步切换。
作为一种可选的实施方式,本发明实施例中,所述服务设备对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号,包括:
所述服务设备确定所述第一现场声音信号与所述第二现场声音信号之间的对齐点;其中,所述对齐点是指所述第一现场声音信号和所述第二现场声音信号合成的开始位置;
所述服务设备根据所述对齐点将所述第一现场声音信号与所述第二现场声音信号合成为合成声音信号。
作为一种可选的实施方式,本发明实施例中,所述服务设备确定所述第一现场声音信号与所述第二现场声音信号之间的对齐点,包括
所述服务设备计算所述第一现场声音信号的第一时长以及所述第二现场声音信号的第二时长;其中,所述第一时长表示所述第一现场声音信号的声音持续的时间;所述第二时长表示所述第二现场声音信号的声音持续的时间;
所述服务设备计算所述第一时长和所述第二时长之间的差值;
所述服务设备判断所述差值是否小于或等于预设数值,若是,对所述第一现场声音信号和所述第二现场声音信号中的任一现场声音信号进行周期上的缩放,以获得最终持续时长相同的第一现场声音信号和第二现场声音信号,再以所述最终持续时长相同的第一现场声音信号和第二现场声音信号的首个音频帧作为对齐点。
作为一种可选的实施方式,本发明实施例中,所述服务设备对所述第一现场声音信号和所述第二现场声音信号中的任一现场声音信号进行周期上的缩放,包括:
若所述第一现场声音信号的第一时长相对于所述第二现场声音信号的第二时长较短,所述服务设备根据所述差值确定所述差值占所述第一现场声音信号的第一时长的比例X;
所述服务设备计算所述第一现场声音信号的音频帧数Y;
所述服务设备计算放大系数Z,所述Z=X*(Y/(Y-1));
所述服务设备按照所述放大系数,对所述第一现场声音信号中除了首个音频帧之外的其他音频帧进行等比例放大,以使得放大后的第一现场声音信号的最终持续时长与所述第二现场声音信号的第二时长相同。
作为一种可选的实施方式,本发明实施例中,若所述差值大于所述预设数值,所述方法还包括:
所述服务设备使用相同的默认采样频率对所述第一现场声音信号以及所述第二现场声音信号分别进行采样,得到第一采样组和第二采样组;
所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组;其中,所述互相关权值与所述差值正相关,所述互相关组中包含有多个数值;
所述服务设备将所述互相关组中的多个数值进行比较,找出最大的数值;
所述服务设备使用所述最大的数值对应的音频帧位置作为对齐点。
作为一种可选的实施方式,本发明实施例中,所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组,包括:
Figure BDA0001663140490000041
其中,Sn[t]表示互相关组,x[m]表示所述第一采样组中的第m个采样数据,y[m-t]表示所述第二采样组中的第(m-t)个采样数据,t表示时间的偏移量,t为整数,取值为从0到m,Wt表示窗函数,其中n=l*f,l为互相关权值,f为所述默认采样频率。
作为一种可选的实施方式,本发明实施例中,所述服务设备根据所述虚拟游戏PK的当前进程时间,从所述虚拟场景集合中获取与所述虚拟游戏PK 的当前进程时间相对应的预设虚拟场景,包括:
所述服务设备从所述若干个进程时间段对应的若干个预设虚拟场景子集合中,确定出目标预设虚拟场景子集合;其中,所述目标预设虚拟场景子集合对应的一个进程时间段包含所述虚拟游戏PK的当前进程时间;
所述服务设备从所述目标预设虚拟场景子集合获取一个预设虚拟场景,作为与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景。
作为一种可选的实施方式,本发明实施例中,所述服务设备判断所述合成声音信号与所述默认声音信号是否匹配,包括:
所述服务设备对所述合成声音信号进行预处理,预处理包括预加重、分帧和加窗处理;从预处理后的合成声音信号中提取声纹特征MFCC、LPCC、△ MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量,其中:MFCC为梅尔频率倒谱系数,LPCC为线性预测倒谱系数,△MFCC为MFCC 的一阶差分,△LPCC为LPCC的一阶差分,GFCC为Gammatone滤波器倒谱系数;判断第一多维特征向量是否与所述默认声音信号的声纹特征对应的第二多维向量完全匹配,如果完全匹配,则确定所述合成声音信号与所述默认声音信号匹配。
作为一种可选的实施方式,本发明实施例中,所述服务设备获取所述第一VR设备上报的第一现场声音信号以及获取所述第二VR设备上报的第二现场声音信号之后,以及所述服务设备对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号之前,所述方法还包括:
所述服务设备识别所述第一现场声音信号以及所述第二现场声音信号是否均包含预设的用于触发虚拟场景切换的关键词,若均包含,执行所述对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号的步骤。
本发明实施例中,在第一VR设备和第二VR设备在参与虚拟游戏PK之前,服务设备预先将第一VR设备为每一个进程时间段分别配置的、包括第一VR 设备、第二VR设备均感兴趣的预设虚拟场景的预设虚拟场景子集合组汇聚成一个预设虚拟场景集合,并将第一VR设备上报的第一认证声音信号以及第二 VR设备上报的第二认证声音信号合成得到默认声音信号与该预设虚拟场景集合进行绑定,其中,该默认声音信号和该预设虚拟场景集合,作为第一VR设备和第二VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据。在此基础上,对于佩戴VR设备正在参与虚拟游戏PK的第一佩戴用户和第二佩戴用户而言,只需第一佩戴用户自主发出第一现场语句以及第二佩戴用户自主发出第二现场语句,以使服务设备判断出由第一现场语句转换获得的第一现场声音信号与第二现场语句转换获得的第二现场声音信号合成的合成声音信号与该默认声音信号匹配后,从该虚拟场景集合中获取与虚拟游戏PK的当前进程时间相对应的预设虚拟场景并同步推送给第一VR设备和第二VR设备,以实现第一VR设备和第二VR设备的虚拟场景同步切换。可见,实施本发明实施例,有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。此外,服务设备在获取到第一现场声音信号和第二现场声音信号之后,并不是逐一的对这两个现场声音信号进行验证,而是把这两个现场声音信号进行合成得到合成声音信号,然后再将合成声音信号与默认声音信号进行匹配,而现场声音信号合成后,会产生更多的可验证参数(例如两段声音是否对齐,两段声音的相位差等),相比于逐一验证两段现场声音信号,提高了验证的安全性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种双VR设备参与虚拟游戏PK前的虚拟场景配置的网络架构图;
图2为本发明实施例公开的一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法的流程示意图;
图3为本发明实施例公开的另一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法,有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。以下进行结合附图进行详细描述。
为了更好的理解本发明实施例,下面先对本发明实施例涉及到的双VR设备参与虚拟游戏PK前的虚拟场景配置的网络架构进行描述。请参阅图1,图 1为本发明实施例公开的一种双VR设备参与虚拟游戏PK前的虚拟场景配置的网络架构图。在图1所示的网络架构中,可以包括:第一VR设备、第二VR 设备以及服务设备,其中,第一VR设备、第二VR设备可以分别通过无线方式与服务设备进行无线通信连接。在第一VR设备的第一佩戴用户与第二VR设备的第二佩戴用户参与虚拟游戏PK之前,服务设备向第一VR设备推送虚拟游戏对应的完整进程时间条(用于表示该虚拟游戏的进程执行完毕时所对应的完整时长),此时第一VR设备可以作为主VR设备,而第二VR设备可以作为从VR设备,以使所述第一VR设备将该完整进程时间条划分为若干个进程时间段,若干个进程时间段中的任意两者互不重叠;以及,服务设备可以将第一VR设备为每一个进程时间段分别配置的、包括第一VR设备、第二VR 设备均感兴趣的预设虚拟场景的预设虚拟场景子集合组汇聚成一个预设虚拟场景集合,并将第一VR设备上报的第一认证声音信号以及第二VR设备上报的第二认证声音信号合成得到默认声音信号与该预设虚拟场景集合进行绑定,其中,该默认声音信号和该预设虚拟场景集合,作为第一VR设备和第二 VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据。在此基础上,对于佩戴VR设备正在参与虚拟游戏PK的第一佩戴用户和第二佩戴用户而言,只需第一佩戴用户自主发出第一现场语句以及第二佩戴用户自主发出第二现场语句,以使服务设备判断出由第一现场语句转换获得的第一现场声音信号与第二现场语句转换获得的第二现场声音信号合成的合成声音信号与该默认声音信号匹配后,从该虚拟场景集合中获取与虚拟游戏PK的当前进程时间相对应的预设虚拟场景并同步推送给第一VR设备和第二VR设备,以实现第一VR 设备和第二VR设备的虚拟场景同步切换。可见,实施图1所示的网络架构,有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。此外,实施图1所示的网络架构,服务设备在获取到第一现场声音信号和第二现场声音信号之后,并不是逐一的对这两个现场声音信号进行验证,而是把这两个现场声音信号进行合成得到合成声音信号,然后再将合成声音信号与默认声音信号进行匹配,而现场声音信号合成后,会产生更多的可验证参数 (例如两段声音是否对齐,两段声音的相位差等),相比于逐一验证两段现场声音信号,提高了验证的安全性。
请参阅图2,图2为本发明实施例公开的一种双VR设备参与虚拟游戏PK 前的虚拟场景配置方法的流程示意图。在图2说描述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法中,双VR设备包括第一VR设备和第二VR设备。如图2所示,该双VR设备参与虚拟游戏PK前的虚拟场景配置方法可以包括以下步骤:
201、服务设备在第一VR设备和第二VR设备在参与虚拟游戏PK之前,服务设备向第一VR设备推送虚拟游戏对应的完整进程时间条,以使第一VR 设备将该完整进程时间条划分为若干个进程时间段,该若干个进程时间段中的任意两者互不重叠。
202、服务设备检测第一VR设备为每一个进程时间段分别配置的预设虚拟场景子集合,每一个预设虚拟场景子集合包括若干个预设虚拟场景;其中,每一个预设虚拟场景携带用于表示对该预设虚拟场景感兴趣的VR设备组,该 VR设备标签组包括第一VR设备的标识和第二VR设备的标识。
203、服务设备将每一个进程时间段分别配置的预设虚拟场景子集合组汇聚成一个预设虚拟场景集合。
204、服务设备获取第一VR设备上报的第一认证声音信号以及第二VR设备上报的第二认证声音信号,并对第一认证声音信号以及第二认证声音信号进行合成得到默认声音信号。
205、服务设备将该默认声音信号与该预设虚拟场景集合进行绑定,其中,该默认声音信号和所述预设虚拟场景集合,作为第一VR设备和第二VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据。
在图2所描述的方法的基础上,对于佩戴VR设备正在参与虚拟游戏PK 的第一佩戴用户和第二佩戴用户而言,只需第一佩戴用户自主发出第一现场语句以及第二佩戴用户自主发出第二现场语句,以使服务设备判断出由第一现场语句转换获得的第一现场声音信号与第二现场语句转换获得的第二现场声音信号合成的合成声音信号与该默认声音信号匹配后,从该虚拟场景集合中获取与虚拟游戏PK的当前进程时间相对应的预设虚拟场景并同步推送给第一VR设备和第二VR设备,以实现第一VR设备和第二VR设备的虚拟场景同步切换。可见,实施本发明实施例,有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。此外,服务设备在获取到第一现场声音信号和第二现场声音信号之后,并不是逐一的对这两个现场声音信号进行验证,而是把这两个现场声音信号进行合成得到合成声音信号,然后再将合成声音信号与默认声音信号进行匹配,而现场声音信号合成后,会产生更多的可验证参数(例如两段声音是否对齐,两段声音的相位差等),相比于逐一验证两段现场声音信号,提高了验证的安全性。
请参阅图3,图3为本发明实施例公开的另一种双VR设备参与虚拟游戏 PK前的虚拟场景配置方法的流程示意图。在图3说描述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法中,双VR设备包括第一VR设备和第二VR设备。如图3所示,该双VR设备参与虚拟游戏PK前的虚拟场景配置方法可以包括以下步骤:
301、服务设备在第一VR设备和第二VR设备在参与虚拟游戏PK之前,服务设备向第一VR设备推送虚拟游戏对应的完整进程时间条,以使第一VR 设备将该完整进程时间条划分为若干个进程时间段,该若干个进程时间段中的任意两者互不重叠。
302、服务设备检测第一VR设备为每一个进程时间段分别配置的预设虚拟场景子集合,每一个预设虚拟场景子集合包括若干个预设虚拟场景;其中,每一个预设虚拟场景携带用于表示对该预设虚拟场景感兴趣的VR设备组,该 VR设备标签组包括第一VR设备的标识和第二VR设备的标识。
303、服务设备将每一个进程时间段分别配置的预设虚拟场景子集合组汇聚成一个预设虚拟场景集合。
304、服务设备获取第一VR设备上报的第一认证声音信号以及第二VR设备上报的第二认证声音信号,并对第一认证声音信号以及第二认证声音信号进行合成得到默认声音信号。
305、服务设备将该默认声音信号与该预设虚拟场景集合进行绑定,其中,该默认声音信号和所述预设虚拟场景集合,作为第一VR设备和第二VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据。
306、服务设备在第一VR设备和第二VR设备参与虚拟游戏PK时,获取第一VR设备上报的第一现场声音信号以及获取第二VR设备上报的第二现场声音信号;其中,第一现场声音信号是由第一VR设备对第一VR设备的第一佩戴用户发出的第一现场语句进行转换获得的第一现场声音信号;第二现场声音信号是由第二VR设备对第二VR设备的第二佩戴用户发出的第二现场语句进行转换获得的第二现场声音信号。
307、服务设备对第一现场声音信号以及第二现场声音信号进行合成得到合成声音信号。
308、服务设备判断合成声音信号与该默认声音信号是否匹配,若匹配,确定与该默认声音信号绑定的预设虚拟场景集合;若不匹配,返回步骤306。
309、服务设备根据虚拟游戏PK的当前进程时间,从该虚拟场景集合中获取与该虚拟游戏PK的当前进程时间相对应的虚拟场景。
310、服务设备将与该虚拟游戏PK的当前进程时间相对应的虚拟场景同步推送给第一VR设备和第二VR设备,以实现第一VR设备和第二VR设备的虚拟场景同步切换。
作为一种可选的实施方式,上述步骤307中,服务设备对第一现场声音信号以及第二现场声音信号进行合成得到合成声音信号,包括:
服务设备确定该第一现场声音信号与该第二现场声音信号之间的对齐点;其中,该对齐点是指该第一现场声音信号和该第二现场声音信号合成的开始位置;换句话说,该第一现场声音信号与该第二现场声音信号要合成的话,需要找到从哪个音频帧开始合成,这个音频帧就可以理解为对齐点;
以及,服务设备根据该对齐点将该第一现场声音信号与该第二现场声音信号合成为合成声音信号。
作为一种可选的实施方式,本发明实施例中,服务设备确定该第一现场声音信号与该第二现场声音信号之间的对齐点,包括
服务设备计算该第一现场声音信号的第一时长以及该第二现场声音信号的第二时长;其中,第一时长表示该第一现场声音信号的声音持续的时间;第二时长表示该第二现场声音信号的声音持续的时间;
服务设备计算该第一时长和该第二时长之间的差值;
服务设备判断该差值是否小于或等于预设数值,若是,对该第一现场声音信号和该第二现场声音信号中的任一声音信号进行周期上的缩放,以获得最终持续时长相同的第一现场声音信号和第二现场声音信号,再以最终持续时长相同的第一现场声音信号和第二现场声音信号的首个音频帧作为对齐点。
本发明实施例中,如果该差值小于或等于预设数值,则说明两段声音信号(即该第一现场声音信号和该第二现场声音信号)在输入时的差距较小,此时可以对其中的一段声音信号(如该第一现场声音信号)进行周期上的缩放,例如对时长较长的声音信号进行周期上的压缩(也就是俗称的快进),和 /或对时长较短的声音信号进行周期上的放大(也就是俗称的慢进),使得两段声音信号的最终持续时长相同,再以两段声音信号的首个音频帧作为对齐点进行对齐。
其中,该预设数值的取值范围可以为0至0.1秒。
本发明实施例中,服务设备对该第一现场声音信号和该第二现场声音信号中的任一声音信号进行周期上的缩放,包括:
若该第一现场声音信号的第一时长相对于该第二现场声音信号的第二时长较短,则根据该差值确定该差值占该第一现场声音信号的第一时长的比例 X;
计算该第一现场声音信号的音频帧数Y;
计算放大系数Z,该Z=X*(Y/(Y-1));
按照该放大系数,对该第一现场声音信号中除了首个音频帧之外的其他音频帧进行等比例放大,以使得放大后的第一现场声音信号的最终持续时长与该第二现场声音信号的第二时长相同。
举例来说,该第一现场声音信号为1秒,有100个音频帧,则每个音频帧0.01秒,该第二现场声音信号为1.1秒,需要把该第一现场声音信号放大至1.1秒。第一帧不动,放大后续的99帧,先确定放大的系数Z为0.1*(100/ (100-1))=0.101,即10.1%;此时后续的99帧,每帧需要放大10.1%,放大后的每帧为0.01*(1+10.1%)=0.01101,放大后这99帧的长度为1.09秒,再加上没有动的第一帧0.01秒,就为1.1秒了,即放大后的第一现场声音信号的最终持续时长与该第二现场声音信号的第二时长相同。
本发明实施例中,如果该差值大于预设数值,则说明两段声音信号(即该第一现场声音信号和该第二现场声音信号)在输入时的差距较大,如果此时还是对其中的一段声音信号进行周期上的缩放,则缩放后会造成比较严重的失真,后续的校验会出现问题,所以可以采用互相关算法来确定对齐点。即,在该差值大于预设数值时,该方法还包括:
服务设备使用相同的默认采样频率对该第一现场声音信号以及该第二现场声音信号分别进行采样,得到第一采样组和第二采样组;
服务设备根据该默认采样频率(例如8000Hz到10000Hz)、第一采样组、第二采样组以及互相关权值生成互相关组;其中,该互相关权值与该差值正相关(例如该互相关权值可以为该差值的1.5倍),该互相关组中包含有多个数值;
服务设备将该互相关组中的多个数值进行比较,找出最大的数值;
服务设备使用该最大的数值对应的音频帧位置作为对齐点。
其中,服务平台根据该默认采样频率、第一采样组、第二采样组以及互相关权值生成互相关组,包括:
Figure BDA0001663140490000131
其中,Sn[t]表示互相关组,x[m]表示第一采样组中的第m个采样数据, y[m-t]表示第二采样组中的第(m-t)个采样数据,t表示时间的偏移量,t 为整数,取值为从0到m,Wt表示窗函数,其中n=l*f,l为互相关权值,f 为默认采样频率。
其中,服务设备使用该最大的数值对应的音频帧位置作为对齐点可以为:
服务设备找到最大的数值后,可以根据上述的公式(1)反推出m是多少,也就是哪一个采样数据,然后再确定该采样数据所在的音频帧是哪一个,并且使用该音频帧作为对齐点。
此外,服务设备在获取到由第一现场语句转换得到的第一现场声音信号和由第二现场语句转换得到的第二现场声音信号之后,并不是逐一的对这两个声音信号进行验证,而是把这两个声音信号进行合成得到合成声音信号,然后再将合成声音信号与预存的任一默认声音信号进行匹配,而声音信号合成后,会产生更多的可验证参数(例如两段声音是否对齐,两段声音的相位差等),相比于逐一验证两段声音信号,提高了验证的安全性。
作为一种可选的实施方式,上述步骤308中,服务设备判断合成声音信号与该默认声音信号是否匹配,可以包括:
服务设备对合成声音信号进行预处理,预处理包括预加重、分帧和加窗处理;
服务设备从预处理后的合成声音信号中提取声纹特征MFCC、LPCC、△ MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量,其中:MFCC为梅尔频率倒谱系数,LPCC为线性预测倒谱系数,△MFCC为MFCC 的一阶差分,△LPCC为LPCC的一阶差分,GFCC为Gammatone滤波器倒谱系数;
服务设备判断第一多维特征向量是否与该默认声音信号的声纹特征对应的第二多维向量完全匹配,如果完全匹配,则准确的确定合成声音信号与该默认声音信号匹配;反之,如果不完全匹配,则确定合成声音信号与该默认声音信号不匹配。
本发明实施例中,服务设备对合成声音信号进行预处理还可以包括对合成声音信号的格式转换、删除合成声音信号中的静音段、删除音频中的白噪声等等。
其中,实施上述实施方式,可以提高声音匹配的准确性。
本发明实施例中,与默认声音信号绑定的预设虚拟场景集合可以包括若干个预设虚拟场景子集合,每一个预设虚拟场景子集合包括若干个预设虚拟场景,并且每一个预设虚拟场景子集合均绑定一个进程时间段(也称为虚拟游戏执行时间段),并且任意两个预设虚拟场景子集合绑定的进程时间段互不重叠。
本发明实施例中,上述步骤309中,服务设备根据虚拟游戏PK的当前进程时间,从该虚拟场景集合中获取与该虚拟游戏PK的当前进程时间相对应的预设虚拟场景,可以包括:
服务设备从该若干个进程时间段对应的若干个预设虚拟场景子集合中,确定出目标预设虚拟场景子集合;其中,目标预设虚拟场景子集合绑定的一个进程时间段包含该虚拟游戏PK的当前进程时间;
服务设备从目标预设虚拟场景子集合获取一个预设虚拟场景,作为与该虚拟游戏PK的当前进程时间相对应的预设虚拟场景。
其中,实施上述实施方式,服务设备可以自适应的获取与虚拟游戏PK的当前进程时间相对应的预设虚拟场景,以便于可以灵活的将与虚拟游戏PK的当前进程时间相对应的预设虚拟场景同步推送给参与虚拟游戏PK的两个用户,使得参与虚拟游戏PK的两个用户可以体验到同时切换成的与虚拟游戏PK 的当前进程时间相对应的预设虚拟场景,从而可以提高参与虚拟游戏PK的两个用户的体验感。
作为一种可选的实施方式,在图3所描述的双VR设备参与虚拟游戏PK 前的虚拟场景配置方法中,服务设备获取第一VR设备上报的第一现场声音信号以及获取第二VR设备上报的第二现场声音信号之后,以及服务设备对第一现场声音信号以及第二现场声音信号进行合成得到合成声音信号之前,还可以执行以下步骤:
服务设备识别第一现场声音信号以及第二现场声音信号是否均包含预设的用于触发虚拟场景切换的关键词,若均包含,执行对第一现场声音信号以及第二现场声音信号进行合成得到合成声音信号的步骤;若均未包含,结束本流程。
举例来说,预设的用于触发虚拟场景切换的关键词可以包括:切换场景、场景切换、场景变换、变换场景、场景更换、更换场景等等,本发明实施例不作限定。
作为一种可选的实施方式,在图3所描述的双VR设备参与虚拟游戏PK 前的虚拟场景配置方法中,由于与默认声音信号绑定的预设虚拟场景集合可以包括若干个预设虚拟场景子集合,每一个预设虚拟场景子集合包括若干个虚拟场景,并且每一个预设虚拟场景子集合均绑定一个进程时间段(也称为虚拟游戏执行时间段),并且任意两个预设虚拟场景子集合绑定的进程时间段互不重叠;在此基础上,服务设备获取第一VR设备上报的第一现场声音信号以及获取第二VR设备上报的第二现场声音信号之前,还可以执行以下步骤:
服务设备判断虚拟游戏PK是否由一个预设虚拟场景子集合绑定的进程时间段(也称为虚拟游戏执行时间段)过渡至另一个预设虚拟场景子集合绑定的进程时间段(也称为虚拟游戏执行时间段),如果是,服务设备可以同步向第一VR设备和第二VR设备推送通知消息,该通知消息用于提示可以通过声音验证来同步切换虚拟场景。
其中,实施这种实施方式,服务设备可以根据虚拟游戏PK的进程时间段的变化,主动的提醒正在参与虚拟游戏PK的第一VR设备的第一佩戴用户与第二VR设备的第二佩戴用户可以同步切换虚拟场景,从而可以提升正在参与虚拟游戏PK的两个用户的体验感。
其中,实施图3所描述的方法,有利于实现参与虚拟游戏PK的两个用户自主的触发虚拟场景的同步切换。此外,服务设备在获取到第一现场声音信号和第二现场声音信号之后,并不是逐一的对这两个现场声音信号进行验证,而是把这两个现场声音信号进行合成得到合成声音信号,然后再将合成声音信号与默认声音信号进行匹配,而现场声音信号合成后,会产生更多的可验证参数(例如两段声音是否对齐,两段声音的相位差等),相比于逐一验证两段现场声音信号,提高了验证的安全性。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述双VR设备包括第一VR设备和第二VR设备,所述第一VR设备和所述第二VR设备在参与虚拟游戏PK之前,所述方法包括:
服务设备向所述第一VR设备推送虚拟游戏对应的完整进程时间条,以使所述第一VR设备将所述完整进程时间条划分为若干个进程时间段,所述若干个进程时间段中的任意两者互不重叠;
所述服务设备检测所述第一VR设备为每一个所述进程时间段分别配置的预设虚拟场景子集合,每一个预设虚拟场景子集合包括若干个预设虚拟场景;其中,每一个预设虚拟场景携带用于表示对所述预设虚拟场景感兴趣的VR设备组,所述VR设备组包括所述第一VR设备的标识和所述第二VR设备的标识;
所述服务设备将每一个所述进程时间段分别配置的预设虚拟场景子集合汇聚成一个预设虚拟场景集合;
所述服务设备获取所述第一VR设备上报的第一认证声音信号以及所述第二VR设备上报的第二认证声音信号;
所述服务设备对所述第一认证声音信号以及所述第二认证声音信号进行合成得到默认声音信号;
所述服务设备将所述默认声音信号与所述预设虚拟场景集合进行绑定,其中,所述默认声音信号和所述预设虚拟场景集合,作为所述第一VR设备和所述第二VR设备参与虚拟游戏PK时进行虚拟场景同步切换的依据。
2.根据权利要求1所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备将所述默认声音信号与所述预设虚拟场景集合进行绑定之后,所述方法还包括:
在所述第一VR设备和所述第二VR设备参与虚拟游戏PK时,所述服务设备获取所述第一VR设备上报的第一现场声音信号以及获取所述第二VR设备上报的第二现场声音信号;其中,所述第一现场声音信号是由所述第一VR设备对所述第一VR设备的第一佩戴用户发出的第一现场语句进行转换获得的第一现场声音信号;所述第二现场声音信号是由所述第二VR设备对所述第二VR设备的第二佩戴用户发出的第二现场语句进行转换获得的第二现场声音信号;
所述服务设备对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号;
所述服务设备判断所述合成声音信号与所述默认声音信号是否匹配,若匹配,确定与所述默认声音信号绑定的所述预设虚拟场景集合;
所述服务设备根据所述虚拟游戏PK的当前进程时间,从所述预设虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景;
所述服务设备将与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景同步推送给所述第一VR设备和第二VR设备,以实现所述第一VR设备和第二VR设备的虚拟场景同步切换。
3.根据权利要求2所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号,包括:
所述服务设备确定所述第一现场声音信号与所述第二现场声音信号之间的对齐点;其中,所述对齐点是指所述第一现场声音信号和所述第二现场声音信号合成的开始位置;
所述服务设备根据所述对齐点将所述第一现场声音信号与所述第二现场声音信号合成为合成声音信号。
4.根据权利要求3所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备确定所述第一现场声音信号与所述第二现场声音信号之间的对齐点,包括
所述服务设备计算所述第一现场声音信号的第一时长以及所述第二现场声音信号的第二时长;其中,所述第一时长表示所述第一现场声音信号的声音持续的时间;所述第二时长表示所述第二现场声音信号的声音持续的时间;
所述服务设备计算所述第一时长和所述第二时长之间的差值;
所述服务设备判断所述差值是否小于或等于预设数值,若是,对所述第一现场声音信号和所述第二现场声音信号中的任一现场声音信号进行周期上的缩放,以获得最终持续时长相同的第一现场声音信号和第二现场声音信号,再以所述最终持续时长相同的第一现场声音信号和第二现场声音信号的首个音频帧作为对齐点。
5.根据权利要求4所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备对所述第一现场声音信号和所述第二现场声音信号中的任一现场声音信号进行周期上的缩放,包括:
若所述第一现场声音信号的第一时长相对于所述第二现场声音信号的第二时长较短,所述服务设备根据所述差值确定所述差值占所述第一现场声音信号的第一时长的比例X;
所述服务设备计算所述第一现场声音信号的音频帧数Y;
所述服务设备计算放大系数Z,所述Z=X*(Y/(Y-1));
所述服务设备按照所述放大系数,对所述第一现场声音信号中除了首个音频帧之外的其他音频帧进行等比例放大,以使得放大后的第一现场声音信号的最终持续时长与所述第二现场声音信号的第二时长相同。
6.根据权利要求4或5所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,若所述差值大于所述预设数值,所述方法还包括:
所述服务设备使用相同的默认采样频率对所述第一现场声音信号以及所述第二现场声音信号分别进行采样,得到第一采样组和第二采样组;
所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组;其中,所述互相关权值与所述差值正相关,所述互相关组中包含有多个数值;
所述服务设备将所述互相关组中的多个数值进行比较,找出最大的数值;
所述服务设备使用所述最大的数值对应的音频帧位置作为对齐点。
7.根据权利要求6所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组,包括:
Figure FDA0003055303820000041
其中,Sn[t]表示互相关组,x[m]表示所述第一采样组中的第m个采样数据,y[m-t]表示所述第二采样组中的第(m-t)个采样数据,t表示时间的偏移量,t为整数,取值为从0到m,Wt表示窗函数,其中n=l*f,l为互相关权值,f为所述默认采样频率。
8.根据权利要求7所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备根据所述虚拟游戏PK的当前进程时间,从所述虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景,包括:
所述服务设备从所述若干个进程时间段对应的若干个预设虚拟场景子集合中,确定出目标预设虚拟场景子集合;其中,所述目标预设虚拟场景子集合对应的一个进程时间段包含所述虚拟游戏PK的当前进程时间;
所述服务设备从所述目标预设虚拟场景子集合获取一个预设虚拟场景,作为与所述虚拟游戏PK的当前进程时间相对应的预设虚拟场景。
9.根据权利要求8所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备判断所述合成声音信号与所述默认声音信号是否匹配,包括:
所述服务设备对所述合成声音信号进行预处理,预处理包括预加重、分帧和加窗处理;从预处理后的合成声音信号中提取声纹特征MFCC、LPCC、△MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量,其中:MFCC为梅尔频率倒谱系数,LPCC为线性预测倒谱系数,△MFCC为MFCC的一阶差分,△LPCC为LPCC的一阶差分,GFCC为Gammatone滤波器倒谱系数;判断第一多维特征向量是否与所述默认声音信号的声纹特征对应的第二多维向量完全匹配,如果完全匹配,则确定所述合成声音信号与所述默认声音信号匹配。
10.根据权利要求9所述的双VR设备参与虚拟游戏PK前的虚拟场景配置方法,其特征在于,所述服务设备获取所述第一VR设备上报的第一现场声音信号以及获取所述第二VR设备上报的第二现场声音信号之后,以及所述服务设备对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号之前,所述方法还包括:
所述服务设备识别所述第一现场声音信号以及所述第二现场声音信号是否均包含预设的用于触发虚拟场景切换的关键词,若均包含,执行所述对所述第一现场声音信号以及所述第二现场声音信号进行合成得到合成声音信号的步骤。
CN201810470506.7A 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法 Expired - Fee Related CN108771864B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810470506.7A CN108771864B (zh) 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810470506.7A CN108771864B (zh) 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法

Publications (2)

Publication Number Publication Date
CN108771864A CN108771864A (zh) 2018-11-09
CN108771864B true CN108771864B (zh) 2021-08-10

Family

ID=64027268

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810470506.7A Expired - Fee Related CN108771864B (zh) 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法

Country Status (1)

Country Link
CN (1) CN108771864B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114372383B (zh) * 2022-03-23 2022-06-14 广州市影擎电子科技有限公司 一种基于vr仿真场景的场景快速切换方法及系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06315572A (ja) * 1993-05-07 1994-11-15 Ricoh Co Ltd 音声ゲーム機
JP2006155627A (ja) * 2005-12-05 2006-06-15 Sony Corp シミュレーションシステム、仮想空間提供装置および方法、並びにユーザ端末装置および仮想空間画像生成方法
CN106293346A (zh) * 2016-08-11 2017-01-04 深圳市金立通信设备有限公司 一种虚拟现实视景的切换方法及终端
CN107105168A (zh) * 2017-06-02 2017-08-29 哈尔滨市舍科技有限公司 可虚拟拍照的共享观景系统
CN107340864A (zh) * 2017-06-30 2017-11-10 大连理工大学 一种基于声波的虚拟输入方法
CN107450721A (zh) * 2017-06-28 2017-12-08 丝路视觉科技股份有限公司 一种vr互动方法和系统
JP2017228080A (ja) * 2016-06-22 2017-12-28 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
CN107885317A (zh) * 2016-09-29 2018-04-06 阿里巴巴集团控股有限公司 一种基于手势的交互方法及装置
CN107998658A (zh) * 2017-12-01 2018-05-08 苏州蜗牛数字科技股份有限公司 Vr游戏中实现3d角色口型语音聊天系统及方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06315572A (ja) * 1993-05-07 1994-11-15 Ricoh Co Ltd 音声ゲーム機
JP2006155627A (ja) * 2005-12-05 2006-06-15 Sony Corp シミュレーションシステム、仮想空間提供装置および方法、並びにユーザ端末装置および仮想空間画像生成方法
JP2017228080A (ja) * 2016-06-22 2017-12-28 ソニー株式会社 情報処理装置、情報処理方法、及び、プログラム
CN106293346A (zh) * 2016-08-11 2017-01-04 深圳市金立通信设备有限公司 一种虚拟现实视景的切换方法及终端
CN107885317A (zh) * 2016-09-29 2018-04-06 阿里巴巴集团控股有限公司 一种基于手势的交互方法及装置
CN107105168A (zh) * 2017-06-02 2017-08-29 哈尔滨市舍科技有限公司 可虚拟拍照的共享观景系统
CN107450721A (zh) * 2017-06-28 2017-12-08 丝路视觉科技股份有限公司 一种vr互动方法和系统
CN107340864A (zh) * 2017-06-30 2017-11-10 大连理工大学 一种基于声波的虚拟输入方法
CN107998658A (zh) * 2017-12-01 2018-05-08 苏州蜗牛数字科技股份有限公司 Vr游戏中实现3d角色口型语音聊天系统及方法

Also Published As

Publication number Publication date
CN108771864A (zh) 2018-11-09

Similar Documents

Publication Publication Date Title
CN111741326B (zh) 视频合成方法、装置、设备及存储介质
CN110706692B (zh) 儿童语音识别模型的训练方法及系统
CN112599122B (zh) 基于自注意力机制和记忆网络的语音识别方法及装置
CN109951743A (zh) 弹幕信息处理方法、系统及计算机设备
CN106537493A (zh) 语音识别系统及方法、客户端设备及云端服务器
JP2020515905A (ja) 話者の確認方法及び話者の確認装置
CN109599092B (zh) 一种音频合成方法及装置
CN103514882B (zh) 一种语音识别方法及系统
CN111081259A (zh) 基于说话人扩充的语音识别模型训练方法及系统
CN113299312A (zh) 一种图像生成方法、装置、设备以及存储介质
CN115442543A (zh) 虚拟形象说话视频的合成方法、装置、设备及存储介质
WO2017059694A1 (zh) 一种语音模仿方法和装置
CN114187547A (zh) 目标视频的输出方法及装置、存储介质及电子装置
CN111816216A (zh) 语音活性检测方法和装置
CN114093384A (zh) 说话视频生成方法、装置、设备以及存储介质
CN114945110B (zh) 说话头视频合成方法、装置、终端设备及可读存储介质
CN108771864B (zh) 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法
CN108704310B (zh) 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法
CN112908293B (zh) 一种基于语义注意力机制的多音字发音纠错方法及装置
CN114025235A (zh) 视频生成方法、装置、电子设备及存储介质
CN114093346A (zh) 使用对抗神经网络的联合自动语音识别和文本到语音转换
CN108744498B (zh) 一种基于双vr设备的虚拟游戏快速启动方法
CN106653003A (zh) 语音识别方法及装置
CN113593587B (zh) 语音分离方法及装置、存储介质、电子装置
CN112634859B (zh) 用于文本相关说话人识别的数据增强方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210721

Address after: 100020 06-1501, 12th floor, building 3, yard 8, worker's Stadium North Road, Chaoyang District, Beijing

Applicant after: Beijing rainforest Interactive Entertainment Co.,Ltd.

Address before: Room 403, No.35, Sanxiang, xiashou new village, Xicheng District, Dongguan City, Guangdong Province 523073

Applicant before: DONGGUAN HUARUI ELECTRONIC TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210810

CF01 Termination of patent right due to non-payment of annual fee