CN108704310A - 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法 - Google Patents

一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法 Download PDF

Info

Publication number
CN108704310A
CN108704310A CN201810470499.0A CN201810470499A CN108704310A CN 108704310 A CN108704310 A CN 108704310A CN 201810470499 A CN201810470499 A CN 201810470499A CN 108704310 A CN108704310 A CN 108704310A
Authority
CN
China
Prior art keywords
equipment
virtual scene
virtual
default
voice signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810470499.0A
Other languages
English (en)
Other versions
CN108704310B (zh
Inventor
向敏明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changsha Shenman Culture Technology Co ltd
Original Assignee
Dongguan Huarui Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dongguan Huarui Electronic Technology Co Ltd filed Critical Dongguan Huarui Electronic Technology Co Ltd
Priority to CN201810470499.0A priority Critical patent/CN108704310B/zh
Publication of CN108704310A publication Critical patent/CN108704310A/zh
Application granted granted Critical
Publication of CN108704310B publication Critical patent/CN108704310B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/52—Controlling the output signals based on the game progress involving aspects of the displayed game scene
    • A63F13/525—Changing parameters of virtual cameras
    • A63F13/5255—Changing parameters of virtual cameras according to dedicated instructions from a player, e.g. using a secondary joystick to rotate the camera around a player's character
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215—Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/03—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters
    • G10L25/24—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 characterised by the type of extracted parameters the extracted parameters being the cepstrum
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1081—Input via voice recognition
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/66—Methods for processing data by generating or executing the game program for rendering three dimensional images
    • A63F2300/6661—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera
    • A63F2300/6676—Methods for processing data by generating or executing the game program for rendering three dimensional images for changing the position of the virtual camera by dedicated player input
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Stereophonic System (AREA)

Abstract

本发明实施例涉及VR技术领域，公开一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特点为：对于佩戴VR设备正在参与虚拟游戏PK的第一佩戴用户和第二佩戴用户而言，只需第一佩戴用户发出第一语句以及第二佩戴用户发出第二语句，即可灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。在获取到第一声音信号和第二声音信号之后，并不是逐一的对这两个声音信号进行验证，而是把这两个声音信号进行合成得到合成声音信号，然后再将合成声音信号与预存的任一默认声音信号进行匹配，而声音信号合成后，会产生更多的可验证参数(例如两段声音是否对齐，两段声音的相位差等)，相比于逐一验证两段声音信号，提高了验证的安全性。

Description

一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法
技术领域
本发明涉及虚拟现实(Virtual Reality，VR)技术领域，尤其涉及一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法。
背景技术
VR技术是一种可以创建和体验虚拟世界的计算机仿真系统，它利用计算机生成一种模拟环境，是一种多源信息融合的、交互式的三维动态视景和实体行为的系统仿真以使用户沉浸到该环境中。随着VR技术的快速发展，利用VR设备(如VR头盔)来参与虚拟游戏PK已经成为了十分普遍的一种游戏方式。
在实践中发现，当两个用户各自使用VR设备来参与虚拟游戏PK时，两个用户从各自的VR设备上体验到的虚拟场景通常都是固定的或者按预定时序来变化的，无法灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。
发明内容
本发明实施例公开了一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法，能够灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。
其中，一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法，所述双 VR设备包括第一VR设备和第二VR设备，所述第一VR设备和所述第二VR设备正在参与虚拟游戏PK，所述方法包括：
服务设备获取所述第一VR设备上报的第一声音信号以及获取所述第二VR 设备上报的第二声音信号；其中，所述第一声音信号是由所述第一VR设备对所述第一VR设备的第一佩戴用户发出的第一语句进行转换获得的第一声音信号；所述第二声音信号是由所述第二VR设备对所述第二VR设备的第二佩戴用户发出的第二语句进行转换获得的第二声音信号；
所述服务设备对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号；
所述服务设备判断所述合成声音信号与预存的任一默认声音信号是否匹配，若匹配，确定与所述默认声音信号绑定的预设虚拟场景集合；
所述服务设备根据所述虚拟游戏PK的当前进程时间，从所述虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的虚拟场景；
所述服务设备将与所述虚拟游戏PK的当前进程时间相对应的虚拟场景同步推送给所述第一VR设备和第二VR设备，以实现所述第一VR设备和第二VR 设备的虚拟场景同步切换。
作为一种可选的实施方式，本发明实施例中，所述服务设备对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号，包括：
所述服务设备确定所述第一声音信号与所述第二声音信号之间的对齐点；其中，所述对齐点是指所述第一声音信号和所述第二声音信号合成的开始位置；
所述服务设备根据所述对齐点将所述第一声音信号与所述第二声音信号合成为合成声音信号。
作为一种可选的实施方式，本发明实施例中，所述服务设备确定所述第一声音信号与所述第二声音信号之间的对齐点，包括
所述服务设备计算所述第一声音信号的第一时长以及所述第二声音信号的第二时长；其中，所述第一时长表示所述第一声音信号的声音持续的时间；所述第二时长表示所述第二声音信号的声音持续的时间；
所述服务设备计算所述第一时长和所述第二时长之间的差值；
所述服务设备判断所述差值是否小于或等于预设数值，若是，对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，以获得最终持续时长相同的第一声音信号和第二声音信号，再以所述最终持续时长相同的第一声音信号和第二声音信号的首个音频帧作为对齐点。
作为一种可选的实施方式，本发明实施例中，所述服务设备对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，包括：
若所述第一声音信号的第一时长相对于所述第二声音信号的第二时长较短，所述服务设备根据所述差值确定所述差值占所述第一声音信号的第一时长的比例X；
所述服务设备计算所述第一声音信号的音频帧数Y；
所述服务设备计算放大系数Z，所述Z＝X*(Y/(Y-1))；
所述服务设备按照所述放大系数，对所述第一声音信号中除了首个音频帧之外的其他音频帧进行等比例放大，以使得放大后的第一声音信号的最终持续时长与所述第二声音信号的第二时长相同。
作为一种可选的实施方式，本发明实施例中，若所述差值大于所述预设数值，所述方法还包括：
所述服务设备使用相同的默认采样频率对所述第一声音信号以及所述第二声音信号分别进行采样，得到第一采样组和第二采样组；
所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组；其中，所述互相关权值与所述差值正相关，所述互相关组中包含有多个数值；
所述服务设备将所述互相关组中的多个数值进行比较，找出最大的数值；
所述服务设备使用所述最大的数值对应的音频帧位置作为对齐点。
作为一种可选的实施方式，本发明实施例中，所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组，包括：
其中，Sn[t]表示互相关组，x[m]表示所述第一采样组中的第m个采样数据，y[m-t]表示所述第二采样组中的第(m-t)个采样数据，t表示时间的偏移量，t为整数，取值为从0到m，Wt表示窗函数，其中n＝l*f，l为互相关权值，f为所述默认采样频率。
作为一种可选的实施方式，本发明实施例中，与所述默认声音信号绑定的预设虚拟场景集合包括若干个预设虚拟场景子集合，每一个所述预设虚拟场景子集合包括若干个虚拟场景，并且每一个所述预设虚拟场景子集合绑定一个进程时间段，任意两个所述预设虚拟场景子集合绑定的进程时间段互不重叠；
所述服务设备根据所述虚拟游戏PK的当前进程时间，从所述虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的虚拟场景，包括：
所述服务设备从所述若干个预设虚拟场景子集合中，确定出目标预设虚拟场景子集合；其中，所述目标预设虚拟场景子集合绑定的一个进程时间段包含所述虚拟游戏PK的当前进程时间；
所述服务设备从所述目标预设虚拟场景子集合获取一个预设虚拟场景，作为与所述虚拟游戏PK的当前进程时间相对应的虚拟场景。
作为一种可选的实施方式，本发明实施例中，所述服务设备从所述目标预设虚拟场景子集合获取一个预设虚拟场景，作为与所述虚拟游戏PK的当前进程时间相对应的虚拟场景，包括：
所述服务设备识别所述目标预设虚拟场景子集合中每一个预设虚拟场景携带的VR设备标签组，其中，每一个预设虚拟场景携带的VR设备标签组用于表示对所述预设虚拟场景感兴趣的VR设备组；
所述服务设备根据所述目标预设虚拟场景子集合中每一个预设虚拟场景携带的VR设备标签，从所述目标预设虚拟场景子集合中确定出部分预设虚拟场景；其中，所述部分预设虚拟场景中的每一个预设虚拟场景携带的VR设备标签表示的对所述预设虚拟场景感兴趣的VR设备组包含所述第一VR设备和所述第二VR设备；
所述服务设备从所述部分预设虚拟场景获取任意一个预设虚拟场景，作为与所述虚拟游戏PK的当前进程时间相对应的虚拟场景。
作为一种可选的实施方式，本发明实施例中，所述服务设备判断所述合成声音信号与预存的任一默认声音信号是否匹配，包括：
所述服务设备对所述合成声音信号进行预处理，预处理包括预加重、分帧和加窗处理；从预处理后的合成声音信号中提取声纹特征MFCC、LPCC、△ MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量，其中：MFCC为梅尔频率倒谱系数，LPCC为线性预测倒谱系数，△MFCC为MFCC 的一阶差分，△LPCC为LPCC的一阶差分，GFCC为Gammatone滤波器倒谱系数；判断第一多维特征向量是否与预存的任一默认声音信号的声纹特征对应的第二多维向量完全匹配，如果完全匹配，则确定所述合成声音信号与预存的任一默认声音信号匹配。
作为一种可选的实施方式，本发明实施例中，所述服务设备获取所述第一VR设备上报的第一声音信号以及获取所述第二VR设备上报的第二声音信号之后，以及所述服务设备对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号之前，所述方法还包括：
所述服务设备识别所述第一声音信号以及所述第二声音信号是否均包含预设的用于触发虚拟场景切换的关键词，若均包含，执行所述对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号的步骤。
本发明实施例中，对于佩戴VR设备正在参与虚拟游戏PK的第一佩戴用户和第二佩戴用户而言，只需第一佩戴用户发出第一语句以及第二佩戴用户发出第二语句，即可灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。此外，服务设备在获取到第一声音信号和第二声音信号之后，并不是逐一的对这两个声音信号进行验证，而是把这两个声音信号进行合成得到合成声音信号，然后再将合成声音信号与预存的任一默认声音信号进行匹配，而声音信号合成后，会产生更多的可验证参数(例如两段声音是否对齐，两段声音的相位差等)，相比于逐一验证两段声音信号，提高了验证的安全性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种双VR设备参与虚拟游戏时的虚拟场景同步切换的网络架构图；
图2为本发明实施例公开的一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，本发明实施例的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法，能够灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。以下进行结合附图进行详细描述。
为了更好的理解本发明实施例，下面先对本发明实施例涉及到的双VR设备参与虚拟游戏时的虚拟场景同步切换的网络架构进行描述。请参阅图1，图 1为本发明实施例公开的一种双VR设备参与虚拟游戏时的虚拟场景同步切换的网络架构图。在图1所示的网络架构中，可以包括：第一VR设备、第二VR 设备以及服务设备，其中，第一VR设备、第二VR设备可以分别通过无线方式与服务设备进行无线通信连接。当第一VR设备的第一佩戴用户与第二VR 设备的第二佩戴用户正在参与虚拟游戏PK时，只需第一佩戴用户发出第一语句以及第二佩戴用户发出第二语句，服务设备即可灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。此外，服务设备在获取到由第一语句转换得到的第一声音信号和由第二语句转换得到的第二声音信号之后，并不是逐一的对这两个声音信号进行验证，而是把这两个声音信号进行合成得到合成声音信号，然后再将合成声音信号与预存的任一默认声音信号进行匹配，而声音信号合成后，会产生更多的可验证参数(例如两段声音是否对齐，两段声音的相位差等)，相比于逐一验证两段声音信号，提高了验证的安全性。
请参阅图2，图2为本发明实施例公开的一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法的流程示意图。在图2说描述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法中，双VR设备包括第一VR设备和第二VR设备，第一VR设备和第二VR设备正在参与虚拟游戏PK。如图2所示，该双VR 设备参与虚拟游戏时的虚拟场景同步切换方法可以包括以下步骤：
201、服务设备获取第一VR设备上报的第一声音信号以及获取第二VR设备上报的第二声音信号；其中，第一声音信号是由第一VR设备对第一VR设备的第一佩戴用户发出的第一语句进行转换获得的第一声音信号；第二声音信号是由第二VR设备对第二VR设备的第二佩戴用户发出的第二语句进行转换获得的第二声音信号。
202、服务设备对第一声音信号以及第二声音信号进行合成得到合成声音信号。
203、服务设备判断合成声音信号与预存的任一默认声音信号是否匹配，若匹配，确定与默认声音信号绑定的预设虚拟场景集合；若不匹配，返回步骤201。
204、服务设备根据虚拟游戏PK的当前进程时间，从该虚拟场景集合中获取与该虚拟游戏PK的当前进程时间相对应的虚拟场景。
205、服务设备将与该虚拟游戏PK的当前进程时间相对应的虚拟场景同步推送给第一VR设备和第二VR设备，以实现第一VR设备和第二VR设备的虚拟场景同步切换。
作为一种可选的实施方式，上述步骤202中，服务设备对第一声音信号以及第二声音信号进行合成得到合成声音信号，包括：
服务设备确定该第一声音信号与该第二声音信号之间的对齐点；其中，该对齐点是指该第一声音信号和该第二声音信号合成的开始位置；换句话说，该第一声音信号与该第二声音信号要合成的话，需要找到从哪个音频帧开始合成，这个音频帧就可以理解为对齐点；
以及，服务设备根据该对齐点将该第一声音信号与该第二声音信号合成为合成声音信号。
作为一种可选的实施方式，本发明实施例中，服务设备确定该第一声音信号与该第二声音信号之间的对齐点，包括
服务设备计算该第一声音信号的第一时长以及该第二声音信号的第二时长；其中，第一时长表示该第一声音信号的声音持续的时间；第二时长表示该第二声音信号的声音持续的时间；
服务设备计算该第一时长和该第二时长之间的差值；
服务设备判断该差值是否小于或等于预设数值，若是，对该第一声音信号和该第二声音信号中的任一声音信号进行周期上的缩放，以获得最终持续时长相同的第一声音信号和第二声音信号，再以最终持续时长相同的第一声音信号和第二声音信号的首个音频帧作为对齐点。
本发明实施例中，如果该差值小于或等于预设数值，则说明两段声音信号(即该第一声音信号和该第二声音信号)在输入时的差距较小，此时可以对其中的一段声音信号(如该第一声音信号)进行周期上的缩放，例如对时长较长的声音信号进行周期上的压缩(也就是俗称的快进)，和/或对时长较短的声音信号进行周期上的放大(也就是俗称的慢进)，使得两段声音信号的最终持续时长相同，再以两段声音信号的首个音频帧作为对齐点进行对齐。
其中，该预设数值的取值范围可以为0至0.1秒。
本发明实施例中，服务设备对该第一声音信号和该第二声音信号中的任一声音信号进行周期上的缩放，包括：
若该第一声音信号的第一时长相对于该第二声音信号的第二时长较短，则根据该差值确定该差值占该第一声音信号的第一时长的比例X；
计算该第一声音信号的音频帧数Y；
计算放大系数Z，该Z＝X*(Y/(Y-1))；
按照该放大系数，对该第一声音信号中除了首个音频帧之外的其他音频帧进行等比例放大，以使得放大后的第一声音信号的最终持续时长与该第二声音信号的第二时长相同。
举例来说，该第一声音信号为1秒，有100个音频帧，则每个音频帧0.01 秒，该第二声音信号为1.1秒，需要把该第一声音信号放大至1.1秒。第一帧不动，放大后续的99帧，先确定放大的系数Z为0.1*(100/(100-1))＝0.101，即10.1％；此时后续的99帧，每帧需要放大10.1％，放大后的每帧为0.01* (1+10.1％)＝0.01101，放大后这99帧的长度为1.09秒，再加上没有动的第一帧0.01秒，就为1.1秒了，即放大后的第一声音信号的最终持续时长与该第二声音信号的第二时长相同。
本发明实施例中，如果该差值大于预设数值，则说明两段声音信号(即该第一声音信号和该第二声音信号)在输入时的差距较大，如果此时还是对其中的一段声音信号进行周期上的缩放，则缩放后会造成比较严重的失真，后续的校验会出现问题，所以可以采用互相关算法来确定对齐点。即，在该差值大于预设数值时，该方法还包括：
服务设备使用相同的默认采样频率对该第一声音信号以及该第二声音信号分别进行采样，得到第一采样组和第二采样组；
服务设备根据该默认采样频率(例如8000Hz到10000Hz)、第一采样组、第二采样组以及互相关权值生成互相关组；其中，该互相关权值与该差值正相关(例如该互相关权值可以为该差值的1.5倍)，该互相关组中包含有多个数值；
服务设备将该互相关组中的多个数值进行比较，找出最大的数值；
服务设备使用该最大的数值对应的音频帧位置作为对齐点。
其中，服务平台根据该默认采样频率、第一采样组、第二采样组以及互相关权值生成互相关组，包括：
其中，Sn[t]表示互相关组，x[m]表示第一采样组中的第m个采样数据， y[m-t]表示第二采样组中的第(m-t)个采样数据，t表示时间的偏移量，t 为整数，取值为从0到m，Wt表示窗函数，其中n＝l*f，l为互相关权值，f 为默认采样频率。
其中，服务设备使用该最大的数值对应的音频帧位置作为对齐点可以为：
服务设备找到最大的数值后，可以根据上述的公式(1)反推出m是多少，也就是哪一个采样数据，然后再确定该采样数据所在的音频帧是哪一个，并且使用该音频帧作为对齐点。
此外，服务设备在获取到由第一语句转换得到的第一声音信号和由第二语句转换得到的第二声音信号之后，并不是逐一的对这两个声音信号进行验证，而是把这两个声音信号进行合成得到合成声音信号，然后再将合成声音信号与预存的任一默认声音信号进行匹配，而声音信号合成后，会产生更多的可验证参数(例如两段声音是否对齐，两段声音的相位差等)，相比于逐一验证两段声音信号，提高了验证的安全性。
作为一种可选的实施方式，上述步骤203中，服务设备判断合成声音信号与预存的任一默认声音信号是否匹配，可以包括：
服务设备对合成声音信号进行预处理，预处理包括预加重、分帧和加窗处理；
服务设备从预处理后的合成声音信号中提取声纹特征MFCC、LPCC、△ MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量，其中：MFCC为梅尔频率倒谱系数，LPCC为线性预测倒谱系数，△MFCC为MFCC 的一阶差分，△LPCC为LPCC的一阶差分，GFCC为Gammatone滤波器倒谱系数；
服务设备判断第一多维特征向量是否与预存的任一默认声音信号的声纹特征对应的第二多维向量完全匹配，如果完全匹配，则准确的确定合成声音信号与预存的任一默认声音信号匹配；反之，如果不完全匹配，则确定合成声音信号与预存的任一默认声音信号不匹配。
本发明实施例中，服务设备对合成声音信号进行预处理还可以包括对合成声音信号的格式转换、删除合成声音信号中的静音段、删除音频中的白噪声等等。
其中，实施上述实施方式，可以提高声音匹配的准确性。
作为一种可选的实施方式，本发明实施例中，与默认声音信号绑定的预设虚拟场景集合可以包括若干个预设虚拟场景子集合，每一个预设虚拟场景子集合包括若干个虚拟场景，并且每一个预设虚拟场景子集合均绑定一个进程时间段(也称为虚拟游戏执行时间段)，并且任意两个预设虚拟场景子集合绑定的进程时间段互不重叠；
相应地，上述步骤204中，服务设备根据虚拟游戏PK的当前进程时间，从该虚拟场景集合中获取与该虚拟游戏PK的当前进程时间相对应的虚拟场景，可以包括：
服务设备从该若干个预设虚拟场景子集合中，确定出目标预设虚拟场景子集合；其中，目标预设虚拟场景子集合绑定的一个进程时间段包含该虚拟游戏PK的当前进程时间；
服务设备从目标预设虚拟场景子集合获取一个预设虚拟场景，作为与该虚拟游戏PK的当前进程时间相对应的虚拟场景。
其中，实施上述实施方式，服务设备可以自适应的获取与虚拟游戏PK的当前进程时间相对应的虚拟场景，以便于可以灵活的将与虚拟游戏PK的当前进程时间相对应的虚拟场景同步推送给参与虚拟游戏PK的两个用户，使得参与虚拟游戏PK的两个用户可以体验到同时切换成的与虚拟游戏PK的当前进程时间相对应的虚拟场景，从而可以提高参与虚拟游戏PK的两个用户的体验感。
作为一种可选的实施方式，服务设备从目标预设虚拟场景子集合获取一个预设虚拟场景，作为与该虚拟游戏PK的当前进程时间相对应的虚拟场景，可以包括：
服务设备识别目标预设虚拟场景子集合中每一个预设虚拟场景携带的VR 设备标签组，其中，每一个预设虚拟场景携带的VR设备标签组用于表示对该预设虚拟场景感兴趣的VR设备组；
以及，服务设备根据目标预设虚拟场景子集合中每一个预设虚拟场景携带的VR设备标签，从目标预设虚拟场景子集合中确定出部分预设虚拟场景；其中，部分预设虚拟场景中的每一个预设虚拟场景携带的VR设备标签表示的对该预设虚拟场景感兴趣的VR设备组包含第一VR设备和第二VR设备；也即是说，部分预设虚拟场景中的每一个预设虚拟场景都是第一VR设备和第二VR 设备感兴趣的；
以及，服务设备从该部分预设虚拟场景获取任意一个预设虚拟场景，作为与该虚拟游戏PK的当前进程时间相对应的虚拟场景。
其中，实施上述实施方式，服务设备可以自适应的获取与虚拟游戏PK的当前进程时间相对应的、且第一VR设备和第二VR设备均感兴趣的虚拟场景，以便于可以灵活的将与虚拟游戏PK的当前进程时间相对应的、且第一VR设备和第二VR设备均感兴趣的虚拟场景同步推送给参与虚拟游戏PK的两个用户，使得参与虚拟游戏PK的两个用户可以体验到同时切换成的与虚拟游戏PK 的当前进程时间相对应、且第一VR设备和第二VR设备均感兴趣的虚拟场景，从而既可以实现感兴趣的虚拟场景同步切换，又可以提高参与虚拟游戏PK的两个用户的体验感。
作为一种可选的实施方式，在图2所描述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法中，服务设备获取第一VR设备上报的第一声音信号以及获取第二VR设备上报的第二声音信号之后，以及服务设备对第一声音信号以及第二声音信号进行合成得到合成声音信号之前，还可以执行以下步骤：
服务设备识别第一声音信号以及第二声音信号是否均包含预设的用于触发虚拟场景切换的关键词，若均包含，执行对第一声音信号以及第二声音信号进行合成得到合成声音信号的步骤；若均未包含，结束本流程。
举例来说，预设的用于触发虚拟场景切换的关键词可以包括：切换场景、场景切换、场景变换、变换场景、场景更换、更换场景等等，本发明实施例不作限定。
作为一种可选的实施方式，在图2所描述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法中，由于与默认声音信号绑定的预设虚拟场景集合可以包括若干个预设虚拟场景子集合，每一个预设虚拟场景子集合包括若干个虚拟场景，并且每一个预设虚拟场景子集合均绑定一个进程时间段(也称为虚拟游戏执行时间段)，并且任意两个预设虚拟场景子集合绑定的进程时间段互不重叠；在此基础上，服务设备获取第一VR设备上报的第一声音信号以及获取第二VR设备上报的第二声音信号之前，还可以执行以下步骤：
服务设备判断虚拟游戏PK是否由一个预设虚拟场景子集合绑定的进程时间段(也称为虚拟游戏执行时间段)过渡至另一个预设虚拟场景子集合绑定的进程时间段(也称为虚拟游戏执行时间段)，如果是，服务设备可以同步向第一VR设备和第二VR设备推送通知消息，该通知消息用于提示可以通过声音验证来同步切换虚拟场景。
其中，实施这种实施方式，服务设备可以根据虚拟游戏PK的进程时间段的变化，主动的提醒正在参与虚拟游戏PK的第一VR设备的第一佩戴用户与第二VR设备的第二佩戴用户可以同步切换虚拟场景，从而可以提升正在参与虚拟游戏PK的两个用户的体验感。
本发明实施例中，对于佩戴VR设备正在参与虚拟游戏PK的第一佩戴用户和第二佩戴用户而言，如果第一佩戴用户和第二佩戴用户均同意切换虚拟场景，那么只需第一佩戴用户发出第一语句以及第二佩戴用户发出第二语句，即可灵活的实现两个用户参与虚拟游戏PK时的虚拟场景的同步切换。此外，服务设备在获取到第一声音信号和第二声音信号之后，并不是逐一的对这两个声音信号进行验证，而是把这两个声音信号进行合成得到合成声音信号，然后再将合成声音信号与预存的任一默认声音信号进行匹配，而声音信号合成后，会产生更多的可验证参数(例如两段声音是否对齐，两段声音的相位差等)，相比于逐一验证两段声音信号，提高了验证的安全性。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述双VR设备包括第一VR设备和第二VR设备，所述第一VR设备和所述第二VR设备正在参与虚拟游戏PK，所述方法包括：
服务设备获取所述第一VR设备上报的第一声音信号以及获取所述第二VR设备上报的第二声音信号；其中，所述第一声音信号是由所述第一VR设备对所述第一VR设备的第一佩戴用户发出的第一语句进行转换获得的第一声音信号；所述第二声音信号是由所述第二VR设备对所述第二VR设备的第二佩戴用户发出的第二语句进行转换获得的第二声音信号；
所述服务设备对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号；
所述服务设备判断所述合成声音信号与预存的任一默认声音信号是否匹配，若匹配，确定与所述默认声音信号绑定的预设虚拟场景集合；
所述服务设备根据所述虚拟游戏PK的当前进程时间，从所述虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的虚拟场景；
所述服务设备将与所述虚拟游戏PK的当前进程时间相对应的虚拟场景同步推送给所述第一VR设备和第二VR设备，以实现所述第一VR设备和第二VR设备的虚拟场景同步切换。
2.根据权利要求1所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号，包括：
所述服务设备确定所述第一声音信号与所述第二声音信号之间的对齐点；其中，所述对齐点是指所述第一声音信号和所述第二声音信号合成的开始位置；
所述服务设备根据所述对齐点将所述第一声音信号与所述第二声音信号合成为合成声音信号。
3.根据权利要求2所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备确定所述第一声音信号与所述第二声音信号之间的对齐点，包括
所述服务设备计算所述第一声音信号的第一时长以及所述第二声音信号的第二时长；其中，所述第一时长表示所述第一声音信号的声音持续的时间；所述第二时长表示所述第二声音信号的声音持续的时间；
所述服务设备计算所述第一时长和所述第二时长之间的差值；
所述服务设备判断所述差值是否小于或等于预设数值，若是，对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，以获得最终持续时长相同的第一声音信号和第二声音信号，再以所述最终持续时长相同的第一声音信号和第二声音信号的首个音频帧作为对齐点。
4.根据权利要求3所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备对所述第一声音信号和所述第二声音信号中的任一声音信号进行周期上的缩放，包括：
若所述第一声音信号的第一时长相对于所述第二声音信号的第二时长较短，所述服务设备根据所述差值确定所述差值占所述第一声音信号的第一时长的比例X；
所述服务设备计算所述第一声音信号的音频帧数Y；
所述服务设备计算放大系数Z，所述Z＝X*(Y/(Y-1))；
所述服务设备按照所述放大系数，对所述第一声音信号中除了首个音频帧之外的其他音频帧进行等比例放大，以使得放大后的第一声音信号的最终持续时长与所述第二声音信号的第二时长相同。
5.根据权利要求3或4所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，若所述差值大于所述预设数值，所述方法还包括：
所述服务设备使用相同的默认采样频率对所述第一声音信号以及所述第二声音信号分别进行采样，得到第一采样组和第二采样组；
所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组；其中，所述互相关权值与所述差值正相关，所述互相关组中包含有多个数值；
所述服务设备将所述互相关组中的多个数值进行比较，找出最大的数值；
所述服务设备使用所述最大的数值对应的音频帧位置作为对齐点。
6.根据权利要求5所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备根据所述默认采样频率、所述第一采样组、所述第二采样组以及互相关权值生成互相关组，包括：
其中，Sn[t]表示互相关组，x[m]表示所述第一采样组中的第m个采样数据，y[m-t]表示所述第二采样组中的第(m-t)个采样数据，t表示时间的偏移量，t为整数，取值为从0到m，Wt表示窗函数，其中n＝l*f，l为互相关权值，f为所述默认采样频率。
7.根据权利要求1-6任一项所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，与所述默认声音信号绑定的预设虚拟场景集合包括若干个预设虚拟场景子集合，每一个所述预设虚拟场景子集合包括若干个虚拟场景，并且每一个所述预设虚拟场景子集合绑定一个进程时间段，任意两个所述预设虚拟场景子集合绑定的进程时间段互不重叠；
所述服务设备根据所述虚拟游戏PK的当前进程时间，从所述虚拟场景集合中获取与所述虚拟游戏PK的当前进程时间相对应的虚拟场景，包括：
所述服务设备从所述若干个预设虚拟场景子集合中，确定出目标预设虚拟场景子集合；其中，所述目标预设虚拟场景子集合绑定的一个进程时间段包含所述虚拟游戏PK的当前进程时间；
所述服务设备从所述目标预设虚拟场景子集合获取一个预设虚拟场景，作为与所述虚拟游戏PK的当前进程时间相对应的虚拟场景。
8.根据权利要求7所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备从所述目标预设虚拟场景子集合获取一个预设虚拟场景，作为与所述虚拟游戏PK的当前进程时间相对应的虚拟场景，包括：
所述服务设备识别所述目标预设虚拟场景子集合中每一个预设虚拟场景携带的VR设备标签组，其中，每一个预设虚拟场景携带的VR设备标签组用于表示对所述预设虚拟场景感兴趣的VR设备组；
所述服务设备根据所述目标预设虚拟场景子集合中每一个预设虚拟场景携带的VR设备标签，从所述目标预设虚拟场景子集合中确定出部分预设虚拟场景；其中，所述部分预设虚拟场景中的每一个预设虚拟场景携带的VR设备标签表示的对所述预设虚拟场景感兴趣的VR设备组包含所述第一VR设备和所述第二VR设备；
所述服务设备从所述部分预设虚拟场景获取任意一个预设虚拟场景，作为与所述虚拟游戏PK的当前进程时间相对应的虚拟场景。
9.根据权利要求8所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备判断所述合成声音信号与预存的任一默认声音信号是否匹配，包括：
所述服务设备对所述合成声音信号进行预处理，预处理包括预加重、分帧和加窗处理；从预处理后的合成声音信号中提取声纹特征MFCC、LPCC、△MFCC、△LPCC、能量、能量的一阶差分以及GFCC共同组成第一多维特征向量，其中：MFCC为梅尔频率倒谱系数，LPCC为线性预测倒谱系数，△MFCC为MFCC的一阶差分，△LPCC为LPCC的一阶差分，GFCC为Gammatone滤波器倒谱系数；判断第一多维特征向量是否与预存的任一默认声音信号的声纹特征对应的第二多维向量完全匹配，如果完全匹配，则确定所述合成声音信号与预存的任一默认声音信号匹配。
10.根据权利要求1-9任一项所述的双VR设备参与虚拟游戏时的虚拟场景同步切换方法，其特征在于，所述服务设备获取所述第一VR设备上报的第一声音信号以及获取所述第二VR设备上报的第二声音信号之后，以及所述服务设备对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号之前，所述方法还包括：
所述服务设备识别所述第一声音信号以及所述第二声音信号是否均包含预设的用于触发虚拟场景切换的关键词，若均包含，执行所述对所述第一声音信号以及所述第二声音信号进行合成得到合成声音信号的步骤。
CN201810470499.0A 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法 Expired - Fee Related CN108704310B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810470499.0A CN108704310B (zh) 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810470499.0A CN108704310B (zh) 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法

Publications (2)

Publication Number Publication Date
CN108704310A true CN108704310A (zh) 2018-10-26
CN108704310B CN108704310B (zh) 2021-05-14

Family

ID=63868990

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810470499.0A Expired - Fee Related CN108704310B (zh) 2018-05-17 2018-05-17 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法

Country Status (1)

Country Link
CN (1) CN108704310B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114372383A (zh) * 2022-03-23 2022-04-19 广州市影擎电子科技有限公司 一种基于vr仿真场景的场景快速切换方法及系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105931645A (zh) * 2016-04-12 2016-09-07 深圳市京华信息技术有限公司 虚拟现实设备的控制方法、装置及虚拟现实设备、系统
CN106023983A (zh) * 2016-04-27 2016-10-12 广东欧珀移动通信有限公司 基于虚拟现实vr场景的多用户语音交互方法以及装置
CN106293346A (zh) * 2016-08-11 2017-01-04 深圳市金立通信设备有限公司 一种虚拟现实视景的切换方法及终端
CN106847275A (zh) * 2016-12-27 2017-06-13 广东小天才科技有限公司 一种用于控制穿戴设备的方法及穿戴设备
CN107111340A (zh) * 2014-12-29 2017-08-29 索尼互动娱乐美国有限责任公司 用于使用头戴式显示器在虚拟或增强现实场景内进行用户交互的方法和系统
US20170289209A1 (en) * 2016-03-30 2017-10-05 Sony Computer Entertainment Inc. Server-based sound mixing for multiuser voice chat system
CN107591149A (zh) * 2017-09-18 2018-01-16 腾讯音乐娱乐科技（深圳）有限公司 音频合成方法、装置及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107111340A (zh) * 2014-12-29 2017-08-29 索尼互动娱乐美国有限责任公司 用于使用头戴式显示器在虚拟或增强现实场景内进行用户交互的方法和系统
US20170289209A1 (en) * 2016-03-30 2017-10-05 Sony Computer Entertainment Inc. Server-based sound mixing for multiuser voice chat system
CN105931645A (zh) * 2016-04-12 2016-09-07 深圳市京华信息技术有限公司 虚拟现实设备的控制方法、装置及虚拟现实设备、系统
CN106023983A (zh) * 2016-04-27 2016-10-12 广东欧珀移动通信有限公司 基于虚拟现实vr场景的多用户语音交互方法以及装置
CN106293346A (zh) * 2016-08-11 2017-01-04 深圳市金立通信设备有限公司 一种虚拟现实视景的切换方法及终端
CN106847275A (zh) * 2016-12-27 2017-06-13 广东小天才科技有限公司 一种用于控制穿戴设备的方法及穿戴设备
CN107591149A (zh) * 2017-09-18 2018-01-16 腾讯音乐娱乐科技（深圳）有限公司 音频合成方法、装置及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
严磊等编著: "《多媒体技术基础与实例教程》", 31 July 2016 *
褚宁琳: "《大学信息技术》", 30 August 2014 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114372383A (zh) * 2022-03-23 2022-04-19 广州市影擎电子科技有限公司 一种基于vr仿真场景的场景快速切换方法及系统
CN114372383B (zh) * 2022-03-23 2022-06-14 广州市影擎电子科技有限公司 一种基于vr仿真场景的场景快速切换方法及系统

Also Published As

Publication number Publication date
CN108704310B (zh) 2021-05-14

Similar Documents

Publication Publication Date Title
US12073850B2 (en) Data driven audio enhancement
US11657830B2 (en) Data driven radio enhancement
CN103155030B (zh) 用于处理多声道音频信号的方法及设备
CN102014126B (zh) 一种基于QoS的语音体验质量评测平台及评测方法
CN112019874B (zh) 一种连麦直播方法及相关设备
CN113207009B (zh) 音视频交互系统音画失步的测试方法、装置及系统
EP2747464A1 (en) Sent message playing method, system and related device
CN114945110B (zh) 说话头视频合成方法、装置、终端设备及可读存储介质
CN108704310A (zh) 一种双vr设备参与虚拟游戏时的虚拟场景同步切换方法
US20140129228A1 (en) Method, System, and Relevant Devices for Playing Sent Message
CN108771864A (zh) 一种双vr设备参与虚拟游戏pk前的虚拟场景配置方法
CN114025235A (zh) 视频生成方法、装置、电子设备及存储介质
CN113891152A (zh) 音频播放控制方法及其装置、设备、介质、产品
CN107135407B (zh) 一种钢琴视频教学中的同步方法及系统
CN108512874A (zh) 一种在线答疑数据的同步方法及装置
US20200111475A1 (en) Information processing apparatus and information processing method
CN108768681A (zh) 一种虚拟资源赠送引起的主播用户即时图像的显示方法
KR20220040045A (ko) 자막 동기화를 제공하는 영상 재생 장치 및 그 동작 방법
KR101961704B1 (ko) 서비스수신장치 및 그 동작 방법
JP2019023747A (ja) 音合成装置、音合成方法、及びそのプログラム
KR102056796B1 (ko) 듀엣 모드 및 동시 음향 모드 제공 기반 방송 송출 시스템 및 그 방법
US20230262283A1 (en) Transmission apparatus, communication method and program
CN112992186B (zh) 音频处理方法、装置、电子设备及存储介质
US20240221261A1 (en) Data processing method and electronic device
KR20240044403A (ko) 참여형 콘텐츠 처리 시스템 및 그 제어방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210425

Address after: 410006 building 3, zone 1, Zhongjian wisdom Valley Industrial Park, Mayuan Road, Yuelu street, Yuelu District, Changsha City, Hunan Province

Applicant after: Changsha Shenman Culture Technology Co.,Ltd.

Address before: 523073, room 35, No. three, Lane 403, Dongguan, Xiping, Guangdong

Applicant before: DONGGUAN HUARUI ELECTRONIC TECHNOLOGY Co.,Ltd.

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20210514