WO2019113939A1 - 一种vr设备及其体验控制方法、系统、装置、存储介质 - Google Patents

一种vr设备及其体验控制方法、系统、装置、存储介质 Download PDF

Info

Publication number
WO2019113939A1
WO2019113939A1 PCT/CN2017/116458 CN2017116458W WO2019113939A1 WO 2019113939 A1 WO2019113939 A1 WO 2019113939A1 CN 2017116458 W CN2017116458 W CN 2017116458W WO 2019113939 A1 WO2019113939 A1 WO 2019113939A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
signal
external environment
current
real
Prior art date
Application number
PCT/CN2017/116458
Other languages
English (en)
French (fr)
Inventor
郭宁
Original Assignee
歌尔科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 歌尔科技有限公司 filed Critical 歌尔科技有限公司
Priority to PCT/CN2017/116458 priority Critical patent/WO2019113939A1/zh
Publication of WO2019113939A1 publication Critical patent/WO2019113939A1/zh

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer

Definitions

  • the present invention relates to the field of virtual reality technologies, and in particular, to a VR device and an experience control method, system, device, and storage medium.
  • VR Virtual Reality
  • an object of the present invention is to provide a VR device and an experience control method, system, device, and storage medium thereof, which can avoid the VR immersion effect of seriously reducing the experience of the VR experiencer when interacting with the external environment.
  • the specific plan is as follows:
  • the present invention discloses a VR experience control method, which is applied to a VR device, including:
  • the information is collected on the current external environment, and the collected real-time environment information is played to display the real-time environment information to the current VR experiencer.
  • the step of acquiring a signal generated from an external environment including:
  • the step of determining whether the signal meets a preset condition includes:
  • Feature extraction is performed on the audio signal, and it is determined whether the obtained audio feature information meets a preset feature requirement.
  • the step of performing feature extraction on the audio signal and determining whether the obtained audio feature information meets a preset feature requirement includes:
  • the VR experience control method further includes:
  • the VR device In the process of playing the collected real-time environment information, the VR device is controlled to stop playing the VR movie.
  • the step of collecting information about the current external environment includes:
  • orientation information information is collected on the external environment in the current corresponding orientation.
  • the step of collecting information about the external environment in the current corresponding orientation according to the orientation information includes:
  • orientation information image frame acquisition and/or audio collection is performed on the external environment in the current corresponding orientation.
  • the step of performing image frame collection on the external environment in the current corresponding orientation according to the orientation information includes:
  • the target camera is controlled to be turned on to collect image screen information of the current external environment.
  • the present invention discloses a VR experience control system applied to a VR device, including:
  • a signal acquisition module for acquiring a signal generated from an external environment
  • a signal determining module configured to determine whether the signal meets a preset condition
  • An information collecting module configured to: when the signal meets the preset condition, perform information collection on a current external environment;
  • the information playing module is configured to play the collected real-time environment information to display the real-time environment information to the current VR experiencer.
  • the present invention discloses a VR experience control apparatus, which is applied to a VR device, including a processor and a memory; wherein, when the processor executes the VR experience control program saved in the memory, the following steps are implemented:
  • the real-time information of the current external environment is obtained by using the information collecting device preset in the VR device, and the instruction for playing the real-time information is sent to the information playing device preset in the VR device to The VR experiencer presents the real-time information.
  • the present invention discloses a VR device, including the foregoing VR experience control device, signal acquisition device, information collection device, and information playback device.
  • the signal acquisition device comprises a plurality of microphones distributed at different locations of the VR device.
  • the information collection device comprises a plurality of cameras and/or a plurality of microphones distributed at different locations of the VR device.
  • the present invention discloses a storage medium storing computer readable program code, which is executed by one or a processor to implement the aforementioned VR experience control method.
  • the present invention determines whether the signal meets the preset condition, and if so, collects information on the current external environment, and then plays the collected real-time environment information to Presenting the current real-time environment information to the experiencer, thereby realizing the information interaction between the VR experiencer and the external environment. Since in the above process, there is no need to remove the VR device from the experiencer, there is no serious influence on the immersion of the experiencer. That is, the present invention achieves the purpose of avoiding a serious reduction in the VR immersion effect of the experiencer when the VR experiencer interacts with the external environment.
  • FIG. 1 is a flowchart of a VR experience control method according to an embodiment of the present invention
  • FIG. 2 is a flowchart of a specific VR experience control method according to an embodiment of the present invention.
  • FIG. 3 is a schematic diagram of a process for collecting an audio signal by a VR device according to the present disclosure
  • FIG. 4 is a schematic structural diagram of a specific VR device according to the present disclosure.
  • FIG. 5 is a schematic diagram of a partial structure of a VR device according to the present disclosure.
  • FIG. 6 is a flowchart of a specific VR experience control method according to an embodiment of the present invention.
  • FIG. 7 is a flowchart of a specific VR experience control method according to an embodiment of the present invention.
  • FIG. 8 is a flowchart of a specific VR experience control method according to an embodiment of the present invention.
  • FIG. 9 is a flowchart of a specific VR experience control method according to an embodiment of the present invention.
  • FIG. 10 is a schematic structural diagram of a specific VR experience control system according to an embodiment of the present invention.
  • the embodiment of the invention discloses a VR experience control method, which is applied to a VR device.
  • the method includes:
  • Step S11 Acquire a signal generated from an external environment.
  • the above signals may be any signals generated from an external environment including, but not limited to, audio signals, infrared remote control signals, thermal radiation signals, and the like.
  • the corresponding signal acquisition device when the type of the signal is an audio signal, the corresponding signal acquisition device is an audio signal acquisition device such as a microphone; when the type of the signal is an infrared remote control signal, the corresponding signal acquisition device is an infrared receiving device; When the type is a thermal radiation signal, the corresponding signal acquisition device is a thermal radiation detector.
  • Step S12 determining whether the signal satisfies a preset condition.
  • the subsequent information collection step is triggered.
  • whether the signal satisfies a preset condition is determined by determining whether the information carried in the signal includes preset information.
  • whether the signal satisfies the preset condition may be determined by determining whether the signal parameter size of the signal satisfies the preset parameter size range. It can be understood that, in this embodiment, the corresponding determining manner may be determined according to the type of the signal to determine whether the signal meets the preset condition.
  • Step S13 If yes, collect information about the current external environment, and play the collected real-time environment information to display the real-time environment information to the current VR experiencer.
  • the above information collection process needs to rely on the corresponding information collection device.
  • the corresponding information collecting device may be a camera.
  • the corresponding information collecting device may be a microphone or the like, and this The microphone at the location may be the microphone in the above step S11, or may be different from the microphone in the above step S11.
  • the information collection device may be preferentially disposed on the VR device, so that the real-time environment information displayed to the experiencer in the subsequent manner is external environment information relative to the location of the experiencer, which is beneficial to The experiencer can more easily and easily guess the relative relationship between the real-time environment information and the current location of the real-time environment information.
  • the embodiment may also install the above information collecting device in an external environment of the VR device, for example, may be installed in a room where the current experience person is located. Inside the wall. When located in the external environment of the VR device After the corresponding real-time environment information is collected, the real-time environment information needs to be transmitted to the VR device for playing.
  • the VR experience control method in this embodiment may further include: in the process of playing the collected real-time environment information, the control center The VR device stops playing VR movies. That is, after playing the collected real-time environment information, the VR device will be controlled to stop playing the VR movie, including stopping the playback of the VR picture and playing the audio in the VR movie.
  • the embodiment of the present invention determines whether the signal meets the preset condition, and if yes, performs information collection on the current external environment, and then plays the collected real-time environment information. In order to present the current real-time environment information to the experiencer, thereby realizing the information interaction between the VR experiencer and the external environment. Since in the above process, there is no need to remove the VR device from the experiencer, there is no serious influence on the immersion of the experiencer. That is, the embodiment of the present invention achieves the purpose of avoiding a serious reduction of the VR immersion effect of the experiencer when the VR experiencer interacts with the external environment.
  • the embodiment of the present invention discloses a specific VR experience control method. Referring to FIG. 2, the method includes:
  • Step S21 Acquire an audio signal generated from an external environment.
  • the present embodiment can acquire an audio signal generated from an external environment through a plurality of microphones distributed at different positions of the VR device.
  • an audio signal generated from an external environment can be acquired using one microphone located on the left side of the VR device and one microphone on the right side.
  • Step S22 Perform feature extraction on the audio signal, and determine whether the obtained audio feature information meets a preset feature requirement.
  • the step of performing feature extraction on the audio signal and determining whether the obtained audio feature information meets a preset feature requirement may include:
  • the text information obtained after the above speech recognition processing includes a preset.
  • the keyword can determine that the audio signal meets the preset feature requirements.
  • the above keyword may be the name of the experience person or other specific words.
  • the keyword may be the name of the experiencer “Zhang San”.
  • the audio signal may be determined to meet the preset feature requirement.
  • the keyword may be set by the user through a preset keyword setting interface.
  • the background system may automatically set the keyword according to the experience information recorded in the VR device.
  • the step of performing feature extraction on the audio signal and determining whether the obtained audio feature information meets a preset feature requirement may include:
  • Step S23 If yes, the orientation information of the corresponding signal generation source is determined by using the audio signal.
  • an audio signal generated from an external environment may be acquired by using one microphone respectively located on the left and right sides of the VR device and a microphone on the right side, as shown in FIG. 3, because the same sound source reaches the above two
  • the linear distances of the microphones are not equal, and the sound generated by the same sound source passes through the left and right sides of the medium to reach the corresponding microphone, the distance that the sound passes between the left side medium and the right side medium is also unequal, according to the above.
  • the difference between the two sound transmission routes can accurately determine the orientation information of the sound source.
  • Step S24 Perform information collection on the external environment in the current corresponding orientation according to the orientation information, and play the collected real-time environment information to display the real-time environment information to the current VR experiencer.
  • the step of collecting information about an external environment in a current corresponding orientation according to the orientation information includes: performing image image collection on an external environment in a current corresponding orientation according to the orientation information .
  • the step of performing image image collection on the external environment in the current corresponding orientation according to the orientation information may specifically include:
  • this embodiment discloses a specific VR device, which may specifically include a VR main body 11 for displaying a VR movie for an experiencer, and for binding the VR main body 11 to the experiencer's head.
  • the VR fixed portion 12 and the head portion 13 for further securing the VR device on the experiencer's head to prevent the VR device from slipping off the head.
  • the plurality of cameras described above may be disposed at different positions on the VR main body 11 and/or the VR fixing portion 12 and/or the wearing portion 13. As shown in FIG.
  • a camera can be disposed at the front end of the VR main body 11, and three cameras are uniformly disposed on both sides of the VR fixed portion 12, which is equivalent to setting a total of seven cameras on the VR device.
  • three cameras located on the right side of the VR device may be determined as the target camera, and then the target camera is controlled to be turned on to the current external environment. Image screen information is collected.
  • the VR fixed portion 12 is provided with an FPC (Flexible Printed Circuit) connected to the main PCB (printed circuit board) in the VR main body 11 on both sides of the VR fixed portion 12, and the above VR The cameras on both sides of the fixed portion 12 are disposed on the corresponding FPCs.
  • FPC Flexible Printed Circuit
  • the target camera may be a VR camera, and the VR camera directly captures a VR format image corresponding to the current external environment.
  • the above-mentioned target camera may also be a conventional camera, by which an image of a common format corresponding to the current external environment can be acquired.
  • the normal format image collected by the above conventional camera can be directly played.
  • the embodiment may further set a format conversion device in the VR device, and use the format conversion device to convert the normal format image collected by the conventional camera into a corresponding VR format image to enhance the subsequent image. Playback effect.
  • the real-time environment screen information when the collected real-time environment screen information is played, the real-time environment screen information may be displayed on the entire VR display interface.
  • the real-time environment screen information may also be displayed on the VR display.
  • the specific area On a specific area of the interface. among them, The specific area may be specifically determined according to the foregoing orientation information. For example, if the orientation information indicates that the signal generation source is located on the right side of the VR device, the specific area may be an area located on the right side of the VR display interface; The information indicates that the signal generation source is located on the left side of the VR device, and the specific area may be an area located on the left side of the VR display interface.
  • the specific area is It can be an area at the top of the VR display interface.
  • the number of cameras and the location of the cameras in the VR device can be flexibly adjusted according to actual requirements, and is not specifically limited herein.
  • the step of collecting information about the external environment in the current corresponding orientation according to the orientation information includes: performing audio collection on an external environment in the current corresponding orientation according to the orientation information. .
  • a microphone can be separately provided on each of the left and right sides of the VR fixed portion 12.
  • the microphones on both sides of the VR fixed portion 12 can be used to collect audio of the external environment in the current corresponding orientation.
  • the step of collecting information on the external environment in the current corresponding orientation according to the orientation information includes:
  • orientation information image frame acquisition and audio collection are performed on the external environment in the current corresponding orientation.
  • only image image information may be collected, or only audio information may be collected, and of course, image image information and audio information may be simultaneously acquired.
  • the embodiment of the present invention discloses a specific VR experience control method. Referring to FIG. 6, the method includes:
  • Step S31 Acquire an infrared remote control signal generated from an external environment.
  • Step S32 determining whether the infrared remote control signal satisfies a preset condition.
  • the embodiment may extract the foregoing The coded information carried in the infrared remote control signal is then determined whether the coded information includes specific coded information, and if so, the infrared remote control information may be determined to satisfy the preset condition.
  • the above specific encoding information can be preset by the background system.
  • the acquired infrared remote control signal carries the above specific coding information, it means that someone at the time wishes to communicate with the current VR experiencer.
  • Step S33 If yes, perform information collection on the current external environment, and play the collected real-time environment information to display the real-time environment information to the current VR experiencer.
  • step S33 For the specific process in the above step S33, reference may be made to the corresponding content disclosed in the foregoing embodiment, and details are not described herein again.
  • the embodiment of the present invention discloses a specific VR experience control method. Referring to FIG. 7, the method includes:
  • Step S41 Acquire a heat radiation signal generated from an external environment.
  • thermal radiation signal described above may be a thermal radiation signal generated by a fire, kitchen cooking appliance or the like.
  • Step S42 determining whether the thermal radiation signal satisfies a preset condition.
  • whether the heat radiation signal meets the preset condition is determined by determining whether the radiation intensity of the heat radiation signal is greater than a preset radiation intensity threshold. That is, when the radiation intensity of the thermal radiation signal is greater than the preset radiation intensity threshold, it may be determined that the thermal radiation signal satisfies a preset condition.
  • the preset radiation intensity threshold may be automatically set by the background system according to the empirical value, or may be flexibly set by the user according to actual application requirements.
  • step S43 For the specific process in the above step S43, reference may be made to the corresponding content disclosed in the foregoing embodiment, and details are not described herein again.
  • the embodiment of the present invention discloses a specific VR experience control method. Referring to FIG. 8, the method includes:
  • Step S51 Acquire various signals generated from the external environment.
  • the plurality of signals may include any one of an audio signal, an infrared remote control signal, and a thermal radiation signal, but is not limited to an audio signal, an infrared remote control signal, or a thermal radiation signal.
  • Step S52 Determine whether each type of signal satisfies a corresponding preset condition.
  • the preset conditions corresponding to different types of signals may be different.
  • Step S53 If any of the signals meets the corresponding preset condition, the information is collected on the current external environment, and the collected real-time environment information is played to display the real-time environment information to the current VR experiencer.
  • the present embodiment can acquire and analyze a plurality of signals. As long as one of the signals satisfies the corresponding preset condition, the embodiment starts the collection and playback operation of the current external environment information.
  • the embodiment starts the collection and playback operation of the current external environment information.
  • the embodiment of the present invention discloses a specific VR experience control method. Referring to FIG. 9, the method includes:
  • Step S61 Acquire a signal generated from an external environment
  • Step S62 determining whether the signal meets a preset condition
  • Step S63 If yes, collect information on the current external environment, play the collected real-time environment information, and control the VR device to stop playing the VR movie to display the real-time environment information to the current VR experiencer.
  • Step S64 When the interaction suspension signal is acquired, the VR device is controlled to continue playing the VR movie.
  • the interaction suspension signal may be a signal triggered by the experiencer pressing a button preset on the VR device, or may be recognized by the VR device.
  • the signal triggered after the specific keyword is output may also be a signal directly transmitted by the external device to the VR device.
  • the embodiment of the present invention further discloses a VR experience control system, which is applied to a VR device.
  • the system includes:
  • a signal acquisition module 21 configured to acquire a signal generated from an external environment
  • the signal determining module 22 is configured to determine whether the signal meets a preset condition
  • the information collecting module 23 is configured to: when the signal meets the preset condition, perform information collection on the current external environment;
  • the information playing module 24 is configured to play the collected real-time environment information to display the real-time environment information to the current VR experiencer.
  • an embodiment of the present invention further discloses a VR experience control apparatus, which is applied to a VR device, including a processor and a memory; wherein, when the processor executes the VR experience control program saved in the memory, the following steps are implemented:
  • the embodiment of the present invention further discloses a VR device, which includes the VR experience control device, the signal acquisition device, the information collection device, and the information playback device disclosed in the foregoing embodiments.
  • the signal acquisition device includes a plurality of microphones distributed at different locations of the VR device.
  • the information collection device includes a plurality of cameras and/or a plurality of microphones distributed at different locations of the VR device.
  • the present invention also discloses a storage medium storing computer readable program code, which is executed by one or a processor to implement the VR experience control method disclosed above.
  • a storage medium storing computer readable program code, which is executed by one or a processor to implement the VR experience control method disclosed above.
  • the steps of a method or algorithm described in connection with the embodiments disclosed herein can be implemented directly in hardware, a software module executed by a processor, or a combination of both.
  • the software module can be placed in random access memory (RAM), memory, read only memory (ROM), electrically programmable ROM, electrically erasable programmable ROM, registers, hard disk, removable disk, CD-ROM, or technical field. Any other form of storage medium known.

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种VR设备及其体验控制方法、系统、装置、存储介质，方法包括：获取从外部环境中产生的信号（S11）；判断信号是否满足预设条件（S12）；如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示实时环境信息（S13）。在获取到外部环境中产生的信号之后，判断信号是否满足预设的条件，如果满足，则会对当前外部环境进行信息采集，然后对采集到的实时环境信息进行播放，由此实现了VR体验者与外部环境的信息交互。由于在过程中，无需从体验者身上摘下VR设备，从而没有对体验者的沉浸感造成严重影响。也即，实现了在VR体验者与外部环境进行交互时避免严重降低体验者的VR沉浸效果的目的。

Description

一种VR设备及其体验控制方法、系统、装置、存储介质 技术领域
本发明涉及虚拟现实技术领域，特别涉及一种VR设备及其体验控制方法、系统、装置、存储介质。
背景技术
当前，VR(即Virtual Reality，虚拟现实)技术得到了快速的发展，许多VR产品被开发并投入到了市场中，受到了广大消费者的欢迎。
然而，消费者在体验VR产品时，很容易完全沉浸在VR环境中，当此时外部环境出现了一些紧急状况需要体验者及时了解或者外界有人需要针对一些急事与体验者进行沟通交流时，如果没有把VR设备从体验者身上摘下来，体验者将无法感知外界的环境或者与外界的人进行沟通。可如果在体验者体验VR影像的过程中把VR设备从体验者身上摘下来，必将大大降低体验者的VR沉浸效果，严重影响了用户体验。
发明内容
有鉴于此，本发明的目的在于提供一种VR设备及其体验控制方法、系统、装置、存储介质，能够在VR体验者与外部环境进行交互时，避免了严重降低体验者的VR沉浸效果。其具体方案如下：
第一方面，本发明公开了一种VR体验控制方法，应用于VR设备，包括：
获取从外部环境中产生的信号；
判断所述信号是否满足预设条件；
如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
可选的，所述获取从外部环境中产生的信号的步骤，包括：
获取从外部环境中产生的音频信号、红外遥控信号和热辐射信号中的 任意一种或几种。
可选的，当获取的信号为音频信号，则所述判断所述信号是否满足预设条件的步骤，包括：
对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求。
可选的，所述对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求的步骤，包括：
对所述音频信号进行语音识别，得到相应的文字信息；
判断所述文字信息是否包括预设的关键词。
可选的，所述VR体验控制方法，还包括：
在对采集到的实时环境信息进行播放的过程中，控制所述VR设备停止播放VR影片。
可选的，所述对当前外部环境进行信息采集的步骤，包括：
利用所述音频信号，确定相应信号发生源的方位信息；
根据所述方位信息，对当前相应方位上的外部环境进行信息采集。
可选的，所述根据所述方位信息，对当前相应方位上的外部环境进行信息采集的步骤，包括：
根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集和/或音频采集。
可选的，根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集的步骤，包括：
将所述VR设备中预设的与所述方位信息相对应的摄像头确定为目标摄像头；
控制所述目标摄像头开启，以对当前外部环境的图像画面信息进行采集。
第二方面，本发明公开了一种VR体验控制系统，应用于VR设备，包括：
信号获取模块，用于获取从外部环境中产生的信号；
信号判断模块，用于判断所述信号是否满足预设条件；
信息采集模块，用于当所述信号满足所述预设条件，则对当前外部环境进行信息采集；
信息播放模块，用于对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
第三方面，本发明公开了一种VR体验控制装置，应用于VR设备，包括处理器和存储器；其中，所述处理器执行所述存储器中保存的VR体验控制程序时实现以下步骤：
通过所述VR设备中预设的信号获取装置，获取从外部环境中产生的信号；
判断所述信号是否满足预设条件；
如果是，则通过所述VR设备中预设的信息采集装置，获取当前外部环境的实时信息，并向所述VR设备中预设的信息播放装置发送播放所述实时信息的指令，以向当前VR体验者展示所述实时信息。
第四方面，本发明公开了一种VR设备，包括前述的VR体验控制装置、信号获取装置、信息采集装置以及信息播放装置。
可选的，所述信号获取装置包括分布在所述VR设备的不同位置上的多个麦克风。
可选的，所述信息采集装置包括分布在所述VR设备的不同位置上的多个摄像头和/或多个麦克风。
第五方面，本发明公开了一种存储计算机可读程序代码的存储介质，所述计算机可读程序代码被一个或处理器执行以实现前述的VR体验控制方法。
可见，本发明在获取到外部环境中产生的信号之后，判断该信号是否满足预设的条件，如果满足，则会对当前外部环境进行信息采集，然后对采集到的实时环境信息进行播放，以向体验者展示当前实时环境信息，由此实现了VR体验者与外部环境的信息交互。由于在上述过程中，无需从体验者身上摘下VR设备，从而没有对体验者的沉浸感造成严重影响。也即，本发明实现了在VR体验者与外部环境进行交互时避免严重降低体验者的VR沉浸效果的目的。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本发明实施例公开的一种VR体验控制方法流程图；
图2为本发明实施例公开的一种具体的VR体验控制方法流程图；
图3为本发明公开的VR设备采集音频信号过程示意图；
图4为本发明公开的一种具体VR设备结构示意图；
图5为本发明公开的一种VR设备局部结构示意图；
图6为本发明实施例公开的一种具体的VR体验控制方法流程图；
图7为本发明实施例公开的一种具体的VR体验控制方法流程图；
图8为本发明实施例公开的一种具体的VR体验控制方法流程图；
图9为本发明实施例公开的一种具体的VR体验控制方法流程图；
图10为本发明实施例公开的一种具体的VR体验控制系统结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例公开了一种VR体验控制方法，应用于VR设备，参见图1所示，该方法包括：
步骤S11：获取从外部环境中产生的信号。
可以理解的是，上述外部环境是指相对于VR设备的外界真实环境。
另外，上述信号可以是从外部环境中产生的任意信号，包括但不限于音频信号、红外遥控信号、热辐射信号等。
需要说明的是，本实施例在获取从外部环境中产生的信号时，需要依 赖与该信号的类型对应的信号获取装置。例如，当上述信号的类型为音频信号时，相应的信号获取装置为麦克风等音频信号获取装置；当上述信号的类型为红外遥控信号时，相应的信号获取装置为红外接收装置；当上述信号的类型为热辐射信号时，相应的信号获取装置为热辐射探测器。
步骤S12：判断所述信号是否满足预设条件。
本实施例中，当获取到从外部环境中产生的信号后，判断该信号是否满足预设条件，当该信号满足上述预设条件时，将会触发后续信息采集步骤。
具体的，本实施例可以通过判断上述信号中携带的信息是否包括预设信息的方式来确定上述信号是否满足预设条件。当然，也可以通过判断上述信号的信号参数大小是否满足预设参数大小范围的方式来确定上述信号是否满足预设条件。可以理解的是，本实施例具体可以根据信号的类型来确定相应的判断方式，以确定出该信号是否满足预设条件。
步骤S13：如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
本实施例中，当上述信号满足预设条件时，将会对当前外部环境进行信息采集。可以理解的是，上述信息采集过程需要依赖相应的信息采集装置。例如，如果是对当前外部环境进行图像画面的采集，那么相应的信息采集装置可以是摄像头，同理，如果是对当前外部环境进行音频采集，则相应的信息采集装置可以是麦克风等，并且此处的麦克风可以是上述步骤S11中的麦克风，也可以是不同于上述步骤S11中的麦克风。
需要进一步说明的是，本实施例中可以优先将上述信息采集装置设置在VR设备上，这样可以使得后续向体验者展示的实时环境信息是相对于体验者所处位置的外部环境信息，有利于体验者能够更加方便容易地根据上述实时环境信息中推测出该实时环境信息与自身当前所处位置之间的相对关系。
当然，如果为了避免增加VR设备的重量，以免对体验者的头部造成不适，本实施例也可以将上述信息采集装置安装在VR设备的外部环境，例如可以安装在当前体验者所处的房间内的墙壁上。当位于VR设备的外部环境 采集完相应的实时环境信息之后，需要将该实时环境信息传输至VR设备中进行播放。
另外，为了保证体验者在与外界环境进行交互时具有良好的交互效果，本实施例中的VR体验控制方法，还可以进一步包括：在对采集到的实时环境信息进行播放的过程中，控制所述VR设备停止播放VR影片。也即，当对采集到的实时环境信息进行播放之后，将会控制VR设备停止播放VR影片，包括停止VR画面的播放以及VR影片中音频的播放。
可见，本发明实施例在获取到外部环境中产生的信号之后，判断该信号是否满足预设的条件，如果满足，则会对当前外部环境进行信息采集，然后对采集到的实时环境信息进行播放，以向体验者展示当前实时环境信息，由此实现了VR体验者与外部环境的信息交互。由于在上述过程中，无需从体验者身上摘下VR设备，从而没有对体验者的沉浸感造成严重影响。也即，本发明实施例实现了在VR体验者与外部环境进行交互时避免严重降低体验者的VR沉浸效果的目的。
在前述实施例的基础上，本发明实施例公开了一种具体的VR体验控制方法，参见图2所示，该方法包括：
步骤S21：获取从外部环境中产生的音频信号。
具体的，本实施例可以通过分布在VR设备的不同位置上的多个麦克风来获取从外部环境中产生的音频信号。例如，可以利用分别位于VR设备左侧的一个麦克风和右侧的一个麦克风来获取从外部环境中产生的音频信号。
步骤S22：对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求。
在一种具体实施方式中，上述对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求的步骤，具体可以包括：
对所述音频信号进行语音识别，得到相应的文字信息，然后判断所述文字信息是否包括预设的关键词。
可以理解的是，当上述语音识别处理之后得到的文字信息中包括预设 的关键词，则可判定上述音频信号符合预设的特征要求。其中，上述关键词可以是体验者的姓名或者其他特定的词语。例如，上述关键词可以是体验者的姓名“张三”，当上述语音识别处理之后得到的文字信息中包含“张三”这个词，则可以判定上述音频信号符合预设的特征要求。
本实施例可以由用户通过预设的关键词设置接口来设置上述关键词，当然也可以由后台系统根据VR设备中记录的体验者信息来自动设置上述关键词。
在另一种具体实施方式中，上述对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求的步骤，具体可以包括：
提取所述音频信号的声音强度，得到相应的声音强度特征，然后判断该声音强度特征是否大于预设的声音强度阈值，如果是，则可以判定上述音频信号符合预设的特征要求。
步骤S23：如果是，则利用所述音频信号，确定相应信号发生源的方位信息。
本实施例步骤S21中，具体可以利用利用分别位于VR设备左右的一个麦克风和右侧的一个麦克风来获取从外部环境中产生的音频信号，参见图3所示，由于同一声源到上述两个麦克风的直线距离不等，并且同一声源所产生的声音穿过左侧和右侧介质到达相应的麦克风时，声音在左侧介质和右侧介质内部所经过的距离也是不等的，根据上述两路声音传递路线之间的差异性，可以准确地确定出声源的方位信息。
步骤S24：根据所述方位信息，对当前相应方位上的外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
在一种具体实施方式中，所述根据所述方位信息，对当前相应方位上的外部环境进行信息采集的步骤，包括：根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集。
其中，上述根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集的步骤，具体可以包括：
将所述VR设备中预设的与所述方位信息相对应的摄像头确定为目标摄像头；然后控制所述目标摄像头开启，以对当前外部环境的图像画面信息进行采集。
本实施例中，需要预先在VR设备的不同位置上设置有多个摄像头。参见图4所示，本实施例公开了一种具体的VR设备，该VR设备具体可以包括用于为体验者展示VR影片的VR主体11、用于将VR主体11捆绑在体验者头部的VR固定部分12以及用于进一步在体验者头部稳固VR设备以防止VR设备从头部滑落的头戴部分13。其中，上述多个摄像头可以在VR主体11和/或VR固定部分12和/或头戴部分13上的不同位置处进行安置。参见图5所示，本实施例可以在VR主体11的前端设置一个摄像头，在VR固定部分12的两侧分别均匀地设置三个摄像头，这样相当于一共在VR设备上设置了7个摄像头。当上述方位信息表明上述信号发生源是位于VR设备的右侧方位，那么此时可以将位于VR设备右侧的三个摄像头确定为目标摄像头，然后控制上述目标摄像头开启，以对当前外部环境的图像画面信息进行采集。本实施例中，上述VR固定部分12的两侧均设有与VR主体11内的主PCB(即Printed Circuit Board，印刷电路板)连接的FPC(即Flexible Printed Circuit，柔性电路板)，上述VR固定部分12的两侧上的摄像头均设置在相应的FPC上。
本实施例中，上述目标摄像头可以是VR摄像头，通过该VR摄像头可以直接采集与当前外部环境对应的VR格式图像。
另外，上述目标摄像头也可以是常规的摄像头，通过该常规摄像头可以采集与当前外部环境对应的普通格式的图像。后续对实时环境画面信息进行播放时，可以直接对上述常规摄像头采集到的普通格式图像进行播放。当然，为了提升用户体验，本实施例也可以预先在VR设备中设置格式转换装置，利用该格式转换装置，将上述常规摄像头采集到的普通格式图像转换成相应的VR格式图像，以提升后续画面播放效果。
进一步的，本实施例在对上述采集到的实时环境画面信息进行播放时，具体可以将上述实时环境画面信息显示在整个VR显示界面上，当然，也可以将上述实时环境画面信息显示在VR显示界面的特定区域上。其中， 上述特定区域具体可以根据上述方位信息来进行确定，例如，如果上述方位信息表明信号发生源位于VR设备的右侧，则上述特定区域便可以是位于VR显示界面右侧的一块区域；如果上述方位信息表明信号发生源位于VR设备的左侧，则上述特定区域便可以是位于VR显示界面左侧的一块区域；同理，如果上述方位信息表明信号发生源位于VR设备的前方，则上述特定区域便可以是位于VR显示界面顶部的一块区域。通过上述的显示方式，可以让体验者能够直观地获知当前信号发生源所在的位置以及当前实时环境画面信息对应的位置区域。
可以理解的是，上述VR设备中设置的摄像头的数量以及分布位置可以根据实际需求进行灵活调整，在此不对其进行具体限定。
在另一种具体实施方式中，所述根据所述方位信息，对当前相应方位上的外部环境进行信息采集的步骤，包括：根据所述方位信息，对当前相应方位上的外部环境进行音频采集。
参加图5所示，本实施例可以预先在VR固定部分12的左右两侧分别各设置一个麦克风。在上述音频采集过程中，具体可以利用上述VR固定部分12两侧的麦克风来对当前相应方位上的外部环境进行音频的采集。
在又一种具体实施方式中，所述根据所述方位信息，对当前相应方位上的外部环境进行信息采集的步骤，包括：
根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集和音频采集。
也即，本实施例在对外部环境进行信息采集时，既可以只采集图像画面信息，也可以只采集音频信息，当然也可以同时采集图像画面信息以及音频信息。
在前述实施例的基础上，本发明实施例公开了一种具体的VR体验控制方法，参见图6所示，该方法包括：
步骤S31：获取从外部环境中产生的红外遥控信号。
步骤S32：判断所述红外遥控信号是否满足预设条件。
具体的，本实施例在获取到上述红外遥控信号之后，可以提取出上述 红外遥控信号中携带的编码信息，然后判断该编码信息中是否包括特定的编码信息，如果是，则可以判定上述红外遥控信息满足预设条件。
可以理解的是，上述特定的编码信息可以由后台系统预先设定。当获取到的红外遥控信号中携带了上述特定的编码信息，则意味着此时外界有人希望与当前的VR体验者进行交流。
步骤S33：如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
关于上述步骤S33中的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
在前述实施例的基础上，本发明实施例公开了一种具体的VR体验控制方法，参见图7所示，该方法包括：
步骤S41：获取从外部环境中产生的热辐射信号。
可以理解的是，上述热辐射信号可以是由于火灾、厨房烹饪器具等产生的热辐射信号。
步骤S42：判断所述热辐射信号是否满足预设条件。
具体的，本实施例可以通过判断上述热辐射信号的辐射强度是否大于预设辐射强度阈值的方式来确定上述热辐射信号是否满足预设条件。也即，当上述热辐射信号的辐射强度大于预设辐射强度阈值时，则可以判定上述热辐射信号满足预设条件。
可以理解的是，上述预设辐射强度阈值可以由后台系统根据经验值进行自动设定，也可以由用户根据实际应用需要进行灵活设置。
步骤S43：如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
关于上述步骤S43中的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
在前述实施例的基础上，本发明实施例公开了一种具体的VR体验控制方法，参见图8所示，该方法包括：
步骤S51：获取从外部环境中产生的多种信号。
本实施例中，上述多种信号可以包括音频信号、红外遥控信号和热辐射信号中的任意几种信号，但不限于音频信号、红外遥控信号、热辐射信号。
步骤S52：判断每一种信号是否满足相应的预设条件。
本实施例中，不同类型的信号所对应的预设条件会有所不同，关于这方面的具体内容可以参考前述实施例中公开的相应内容，在此不再进行赘述。
步骤S53：如果任一种信号满足相应的预设条件，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
也即，本实施例可以对多种信号进行获取以及分析，只要有一种信号满足相应的预设条件，本实施例便会启动对当前外部环境信息的采集以及播放操作。关于上述信息采集和播放的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
在前述实施例的基础上，本发明实施例公开了一种具体的VR体验控制方法，参见图9所示，该方法包括：
步骤S61：获取从外部环境中产生的信号；
步骤S62：判断所述信号是否满足预设条件；
步骤S63：如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放以及控制所述VR设备停止播放VR影片，以向当前VR体验者展示所述实时环境信息。
关于上述步骤S61至S63的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
步骤S64：当获取到交互中止信号，则控制所述VR设备继续播放VR影片。
需要说明的是，上述交互中止信号具体可以是由体验者按压预先设置在VR设备上的按钮之后触发的信号，也可以是由VR设备在识别到有人说 出特定的关键词后触发的信号，当然，还可以是由外界装置直接向VR设备发送的信号。
相应的，本发明实施例还公开了一种VR体验控制系统，应用于VR设备，参见图10所示，该系统包括：
信号获取模块21，用于获取从外部环境中产生的信号；
信号判断模块22，用于判断所述信号是否满足预设条件；
信息采集模块23，用于当所述信号满足所述预设条件，则对当前外部环境进行信息采集；
信息播放模块24，用于对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
关于上述各个模块更加具体的工作过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
相应的，本发明实施例还公开了一种VR体验控制装置，应用于VR设备，包括处理器和存储器；其中，所述处理器执行所述存储器中保存的VR体验控制程序时实现以下步骤：
通过所述VR设备中预设的信号获取装置，获取从外部环境中产生的信号；判断所述信号是否满足预设条件；如果是，则通过所述VR设备中预设的信息采集装置，获取当前外部环境的实时信息，并向所述VR设备中预设的信息播放装置发送播放所述实时信息的指令，以向当前VR体验者展示所述实时信息。
关于上述处理器更加具体的工作过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
相应的，本发明实施例还公开了一种VR设备，包括前述实施例公开的VR体验控制装置、信号获取装置、信息采集装置以及信息播放装置。
本实施例中，所述信号获取装置包括分布在所述VR设备的不同位置上的多个麦克风。所述信息采集装置包括分布在所述VR设备的不同位置上的多个摄像头和/或多个麦克风。
关于上述信号获取装置和信息采集装置更加具体的结构可以参考前述实施例中公开的相应内容，在此不再进行赘述。
进一步的，本发明还公开了一种存储计算机可读程序代码的存储介质，所述计算机可读程序代码被一个或处理器执行以实现前述公开的VR体验控制方法。关于该VR体验控制方法的具体步骤可以参考前述实施例中公开的相应内容，在此不再进行赘述。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而 且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的一种VR设备及其体验控制方法、系统、装置、存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (14)

  1. 一种VR体验控制方法，其特征在于，应用于VR设备，包括：
    获取从外部环境中产生的信号；
    判断所述信号是否满足预设条件；
    如果是，则对当前外部环境进行信息采集，并对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
  2. 根据权利要求1所述的VR体验控制方法，其特征在于，所述获取从外部环境中产生的信号的步骤，包括：
    获取从外部环境中产生的音频信号、红外遥控信号和热辐射信号中的任意一种或几种。
  3. 根据权利要求2所述的VR体验控制方法，其特征在于，当获取的信号为音频信号，则所述判断所述信号是否满足预设条件的步骤，包括：
    对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求。
  4. 根据权利要求3所述的VR体验控制方法，其特征在于，所述对所述音频信号进行特征提取，并判断得到的音频特征信息是否符合预设的特征要求的步骤，包括：
    对所述音频信号进行语音识别，得到相应的文字信息；
    判断所述文字信息是否包括预设的关键词。
  5. 根据权利要求1至4任一项所述的VR体验控制方法，其特征在于，还包括：
    在对采集到的实时环境信息进行播放的过程中，控制所述VR设备停止播放VR影片。
  6. 根据权利要求2至4任一项所述的VR体验控制方法，其特征在于，所述对当前外部环境进行信息采集的步骤，包括：
    利用所述音频信号，确定相应信号发生源的方位信息；
    根据所述方位信息，对当前相应方位上的外部环境进行信息采集。
  7. 根据权利要求6所述的VR体验控制方法，其特征在于，所述根据所述方位信息，对当前相应方位上的外部环境进行信息采集的步骤，包括：
    根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集和/或音频采集。
  8. 根据权利要求7所述的VR体验控制方法，其特征在于，根据所述方位信息，对当前相应方位上的外部环境进行图像画面采集的步骤，包括：
    将所述VR设备中预设的与所述方位信息相对应的摄像头确定为目标摄像头；
    控制所述目标摄像头开启，以对当前外部环境的图像画面信息进行采集。
  9. 一种VR体验控制系统，其特征在于，应用于VR设备，包括：
    信号获取模块，用于获取从外部环境中产生的信号；
    信号判断模块，用于判断所述信号是否满足预设条件；
    信息采集模块，用于当所述信号满足所述预设条件，则对当前外部环境进行信息采集；
    信息播放模块，用于对采集到的实时环境信息进行播放，以向当前VR体验者展示所述实时环境信息。
  10. 一种VR体验控制装置，其特征在于，应用于VR设备，包括处理器和存储器；其中，所述处理器执行所述存储器中保存的VR体验控制程序时实现以下步骤：
    通过所述VR设备中预设的信号获取装置，获取从外部环境中产生的信号；
    判断所述信号是否满足预设条件；
    如果是，则通过所述VR设备中预设的信息采集装置，获取当前外部环境的实时信息，并向所述VR设备中预设的信息播放装置发送播放所述实时信息的指令，以向当前VR体验者展示所述实时信息。
  11. 一种VR设备，其特征在于，包括如权利要求10所述的VR体验控制装置、信号获取装置、信息采集装置以及信息播放装置。
  12. 根据权利要求11所述的VR设备，其特征在于，所述信号获取装置包括分布在所述VR设备的不同位置上的多个麦克风。
  13. 根据权利要求11或12所述的VR设备，其特征在于，所述信息采集装置包括分布在所述VR设备的不同位置上的多个摄像头和/或多个麦克风。
  14. 一种存储计算机可读程序代码的存储介质，其特征在于，所述计算机可读程序代码被一个或处理器执行以实现如权利要求1至8任一项所述的VR体验控制方法。
PCT/CN2017/116458 2017-12-15 2017-12-15 一种vr设备及其体验控制方法、系统、装置、存储介质 WO2019113939A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/116458 WO2019113939A1 (zh) 2017-12-15 2017-12-15 一种vr设备及其体验控制方法、系统、装置、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/116458 WO2019113939A1 (zh) 2017-12-15 2017-12-15 一种vr设备及其体验控制方法、系统、装置、存储介质

Publications (1)

Publication Number Publication Date
WO2019113939A1 true WO2019113939A1 (zh) 2019-06-20

Family

ID=66819789

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2017/116458 WO2019113939A1 (zh) 2017-12-15 2017-12-15 一种vr设备及其体验控制方法、系统、装置、存储介质

Country Status (1)

Country Link
WO (1) WO2019113939A1 (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106254641A (zh) * 2016-07-29 2016-12-21 宇龙计算机通信科技(深圳)有限公司 智能设备的耳机监控方法及系统
CN106325518A (zh) * 2016-08-31 2017-01-11 青岛歌尔声学科技有限公司 用于虚拟现实设备的声音监测方法、装置及虚拟现实设备
CN106775566A (zh) * 2016-12-30 2017-05-31 维沃移动通信有限公司 一种虚拟现实终端的数据处理方法和虚拟现实终端
CN107024982A (zh) * 2016-12-09 2017-08-08 阿里巴巴集团控股有限公司 一种虚拟现实设备的安全监控方法、装置及虚拟现实设备
US20170236328A1 (en) * 2016-02-12 2017-08-17 Disney Enterprises, Inc. Method for motion-synchronized ar or vr entertainment experience
CN107168518A (zh) * 2017-04-05 2017-09-15 北京小鸟看看科技有限公司 一种用于头戴显示器的同步方法、装置及头戴显示器

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170236328A1 (en) * 2016-02-12 2017-08-17 Disney Enterprises, Inc. Method for motion-synchronized ar or vr entertainment experience
CN106254641A (zh) * 2016-07-29 2016-12-21 宇龙计算机通信科技(深圳)有限公司 智能设备的耳机监控方法及系统
CN106325518A (zh) * 2016-08-31 2017-01-11 青岛歌尔声学科技有限公司 用于虚拟现实设备的声音监测方法、装置及虚拟现实设备
CN107024982A (zh) * 2016-12-09 2017-08-08 阿里巴巴集团控股有限公司 一种虚拟现实设备的安全监控方法、装置及虚拟现实设备
CN106775566A (zh) * 2016-12-30 2017-05-31 维沃移动通信有限公司 一种虚拟现实终端的数据处理方法和虚拟现实终端
CN107168518A (zh) * 2017-04-05 2017-09-15 北京小鸟看看科技有限公司 一种用于头戴显示器的同步方法、装置及头戴显示器

Similar Documents

Publication Publication Date Title
CN105323648B (zh) 字幕隐藏方法和电子装置
WO2020192400A1 (zh) 播放终端的播放控制方法、装置、设备和计算机可读存储介质
US10665250B2 (en) Real-time feedback during audio recording, and related devices and systems
US9008320B2 (en) Apparatus, system, and method of image processing, and recording medium storing image processing control program
WO2017134935A1 (ja) 情報処理装置、情報処理方法、及びプログラム
US20180109712A1 (en) Computing device camera view controller and shutter
WO2019000721A1 (zh) 视频文件录制方法、音频文件录制方法及移动终端
JP2013106298A (ja) 撮像制御装置、撮像制御方法、撮像制御方法のプログラムおよび撮像装置
CN109448705B (zh) 一种语音切分方法及装置、计算机装置和可读存储介质
CN109151642B (zh) 一种智能耳机、智能耳机处理方法、电子设备及存储介质
JP2017028529A (ja) モニタリングシステム及びモニタリング方法
CN109032345B (zh) 设备控制方法、装置、设备、服务端和存储介质
WO2017150103A1 (ja) 音声処理装置、画像処理装置、マイクアレイシステム、及び音声処理方法
JP2017144521A (ja) 情報処理装置、情報処理方法、及びプログラム
TWI222622B (en) Robotic vision-audition system
US6959095B2 (en) Method and apparatus for providing multiple output channels in a microphone
WO2019227552A1 (zh) 基于行为识别的语音定位方法以及装置
CN117480554A (zh) 语音增强方法及相关设备
JP2009267621A (ja) 通信装置
WO2019113939A1 (zh) 一种vr设备及其体验控制方法、系统、装置、存储介质
US11227423B2 (en) Image and sound pickup device, sound pickup control system, method of controlling image and sound pickup device, and method of controlling sound pickup control system
CN106033677A (zh) 一种控制播放进度的方法及装置
CN108089704A (zh) 一种vr设备及其体验控制方法、系统、装置、存储介质
JP2019220145A (ja) 操作端末、音声入力方法、及びプログラム
JP2020030739A5 (zh)

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17934923

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 17934923

Country of ref document: EP

Kind code of ref document: A1