CN114797090A - 场景模拟系统、信息配置方法、设备、介质及测量系统 - Google Patents

场景模拟系统、信息配置方法、设备、介质及测量系统 Download PDF

Info

Publication number
CN114797090A
CN114797090A CN202110116960.4A CN202110116960A CN114797090A CN 114797090 A CN114797090 A CN 114797090A CN 202110116960 A CN202110116960 A CN 202110116960A CN 114797090 A CN114797090 A CN 114797090A
Authority
CN
China
Prior art keywords
motion
peak value
speed peak
milliseconds
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110116960.4A
Other languages
English (en)
Inventor
顾勇
郑啟豪
周璐昕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Center for Excellence in Brain Science and Intelligence Technology Chinese Academy of Sciences
Original Assignee
Center for Excellence in Brain Science and Intelligence Technology Chinese Academy of Sciences
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Center for Excellence in Brain Science and Intelligence Technology Chinese Academy of Sciences filed Critical Center for Excellence in Brain Science and Intelligence Technology Chinese Academy of Sciences
Priority to CN202110116960.4A priority Critical patent/CN114797090A/zh
Publication of CN114797090A publication Critical patent/CN114797090A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/211—Input arrangements for video game devices characterised by their sensors, purposes or types using inertial sensors, e.g. accelerometers or gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/212—Input arrangements for video game devices characterised by their sensors, purposes or types using sensors worn by the player, e.g. for measuring heart beat or leg activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25—Output arrangements for video game devices
    • A63F13/28—Output arrangements for video game devices responding to control signals received from the game device for affecting ambient conditions, e.g. for vibrating players' seats, activating scent dispensers or affecting temperature or light
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/105—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals using inertial sensors, e.g. accelerometers, gyroscopes
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/30—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device
    • A63F2300/302—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by output arrangements for receiving control signals generated by the game device specially adapted for receiving control signals not targeted to a display device or game input means, e.g. vibrating driver's seat, scent dispenser

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biophysics (AREA)
  • Cardiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提供场景模拟系统、信息配置方法、设备、介质及测量系统，场景模拟系统包括：运动装置，用于携带对象运动；显示装置，用于向所述对象显示图像；控制装置，通信连接所述运动装置及显示装置，用于控制显示装置显示动画内容以及控制运动装置进行相配合运动以形成用于模拟场景的联动；其中，在所述联动的各对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。本申请创新性地提出在场景模拟中，通过控制视觉刺激的第二运动速度峰值先于对应前庭刺激的第一运动速度峰值预设时间，利于提升对象方向感的准确性，提升场景模拟时的对象体验。

Description

场景模拟系统、信息配置方法、设备、介质及测量系统
技术领域
本申请实施例涉及智能硬件技术领域，尤其涉及场景模拟系统、信息配置方法、设备、介质及测量系统。
背景技术
基于虚拟现实(Virtual Reality，VR)、增强现实(Augmented Reality，AR)技术的人机交互体验，已在娱乐、工业等领域有了较多应用。进一步的，有使用视觉产品(例如智能眼镜、智能头盔)等来为用户提供模拟场景的视觉体验。为达到更逼真的效果，也有使装载用户并运动的平台及视觉产品配合达到更逼真的效果，例如过山车场景，即令视觉产品播放过山车上用户视角的视频，而运动平台则模拟同步的爬升、俯冲、转弯等等的运动，从而提供给用户逼真的过山车感受。
然而，为达到更好的用户体验，厂商专注于如何提升显示画质的逼真效果，运动平台的运动多样性，但缺少对与人真实感受相关的视觉和运动感受配合以提升用户体验的研究。
发明内容
有鉴于此，本申请实施例中提供场景模拟系统、信息配置方法、设备、介质及测量系统，解决现有技术中的问题。
本申请实施例提供了一种场景模拟系统，包括：运动装置，用于携带对象运动；显示装置，用于向所述对象显示图像；控制装置，通信连接所述运动装置及显示装置，用于控制显示装置显示动画内容以及控制运动装置进行相配合运动以形成用于模拟场景的联动；其中，在所述联动的各对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
可选的，包括：运动传感器，用于检测对象的运动数据；所述控制装置，通信连接所述运动传感器，根据所述运动数据预测第一运动速度峰值，以控制所述运动装置的运动速度使实际达到的第一运动速度峰值迟于对应配合动作中的动画内容的运动变化的第二运动速度峰值预设时间发生；。
可选的，所述预设时间选自以下中的任意一个时间段：1)150毫秒～200毫秒；2)200毫秒～250毫秒；3)250毫秒～300毫秒；4)300毫秒～350毫秒；5)350毫秒～400毫秒；6)400毫秒～450毫秒；7)450毫秒～500毫秒；8)500毫秒～550毫秒；9)550毫秒～600毫秒。
可选的，所述运动装置为多自由度的运动平台。
可选的，所述多自由度包括以下中的一种：二自由度、三自由度、六自由度、九自由度。
可选的，所述显示装置包括以下中的任意一种：虚拟现实眼镜或头盔、增强现实眼镜或头盔、显示屏或显示屏组。
可选的，所述运动装置具有限制其与对象身体相对位置的限位设施。
可选的，所述限位设施用于限制对象身体的躯干、四肢、及头部中的至少一种。
本申请实施例提供了信息配置方法，包括：获取动画内容；根据所述动画内容提取每个第二运动速度峰值；配置运动装置的运动配置信息；其中，所述运动配置信息在被运行时控制运动装置的运动配合所述动画内容的显示以形成用于模拟场景的联动；在所述联动的各所述对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
可选的，所述根据所述动画内容提取每个第二运动速度峰值，包括：分析所显示的动画内容以获得每个第二运动速度峰值；或者，根据所述动画内容生成过程中记录的参数提取得到第二运动速度峰值。
可选的，所述信息配置方法包括：通过预测模型来修正所述第一运动速度峰值；其中，所述预测模型已学习所述运动装置和其所携带对象的头部之间速度关系。
本申请实施例提供了一种计算机装置，包括：存储器和处理器，所述存储器上存储有能在所述处理器上运行的可执行程序代码，其中，所述处理器运行所述可执行程序代码时执行所述的信息配置方法。
本申请实施例提供了一种计算机可读存储介质，存储有可执行程序代码，其中，所述计算机指令被处理器运行时执行所述的信息配置方法。
本申请实施例提供了一种场景模拟测量系统，包括：运动装置，用于携带对象运动，设置有运动传感器；显示装置，用于向所述对象显示动画内容，所述动画内容包括：移动的等间隔分布的标记的图案；感应装置，相对所述显示装置固定地设置并指向所述显示装置的显示面的预定位置，用于探测经过所述预定位置的各标记；心理物理数据检测系统，用于检测所述对象的心理物理阈值；控制装置，通信连接所述运动装置、显示装置、运动传感器及采集装置，用于根据所述运动传感器探测得到的运动数据所确定的运动装置的第一运动速度峰值、以及根据感应装置所探测到先后标记的密集程度等方法所确定的动画内容的第二运动速度峰值，控制运动装置的运动和/或所述显示装置的显示，以调节所述运动装置的第一运动速度峰值和所述动画内容的运动变化的第二运动速度峰值之间的先后关系，而在所述心理物理数据检测系统得到被试对象相应的心理物理数据。
与现有技术相比，本申请实施例的技术配置信息具有以下有益效果：
通过对运动装置和显示装置的控制，以使得运动装置的第一运动速度峰值迟于第二运动速度峰值一预定时间发生，使得由第一运动速度峰值对应的对象的前庭刺激的加速度临界值迟于第二运动速度峰值对应的视觉刺激的速度峰值预定时间，使对象能获得更准确的方向感，从而提升在所模拟场景中的行动准确度，有效提升用户体验。
附图说明
图1展示本申请实施例中的场景模拟测量系统的结构示意图。
图2A展示为本申请实施例中运动装置的加速度数据的曲线示意图。
图2B展示为本申请实施例中显示装置的动画内容的速度数据的曲线示意图。
图2C展示为在一同步示例中第一运动速度峰值和第二运动速度峰值间存在间隔的曲线示意图。
图3展示为本申请实施例中场景模拟系统的结构示意图。
图4展示为本申请实施例中信息配置方法的流程示意图。
图5展示为本申请实施例中计算机装置的结构示意图。
具体实施方式
在模拟实际场景的游戏、训练等应用中，为达到逼真的效果，通过视觉和运动多方面的刺激地来让用户有实际场景的感受。具体的，所述刺激包括：在视觉、及运动感官上的。
举例来说，在视觉上，可以提供用户以虚拟现实(VR)或增强现实(AR)的头盔或眼镜等以佩戴或者提供显示屏，播放相应模拟场景的动画；在运动感官上，用户则身处运动平台，运动平台携带用户进行配合所述动画的运动，从而能给用户一种身临其境的感受。比如动画中场景向右移动，而运动平台则向左转动，以模拟出用户左转动作的感受。
故而，当推广到更复杂的模拟场景中，就能实现例如过山车，赛车，射击等场景。
如果只是单纯地提升画面的质量，确实会给用户带来更为真实的体验，但是一方面成本较高，另一方面对提升用户更准确的方向感上效果并不明显。
身体主要依靠前庭系统(Vestibular System)、视觉和本体感觉这3个系统的外周感受器感受身体位置、运动、以及外界的刺激。为此，本申请的申请人在探究在场景模拟中的视觉刺激和前庭刺激之间的关系对方向感的影响，从而在不需要进一步加强动画质量的情形下，通过简单、成本低的配置就能实现更好的用户体验。
为探究两者间的具体关系，如图1所示，展示本申请实施例中提供的场景模拟测量系统的结构示意图。
所述场景模拟测量系统具体包括：运动装置101、运动传感器102、感应装置103、显示装置104、控制装置105及心理物理数据检测系统(未图示)。
所述运动装置101用于携带被试对象(未图示)运动。在具体实施中，所述运动装置101可以是运动平台，较佳地，还可以是多自由度的运动平台，包括但不限于二自由度、三自由度、六自由度、九自由度等。其中，二自由度指的是沿平面坐标系的两个主轴X、Y进行旋转、平移或其复合运动的自由度；三自由度指的是沿空间坐标系的三个主轴X、Y、Z进行旋转、平移或其复合运动的自由度；六自由度更为精细，能实现偏航，俯仰，侧倾，前/后，上/下和左/右等自由度。当自由度越高，实现运动姿态的限制越少，能提供模拟场景的仿真体验越好。
所述运动传感器102可以是固定设置在运动装置101的一或多个加速度传感器或速度传感器，用于检测运动平台的运动数据。
在一些示例中，被试对象可通过例如安全带，同配合身体形状的凹陷位，从而尽可能固定被试对象和运动装置101间的相对位置。在可能示例中，被试对象可以是人，也可以是在许多行为和大脑认知功能与人很接近的非人灵长类动物，比如猕猴。
具体的，对于相对运动装置101基本固定的被试对象来说，运动平台的速度变化会被试对象的前庭系统感应到，从而形成被试对象的前庭刺激；因此，通过运动传感器102来记录的运动数据，能反映前庭刺激的强弱。
以运动传感器102为加速度传感器(可以是单轴或多轴)为例，假设所述运动装置101进行一例如水平平移运动中运动传感器102检测到的加速到减速过程，如图2A所示，示例性地展示在该过程中检测到的加速度传感器单轴上的加速度数据的波形示意图。图中的从图中可知，当时刻tves,peak时，加速度由正值变化为0，说明运动速度不再增加，表示运动速度达到峰值，本申请中定义为第一运动峰值。
可以理解的是，所述运动传感器102也可以是速度传感器实现，由于速度和加速度之间的关系可以换算，所以并非以加速度传感器的实现为限。
所述显示装置104用于向所述被试对象显示动画内容。在具体实施中，所述显示装置104可以包括一或多个显示屏，例如平面、曲面的单个显示屏、或多个显示屏的拼接或组合等。可选的，为利于感应装置103的检测准确，优选可使用单个的平面显示屏。
为便于简单而实时检测显示装置104中动画的变化速度，所述动画内容包括：移动的等间隔分布的标记141的图案。相应的，所述感应装置103，相对所述显示装置104固定地设置并指向所述显示装置104的显示面的预定位置，用于探测经过所述预定位置的各标记141。
举例来说，所述显示装置104中显示的图案可以是光栅图案，所述标记141为光栅的每个亮部(亮部之间为暗部)，所述光栅图案其可向某一个或多个方向平移，而所述感应装置103可以是单点的光电感应器，用于在光栅图案中的每个两部经过它的感应区域时产生相应信号变化，例如脉冲。
如图2B所示，示例性地展示光感应装置103所检测到的显示装置104所显示动画内容(即光栅图案)的运动数据的波形示意图。图2B实施例中的动画内容可与图2A实施例中的运动平台移动间同步配合，即运动平台水平平移，则在其平移时间内，光栅图案也水平平移；可以理解的是，当光栅图案运动越快，则经过光感应装置103的光栅越快，产生的脉冲也就越密集，故图中tvis,peak对应时刻时对应的脉冲最为密集，对应显示的动画内容的运动速度峰值，定义为第二运动峰值。
所述控制装置105，通信连接所述运动装置101、显示装置104、运动传感器102及采集装置，用于根据所述运动传感器102探测得到的运动数据所确定的运动装置101的第一运动速度峰值、以及根据感应装置103所探测到先后标记141的密集程度所确定的动画内容的第二运动速度峰值，控制运动装置101的运动和/或所述显示装置104的显示，以调节所述运动装置101的第一运动速度峰值和所述动画内容的运动变化的第二运动速度峰值之间的先后关系。
在具体实施中，所述控制装置105可以是服务器、台式机、笔记本电脑、智能手机、平板电脑等，通过发送指令到运动装置101及显示装置104，以调节第一运动速度峰值和第二运动速度峰值之间的前后关系。
例如，将动画内容的播放时间提前，或者将运动平台的运动时间滞后，以使第二运动速度峰值先于第一运动速度峰值发生；反之，则可令第一运动速度峰值先于第二运动速度峰值发生。
举例来说，如图2C所示，展示将图2A和图2B中的波形图结合的波形示意图，其中，tvis,peak位于tves,peak之前，两者间隔时间差△T。
所述心理物理数据检测系统，用于检测被试对象在第一相应的心理物理数据，以研究tvis,peak和tves,peak之间先后关系对检测被试对象的影响；tvis,peak和tves,peak之间的先后关系实际上意味着向被试对象施加前庭刺激和视觉刺激时间的先后。在具体实施中，所述心理物理数据可以包括：反映被试对象受到刺激(物理相关)和感觉(心理相关)之间关系的心理物理阈值(Psychophysics Threshold)。
在具体实施中，所述心理物理阈值的测量方式可以参考现有心理物理学的相关知识，例如极限法、调整法和常定刺激法等心理物理法。
实际实施中，被试的行为输出通常可以通过眼动或手动(如游戏手柄)来代替口头报告，这种方式可以准确和及时地反映被试在一个二选一任务中的认知决策，从而在心理物理实验中被广泛地应用于人和非人灵长类动物。在一可选实施例中，可以基于心理物理阈值与方向感知准确性上的负相关性，通过观测上述场景模拟测量系统在实验过程中，根据灵长类动物在随之运动过程中判断方向性的决策行为(例如眼动朝向等)，来得到灵长类动物判断方向性的准确程度的数据以拟合心理测量函数，例如使用累积高斯分布函数(CDF)等来拟合。进一步可选的，当确定心理测量函数后，可以根据心理测量函数计算标准差(如累积分布函数的标准差σ)，例如对应于84％的正确率，可以定义该标准差为心理物理阈值。
在具体的实验示例中，基于上述测量系统的环境，通过分别在tvis,peak领先tves,peak的情况下的实验数据中选择领先250毫秒，500毫秒，750毫秒的数据，在tvis,peak和tves,peak相差0，以及在tvis,peak延迟tves,peak情况下的实验数据中选择延迟250毫秒等情况下所检测得到的结果数据如下表所示：
t<sub>vis,peak</sub>-t<sub>ves,peak</sub> 心理物理阈值 平均准确率
...... ...... ......
-250毫秒 2.42 80.6％
0 2.37 85.0％
250毫秒 1.61 86.3％
500毫秒 1.53 87.5％
750毫秒 2.34 85.6％
...... ...... ......
上述实验仅摘取密集数据中的部分可以发现，tvis,peak领先tves,peak相比于tvis,peak延迟于tves,peak，心理物理阈值降低，尤其在领先500毫秒时达到最低，对应最佳的准确率87.5％，可知，使显示装置104所显示动画内容的第二运动速度峰值领先于运动装置101的第一运动速度峰值发生，即使视觉刺激的施加先于前庭刺激，有利于降低对象的心理物理阈值，从而具有更准确的方向感而具有更好的场景模拟体验。
并且，第二运动速度峰值领先于第一运动速度峰值的时间并非越大越好，可以见到在tvis,peak领先tves,peak达到750ms时，被试对象的方向感并不准确，表明其心理物理阈值又开始上升。
因此，根据上述过程可得到结论，当运动装置101和显示装置104间联动时，在每个对应配合动作中，比如运动装置101的一次左移配合于显示装置104所显示的动画内容中的一次右转或右移动，若第一运动速度峰值延迟于第二运动速度峰值预设时间，会有利于提升对象的方向感，从而提升模拟场景体验。
结合上述实验数据，可以得到所述第一运动速度峰值迟于第二运动速度峰值的预设时间，以能对被试对象产生较好方向感及相应准确性，可以选自以下中的任意一个时间段：1)150毫秒～200毫秒；2)200毫秒～250毫秒；3)250毫秒～300毫秒；4)300毫秒～350毫秒；5)350毫秒～400毫秒；6)400毫秒～450毫秒；7)450毫秒～500毫秒；8)500毫秒～550毫秒；9)550毫秒～600毫秒。
如图3所示，展示本申请实施例中场景模拟系统的结构示意图。
所述场景模拟系统包括运动装置301、显示装置302及控制装置303。
所述运动装置301，用于携带对象(比如用户)运动。在具体实施中，所述运动装置301可以是运动平台，较佳地，还可以是多自由度的运动平台，例如三自由度，六自由度或九自由度等。
为固定对象和运动装置301间的相对位置以实现良好体验，在可选示例中，所述运动装置301可以具有限制其与对象身体相对位置的限位设施(未图示)，例如以下至少一种：限制对象身体的躯干的安全带、限位空间(座位)等；对应四肢可视情形设置套环或安全带；对应头部的头部凹位或头枕或颈部的颈部凹位或头枕等。
所述显示装置302，用于向所述对象显示图像。在可能的示例中，所述显示装置302包括以下中的任意一种：虚拟现实眼镜或头盔、增强现实眼镜或头盔、显示屏或显示屏组等。图中示例性地展示所述显示装置为虚拟显示或增强现实的眼镜。
举例来说，对象可以落座于所述运动装置301，并佩戴虚拟现实眼镜或增强现实眼镜或头盔，由所佩戴的头盔或眼镜显示动画而运动装置301配合运动。特别的，采用虚拟现实眼镜或头盔，所能模拟的场景更多，不局限于现实场景的模拟，亦可以是虚拟场景的模拟，例如玄幻仙侠、西方魔幻、科幻等等。另外，虚拟现实头盔也称为沉浸式头盔，用于构建沉浸式的虚拟现实环境，典型的设备如Oculus Rift、HTC Vive、暴风魔镜等；增强现实头盔也称为透射式头盔，典型的如Hololens、Magic Leap等等。
又例如，在赛车场景中可以采用单块或多块显示屏，显示屏中显示赛车场景相关的画面。
当采用所述显示屏可以是LCD、LED、或OLED等显示屏，可以是曲面或平面，其尺寸根据实际需求加以变化。在多视角的应用场景中，也可以通过显示屏组来实现，例如多角度摆设显示屏，例如运动装置301的对象座位的正向前方摆设一第一显示屏，第一显示屏左侧偏斜15～30度摆放第二显示屏，第一显示屏左侧偏斜15～30度摆放第三显示屏，第一显示屏、第二显示屏、第三显示屏的显示表面均朝向运动装置301的对象座位，并分别按所在位置对应的对象视角同步显示画面，达到宽屏的效果。当然在其它示例中，也可以通过较大尺寸的一个或多个曲面屏来加以替代，并非以此实施方式为限。
所述控制装置303，通信连接所述运动装置301及显示装置302，用于控制显示装置302显示动画内容以及控制运动装置301进行相配合运动以形成用于模拟场景的联动；其中，在所述联动的各对应配合动作中，运动装置301的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
可以参考之前实验相关的实施例，所述预设时间可以选自以下中的任意一个时间段：1)150毫秒～200毫秒；2)200毫秒～250毫秒；3)250毫秒～300毫秒；4)300毫秒～350毫秒；5)350毫秒～400毫秒；6)400毫秒～450毫秒；7)450毫秒～500毫秒；8)500毫秒～550毫秒；9)550毫秒～600毫秒，从而使对象能具有较低的心理物理阈值，维持较佳的方向感，从而有更好的对象体验。
在一些示例中，所述控制装置303可以实现为独立的电子设备，例如服务器、电脑、笔记本电脑、智能手机、平板电脑等，通过有线或无线接口与运动装置301及显示装置302通信连接。在另一些示例中，所述控制装置303也可以是集成在运动装置301或显示装置302中的控制部件，例如控制器等。
在一些示例中，所述场景模拟系统可以包括：运动传感器(未图示)，用于检测对象的运动数据；可选的，所述运动传感器可以设于运动装置301或者位于对象佩戴的头盔或眼镜中；一般在VR或AR的头盔及眼镜中，会集成有加速度传感器，可以作为所述运动传感器。所述控制装置303，通信连接所述运动传感器，根据所述运动数据预测第一运动速度峰值，以控制所述运动装置301的运动速度使实际达到的第一运动速度峰值迟于对应配合动作中的动画内容的运动变化的第二运动速度峰值预设时间发生。在可能的示例中，若对象佩戴的显示装置302为VR或AR的头盔或眼镜，控制装置303可以和VR或AR的头盔或眼镜之间通过数据线或者无线通信(例如蓝牙，WiFi等)连接，以交互数据，例如发送启动指令至VR或AR的头盔或眼镜，接收运动传感器采集的运动数据等等。
在此示例中，通过运动传感器来主动获取对象的运动数据，控制装置303根据运动数据可以获得第一运动速度峰值，通过控制运动装置301的运动快慢，来调节预测的第一运动速度峰值迟于第二运动速度峰值预设时间发生。此示例中的方案适合于存在对象主动人交互的场景，例如枪战游戏等。当然，在对象主动交互时，控制装置303亦可根据对象的运动数据所可能包含的加速度数据来辨别其朝向，从而改变所显示的动画内容。
在又一些示例中，对象也可以被动地体验，例如VR电影，过山车等。故可以预先为模拟场景的动画内容配置好运动装置301的相配合的运动配置信息，而控制装置303只需要启动显示装置302和运动装置301即能使各个配合动作中的第一运动速度峰值迟于第二运动速度峰值预设时间发生。
相应的，如图4所示，展示本申请实施例中提供的所述信息配置方法的流程示意图。所述信息配置方法具体包括：
根据所述动画内容提取每个第二运动速度峰值，以使得在各所述对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
在一些示例中，如图4所示，所述根据所述动画内容提取每个第二运动速度峰值，包括：
步骤S401：获取动画内容。
在一些示例中，所述动画内容可以是已有的，也可以是生成的。所述动画内容可以是视频、卡通等。
步骤S402：根据所述动画内容提取每个第二运动速度峰值。
在一些示例中，当动画内容为已有，但并不知道其设计时的相关参数而无法得到第一运动速度峰值，则可分析所显示的动画内容以获得每个第二运动速度峰值，例如根据光流场的运动分析方法来分析得到。
在另一些示例中，可以根据所述动画内容生成过程中记录的参数提取得到第二运动速度峰值。例如，在实拍视频时，可以通过加速度传感器来获得并记录镜头的移动加速度值，以用于提取第二运动速度峰值；对于动画片，制片人可以在动画设计时就记录动画设计参数，从其中可以得到运动变化的速度数据，并进而提取得到第二运动速度峰值。
步骤S403：配置运动装置的运动配置信息。
其中，所述运动配置信息在被运行时控制运动装置的运动配合所述动画内容的显示以形成用于模拟场景的联动；在所述联动的各对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
可选的，所述第一运动速度峰值迟于第二运动速度峰值预设时间发生，所述预设时间选自以下中的任意一个时间段：1)150毫秒～200毫秒；2)200毫秒～250毫秒；3)250毫秒～300毫秒；4)300毫秒～350毫秒；5)350毫秒～400毫秒；6)400毫秒～450毫秒；7)450毫秒～500毫秒；8)500毫秒～550毫秒；9)550毫秒～600毫秒。
在一些示例中，所述运动配置信息可以包含用于实现配合动画内容的运动控制方案，其中可包括对运动装置控制的指令组合，例如控制实现运动平台各个自由度上运动的各个电机的转动量等，所述运动装置的运动配置信息可以存储在运动平台中，仅需控制装置发送相应的启动指令，即可调用所述运动配置信息中的运动控制方案。
在实际应用场景中，考虑到在佩戴眼镜或头盔等显示装置情况下，对象头部会相对身体可能有一定的运动，会使运动装置的第一运动速度峰值与对象头部的实际第一运动速度峰值之间有一定差异。因此，在一些示例中，可以通过预测模型来修正所述第一运动速度峰值；其中，所述预测模型已学习所述运动装置和其所携带对象的头部之间速度关系。
在可能的示例中，当输入运动装置的原第一运动速度峰值至所述预测模型，得到预测的第一运动速度峰值，以预测的第一运动速度峰值作为原第一运动速度峰值的修正结果，以用于在配置上述运动配置信息时使用。
本申请实施例中的场景模拟系统，可以有多种实际的商业应用。
例如，虚拟现实电影。在实际实现中，执行上述信息配置方法，以获取需要播放的电影画面中的每个第二运动速度峰值，并且观众席中设置运动平台，预先配置所述运动平台的运动配置信息，以能在场景模拟系统进行实际电影播放中，运动平台的运动跟随所述电影画面变化，且运动平台的每个第一运动速度峰值迟于各第二运动速度峰值预设时间发生，可以帮助电影观众在有限的运动中获取更敏锐的运动感知体验。
例如，用户被动式的虚拟现实游戏。在例如过山车、旅游游览等相关游戏中，根据游戏视频预先设置运动平台的运动配置信息，以能在场景模拟系统进行实际电影播放中，运动平台的运动跟随所述游戏视频画面变化，且运动平台的每个第一运动速度峰值迟于各第二运动速度峰值预设时间发生，可以帮助虚拟现实游戏者在有限的运动中获取更敏锐的运动感知体验。
例如，用户主动式的的虚拟现实游戏。在例如枪战射击、赛车等相关游戏中，可以通过实时采集用户的运动数据，以预测第一运动速度峰值，并控制运动平台延缓运动使得该第一运动速度峰值迟于游戏动画运动变化的第二运动速度峰值预设时间发生，以增强用户的运动感知(如方向感等)，提高游戏中的获胜机会。
如图5所示，展示本申请实施例中的计算机装置的结构示意图。
所述计算机装置500包括存储器501和处理器502，所述存储器501上存储有可在所述处理器502上运行的计算机程序；所述处理器502运行所述计算机程序时执行前述例如图4实施例中的信息配置方法中的步骤；也可以实现上述实施例中控制装置105、303的功能。
在一些示例中，所述处理器502可以是实现计算功能的组合，例如包含一个或多个微处理器组合，数字信号处理(digital signal processing，DSP)、ASIC等；所述存储器501可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。
在一些示例中，所述计算机装置500还可包括通信器503，以用于计算机装置500与外部通信。在可能的实现方式中，通信器503可以包括例如USB模块、有线网卡、无线网卡、蓝牙模块、及2G/3G/4G/5G模块等中的一种或多种。
在一些示例中，所述计算机装置500可以实现于例如服务器、服务器组、台式机、笔记本电脑、智能手机、平板电脑、智能手环、智能手表、或其它智能设备、或这些智能设备通信连接而形成的处理系统。
本申请实施例中还可提供计算机可读存储介质，其上存储有计算机程序，其中，所述计算机程序运行时执行前述例如例如图4实施例中的各方法步骤。
即，本申请实施例(例如图4实施例)中的方法流程可被实现为可存储在记录介质(诸如CDROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如ASIC或FPGA)的记录介质上的这样的软件处理。可以理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如，RAM、ROM、闪存等)，当所述软件或计算机代码被计算机、处理器或硬件访问且执行时，实现在前述实施例(例如图4实施例)的方法中。此外，当通用计算机访问用于实现在此示出方法的代码时，代码的执行将通用计算机转换为用于执行在此示出各方法步骤的专用计算机。
与现有技术相比，本申请实施例的技术配置信息具有以下有益效果：
通过对运动装置和显示装置的控制，以使得运动装置的第一运动速度峰值迟于第二运动速度峰值一预定时间发生，使得由第一运动速度峰值对应的用户的前庭刺激的加速度临界值迟于第二运动速度峰值对应的视觉刺激的速度峰值预定时间，使用户能获得更准确的方向感，从而提升在所模拟场景中的行动准确度，有效提升用户体验。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。计算机程序产品包括一个或多个计算机程序。在计算机上加载和执行计算机程序指令时，全部或部分地产生按照本申请的流程或功能。计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。计算机程序可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输。
在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包括于本申请的至少一个实施例或示例中。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或隐含地包括至少一个该特征。在本申请的描述中，“多个”的含义是两个或两个以上，除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分。并且本申请的优选实施方式的范围包括另外的实现，其中可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或按相反的顺序，来执行功能。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用，或结合这些指令执行系统、装置或设备而使用。
例如，前述图4等实施例中的各个步骤的顺序可以在具体场景中加以变化，并非以上述描述为限。
虽然本申请实施例披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本申请实施例的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (10)

1.一种场景模拟系统，其特征在于，包括：
运动装置，用于携带对象运动；
显示装置，用于向所述对象显示图像；
控制装置，通信连接所述运动装置及显示装置，用于控制显示装置显示动画内容以及控制运动装置进行相配合运动以形成用于模拟场景的联动；其中，在所述联动的各对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
2.根据权利要求1所述的场景模拟系统，其特征在于，包括：运动传感器，用于检测对象的运动数据；所述控制装置，通信连接所述运动传感器，根据所述运动数据预测第一运动速度峰值，以控制所述运动装置的运动速度使实际达到的第一运动速度峰值迟于对应配合动作中的动画内容的运动变化的第二运动速度峰值预设时间发生。
3.根据权利要求1所述的场景模拟系统，其特征在于，所述预设时间选自以下中的任意一个时间段：1)150毫秒～200毫秒；2)200毫秒～250毫秒；3)250毫秒～300毫秒；4)300毫秒～350毫秒；5)350毫秒～400毫秒；6)400毫秒～450毫秒；7)450毫秒～500毫秒；8)500毫秒～550毫秒；9)550毫秒～600毫秒。
4.根据权利要求1所述的场景模拟系统，其特征在于，所述显示装置包括以下中的任意一种：虚拟现实眼镜或头盔、增强现实眼镜或头盔、显示屏或显示屏组。
5.一种信息配置方法，其特征在于，包括：
获取动画内容；
根据所述动画内容提取每个第二运动速度峰值；
配置运动装置的运动配置信息；其中，所述运动配置信息在被运行时控制运动装置的运动配合所述动画内容的显示以形成用于模拟场景的联动；在所述联动的各对应配合动作中，运动装置的第一运动速度峰值迟于所述动画内容的运动变化的第二运动速度峰值预设时间发生。
6.根据权利要求5所述的信息配置方法，其特征在于，所述根据所述动画内容提取每个第二运动速度峰值，包括：
分析所显示的动画内容以获得每个第二运动速度峰值；或者，根据所述动画内容生成过程中记录的参数提取得到第二运动速度峰值。
7.根据权利要求5所述的信息配置方法，其特征在于，包括：通过预测模型来修正所述第一运动速度峰值；其中，所述预测模型已学习所述运动装置和其所携带对象的头部之间速度关系。
8.一种计算机装置，其特征在于，包括：存储器和处理器，所述存储器上存储有能在所述处理器上运行的可执行程序代码，其中，所述处理器运行所述可执行程序代码时执行权利要求5至7中任一项所述的信息配置方法。
9.一种计算机可读存储介质，其特征在于，存储有可执行程序代码，其中，所述计算机指令被处理器运行时执行如权利要求5至7中任一项所述的信息配置方法。
10.一种场景模拟测量系统，其特征在于，包括：
运动装置，用于携带被试对象运动，设置有运动传感器；
显示装置，用于向所述对象显示动画内容，所述动画内容包括：移动的等间隔分布的标记的图案；
感应装置，相对所述显示装置固定地设置并指向所述显示装置的显示面的预定位置，用于探测经过所述预定位置的各标记；
心理物理数据检测系统，用于检测被试对象的心理物理数据；
控制装置，通信连接所述运动装置、显示装置、运动传感器及采集装置，用于根据所述运动传感器探测得到的运动数据所确定的运动装置的第一运动速度峰值、以及根据感应装置所探测到先后标记的密集程度所确定的动画内容的第二运动速度峰值，控制运动装置的运动和/或所述显示装置的显示，以调节所述运动装置的第一运动速度峰值和所述动画内容的运动变化的第二运动速度峰值之间的先后关系，而在所述心理物理数据检测系统得到被试对象相应的心理物理数据。
CN202110116960.4A 2021-01-28 2021-01-28 场景模拟系统、信息配置方法、设备、介质及测量系统 Pending CN114797090A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110116960.4A CN114797090A (zh) 2021-01-28 2021-01-28 场景模拟系统、信息配置方法、设备、介质及测量系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110116960.4A CN114797090A (zh) 2021-01-28 2021-01-28 场景模拟系统、信息配置方法、设备、介质及测量系统

Publications (1)

Publication Number Publication Date
CN114797090A true CN114797090A (zh) 2022-07-29

Family

ID=82526909

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110116960.4A Pending CN114797090A (zh) 2021-01-28 2021-01-28 场景模拟系统、信息配置方法、设备、介质及测量系统

Country Status (1)

Country Link
CN (1) CN114797090A (zh)

Similar Documents

Publication Publication Date Title
US11983830B2 (en) Systems and methods for generating and facilitating access to a personalized augmented rendering of a user
US11656680B2 (en) Technique for controlling virtual image generation system using emotional states of user
CN106462233B (zh) 用于显示设备观看者视线吸引的方法和设备
CN109643162A (zh) 用现实世界内容增强虚拟现实内容
TWI669635B (zh) 用於顯示彈幕的方法、裝置以及非揮發性電腦可讀儲存介質
US20120200667A1 (en) Systems and methods to facilitate interactions with virtual content
CN110646938A (zh) 近眼显示器系统
CN105640489A (zh) 隐形镜片系统
CN110456626A (zh) 全息键盘显示
CN106445131B (zh) 虚拟目标操作方法和装置
CN114078190B (zh) 健身运动的引导设备
CN107291221A (zh) 基于自然手势的跨屏幕自适应精度调整方法及装置
KR20130061538A (ko) 가상현실 기반 콘텐츠 제공장치 및 그 방법
JP7160669B2 (ja) プログラム、情報処理装置、および方法
WO2016036425A1 (en) Motion detection for portable devices
CN114967128B (zh) 一种应用于vr眼镜的视线追踪系统及方法
CN114797090A (zh) 场景模拟系统、信息配置方法、设备、介质及测量系统
CN108416255B (zh) 基于三维动画中角色实时面部表情动画捕捉的系统和方法
EP4120052A1 (en) Head-mountable display systems and methods
Yang et al. Bimanual natural user interaction for 3D modelling application using stereo computer vision
CN110415354A (zh) 基于空间位置的三维沉浸式体验系统及方法
US12067677B2 (en) Information processing apparatus, information processing method, and computer-readable storage medium
JP7011030B1 (ja) ゴルフスイング解析システム、ゴルフスイング解析方法及びプログラム
CN107621881A (zh) 虚拟内容控制方法及控制设备
Wang et al. 35‐3: Modeling Eye Movement and Reflection in Virtual Environments for Eye Tracking

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination