CN108107578B - 虚拟现实的视角调节方法、装置、计算设备及存储介质 - Google Patents

虚拟现实的视角调节方法、装置、计算设备及存储介质 Download PDF

Info

Publication number
CN108107578B
CN108107578B CN201711341309.7A CN201711341309A CN108107578B CN 108107578 B CN108107578 B CN 108107578B CN 201711341309 A CN201711341309 A CN 201711341309A CN 108107578 B CN108107578 B CN 108107578B
Authority
CN
China
Prior art keywords
visual angle
deviation
virtual reality
sampling window
sampling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711341309.7A
Other languages
English (en)
Other versions
CN108107578A (zh
Inventor
邓朔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201711341309.7A priority Critical patent/CN108107578B/zh
Publication of CN108107578A publication Critical patent/CN108107578A/zh
Application granted granted Critical
Publication of CN108107578B publication Critical patent/CN108107578B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请公开了虚拟现实的视角调节方法、装置、计算设备及存储介质。其中,虚拟现实的视角调节方法,包括:获取虚拟现实的媒体数据并播放所述媒体数据;获取第一视角和第二视角的视角偏差,其中,所述第一视角用于描述播放所述媒体数据的播放器的播放视角,所述第二视角用于描述虚拟现实设备的设备姿态;将所述视角偏差划分为多个调节量;以及根据所述多个调节量的次序,每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角,直到所述第一视角与当前的第二视角的偏差小于阈值。

Description

虚拟现实的视角调节方法、装置、计算设备及存储介质
技术领域
本申请涉及虚拟现实技术领域,尤其涉及虚拟现实的视角调节方法、装置、计算设备及存储介质。
背景技术
随着虚拟现实(Virtual Reality,缩写为VR)技术的发展,VR终端设备被广泛地应用在各领域中,如虚拟现实头盔、虚拟现实眼镜等。
发明内容
本申请提出了一种虚拟现实的视角调节方案,以解决如何平滑调节播放视角的问题。
根据本申请一个方面,提供一种虚拟现实的视角调节方法,包括:获取虚拟现实的媒体数据并播放所述媒体数据;获取第一视角和第二视角的视角偏差,其中,所述第一视角用于描述播放所述媒体数据的播放器的播放视角,所述第二视角用于描述虚拟现实设备的设备姿态;将所述视角偏差划分为多个调节量;根据所述多个调节量的次序,每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角,直到所述第一视角与当前的第二视角的偏差小于阈值。。
在一些实施例中,所述获取第一视角和第二视角的视角偏差,包括:获取所述播放器开始播放所述媒体数据时的视角,并将其作为所述第一视角;在所述播放器开始播放所述媒体数据时,从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角;计算所获取的第一视角和所确定的第二视角的偏差值,并将该偏差值作为所述视角偏差。
在一些实施例中,所述从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角,包括:获取与开始播放所述媒体数据的时间点对应的一个或多个采样窗口的设备姿态信息;根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值;根据各采样窗口对应的视角值,确定所述第二视角。
在一些实施例中,所述一个或多个采样窗口中每个采样窗口的设备姿态信息包括多个采样信息,每个采样信息用于描述所述虚拟现实设备在相应采样时刻的设备姿态;所述根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值,包括:对于所述一个或多个采样窗口中每个采样窗口,计算该采样窗口的采样信息的加权平均值,并将每个采样窗口的加权平均值作为该采样窗口对应的视角值;所述根据各采样窗口对应的视角值,确定所述第二视角,包括:计算所述一个或采样窗口所对应视角值的平均值,并将该平均值作为所述第二视角。
在一些实施例中,所述根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值,还包括:在计算各采样窗口的采样信息的加权平均值之前,对所述一个或多个采样窗口中各采样窗口的采样信息进行滤波。
在一些实施例中,所述将所述视角偏差划分为多个调节量,包括:将所述视角偏差进行平均划分,以获取所述多个相同的调节量。
在一些实施例中,该方法还包括:在每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角时,获取当前虚拟现实空间内多个播放视角所对应的图像信息;从所述多个播放视角所对应的图像信息中,确定当前第一视角对应的图像信息,并显示所确定的图像信息。
根据本申请又一个方面,提供了一种虚拟现实的视角调节装置,包括:播放器,用于获取虚拟现实的媒体数据并播放所述媒体数据;偏差计算单元,用于获取第一视角和第二视角的视角偏差,其中,所述第一视角用于描述所述播放器的播放视角,所述第二视角用于描述虚拟现实设备的设备姿态;偏差划分单元,用于将所述视角偏差划分为多个调节量;视角调节单元,用于根据所述多个调节量的次序,每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角,直到所述第一视角与当前的第二视角的偏差小于阈值。
在一些实施例中,所述偏差计算单元根据下述方式获取第一视角和第二视角的视角偏差:获取所述播放器开始播放所述媒体数据时的视角,并将其作为所述第一视角;在所述播放器开始播放所述媒体数据时,从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角;计算所获取的第一视角和所确定的第二视角的偏差值,并将该偏差值作为所述视角偏差。
在一些实施例中,所述偏差计算单元根据下述方式从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角:获取与开始播放所述媒体数据的时间点对应的一个或多个采样窗口的设备姿态信息;根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值;根据各采样窗口对应的视角值,确定所述第二视角。
在一些实施例中,所述一个或多个采样窗口中每个采样窗口的设备姿态信息包括多个采样信息,每个采样信息用于描述所述虚拟现实设备在相应采样时刻的设备姿态;所述偏差计算单元根据下述方式确定各采样窗口对应的视角值:对于所述一个或多个采样窗口中每个采样窗口,计算该采样窗口的采样信息的加权平均值,并将每个采样窗口的加权平均值作为该采样窗口对应的视角值;所述偏差计算单元根据下述方式根据各采样窗口对应的视角值,确定所述第二视角:计算所述一个或采样窗口所对应视角值的平均值,并将该平均值作为所述第二视角。
在一些实施例中,所述偏差计算单元还用于:在计算各采样窗口的采样信息的加权平均值之前,对所述一个或多个采样窗口中各采样窗口的采样信息进行滤波。
在一些实施例中,所述偏差划分单元根据下述方式将所述视角偏差划分为多个调节量:将所述视角偏差进行平均划分,以获取所述多个相同的调节量。
在一些实施例中,在所述视角调节单元每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角时,所述播放器还用于获取当前虚拟现实空间内多个播放视角所对应的图像信息,并从所述多个播放视角所对应的图像信息中确定当前第一视角对应的图像信息,并显示所确定的图像信息。
根据本申请又一个方面,提供一种计算设备,包括:一个或多个处理器、存储器以及一个或多个程序。一个或多个程序存储在该存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行本申请的视角调节方法的指令。
根据本申请又一个方面,提供一种存储介质,存储有一个或多个程序,所述一个或多个程序包括指令,所述指令当由计算设备执行时,使得所述计算设备执行本申请的视角调节方法。
综上,根据本申请的技术方案可以将视角偏差划分为多个调节量,从而可以按照多个调节量对第一视角进行逐步调节,从而可以更平滑的调节第一视角,进而可以避免通过一次调节操作来修正视角偏差所引起的用户不适。进一步,本申请的技术方案可以在每次选定多个调节量中一个调节量并按照该调节量调节第一视角时,检测第二视角的变化(即在每次调节第一视角时,检测当前的第二视角),从而可以在第一视角和第二视角偏差较小时,终止对第一视角的调节操作。这样,本申请的技术方案可以更灵活地控制对第一视角的调节过程中,从而提高视角调节的实时性。
附图说明
为了更清楚地说明本申请实例中的技术方案,下面将对实例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据本申请一些实施例的应用场景100的示意图;
图2示出了根据本申请一些实施例的虚拟现实的视角调节方法200的流程图;
图3示出了根据本申请一个实施例的确定视角偏差的方法300的流程图;
图4示出了根据本申请一些实施例的虚拟现实的视角调节方法400的流程图;
图5示出了根据本申请一个实施例的显示图像信息的应用场景;
图6示出了根据本申请一个实施例的确定视角偏差的装置600的示意图;以及
图7示出了一个计算设备的组成结构图。
具体实施方式
下面将结合本申请实例中的附图,对本申请实例中的技术方案进行清楚、完整地描述,显然,所描述的实例仅是本申请一部分实例,而不是全部的实例。基于本申请中的实例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实例,都属于本申请保护的范围。
虚拟现实(Virtual Reality,缩写为VR),是一种可以创建和体验虚拟世界的计算机仿真技术。虚拟现实的终端设备可以通过计算机技术模拟产生一个三维空间的虚拟世界,提供用户关于视觉等感官的模拟,让用户感觉仿佛身历其境。在一些应用场景中,虚拟现实的终端设备包括显示设备和成像设备。例如,成像设备包括透镜(通常包括一个或两个透镜,但不限于此)。显示设备包括与透镜相对设置的显示屏。这样,用户可以通过透镜观看显示设备上显示的图像,以便感知相应的虚拟成像。这里,显示设备可以被实现为集成在虚拟现实的终端设备上,也可以被实现为可拆卸的移动设备(例如为移动电话、掌上电脑等计算设备。)
图1示出了根据本申请一些实施例的应用场景的示意图。如图1所示,应用场景100包括虚拟现实设备110和媒体服务器120。这里,虚拟现实设备110可以是虚拟现实头盔(head-mounted display,缩写:HMD)、虚拟现实眼镜(Virtual reality glass,缩写:VRG)等各种具体头戴式虚拟现实设备(Virtual reality headset,缩写:VRH),本申请对此不做限制。从功能角度而言,虚拟现实设备可以由用户单眼或双眼观看。换言之,虚拟现实的终端设备可以是单目设备(例如单目虚拟现实眼镜等)或者双目设备(例如双目虚拟现实眼镜等)。媒体服务器120可以是一个服务器、服务器集群或者分布式应用,本申请对此不做限制。媒体服务器120可以包括虚拟现实的媒体数据121,例如各种VR视频。媒体服务器120还可以通过网络130与虚拟现实设备110建立通信,并将媒体数据121发送到虚拟现实设备110。虚拟现实设备110可以包括播放器111和姿态传感器112。播放器111可以播放本地存储或来自媒体服务器120的媒体数据121。姿态传感器112可以采集虚拟现实设备的设备姿态信息。这里,设备姿态信息可以包括虚拟现实设备110的朝向和方位等等。在用户佩戴虚拟现实设备110时,虚拟现实设备110的设备姿态可以被认为与用户在虚拟现实空间中的观看视角一致。在一个实施例中,姿态传感器112例如可以包括一个或多个硬件传感器。硬件传感器的类型例如可以包括角速度传感器、加速度传感器和地磁场传感器。在又一个实施例中,姿态传感器112可以被实现为软件模块。该软件模块可以通过一个或多个硬件传感器确定设备姿态。这里,在播放器111播放媒体数据121时,虚拟现实设备110可以根据姿态传感器112所采集的设备姿态信息调节播放器111的播放视角。下面结合图2对根据本申请的视角调节方案进行说明。
图2示出了根据本申请一些实施例的虚拟现实的视角调节方法200的流程图。视角调节方法200例如可以在虚拟现实设备110中执行。另外,在虚拟现实设备110包括独立的移动设备(例如手机、掌上游戏机等计算设备)时,视角调节方法200可以在移动设备中执行。
如图2所示,视角调节方法200包括步骤S201。在步骤S201中,获取虚拟现实的媒体数据并播放媒体数据。这里,步骤S201可以依次解析所获取的每帧全景图像。对于每帧全景图像,步骤S201可以从其中确定当前播放视角对应的图像区域,并渲染和显示所确定的图像区域。
在步骤S202中,获取第一视角和第二视角的视角偏差。其中,第一视角用于描述播放器在播放媒体数据时的播放视角。第二视角用于描述虚拟现实设备110的设备姿态。在一些实施例中,步骤S202可以执行方法300。
在步骤S301中,获取播放器开始播放媒体数据时的视角,并将该视角作为第一视角。这里,虚拟现实设备开始播放媒体数据(例如播放一个新打开的VR视频)时,第一帧画面对应的视角通常为一个默然视角,例如为朝向虚拟现实空间正前方的观看视角。
在步骤S302中,在播放器开始播放媒体数据时,从虚拟现实设备获取当前的设备姿态,并根据所获取的设备姿态确定第二视角。在一些实施例中,步骤S302可以获取与开始播放媒体数据的时间点对应的一个或多个采样窗口的设备姿态信息。这里,采样窗口例如可以包括多个采样信息。每个采样信息用于描述虚拟现实设备在相应采样窗口的设备姿态。另外说明的是,步骤S302获取一个或多个采样窗口的设备姿态信息需要一个时间段。由于该时间段的长度较小,因此,该时间段内一个或多个采样窗口所对应的采集时间可以被认为与开始播放媒体数据的时间点一致。在此基础上,步骤S302可以根据上述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值。在一个实施例中,对于上述一个或多个采样窗口中每个采样窗口,步骤S302可以计算该采样窗口的采样信息的加权平均值,并将每个采样窗口的加权平均值作为该采样窗口对应的视角值。例如,步骤S302可以根据下述方式计算一个采样窗口加权平均值。
其中,N表示采样窗口的总数。M表示一个采样窗口的采样次数。Datai[j]表示第i个采样窗口中第j个采样信息。δj表示第j各采样信息的加权系数。表示第i各采样窗口对应的视角值。这里,对于一个采样窗口内的采样序列,步骤S302可以按照采样时间先后的顺序,确定各采样信息的加权系数。例如,采样时间越晚,权重越高(即加权系数越大)。在一个实施例中,M值为7,加权系数的序列如下所示:
在又一个实施例中,步骤S302在计算各采样窗口的采样信息的加权平均值之前,对各采样窗口的设备姿态信息进行滤波处理。这里,步骤S302例如可以采用高斯滤波方式,但不限于此。这样,步骤S302可以滤除采样信号中高斯噪声。在又一个实施例中,步骤S302在计算各采样窗口的采样信息的加权平均值之前,还可以将各采样窗口的采样信息的数据格式转换为四元数格式。这里,四元数可用于表示三维空间里的旋转角度。这样,步骤S302通过使用四元数计算视角值,可以避免在使用欧拉角表示旋转角度时存在的万向节死锁问题。
随后,步骤S302可以根据各采样窗口对应的视角值,确定第二视角。在一个实施例中,步骤S302可以计算上述一个或采样窗口所对应视角值的平均值,并将该平均值作为第二视角。另外,步骤S302也可以采用加权计算方式确定第二视角值,这里不再赘述。
在步骤S303中,计算所获取的第一视角和第二视角的偏差值,并将该偏差值作为视角偏差。综上,方法300可以采集一个或多个采样窗口采集设备姿态信息,并且通过加权计算方式计算每个采样窗口的视角值。这样,方法300可以降低关于视角的采样误差(例如采样过程中虚拟现实设备的抖动所引起的数据偏差),从而可以提高第二视角的计算准确度。
在步骤S202确定视角偏差后,方法200可以执行步骤S203,将视角偏差划分为多个调节量。这里,多个偏差量可以用于对第一视角的多次调节过程。这样,虚拟现实设备在调节第一视角时,通过多个调节量逐渐调节第一视角,可以避免直接将播放画面从第一视角调节至第二视角所引起的用户不适(例如,画面切换过快所引起的用户眩晕等)。换言之,虚拟现实设备可以依次按照每个调节量调节第一视角,从而使得画面切换更平滑,从而可以提高用户体验度。在一个实施例中,步骤S203可以将视角偏差进行平均划分,以获取多个相同的调节量。
在步骤S204中,根据多个调节量的次序,每次选定多个调节量中一个调节量并按照该调节量调节第一视角,直到第一视角与当前的第二视角的偏差小于阈值。。在基于多个调节量调节第一视角的过程中,第二视角可以是不变或者变化的。对于调节过程中第二视角不变的情况,步骤S204可以按照与多个调节量的总数一致的次数对第一视角进行调节。另外,对于调节过程中第二视角变化的情况(即用户改变虚拟现实设备姿态的情况),步骤S204可以在根据一个选定的调节量调节第一视角,并确定当前的第二视角与第一视角的偏差小于阈值时(即,第一视角与第二视角误差较小,可以被忽略),可以终止对第一视角的调节。
综上,根据本申请的方法200可以将视角偏差划分为多个调节量,从而可以按照多个调节量对第一视角进行逐步调节,从而可以更平滑的调节第一视角,进而可以避免通过一次调节操作来修正视角偏差所引起的用户不适。进一步,方法200可以在每次选定多个调节量中一个调节量并按照该调节量调节第一视角时,检测第二视角的变化(即在每次调节第一视角时,检测当前的第二视角),从而可以在第一视角和第二视角偏差较小时,终止对第一视角的调节操作。这样,方法200可以更灵活地控制对第一视角的调节过程中,从而提高视角调节的实时性。
图4示出了根据本申请一些实施例的虚拟现实的视角调节方法400的流程图。方法400例如可以在虚拟现实设备110中执行。另外,在虚拟现实设备110包括独立的移动设备(例如手机、掌上游戏机等计算设备)时,方法400可以在移动设备中执行。
如图4所示,视角调节方法400可以包括步骤S401-S404。这里,步骤S401-S404的实施方式与步骤S201-S204一致,这里不再赘述。另外,方法400还包括步骤S405和S406。
在步骤S405中,在每次选定多个调节量中一个调节量并按照该调节量调节第一视角时,获取当前虚拟现实空间内多个播放视角所对应的图像信息。换言之,步骤S405可以获取一帧全景图像或者一帧全景图像的部分区域。
在步骤S406中,从多个播放视角所对应的图像信息中,确定当前第一视角对应的图像信息,并显示所确定的图像信息。图5示出了根据本申请一个实施例的显示图像信息的应用场景。图5示出了栅格阵列501和用户502。其中,每个栅格中图像表示一个播放角度(即第一角度)对应的图像区域。每个栅格中图像可以被认为是从步骤S405所确定的全景图像中截取的一个区域。换言之,栅格阵列是多个第一视角对应的图像信息的拼接图。在一个播放时刻,虚拟现实设备的显示屏可以显示栅格a中图像信息。相应的,用户502可以从虚拟现实设备上看到栅格a中图像信息。在第一视角被调节为栅格b对应的视角时,步骤S406在可以在虚拟现实设备中显示栅格b中图像信息。
图6示出了根据本申请一些实施例虚拟现实的视角调节装置600的示意图。视角调节装置600可以驻留在虚拟现实设备110中。另外,在虚拟现实设备包括独立的移动设备(例如手机、掌上游戏机等计算设备)时,视角调节装置600可以驻留在移动设备中。
如图6所示,视角调节装置600可以包括播放器601、偏差计算单元602、偏差划分单元603和视角调节单元604。
播放器601用于获取虚拟现实的媒体数据并播放媒体数据。
偏差计算单元602用于获取第一视角和第二视角的视角偏差。其中,第一视角用于描述播放器601的播放视角。第二视角用于描述虚拟现实设备110的设备姿态。
在一些实施例中,偏差计算单元602可以获取播放器601开始播放媒体数据时的视角,并将该视角作为第一视角。在播放器601开始播放媒体数据时,偏差计算单元602可以从虚拟现实设备获取当前的设备姿态,并根据当前的设备姿态确定第二视角。
在一个实施例中,偏差计算单元602可以获取与开始播放媒体数据的时间点对应的一个或多个采样窗口的设备姿态信息。这里,每个采样窗口的设备姿态信息包括多个采样信息。每个采样信息用于描述虚拟现实设备在相应采样时刻的设备姿态。根据上述一个或多个采样窗口的设备姿态信息,偏差计算单元602可以确定各采样窗口对应的视角值。根据各采样窗口对应的视角值,偏差计算单元602可以确定第二视角。
在又一个实施例中,对于所述一个或多个采样窗口中每个采样窗口,偏差计算单元602可以计算该采样窗口的采样信息的加权平均值,并将每个采样窗口的加权平均值作为该采样窗口对应的视角值。偏差计算单元602可以计算上述一个或采样窗口所对应视角值的平均值,并将该平均值作为第二视角。在又一个实施例中,在计算各采样窗口的采样信息的加权平均值之前,偏差计算单元602还可以对上述一个或多个采样窗口中各采样窗口的采样信息进行滤波。偏差计算单元602可以计算所获取的第一视角和所确定的第二视角的偏差值,并将该偏差值作为视角偏差。
偏差划分单元603用于将视角偏差划分为多个调节量。例如,偏差计算单元603可以将视角偏差进行平均划分,以获取多个相同的调节量。
视角调节单元604根据所述多个调节量的次序,每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角,直到所述第一视角与当前的第二视角的偏差小于阈值。
在一些实施例中,在视角调节单元604每次选定所述多个调节量中一个调节量并按照该调节量调节第一视角时,播放器601还可以获取当前虚拟现实空间内多个播放视角所对应的图像信息,并从多个播放视角所对应的图像信息中确定当前第一视角对应的图像信息,并显示所确定的图像信息。视角调节装置600更具体的实施方式与方法200一致,这里不再赘述。
综上,根据本申请的视角调节装置600可以将视角偏差划分为多个调节量,从而可以按照多个调节量对第一视角进行逐步调节,从而可以更平滑的调节第一视角,进而可以避免通过一次调节操作来修正视角偏差所引起的用户不适。进一步,视角调节装置600可以在每次选定多个调节量中一个调节量并按照该调节量调节第一视角时,检测第二视角的变化(即在每次调节第一视角时,检测当前的第二视角),从而可以在第一视角和第二视角偏差较小时,终止对第一视角的调节操作。这样,视角调节装置600可以更灵活地控制对第一视角的调节过程中,从而提高视角调节的实时性。
图7示出了一个计算设备的组成结构图。如图7所示,该计算设备包括一个或者多个处理器(CPU)702、通信模块704、存储器706、用户接口710,以及用于互联这些组件的通信总线708。
处理器702可通过通信模块704接收和发送数据以实现网络通信和/或本地通信。
用户接口710包括一个或多个输出设备712,其包括一个或多个扬声器和/或一个或多个可视化显示器。用户接口710也包括一个或多个输入设备714。用户接口710例如可以接收遥控器的指令,但不限于此。
存储器706可以是高速随机存取存储器,诸如DRAM、SRAM、DDR RAM、或其他随机存取固态存储设备;或者非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存设备,或其他非易失性固态存储设备。
存储器706存储处理器702可执行的指令集,包括:
操作系统716,包括用于处理各种基本系统服务和用于执行硬件相关任务的程序;
应用718,包括用于实现上述视角调节方法的各种程序,这种程序能够实现上述各实例中的处理流程,比如可以包括图6所示的虚拟现实的视角调节装置600。
另外,本申请的每一个实例可以通过由数据处理设备如计算机执行的数据处理程序来实现。显然,数据处理程序构成了本发明。
此外,通常存储在一个存储介质中的数据处理程序通过直接将程序读取出存储介质或者通过将程序安装或复制到数据处理设备的存储设备(如硬盘和或内存)中执行。因此,这样的存储介质也构成了本发明。存储介质可以使用任何类型的记录方式,例如纸张存储介质(如纸带等)、磁存储介质(如软盘、硬盘、闪存等)、光存储介质(如CD-ROM等)、磁光存储介质(如MO等)等。
因此本申请还公开了一种非易失性存储介质,其中存储有数据处理程序,该数据处理程序用于执行本申请上述视角调节方法的任何一种实例。
另外,本申请所述的方法步骤除了可以用数据处理程序来实现,还可以由硬件来实现,例如,可以由逻辑门、开关、专用集成电路(ASIC)、可编程逻辑控制器和嵌微控制器等来实现。因此这种可以实现本申请所述方法的硬件也可以构成本申请。
以上所述仅为本申请的较佳实例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (15)

1.一种虚拟现实的视角调节方法,其特征在于,包括:
获取虚拟现实的媒体数据并播放所述媒体数据;
获取第一视角和第二视角的视角偏差,其中,所述第一视角用于描述播放所述媒体数据的播放器的播放视角,所述第二视角用于描述虚拟现实设备的设备姿态;
将所述视角偏差划分为多个调节量;以及
根据所述多个调节量的次序,每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角,直到所述第一视角与当前的第二视角的偏差小于阈值。
2.如权利要求1所述的方法,其中,所述获取第一视角和第二视角的视角偏差,包括:
获取所述播放器开始播放所述媒体数据时的视角,并将其作为所述第一视角;
在所述播放器开始播放所述媒体数据时,从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角;
计算所获取的第一视角和所确定的第二视角的偏差值,并将该偏差值作为所述视角偏差。
3.如权利要求2所述的方法,其中,所述从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角,包括:
获取与开始播放所述媒体数据的时间点对应的一个或多个采样窗口的设备姿态信息;
根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值;
根据各采样窗口对应的视角值,确定所述第二视角。
4.如权利要求3所述的方法,其中,所述一个或多个采样窗口中每个采样窗口的设备姿态信息包括多个采样信息,每个采样信息用于描述所述虚拟现实设备在相应的采样时刻的设备姿态;
所述根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值,包括:对于所述一个或多个采样窗口中每个采样窗口,计算该采样窗口的采样信息的加权平均值,并将该采样窗口的加权平均值作为该采样窗口对应的视角值;
所述根据各采样窗口对应的视角值,确定所述第二视角,包括:计算所述一个或多个采样窗口所对应视角值的平均值,并将该平均值作为所述第二视角。
5.如权利要求4所述的方法,其中,所述根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值,还包括:在计算各采样窗口的采样信息的加权平均值之前,对所述一个或多个采样窗口中各采样窗口的采样信息进行滤波。
6.如权利要求1所述的方法,其中,所述将所述视角偏差划分为多个调节量,包括:
将所述视角偏差进行平均划分,以获取所述多个相同的调节量。
7.如权利要求1所述的方法,还包括:
在每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角时,获取当前虚拟现实空间内多个播放视角所对应的图像信息;
从所述多个播放视角所对应的图像信息中,确定当前第一视角对应的图像信息,并显示所确定的图像信息。
8.一种虚拟现实的视角调节装置,其特征在于,包括:
播放器,用于获取虚拟现实的媒体数据并播放所述媒体数据;
偏差计算单元,用于获取第一视角和第二视角的视角偏差,其中,所述第一视角用于描述所述播放器的播放视角,所述第二视角用于描述虚拟现实设备的设备姿态;
偏差划分单元,用于将所述视角偏差划分为多个调节量;以及
视角调节单元,用于根据所述多个调节量的次序,每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角,直到所述第一视角与当前的第二视角的偏差小于阈值。
9.如权利要求8所述的装置,其中,所述偏差计算单元根据下述方式获取第一视角和第二视角的视角偏差:
获取所述播放器开始播放所述媒体数据时的视角,并将其作为所述第一视角;
在所述播放器开始播放所述媒体数据时,从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角;
计算所获取的第一视角和所确定的第二视角的偏差值,并将该偏差值作为所述视角偏差。
10.如权利要求9所述的装置,其中,所述偏差计算单元根据下述方式从所述虚拟现实设备获取当前的设备姿态,并根据所述当前的设备姿态确定所述第二视角:
获取与开始播放所述媒体数据的时间点对应的一个或多个采样窗口的设备姿态信息;
根据所述一个或多个采样窗口的设备姿态信息,确定各采样窗口对应的视角值;
根据各采样窗口对应的视角值,确定所述第二视角。
11.如权利要求10所述的装置,其中,所述一个或多个采样窗口中每个采样窗口的设备姿态信息包括多个采样信息,每个采样信息用于描述所述虚拟现实设备在相应的采样时刻的设备姿态;
所述偏差计算单元根据下述方式确定各采样窗口对应的视角值:对于所述一个或多个采样窗口中每个采样窗口,计算该采样窗口的采样信息的加权平均值,并将该采样窗口的加权平均值作为该采样窗口对应的视角值;
所述偏差计算单元根据下述方式根据各采样窗口对应的视角值,确定所述第二视角:计算所述一个或多个采样窗口所对应视角值的平均值,并将该平均值作为所述第二视角。
12.如权利要求11所述的装置,其中,所述偏差计算单元还用于:在计算各采样窗口的采样信息的加权平均值之前,对所述一个或多个采样窗口中各采样窗口的采样信息进行滤波。
13.如权利要求8所述的装置,其中,在所述视角调节单元在每次选定所述多个调节量中一个调节量并按照该调节量调节所述第一视角时,所述播放器还用于获取当前虚拟现实空间内多个播放视角所对应的图像信息,并从所述多个播放视角所对应的图像信息中确定当前第一视角对应的图像信息,并显示所确定的图像信息。
14.一种计算设备,其特征在于包括:
一个或多个处理器;
存储器;以及
一个或多个程序,存储在该存储器中并被配置为由所述一个或多个处理器执行,所述一个或多个程序包括用于执行权利要求1-7中任一项所述方法的指令。
15.一种存储介质,存储有一个或多个程序,所述一个或多个程序包括指令,所述指令当由计算设备执行时,使得所述计算设备执行如权利要求1-7中任一项所述的方法。
CN201711341309.7A 2017-12-14 2017-12-14 虚拟现实的视角调节方法、装置、计算设备及存储介质 Active CN108107578B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711341309.7A CN108107578B (zh) 2017-12-14 2017-12-14 虚拟现实的视角调节方法、装置、计算设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711341309.7A CN108107578B (zh) 2017-12-14 2017-12-14 虚拟现实的视角调节方法、装置、计算设备及存储介质

Publications (2)

Publication Number Publication Date
CN108107578A CN108107578A (zh) 2018-06-01
CN108107578B true CN108107578B (zh) 2019-07-26

Family

ID=62216967

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711341309.7A Active CN108107578B (zh) 2017-12-14 2017-12-14 虚拟现实的视角调节方法、装置、计算设备及存储介质

Country Status (1)

Country Link
CN (1) CN108107578B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110166764B (zh) 2018-02-14 2022-03-01 阿里巴巴集团控股有限公司 虚拟现实vr直播中的视角同步方法及装置
CN109272008A (zh) * 2018-07-13 2019-01-25 深圳众赢时代科技有限公司 一种基于深度学习自适应进行手机投影亮度调节的方法
CN109032361A (zh) * 2018-08-29 2018-12-18 深圳众赢时代科技有限公司 智能3d投影技术
CN112308906B (zh) * 2019-07-31 2024-03-22 宏碁股份有限公司 视角校正方法、虚拟实境显示系统与运算装置
CN110519247B (zh) * 2019-08-16 2022-01-21 上海乐相科技有限公司 一种一对多虚拟现实展示方法及装置
CN112073632A (zh) * 2020-08-11 2020-12-11 联想(北京)有限公司 图像处理方法、设备及存储介质
CN114449154B (zh) * 2020-10-30 2024-04-05 北京小米移动软件有限公司 图像显示方法、装置、电子设备及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106125930A (zh) * 2016-06-27 2016-11-16 上海乐相科技有限公司 一种虚拟现实设备及主视角画面校准的方法
CN107270935A (zh) * 2017-04-20 2017-10-20 世纪天丰有限公司 虚拟现实设备自动校准姿态的系统及方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6333007B2 (ja) * 2014-03-18 2018-05-30 パイオニア株式会社 虚像表示装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106125930A (zh) * 2016-06-27 2016-11-16 上海乐相科技有限公司 一种虚拟现实设备及主视角画面校准的方法
CN107270935A (zh) * 2017-04-20 2017-10-20 世纪天丰有限公司 虚拟现实设备自动校准姿态的系统及方法

Also Published As

Publication number Publication date
CN108107578A (zh) 2018-06-01

Similar Documents

Publication Publication Date Title
CN108107578B (zh) 虚拟现实的视角调节方法、装置、计算设备及存储介质
EP3491489B1 (en) Systems and methods for reducing motion-to-photon latency and memory bandwidth in a virtual reality system
US20180192022A1 (en) Method and System for Real-time Rendering Displaying Virtual Reality (VR) On Mobile Using Head-Up Display Devices
US6747610B1 (en) Stereoscopic image display apparatus capable of selectively displaying desired stereoscopic image
US9460351B2 (en) Image processing apparatus and method using smart glass
CN106919248A (zh) 应用于虚拟现实的内容传输方法以及设备
EP4184927A1 (en) Sound effect adjusting method and apparatus, device, storage medium, and computer program product
US20210165481A1 (en) Method and system of interactive storytelling with probability-based personalized views
CN114401414B (zh) 沉浸式直播的信息显示方法及系统、信息推送方法
CN111866483B (zh) 颜色还原方法及装置、计算机可读介质和电子设备
KR102462067B1 (ko) Vr 오디오 처리 방법 및 대응하는 장치
WO2022099787A1 (zh) 一种头戴显示设备及其数据获取方法、装置和主机
JP2005295004A (ja) 立体画像処理方法および立体画像処理装置
WO2017218834A1 (en) System and method for capturing and viewing panoramic images having motion parralax depth perception without images stitching
CN108833877B (zh) 图像处理方法及装置、计算机装置及可读存储介质
CN107087208B (zh) 一种全景视频播放方法、系统及存储装置
CN106383577B (zh) 一种vr视频播放装置的场景控制实现方法及系统
CN113906736A (zh) 视频分发系统、视频分发方法和显示终端
CN106534968A (zh) 一种3d视频在vr设备中的播放方法及系统
CN109872400A (zh) 一种全景虚拟现实场景的生成方法
WO2023001113A1 (zh) 一种显示方法与电子设备
KR20210056414A (ko) 혼합 현실 환경들에서 오디오-가능 접속된 디바이스들을 제어하기 위한 시스템
CN113706673B (zh) 一种应用于虚拟增强现实技术的云渲染框架平台
Wei et al. Color anaglyphs for panorama visualizations
KR101893038B1 (ko) 개별 영상신호 출력을 이용한 매핑 유사홀로그램 제공 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant