CN109561297A - 基于虚拟现实环境的视角处理方法和装置 - Google Patents
基于虚拟现实环境的视角处理方法和装置 Download PDFInfo
- Publication number
- CN109561297A CN109561297A CN201710882649.4A CN201710882649A CN109561297A CN 109561297 A CN109561297 A CN 109561297A CN 201710882649 A CN201710882649 A CN 201710882649A CN 109561297 A CN109561297 A CN 109561297A
- Authority
- CN
- China
- Prior art keywords
- visual angle
- key picture
- angle
- viewing
- viewing visual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/012—Head tracking input arrangements
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及一种基于虚拟现实环境的视角处理方法、装置、计算机设备和存储介质，该方法包括：当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；保持所述关键画面视角与所述观看视角相匹配；当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；根据所述观看视角自由调整事件解除所述匹配。这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率，还可以保证虚拟现实环境中交互的自由度。
Description
技术领域
本发明涉及虚拟现实领域，特别是涉及一种基于虚拟现实环境的视角处理方法和装置。
背景技术
随着虚拟现实(Virtual Reality简称VR)技术的发展，多媒体的呈现和交互方式相比传统方法会有很大的不同。在虚拟现实领域，用户视角最低限度保留3个自由度(Degrees of Freedom，通常缩写为DOF)，用户在虚拟现实空间中可以自由地转换视角。
由于用户在虚拟现实空间中可以自由地转换视角，用户会常常不按线索指引看望关键画面，这样用户会错过关键画面，画面也无法继续进行播放，导致虚拟现实环境中交互效率低。
发明内容
基于此，有必要针对虚拟现实环境中交互效率低的技术问题，提供一种基于虚拟现实环境的视角处理方法、装置、计算机设备和存储介质。
一种基于虚拟现实环境的视角处理方法，所述方法包括：
当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
保持所述关键画面视角与所述观看视角相匹配；
当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；
根据所述观看视角自由调整事件解除所述匹配。
在其中一个实施例中，所述当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配，包括：
当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级；
当所述显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
所述方法还包括：
当所述显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导。
在其中一个实施例中，所述当所述显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导，包括：
当所述显示需求等级为第二等级、且所述观看视角与所述关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；
当接收到变化观看视角的指令、且所述观看视角与所述关键画面视角不匹配时，则重复触发所述线索引导。
在其中一个实施例中，所述当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配，包括：
当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；
当触发所述线索引导起达到第二时长阈值，且所述观看视角一直未与所述关键画面视角相匹配时，则将所述关键画面视角变化到与观看视角相匹配。
在其中一个实施例中，所述方法还包括：
当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置；
将所述感知声源位置跟随所述关键画面视角的变化而同步变化。
在其中一个实施例中，所述关键画面视角变化到与观看视角相匹配的视角转动方向，与所述观看视角变化到关键画面视角的视角转动方向相反。
在其中一个实施例中，所述将对应关键画面的关键画面视角变化到与观看视角相匹配，包括：
获取所述关键画面视角与所述观看视角的水平夹角和俯仰夹角；
获取所述观看视角的水平转动角度和俯仰转动角度；
根据所述水平夹角和所述水平转动角度计算所述关键画面视角的水平转动角度；
根据所述俯仰夹角和所述俯仰转动角度计算所述关键画面视角的俯仰转动角度；
根据所述关键画面视角的水平转动角度和俯仰转动角度转动所述关键画面视角，使所述关键画面视角与所述观看视角相匹配。
一种基于虚拟现实环境的视角处理装置，所述装置包括：
视角变化模块，用于当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
视角匹配模块，用于保持所述关键画面视角与所述观看视角相匹配；
检测模块，用于当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；
匹配解除模块，用于根据所述观看视角自由调整事件解除所述匹配。
在其中一个实施例中，所述装置包括：
需求等级判断模块，用于当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级；
视角变化模块，还用于当所述显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
所述装置还包括：
线索引导触发模块，用于当所述显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导。
在其中一个实施例中，所述线索引导触发模块，还用于当所述显示需求等级为第二等级、且所述观看视角与所述关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当接收到变化观看视角的指令、且所述观看视角与所述关键画面视角不匹配时，则重复触发所述线索引导。
在其中一个实施例中，所述视角变化模块，还用于当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当触发所述线索引导起达到第二时长阈值，且所述观看视角一直未与所述关键画面视角相匹配时，则将所述关键画面视角变化到与观看视角相匹配。
在其中一个实施例中，所述装置还包括：
感知声源位置确定模块，用于当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置；
感知声源位置变化模块，用于将所述感知声源位置跟随所述关键画面视角的变化而同步变化。
在其中一个实施例中，所述关键画面视角变化到与观看视角相匹配的视角转动方向，与所述观看视角变化到关键画面视角的视角转动方向相反。
在其中一个实施例中，所述视角变化模块，还用于获取所述关键画面视角与所述观看视角的水平夹角和俯仰夹角；获取所述观看视角的水平转动角度和俯仰转动角度；根据所述水平夹角和所述水平转动角度计算所述关键画面视角的水平转动角度；根据所述俯仰夹角和所述俯仰转动角度计算所述关键画面视角的俯仰转动角度；根据所述关键画面视角的水平转动角度和俯仰转动角度转动所述关键画面视角，使所述关键画面视角与所述观看视角相匹配。
一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行以下步骤：
当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
保持所述关键画面视角与所述观看视角相匹配；
当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；
根据所述观看视角自由调整事件解除所述匹配。
一种存储有计算机程序的存储介质，所述计算机程序被一个或多个处理器执行时，使得所述一个或多个处理器执行以下步骤：
当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
保持所述关键画面视角与所述观看视角相匹配；
当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；
根据所述观看视角自由调整事件解除所述匹配。
上述基于虚拟现实环境的视角处理方法、装置、计算机设备和存储介质，把关键画面视角变化到与观看视角相匹配，且保持关键画面视角与观看视角相匹配，这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率。当匹配保持时长大于或等于第一时长阈值时，可以解除关键画面视角与观看视角的匹配。这样用户又可以转动视角，选择继续自由探索虚拟现实世界。如此既可以保证虚拟现实环境中交互效率，又可以保证虚拟现实环境中交互的自由度。
附图说明
图1为一个实施例中基于虚拟现实环境的视角处理方法的应用环境图；
图2为一个实施例中计算机设备的内部结构示意图；
图3为一个实施例中基于虚拟现实环境的视角处理方法的流程示意图；
图4为一个实施例中关键画面显示需求等级判断的步骤的流程示意图；
图5为一个实施例中关键画面视角变化到与观看视角相匹配的水平角变化示意图；
图6为一个实施例中关键画面视角变化到与观看视角相匹配的俯仰角变化示意图；
图7为另一个实施例中基于虚拟现实环境的视角处理方法的流程示意图；
图8为一个实施例中基于虚拟现实环境的视角处理装置的结构框图；
图9为另一个实施例中基于虚拟现实环境的视角处理装置的结构框图；
图10为再一个实施例中基于虚拟现实环境的视角处理装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
图1为一个实施例中基于虚拟现实环境的视角处理方法的应用环境图。参照图1，该应用环境包括虚拟现实成像设备110。虚拟现实成像设备110包括图像成像部件和立体成像部件。图像成像部件具有显示屏，用于显示图像。立体成像部件具有按双眼位置排布的透镜，用于将图像立体投影到眼睛的视网膜，进而通过双眼可以看到虚拟现实场景。图像成像部件可以与立体成像部件以可拆卸配合方式组合而构成虚拟现实成像设备110。图像成像部件可以与立体成像部件分别独立设计、生产以及销售。图像成像部件可以是移动终端，比如手机、个人数字助理(PDA)或者平板电脑等。虚拟现实成像设备110可通过图像成像部件执行一种基于虚拟现实环境的视角处理方法。虚拟现实成像设备110还可以连接主机120，通过主机120执行该基于虚拟现实环境的视角处理方法。虚拟现实成像设备110可以通过有线连接方式或者无线连接方式与主机120连接。有线连接方式比如通过通用串行总线(Universal Serial Bus，简称：USB)连接的方式，无线连接方式比如通过WiFi(一种将电子设备接入无线局域网的通信技术)连接的方式。
图2为一个实施例中计算机设备的内部结构示意图。该计算机设备可以是图1中的虚拟现实成像设备110，或者可以是虚拟现实成像设备110中的图像成像部件，或者可以是主机120。该计算机设备包括通过系统总线连接的处理器和存储器。其中，存储器可以包括非易失性存储介质和内存储器。该处理器用于提供计算和控制能力，支撑整个计算机设备的运行。计算机设备的存储器中存储有计算机程序，该计算机程序被处理器执行时，可使得处理器执行一种基于虚拟现实环境的视角处理方法。
本领域技术人员可以理解，图2中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
如图3所示，在一个实施例中，提供了一种基于虚拟现实环境的视角处理方法。本实施例主要以该方法应用于上述图2中的计算机设备来举例说明。参照图3，该基于虚拟现实环境的视角处理方法具体包括如下步骤：
S302，当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配。
其中，关键画面是虚拟现实环境中需要展示以提供特定信息的画面。关键画面可以是对应关键情节的画面，可以是视频或游戏中的画面，视频可以是电影或者是直播视频。如果用户没有进行观看就会影响情节的进程，或者遗漏这些关键画面的话就会影响对整个虚拟现实环境的体验。
观看视角是虚拟现实成像设备提供的供用户观看的视角。当用户在头部佩戴虚拟现实成像设备后，观看视角与用户视角相匹配，可代表用户视角。虚拟现实成像设备设有运动传感器，通过运动传感器可以感测到用户头部运动的参数，从而根据该参数调整观看视角，使用户可以观看到虚拟现实环境中的画面。关键画面对应的关键画面视角，是关键画面被观看到的视角。当观看视角与关键画面视角相匹配时，相应的关键画面能够被观看到。
在一个实施例中，关键画面视角切换条件可以是当前时间达到预设时间点，可以是当前在虚拟现实环境中所处的位置处于预设位置范围内，还可以是当前的情节进度达到预设进度。
在一个实施例中，将对应关键画面的关键画面视角变化到与观看视角相匹配，具体可以当前在虚拟现实环境中所处的位置为中心整体转动虚拟现实环境的坐标系，也可以当前在虚拟现实环境中所处的位置为中心仅转动关键画面。
在一个实施例中，关键画面视角与观看视角相匹配，表示关键画面视角与观看视角存在交集。在一个实施例中，关键画面视角与观看视角相匹配，可以是关键画面视角与观看视角完全一致。
S304，保持关键画面视角与观看视角相匹配。
具体地，在关键画面视角变化至与观看视角相匹配后，虚拟现实成像设备可继续检测观看视角是否发生变化。当观看视角未变化时，虚拟现实成像设备保持关键画面视角不变化。当观看视角发生变化时，虚拟现实成像设备将关键画面视角跟随观看视角的变化而同步变化，从而保持关键画面视角与观看视角相匹配。
S306，当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件。
其中，第一时长阈值可以是预设的时间长度，也可以是实时确定的时间长度。实时确定的时间长度具体可以根据情节进度、用户属性和当前时间中的至少一种确定。第一时长阈值可以限定在预设范围内，该预设范围的最小值大于0且具有最大值。第一时长阈值具体可以是5秒至20分钟中的任意值。
观看视角自由调整事件，是根据感测到的用户参数来对观看视角进行调整的事件。观看视角自由调整事件具体可以是头部转动事件、遥控器遥控事件或者检测到人体电流变化等。观看视角自由调整事件可以反映用户自由调整观看视角的需求。
在一个实施例中，在将关键画面视角变化到与观看视角相匹配时，虚拟现实成像设备开始计时，计时的时长表示匹配保持时长。当计时的时长达到第一时长阈值时，开始检测观看视角自由调整事件或者开始响应观看视角自由调整事件。
S308，根据观看视角自由调整事件解除匹配。
具体地，当匹配保持时长大于或等于第一时长阈值时，若检测到观看视角自由调整事件，则虚拟现实成像设备解除关键画面视角与观看视角的匹配，此时用户可继续在虚拟现实环境中继续自由探索。当匹配保持时长大于或等于第一时长阈值时，若未检测到观看视角自由调整事件，则虚拟现实成像设备继续检测观看视角自由调整事件，直到检测到观看视角自由调整事件。
上述基于虚拟现实环境的视角处理方法，把关键画面视角变化到与观看视角相匹配，且保持关键画面视角与观看视角相匹配，这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率。当匹配保持时长大于或等于第一时长阈值时，可以解除关键画面视角与观看视角的匹配。这样用户又可以转动视角，选择继续自由探索虚拟现实世界。如此既可以保证虚拟现实环境中交互效率，又可以保证虚拟现实环境中交互的自由度。
如图4所示，在一个实施例中，上述步骤S302具体包括如下步骤：
S402，当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级。
其中，显示需求等级，反映的是关键画面被呈现的需求的强弱。关键画面的显示需求等级具体可以包括第一等级和第二等级，其中第一等级是强需求等级，第二等级是弱需求等级。关键画面对应的显示需求等级可预先设定。
S404，当显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配。
具体地，虚拟现实成像设备判断显示需求等级为第一等级还是第二等级。其中显示需求等级可以用汉字、字母、标点符号和数字中的一种或几种来表示。虚拟现实成像设备在判断到显示需求等级为第一等级，可控制关键画面视角进行转动，以将关键画面视角转动到与观看视角相匹配。
S406，当显示需求等级为第二等级时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导。
其中，线索引导是指提供线索，以引导用户调整观看视角到关键画面视角的处理。线索引导具体可以指向性声音、指向性图像和指向性震动中的至少一种方式进行引导。线索引导可以是POI(Point of Interest，兴趣点)引导。
在一个实施例中，当触发线索引导起达到第二时长阈值，且观看视角一直未与关键画面视角相匹配时，则将关键画面视角变化到与观看视角相匹配。本实施例中，在触发线索引导起，到触发线索引导达到第二时长阈值的整个过程中，观看视角一直未与关键画面视角相匹配，则虚拟现实成像设备可直接将关键画面视角变化到与观看视角相匹配。本实施例可以保证关键画面被呈现，且能够保证一定程度的自由度。
上述实施例中，将关键画面的显示需求等级划分为第一等级和第二等级。对于第一等级的关键画面，在满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配，保证用户一定可以看到相应的关键画面。对于第二等级的关键画面，在满足关键画面视角切换条件时，则触发线索引导，引导用户去调整观看视角，保证一定的自由度。可以应对对于不同显示需求等级的关键画面进行区别处理的需求。
在一个实施例中，步骤S406具体包括：当显示需求等级为第二等级、且观看视角与关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当接收到变化观看视角的指令、且观看视角与关键画面视角不匹配时，则重复触发线索引导。
其中，第二显示需求等级的关键画面是推荐用户观看却无需强制用户观看的画面。变化观看视角的指令是用于改变观看视角的指令，该指令可在检测到观看视角自由调整事件时触发。重复触发线索引导，是在线索引导结束后重复性地再次触发线索引导。重复的次数可以是预设次数。
上述实施例中，当显示需求等级为第二等级、且观看视角与关键画面视角不匹配时，此时触发线索引导，以提示用户调整观看视角，引导用户观看关键画面。若接收到变化观看视角的指令、且观看视角与关键画面视角不匹配时，可预测用户有调整观看视角到关键画面的企图，此时重复触发线索引导，以不断引导用户观看关键画面，避免用户在企图观看关键画面时无法确定关键画面的视角位置。
在一个实施例中，当重复触发的线索引导所占用的总时长大于或等于第三时长阈值，且观看视角仍未变化至与关键画面视角相匹配，则结束线索引导。本实施例中，设置第三时长阈值来限制重复触发线索引导的次数，可避免不断地重复触发线索引导对用户正常交互造成干扰。
在一个实施例中，上述步骤S302具体包括如下步骤：当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当触发线索引导起达到第二时长阈值，且观看视角一直未与关键画面视角相匹配时，则将关键画面视角变化到与观看视角相匹配。
其中，第二时长阈值可以是预设的时间长度。第二时长阈值可以限定在预设范围内，该预设范围的最小值大于0且具有最大值。第二时长阈值具体可以是5秒至1分钟中的任意值。
在一个实施例中，当满足关键画面视角切换条件、显示需求等级为第一等级且观看视角与关键画面视角匹配时，虚拟现实成像设备可保持观看视角与关键画面视角相匹配。在一个实施例中，当匹配保持时长大于或等于第一时长阈值时，虚拟现实成像设备可检测观看视角自由调整事件，根据该观看视角自由调整事件解除匹配。
在一个实施例中，当满足关键画面视角切换条件、显示需求等级为第一等级且观看视角与关键画面视角不匹配时，虚拟现实成像设备触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导。当触发线索引导起达到第二时长阈值，且观看视角一直未与关键画面视角相匹配时，则虚拟现实成像设备将关键画面视角变化到与观看视角相匹配。
上述实施例中，当满足关键画面视角切换条件时，先触发线索引导，通过该线索引导以引导用户调整观看视角至与关键画面视角相匹配。若用户长时间未调整观看视角至与关键画面视角相匹配，就主动将关键画面视角变化至与观看视角相匹配。这样既可以为用户提供足够的自由度，又能够保证用户能够看到关键画面。
在一个实施例中，基于虚拟现实环境的视角处理方法还包括：当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置；将感知声源位置跟随关键画面视角的变化而同步变化。
其中，感知声源位置是人听到声音时所感知的声源所在的位置。具体地，虚拟现实成像设备可通过调整置于双耳位置处的不同发声单元所输出声音的差异，以调整感知声源位置。其中，该差异可以是相同声音到达双耳的时间差、声级差、相位差和音色差中的至少一种。虚拟现实成像设备具体可将关键画面视角的角平分线上的某一点作为感知声源位置，并将感知声源位置跟随关键画面视角的角平分线的转动而同步转动。
在一个实施例中，当满足关键画面视角切换条件、显示需求等级为第一等级且观看视角与关键画面视角不匹配时，虚拟现实成像设备确定相应关键画面所对应的感知声源位置，将感知声源位置跟随关键画面视角的变化而同步变化。
上述实施例中，虚拟现实成像设备将感知声源位置跟随关键画面视角的变化而同步变化，让用户在观看关键画面时，能够同时体验到对应于该关键画面所应有的音效，保证了关键画面和音效的统一。
在一个实施例中，关键画面视角变化到与观看视角相匹配的视角转动方向，与观看视角变化到关键画面视角的视角转动方向相反。
具体地，如果观看视角变化到关键画面视角的视角转动方向是顺时针，那么虚拟现实成像设备将关键画面视角变化到与观看视角相匹配的视角转动方向为逆时针。在另一个实施例中，如果观看视角变化到关键画面视角的视角转动方向是逆时针，那么虚拟现实成像设备将关键画面视角变化到与观看视角相匹配的视角转动方向为顺时针。
上述实施例中，关键画面视角变化的方向与观看视角变化的方向相反，可以保证无论变化关键画面视角还是调整观看视角，观看视角相对于关键画面视角的变化方向始终是一致的，可减少关键画面视角的变化对用户造成的干扰。
在一个实施例中，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：获取关键画面视角与观看视角的水平夹角和俯仰夹角；获取观看视角的水平转动角度和俯仰转动角度；根据水平夹角和水平转动角度计算关键画面视角的水平转动角度；根据俯仰夹角和俯仰转动角度计算关键画面视角的俯仰转动角度；根据关键画面视角的水平转动角度和俯仰转动角度转动关键画面视角，使关键画面视角与观看视角相匹配。
如图5和6所示，在一个实施例中，虚拟现实成像设备将获取关键画面视角与观看视角的水平夹角为θall，获取观看视角的水平转动角度为θ1，计算关键画面视角变化为观看视角的水平转动角度为θ2＝θall-θ1。虚拟现实成像设备将获取关键画面视角与观看视角的俯仰夹角获取观看视角的俯仰转动角度计算关键画面视角变化为观看视角的俯仰转动角度为根据关键画面视角的水平转动角度θ2＝θall-θ1和俯仰转动角度使关键画面视角变化为与观看视角相匹配。
上述实施例中，虚拟现实成像设备将关键画面视角变化到与观看视角相匹配，使用户不论如何转动头部或者转动身体，都可以观看到关键画面，保证用户不会错过关键画面。
如图7所示，在一个具体的实施例中，基于虚拟现实环境的视角处理方法具体包括以下步骤：
S702，配置为自由观看视角。
S704，判断是否满足关键画面视角切换条件，若否执行步骤S702，若是则执行步骤S706
S706，判断显示需求等级是否为强需求等级，若是则执行步骤S708，若否则执行步骤S718。
S708，将对应关键画面的关键画面视角变化到与观看视角相匹配。
S710，保持关键画面视角与观看视角相匹配，并计算关键画面视角保持呈现在与观看视角匹配上的时长T。
S712，判断保持关键画面视角变化到与观看视角相匹配的时长T是否大于或等于第一时长阈值Tn时，若是则执行步骤S714，若否则执行步骤S710。
S714，检测是否有观看视角自由调整事件，若是则执行步骤S716，若否则执行步骤S710。
S716，解除关键画面视角与观看视角的匹配。
S718，触发用于引导观看视角变化到关键画面视角的POI引导。
S720，接收头部转动的指令。
S722，判断观看视角与关键画面视角是否匹配，若是则执行步骤S724，若否则执行步骤S718。
S724，将观看视角变化到关键画面视角。
在具体的应用场景中，在虚拟现实环境中展示火箭升空的场景，在准备发射之前保持自由的观看视角，用户可以四处观看场景中的风貌。但是等到火箭点火发射的时候，判定满足关键画面视角切换条件，且相应的显示需求等级为强需求，则虚拟现实成像设备将火箭升空的关键画面所对应的关键画面视角变化为与观看视角相匹配，并把产生火箭点火声的感知声源位置也转动到观看视角处，使得火箭升空的关键画面转动并呈现在用户视角内。因为关键画面视角变化到与观看视角相匹配的视角转动方向，与观看视角变化到关键画面视角的视角转动方向相反，这样给用户的感觉是用户自己根据火箭升空的声音转向了火箭升空画面。当观看视角保持时间超过第一时长阈值后，若检测到观看视角自由调整事件，则虚拟现实成像设备解除关键画面视角与观看视角的匹配，此时用户可以继续探寻发射场的其他感兴趣的地方。当匹配保持时长大于或等于第一时长阈值时，若未检测到观看视角自由调整事件，则用户继续观看火箭爬升，虚拟现实成像设备继续检测观看视角自由调整事件，直到检测到观看视角自由调整事件。
上述基于虚拟现实环境的视角处理方法，把关键画面视角变化到与观看视角相匹配，且保持关键画面视角与观看视角相匹配，这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率。当匹配保持时长大于或等于第一时长阈值时，可以解除关键画面视角与观看视角的匹配。这样用户又可以转动视角，选择继续自由探索虚拟现实世界。如此既可以保证虚拟现实环境中交互效率，又可以保证虚拟现实环境中交互的自由度。
如图8所示，在一个实施例中，提供了一种基于虚拟现实环境的视角处理装置800。参照8，该基于虚拟现实环境的视角处理装置800包括：视角变化模块802、视角匹配保持模块806、检测模块808和视角匹配解除模块810。
视角变化模块802，用于当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配。
视角匹配保持模块806，用于保持关键画面视角与观看视角相匹配。
检测模块808，用于当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件。
视角匹配解除模块810，用于根据观看视角自由调整事件解除匹配。
上述基于虚拟现实环境的视角处理装置，把关键画面视角变化到与观看视角相匹配，且保持关键画面视角与观看视角相匹配，这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率。当匹配保持时长大于或等于第一时长阈值时，可以解除关键画面视角与观看视角的匹配。这样用户又可以转动视角，选择继续自由探索虚拟现实世界。如此既可以保证虚拟现实环境中交互效率，又可以保证虚拟现实环境中交互的自由度。
如图9所示，在一个实施例中，基于虚拟现实环境的视角处理装置还包括：需求等级判断模块805和线索引导触发模块807。
需求等级判断模块805，用于当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级。
视角变化模块802，还用于当显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配。
在一个实施例中，基于虚拟现实环境的视角处理装置还包括：线索引导触发模块807，用于当显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导。
在一个实施例中，线索引导触发模块807，还用于当显示需求等级为第二等级、且观看视角与关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当接收到变化观看视角的指令、且观看视角与关键画面视角不匹配时，则重复触发线索引导。
在一个实施例中，视角变化模块802，用于当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当触发线索引导起达到第二时长阈值，且观看视角一直未与关键画面视角相匹配时，则将关键画面视角变化到与观看视角相匹配。
如图10所示，在一个实施例中，基于虚拟现实环境的视角处理装置还包括：感知声源位置确定模块803和感知声源位置变化模块804。
感知声源位置确定模块803，用于当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置。
感知声源位置变化模块804，用于将感知声源位置跟随关键画面视角的变化而同步变化。
在一个实施例中，关键画面视角变化到与观看视角相匹配的视角转动方向，与观看视角变化到关键画面视角的视角转动方向相反。
在一个实施例中，视角变化模块802，还用于获取关键画面视角与观看视角的水平夹角和俯仰夹角；获取观看视角的水平转动角度和俯仰转动角度；根据水平夹角和水平转动角度计算关键画面视角的水平转动角度；根据俯仰夹角和俯仰转动角度计算关键画面视角的俯仰转动角度；根据关键画面视角的水平转动角度和俯仰转动角度转动关键画面视角，使关键画面视角与观看视角相匹配。
一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，计算机程序被处理器执行时，使得处理器执行以下步骤：当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；保持关键画面视角与观看视角相匹配；当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；根据观看视角自由调整事件解除匹配。
在一个实施例中，当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级；当显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配。
在一个实施例中，该计算机程序被处理器执行时，还使得处理器执行以下步骤：当显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导。
在一个实施例中，当显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导的步骤包括：当显示需求等级为第二等级、且观看视角与关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当接收到变化观看视角的指令、且观看视角与关键画面视角不匹配时，则重复触发线索引导。
在一个实施例中，当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当触发线索引导起达到第二时长阈值，且观看视角一直未与关键画面视角相匹配时，则将关键画面视角变化到与观看视角相匹配。
在一个实施例中，该计算机程序被处理器执行时，还使得处理器执行以下步骤：当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置；将感知声源位置跟随关键画面视角的变化而同步变化。
在一个实施例中，该计算机程序被处理器执行时，还使得处理器执行以下步骤：关键画面视角变化到与观看视角相匹配的视角转动方向，与观看视角变化到关键画面视角的视角转动方向相反。
在一个实施例中，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：获取关键画面视角与观看视角的水平夹角和俯仰夹角；获取观看视角的水平转动角度和俯仰转动角度；根据水平夹角和水平转动角度计算关键画面视角的水平转动角度；根据俯仰夹角和俯仰转动角度计算关键画面视角的俯仰转动角度；根据关键画面视角的水平转动角度和俯仰转动角度转动关键画面视角，使关键画面视角与观看视角相匹配。
上述计算机设备，把关键画面视角变化到与观看视角相匹配，且保持关键画面视角与观看视角相匹配，这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率。当匹配保持时长大于或等于第一时长阈值时，可以解除关键画面视角与观看视角的匹配。这样用户又可以转动视角，选择继续自由探索虚拟现实世界。如此既可以保证虚拟现实环境中交互效率，又可以保证虚拟现实环境中交互的自由度。
一种存储有计算机程序的存储介质，计算机程序被一个或多个处理器执行时，使得一个或多个处理器执行以下步骤：当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；保持关键画面视角与观看视角相匹配；当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；根据观看视角自由调整事件解除匹配。
在一个实施例中，当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级；当显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配。
在一个实施例中，该计算机程序被处理器执行时，还使得处理器执行以下步骤：当显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导。
在一个实施例中，当显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导的步骤包括：当显示需求等级为第二等级、且观看视角与关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当接收到变化观看视角的指令、且观看视角与关键画面视角不匹配时，则重复触发线索引导。
在一个实施例中，当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；当触发线索引导起达到第二时长阈值，且观看视角一直未与关键画面视角相匹配时，则将关键画面视角变化到与观看视角相匹配。
在一个实施例中，该计算机程序被处理器执行时，还使得处理器执行以下步骤：当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置；将感知声源位置跟随关键画面视角的变化而同步变化。
在一个实施例中，该计算机程序被处理器执行时，还使得处理器执行以下步骤：关键画面视角变化到与观看视角相匹配的视角转动方向，与观看视角变化到关键画面视角的视角转动方向相反。
在一个实施例中，将对应关键画面的关键画面视角变化到与观看视角相匹配的步骤包括：获取关键画面视角与观看视角的水平夹角和俯仰夹角；获取观看视角的水平转动角度和俯仰转动角度；根据水平夹角和水平转动角度计算关键画面视角的水平转动角度；根据俯仰夹角和俯仰转动角度计算关键画面视角的俯仰转动角度；根据关键画面视角的水平转动角度和俯仰转动角度转动关键画面视角，使关键画面视角与观看视角相匹配。
上述存储介质，把关键画面视角变化到与观看视角相匹配，且保持关键画面视角与观看视角相匹配，这样主动让用户观看关键画面的方式，可以避免虚拟现实环境中无效的交互使得关键画面难以及时地呈现，从而可提高虚拟现实环境中交互效率。当匹配保持时长大于或等于第一时长阈值时，可以解除关键画面视角与观看视角的匹配。这样用户又可以转动视角，选择继续自由探索虚拟现实世界。如此既可以保证虚拟现实环境中交互效率，又可以保证虚拟现实环境中交互的自由度。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，该计算机程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，前述的存储介质可为磁碟、光盘、只读存储器记忆体(Read-Only Memory)等非易失性存储介质，或随机存储记忆体(Random Access Memory，RAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种基于虚拟现实环境的视角处理方法，所述方法包括：
当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
保持所述关键画面视角与所述观看视角相匹配；
当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；
根据所述观看视角自由调整事件解除所述匹配。
2.根据权利要求1所述的方法，其特征在于，所述当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配，包括：
当满足关键画面视角切换条件时，判断相应关键画面的显示需求等级；
当所述显示需求等级为第一等级时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
所述方法还包括：
当所述显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导。
3.根据权利要求2所述的方法，其特征在于，所述当所述显示需求等级为第二等级时，触发用于引导观看视角变化到关键画面视角的线索引导，包括：
当所述显示需求等级为第二等级、且所述观看视角与所述关键画面视角不匹配时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；
当接收到变化观看视角的指令、且所述观看视角与所述关键画面视角不匹配时，则重复触发所述线索引导。
4.根据权利要求1所述的方法，其特征在于，所述当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配，包括：
当满足关键画面视角切换条件时，触发用于引导观看视角变化到对应关键画面的关键画面视角的线索引导；
当触发所述线索引导起达到第二时长阈值，且所述观看视角一直未与所述关键画面视角相匹配时，则将所述关键画面视角变化到与观看视角相匹配。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当满足关键画面视角切换条件时，确定相应关键画面所对应的感知声源位置；
将所述感知声源位置跟随所述关键画面视角的变化而同步变化。
6.根据权利要求2至4中任一项所述的方法，其特征在于，所述关键画面视角变化到与观看视角相匹配的视角转动方向，与所述观看视角变化到关键画面视角的视角转动方向相反。
7.根据权利要求1至5中任一项所述的方法，其特征在于，所述将对应关键画面的关键画面视角变化到与观看视角相匹配，包括：
获取所述关键画面视角与所述观看视角的水平夹角和俯仰夹角；
获取所述观看视角的水平转动角度和俯仰转动角度；
根据所述水平夹角和所述水平转动角度计算所述关键画面视角的水平转动角度；
根据所述俯仰夹角和所述俯仰转动角度计算所述关键画面视角的俯仰转动角度；
根据所述关键画面视角的水平转动角度和俯仰转动角度转动所述关键画面视角，使所述关键画面视角与所述观看视角相匹配。
8.一种基于虚拟现实环境的视角处理装置，其特征在于，所述装置包括：
视角变化模块，用于当满足关键画面视角切换条件时，将对应关键画面的关键画面视角变化到与观看视角相匹配；
视角匹配模块，用于保持所述关键画面视角与所述观看视角相匹配；
检测模块，用于当匹配保持时长大于或等于第一时长阈值时，检测观看视角自由调整事件；
匹配解除模块，用于根据所述观看视角自由调整事件解除所述匹配。
9.一种计算机设备，包括存储器和处理器，所述存储器中存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述方法的步骤。
10.一种存储有计算机程序的存储介质，所述计算机程序被一个或多个处理器执行时，使得所述一个或多个处理器执行如权利要求1至7中任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710882649.4A CN109561297B (zh) | 2017-09-26 | 2017-09-26 | 基于虚拟现实环境的视角处理方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710882649.4A CN109561297B (zh) | 2017-09-26 | 2017-09-26 | 基于虚拟现实环境的视角处理方法和装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109561297A true CN109561297A (zh) | 2019-04-02 |
| CN109561297B CN109561297B (zh) | 2021-05-04 |
Family
ID=65862080
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710882649.4A Active CN109561297B (zh) | 2017-09-26 | 2017-09-26 | 基于虚拟现实环境的视角处理方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109561297B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110446056A (zh) * | 2019-07-30 | 2019-11-12 | 咪咕文化科技有限公司 | 一种视频处理方法、设备、系统及计算机可读存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102804786A (zh) * | 2009-06-16 | 2012-11-28 | Lg电子株式会社 | 观看范围通知方法以及用于实现该方法的电视接收器 |
| CN103595997A (zh) * | 2012-08-13 | 2014-02-19 | 辉达公司 | 3d显示系统和3d显示方法 |
| CN106125930A (zh) * | 2016-06-27 | 2016-11-16 | 上海乐相科技有限公司 | 一种虚拟现实设备及主视角画面校准的方法 |
| CN106303706A (zh) * | 2016-08-31 | 2017-01-04 | 杭州当虹科技有限公司 | 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 |
| CN106354258A (zh) * | 2016-08-30 | 2017-01-25 | 上海乐相科技有限公司 | 一种虚拟现实设备的画面显示方法及装置 |
| CN106358036A (zh) * | 2016-08-31 | 2017-01-25 | 杭州当虹科技有限公司 | 一种以预设视角观看虚拟现实视频的方法 |
-
2017
- 2017-09-26 CN CN201710882649.4A patent/CN109561297B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102804786A (zh) * | 2009-06-16 | 2012-11-28 | Lg电子株式会社 | 观看范围通知方法以及用于实现该方法的电视接收器 |
| CN103595997A (zh) * | 2012-08-13 | 2014-02-19 | 辉达公司 | 3d显示系统和3d显示方法 |
| CN106125930A (zh) * | 2016-06-27 | 2016-11-16 | 上海乐相科技有限公司 | 一种虚拟现实设备及主视角画面校准的方法 |
| CN106354258A (zh) * | 2016-08-30 | 2017-01-25 | 上海乐相科技有限公司 | 一种虚拟现实设备的画面显示方法及装置 |
| CN106303706A (zh) * | 2016-08-31 | 2017-01-04 | 杭州当虹科技有限公司 | 基于人脸和物件跟踪实现以主角跟随视角观看虚拟现实视频的方法 |
| CN106358036A (zh) * | 2016-08-31 | 2017-01-25 | 杭州当虹科技有限公司 | 一种以预设视角观看虚拟现实视频的方法 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110446056A (zh) * | 2019-07-30 | 2019-11-12 | 咪咕文化科技有限公司 | 一种视频处理方法、设备、系统及计算机可读存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109561297B (zh) | 2021-05-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9936326B2 (en) | Function control apparatus | |
| JP6518582B2 (ja) | 情報処理装置および操作受付方法 | |
| CN106062826B (zh) | 图像生成装置以及图像生成方法 | |
| WO2019154231A1 (zh) | 图像处理方法、电子设备及存储介质 | |
| CN109643161A (zh) | 动态进入和离开由不同hmd用户浏览的虚拟现实环境 | |
| US9672791B2 (en) | Actuation of device for viewing of first content frames presented on a display between second content frames | |
| CN108762496B (zh) | 一种信息处理方法及电子设备 | |
| JP2011258191A (ja) | 画像解析を用いた携帯デバイスにおけるビューの向きの選択 | |
| CN110971925B (zh) | 直播界面的显示方法、装置及系统 | |
| US20140375531A1 (en) | Method of roviding to the user an image from the screen of the smartphome or tablet at a wide angle of view, and a method of providing to the user 3d sound in virtual reality | |
| US10564801B2 (en) | Method for communicating via virtual space and information processing apparatus for executing the method | |
| WO2017181588A1 (zh) | 一种显示页面定位的方法和电子设备 | |
| US11835737B2 (en) | Image display system, non-transitory storage medium having stored therein image display program, image display apparatus, and image display method | |
| WO2023230291A2 (en) | Devices, methods, and graphical user interfaces for user authentication and device management | |
| CN109561297A (zh) | 基于虚拟现实环境的视角处理方法和装置 | |
| WO2020204594A1 (ko) | 가상 현실 장치 및 그 제어 방법 | |
| WO2015034453A1 (en) | Providing a wide angle view image | |
| CN110494915A (zh) | 电子装置及其控制方法 | |
| TW201925986A (zh) | 虛擬實境裝置及虛擬實境裝置的操作方法 | |
| JP7210174B2 (ja) | 電子機器、電子機器の制御方法、プログラム | |
| CN110941344A (zh) | 获取注视点数据的方法及相关装置 | |
| US11159777B2 (en) | Image display system, non-transitory storage medium having stored therein image display program, image display apparatus, and image display method | |
| US20240353922A1 (en) | Devices, methods, and graphical user interfaces for user enrollment and authentication | |
| US20240041319A1 (en) | Eye tracking for accessibility and visibility of critical elements as well as performance enhancements | |
| US11972060B2 (en) | Gesture training for skill adaptation and accessibility |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |