CN114283055A - 一种虚拟现实设备及图片显示方法 - Google Patents

Abstract

本申请提供一种虚拟现实设备及图片显示方法，可以在获取用户的控制指令以后，对目标图片进行拍摄，从而根据目标图片获得固定分辨率的中间图像，并将中间图像显示在显示器中。所述方法可以在目标图像的分辨率与VR场景不匹配时，通过对目标图片进行转化，满足显示效果的同时，无需将目标图片发送至其他设备进行压缩，提高图片显示速率。

Description

一种虚拟现实设备及图片显示方法

技术领域

本申请涉及虚拟现实设备技术领域，尤其涉及一种虚拟现实设备及图片显示方法。

背景技术

虚拟现实(Virtual Reality，VR)技术是通过计算机模拟虚拟环境，从而给人以环境沉浸感的显示技术。虚拟现实设备是一种应用虚拟显示技术为用户呈现虚拟画面以实现沉浸感的设备。通常，虚拟现实设备包括两个用于呈现虚拟画面内容的显示屏幕，分别对应用户的左右眼。当两个显示屏幕所显示的内容分别来自于同一个物体不同视角的图像时，可以为用户带来立体的观影感受。

虚拟现实设备可以通过VR场景展示各种媒资内容，即通过Unity 3D引擎渲染播放界面，并在渲染的播放界面中展示图片、视频等画面内容。在VR场景下，播放的媒资会设置在一个特定的显示面板上。显示面板的形状和尺寸可以固定为一个设定值，在播放媒资内容时，将媒资画面缩放适应显示面板尺寸，从而获得VR画面。

但是，虚拟现实设备在播放图片文件时，由于无法估计待播放图片的分辨率，导致待播放的图片尺寸很难与显示面板尺寸相匹配，导致缩放后图片的显示效果不佳。例如，在图片分辨率较低时，图片经放大显示将出现锯齿现象；当图片分辨率较大时，图片会出现摩尔纹现象，使图片显示效果失真，影响用户体验。

发明内容

本申请提供了一种虚拟现实设备及图片显示方法，以解决传统虚拟现实设备显示图片效果差的问题。

一方面，本申请提供一种虚拟现实设备，包括显示器和控制器，其中，所述显示器被配置为显示用户界面，所述控制器被配置为执行以下程序步骤：

获取用户输入的用于显示目标图片的控制指令；

响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像，所述中间图像为固定分辨率的图像；

控制所述显示器显示所述中间图像。

另一方面，本申请还提供一种图片显示方法，所述方法可应用于上述虚拟现实设备，所述方法包括：

获取用户输入的用于显示目标图片的控制指令；

响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像，所述中间图像为固定分辨率的图像；

控制所述显示器显示所述中间图像。

由以上技术方案可知，本申请提供的虚拟现实设备及图片显示方法，可以在获取用户的控制指令以后，对目标图片进行拍摄，从而根据目标图片获得固定分辨率的中间图像，并将中间图像显示在显示器中。所述方法可以在目标图像的分辨率与VR场景不匹配时，通过对目标图片进行转化，满足显示效果的同时，无需将目标图片发送至其他设备进行压缩，提高图片显示速率。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例中包括虚拟现实设备的显示系统结构示意图；

图2为本申请实施例中VR场景全局界面示意图；

图3为本申请实施例中全局界面的推荐内容区域示意图；

图4为本申请实施例中全局界面的应用快捷操作入口区域示意图；

图5为本申请实施例中全局界面的悬浮物示意图；

图6为本申请实施例中VR画面示意图；

图7为本申请实施例中一种图片显示方法的流程示意图；

图8为本申请实施例中显示高分辨率图片的效果示意图；

图9为本申请实施例中通过中间相机生成中间图像的流程示意图；

图10为本申请实施例中显示中间图像的效果示意图；

图11为本申请实施例中根据图片分辨率显示目标图片的流程示意图；

图12为本申请实施例中在VR场景设置中间相机和播放相机示意图；

图13为本申请实施例中根据片源类型设置显示面板类型的流程示意图。

具体实施方式

为使本申请示例性实施例的目的、技术方案和优点更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施例中的技术方案进行清楚、完整地描述，显然，所描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

基于本申请中示出的示例性实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。此外，虽然本申请中公开内容按照示范性一个或几个实例来介绍，但应理解，可以就这些公开内容的各个方面也可以单独构成一个完整技术方案。

应当理解，本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。

此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的那些组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

本申请中使用的术语“模块”，是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

本说明书通篇提及的“多个实施例”、“一些实施例”、“一个实施例”或“实施例”等，意味着结合该实施例描述的具体特征、结构或特性包括在至少一个实施例中。因此，本说明书通篇出现的短语“在多个实施例中”、“在一些实施例中”、“在至少另一个实施例中”或“在实施例中”等并不一定都指相同的实施例。此外，在一个或多个实施例中，具体特征、结构或特性可以任何合适的方式进行组合。因此，在无限制的情形下，结合一个实施例示出或描述的具体特征、结构或特性可全部或部分地与一个或多个其他实施例的特征、结构或特性进行组合。这种修改和变型旨在包括在本申请的范围之内。

本申请实施例中，所述虚拟现实设备500泛指能够佩戴于用户面部，为用户提供沉浸感体验的显示设备，包括但不限于VR眼镜、增强现实设备(Augmented Real ity，AR)、VR游戏设备、移动计算设备以及其它可穿戴式计算机等。所述虚拟现实设备500可以独立运行，或者作为外接设备接入其他智能显示设备，其中，所述显示设备可以是智能电视、计算机、平板电脑、服务器等。

虚拟现实设备500可以在佩戴于用户面部后，显示媒资画面，为用户双眼提供近距离影像，以带来沉浸感体验。为了呈现媒资画面，虚拟现实设备500可以包括多个用于显示画面和面部佩戴的部件。以VR眼镜为例，虚拟现实设备500可以包括外壳、镜腿、光学系统、显示组件、姿态检测电路、接口电路等部件。实际应用中，光学系统、显示组件、姿态检测电路以及接口电路可以设置于外壳内，以用于呈现具体的显示画面；外壳两侧连接镜腿，以佩戴于用户面部。

在使用时，姿态检测电路中内置有重力加速度传感、陀螺仪等姿态检测元件，当用户头部移动或转动时，可以检测到用户的姿态，并将检测到的姿态数据传递给控制器等处理元件，使处理元件可以根据检测到的姿态数据调整显示组件中的具体画面内容。

需要说明的是，根据虚拟现实设备500的类型不同，其所呈现具体画面内容的方式也不同。例如，如图1所示，对于部分轻薄VR眼镜，其内置的控制器一般不直接参与显示内容的控制过程，而是将姿态数据发送给外接设备，如计算机中，由外接设备进行处理，并在外接设备中确定要显示的具体画面内容，再回传给VR眼镜中，以在VR眼镜中显示最终的画面。

在一些实施例中，所示虚拟现实设备500可以接入显示设备200，并与服务器400之间构建一个基于网络的显示系统，在虚拟现实设备500、显示设备200以及服务器400之间可以实时进行数据交互，例如显示设备200可以从服务器400获取媒资数据并进行播放，以及将具体的画面内容传输给虚拟现实设备500中进行显示。

其中，显示设备200可以是液晶显示器、OLED显示器、投影显示设备。具体显示设备类型，尺寸大小和分辨率等不作限定，本领技术人员可以理解的是，显示设备200可以根据需要做性能和配置上一些改变。显示设备200可以提供广播接收电视功能，还可以附加提供计算机支持功能的智能网络电视功能，包括但不限于，网络电视、智能电视、互联网协议电视(IPTV)等。

显示设备200以及虚拟现实设备500还与服务器400通过多种通信方式进行数据通信。可允许显示设备200和虚拟现实设备500通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。示例的，显示设备200通过发送和接收信息，以及电子节目指南(EPG)互动，接收软件程序更新，或访问远程储存的数字媒体库。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。通过服务器400提供视频点播和广告服务等其他网络服务内容。

在进行数据交互的过程中，用户可通过移动终端100A和遥控器100B操作显示设备200。移动终端100A和遥控器100B可以与显示设备200之间采用直接的无线连接方式进行通信，也可以采用非直接连接的方式进行通信。即在一些实施例中，移动终端100A和遥控器100B可以通过蓝牙、红外等直接连接方式与显示设备200进行通信。当发送控制指令时，移动终端100A和遥控器100B可以直接将控制指令数据通过蓝牙或红外发送到显示设备200。

在另一些实施例中，移动终端100A和遥控器100B还可以通过无线路由器与显示设备200接入同一个无线网络，以通过无线网络与显示设备200建立非直接连接通信。当发送控制指令时，移动终端100A和遥控器100B可以将控制指令数据先发送给无线路由器，再通过无线路由器将控制指令数据转发给显示设备200。

在一些实施例中，用户还可以使用移动终端100A和遥控器100B还可以直接与虚拟现实设备500进行交互，例如，可以将移动终端100A和遥控器100B作为虚拟现实场景中的手柄进行使用，以实现体感交互等功能。

在一些实施例中，虚拟现实设备500的显示组件包括显示屏幕以及与显示屏幕有关的驱动电路。为了呈现具体画面，以及带来立体效果，显示组件中可以包括两个显示屏幕，分别对应于用户的左眼和右眼。在呈现3D效果时，左右两个屏幕中显示的画面内容会稍有不同，可以分别显示3D片源在拍摄过程中的左相机和右相机。由于用户左右眼观察到的画面内容，因此在佩戴时，可以观察到立体感较强的显示画面。

虚拟现实设备500中的光学系统，是由多个透镜组成的光学模组。光学系统设置在用户的双眼与显示屏幕之间，可以通过透镜对光信号的折射以及透镜上偏振片的偏振效应，增加光程，使显示组件呈现的内容可以清晰的呈现在用户的视野范围内。同时，为了适应不同用户的视力情况，光学系统还支持调焦，即通过调焦组件调整多个透镜中的一个或多个的位置，改变多个透镜之间的相互距离，从而改变光程，调整画面清晰度。

虚拟现实设备500的接口电路可以用于传递交互数据，除上述传递姿态数据和显示内容数据外，在实际应用中，虚拟现实设备500还可以通过接口电路连接其他显示设备或外设，以通过和连接设备之间进行数据交互，实现更为复杂的功能。例如，虚拟现实设备500可以通过接口电路连接显示设备，从而将所显示的画面实时输出至显示设备进行显示。又例如，虚拟现实设备500还可以通过接口电路连接手柄，手柄可以由用户手持操作，从而在VR用户界面中执行相关操作。

其中，所述VR用户界面可以根据用户操作呈现为多种不同类型的UI布局。例如，用户界面可以包括全局界面，AR/VR终端启动后的全局UI如图2所示，所述全局UI可显示于AR/VR终端的显示屏幕中，也可显示于所述显示设备的显示器中。全局UI可以包括推荐内容区域1、业务分类扩展区域2、应用快捷操作入口区域3以及悬浮物区域4。

推荐内容区域1用于配置不同分类TAB栏目；在所述栏目中可以选择配置媒资、专题等；所述媒资可包括2D影视、教育课程、旅游、3D、360度全景、直播、4K影视、程序应用、游戏、旅游等具有媒资内容的业务，并且所述栏目可以选择不同的模板样式、可支持媒资和专题同时推荐编排,如图3所示。

业务分类扩展区域2支持配置不同分类的扩展分类。如果有新的业务类型时，支持配置独立TAB，展示对应的页面内容。业务分类扩展区域2中的扩展分类，也可以对其进行排序调整及下线业务操作。在一些实施例中，业务分类扩展区域2可包括的内容：影视、教育、旅游、应用、我的。在一些实施例中，业务分类扩展区域2被配置为可展示大业务类别TAB，且支持配置更多的分类，其图标支持配置，如图3所示。

应用快捷操作入口区域3可指定预装应用靠前显示以进行运营推荐，支持配置特殊图标样式替换默认图标，所述预装应用可指定为多个。在一些实施例中，应用快捷操作入口区域3还包括用于移动选项目标的左向移动控件、右向移动控件，用于选择不同的图标，如图4所示。

悬浮物区域4可以配置为在固定区域左斜侧上方、或右斜侧上方，可配置为可替换形象、或配置为跳转链接。例如，悬浮物接收到确认操作后跳转至某个应用、或显示指定的功能页，如图5所示。在一些实施例中，悬浮物也可不配置跳转链接，单纯的用于形象展示。

在一些实施例中，全局UI还包括位于顶端的状态栏，用于显示时间、网络连接状态、电量状态、及更多快捷操作入口。使用AR/VR终端的手柄，即手持控制器选中图标后，图标将显示包括左右展开的文字提示，选中的图标按照位置自身进行左右拉伸展开显示。

例如，选中搜索图标后，搜索图标将显示包含文字“搜索”及原图标，进一步点击图标或文字后，搜索图标将跳转至搜索页面；又例如，点击收藏图标跳转至收藏TAB、点击历史图标默认定位显示历史页面、点击搜索图标跳转至全局搜索页面、点击消息图标跳转至消息页面。

在一些实施例中，可以通过外设执行交互，例如AR/VR终端的手柄可对AR/VR终端的用户界面进行操作，包括返回按钮；主页键，且其长按可实现重置功能；音量加减按钮；触摸区域，所述触摸区域可实现焦点的点击、滑动、按住拖拽功能。

用户可以通过全局界面进入不同的场景界面，例如，如图6所示，用户可以在全局界面中的“浏览界面”入口进入浏览界面，或者通过在全局界面中选择任一媒资启动浏览界面。在浏览界面中，虚拟现实设备500可以通过Unity 3D引擎创建3D场景，并在3D场景中渲染具体的画面内容。

在浏览界面中，用户可以观看具体媒资内容，为了获得更好的观影体验，浏览界面中还可以设置不同的虚拟场景控件，以配合媒资内容呈现具体场景或实时交互。例如，在浏览界面中，可以在Unity 3D场景中设置面板，用来呈现图片内容，在配合其他家居虚拟控件，以实现影院银幕的效果。

虚拟现实设备500可以在浏览界面中展示操作UI内容。例如，在Unity 3D场景中的显示面板前方还可以显示有列表UI，在列表UI中可以显示当前虚拟现实设备500本地存储的媒资图标，或者显示可在虚拟现实设备500中进行播放的网络媒资图标。用户可以在列表UI中选择任一图标，则在显示面板中可以实时显示被选中的媒资。

由于被选中的媒资需要在显示面板中进行展示，因此显示面板需要与被选中的媒资画面之间具有相匹配的关系，即被选中的媒资应能够在显示面板中完全显示。例如，在显示图片时，显示面板所支持的最大分辨率应该大于选中的图片分辨率。但由于可选中的图片分辨率不是固定的，而VR场景空间有限，导致显示面板的显示面积(空间)被限定在一个固定值，因此，部分图片将超出显示面板区域，造成显示面板中无法呈现完整的图片内容。例如，如图8所示，对于8K级别的图片，其图片分辨率可达7680×4320，而一般虚拟现实设备的显示屏幕仅为2K级别，即支持分辨率为2560×1440，此时则在显示面板中显示8k级别的图片会超出显示范围，无法完全显示。

为了能够完全显示图片，在一些实施例中，虚拟现实设备可以对分辨率较高的图片进行缩放，通过调整图片尺寸，使图片显示在显示面板中。但通过缩放进行尺寸调整的显示方式，会在对高分辨率图片进行缩小时，出现摩尔纹现象，即用户观看到的图片会出现闪烁，降低用户体验。

虚拟现实设备还可以在显示高分辨率的图片时，将图片发送给Android端进行压缩，将8k级别的图片压缩为2k级别，再通过显示面板进行展示。但是这种处理方式会占用CPU资源，并且处理过程和传递过程会消耗一定的时间，导致图片显示变慢，同样降低用户体验。

为了提高用户体验，在本申请的部分实施例中还提供一种图像显示方法，所述图片显示方法可以应用于虚拟现实设备中，以使硬件配置不高的中低端VR设备能够获得较好的显示效果。如图7所示，所述图像显示方法包括以下内容：

用户向虚拟现实设备输入用于显示目标图片的控制指令；其中，用于显示目标图片的控制指令可以由用户的一系列交互操作完成。例如，用户可以通过全局界面进入文件管理应用。文件管理应用可以在应用界面中呈现当前虚拟现实设备所保存的本地图片列表。用户通过交互操作，在本地图片列表中选中任一本地图片即输入用于显示目标图片的控制指令。

所述目标图片即用户在列表中选中的图片。需要说明的是，在本申请实施例中，所述目标图片并不限于本地图片，还可以是虚拟现实设备从网络服务器中获得的图片。例如，在媒资推荐页面中，可以展示多个图片链接，用户通过交互动作选择打开任一图片链接时，虚拟现实设备可以向网络中的服务器发送下载请求，下载该图片链接对应的图片文件，并在下载完成后自动进行显示。因此，用于显示目标图片的控制指令也包括上述网络下载的操作指令。

另外，用于显示目标图片的控制指令还可以通过其他方式完成输入。例如，用户在浏览界面中点击切换控件，则需要在当前浏览界面中当前显示图片的上一个图片或下一个图片进行显示，此时，用于显示目标图片的控制指令为上述点击切换控件的指令。

在用户输入控制指令后，虚拟现实设备可以响应于该控制指令对目标图片进行显示。由于目标图片的分辨率与当前VR场景中的显示区域支持分辨率之间可能不匹配，因此可以通过对目标图片进行拍摄，以生成中间图像。

其中，对目标图片进行拍摄可以通过在VR场景中设置虚拟的中间相机来完成，所述中间相机是一种虚拟的图像生成设备，可以对VR场景中指定的画面内容进行拍摄，从而生成中间图像。显然，为了对目标图片执行拍摄，可以先在VR场景中设置一个用于显示目标图片的区域，如设置一个虚拟的面板，由于该面板仅用来展示目标图片以便中间相机执行拍摄，因此设置的虚拟面板可以称为临时面板。

生成的中间图像可以在当前VR场景或者指定的设备上进行输出。为了使目标图片能够完整显示，所述中间相机被配置为输出固定分辨率的图像，即中间相机可以通过设置拍摄参数，生成指定分辨率的图像。例如，如图8所示，目标图像的分辨率为7680×4320，中间相机输出的中间图像分辨率可以为2560×1440，则通过中间相机对目标图像进行拍摄，可以获得一个分辨率为2560×1440的中间图像，这一分辨率的中间图像可以完整显示在VR场景中。

可见，通过中间相机对目标图像进行拍摄，可以根据高分辨率图片生成一个内容相同，但分辨率较低的中间图像，等效降低了目标图像的分辨率。显然，为了在降低分辨率的同时，尽可能保留目标图像中的内容，在本申请的部分实施例中，可以设置中间相机的输出分辨率等于VR场景中显示图片区域的最大分辨率。例如，如图9所示，虚拟现实设备的显示屏幕为2K分辨率，即支持最大分辨率为2560×1440，相应的将中间相机的分辨率也设置为2560×1440。

在获得中间图像后，可以通过显示器对VR场景中的具体画面内容进行显示。为了能够通过虚拟现实设备对图片进行显示，在用户输入用于显示目标图片的控制指令同时，还可以对VR场景进行初始化渲染，即在VR场景中添加虚拟内容，并设置专门用于显示图片画面的区域，而中间图像可以在设置的显示图片区域内进行显示，如图10所示。

需要说明的是，由于虚拟现实设备在显示目标图片的同时，会结合VR场景中的虚拟画面构建出具体的观影场景。因此在一般情况下，显示器显示的内容并不仅仅为中间图像，还要包括其他虚拟画面。例如，通过虚拟现实设备模拟电影院场景时，可以在虚拟的电影院银幕区域显示中间图像，而在其他区域显示电影院相关的虚拟画面，如座椅、音响设备、氛围灯以及虚拟人物等内容。并且，随着用户佩戴虚拟现实设备的动作变化，通过显示器所呈现的画面内容也实时发生变化。

由以上技术方案可知，本实施例提供的图片显示方法可以通过中间相机对目标图片进行拍摄方式，将不确定具体分辨率的目标图片转化为固定分辨率的中间图像进行输出显示，从而克服部分目标图片分辨率与显示区域分辨率不匹配的缺陷，保证目标图片的正确显示。

由于整个显示过程并没有对图片本身进行缩放，因此可以缓解图片缩放过程中产生的锯齿及闪烁，保证图片显示质量。此外，上述图片显示方法可以由虚拟现实设备中的GPU直接独立完成，无需CPU进行分辨率转化，因此可以节约分辨率转化以及数据传输过程的时间，使目标图片能够快速进行显示，提升用户体验。

在显示图片过程中，由于目标图片的分辨率是不确定的，即部分目标图片的分辨率大于显示面板的支持分辨率，而部分目标图片的分辨率小于或等于显示面板的支持分辨率，其中，分辨率较小的目标图片可以直接在显示面板上进行显示，因此为了便于快速显示，如图11所示，在本申请的部分实施例中，响应于所述控制指令，使用中间相机拍摄目标图片的步骤还包括：

解析所述控制指令中指定的目标图片；

获取所述目标图片的图片分辨率以及当前VR场景中显示面板支持分辨率；

如果所述图片分辨率大于所述支持分辨率，对所述目标图片执行图像拍摄；

如果所述图片分辨率小于或等于所述支持分辨率，通过所述显示面板显示所述目标图片。

在获取用户输入的控制指令以后，虚拟现实设备的GPU可以根据控制指令，对要显示的目标图片进行解析，提取目标图片的存储路径，并按照存储路径在存储器中提取目标图片的原文件。再通过对目标图片的图片分辨率以及当前VR场景中显示面板所支持的最大分辨率进行提取，并进行对比，以确定目标图片与当前VR场景中显示面板支持分辨率是否匹配。

当目标图片的分辨率大于显示面板支持分辨率时，则确定在当前VR场景中不能完全显示该目标图片，因此可以按照上述实施例中提供的图片显示方式将目标图片转化为低分辨率的中间图像进行显示，即执行使用中间相机拍摄目标图片的步骤。当目标图片的分辨率小于或等于显示面板的支持分辨率时，则确定通过当前显示面板足以将目标图片显示完全，因此可以直接通过显示面板对目标图片进行显示，无需对目标图片进行转化，从而提高目标图片的显示效率。

例如，通过解析目标图片，获取当前目标图片的图片分辨率为1920×1080，而当前显示面板支持分辨率最大为2560×1440，即图片分辨率小于支持分辨率，当前目标图片可以在显示面板中完全显示，此时可以跳过使用中间相机拍摄目标图片的步骤，而直接将目标图片显示在显示面板中。

可见，在本实施例中，在使用中间相机拍摄目标图片的步骤前，可以先对目标图片的图片分辨率进行提取，并与显示面板支持的分辨率进行判断，确定当前显示面板是否支持完全显示当前目标图片。如果显示面板能够将目标图片完整显示，则可以跳过使用中间相机进行拍摄的步骤，直接进行显示，因此本实施例可以在保证目标图片能够完全显示的基础上，减少数据处理量，并提高图片的显示速度。

对于分辨率较大的目标图片，由于其需要使用中间相机对图片进行拍摄，以生成中间图像。因此，如图12所示，在一些实施例中，响应于所述控制指令，使用中间相机拍摄目标图片的步骤还包括：

在当前VR场景中设置所述中间相机和临时面板；在所述临时面板中展示所述目标图片；使用所述中间相机对所述临时面板执行拍摄，以输出中间图像。在启动VR场景后，虚拟现实设备的控制器可以对目标图片的分辨率进行判断，当目标图片的分辨率大于显示面板的支持分辨率时，可以在VR场景中设置中间相机和临时面板，并通过临时面板对目标图片进行显示。显示时，目标图片可以保持为原始图片尺寸和分辨率，不对目标图片进行缩放，因此不会产生锯齿或闪烁的显示缺陷。再使用中间相机对临时面板进行拍摄，使中间相机能够拍摄到临时面板中显示的目标图像画面内容，从而输出中间图像。

在设置的中间相机和临时面板时，可以通过设置中间相机和临时面板的参数，使中间相机能够对临时面板进行拍摄。例如，通过设置中间相机与临时面板的相互距离，可以使中间相机的拍摄视野范围能够覆盖临时面板，实现对临时面板上的显示的全部内容进行拍摄。又例如，还可以通过设置中间相机的焦距，投影比例等相机参数，调整相机的拍摄效果，使得中间相机在与临时面板距离固定的情况下，也可以使视野范围覆盖临时面板，实现对临时面板上的显示的全部内容进行拍摄。

另外，由于VR场景中设置的中间相机和临时面板会在后续观影中可能被用户观看到，因此，为了不影响后续观影体验，在本实施例中，还可以通过设置中间相机和临时面板的参数，对中间相机和临时面板进行隐藏。例如，可以设置临时面板只对中间相机可见，即只有中间相机可以拍摄到临时面板中的内容，后续观影过程中启用的播放相机(主相机)不能拍摄到临时面板，从而避免用户在VR场景中观看到临时面板。

还可以通过设置中间相机和临时面板的位置，使播放相机(主相机)不能拍摄到中间相机和临时面板，以缓解临时面板对观影体验的影响。例如，可以在VR场景的最远处设置中间相机和临时面板，使播放相机不能拍摄到中间相机和临时面板。还可以将中间相机和临时面板设置为动态位置，即设置在播放相机的视野范围以外区域，当播放相机的拍摄角度变化时，中间相机和临时面板的设置位置也同步进行变化，从而避免被播放相机拍摄到。

在一些实施例中，在当前VR场景中设置所述中间相机和临时面板的步骤还包括：

获取所述目标图片的图片分辨率；根据所述图片分辨率设置所述临时面板的显示区域面积；按照所述显示区域面积，设置所述中间相机与所述显示区域之间的投影比例，以使所述中间相机能够拍摄到整个所述临时面板的显示区域面积。

针对不同分辨率的目标图片，还可以通过调整临时面板的大小，实现将不同分辨率的图像进行显示。例如，当目标图片的分辨率为7680×4320时，则可以在VR场景中设置一个7680×4320分辨率对应尺寸的临时面板；当目标图片的分辨率为4096×2160时，则可以在VR场景中设置一个4096×2160分辨率对应尺寸的临时面板。再通过调节中间相机的相机参数和/或中间相机与临时面板之间的相互位置关系，使中间相机能够适应不同尺寸大小的临时面板，从而实现对临时面板上的显示的全部内容进行拍摄。

在VR场景中设置中间相机和临时面板后，控制器还可以进一步在VR场景中设置显示面板用来呈现中间图像，即如图12所示，在一些实施例中，所述输出中间图像的步骤还包括：

在当前VR场景中设置显示面板；在所述显示面板中显示所述中间图像。为了呈现目标图片中的内容，在本实施例中可以在VR场景中设置显示面板来实时显示中间相机拍摄的图像。显示面板在VR场景中设置的位置可以根据具体的VR场景特点确定。例如，对于模拟影院的应用场景，可以将显示面板设置为虚拟影院的银幕位置。在设置完显示面板后，可以通过显示面板对中间图像进行显示。

受限于具体VR场景的限制，显示面板的尺寸通常是固定的，可以设置显示面板支持分辨率等于中间图像的分辨率。其中，中间图像的分辨率即中间相机的分辨率，可以根据虚拟现实设备GPU性能以及具体应用场景进行设置。例如，在GPU性能满足要求的前提下，如果显示面板所支持的最大分辨率为2560×1440，则可以设置中间相机的输出分辨率为2560×1440，相应输出的中间图像分辨率也为2560×1440。可见，通过设置中间相机的输出分辨率等于显示面板的支持分辨率，可以使任何分辨率的目标图像都能以设定的分辨率显示在显示面板中，保证目标图像能完全显示。

需要说明的是，对于不同类型的目标图片，中间相机的拍摄方式不同，相应的输出的中间图像类型也不同。例如，对于静态图像，中间相机可以仅进行一次拍摄，并输出为静态的中间图像即可，相应在显示面板中也可以展示为静态画面内容。而对于动态图像，中间相机需要按照动态图像的变化周期和画面变化帧率，在一个变化周期内对该动态图像进行拍摄，从而生成相同变化周期和帧率的动态中间图像，并在显示面板中对该动态图像进行播放。

在一些实施例中，还可以通过临时面板显示视频画面，则在显示视频画面的同时，使用中间图像进行持续拍摄，以生成中间视频，并将中间视频显示在显示面板上。可见，本实施例提供的图片显示方法可以对图片或视频画面的分辨率进行转化，以适应固定大小的显示面板，使中低端虚拟显示设备在显示高分辨率图像时，也能够获得较好显示效果。

在显示面板对中间图像进行显示的同时，虚拟现实设备可以按照其具体的播放方式对VR场景进行展示，将VR场景中的部分画面内容呈现在显示器中。由于VR场景中包含显示中间图像的显示面板，因此可以实现在显示器显示所述中间图像的目的。具体的，如图12所示，控制所述显示器显示所述中间图像的步骤还包括：

在当前VR场景中设置播放相机；使用所述播放相机拍摄所述显示面板和/或所述VR场景，以生成带有所述中间图像的最终画面；控制所述显示器显示所述最终画面。

为了给用户呈现具体的VR画面内容，可以在显示面板显示中间图像前，在VR场景中设置播放相机。播放相机可以对VR场景进行拍摄，并将拍摄到的画面实时输出到显示器进行显示。播放相机可以与虚拟显示设备的姿态检测电路相关联，即可以根据姿态检测电路检测的用户姿态，实时调整播放相机的拍摄方向。在不同的拍摄方向下，播放相机可以对显示面板和/或VR场景中的画面内容进行拍摄，以生成带有中间图像的最终画面，并将其进行输出，显示在显示器中。

可见，根据上述实施例提供的技术方案，本申请提供的图片显示方法可以在显示图片前，在VR场景中分别设置中间相机和播放相机，以及临时面板和显示面板。在播放目标图片时，通过临时面板对目标图片的原图进行显示，再使用中间相机对临时面板上显示的内容进行拍摄，从而获得中间图像并输出到显示面板中进行展示，以使播放相机可以拍摄到VR场景以及显示面板生成最终画面，并显示在显示器中。

整个显示过程可以全部在VR场景下完成，即由GPU单独完成，无需将目标图片发送给Android层进行压缩处理，从而减少压缩过程和数据传递过程所消耗的时间，在保证显示效果的同时，提高对高分辨图片的显示速度，使所述图片显示方法能够应用到中低端VR设备，用以提高图片显示效果。

在显示目标图片的过程中，不同类型的目标图片需要不同的方式进行显示，例如，对于传统2D图片，可以直接通过平面完成显示；而对于360全景图片，则需要通过曲面进行显示，因此，如图13所示，为了获得更好的显示效果，在本申请的部分实施例中，在VR场景中设置显示面板的步骤还包括：

获取所述目标图片的片源类型；根据所述目标图片的片源类型，设置所述显示面板类型。本实施例中，可以在设置显示面板前，对目标图像的片源类型进行检测，其中所述片源类型至少包括2D片源、3D片源以及360全景片源。具体的检测方法可以为，控制器在接收到控制指令后，提取所显示的媒资分类、格式、扩展名、文件说明等信息进行提取，从而确定当前显示媒资的片源类型。例如，对于用户界面中呈现的网络资源，其在分享媒资的同时，可以在文件说明中指示该媒资的片源类型。

还可以结合具体的图片内容判断当前所显示媒资的片源类型。例如，通过分析图片的左右两侧相似度，则在两侧图片相似度较小时，可以确定当前待识别图像的片源类型为2D片源；在两侧图片相似度较大时，可以确定当前待识别图像的片源类型为3D片源。

在检测到目标图片的片源类型后，可以根据目标图片的片源类型，设置显示面板类型，具体的，如果目标图片的片源类型为2D片源或3D片源等第一类型片源，在VR场景中设置平面形式的显示面板；如果目标图片的片源类型为360全景片源等第二类型片源，在VR场景中设置球面形式的显示面板。

对于第一类型片源，由于其在表现形式上都是平面图案，并且其具体的画面内容通常没有经过变形处理，因此可以直接通过平面形式的显示面板对中间图像进行显示。其中，3D片源的图片通常包括左右两半部分，其左半部分为通过左目相机拍摄的画面，其右半部分为通过右目相机拍摄的画面，两个部分的具体画面内容略有不同。3D片源在显示时，可以在左侧屏幕中显示左半部分，而在右侧屏幕中显示右半部分，使用户观看到的画面呈现出立体效果。

因此，在设置平面形式的显示面板时，可以设置两个层级，每个层级的显示面板中可分别显示左半部分和右半部分，并且将显示左半部分的层级画面输出给左侧屏幕显示，将显示右半部分的层级画面输出给右侧屏幕显示。

对于第二类型片源，由于其在拍摄时是通过旋转相机或多个镜头拍摄后组合而成的平面图案，因此其画面内容本身存在部分变形，为了适应变形区域，可以通过曲面形式显示面板对中间图像进行显示，例如，可以在设置显示面板时，在VR场景中添加一个显示球面，从而通过显示球面对360全景片源图像进行展示，形成全景效果。

需要说明的是，由于不同片源的图片在图片表现形式上都可以为二维平面形式，并且临时面板不会被用户观察到，因此在设置临时面板时，可以直接设置平面形式的面板，并将图片的原图直接在临时面板上进行展示，使中间相机在常规拍摄模式下就能够拍摄到图片中的画面内容，完成中间图像转化。

但在一些实施例中，为了获得更的显示效果，可以在设置临时面板时，就对目标图片的片源类型进行检测，从而根据不同的片源类型设置不同形式的临时面板和中间相机。例如，如果目标图片的片源类型为2D片源或3D片源等第一类型片源，在VR场景中设置平面形式的临时面板，并设置中间相机的拍摄方式为常规拍摄模式；如果目标图片的片源类型为360全景片源等第二类型片源，在VR场景中设置球面形式的显示面板，并设置中间相机的拍摄方式为环形拍摄模式。通过不同形式的临时面板和不同拍摄方式的中间相机，使生成的中间图像能够与最终显示面板完美匹配，缓解在中间相机拍摄过程中由于分辨率变化对图像中变形画面的影响，提高显示效果。

基于上述图片显示方法，本申请的部分实施例中还提供一种虚拟现实设备，包括：显示器和控制器，其中，所述显示器被配置为显示用户界面；所述控制器被配置为执行以下程序步骤：

获取用户输入的用于显示目标图片的控制指令；

响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像；

控制所述显示器显示所述中间图像。

其中，所述中间相机被配置为输出固定分辨率的图像。本实施例提供的虚拟现实设备，可以在获取用户的控制指令以后，使用中间相机对目标图片进行拍摄，从而根据目标图片获得固定分辨率的中间图像，并将中间图像显示在显示器中。所述虚拟显示设备可以在目标图像的分辨率与VR场景不匹配时，通过中间相机直接对目标图片进行转化，满足显示效果的同时，独立完成目标图片转化，无需将目标图片发送至其他设备进行压缩，提高图片显示速率。

在一些实施例中，在对目标图片执行图像拍摄之前，所述虚拟现实设备的控制器还被进一步配置为：

解析控制指令中指定的目标图片，以获取目标图片的图片分辨率以及当前VR场景中显示面板支持分辨率；如果图片分辨率大于支持分辨率，对目标图片执行图像拍摄；如果图片分辨率小于或等于支持分辨率，通过显示面板显示目标图片。

本实施例中，控制器可以在对目标图片执行图像拍摄之前，先对目标图片的分辨率进行检测，并与当前场景中显示面板支持的分辨率进行对比，以确定当前场景是否能够完整显示当前目标图片。如果图片分辨率小于或等于支持分辨率，则直接通过显示面板显示目标图片，无需执行图像拍摄的步骤，减少数据处理量。

在一些实施例中，为了实现对目标图片执行图像拍摄，虚拟现实设备的控制器250还被配置为：

在当前VR场景中设置中间相机和临时面板；并在临时面板中展示目标图片；再使用中间相机对临时面板执行拍摄，以输出中间图像。

其中，中间相机和临时面板为VR场景虚拟场景控件，可以在显示过程中，被控制器调用，实现对目标图片的拍摄。中间相机可以输出固定分辨率的图像，从而根据目标图片生成固定分辨率的中间图像。临时面板可以用来展示目标图片，以供中间相机进行拍摄，为此临时面板可以只对中间相机可见，以避免临时面板显示的内容影响最终的VR影像呈现效果。

在一些实施例中，为了使中间相机能够拍摄到临时面板显示的内容，在设置中间相机和临时面板时，控制器还被配置为：

获取目标图片的图片分辨率；再根据图片分辨率设置临时面板的显示区域面积；并按照显示区域面积，设置中间相机与显示区域之间的投影比例，以使中间相机能够拍摄到整个临时面板的显示区域面积。

通过设置投影比例，可以使中间相机在有限的VR场景空间内，通过设置的投影比例使中间相机的拍摄区域覆盖整个目标图片，从而使中间相机能够拍摄到整个临时面板的显示区域面积，适应不同尺寸的目标图片。

在一些实施例中，生成中间图像后，控制器可以按照以下方式呈现最终显示画面：

在当前VR场景中设置显示面板和播放相机；并在显示面板中显示中间图像。以及使用播放相机拍摄显示面板和/或VR场景，以生成带有中间图像的最终画面；最后控制显示器显示最终画面。

其中，所述显示面板支持分辨率等于中间图像的分辨率。通过设置显示面板，可以将转化获得的中间图像进行显示，由于显示面板支持的分辨率等于中间图像的分辨率，因此可以在显示面板中完整显示中间图像，而无需对目标图片执行缩放。

本申请提供的实施例之间的相似部分相互参见即可，以上提供的具体实施方式只是本申请总的构思下的几个示例，并不构成本申请保护范围的限定。对于本领域的技术人员而言，在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种虚拟现实设备，其特征在于，包括：

显示器，被配置为显示用户界面；

控制器，被配置为：

获取用户输入的用于显示目标图片的控制指令；

响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像，所述中间图像为固定分辨率的图像；

控制所述显示器显示所述中间图像。

2.根据权利要求1所述的虚拟现实设备，其特征在于，响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像的步骤中，所述控制器被进一步配置为：

解析所述控制指令中指定的目标图片；

获取所述目标图片的图片分辨率以及当前VR场景中显示面板支持分辨率；

如果所述图片分辨率大于所述支持分辨率，对所述目标图片执行图像拍摄；

如果所述图片分辨率小于或等于所述支持分辨率，通过所述显示面板显示所述目标图片。

3.根据权利要求1所述的虚拟现实设备，其特征在于，响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像的步骤中，所述控制器被进一步配置为：

在当前VR场景中设置所述中间相机和临时面板，所述中间相机和所述临时面板为所述VR场景虚拟场景控件，所述中间相机被配置为输出固定分辨率的图像，所述临时面板被配置为只对所述中间相机可见；

在所述临时面板中展示所述目标图片；

使用所述中间相机对所述临时面板执行拍摄，以输出中间图像。

4.根据权利要求3所述的虚拟现实设备，其特征在于，输出中间图像的步骤中，所述控制器被进一步配置为：

在当前VR场景中设置显示面板，所述显示面板支持分辨率等于所述中间图像的分辨率；

在所述显示面板中显示所述中间图像。

5.根据权利要求4所述的虚拟现实设备，其特征在于，控制所述显示器显示所述中间图像的步骤中，所述控制器被进一步配置为：

在当前VR场景中设置播放相机；

使用所述播放相机拍摄所述显示面板和/或所述VR场景，以生成带有所述中间图像的最终画面；

控制所述显示器显示所述最终画面。

6.根据权利要求4所述的虚拟现实设备，其特征在于，在VR场景中设置显示面板的步骤中，所述控制器被进一步配置为：

获取所述目标图片的片源类型，所述片源类型包括第一类型和第二类型；

根据所述目标图片的片源类型，设置所述显示面板类型。

7.根据权利要求6所述的虚拟现实设备，其特征在于，根据所述目标图片的片源类型，设置所述显示面板类型的步骤中，所述控制器被进一步配置为：

如果所述目标图片的片源类型为第一类型，在所述VR场景中设置平面形式的所述显示面板；

如果所述目标图片的片源类型为第二类型，在所述VR场景中设置球面形式的所述显示面板。

8.根据权利要求3所述的虚拟现实设备，其特征在于，在VR场景中设置所述中间相机和临时面板的步骤中，所述控制器被进一步配置为：

获取所述目标图片的图片分辨率；

根据所述图片分辨率设置所述临时面板的显示区域面积；

按照所述显示区域面积，设置所述中间相机与所述显示区域之间的投影比例，以使所述中间相机能够拍摄到整个所述临时面板的显示区域面积。

9.一种图片显示方法，其特征在于，应用于虚拟现实设备，所述方法包括：

获取用户输入的用于显示目标图片的控制指令；

响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像，所述中间图像为固定分辨率的图像；

控制所述显示器显示所述中间图像。

10.根据权利要求9所述的图片显示方法，其特征在于，响应于所述控制指令，对所述目标图片执行图像拍摄，以生成中间图像的步骤还包括：

在当前VR场景中设置所述中间相机和临时面板，所述中间相机和所述临时面板为所述VR场景虚拟场景控件，所述中间相机被配置为输出固定分辨率的图像，所述临时面板被配置为只对所述中间相机可见；

在所述临时面板中展示所述目标图片；

使用所述中间相机对所述临时面板执行拍摄，以输出所述中间图像。

Images