CN109271117A - 一种图像显示方法、装置及设备 - Google Patents

Abstract

本申请公开了一种图像显示方法、装置及设备，以及一种计算机存储介质。其中所述图像显示方法包括：操作系统的本地框架Native层接收应用程序针对图像的显示指令；判断显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。采用本申请的技术方案，在操作系统中对待显示图像做分屏操作，而非在应用程序中对待显示图像做分屏操作；因此，应用程序可适用于各种类型的显示设备，从而使得能支持单屏VR头显的应用程序大幅增加。

Description

一种图像显示方法、装置及设备

技术领域

本申请涉及图像显示技术领域，尤其涉及一种图像显示方法、装置及设备，以及一种计算机存储介质。

背景技术

VR头显(虚拟现实头戴式显示设备)是利用头戴式显示设备将人的对外界的视觉、听觉封闭，引导用户产生一种身在虚拟环境中的感觉。其显示原理是左右眼屏幕分别显示左右眼的图像，人眼获取这种带有差异的信息后在脑海中产生立体感。

目前，大部分应用程序主要是针对普通屏幕(如手机或个人电脑等设备的屏幕，或是双屏的VR头显)显示设计的应用程序，而不是仅针对单屏VR头显设计的应用程序，如果在单屏VR头显的屏幕上直接显示这种针对普通屏幕设计的应用程序的画面，就会出现无法正常观看图像的问题，例如，在单屏VR头显中会出现由于左右眼看到完全不同的画面而感觉花屏的问题。

为了解决上述问题，现有技术通常为不同显示设备分别定制应用程序的方式，即：为一个应用程序设计专用于普通屏幕的应用程序和专用于单屏VR头显的应用程序。其中，专用于单屏VR头显的应用程序会对待显示图像进行分屏处理,将待显示图像分割为的左右眼两幅图像，直接分别放到左右眼进行观看(或显示左右3维图像)，以满足正常观看的需求。

从上述分析可以看出，现有技术存在需要为不同显示设备分别设计应用程序的问题。

发明内容

本申请提供了一种图像显示方法、装置及设备，以解决现有技术中存在的需要为不同显示设备分别设计应用程序的问题。

第一方面，本申请提供了一种图像显示方法，该方法包括：操作系统的本地框架Native层接收应用程序针对图像的显示指令；判断显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。采用本实现方式，在操作系统中对待显示图像做分屏操作，而非在应用程序中对待显示图像做分屏操作，对于应用程序来说跟普通的单屏系统完全一致，不需要考虑分屏问题和反畸变问题；因此，应用程序可适用于各种类型的显示设备，从而使得能支持单屏VR头显的应用程序大幅增加，进而提升了用户体验。

结合第一方面，在第一方面第一种可能的实现方式中，所述判断显示设备是否为包括单个屏幕的VR头显，包括：获取所述显示设备的属性；根据所述属性，判断所述显示设备是否为所述VR头显。

结合第一方面或第一方面第一种可能的实现方式，在第一方面第二种可能的实现方式中，所述方法还包括：若上述判断结果为否，则将所述图像显示在所述VR头显以外设备的屏幕中。

第二方面，本申请还提供了一种图像显示装置，所述图像显示装置包括用于执行第一方面各种实现方式中方法步骤的模块。

第三方面，本申请还提供了一种设备，包括：处理器和存储器；所述处理器可以执行所述存储器中所存储的程序或指令，从而实现以第一方面各种实现方式执行所述图像显示方法。

第四方面，本申请还提供了一种存储介质，该计算机存储介质可存储有程序，该程序执行时可实现包括本申请提供的图像显示方法各实施例中的部分或全部步骤。

附图说明

为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本申请设备的一个实施例的结构示意图；

图2为本申请设备的另一个实施例的结构示意图；

图3为本申请图像显示方法的一个实施例的流程图；

图4为本申请图像显示方法的一个实施例的操作系统框架示意图；

图5为本申请图像显示方法的一个实施例的图像转换效果示意图；

图6为本申请图像显示方法的一个实施例的另一图像转换效果示意图；

图7为本申请图像显示方法的一个实施例的又一图像转换效果示意图；

图8为本申请图像显示装置的一个实施例的示意图。

具体实施方式

本申请实施例提供的设备包括处理器和存储器，所述存储器用于存储支持图像显示装置执行图像显示方法的程序，所述处理器被配置为用于执行所述存储器中存储的程序。

所述程序包括一条或多条计算机指令，其中，所述一条或多条计算机指令供所述处理器调用执行。

所述处理器用于：运行操作系统，所述操作系统的本地框架Native层接收应用程序针对图像的显示指令，并判断与所述设备连接的显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

参见图1，为本申请设备的一个实施例的结构示意图。在该实施例中，所述设备1内集成有处理器10、存储器和单屏VR头显11，例如，所述设备1为VR一体机眼镜等。设备1中的操作系统将待显示的画面内容处理完成之后，直接将其显示到单屏VR头显11上，信号只需要通过处理器10转换成屏幕需要的信号即可。

所述设备1中的处理器10上运行了操作系统(如安卓操作系统)，该操作系统上运行的应用程序(如游戏)的画面要显示到单屏VR头显11上，以使用户产生身临其境的感觉。该操作系统的Native层接收到该应用程序针对某一画面的显示指令后，首先要判断与所述设备1连接的显示设备是否为包括单个屏幕的VR头显11，若是，则生成与所述图像对应的左屏图像和右屏图像，再将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

参见图2，为本申请设备的另一个实施例的结构示意图。在该实施例中，所述设备2为与单屏VR头显4分离的设备，所述设备2可通过HDMI(High Definition MultimediaInterface，高清晰度多媒体接口)或VGA(Video Graphics Array，视频图像阵列)等视频接口线与单屏VR头显4连接，例如，所述设备2为VR控制手柄或电视盒子等。

所述设备2内集成有处理器20和存储器，其中所述处理器20上运行了安卓操作系统，该操作系统上运行的应用程序(如游戏)的画面要显示到单屏VR头显4上，以使用户产生身临其境的感觉。该操作系统的Native层接收到该应用程序针对某一画面的显示指令后，首先要判断与所述设备2连接的显示设备是否为包括单个屏幕的VR头显4，若是，则生成与所述图像对应的左屏图像和右屏图像，再将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

在这种方式中，设备2中的操作系统将待显示的画面内容处理完成之后，需要通过处理器10将图像内容转换成HDMI或VGA等标准显示数据流，再通过相应的视频线将信号传输至单屏VR头显4，单屏VR头显4接收到信号流后，将信号解码后显示到单屏VR头显4上。

本申请提供了一种设备，通过运行在设备上的操作系统的本地框架Native层接收应用程序针对图像的显示指令；判断显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。采用本实现方式，在操作系统中对待显示图像做分屏操作，而非在应用程序中对待显示图像做分屏操作；因此，应用程序可适用于各种类型的显示设备，从而使得能支持单屏VR头显的应用程序大幅增加。

参见图3，为本申请图像显示方法一个实施例的流程图，该方法的执行主体可以是上述设备1或设备2，该方法包括如下步骤：

步骤301，操作系统的本地框架Native层接收应用程序针对图像的显示指令。

参见图4，为本申请图像显示方法一个实施例的操作系统框架示意图。在本实施例中，操作系统采用的是安卓操作系统。如图4所示，应用程序运行在操作系统的应用程序Application层，应用程序通过系统的应用程序框架Framework层将图像显示指令传送至Native层(又称为系统中间层、服务层)；Native层接收到应用程序针对图像的显示指令后，可直接通过Native层，在Framebuffer之前通过如下步骤对图像进行分屏处理。

本实施例的应用程序画面(或者界面)发生改变时，会通过Framework层将改动传送到Native层的surfaceflinger，在这里会将改动经过计算绘制到屏幕的Framebuffer中，然后通过系统的驱动层，将Framebuffer中的图像刷新到屏幕上。

在surfaceflinger中，新的一帧图像过来以后，可以通过GPU(GraphicsProcessing Unit，图形处理器)的一些算法做灵活的处理，比如把图像左右分屏、对图像做反畸变算法、对图像内容做变更等等。在本实施例中，将源图像缩放后，再左右复制一遍，由此可保证左右眼能够看到同样的内容。

作为一种可选的实施方式，也可在Framebuffer层直接做分屏。Framebuffer是用一个视频输出设备从包含完整的帧数据的一个内存缓冲区中来驱动一个视频显示设备。简而言之，Framebuffer就是控制显示设备的一个内存缓冲区。Framebuffer层又称为系统底层或驱动层。

在Framebuffer之前(即通过Native层)分屏的方式具有灵活度较高的优点，可以灵活的控制图像缩放的比例，还可以控制反畸变的算法，也可以根据镜片是否畸变和畸变率做灵活的调整，重要的是同时兼容通用应用程序；在Framebuffer层直接做分屏的方式，也可以实现兼容通用应用程序，但是操作灵活度比较差。从效率角度而言，在Framebuffer层直接做分屏的方式要优于在Framebuffer之前分屏的方式。

步骤302，判断显示设备是否为包括单个屏幕的VR头显；若本步骤判断结果为是，则进入步骤303。

要判断显示设备是否为包括单个屏幕的VR头显(即单屏VR头显)，可首先获取所述显示设备的属性，然后再根据所述属性，判断所述显示设备是否为所述VR头显。

所述显示设备包括但不限于集成在所述设备内的单屏VR头显，例如，VR一体机眼镜等；所述显示设备也包括与所述设备分离的单屏VR头显，例如，由VR控制手柄控制播放内容的单屏VR头显等。

所述属性包括但不限于显示设备的生产厂商、分辨率、设备型号等属性。

如果所述显示设备为集成在所述设备内的单屏VR头显，则所述设备可直接获取显示设备的属性；如果所述显示设备为与所述设备分离的单屏VR头显，则所述设备可通过标准的HDMI接口获取显示设备的属性。通常，根据显示设备的生产厂商和设备型号两方面信息，即可判定显示设备是否为单屏VR头显。

步骤303，生成与所述图像对应的左屏图像和右屏图像。

由于显示设备为单屏VR头显，因此用户的每只眼只能看到屏幕的一半。为了避免用户看到花屏的画面，同时使得显示设备可兼容通用应用程序，本申请实施例提供的方法在系统的Native层对图像做分屏处理，即在系统的Native层生成与所述图像对应的左屏图像和右屏图像。

在实际应用中，可根据实际应用场景确定左屏图像和右屏图像的生成方式。例如，在VR场景下，可以不对源图像不做缩放处理，而是将屏幕的所有区域都利用起来；然而，这种处理方式将使得用户看到的图像发生变形。在其它场景应用(如视频或者通用软件)中，可将源图像按原图像比例缩放后，再生成左屏图像和右屏图像；这种处理方式可以保证图像不变形，但是损失了部分屏幕的一部分区域。

具体实施时，如果所述图像包括二维图像(如16：9的标准比例图像)，则步骤303可包括如下具体步骤：1)对源图像作缩放处理；2)将缩放后的图像作为所述左屏图像和所述右屏图像。参见图5，为本申请图像显示方法一个实施例的图像转换效果示意图。

所述图像也可以是三维图像，左右三维的图像大小跟二维图像可一致，只是在一张图中包含左右两张图，每张图被压缩到一半的大小，播放时需要将左右分离后，再还原到正常大小。

具体实施时，如果所述图像包括三维图像，则步骤303可包括如下具体步骤：1)将源图像分割成左半部分图像和右半部分图像；2)对所述左半部分图像作拉伸缩放处理，形成所述左屏图像；以及，对所述右半部分图像作拉伸缩放处理，形成所述右屏图像。

参见图6，为本申请图像显示方法一个实施例的另一图像转换效果示意图。在本实施例中，所述图像为二维图像，为了避免二维图像发生变形，对二维图像按原图像比例进行缩放，即保证图像比例不变。然而，由图6可见，这种处理方式将导致屏幕的一部分区域受到损失，屏幕出现部分空白，即产生画面损失。

为了提升用户体验，可在屏幕上设置背景图像，如在屏幕上方位置设置天花板、在屏幕下方位置设置座椅等背景图像。因此，在步骤304之前，本申请实施例提供的方法还可包括如下步骤：1)生成所述单个屏幕的背景图像；2)将所述背景图像渲染在所述单个屏幕中。

参见图7，为本申请图像显示方法一个实施例的又一图像转换效果示意图。在实际应用中，VR头显可能存在畸变问题，从而导致用户看到的画面产生畸变。为了提升用户体验，对于有畸变的VR头显，可以在图像处理过程中增加反畸变的处理。因此，所述生成与所述图像对应的左屏图像和右屏图像，还可包括如下步骤：对所述左屏图像和所述右屏图像作反畸变处理。

步骤304，将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

至此说明了若显示设备是单屏VR头显的处理步骤，如果显示设备不是单屏VR头显，则可将所述图像渲染至单屏VR头显以外的显示设备中。

所述单屏VR头显以外的显示设备包括但不限于手机屏幕，也可以包括与电视盒子等控制设备连接的显示器或普通电视等显示设备。

从上述实施例可以看出，本申请提供了一种图像显示方法，通过操作系统的本地框架Native层接收应用程序针对图像的显示指令；判断显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。采用本申请提供的图像显示方法，在操作系统中对待显示图像做分屏操作，而非在应用程序中对待显示图像做分屏操作；因此，应用程序可适用于各种类型的显示设备，从而使得能支持单屏VR头显的应用程序大幅增加。

参见图8，为本申请图像显示装置一个实施例的结构示意图。如图8所示，该图像显示装置包括：指令接收单元801，用于操作系统的本地框架Native层接收应用程序针对图像的显示指令；显示设备类型判断单元802，用于判断显示设备是否为包括单个屏幕的VR头显，若是，则启动分屏单元803；分屏单元803，用于生成与所述图像对应的左屏图像和右屏图像；第一图像渲染单元804，用于将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

可选的，所述显示设备类型判断单元802包括：

属性获取子单元，用于获取所述显示设备的属性；

判断子单元，用于根据所述属性，判断所述显示设备是否为所述VR头显。

可选的，所述装置还包括：

第二图像渲染单元，用于若上述判断结果为否，则将所述图像显示在所述VR头显以外设备的屏幕中。

可选的，所述图像包括二维图像；

所述分屏单元803包括：

二维图像缩放子单元，用于对所述图像作缩放处理；

图像设置子单元，用于将缩放后的图像作为所述左屏图像和所述右屏图像。

可选的，所述图像包括三维图像；

所述分屏单元803包括：

三维图像分割子单元，用于将所述图像分割成左半部分图像和右半部分图像；

三维图像缩放子单元，用于对所述左半部分图像作拉伸缩放处理，形成所述左屏图像；以及，对所述右半部分图像作拉伸缩放处理，形成所述右屏图像。

可选的，所述装置还包括：

背景图像生成单元，用于生成所述单个屏幕的背景图像；

背景图像渲染单元，用于将所述背景图像渲染在所述单个屏幕中。

可选的，所述分屏单元803还包括：

反畸变对处理子单元，用于所述左屏图像和右屏图像所述作反畸变处理。

从上述实施例可以看出，本申请提供了一种图像显示装置，通过操作系统的本地框架Native层接收应用程序针对图像的显示指令；判断显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。采用本申请提供的图像显示装置，在操作系统中对待显示图像做分屏操作，而非在应用程序中对待显示图像做分屏操作；因此，应用程序可适用于各种类型的显示设备，从而使得能支持单屏VR头显的应用程序大幅增加。

具体实现中，本发明还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时可包括本发明提供的图像显示方法的各实施例中的部分或全部步骤。所述的存储介质可为磁碟、光盘、只读存储记忆体(英文：read-only memory，简称：ROM)或随机存储记忆体(英文：random access memory，简称：RAM)等。

本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解，本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。

本说明书中各个实施例之间相同相似的部分互相参见即可。尤其，对于装置实施例和设备实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例中的说明即可。

以上所述的本发明实施方式并不构成对本发明保护范围的限定。

Claims (10)

1.一种图像显示方法，其特征在于，所述方法包括：

操作系统的本地框架Native层接收应用程序针对图像的显示指令；

判断显示设备是否为包括单个屏幕的VR头显，若是，则进入下一步；

生成与所述图像对应的左屏图像和右屏图像；

将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

2.如权利要求1所述的方法，其特征在于，所述判断显示设备是否为包括单个屏幕的VR头显，包括：

获取所述显示设备的属性；

根据所述属性，判断所述显示设备是否为所述VR头显。

3.如权利要求1所述的方法，其特征在于，所述方法还包括：

若上述判断结果为否，则将所述图像渲染至所述VR头显以外的显示设备中。

4.如权利要求1所述的方法，其特征在于，所述图像包括二维图像；

所述生成与所述图像对应的左屏图像和右屏图像，包括：

对所述图像作缩放处理；

将缩放后的图像作为所述左屏图像和所述右屏图像。

5.如权利要求1所述的方法，其特征在于，所述图像包括三维图像；

所述生成与所述图像对应的左屏图像和右屏图像，包括：

将所述图像分割成左半部分图像和右半部分图像；

对所述左半部分图像作拉伸缩放处理，形成所述左屏图像；以及，对所述右半部分图像作拉伸缩放处理，形成所述右屏图像。

6.如权利要求4或5所述的方法，其特征在于，在所述将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中之前，所述方法还包括：

生成所述单个屏幕的背景图像；

将所述背景图像渲染在所述单个屏幕中。

7.如权利要求4或5所述的方法，其特征在于，所述生成与所述图像对应的左屏图像和右屏图像，还包括：

对所述左屏图像和所述右屏图像作反畸变处理。

8.一种图像显示装置，

指令接收单元，用于操作系统的本地框架Native层接收应用程序针对图像的显示指令；

显示设备类型判断单元，用于判断显示设备是否为包括单个屏幕的VR头显，若是，则启动分屏单元；

分屏单元，用于生成与所述图像对应的左屏图像和右屏图像；

第一图像渲染单元，用于将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

9.一种设备，其特征在于，包括：

处理器；以及

存储器，用于存储实现图像显示方法的程序，该设备通电并通过所述处理器运行该图像显示方法的程序后，执行下述步骤：操作系统的本地框架Native层接收应用程序针对图像的显示指令；判断显示设备是否为包括单个屏幕的VR头显，若是，则生成与所述图像对应的左屏图像和右屏图像；将所述左屏图像显示在所述单个屏幕的左侧屏幕中，以及，将所述右屏图像显示在所述单个屏幕的右侧屏幕中。

10.计算机存储介质，其特征在于，所述计算机存储介质存储有一条或多条计算机指令，所述计算机指令被执行时实现如权利要求1-7中任一项所述的方法。