CN108885348A - 用于生成应用图像的便携式图像设备的装置和方法 - Google Patents

Abstract

提供了一种用于在电子设备上显示图像的装置和方法。所述方法包括：接收对与应用相关联的输入加以指示的第一输入；在电子设备的缓冲器中生成第一图像对象；将所述第一图像对象存储在电子设备的存储器中；使用在所述电子设备的存储器中存储的所述第一图像对象生成第一图像；并在所述电子设备的图像显示设备上显示所述第一图像。

Description

用于生成应用图像的便携式图像设备的装置和方法

技术领域

本公开涉及用于在便携式图像设备上显示图像的装置和方法。更具体地，本公开涉及用于使用便携式图像设备生成与应用相关联的立体图像的装置和方法。

背景技术

应用是被设计为在电子设备上执行一组协调的功能、任务或活动的程序。例如，应用可以包括以下项中的至少一项：文字处理功能；包括音频、视频和数据通信的通信功能(包括电话呼叫、SMS/MMS消息、电子邮件等)、日程安排或日历功能、闹钟功能、计算器功能等。

通常，与执行的应用相关联的图像以二维格式显示在电子设备的显示器上，其中生成具有单个焦点的单个图像。具体地，通过处理图像内容数据并将其渲染到面板中来生成要显示的图像，其中针对每一帧执行或刷新对图像内容数据的处理和渲染。

然而，当以三维或立体格式显示应用图像时，根据现有技术的处理和渲染技术产生不期望的视觉伪像。例如，当针对每一帧渲染立体图像时，由于每帧之间的渲染差异，因此图像的边缘可能略微变化，从而导致连续立体帧中的混叠或锯齿状边缘。这种混叠可能不期望地使图像看起来像是在摆动或浮动。

因此，需要使用便携式图像设备生成与应用相关联的立体图像，以减少不期望的视觉伪像。

发明内容

技术问题

本公开的各个方面是为了至少解决上述问题和/或缺点，并且至少提供以下描述的优点。因此，本公开的一个方面在于提供一种用于使用便携式图像设备来生成与应用相关联的立体图像以减少不期望的视觉伪像的装置和方法。

问题的解决方案

根据本公开的一个方面，提供了一种用于在便携式图像设备上显示图像的方法。所述方法包括：接收对与应用相关联的输入加以指示的第一输入；在便携式图像设备的缓冲器中生成第一图像对象；将所述第一图像对象存储在便携式图像设备的存储器中；使用在所述便携式图像设备的存储器中存储的所述第一图像对象生成第一图像；并在所述便携式图像设备的图像显示设备上显示所述第一图像。

根据本公开的另一方面，提供了一种便携式图像设备。所述便携式图像设备包括：图像显示设备，被配置为显示图像；输入设备，被配置为接收输入；以及控制器，被配置为：从所述输入设备接收第一输入，所述第一输入指示与应用相关联的输入；控制缓冲器生成第一图像对象；将所述第一图像对象存储在存储器中；控制立体图像合成器设备使用在所述存储器中存储的第一图像对象生成第一图像；并控制所述图像显示设备显示所述第一图像。

根据本公开的另一方面，提供了一种用于在电子设备上显示图像的方法。所述方法包括：接收与应用相关联的第一输入；在电子设备的缓冲器中生成第一图像对象；将所述第一图像对象存储在电子设备的存储器中；使用在所述电子设备的存储器中存储的所述第一图像对象生成第一图像；并在所述电子设备的图像显示设备上显示所述第一图像。

通过以下结合附图公开了本公开的各种实施例的详细描述，本公开的其他方面、优点和显著特征对于本领域技术人员将变得清楚明白。

本发明的有益效果

本公开在于提供一种用于在便携式图像设备上显示图像的装置和方法。因此，可以提供一种用于减小不期望的视觉伪像并提供更快速且稳定的虚拟现实(VR)体验的装置和方法。

附图说明

根据结合附图的以下详细描述，本公开的各种实施例的上述和其他方面、特征以及优点将更清楚，在附图中：

图1示出了根据本公开的各种实施例的电子设备的正视图；

图2示出了根据本公开的各种实施例的电子设备的后视图；

图3示出了根据本公开的各种实施例的另一电子设备的正视图；

图4是示出了根据本公开的各种实施例的电子设备的配置的框图；

图5是示出了根据本公开的各种实施例的生成图像的方法的流程图；

图6是示出了根据本公开的各种实施例的生成图像的另一方法的流程图；

图7是示出了根据本公开的各种实施例的生成图像的另一方法的流程图；以及

图8是示出了根据本公开的各种实施例的生成图像的另一方法的流程图。

应注意，贯穿附图，相似的附图标记用于描述相同或相似的元件、特征和结构。

具体实施方式

下面将参照附图讨论本公开的各个方面的详细描述。这些描述仅作为示例来说明，而不限制本公开的范围。

参考附图的详细描述用于帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。以下描述包括各种具体细节以帮助理解，但这些具体细节应被视为仅仅是示例性的。因此，本领域普通技术人员将认识到，在不背离本公开范围和精神的前提下可以对本文所述实施例进行各种改变和修改。此外，为了清楚和简明的目的，省略了对公知功能和结构的描述。

以下描述和权利要求中使用的术语和词语不限于字面含义，而是仅由发明人用来实现对本公开的清楚一致的理解。因此，本领域技术人员应当清楚，对本公开的各种实施例的以下描述仅用于说明目的，而不是为了限制由所附权利要求及其等同物限定的本公开。

应当理解的是，除非上下文中另有清楚指示，否则单数形式“一”、“一个”和“所述”包括复数指示物。因此，例如，对“组件表面”的引用包括对这样的表面中的一个或多个的引用。

术语“基本上(大体上)”意味着所记载的特征、参数或者值不需要精确实现，而是可以出现包括诸如公差、测量误差、测量精度限制及本领域技术人员已知的其他因素在内的偏差或变化，该偏差或变化可以以不妨碍该特征预期所要提供的效果的量来出现。

除非另有定义，否则本公开中使用的所有术语(包括技术或科学术语)具有本领域普通技术人员通常理解的含义。可以在字典中定义的常规术语应被理解为具有与其上下文一致的含义，并且除非在本公开中明确定义，否则不应被解释为过度理想化或形式化。

根据本公开的各种实施例，电子设备可以包括通信功能。例如，电子设备可以是智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书阅读器、台式PC、膝上型PC、上网本PC、个人数字助理(PDA)、便携式多媒体播放器(PMP)、MP3播放器、移动医疗设备、相机、可穿戴设备(例如，头戴式设备(HMD)、电子衣物、电子手环、电子项链、电子配饰、电子纹身或智能手表)等。

根据本公开的各种实施例，电子设备可以是具有通信功能的智能家用电器。例如，智能家用电器可以是电视、数字视频盘(DVD)播放器、音箱、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、烘干机、空气净化器、机顶盒、TV盒(例如，SAMSUNG HOMESYNC、APPLE TV或GOOGLE TV)、游戏机、电子词典、电子钥匙、摄像录像机、电子相框等。

根据本公开的各种实施例，电子设备可以是医疗设备(例如，磁共振血管成像(MRA)设备、磁共振成像(MRI)设备、计算机断层扫描(CT)设备、成像设备或超声设备)、导航设备、全球定位系统(GPS)接收机、事件数据记录器(EDR)、飞行数据记录器(FDR)、汽车信息娱乐设备、航海电子设备(例如，航海导航设备、陀螺仪或罗盘)、航空电子设备、安全设备、工业或消费机器人等。

根据本公开的各种实施例，电子设备可以是包括通信功能的家具、建筑物/结构的一部分、电子公告板、电子签名接收设备、投影仪、各种测量设备(例如，水测量设备、电测量设备、气测量设备或电磁波测量设备)等。

根据本公开的各种实施例，电子设备可以是上述设备的任何组合。此外，本领域普通技术人员应清楚，根据本公开的各种实施例的电子设备不限于上述设备。

本公开的各种实施例包括用于使用便携式图像设备来模拟与电子设备的交互的装置和方法。

图1示出了根据本公开的各种实施例的电子设备的正视图。图2示出了根据本公开的各种实施例的电子设备的后视图。

参考图1，电子设备100被配置为显示要由单个用户观看的图像。电子设备100可以是任何类型的便携式图像设备，诸如，抬头式显示器或头戴式显示器(HMD)。例如，电子设备100可以包括戴在用户头上的眼镜、护目镜或头盔。在示例性实施例中，如图1所示，电子设备100可以是在透明显示器上、在透明显示器中或透过透明显示器显示图像的抬头式显示器，其中图像被叠加在允许同时观看图像和当前环境的当前视点上。

参考图1和图2，电子设备100可以包括壳体102、第一透明显示器104、第二透明显示器106、图像捕获设备108、第一投影设备110和第二投影设备112。在示例性实施例中，电子设备100还可以包括输入设备和输出设备中的至少一个。尽管电子设备100被示出为具有如图1和图2所示的配置，然而本领域普通技术人员将认识到电子设备100可以具有包括尺寸、形状、布置和/或方位在内的任何配置。

壳体102包括前框架114、后框架116、第一支撑件118和第二支撑件120。在示例性实施例中，第一支撑件118和第二支撑件120可以分别通过铰链122和124可枢转地安装到壳体102。然而，第一支撑件118和第二支撑件120可以以任何方式固定到壳体102。壳体102可以包括各种类型的材料，包括：玻璃、塑料、金属及其组合。

第一透明显示器104和第二透明显示器106被配置为显示图像。例如，第一投影设备110可以将第一图像投影到第一透明显示器104上，且第二投影设备112可以将第二图像投影到第二透明显示器106上。在示例性实施例中，可以显示第一图像和第二图像以创建立体图像或三维图像。第一透明显示器104和第二透明显示器106可以由包括玻璃、塑料等的任何透明材料制成。

图像捕获设备108被配置为捕获图像。例如，图像捕获设备108可以捕获电子设备100外部的图像，例如，在电子设备100的周围环境内捕获图像。图像捕获设备108可以捕获在电子设备100的用户的视线内的图像。备选地，图像捕获设备108可以捕获用户在直接视线内无法看到的图像。

图像捕获设备108可以包括一个或多个相机。如图1所示，单个图像捕获设备108被布置在第一透明显示器104和第二透明显示器106之间的壳体102中。然而，一个或多个图像捕获设备可以布置在前框架114上的任何位置。例如，图像捕获设备108可以布置在第一透明显示器104和/或第二透明显示器106的上方、下方、左侧和/或右侧。图像捕获设备108可以是任何类型的捕获设备，包括红外相机、红-绿-蓝(RGB)相机、其组合等。

另外，电子设备100还可以包括设置在壳体102的后框架116上的一个或多个图像捕获设备(未示出)，其中设置在后框架116上的图像捕获设备被定向为捕获与用户相关联的图像，例如，用于眼部追踪技术等。

第一投影设备110和第二投影设备112被配置为分别将图像投影到第一透明显示器104和第二透明显示器106上。第一投影设备110和第二投影设备112可以设置在壳体102内，其中光投射穿过形成在壳体102中的开口，或第一投影设备110和第二投影设备112可以设置在壳体102的表面上。

在示例性实施例中，电子设备100还可以包括输入设备和/或输出设备中的至少一个。例如，输入设备可以包括一个或多个输入设备，例如，被配置为根据声波生成电信号(其中所述电信号指示来自用户的输入)的麦克风126以及被配置为接收来自用户的触觉输入的至少一个按钮128。所述至少一个按钮128可以包括一个或多个触摸传感器，其被配置为用作电源按钮、音量按钮、菜单按钮、主页按钮、后退按钮、导航按钮(例如，向左按钮、向右按钮、向上按钮、向下按钮等)和/或其组合。输出设备可以包括一个或多个输出设备，例如被配置为输出与电子设备100相关联的声音的音频输出设备130(例如，扬声器)和振动输出设备(未示出)。

如图1和图2中所示，输入设备和/或输出设备可以与电子设备100一体地形成。例如，至少一个按钮128可以设置在电子设备100的壳体102上。此外，麦克风126可以与电子设备100的壳体102一体地形成。备选地，输入设备和/或输出设备可以与壳体102分离。例如，麦克风126可以是与电子设备100分离的设备，其中麦克风126和电子设备100通信以允许电子设备100与麦克风126进行通信。

在示例性实施例中，电子设备100还可以包括被配置为检测电子设备100的状态或周围环境的一个或多个传感器(未示出)。例如，一个或多个传感器可以检测电子设备100的状态或周围环境条件，并将信号发送到电子设备100的控制器。

一个或多个传感器可以包括以下项中的至少一项：用于检测物体与电子设备100的接近度的接近传感器、用于检测电子设备100的运动或方位(例如，旋转、加速、减速和振动)的运动/方位传感器、用于检测电子设备100的周围环境中的环境照明的照度传感器或其组合。运动/方位传感器可以包括以下项中的至少一项：加速度传感器、重力传感器、地磁传感器、陀螺仪传感器、冲击传感器、GPS传感器和罗盘传感器。

图3是示出了根据本公开的各种实施例的另一电子设备的前视图。

参考图3，电子设备200是被配置为向用户显示图像的头戴式显示器。在示例性实施例中，电子设备200可以用在另类现实(AR)环境和/或虚拟现实(VR)环境中。电子设备200可以包括支撑件202、壳体204、第一图像捕获设备206和第二图像捕获设备207。

支撑件202被配置为将电子设备200固定到用户。例如，支撑件202允许电子设备200佩戴在用户上并可拆卸地耦接到用户。支撑件202可以包括头部支撑件208和/或条带210。尽管图3示出了头部支撑件208和条带210二者，但是本领域普通技术人员将认识到，电子设备200可以包括一个或多个支撑元件，其中所述支撑元件可以具有相同或不同的配置。

壳体204可以包括第一表面212和第二表面214。在示例性实施例中，第一表面212可以布置在壳体204的内部上，使得第一表面212的一部分可以与用户的面部接触。例如，第一表面212的至少一部分可以与用户的面部(例如，眼睛周围)紧密接触，其中第一表面212的这一部分可以支撑在用户的面部上。第二表面214可以位于壳体的外部上，使得第二表面214远离用户的面部定位。

第一图像捕获设备206和第二图像捕获设备207被配置为捕获图像。例如，第一图像捕获设备206和第二图像捕获设备207可以捕获电子设备200外部的图像，例如，在电子设备200的周围环境内捕获图像。

第一图像捕获设备206和第二图像捕获设备207可以是任何类型的图像捕获设备。例如，第一图像捕获设备206或第二图像捕获设备207可以是红外相机、RGB相机、其组合等。另外，第一图像捕获设备206和第二图像捕获设备207可以是相同类型的图像捕获设备或不同类型的捕获设备。

如图3所示，电子设备200包括第一图像捕获设备206和第二图像捕获设备207。然而，电子设备200可以包括一个或多个图像捕获设备。每个图像捕获设备可以以相对于壳体204在任何位置和/或以任何配置布置。另外，第一图像捕获设备206和/或第二图像捕获设备207可以以各种角度定向，以从各种视角捕获电子设备200的周围环境的图像。例如，当电子设备200没有支撑在用户的头部上时，第一图像捕获设备206和/或第二图像捕获设备207可以被布置和定向在与用户的眼睛基本相同的位置，以便捕获与用户的视线类似的视线内的图像。另外，第一图像捕获设备206和/或第二图像捕获设备207可以备选地或附加地布置和定向为捕获用户视线之外的图像。

在示例性实施例中，被配置为显示图像的显示器(未示出)可以设置在壳体204内。显示器可以是被配置为向用户显示图像的单个显示器或多个显示器。例如，显示器可以以各种模式操作以生成二维或三维图像。例如，显示器可以包括以下项中的至少一项：显示面板、透镜、激光器和投影仪，以创建要由用户观看的二维或三维图像，包括立体图像、全息图等。

第一图像捕获设备206和第二图像捕获设备207可以用于捕获图像，其中所述图像创建要在设置于壳体204中的显示器上向用户显示的立体图像。例如，参考图3，第一图像捕获设备206可以具有与用户的左眼相关联的焦点，并且第二图像捕获设备207可以具有与用户的右眼相关联的焦点，其中所述第一图像捕获设备206和所述第二图像捕获设备207被布置为间隔眼睛宽度以捕获两个不同的图像。可以处理由第一图像捕获设备206和第二图像捕获设备207捕获的图像以创建三维和/或立体图像。

在示例性实施例中，电子设备200还可以包括设置在壳体204中的一个或多个图像捕获设备(未示出)，其中设置在壳体204中的图像捕获设备被定向为捕获与用户相关联的图像，例如，用于眼部追踪技术等。

尽管图3未示出，但是电子设备200还可以包括输入设备和/或输出设备中的至少一个。例如，输入设备可以包括一个或多个输入设备，例如，被配置为根据声波生成电信号(其中所述电信号指示来自用户的输入)的麦克风以及被配置为接收来自用户的触觉输入的至少一个按钮。所述至少一个按钮可以包括一个或多个触摸传感器，其被配置为用作电源按钮、音量按钮、菜单按钮、主页按钮、后退按钮、导航按钮(例如，向左按钮、向右按钮、向上按钮、向下按钮等)和/或其组合。输出设备可以包括一个或多个输出设备，例如被配置为输出声音的音频输出设备(例如，扬声器)和振动输出设备。

输入设备和/或输出设备可以与电子设备200一体地形成。例如，至少一个按钮可以设置在电子设备200的壳体204上。此外，麦克风可以与电子设备200的壳体204一体地形成。备选地，输入设备和/或输出设备可以与壳体204分离。例如，麦克风可以是与电子设备200分离的设备，其中麦克风和电子设备200通信以允许电子设备200与麦克风进行通信。

在示例性实施例中，电子设备200还可以包括被配置为检测电子设备200的状态或周围环境的一个或多个传感器(未示出)。例如，一个或多个传感器可以检测电子设备200的状态或周围环境条件，并将信号发送到电子设备200的控制器。

一个或多个传感器可以包括以下项中的至少一项：用于检测物体与电子设备200的接近度的接近传感器、用于检测电子设备200的运动或方位(例如，旋转、加速、减速和振动)的运动/方位传感器、用于检测电子设备200的周围环境中的环境照明的照度传感器或其组合。运动/方位传感器可以包括以下项中的至少一项：加速度传感器、重力传感器、地磁传感器、陀螺仪传感器、冲击传感器、GPS传感器和罗盘传感器。

图4是示出了根据本公开的各种实施例的电子设备的配置的框图。

参照图4，电子设备400包括图像显示设备402、输入设备404、缓冲器406、存储器408、立体图像合成器设备410和控制器412。在示例性实施例中，电子设备400可以是电子设备100和/或电子设备200。

图像显示设备402被配置为向电子设备400的用户显示图像。图像显示设备402可以是被配置为向用户显示图像的单个显示器或多个显示器。例如，图像显示设备402可以用于向用户显示二维图像和/或三维图像。例如，图像显示设备402可以包括以下项中的至少一项：显示面板、透镜、激光器和投影仪，以创建二维或三维图像，包括全息图。

输入设备404被配置为接收输入。输入设备404可以包括一个或多个不同类型的输入设备。例如，输入设备404可以是诸如按钮的触觉输入设备或诸如麦克风的音频输入设备。输入设备404可以包括被配置为接收来自用户的输入的一个或多个按钮。在示例性实施例中，用户可以与输入设备404交互以打开和关闭电子设备400，或者选择和/或搜索菜单项或图标。输入设备404还可以是与电子设备400通信的单独设备，其中在输入设备404处接收输入，然后将关于已经检测到输入的指示传送到电子设备400。

当输入设备404包括至少一个按钮时，所述按钮可以包括以下项中的一个或多个：电源按钮、音量按钮、菜单按钮、主页按钮、后退按钮、导航按钮(例如，向左按钮、向右按钮、向上按钮、向下按钮等)或其组合。在示例性实施例中，输入设备404还可以包括键区，以从用户接收按键输入从而控制电子设备400。键区可以是与电子设备400耦接的物理键区、由电子设备400的投影仪显示的虚拟键区或其组合。

当输入设备404包括麦克风时，麦克风根据声波生成电信号，其中所述电信号指示来自用户的输入。

缓冲器406被配置为临时存储信息。例如，缓冲器406可以被配置为临时存储图像内容信息。缓冲器406可以包括一个或多个缓冲器。

存储器408被配置为存储信息。存储器408包括至少一个非暂时性计算机可读存储介质。在示例性实施例中，存储器408可以包括与电子设备400功能性连接的外部存储设备和与电子设备400一体形成的储存设备(诸如，硬盘驱动器)中的至少一个。

立体图像合成器设备410被配置为生成要在图像显示设备402上显示的立体图像。在示例性实施例中，立体图像合成器设备410可以根据从缓冲器406发送的图像对象和/或来自存储器408的图像生成要在图像显示设备402上显示的立体图像。

控制器412被配置为控制电子设备400的一个或多个操作。控制器412可以包括至少一个处理器。在示例性实施例中，控制器412被配置为接收对与电子设备400的应用相关联的输入加以指示的第一输入。在接收到第一输入之后，可以在电子设备400的缓冲器406中生成图像对象。可以基于在缓冲器406中生成的图像对象来生成第一图像。第一图像可以存储在存储器408中。立体图像可以是由立体图像合成器设备410基于第一图像生成的，其中立体图像随后被显示在图像显示设备402上。立体图像可以是仅与应用相关联的图像，或立体图像可以与用户可得到的完整视图(例如，一个或多个应用界面、类似背景或桌面的图像等)相关联。

在另一示例性实施例中，在将立体图像显示在图像显示设备402上之后，控制器412可以确定是否针对每一帧更新立体图像。当确定要更新立体图像时，可以在缓冲器406中生成反映图像的变化或修改的第二图像对象，可以生成和/或存储第二图像，并且可以基于第二图像生成第二立体图像。当确定不需要更新立体图像时，立体图像合成器设备410可以使用在存储器408中存储的第一图像重新生成立体图像，或继续显示立体图像而不重新生成或重新渲染该图像。

在另一示例性实施例中，控制器412被配置为接收对执行应用加以指示的输入。立体图像合成器设备410可以在完全执行应用之前基于在存储器408中存储的图像来生成图像。

在另一示例性实施例中，控制器412被配置为接收对用于关闭当前执行的应用的请求加以指示的输入。可以捕获该应用的屏幕图像，并且可以基于所捕获的屏幕图像在缓冲器406中生成图像。该图像可以存储在存储器408中并当接收到用于执行该应用的输入时由立体图像合成器设备410使用。

尽管不是必需的，但是电子设备400还可以包括图像捕获设备414、传感器416、收发机418、输出设备420和电源管理设备422。

图像捕获设备414被配置为捕获图像。图像捕获设备414可以包括一个或多个相机，例如红外相机RGB相机、其组合等。在示例性实施例中，图像捕获设备414包括透镜系统和图像传感器，并且还可以包括闪光灯。第一捕获设备414将通过透镜系统输入(或捕获)的光学信号转换为电图像信号，并将电图像信号输出到控制器412。图像捕获设备414可以捕获移动对象或静止对象。此外，图像捕获设备414还可以被配置为检测运动或姿势。

传感器416被配置为检测电子设备400的状态和/或电子设备400的周围环境的状态。传感器416可以包括一个或多个传感器，其检测电子设备的状态或周围环境条件，并将对检测加以指示的信号发送到控制器412。

传感器416可以包括以下项中的至少一项：用于检测物体与电子设备400的接近度的接近传感器、用于检测电子设备400的运动或方位(例如，旋转、加速、减速和振动)的运动/方位传感器、用于检测电子设备400的周围环境中的环境照明的照度传感器或其组合。运动/方位传感器可以包括以下项中的至少一项：加速度传感器、重力传感器、地磁传感器、陀螺仪传感器、冲击传感器、GPS传感器和罗盘传感器。

收发机418被配置为发送和/或接收信号。在示例性实施例中，收发机418用于与诸如电子设备或外围设备/辅助设备的一个或多个设备建立通信。收发机418可以包括被配置为发送和/或接收短程和/或远程通信的一个或多个设备。例如，短程通信可以包括蓝牙、红外数据协会(IrDA)、Wi-Fi、近场通信(NFC)等中的至少一个。

输出设备420被配置为向用户提供信息。例如，输出设备420可以是被配置为向用户或与用户不同的另一方输出声音的扬声器。

电源管理设备422被配置为管理电子设备的电源。例如，电源管理设备422可以包括电源管理集成电路(PMIC)、充电器IC、电池和/或电池量表。电池可以存储或产生电力以向电子设备供电。电池量表测量电池的各种属性。例如，电池量表可以配置为测量电池的剩余容量、电压、电流和/或温度。在示例性实施例中，与电池状态相关联的指示符可以显示在电子设备400的图像显示设备402上。

图5至图8是示出了根据本公开的各种实施例的在电子设备的显示器上显示图像的方法的流程图。

参考图5至图8，将参考图4中所示的示例性电子设备400来讨论这些方法。然而，可以用包括电子设备100和电子设备200在内的任何合适的便携式图像设备来实现这些方法。另外，尽管为了说明和讨论的目的，图5至图8描绘了以特定顺序执行的步骤，但是这里讨论的方法不限于任何特定的顺序或布置。通过使用本文提供的公开内容，本领域技术人员将理解，可以以各种方式省略、重新布置、组合和/或调整所述方法的各步骤。

参考图5，在操作501，在电子设备400处接收输入。例如，可以经由输入设备412提供输入或选择。所述输入可以与应用相关联。在示例性实施例中，可以在执行或启动应用之后，检测诸如选择或字母数字输入的输入事件。例如，当应用是日历或日程安排应用时，可以显示诸如月份视图图像的初始图像。可以检测与对一个月中的某天(例如，第15天)的选择相关联的输入或与要调度的事件的输入相关联的输入。

在操作503，可以生成第一图像对象。例如，可以在检测到输入之后在缓冲器407处生成第一图像对象。第一图像对象可以对应于图像内容，其中一个比特表示一个像素或多个比特表示一个像素。在示例性实施例中，第一图像对象可以具有第一图像格式，诸如，未压缩的位图格式。

在示例性实施例中，可以通过定义图像上下文参数(例如，大小、不透明度和比例)，基于图像上下文参数向缓冲器提供图像内容，以及根据所述图像内容和所述图像上下文参数生成图像对象，来生成第一图像对象。

在操作505，生成第一图像。例如，可以压缩和/或缩放第一图像以创建第一图像，其中所述第一图像具有与第一图像对象不同的格式。在示例性实施例中，第一图像格式可以包括JPEG、MPEG或PGN格式。

在示例性实施例中，可以使用背景处理来生成第一图像。分层和/或步进格式(progressive format)可以用于改善处理时间并减少感知延迟。第一图像可以是捕捉或捕获的图像或具有静态纹理格式。另外，第一图像可以被压缩或具有步进格式编码。

在另一示例性实施例中，当生成第一图像时，可以将附加处理和/或附加信息添加到第一图像对象信息。例如，第一图像对象可以对应于应用的快照或屏幕截图。可以执行各种管理和组织技术，包括生产力和/或企业相关工作以及附加的成像或计算机视觉任务。此外，还可以执行定制的缩放和大小调整，例如，接缝雕刻。此外，可以向第一图像对象添加附加信息，例如，嵌入的版权和/或隐私信息，也可以添加预定义的(例如，定制的)或现场的(例如，动态的)注释、图标、时间戳等。

在操作507，生成并显示第一立体图像。例如，第一立体图像是由立体图像合成器设备410基于第一图像生成的。立体图像合成器设备410可以生成左图像和右图像以表示第一图像。在立体图像合成器设备410生成第一立体图像之后，第一立体图像被显示在图像显示设备404上。

在示例性实施例中，还可以将第一图像存储在存储器408中。另外，立体图像合成器设备410可以通过从存储器408检索第一图像来生成立体图像，或者也可以将第一图像从缓冲器406发送到立体图像合成器设备410以用于生成立体图像，从而减少调用和/或处理时间。

参考图6，在操作601，确定是否更新立体图像。例如，针对每一帧，控制器可以确定是否更新立体图像。可以基于各种事件进行所述确定。例如，各种事件可以包括检测到用户事件(例如，输入)、由应用定义的时间事件已经流逝、创建在屏幕上显示的光标的闪烁等。

在操作603，当确定不需要更新立体图像时，连续显示立体图像。例如，立体图像合成器设备410可以使用在存储器408中存储的第一图像重新生成立体图像，或继续显示立体图像而不重新生成或重新渲染该图像。

在操作605，当确定要更新立体图像时，可以在缓冲器406中生成反映所述图像的变化或修改的第二图像对象。

在操作607，可以在存储器408处生成和/或存储第二图像，并且在操作609，类似于上述过程，可以基于第二图像生成第二立体图像。

在示例性实施例中，第二图像可以表示与应用相关联的整个图像。备选地，可以更新第二图像对象，使得仅修改图像内容数据的一部分，其中所述图像内容数据的所述部分是基于事件修改的。

参考图7，在操作701，接收对执行应用加以指示的输入。例如，输入设备404将输入指示符提供给控制器412，其中控制器412确定该输入与发起应用的执行或启动相关联。

在操作703，检索存储的图像。例如，控制器412可以从存储器408检索存储的图像。存储的图像可以表示该应用的初始化屏幕。

在操作705，生成并显示立体图像。例如，立体图像合成器设备410可以基于存储的图像来生成立体图像，其中将所生成的立体图像显示在图像显示设备402上。可以在完成应用的执行之前或之后生成和/或显示立体图像。例如，如果在完成应用的执行之前显示立体图像，则用户可能不会察觉到执行和/或与应用的执行相关联的处理时间的任何延迟。

参考图8，在操作801，接收用于关闭应用的请求。例如，控制器412可以接收对已经接收到用于关闭应用的请求加以指示的输入。

在操作803，捕获应用的屏幕。例如，当接收到用于关闭应用的请求时，可以在当前显示的屏幕上执行快照或屏幕截图。

在步骤805，生成图像。例如，可以将与快照或屏幕截图相关联的信息传送到缓冲器406。可以压缩或处理与快照或屏幕截图相关联的图像信息以生成图像。

在操作807，存储该图像。例如，当在缓冲器406中生成图像之后，可以将图像传送到存储器408以进行存储。

尽管关于接收用于关闭应用的指示描述了上述方法，但是可以在接收到对存储用于生成立体图像的图像加以指示的输入的任何时间执行该处理。另外，多个图像可以存储在存储器408中，其中立体图像合成器设备410可以在执行应用期间在不同时间使用多个图像生成立体图像。

在示例性实施例中，可以将应用的快照捕获到截屏位图纹理中。可以对位图纹理执行背景处理以允许纹理被渲染为立体图像。可以在不同深度针对背景应用或未聚焦的应用来渲染图像。另外，对于背景应用，可以以混合方式渲染图像，其中与一些背景应用相关联的图像被渲染为静态纹理，而与其他背景应用相关联的图像被渲染为实时应用(例如，根据由缓冲器提供的图像对象生成每一帧，其中图像对象是没有经过预处理或预缩放的)。另外，可以使用不同的分辨率纹理在不同深度处渲染与背景应用相关联的图像，以优化三维虚拟现实观看体验。

此外，可以基于应用场景的类型(诸如生产力、企业、教育、社交网络等)来将与应用相关联的每个图像渲染为具有不同的大小和/或不同的细节水平。例如，在游戏虚拟现实应用中，可以捕获左屏幕和/或右屏幕，并且可以在缩小的快照或用于动画的纹理/快照阵列中将标题添加到左屏幕和/或右屏幕，其中纹理显示在背景中。在娱乐/媒体虚拟现实应用中，可以捕获左屏幕和/或右屏幕，并且保存应用的屏幕截图并将其存储在存储器408中。在医疗虚拟现实应用中，可以捕获左屏幕和/或右屏幕，并且可以保存用于动画的纹理或快照阵列和/或可以添加隐私信息。在教育虚拟现实应用中，可以捕获左屏幕和/或右屏幕，并且可以保存应用的截屏和/或可以添加动画徽标或纹理阵列等。在由图像或纹理支配的静态非虚拟现实应用中，可以捕获整个屏幕并且可以执行接缝雕刻等以用于更好地进行内容感知大小调整等。在由字母和数字支配的静态非虚拟现实应用中，可以捕获整个屏幕并且可以捕获应用的截屏以保留纹理或字母而无需太多处理。在由图像和纹理支配的交互/互连的非虚拟现实应用中，可以捕获整个屏幕并且可以执行接缝雕刻以调整用于动画的纹理/快照阵列的大小或捕获用于动画的纹理/快照阵列。在由字母和数字支配的交互/互连的非虚拟现实应用中，可以捕获整个屏幕，其中可以捕获截屏而无需太多处理并捕获用于动画的纹理阵列。在系统屏幕、虚拟键盘、通知等应用中，可以捕获整个屏幕或者可以添加与可以捕获屏幕的应用相关联的窗口和注释等。

应当认识到，根据权利要求和说明书中的描述的本公开的各种实施例可以实现为硬件、软件或硬件和软件的结合的形式。

任何这样的软件可以存储在非暂时性的计算机可读存储介质中。非暂时性的计算机可读存储介质存储一个或多个程序(软件模块)，所述一个或多个程序包括指令，所述指令在被电子设备中的一个或多个处理器执行时使电子设备执行本公开的方法。

任何这样的软件可以以易失性或非易失性存储器(例如，如只读存储器(ROM)的存储设备，不管是否可擦除或可重写)的形式存储，或以存储器(例如，随机存取存储器(RAM)、存储芯片、设备或集成电路)的形式存储，或存储在例如压缩盘(CD)、数字多功能盘(DVD)、磁盘或磁带等光或磁可读介质上。应该认识到，存储设备和存储介质是适于存储程序的非暂时性机器可读存储器的多个实施例，其中所述程序包括在被执行时实现本公开的各种实施例的指令。因此，各种实施例在本说明书中提供了包括用于实现由任何一个权利要求要求保护的装置或方法的代码在内的程序，以及存储这样的程序的非暂时性机器可读存储器。

尽管参考本公开的各种实施例示出并描述了本公开，然而本领域技术人员应理解，可以在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的前提下，进行形式和细节上的各种改变。本公开的各种实施例仅被描述为示例，而不是为了限制本公开的范围。因此，本公开的范围应被理解为包括可以在不脱离本公开的技术精神的情况下做出的任意和所有修改。

Claims (15)

1.一种在电子设备上显示图像的方法，所述方法包括：

接收与应用相关联的第一输入；

在所述电子设备的缓冲器中生成第一图像对象；

将所述第一图像对象存储在所述电子设备的存储器中；

使用在所述电子设备的存储器中存储的所述第一图像对象生成第一图像；以及

在所述电子设备的图像显示设备上显示所述第一图像。

2.根据权利要求1所述的方法，其中，生成所述第一图像对象包括：

在便携式设备的缓冲器中定义图像上下文参数；

基于所述图像上下文参数向所述缓冲器提供图像内容；以及

根据所述图像内容和所述图像上下文参数来生成所述第一图像对象。

3.根据权利要求2所述的方法，其中，所述图像上下文参数包括大小、不透明度和比例中的至少一个。

4.根据权利要求1所述的方法，其中，所述第一图像对象具有位图图像文件格式。

5.根据权利要求1所述的方法，其中，所述第一图像对象对应于与所述应用相关联的屏幕截图。

6.根据权利要求1所述的方法，其中，所述第一图像包括立体图像。

7.根据权利要求1所述的方法，其中，使用在所述存储器中存储的第一图像对象生成第一图像是针对每一帧执行的，其中，在所述电子设备的显示器上显示所述第一图像。

8.根据权利要求1所述的方法，其中，所述第一输入是当在所述电子设备处执行所述应用之后接收的。

9.根据权利要求8所述的方法，还包括：

接收对用于执行所述应用的请求加以指示的第二输入，所述第二输入是在所述第一输入之前接收的；以及

基于所述第二输入在所述电子设备的显示器上显示第二图像，

其中所述第二图像对应于所述应用的初始屏幕。

10.根据权利要求9所述的方法，其中，所述第二图像是从所述电子设备的存储器加载的。

11.根据权利要求10所述的方法，其中，所述第二图像对象基于在先前执行所述应用期间所述应用的屏幕截图。

12.根据权利要求1所述的方法，还包括：

接收对用于关闭所述应用的请求加以指示的第三输入；

在接收到所述第三输入之后捕获所述应用的屏幕图像；

基于所捕获的所述应用的屏幕图像来生成第二图像对象；

基于所述第二图像对象来生成第二图像；以及

将所述第二图像存储在所述电子设备的存储器中。

13.根据权利要求12所述的方法，其中，生成所述第二图像对象包括：

在所述电子设备的缓冲器中定义图像上下文参数；

基于所述图像上下文参数，将与所捕获的所述应用的屏幕图像相对应的图像内容提供给所述缓冲器；以及

根据所述图像上下文参数和与所捕获的所述应用的屏幕图像相对应的图像内容，生成所述第二图像。

14.根据权利要求1所述的方法，其中，所述第一图像对象的格式与所述第一图像的格式不同。

15.一种电子设备，被布置为执行根据权利要求1至14之一所述的方法。