CN110347463B - 图像处理方法、相关设备及计算机存储介质 - Google Patents

Abstract

本发明实施例公开了一种图像处理方法，包括：计算设备获取M个应用界面各自的绘制指令集，所述绘制指令集包括至少一个绘制指令，用于对应实现应用界面的绘制；对所述M个应用界面各自的绘制指令集进行合成处理，获得目标绘制指令集，所述目标绘制集用于绘制所述M个应用界面组合形成的所需显示的待显示界面；根据所述目标绘制指令集，生成所述待显示界面以显示。采用本发明实施例，能够提升图像处理效率。

Description

图像处理方法、相关设备及计算机存储介质

技术领域

本发明涉及图像技术领域，尤其涉及图像处理方法、相关设备及计算机存储介质。

背景技术

随着终端技术的不断发展，以手机为代表的终端已广泛应用于生活中。为提供灵活的人机交互，终端支持提供界面合成和显示的能力，其会涉及图像渲染、图像显示等领域。从硬件角度整个过程将体现在终端的中央处理器(central processing unit，CPU)、图像处理器(graphics processing unit，GPU)和硬件显示器(例如显示屏)等器件上。

请参见图1示出多界面显示的处理逻辑框图。如图1以终端需显示4个应用界面为例，分别为应用界面1～应用界面4。终端通过CPU为每个应用界面生成一个渲染指令，然后通过GPU实现该渲染指令所对应应用界面的渲染，获得一个缓存buffer图像(也可称为buffer图层)。最后通过硬件显示器对获得的4个buffer图像合成为一个显示图像，以展示给用户查看。

然而在实践中发现：当终端中所需显示的界面较多时，可能超过了硬件显示器的合成能力，进而无法实现图像合成。或者，终端将图像合成迁移至GPU中，这无疑将增加GPU的工作负荷、带来额外的功耗损失、延长图像处理时间、容易出现图像丢失等问题。

发明内容

本发明实施例公开了图像处理方法、相关设备及计算机存储介质，能够解决现有技术中存在的无法实现图像合成或GPU工作负荷大等问题。

第一方面，本发明实施例公开提供了一种图像处理方法，所述方法包括：计算设备获取M个应用界面各自的绘制指令集，该绘制指令集中包括有一个或多个绘制指令，该绘制指令用于实现相应应用界面的绘制。进一步计算设备可对M个应用界面各自的绘制指令集进行合成处理，获得目标绘制指令集，该目标绘制指令集用于绘制M个应用界面组合形成的所需显示的待显示界面。最后，计算设备可根据目标绘制指令集生成待显示界面，以显示给用户查看。

通过实施本发明实施例，能够解决现有技术中存在的无法实现图像合成、或GPU工作负荷、功耗损失以及图像处理时间较大等问题，有利于提升图像处理的效率。

结合第一方面，在一些可能的实施例中，计算设备根据M个应用界面各自的绘制指令集，获得每个绘制指令集对应绘制应用界面中包括的图像元素的信息，该图像元素的信息用于描述图像元素。进一步可对每个绘制指令集对应绘制应用界面中包括的图像元素的信息进行合成处理，获得目标绘制指令集。该目标绘制指令集携带有待显示界面中包括的图像元素的信息，该待显示界面为对M个应用界面进行图像元素合成处理后获得的界面。

结合第一方面，在一些可能的实施例中，计算设备对每个绘制指令集对应绘制应用界面中包括的图像元素的信息进行合成处理，获得合成绘制指令集。该合成绘制指令集为计算设备中能被中央处理器CPU支持识别/运行的绘制指令集。进一步计算设备可将合成绘制指令集转换为目标绘制指令集，该目标绘制指令集为计算设备中能被图像处理器GPU支持的绘制指令集。

结合第一方面，在一些可能的实施例中，计算设备可根据目标绘制指令集，绘制获得待显示界面中包括的图像元素。然后对待显示界面中包括的图像元素进行渲染，从而获得待显示界面，进一步可将该待显示界面显示在显示屏上，以供用户查看。

结合第一方面，在一些可能的实施例中，计算设备在检测到第一应用界面中图像元素的信息发生变化时，可生成局部绘制指令集。该局部绘制指令集用于对第一应用界面中发生变化的图像元素进行更新，该第一应用界面为M个应用界面中的任一个。相应地计算设备可根据该局部绘制指令集，对第一应用界面中发生变化的图像元素进行更新。

结合第一方面，在一些可能的实施例中，M个应用界面支持在至少一个显示屏中显示。

结合第一方面，在一些可能的实施例中，在M个应用界面支持在同一显示屏中显示时，计算设备生成的待显示界面的数量为1。

结合第一方面，在一些可能的实施例中，在M个应用界面支持在N个显示屏中显示时，生成的待显示界面的数量为N，N为自定义设置的正整数。其中，同一显示屏中显示的至少一个应用界面与该同一显示屏的待显示界面对应。即，计算设备可根据同一显示屏中显示的每个应用界面各自的绘制指令集，生成该同一显示屏中待显示界面所对应的目标绘制指令集，进而根据该目标绘制指令集生成该同一显示屏中的待显示界面。

第二方面，本发明实施例提供了一种计算设备，所述计算设备包括用于执行如上第一方面所述方法的功能单元。

第三方面，本发明实施例提供了又一种计算设备，包括存储器及与所述存储器耦合的处理器；所述存储器用于存储指令，所述处理器用于执行所述指令；其中，所述处理器执行所述指令时执行上述第一方面所描述的方法。

在一些可能的实施方式中，所述计算设备还包括与所述处理器耦合的显示器，所述显示器用于在所述处理器的控制下显示界面(具体可为应用界面或待显示界面等)。

在一些可能的实施方式中，所述终端设备还包括通信接口，所述通信接口与所述处理器通信，所述通信接口用于在所述处理器的控制下与其他设备(如网络设备等)进行通信。

第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储了用于业务切换处理的程序代码。所述程序代码包括用于执行上述第一方面所描述的方法的指令。

通过实施本发明实施例，能够解决现有技术中存在的无法实现图像合成、或者GPU工作负荷、功耗损失和图像处理时间较大等问题。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍。

图1是现有技术提供的图像处理的框架示意图。

图2是本发明实施例提供的设备框架示意图。

图3是本发明实施例提供的一种图像处理方法的流程示意图。

图4是本发明实施例提供的一种图像处理的框架示意图。

图5是本发明实施例提供的另一种图像处理的框架示意图。

图6是本发明实施例提供的一种计算设备的结构示意图。

图7是本发明实施例提供的另一种计算设备的结构示意图。

具体实施方式

下面将结合本发明的附图，对本发明实施例中的技术方案进行详细描述。

申请人在提出本申请的过程中还发现：采用上述图1界面显示的处理框图中，每个界面图像的渲染独占一个渲染通道，而后计算设备才对每个通道渲染后的buffer图像进行统一合成。当发现硬件显示器的合成能力不足时，才调用GPU合成，这样会降低图像合成效率、且图像渲染和图像合成均使用GPU，还可能发生资源竞争冲突。

为解决上述问题，本申请提出一种图像处理方法、所述方法适用的框架和相关设备。请参见图2，是本发明实施例提供的一种计算设备的系统框架示意图。如图2所示的计算设备200中包括应用程序(app)201、应用界面202、应用程序编程接口203(applicationprogramming interface，API)、图像处理器驱动204(GPU driver)、图像处理器205GPU、界面管理引擎206(也可称图像管理引擎，surfacefllinger)、硬件合成器207和显示器208。其中：

应用程序201可为系统自定义安装在计算设备200中的，例如根据用户喜欢或实际需求在计算设备200中部署诸如微信、微博等应用程序。

应用界面202具体可为应用程序201呈现给用户查看的展示界面，该应用界面202支持在显示屏中显示。应用界面202的数量并不做限定，其与应用程序201有关。具体的，一个应用程序201可对应有一个或多个应用界面202，一个应用界面202仅对应一个应用程序201。

在实际应用中，当应用界面202的数量有多个时，其可来源于一个或多个应用程序201，这些应用界面202可在同一个显示屏中显示，或者在不同的显示屏中显示，每个显示屏中支持显示应用界面202的数量并不做限定。

应用程序编程接口API 203用于获得应用界面202的绘制指令集，该绘制指令集中包括有一个或多个绘制指令，每个绘制指令均用于实现应用界面202的绘制，具体可用于实现应用界面中图像元素的绘制，该图像元素是指用于构成应用界面的最小要素，例如点、线、面等，也可为应用界面中包括的物体，例如杯子、小狗、行人等。

在实际应用中，API可以OpenGL ES、SkiaGL/SkiaVulkan等实现。

图像处理器驱动204用于驱动或启动图像处理器205。

图像处理器GPU 205用于处理界面，例如实现界面中图像元素的渲染等。

界面管理引擎206用于对界面进行管理，例如对应用界面202或者对GPU的处理界面进行管理等。

硬件合成器207用于对至少一个界面进行合成，以获得一个合成界面(也可称为待显示界面)，关于如何实现界面的合成具体在本申请下文详述。本申请中，“界面”和“图像”可相互替换使用，不做限定。示例性地，硬件合成器207可对GPU渲染后的多个界面进行合成，以获得合成图像。这里的合成包括但不限于去除覆盖图像区域、图像隐藏(例如隐藏覆盖图像区域)、图像平移等，不做限定。

显示器208用于显示界面，例如显示硬件合成器207合成的待显示界面。该显示器208可如显示屏等器件实现。

在实际应用中，硬件合成器207和显示器208可在计算设备中单独部署，也可统一部署。当硬件合成器207和显示器208作为一个部件统一部署时，其也可称为硬件显示器。

为解决现有图像处理方案中存在的诸如无法实现图像合成、GPU工作负荷较大、图像合成效率低、存在资源竞争冲突等问题，本申请特在计算设备200中设计合成模块209。其中，该合成模块209设计在应用界面202和API203之间，用以实现多应用界面的合成。进而减少输入GPU205中界面处理的数据量，降低GPU的渲染负载，避免后续受限于硬件合成器的合成能力，再次切换到GPU中实现界面合成，发生GPU渲染和合成存在资源竞争冲突等问题。从而能减轻GPU的工作负载，节省设备功耗，缩短图像处理时间，不易出现图像丢失等问题，有利于提升图像处理的效率和可靠性。

具体的合成模块209用于对多个应用界面202进行合成处理，以获得一个合成界面。具体的，合成模块209用于对多个应用界面202各自的绘制指令集进行合成处理，以获得一个合成绘制指令集，该合成绘制指令集用于指示合成界面，或实现合成界面的绘制。每个绘制指令集用于实现一个应用界面的绘制，该绘制指令集中包括有一个或多个绘制指令，每个绘制指令用于实现应用界面中图像元素的绘制，该图像元素包括但不限于点、线、面以及物体等。可选地，合成模块209可将该合成界面输入GPU205中处理。关于合成模块209如何实现多应用界面的合成，具体在本申请下文详述。

请参见图3，是本发明实施例提供的一种图像处理方法的流程示意图。如图3所示的方法包括如下实施步骤：

步骤S301、计算设备获取M个应用界面各自的绘制指令集，该绘制指令集中包括至少一个绘制指令，用于对应实现应用界面的绘制。M为系统自定义设置的正整数。

计算设备获取待处理的M个应用界面，通过自身CPU的计算能力，将M个应用界面对应封装为M个绘制指令集。每个绘制指令集用于实现一个应用界面的绘制，该绘制指令集中包括有至少一个绘制指令，每个绘制指令均用于绘制应用界面中的图像元素。

步骤S302、计算设备对所述M个应用界面各自的绘制指令集进行合成处理，获得目标绘制指令集。

计算设备通过合成模块可对M个应用界面各自的绘制指令集进行合成处理，以获得目标绘制指令集。具体的，计算设备可获得每个绘制指令集对应绘制应用界面中包括的图像元素的信息，该图像元素指构成应用界面的要素，例如点、线、面或物体等。该图像元素的信息用于描述图像元素，例如图像元素在应用界面中的位置、图像元素的形状等。进一步计算设备可根据M个应用界面各自绘制指令集中包括的图像元素的信息进行合成处理，例如去除重复的图像元素(即去除界面中重复的图像区域)，以将M个应用界面合成一个最终的合成应用界面(也可称为待显示界面)，该合成应用界面中包括有合成的至少一个图像元素的信息。同时，计算设备可获得目标绘制指令集，该目标绘制指令集携带有待显示界面中包括的各图像元素的信息，以便后续计算设备根据该目标绘制指令集获得该待显示界面。

作为一种可能的具体实施方式，计算设备通过自身CPU对M个应用界面各自绘制指令集中包括的图像元素的信息进行合成处理后，可获得合成绘制指令集。该合成绘制指令集为CPU所支持识别的绘制指令集。为便于后续图像处理器GPU的处理，计算设备可将该合成绘制指令集转换为目标绘制指令集，该目标绘制指令集为GPU支持识别的指令集，例如OpenGL等。便于后续计算设备中GPU根据该目标绘制指令集获得待显示界面。

具体地，计算设备可根据M个应用界面在显示屏中显示的顺序，对应获得M个应用界面各自绘制指令集的排列顺序(L₁，L₂，...L_m)。即，应用界面在显示屏中显示的顺序即为该应用界面的绘制指令集的排列顺序。进一步计算设备可从最顶层(即第一个)应用界面的绘制指令集开始，作为参考基准的绘制指令集进行合成。计算设备将获取第二个应用界面的绘制指令集，将第一个应用界面的绘制指令集中包括图像元素的信息和第二个应用界面的绘制指令集中包括图像元素的信息，例如位置、尺寸、透明属性(是否重叠等)等进行比较，如果第二个应用界面的绘制指令集中包括的图像元素完全被第一个应用界面遮挡，则直接丢弃该图像元素，不参与合成。如果第二个应用界面的绘制指令集中包括的图像元素被部分遮挡，则对应修改第二个应用界面的绘制指令集中包括图像元素的尺寸和位置等信息，以将该修改后的图像元素合并(或合成)到第一个应用界面的绘制指令集中，从而获得新绘制指令集。如果第二个应用界面的绘制指令集中包括的图像元素未被遮挡，则将该图像元素的信息直接合成/合并到第一个应用界面的绘制指令集中，从而获得新绘制指令集。

同理，计算设备按照上述合成原理，可获取下一个应用界面的绘制指令集，将下一个应用界面的绘制指令集和新绘制指令集进行合成，以实现M个应用界面的绘制指令集的合成，从而获得目标绘制指令集。

步骤S303、计算设备根据目标绘制指令集，获得待显示界面。

步骤S304、计算设备将待显示界面显示在显示屏中。

计算设备通过GPU根据目标绘制指令集中携带有待显示界面中包括的图像元素的信息，绘制获得待显示界面；然后通过系统的的渲染通道对该待显示界面中包括的图像元素进行渲染，从而获得待显示界面。进一步可将该待显示界面送入显示通道中，以传输到显示屏中显示。

举例来说，请参见图4示出一种图像处理的框架示意图。如图4所示框架中，以M＝4为例。计算设备通过合成模块对4个应用界面各自的绘制指令集进行合成，以获得目标绘制指令集。进一步通过GPU根据该目标绘制指令集实现待显示界面的绘制和渲染，从而获得一个待显示界面。进一步将该待显示界面传递至硬件合成器(这里具体也可为显示器)中显示。

由图1和图4对比，明显发现：采用本发明实施例能够减轻GPU和硬件合成器的工作负载，达到提升图像合成性能和减少功耗的目的。换句话说，本发明实施例能够减少渲染的图像数量，减轻GPU的渲染次数，降低GPU工作负载；同时避免受限于硬件合成器的合成能力需GPU再次参与图像合成而引起的功耗增加、性能降低等问题。

在可选实施例中，当计算设备检测到第一应用界面发生变化，具体可为第一应用界面中图像元素的信息发生变化时，可生成局部绘制指令集。该局部绘制指令集用于指示重更新第一应用界面中发生变化的图像区域(即该图像区域中包括的图像元素)，第一应用界面为M个应用界面中的任意一个或多个。相应地，计算设备可将该局部绘制指令集发送给合成模块，通过合成模块对该第一应用界面中发生变化的图像区域(即图像元素)进行重绘制和重渲染，以更新第一应用界面中发生变化的图像元素，获得更新后的第一应用界面。

下面介绍本发明适用的两种应用场景。

第一种，M个应用界面在同一显示屏中排列显示。计算设备可采用如上步骤S301～S304实现M个应用界面的合成显示。示例性地，以M＝2，应用界面为活动activity界面为例。当应用从旧的activity界面(类似于上文第一应用界面)切换到新的activity界面(类似于上文第二应用界面)时，第一应用界面并未关闭释放，且第二应用界面会覆盖第一应用界面中的部分内容。可选地，当应用界面打开的数量较多，例如超过一定数量，超过硬件显示器或GPU的处理能力，会发生明显卡顿现象，图像处理效率变慢。

在图像处理过程中，计算设备可获取第一应用界面和第二应用界面各自的绘制指令集。进而对第一应用界面和第二应用界面各自的绘制指令集进行预合成处理，获得目标绘制指令集。然后目标绘制指令集通过绘制渲染通道，生成待显示界面，该待显示界面为对第一应用界面和第二应用界面合成而获得的界面。进一步计算设备可将待显示界面输出到硬件合成器(例如显示屏)上显示，无需再合成。具体可参见前述图3所述实施例中的相关阐述，这里不再赘述。

第二种，M个应用界面在N个显示屏中分屏显示，N为大于1的正整数。计算设备可根据同一显示屏中显示的至少一个应用界面各自的绘制指令集，为该同一显示屏生成一个待显示界面，该待显示界面为对同一显示屏中显示的至少一个应用界面进行合成而获得的界面，以次类推，计算设备可获得N个显示屏中各自的待显示界面。

请参见图5示出另一种图像处理的框架示意图。如图5中，以M＝5，N＝2为例。即在双显示屏中显示5个应用界面，具体的用户在第一显示屏中打开应用界面1～3，在第二显示屏中打开应用界面4和5。

在图像处理过程中，如图5所示，计算设备可获取应用界面1～3(3个应用界面)各自的绘制指令集，然后对它们进行合成处理，获得第一绘制指令集。然后通过GPU根据第一绘制指令集合进行一次GPU绘制，以实现第一显示界面的绘制和渲染，进而在第一显示屏中显示第一显示界面。

同理计算设备可采用如上原理，通过GPU同样可获得应用界面4和5对应合成的第二显示界面。可选地，在硬件合成器(这里具体可为第二显示屏)的合成能力充足的情况下，计算设备可采用传统技术，利用GPU分别对应用界面4和应用界面5进行绘制和渲染，对应获得渲染后的应用界面。然后采用硬件合成器对渲染后的应用界面4和5进行合成，以获得第二显示界面，并将其显示在第二显示屏中。具体可参见前述图1所述实施例中的相关阐述，这里不再赘述。本例图5中，以应用界面1～3采用GPU合成，应用界面4和5采用硬件合成器合成为例示出，但其并不构成限定。

通过实施本发明实施例，能够解决现有技术中存在的无法实现图像合成、或者GPU工作负荷、功耗损失和图像处理时间较大等问题，有利于提升图像合成性能，减少功耗，从而提升图像处理效率。

上述主要从计算设备的角度出发对本发明实施例提供的方案进行了介绍。可以理解的是，计算设备为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。结合本发明中所公开的实施例描述的各示例的单元及算法步骤，本发明实施例能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同的方法来实现所描述的功能，但是这种实现不应认为超出本发明实施例的技术方案的范围。

本发明实施例可以根据上述方法示例对计算设备进行功能单元的划分，例如，可以对应各个功能划分各个功能单元，也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。需要说明的是，本发明实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

在采用集成的单元的情况下，图6示出了上述实施例中所涉及的计算设备的一种可能的结构示意图。计算设备600包括：处理单元602和通信单元603。处理单元602用于对计算设备600的动作进行控制管理。示例性地，处理单元602用于支持计算设备600执行图3中步骤S302-S304，和/或用于执行本文所描述的技术的其它步骤。通信单元603用于支持计算设备600与其它设备的通信，例如，通信单元603用于支持计算设备600执行图3中步骤S301，和/或用于执行本文所描述的技术的其它步骤。可选的，计算设备600还可以包括存储单元601，用于存储计算设备600的程序代码和数据。

其中，处理单元602可以是处理器或控制器，例如可以是中央处理器(英文：Central Processing Unit，CPU)，通用处理器，数字信号处理器(英文：Digital SignalProcessor，DSP)，专用集成电路(英文：Application-Specific Integrated Circuit，ASIC)，图形处理器(graphics processing unit，GPU)，现场可编程门阵列(英文：FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本发明公开内容所描述的各种示例性的逻辑方框，模块和电路。所述处理器也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等等。通信单元603可以是通信接口、收发器、收发电路等，其中，通信接口是统称，可以包括一个或多个接口，例如终端设备与其他设备之间的接口。存储单元601可以是存储器。

可选的，所述终端设备600还可包括显示单元(图未示)。所述显示单元可用于预览或显示界面，例如使用显示单元显示应用界面或待显示界面等。在实际应用中，所述显示单元可为显示器或播放器等，本申请不做限定。

当处理单元602为处理器，通信单元603为通信接口，存储单元601为存储器时，本发明实施例所涉及的终端设备可以为图7所示的终端设备。

参阅图7所示，该计算设备610包括：处理器612、通信接口613、存储器611。可选地，计算设备610还可以包括总线614。其中，通信接口613、处理器612以及存储器614可以通过总线614相互连接；总线614可以是外设部件互连标准(英文：Peripheral ComponentInterconnect，简称PCI)总线或扩展工业标准结构(英文：Extended Industry StandardArchitecture，简称EISA)总线等。所述总线614可以分为地址总线、数据总线、控制总线等。为便于表示，图7中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

上述图6或图7所示的计算设备的具体实现还可以对应参照前述方法实施例的相应描述，此处不再赘述。

结合本发明实施例公开内容所描述的方法或者算法的步骤可以硬件的方式来实现，也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成，软件模块可以被存放于随机存取存储器(英文：Random Access Memory，RAM)、闪存、只读存储器(英文：Read Only Memory，ROM)、可擦除可编程只读存储器(英文：ErasableProgrammable ROM，EPROM)、电可擦可编程只读存储器(英文：Electrically EPROM，EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。另外，该ASIC可以位于计算设备中。当然，处理器和存储介质也可以作为分立组件存在于计算设备中。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (9)

1.一种图像处理方法，其特征在于，所述方法包括：

获取M个应用界面各自的绘制指令集，所述绘制指令集包括至少一个绘制指令，用于对应实现应用界面的绘制；

对所述M个应用界面各自的绘制指令集进行合成处理，获得目标绘制指令集，所述目标绘制集用于绘制所述M个应用界面组合形成的所需显示的待显示界面，在所述M个应用界面支持显示在N个显示屏中的情况下，生成的所述待显示界面的数量为N，其中同一显示屏中显示的至少一个应用界面和一个所述待显示界面对应；

根据所述目标绘制指令集，生成所述待显示界面以显示；

所述对所述M个应用界面各自的绘制指令集进行合成处理，获得目标绘制指令集包括：

根据所述M个应用界面各自的绘制指令集，获得每个所述绘制指令集对应绘制应用界面中包括的图像元素的信息，所述图像元素的信息用于描述所述图像元素；

对每个所述绘制指令集对应绘制应用界面中包括的图像元素的信息进行合成处理，获得目标绘制指令集，所述目标绘制指令集携带有待显示界面中包括的图像元素的信息，所述待显示界面为对所述M个应用界面进行图像元素的合成处理获得的。

2.根据权利要求1所述的方法，其特征在于，所述对每个所述绘制指令集对应绘制应用界面中包括的图像元素的信息进行合成处理，获得目标绘制指令集包括：

对每个所述绘制指令集对应绘制应用界面中包括的图像元素的信息进行合成处理，获得合成绘制指令集，所述合成绘制指令集为中央处理器CPU支持的绘制指令集；

将所述合成绘制指令集转换为目标绘制指令集，所述目标绘制指令集为图像处理器GPU支持的绘制指令集。

3.根据权利要求1或2所述的方法，其特征在于，所述根据所述目标绘制指令集，生成所述待显示界面以显示包括：

根据所述目标绘制指令集，绘制获得待显示界面中包括的图像元素；

对所述待显示界面中包括的图像元素进行渲染，获得待显示界面以显示。

4.根据权利要求1或2所述的方法，其特征在于，所述方法还包括：

当第一应用界面中图像元素的信息发生变化时，生成局部绘制指令集，所述局部绘制指令集用于对所述第一应用界面中发生变化的图像元素进行更新，所述第一应用界面为所述M个应用界面中的任一个；

根据所述局部绘制指令集，对所述第一应用界面中发生变化的图像元素进行更新。

5.根据权利要求1或2所述的方法，其特征在于，所述M个应用界面支持在

同一显示屏中显示。

6.一种计算设备，其特征在于，包括通信单元和处理单元，其中：

所述通信单元用于获取M个应用界面各自的绘制指令集，所述绘制指令集包括至少一个绘制指令，用于对应实现应用界面的绘制；

所述处理单元用于对所述M个应用界面各自的绘制指令集进行合成处理，获得目标绘制指令集，所述目标绘制集用于绘制所述M个应用界面组合形成的所需显示的待显示界面，在所述M个应用界面支持显示在N个显示屏中的情况下，生成的所述待显示界面的数量为N，其中同一显示屏中显示的至少一个应用界面和一个所述待显示界面对应；

所述处理单元还用于根据所述目标绘制指令集，生成所述待显示界面以显示;

所述处理单元用于根据所述M个应用界面各自的绘制指令集，获得每个所述绘制指令集对应绘制应用界面中包括的图像元素的信息，所述图像元素的信息用于描述所述图像元素；

对每个所述绘制指令集对应绘制应用界面中包括的图像元素的信息进行合成处理，获得目标绘制指令集，所述目标绘制指令集携带有待显示界面中包括的图像元素的信息，所述待显示界面为对所述M个应用界面进行图像元素的合成处理获得的。

7.一种计算设备，其特征在于，包括存储器及与所述存储器耦合的处理器；所述存储器用于存储指令，所述处理器用于执行所述指令；其中，所述处理器执行所述指令时执行如上权利要求1-5中任一项所述的方法。

8.根据权利要求7所述的计算设备，其特征在于，还包括与所述处理器耦合的显示器，所述显示器用于在所述处理器的控制下显示待显示图像。

9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述方法。

Images