CN117453170A

CN117453170A - 一种显示控制方法、装置及存储介质

Info

Publication number: CN117453170A
Application number: CN202311788827.9A
Authority: CN
Inventors: 雷妍; 梁志杰; 黄虎才
Original assignee: Nanjing Sietium Semiconductor Co ltd
Current assignee: Nanjing Sietium Semiconductor Co ltd
Priority date: 2023-12-25
Filing date: 2023-12-25
Publication date: 2024-01-26
Anticipated expiration: 2043-12-25
Also published as: CN117453170B

Abstract

本公开实施例公开了一种显示控制方法、装置及存储介质，该方法可以包括：将待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据，其中，所述待显示图像的图像数据是经GPU渲染生成的至少包括两个图层的图像数据；当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据；将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据；将所述第三图像数据输出至显示设备进行显示。通过该技术方案，能够适应多种处理场景并减轻了GPU的负担，从而在显示设备上呈现高画质、多分辨率的图像。

Description

一种显示控制方法、装置及存储介质

技术领域

本公开实施例涉及图像处理技术领域，尤其涉及一种显示控制方法、装置及存储介质。

背景技术

通常，对于图形处理器（Graphic Processing Unit，GPU）的渲染可以由多线程软件实现或者由多线程软件与硬件配合实现，对于多线程软件与硬件配合实现渲染的方式，具体来说，多线程软件从应用程序中接收场景数据并生成渲染指令，将所述渲染指令发送到GPU，GPU进行并行计算和图形管线处理生成渲染结果，GPU硬件负责简单的图像处理，例如，颜色校正、对比度调整等，所述图像处理通常是在渲染过程中直接应用图像数据。对于渲染结果的显示是通过图像信号处理器（Image Signal Processor，ISP）进行展示的。

对于目前大多数的游戏渲染场景来说，每一帧的运算主要包括渲染部分和逻辑部分，其中，所述渲染部分通常是由GPU完成，所述逻辑部分是实现中央处理器（CentralProcessing Unit，CPU）和GPU之间的命令交互，通常由CPU端的多线程软件实现。一般来说，所述渲染部分比所述逻辑部分消耗的时间要多得多。因此，对于多线程软件与硬件配合实现渲染的方式以及基于ISP的渲染结果的显示，存在如下缺陷：渲染处理速度较慢，软硬件分配不合理，并且基于ISP的渲染结果的显示不具备图层混合处理功能、支持的分辨率有限以及支持的算法性能低。

发明内容

有鉴于此，本公开实施例期望提供一种显示控制方法、装置及存储介质，能够适应多种处理场景并减轻了GPU的负担，从而在显示设备上呈现高画质、多分辨率的图像。

本公开实施例的技术方案是这样实现的：

第一方面，本公开实施例提供一种显示控制方法，包括：

将待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据，其中，所述待显示图像的图像数据是经GPU渲染生成的至少包括两个图层的图像数据；

当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据；

将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据；

将所述第三图像数据输出至显示设备进行显示。

第二方面，本公开实施例提供一种显示控制装置，所述装置包括：发送部分、缩放部分、混合部分以及显示部分；其中，

所述发送部分，经配置为将待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据，其中，所述待显示图像的图像数据是经GPU渲染生成的至少包括两个图层的图像数据；

所述缩放部分，经配置为当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据；

所述混合部分，经配置为将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据；

所述显示部分，经配置为将所述第三图像数据输出至显示设备进行显示。

第三方面，本公开实施例提供了一种计算设备，所述计算设备包括：通信接口，存储器和处理器；各个组件通过总线系统耦合在一起；其中，

所述通信接口，用于在与其他外部网元之间进行收发信息过程中，信号的接收和发送；

所述存储器，用于存储能够在所述处理器上运行的计算机程序；

所述处理器，用于在运行所述计算机程序时，执行第一方面所述显示控制方法。

第四方面，本公开实施例提供了一种计算机存储介质，所述计算机存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现第一方面所述显示控制方法。

本公开实施例提供了一种显示控制方法、装置及存储介质，通过显示控制器从显存中读取经GPU渲染生成的至少包括两个图层的图像数据，即待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据；当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以适应显示设备的分辨率或显示比例的要求并获取到经图像缩放处理的各图层的第二图像数据，将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据，将所述第三图像数据输出至显示设备进行显示。所述缩放处理和图层混合处理均是通过相应的图像算法实现的。通过该技术方案，将图像算法处理、图像缩放以及图层混合的功能通过显示控制器实现，减轻了GPU的负担。此外，既可以支持GPU渲染结果的显示还可以支持不需要GPU渲染而由CPU直接下发的图像数据的显示，因此，能够适应多种处理场景并且支持的分辨率更为丰富，从而能够在显示设备上呈现高画质、多分辨率的图像。

附图说明

图1为本公开实施例提供的一种计算设备的组成示意图；

图2为本公开实施例提供的一种显示控制方法流程图；

图3为本公开实施例提供的一种显示控制器的组成示意图；

图4为本公开实施例提供的一种基于显示控制器的图层混合处理流程图；

图5为本公开实施例提供的一种显示控制装置示意图。

具体实施方式

下面将结合本公开实施例中的附图，对本公开实施例中的技术方案进行清楚、完整地描述。

参见图1，其示出了能够实现本公开实施例技术方案的计算设备100的组成示意图，需注意，图1所示出的计算设备是可能的设备的仅一个示例，并且可根据需要在各种设备中的任一设备中实现本公开的实施方案。该计算设备100的组成具体可以为任意类型的计算装置，包括且不限于台式计算机、服务器、工作站、膝上计算机、基于计算机的仿真器、无线装置、移动或蜂窝电话（包含所谓的智能电话）、个人数字助理（PDA）、视频游戏控制台（包含视频显示器、移动视频游戏装置、移动视频会议单元）、膝上型计算机、桌上型计算机、电视机顶盒、平板计算装置、电子书阅读器、固定或移动媒体播放器等。如图1所示，计算设备100的组成可以包括CPU 10、GPU 20、显存30，还包括显示控制器40、显示器41以及通信接口（未图示）。显示控制器40可为与GPU 20相同的集成电路（Integrated Circuit，IC）的部分，也可在包含GPU 20的一或多个IC的外部或可形成于在包含GPU 20的IC外部的IC中。

具体来说，CPU 10可包括控制计算设备100运算的通用或专用处理器，其经配置以处理供执行的计算机程序的指令。用户可经由通信接口与其他外部网元之间进行收发信息过程中信号的接收和发送，将输入提供给计算设备100组成中的CPU 10，以使得CPU 10执行一或多个计算机程序的指令。在CPU 10上执行的计算机程序可为利用GPU 20的功能性的任何应用程序，可包括图形用户接口（Graphic User Interface，GUI）应用程序、操作系统、便携式制图应用程序、用于工程或艺术应用的计算机辅助设计程序、视频游戏应用程序、文字处理器应用程序、电子邮件应用程序、电子表格应用程序、媒体播放器应用程序或使用2D、3D图形渲染应用程序等，本公开实施例以执行图形渲染应用程序为例，所述图形渲染应用程序也可以简称为应用程序或程序。此外，CPU 10上执行的图形渲染应用程序可包含一或多个图形渲染指令（也可以理解为待渲染的画面帧中包含一或多个所述图形），所述图形渲染指令可符合图形应用程序编程接口（Application Programming Interface，API），例如，开放式图形库API（OpenGL API）、开放式图形库嵌入系统（OpenGL ES）API、Direct3D API、X3D API、RenderMan API、WebGL API、开放式计算语言（OpenCLTM）、RenderScript或任何其它异构计算API或任何其它公用或专有标准图形或计算API，本公开下面的描述中将以OpenGL API为例进行说明。

GPU 20可经配置以执行图形运算，从而将一或多个图形图元渲染到显示器41进行展示。可以理解为，CPU 10将渲染指令发送给GPU 20，然后GPU 20根据收到的一或多个图形渲染命令，包括但不限于图形命令和图形数据，所述图形数据可包含绘制命令、状态信息、图元信息、纹理信息等，以使得GPU 20执行所述图形渲染命令中的一些或者全部，从而将一或多个图形图元进行渲染并通过显示控制器40展示在显示器41上。在一些情况下，GPU 20可内置有高度并行结构，其提供比CPU 10高效的对复杂图形相关运算的处理。举例来说，GPU 20可包含经配置以并行方式对多个顶点或像素进行运算的多个处理元件。在一些情况下，GPU 20的高度并行性质允许GPU 20比使用CPU 10更快速地将图形图像（例如，GUI和二维（2D）和/或三维（3D）图形场景）绘制到显示器41上。在一些情况下，可将GPU 20集成到目标设备的母板中。在其它情况下，GPU 20可存在于图形卡上，所述图形卡安装在目标设备的母板中的端口中，或可以其它方式并入在经配置以与目标设备互操作的外围装置内。GPU20可包含一或多个处理器，例如一或多个微处理器、专用集成电路（ASIC）、现场可编程门阵列（FPGA）、数字信号处理器（DSP）或其它等效的集成或离散逻辑电路。GPU 20还可包含一或多个处理器核心，使得GPU 20可被称作多核处理器。在一些示例中，GPU 20可不包含单独的存储器，而是经由总线利用外置的显存30，显存30可存储经渲染图像数据，例如，像素值以及任何其它数据，因此，显存30还可被称为帧缓冲器。显存30存储GPU 20的目的地像素。每个目的地像素可与唯一屏幕像素位置相关联。在一些示例中，显存30可存储每个目的地像素的色彩分量和目的地α值。举例来说，显存30可存储每个像素的红色、绿色、蓝色、α（RGBA）分量，其中“RGB”分量对应于色彩值，并且“A”分量对应于目的地α值（例如，用于图像合成的不透明度值）。此外，显存30还可能够存储除像素之外的任何合适的数据。显示控制器40可从显存30检索图像且输出使显示器41的像素照亮以显示所述图像的值。显示器41可为计算设备100的显示器，其显示由GPU 20产生的图形图像内容。显示器41可为液晶显示器（LCD）、有机发光二极管显示器（OLED）、阴极射线管（CRT）显示器、等离子显示器或另一类型的显示装置。各个组件通过总线系统50耦合在一起。可理解地，总线系统50用于实现这些组件之间的连接通信。总线系统50除包括数据总线之外，还包括电源总线、控制总线和状态信号总线，但是为了清楚说明起见，在图1中将各种总线都标为总线系统50。

结合图1所示的计算设备100，GPU 20可以经配置以执行与下述相关的各种操作：经由总线系统50获取CPU 10或显存30所提供的图形数据生成当前帧的渲染结果，与显存30交互以存储或更新所述渲染结果，显示控制器40从显存30中读取所述渲染结果并经过处理后展示在显示器41上。可以理解地，上述GPU 20的渲染是采用多线程软件与硬件配合实现渲染的方式。具体来说，对于目前大多数的游戏渲染场景来说，每一帧的运算主要包括渲染部分和逻辑部分，其中，所述渲染部分通常是由GPU完成，所述逻辑部分是实现CPU和GPU之间的命令交互，通常由CPU端的多线程软件实现。一般来说，所述渲染部分比所述逻辑部分消耗的时间要多得多。对于渲染结果的展示，现有的技术方案是通过ISP进行展示的，所述ISP位于显示控制器40中，负责对图像数据进行处理，例如，Gamma校正、颜色校正、抖动处理等。所述ISP可以对图像数据进行实时处理以适应不同的显示设备和显示环境的要求，最终呈现出高质量的图像。但是，对于多线程软件与硬件配合实现渲染的方式以及基于ISP的渲染结果的显示，存在如下缺陷：渲染处理速度较慢，软硬件分配不合理，并且基于ISP的渲染结果的显示不具备图层混合处理功能、支持的分辨率有限以及支持的算法性能低。基于此，本公开实施例期望提供一种显示控制的技术方案，采用多线程软件与硬件配合实现渲染并将图像算法处理、图像缩放以及图层混合的功能通过显示控制器实现以减轻GPU的负担，从而在显示设备上呈现高画质、多分辨率的图像。参见图2，其示出了本公开实施例提供的一种显示控制方法，该方法应用于如图1所示的计算设备100中的显示控制器40，该方法可以包括：

S201：将待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据，其中，所述待显示图像的图像数据是经GPU渲染生成的至少包括两个图层的图像数据；

S202：当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据；

S203：将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据；

S204：将所述第三图像数据输出至显示设备进行显示。

根据上述方案的描述，本公开实施例通过显示控制器从显存中读取经GPU渲染生成的至少包括两个图层的图像数据，即待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据；当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以适应显示设备的分辨率或显示比例的要求并获取到经图像缩放处理的各图层的第二图像数据，将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据，将所述第三图像数据输出至显示设备进行显示。所述缩放处理和图层混合处理均是通过相应的图像算法实现的。通过该技术方案，将图像算法处理、图像缩放以及图层混合的功能通过显示控制器实现，减轻了GPU的负担。此外，既可以支持GPU渲染结果的显示还可以支持不需要GPU渲染而由CPU直接下发的图像数据的显示，因此，能够适应多种处理场景并且支持的分辨率更为丰富，从而能够在显示设备上呈现高画质、多分辨率的图像。

针对图2所示的技术方案，在一些可能的实现方式中，所述将待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据，其中，所述待显示图像的图像数据是经GPU渲染生成的至少包括两个图层的图像数据，具体来说，通过显示控制器从显存中读取经GPU渲染生成的至少包括两个图层的图像数据，即待显示图像的图像数据并传输至相应的层管道以生成各图层相应的第一图像数据并对所述各图层的第一图像数据进行各级流水线的处理，其中，所述待显示图像的图像数据至少包括图像的宽度、高度、像素值以及相应图层的位置、大小以及深度值，所述深度值或称之为Z值，用于表示图层在三维空间中的位置，即确定图层的远近关系，其可以是相对于摄像机的距离。所述层管道包括2个视频层管道、图形层管道以及智能层管道。

针对图2所示的技术方案，在一些可能的实现方式中，所述当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据，包括：

根据所述各图层的第一图像数据中的图像的宽度、高度和显示设备支持的目标图像的宽度、高度计算缩放比例；

根据所述缩放比例将所述各图层的第一图像数据中的图像的像素值进行图像缩放处理以获取各图层的第二图像数据。

对于上述实现方式，具体来说，首先，根据所述各图层的第一图像数据中的图像的宽度、高度和显示设备支持的目标图像的宽度、高度计算水平方向和垂直方向的缩放比例，所述显示设备支持的目标图像的宽度、高度，即为缩放到的目标尺寸，也可以理解为希望将所述图像的像素值缩放到的宽度、高度。其次，通过硬件加速缩放，所述硬件是如图1所示的显示控制器40，根据所述缩放比例将所述各图层的第一图像数据中的图像的像素值进行图像缩放处理以适应显示设备的不同分辨率或者显示比例的要求并获取经缩放处理的各图层的第二图像数据。需要说明的是，所述显示设备可以是如图1所示的显示器41。所述分辨率指的是图像或显示器的水平像素数量和垂直像素数量。通常以“宽×高”的形式表示，例如，1920×1080。图像的宽度和高度分别对应分辨率中的水平像素数量和垂直像素数量。因此，分辨率和图像的宽度、高度之间的关系为分辨率=宽度×高度。

针对图2所示的技术方案，在一些示例中，所述方法还包括：

当显示设备支持的分辨率与所述待显示图像的分辨率一致时或自定义的所述待显示图像的分辨率与显示设备支持的分辨率一致时，所述各图层的第一图像数据中的图像不进行图像缩放处理。

对于上述示例，具体来说，当显示设备支持的分辨率与所述待显示图像的分辨率一致或自定义的所述待显示图像的分辨率与显示设备支持的分辨率一致时，不需要对所述各图层的第一图像数据中的图像进行图像缩放处理，可以按照所述待显示图像的分辨率或自定义的分辨率进行后续的处理。可以理解地，缩放处理为非必选操作，可以根据具体的使用场景来确定是否进行缩放处理。

针对图2所示的技术方案，在一些可能的实现方式中，所述将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据，包括：

根据各图层的深度值确定各图层的叠放关系，根据所述各图层的叠放关系进行图层排序；

基于所述图层排序，将所述各图层的第二图像数据进行图层混合以获取第三图像数据。

对于上述实现方式，在一些示例中，所述根据各图层的深度值确定各图层的叠放关系，根据所述各图层的叠放关系进行图层排序，包括：

基于各图层的深度值确定的各图层的叠放关系，通过排序算法对所述各图层的第二图像数据进行图层排序以确定各图层的显示顺序。

对于上述示例，具体来说，根据各图层的深度值确定各图层的叠放关系，根据所述各图层的叠放关系，通常使用排序算法对所述各图层的第二图像数据进行图层排序，所述排序算法可以包括冒泡排序算法、快速排序算法等，所述图层排序即决定哪一个图层在上面，哪一个图层在下面。通常是根据所述各图层的深度值大小，将深度值小的图层放在上面，深度值大的图层放在下面。

对于上述实现方式，在一些示例中，所述基于所述图层排序，将所述各图层的第二图像数据进行图层混合以获取第三图像数据，包括：

将经图层排序的所述各图层的第二图像数据的颜色空间转换为相同的颜色空间并进行图层合成以生成各图层的中间图像数据；

在所述相同的颜色空间内，将所述各图层的中间图像数据的像素值进行混合计算以获取混合的像素值；

将所述混合的像素值进行调整以获取需要显示的第三图像数据。

对于上述示例，具体来说，所述图层混合是指将多个图层数据叠加在一起以生成最终的显示图像数据。在实际的图像处理中，图层混合处理通常涉及颜色空间转换、图层合成、混合计算以及像素值调整的步骤，其中，所述颜色空间转换是对于不同的图层可能使用不同的颜色空间，在进行混合处理之前，需要将所有图层的颜色空间统一转换为相同的颜色空间以便进行混合计算。所述图层合成是将各图层的图像数据进行合成以获取合成后的中间图像数据，其中，所述合成后的中间图像数据包括所有图层信息，图层合成的过程可以包括对图层进行位置调整、透明度叠加等处理。所述混合计算是在颜色空间统一转换之后，需要对各图层的图像数据中的像素值进行混合计算以获取混合的像素值，其中，所述混合计算可以包括透明度的计算、混合模式的选择、颜色值的加权叠加等。而对于混合模式的选择，常见的混合模式包括正常模式、叠加模式、加深模式、颜色加深模式等，不同的混合模式会产生不同的叠加效果。所述像素值调整是在混合计算之后，还需要对混合后的像素值进行调整，例如，进行Gamma校正、颜色校正、抖动处理等，所述调整可以使最终的显示效果更加符合期望。总的来说，图层混合处理涉及上述操作步骤，在实际的图像处理系统中，所述操作步骤可以由硬件加速器、图像处理库或者专门的图像处理算法来实现。需要说明的是，对于所述待显示图像的图像数据，如果只有一个图层的图像数据，则不需要进行图层混合处理，可以直接在显示设备上显示。

针对图2所示的技术方案，在一些可能的实现方式中，所述将所述第三图像数据输出至显示设备进行显示，包括：

根据显示设备的类型确定输出接口，其中，所述输出接口包括DP接口、HDMI接口以及VGA接口；

根据行场同步时序控制所述第三图像数据通过所述输出接口输出至显示设备进行显示。

对于上述实现方式，所述输出接口包括显示接口（Display Port，DP）、高清多媒体接口（High Definition Multimedia Interface，HDMI ）以及视频图形阵列（VideoGraphics Array，VGA）接口，具体来说，所述DP接口是高清数字显示接口中的一种，可以连接电脑和显示器，也可以连接电脑和家庭影院。所述HDMI接口是一种全数字化视频和声音发送接口，可以同时发送音频和视频信号，还可以发送未压缩的音频及视频信号，所述HDMI接口可用于机顶盒、DVD播放机、个人计算机、电视、游戏主机、综合扩大机、数字音响与电视机等设备。所述VGA接口是输出模拟信号的接口。所述行场同步时序是指在视频信号处理中用于同步图像扫描的时序信号。在模拟视频信号中，行场同步时序信号用于确定每一行和每一场图像的开始和结束位置以便在显示设备上正确地重建图像和显示图像。所述显示控制器需要根据行场同步时序信号来控制图像数据的输出以确保图像能够在显示设备上正确地重建和显示，这涉及对时序信号的识别、处理以及输出接口的选择，将所述第三图像数据通过DP接口、HDMI接口、VGA接口中的任一个输出接口输出至显示设备上进行显示。通过所述输出接口可以进行信号格式转换、时序控制等操作以适配不同类型的显示设备。

基于上述实现方式及示例的阐述，结合图1所示的计算设备100以具体的实施例阐述图2所示的技术方案，所述图像缩放处理是通过显示控制器中的缩放引擎模块实现的，所述图层混合处理是通过显示控制器中的显示引擎模块实现的，具体来说，参见图3，其示出了本公开实施例提供的一种显示控制器的组成示意图，所述显示控制器，如图1中所示的显示控制器40包括：显示控制模块、显示引擎模块、缩放引擎模块以及显示输出模块，其中，所述显示控制模块，用于启动所述显示引擎模块、所述缩放引擎模块以及所述显示输出模块的功能。具体来说，例如，对于所述缩放引擎模块来说，所述显示控制模块通过寄存器传输缩放后图像的分辨率等。对于所述显示输出模块来说，所述显示控制模块可通过相应的寄存器来启动Gamma矫正、抖动处理、颜色矫正以及传输生成的显示时序时所需要的行场时序参数等。所述显示引擎模块主要负责各图层的混合处理和显示。在图像处理中，通常会有多个图层，例如，视频层、图形层、智能层，所述显示引擎模块负责将各图层进行图层混合处理以生成最终的显示图像。所述图层混合处理涉及图层的叠加、透明度的计算、混合模式的选择等。在具体实现上，所述显示引擎模块具有图像混合算法、颜色空间转换、透明度控制等功能。当显示设备支持的分辨率与待显示图像的分辨率不一致时，需要将输入的图像数据进行缩放，以适应不同的分辨率或者显示比例的要求。所述缩放引擎模块负责对输入的图像进行缩放处理，所述缩放处理涉及插值算法、滤波算法等。在具体实现上，所述缩放引擎模块具有处理图像的缩放算法、插值算法、滤波算法等功能。但是对于显示设备支持的分辨率与所述待显示图像的分辨率一致时或自定义的所述待显示图像的分辨率与显示设备支持的分辨率一致的场景下，不需要对输入的图像进行缩放处理。所述显示输出模块，主要负责Gamma校正、抖动处理、颜色校正等图像处理算法以及显示时序生成。所述显示输出模块还负责将处理后的图像数据输出到显示设备上，即根据行场同步时序控制所述第三图像数据输出至显示设备进行显示，涉及输出接口的选择、时序控制等。在具体实现上，所述显示输出模块具有图像处理算法、输出接口控制、时序控制等功能。综上所述，通过所述显示控制器对图像数据进行处理和控制，包括对图层的混合处理、图像的缩放处理、图像的常规处理和显示输出。这些功能需要通过软件算法或者硬件加速器来实现，因此，涉及图像处理算法、显示控制算法、时序控制等多个方面的技术细节。

基于所述显示控制器的组成以具体的实施例阐述各模块之间的交互，在一些示例中，所述图像缩放处理是通过显示控制器中的缩放引擎模块实现的，具体来说，假设待显示图像的分辨率为1920x1080，但是显示设备的分辨率为1280x720。此时，需要通过所述缩放引擎模块将所述待显示图像进行缩放以适应显示设备的分辨率。具体的实现步骤为：首先，显示引擎模块接收分辨率为1920x1080的待显示图像的图像数据并发送至相应的层管道以生成各图层的第一图像数据，所述待显示图像的图像数据可以来自于图像采集设备、存储设备或者网络传输等，本公开实施例中是经GPU渲染生成的至少包括两个图层的图像数据。其次，所述显示引擎模块将所述各图层的第一图像数据传递给所述缩放引擎模块以对所述各图层的第一图像数据中的图像进行缩放处理以适应显示设备的分辨率或者显示比例，将分辨率缩放为1280x720，并将缩放后的图像数据返回给所述显示引擎模块。然后，所述显示引擎模块接收缩放后的图像数据，即各图层的第二图像数据，进行图层混合处理，再通过所述显示输出模块进行常规的图像处理，比如颜色校正、抖动处理等。最后，所述显示引擎模块将混合处理后的图像数据输出至显示设备上进行显示，显示设备会根据所述显示引擎模块提供的图像数据进行显示，在显示过程中涉及输出接口的选择、时序控制等。各模块之间通过传递图像数据来完成图像的处理和显示输出。这种交互流程可以确保图像数据经过适当的处理后能够在显示设备上得到正确的显示。

需要说明的是，当显示设备支持的分辨率与所述待显示图像的分辨率一致或自定义的所述待显示图像的分辨率与显示设备支持的分辨率一致时，不需要对所述各图层的第一图像数据中的图像进行图像缩放处理，可以按照所述待显示图像的分辨率或自定义的分辨率进行图层混合处理或显示。但是对于所述待显示图像的图像数据，如果只有一个图层的图像数据，则也不需要进行图层混合处理，可以直接在显示设备上显示。在上述场景下，相应地，所述各图层的第一图像数据、各图层的第二图像数据以及第三图像数据，实际均是待显示图像的图像数据。可以理解地，所述待显示图像的图像数据可以不经缩放处理或图层混合处理直接在显示设备上显示，也可以不经过缩放处理，而经过图层混合处理在显示设备上显示。

在一些示例中，所述图层混合处理是通过显示控制器中的显示引擎模块实现的，具体来说，参见图4，其示出了本公开实施例提供的一种基于显示控制器的图层混合处理流程图，所述显示引擎模块包括：控制寄存器模块、内存读取模块、数据流控制模块、层排序模块以及图层混合模块，各模块之间以流水线的形式处理各图层的图像数据，其中，所述控制寄存器模块，用于指示所述内存读取模块从相应的显存空间中读取待显示图像的图像数据并发送至相应的层管道。所述控制寄存器模块，用于对各图层的图像数据的选择和分配进行控制。所述内存读取模块，用于从显存中读取待显示图像的图像数据并将发送至相应的层管道进行处理以生成各图层的第一图像数据。不同图层的第一图像数据经过各级流水线处理后，会被传送到后续的处理模块进行进一步处理。所述数据流控制模块，用于将各图层的第一图像数据分别传送到所述缩放引擎模块和所述层排序模块进行分辨率调整和图层排序工作，其作用是控制各图层的图像数据的流动和处理顺序。所述层排序模块，用于对重合的图层进行排序，决定哪一个图层在上面，哪一个图层在下面，其作用是确定图层的叠放顺序以确保正确的图层显示顺序。所述图层混合模块，用于对经过层排序后的图像数据进行混合处理以生成最终的显示图像数据，即第三图像数据。

针对图4所示的图层混合处理流程以具体的实施例阐述各模块之间的交互流程，当所述显示引擎模块工作时，首先，所述显示引擎模块中的所述控制寄存器模块接收来自系统控制单元的指令，指示待显示图像的图像数据存储在哪些显存空间中。例如，视频层1的待显示图像的图像数据存储在显存地址A，视频层2的待显示图像的图像数据存储在显存地址B，图形层的待显示图像的图像数据存储在显存地址C，智能层的待显示图像的图像数据存储在显存地址D。其次，所述内存读取模块根据所述控制寄存器模块的指示，从相应的显存地址中读取待显示图像的图像数据并发送至相应的层管道，比如视频层1管道、视频层2管道、图形层管道以及智能层管道等，以进行各级流水线的处理并生成各图层的第一图像数据。然后，所述数据流控制模块接收所述各图层的第一图像数据并根据需要将所述各图层的第一图像数据，例如，lv1、lv2、lg以及ls，分别传送到所述缩放引擎模块和所述层排序模块。接着，所述缩放引擎模块进行适当的缩放处理以适应显示设备的分辨率或者显示比例并生成各图层的第二图像数据。所述层排序模块接收所述各图层的第二图像数据，例如，lv1、lv2、lg以及ls，根据图层深度值确定各图层的叠放关系并根据所述各图层的叠放关系进行图层排序，例如，经所述层排序模块处理后的图层顺序为l1、l2、l3以及l4。最后，将经过图层排序后的各图层的图像数据传输至所述图层混合模块，所述图层混合模块将按照所述层排序模块的指示将各图层的图像数据按正确的顺序进行混合处理以生成最终的显示图像数据，即第三图像数据。综上所述，各子模块之间的协作涵盖了对各图层的图像数据的选择、处理、排序和混合以实现最终的显示图像数据，确保了图像数据经过适当的处理后能够在显示设备上得到正确的显示效果，整个流程实现了图层混合处理和最终的图像显示输出。

基于前述技术方案相同的发明构思，参见图5，其示出了本公开实施例提供的一种显示控制装置500，所述装置500包括：发送部分501、缩放部分502、混合部分503以及显示部分504；其中，

所述发送部分501，经配置为将待显示图像的图像数据发送至相应的层管道以生成各图层的第一图像数据，其中，所述待显示图像的图像数据是经GPU渲染生成的至少包括两个图层的图像数据；

所述缩放部分502，经配置为当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据；

所述混合部分503，经配置为将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据；

所述显示部分504，经配置为将所述第三图像数据输出至显示设备进行显示。

在一些示例中，所述发送部分501，经配置为所述层管道包括2个视频层管道、图形层管道以及智能层管道。

在一些示例中，所述缩放部分502，经配置为：

在一些示例中，所述混合部分503，经配置为：

在一些示例中，所述显示部分504，经配置为：

可以理解地，上述显示控制装置500的示例性技术方案，与前述显示控制方法的技术方案属于同一构思，因此，上述显示控制装置500的技术方案未详细描述的细节内容，均可以参见前述显示控制方法的技术方案的描述。本公开实施例对此不做赘述。

除此之外，本领域技术人员可以理解，上述附图所示出的计算设备的结构并不构成对计算设备的限定，计算设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。比如，计算设备中还包括显示屏、摄像组件、麦克风、扬声器、射频电路、输入单元、传感器（比如加速度传感器、角速度传感器、光纤传感器等等）、音频电路、WiFi模块、电源、蓝牙模块等部件，在此不再赘述。

本公开实施例还提供了一种计算机可读存储介质，该计算机可读存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如上各个实施例所述的显示控制方法。

本公开实施例还提供了一种计算机程序产品，该计算机程序产品包括计算机指令，该计算机指令存储在计算机可读存储介质中；计算设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算设备执行以实现上述各个实施例所述的显示控制方法。

本领域技术人员应该可以意识到，在上述一个或多个示例中，本公开实施例所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时，可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。

以上所述，仅为本公开的具体实施方式，但本公开的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本公开揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本公开的保护范围之内。因此，本公开的保护范围应以所述权利要求的保护范围为准。

Claims

1.一种显示控制方法，其特征在于，所述方法应用于计算设备中的显示控制器，所述方法包括：

将所述第三图像数据输出至显示设备进行显示。

2.根据权利要求1所述方法，其特征在于，所述当显示设备支持的分辨率与待显示图像的分辨率不一致时，将所述各图层的第一图像数据中的图像进行图像缩放处理以获取各图层的第二图像数据，包括：

3.根据权利要求1所述方法，其特征在于，所述方法还包括：

4.根据权利要求1所述方法，其特征在于，所述将所述各图层的第二图像数据进行图层混合处理以获取第三图像数据，包括：

5.根据权利要求4所述方法，其特征在于，所述基于所述图层排序，将所述各图层的第二图像数据进行图层混合以获取第三图像数据，包括：

6.根据权利要求1所述方法，其特征在于，所述将所述第三图像数据输出至显示设备进行展示，包括：

7.根据权利要求1所述方法，其特征在于，所述层管道包括2个视频层管道、图形层管道以及智能层管道。

8.一种显示控制装置，其特征在于，所述装置包括：发送部分、缩放部分、混合部分以及显示部分；其中，

9.一种计算设备，其特征在于，所述计算设备包括：通信接口，处理器，存储器；各个组件通过总线系统耦合在一起；其中，

所述处理器，用于在运行所述计算机程序时，执行权利要求1至7任一项所述显示控制方法。

10.一种计算机存储介质，其特征在于，所述存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如权利要求1至7任一所述显示控制方法。