CN104765594A - 一种显示图形用户界面的方法及装置 - Google Patents

一种显示图形用户界面的方法及装置 Download PDF

Info

Publication number
CN104765594A
CN104765594A CN201410008802.7A CN201410008802A CN104765594A CN 104765594 A CN104765594 A CN 104765594A CN 201410008802 A CN201410008802 A CN 201410008802A CN 104765594 A CN104765594 A CN 104765594A
Authority
CN
China
Prior art keywords
window
process unit
graphic process
picture
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410008802.7A
Other languages
English (en)
Other versions
CN104765594B (zh
Inventor
郑子杰
陈诚
张晨鹂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Singapore Pte Ltd
Original Assignee
MediaTek Singapore Pte Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Singapore Pte Ltd filed Critical MediaTek Singapore Pte Ltd
Priority to CN201410008802.7A priority Critical patent/CN104765594B/zh
Priority to US14/592,177 priority patent/US9786256B2/en
Publication of CN104765594A publication Critical patent/CN104765594A/zh
Application granted granted Critical
Publication of CN104765594B publication Critical patent/CN104765594B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/39Control of the bit-mapped memory
    • G09G5/393Arrangements for updating the contents of the bit-mapped memory
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14Display of multiple viewports
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363Graphics controllers
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2360/00Aspects of the architecture of display systems
    • G09G2360/06Use of more than one graphics processor to process data before displaying to one or more screens

Abstract

本发明公开了一种显示图形用户界面的方法及装置。其中该图形用户界面是基于多个窗口而产生,该方法包括:由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片,以及根据预设规则选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,以形成图形用户界面;其中第一图形处理器与第二图形处理器不同。通过上述方式,本发明能够提高图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。

Description

一种显示图形用户界面的方法及装置
技术领域
本发明涉及显示技术领域,特别是涉及一种显示图形用户界面的方法及装置。
背景技术
图形用户界面(Graphical User Interface,GUI)是指采用图形方式显示的用户界面。其中,图形用户界面的产生给用户带来更好的视觉享受。
如何将图形用户界面显示在屏幕上,现有技术的做法是:首先创建多个窗口,然后由图形处理器在多个窗口中绘制图片,接着使用图形处理器的合成功能在硬件缓冲器中将绘制有图片的多个窗口进行合成以形成图形用户界面,最后通过屏幕显示(On Screen Display,OSD)将图形用户界面显示在屏幕上。
在现有技术中,不管绘制图片还是合成图片,均需要利用图形处理器的图形处理资源。同时,随着科学技术的不断发展,图片的分辨率逐步提高。分辨率的提高将要消耗更多的图形处理器的图形处理资源,给图形处理器带来严重的处理负荷,其具体表现为:随着图片的分辨率的提高,图形处理器对图片的处理效率下降,从而导致屏幕上输出的图形用户界面的帧率急速下降,人眼看到的显示屏上的画面将会出现不连贯、不流畅的现象。
举例来说,当图片的分辨率为4K2K超高清(3840×2160)时,也即待处理的图片总像素数量达到800万以上,测试得到屏幕上输出的图形用户界面的帧率为12fps(每秒的帧数)。而由于人类眼睛的特殊生理结构,如果所看画面之帧率高于24fps的时候,就会认为是连贯的。此时,由于图形用户界面的帧率远远小于24fps,人眼看到的是断断续续显示的图形用户界面,从而大大降低了用户的视觉体验。
发明内容
有鉴于此,本发明提供以下技术方案。
根据本发明一实施例,本发明提供一种显示图形用户界面的方法,其中该图形用户界面是基于多个窗口而产生,该方法包括:
由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片;以及
根据预设规则,选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,以形成图形用户界面;
其中第一图形处理器与第二图形处理器不同。
根据本发明另一实施例,本发明提供一种显示图形用户界面的装置,该装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成图形用户界面的图片;
第二图形处理器;以及
硬件缓冲器,耦接于第一图形处理器与第二图形处理器;
窗口管理模块,根据预设规则,选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中;
其中第一图形处理器与第二图形处理器不同。
根据本发明再一实施例,本发明提供一种显示图形用户界面的方法,其中该图形用户界面是基于多个窗口而产生,该方法包括:
由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片,其中,多个窗口中的至少一个存储于硬件缓冲器;
由第一图形处理器或第二图形处理器将存储于硬件缓冲器中的绘制有图片的窗口与剩余的窗口进行合成,以形成图形用户界面;
其中第一图形处理器与第二图形处理器不同。
根据本发明再一实施例,本发明提供一种显示图形用户界面的装置,该装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成所述图形用户界面的图片;
硬件缓冲器,与第一图形处理器耦接;
其中,多个窗口中的至少一个存储于硬件缓冲器;第一图形处理器将存储于硬件缓冲器中绘制有图片的窗口与剩余的窗口进行合成,以形成图形用户界面。
根据本发明再一实施例,本发明提供一种显示图形用户界面的装置,该装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成图形用户界面的图片;
第二图形处理器;
硬件缓冲器,与第一图形处理器以及第二图形处理器耦接;
其中,多个窗口中的至少一个存储于硬件缓冲器;第二图形处理器将存储于硬件缓冲器中绘制有图片的窗口与剩余的窗口进行合成,以形成图形用户界面;
其中第一图形处理器与第二图形处理器不同。
根据本发明再一实施例,本发明提供一种显示图形用户界面的方法,其中该图形用户界面是基于多个窗口而产生,该方法包括:
由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片;以及
根据预设规则,选择第一图形处理器、第二图形处理器和第三图形处理器中的至少一个合成绘制有图片的多个窗口至硬件缓冲器中,以形成图形用户界面;
其中第一图形处理器、第二图形处理器以及第三图形处理器彼此不同。
根据本发明再一实施例,本发明提供一种显示图形用户界面的装置,该装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成图形用户界面的图片;
第二图形处理器;
第三图形处理器,以及
硬件缓冲器,耦接于第一图形处理器为、第二图形处理器和第三图形处理器;
窗口管理模块,根据预设规则,选择第一图形处理器、第二图形处理器和第三图形处理器中的至少一个合成绘制有图片的多个窗口至硬件缓冲器中;
其中第一图形处理器、第二图形处理器与第三图形处理器彼此不同。
本发明的有益效果是:区别于现有技术的情况,本发明的显示图形用户界面的方法及装置可减轻第一图形处理器的工作负荷,从而提高了图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
附图说明
图1是本发明第一实施例的显示图形用户界面的装置的结构示意图;
图2是本发明第二实施例的显示图形用户界面的装置的结构示意图;
图3是本发明第三实施例的显示图形用户界面的装置的结构示意图;
图4是本发明第四实施例的显示图形用户界面的装置的结构示意图;
图5是本发明第一实施例的显示图形用户界面的方法的流程图;
图6是本发明第二实施例的显示图形用户界面的方法的流程图;
图7是本发明第三实施例的显示图形用户界面的方法的流程图;
图8是本发明第四实施例的显示图形用户界面的方法的流程图;
图9是本发明第五实施例的显示图形用户界面的方法的流程图;
图10是本发明第六实施例的显示图形用户界面的方法的流程图;
图11是本发明第七实施例的显示图形用户界面的方法的流程图。
具体实施方式
在说明书及权利要求书当中使用了某些词汇来指称特定的组件。所属领域中的技术人员应可理解,制造商可能会用不同的名词来称呼同样的组件。本说明书及权利要求书并不以名称的差异来作为区分组件的方式,而是以组件在功能上的差异来作为区分的基准。在通篇说明书及权利要求书当中所提及的「耦接」一词在此包含任何直接及/或间接的电气耦接手段。因此,若文中描述第一装置耦接于第二装置,则代表第一装置可直接电气耦接于第二装置,或透过其它装置或耦接手段间接地电气耦接至第二装置。下面结合附图和实施例对本发明进行详细说明。
图1是本发明第一实施例的显示图形用户界面的装置的结构示意图。如图1所示,显示图形用户界面的装置100包括第一图形处理器11、第二图形处理器12、硬件缓冲器13和窗口管理模块14。另外,图1所示的显示图形用户界面的装置以虚线表示多个窗口10。其中,硬件缓冲器13耦接于第一图形处理器11和第二图形处理器12。
第一图形处理器11在多个窗口10中分别绘制用于形成图形用户界面的图片,其中多个窗口由应用程序创建,每个窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。具体来说,多个窗口由应用程序基于需要而调用窗口管理器的相对应接口而产生,图形用户界面一般由多层图片叠加形成,其中,图形用户界面中图片的层数与多个窗口的数量相对应。由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片具体为:由第一图形处理器将图形用户界面中各层图片的各个像素点的值写入对应窗口的虚拟内存空间。接着窗口管理模块14耦接于第一图形处理器11以及第二图形处理器12,并且窗口管理模块14管理多个窗口10,以根据预设规则,选择第一图形处理器11或第二图形处理器12合成绘制有图片的多个窗口10至硬件缓冲器13,其中硬件缓冲器13为物理地址连续的物理存储器,其可通过地址和数据总线对其存储的内容直接进行读写,以形成供显示的图形用户界面。
具体来说,如果将多个窗口分别记为第一窗口、第二窗口……、第n窗口,由第一图形处理器或第二图形处理器将第一窗口对应的虚拟内存空间中保存的图片的各个像素点的值拷贝至硬件缓冲器的物理内存空间,将第二窗口对应的虚拟内存空间中保存的图片的各个像素点的值与已保存在硬件缓冲器中的第一窗口的各个像素点的值进行合成,并将合成的结果继续保存在硬件缓冲器中,将第三窗口对应的虚拟内存空间中保存的图片的各个像素点的值与已保存在硬件缓冲器中第一窗口和第二窗口合成后的各个像素点的值再次进行合成,并将合成的结果继续保存在硬件缓冲器中……依此类推,直至完成对第n窗口的合成操作,从而形成保存在硬件缓冲器中的图形用户界面,进一步通过OSD显示在屏幕上。
其中,预设规则可预先设定,可根据第一图形处理器与第二图形处理器的状态或者根据多个窗口的属性来设置。举例来说,可以为以下四种:
第一种:选择第二图形处理器12合成绘制有图片的多个窗口10。
第二种:窗口管理模块14判断第一图形处理器11的使用率是否超过预定阈值;若判断出第一图形处理器11的使用率超过预定阈值,选择第二图形处理器12合成绘制有图片的多个窗口10。
第三种:窗口管理模块14分别获取绘制有图片的多个窗口10的窗口尺寸,并根据窗口尺寸选择第一图形处理器11或第二图形处理器12合成绘制有图片的多个窗口10。
第四种:窗口管理模块14分别获取绘制有图片的多个窗口10的层次属性,其中层次属性用于指示窗口10的层次关系,并根据层次属性选择第一图形处理器11或第二图形处理器12合成绘制有图片的多个窗口10。
当选择第一种预设规则时,图形用户界面显示的具体过程为:第一图形处理器11在多个窗口10中分别绘制用于形成图形用户界面的图片,接着第二图形处理器12合成绘制有图片的多个窗口10至硬件缓冲器13中,从而形成图形用户界面。其中,第一图形处理器为三维图形处理单元(以下简称为3D GPU),第二图形处理器为二维图形处理单元(以下简称为2D GFX)。
当选择第二种预设规则时,图形用户界面显示的具体过程为:第一图形处理器11在多个窗口10中分别绘制用于形成图形用户界面的图片,接着窗口管理模块14判断第一图形处理器11的使用率是否超过预定阈值。当窗口管理模块14判断出第一图形处理器11的使用率超过预定阈值时,第二图形处理器12合成绘制有图片的多个窗口10至硬件缓冲器13中,当窗口管理模块14判断出第一图形处理器11的使用率未超过预定阈值时,第一图形处理器11合成绘制有图片的多个窗口10至硬件缓冲器13中,从而形成图形用户界面。其中,第一图形处理器为3D GPU,第二图形处理器为2D GFX。
当选择第三种预设规则时,图形用户界面显示的具体过程为:举例来说,当多个窗口10包括两个窗口时,第一图形处理器11在两个窗口中分别绘制用于形成图形用户界面的图片。接着窗口管理模块14分别获取绘制有图片的两个窗口的窗口尺寸,按照窗口尺寸从大到小的顺序将两个窗口记为第一窗口和第二窗口。然后窗口管理模块14选择第二图形处理器12将第一窗口拷贝至硬件缓冲器13,选择第一图形处理器11将第二窗口与拷贝至硬件缓冲器13中的第一窗口进行合成,从而形成图形用户界面。其中,第一图形处理器为3D GPU,第二图形处理器为图形缩放处理单元(以下简称为IMGRZ)或者2D GFX。
当选择第四种预设规则时,图形用户界面显示的具体过程为:举例来说,当多个窗口10包括两个窗口时,第一图形处理器11在两个窗口中分别绘制用于形成图形用户界面的图片。接着窗口管理模块14分别获取绘制有图片的两个窗口的层次属性,按照层次属性从底层到顶层的顺序将两个窗口依次记为下层窗口和上层窗口。或者按照层次属性为背景图片或者动态变化图片将两个窗口记为下层窗口和上层窗口,其中下层窗口对应背景图片,上层窗口对应动态变化图片。然后窗口管理模块14选择第二图形处理器12将下层窗口拷贝至硬件缓冲器,选择第一图形处理器11将上层窗口与拷贝至硬件缓冲器的下层窗口进行合成,以形成图形用户界面。其中,第一图形处理器为3D GPU,第二图形处理器为IMGRZ或者2D GFX。
图2是本发明第二实施例的显示图形用户界面的装置的结构示意图。如图2所示,显示图形用户界面的装置200包括第一图形处理器21、和硬件缓冲器22。其中,硬件缓冲器22耦接于第一图形处理器21。另外,图2所示的显示图形用户界面的装置200以虚线表示多个窗口20’,20’’。其中图2中具有与图1中相似名称的模块的结构与功能相似,在此不再赘述。
第一图形处理器21在多个窗口20’,20’’中分别绘制用于形成图形用户界面的图片,其中多个窗口20’中的至少一个使用物理地址连续的存储器存储,从而可直接存储于硬件缓冲器22,而不需要再次经过第一图形处理器21合成至硬件缓冲器22。接着第一图形处理器21将存储于硬件缓冲器22中绘制有图片的窗口20’与剩余的窗口20’’进行合成,从而形成图形用户界面。其中,第一图形处理器为3D GPU。基于上述改进,申请人经过实验室测试可得知,显示图形用户界面的装置200的性能与由第一图形处理器21对所有的窗口执行合成至硬件缓冲器的现有技术相比较而言,系统性能可提升一倍以上。
图3是本发明第三实施例的显示图形用户界面的装置的结构示意图。如图3所示,显示图形用户界面的装置300包括第一图形处理器31、硬件缓冲器32和第二图形处理器33。其中,硬件缓冲器32耦接于第一图形处理器31和第二图形处理器33。另外,图3所示的显示图形用户界面的装置300以虚线表示多个窗口30’,30’’。其中图3中具有与图1中相似名称的模块的结构与功能相似,在此不再赘述。
第一图形处理器31在多个窗口30’、30’’中分别绘制用于形成图形用户界面的图片,其中多个窗口30’中的至少一个使用物理地址连续的存储器存储,从而可直接存储于硬件缓冲器32,而不需要再次经过第一图形处理器31合成至硬件缓冲器32。接着第二图形处理器31将存储于硬件缓冲器32中绘制有图片的窗口30’与剩余的窗口30’’进行合成,从而形成图形用户界面。其中,第一图形处理器31与第二图形处理器33不同。举例来说,第一图形处理器为3D GPU,第二图形处理器为2DGFX。
图4是本发明第四实施例的显示图形用户界面的装置的结构示意图。如图4所示,显示图形用户界面的装置400包括第一图形处理器41、第二图形处理器42、第三图形处理器43、硬件缓冲器44和窗口管理模块45。其中,硬件缓冲器44耦接于第一图形处理器41、第二图形处理器42和第三图形处理器43。另外,图4所示的显示图形用户界面的装置400以虚线表示多个窗口40。其中,窗口管理模块45耦接至第一图形处理器41、第二图形处理器42以及第三图形处理器43,并且窗口管理模块45管理多个窗口40,以根据预设规则选择第一图形处理器41、第二图形处理器42、第三图形处理器43其中之一来处理每一窗口中绘制的图片。其中图4中具有与图1中相似名称的模块的结构与功能相似,在此不再赘述。
第一图形处理器41在多个窗口40中分别绘制用于形成图形用户界面的图片,接着窗口管理模块45根据预设规则,选择第一图形处理器41、第二图形处理器42和第三图形处理器43中的至少一个合成绘制有图片的多个窗口40至硬件缓冲器44中,从而形成图形用户界面。其中,第一图形处理器41为3D GPU,第二图形处理器42为2D GFX,第三图形处理器43为IMGRZ。
其中,预设规则可预先设定,可根据第一图形处理器、第二图形处理器、第三图形处理器的状态或者根据多个窗口的属性来设置。举例来说,待显示的应用程序的图形用户界面通常包含多层图片,从而应用程序通常在多个窗口中分别绘制该多层图片。以应用程序在两个窗口中分别绘制了第一层图片和第二层图片为例,如果分别将绘制有第一层图片和第二层图片的窗口记为第一窗口以及第二窗口,则可选择第三图形处理器43的拷贝功能将绘制有第一层图片的第一窗口拷贝至硬件缓冲器,接下来处理绘制有第二层图片的第二窗口时,可根据第一图形处理器41与第二图形处理器42的工作负荷选择其中之一来将已拷贝至硬件缓冲器44中的第一层图片与绘制有第二层图片的第二窗口合成,并将合成之后的图片存储至硬件缓冲器44,从而将待显示的应用程序的图形用户界面存储至硬件缓冲器44中待显示。
进一步举例来说,当多个窗口40具有不同的属性时,可根据多个窗口40的属性来设定预设规则,例如具体可以为以下两种:
第一种:窗口管理模块45分别获取绘制有图片的多个窗口的窗口尺寸,并根据窗口尺寸选择第一图形处理器41、第二图形处理器42和第三图形处理器43中的至少一个合成绘制有图片的多个窗口。
第二种:窗口管理模块45分别获取绘制有图片的多个窗口的层次属性,其中层次属性用于指示窗口的层次关系,并根据层次属性选择第一图形处理器41、第二图形处理器42和第三图形处理器43中的至少一个合成绘制有图片的多个窗口。
当选择第一种预设规则时,图形用户界面显示的具体过程为:举例来说,当多个窗口40包括两个窗口时,第一图形处理器41在两个窗口中分别绘制用于形成图形用户界面的图片。接着窗口管理模块45分别获取绘制有图片的两个窗口的窗口尺寸,按照窗口尺寸从大到小的顺序将两个窗口记为第一窗口和第二窗口。然后窗口管理模块45选择第三图形处理器43将第一窗口拷贝至硬件缓冲器44,选择第二图形处理器42将第二窗口与拷贝至硬件缓冲器44中的第一窗口进行合成,从而形成图形用户界面。
当选择第二种预设规则时,图形用户界面显示的具体过程为:
举例来说,当多个窗口40包括两个窗口时,第一图形处理器41在两个窗口中分别绘制用于形成图形用户界面的图片。接着窗口管理模块45分别获取绘制有图片的两个窗口的层次属性,按照层次属性从底层到顶层的顺序将两个窗口依次记为下层窗口和上层窗口。然后窗口管理模块45根据层次属性选择第三图形处理器43将下层窗口拷贝至硬件缓冲器44,接着选择第二图形处理器42将上层窗口与拷贝至硬件缓冲器44的下层窗口进行合成,从而形成图形用户界面。
举例来说,当多个窗口40包括三个窗口时,第一图形处理器41在三个窗口中分别绘制用于形成图形用户界面的图片。接着窗口管理模块45分别获取绘制有图片的三个窗口的层次属性,按照层次属性从底层到顶层的顺序将两个窗口依次记为下层窗口、中层窗口和上层窗口。然后窗口管理模块45根据层次属性选择第三图形处理器43将下层窗口拷贝至硬件缓冲器44,选择第二图形处理器42和第一图形处理器中41的一个将中层窗口与拷贝至硬件缓冲器的下层窗口进行合成以形成存储于硬件缓冲器44的合成图形,接着选择第二图形处理器42和第一图形处理器41中的另一个将上层窗口与存储于硬件缓冲器44中的合成图形进行合成,从而形成图形用户界面。
综上所述,在此实施方式中,显示图形用户界面的系统可根据第一图形处理器的工作负荷、绘制有图片的窗口属性来设定预设规则,从而选择其他的模块来代替第一图形处理器其拷贝、合成图片至硬件缓冲器44中的工作,当需要第一图形处理器41来拷贝图片至硬件缓冲器44时,可选择第三图形处理器43或者第二图形处理器42来完成拷贝图片的工作;当需要第一图形处理器41来合成图片至硬件缓冲器44时,可选择第二图形处理器42来将完成合成的工作。同时在上述预定规则也可参考第一图形处理器41的工作负荷是否超出一个预定阈值。上述举例说明并非用来限制本申请的权利范围。采用上述显示图形用户界面的系统,可明显降低第一图形处理器的工作负荷,从而显著提升了显示图形用户界面系统的工作效率。
图5是本发明第一实施例的显示图形用户界面的方法的流程图。需注意的是,若有实质上相同的结果,本发明的方法并不以图5所示的流程顺序为限。举例来说,图5所示的方法可由图1中的显示图形用户界面的装置100执行。如图5所示,该方法包括如下步骤:
步骤S101:由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片;
步骤S102:根据预设规则,选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,以形成图形用户界面。
其中多个窗口由应用程序创建,其中,每个窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。图形用户界面一般由多层图片叠加形成,其中,图形用户界面中图片的层数与创建的窗口的数量相对应。在步骤S101中由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片步骤具体为:由第一图形处理器将图形用户界面中各层图片的各个像素点的值写入对应窗口的虚拟内存空间。
在步骤S102中,预设规则具体可以为以下四种:
第一种:选择第二图形处理器合成绘制有图片的多个窗口。
第二种:判断第一图形处理器的使用率是否超过预定阈值;若判断出第一图形处理器的使用率超过预定阈值,选择第二图形处理器合成绘制有图片的多个窗口,若判断出第一图形处理器的使用率未超过预定阈值,选择第一图形处理器合成绘制有图片的多个窗口。
第三种:分别获取绘制有图片的多个窗口的窗口尺寸,并根据窗口尺寸选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口。
第四种:分别获取绘制有图片的多个窗口的层次属性,其中层次属性用于指示窗口的层次关系,并根据层次属性选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口。
具体来说,当预设规则是第一种时,由第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,由此可以减少第一图形处理器的处理负荷,进而可以提高图片处理的效率。当预设规则是第二种时,当判断出第一图形处理器的使用率超过预定阈值时,由第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,当判断出第一图形处理器的使用率未超过预定阈值时,由第一图形处理器合成绘制有图片的多个窗口至硬件缓冲器,从而保证了第一图形处理器一直工作于合适的负荷,进而可以保证图片的处理效率。
另外两种预设规则在后面的实施例中进行详细描述。
此外,硬件缓冲器为物理地址连续的物理存储器,其可通过地址和数据总线对其存储的内容直接进行读写。由第一图形处理器或第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,以形成图形用户界面的步骤具体为:将多个窗口分别记为第一窗口、第二窗口……、第n窗口,由第一图形处理器或第二图形处理器将第一窗口对应的虚拟内存空间中保存的图片的各个像素点的值拷贝至硬件缓冲器的物理内存空间,将第二窗口对应的虚拟内存空间中保存的图片的各个像素点的值与已保存在硬件缓冲器中的第一窗口的各个像素点的值进行合成,并将合成的结果继续保存在硬件缓冲器中,将第三窗口对应的虚拟内存空间中保存的图片的各个像素点的值与已保存在硬件缓冲器中第一窗口和第二窗口合成后的各个像素点的值再次进行合成,并将合成的结果继续保存在硬件缓冲器中……依此类推,直至完成对第n窗口的合成操作,从而形成保存在硬件缓冲器中的图形用户界面,进一步通过OSD显示在屏幕上。其中,第一图形处理器和第二图形处理器不同。
本发明第一实施例的显示图形用户界面的方法通过创建多个窗口,由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片,根据预设规则选择第一图形处理器或第二图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,从而提高了图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
图6是本发明第二实施例的显示图形用户界面的方法的流程图。本发明基于两个窗口。需注意的是,若有实质上相同的结果,本发明的方法并不以图6所示的流程顺序为限。举例来说,图6所示的方法可由图1中的显示图形用户界面的装置100执行。如图6所示,该方法包括如下步骤:
步骤S201:由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片;,其中两个窗口由应用程序创建,分别记为第一窗口和第二窗口。其中,第一窗口和第二窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。
图形用户界面包括两层图片,分别记为第一层图片和第二层图片。其中,由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片的步骤具体为:由第一图形处理器将第一层图片中各个像素点的值写入第一窗口对应的虚拟内存空间,将第二层图片中各个像素点的值写入第二窗口对应的虚拟内存空间。其中,第一图形处理器为3D GPU。
步骤S202:分别获取绘制有图片的两个窗口的窗口尺寸;在步骤S202中,设定绘制有图片的第一窗口和第二窗口具有不同的窗口尺寸,第一窗口的窗口尺寸大于第二窗口的窗口尺寸。
步骤S203:由第二图形处理器将窗口尺寸较大的窗口拷贝至硬件缓冲器;在步骤S203中,由第二图形处理器将第一窗口对应的虚拟地址空间保存的第一层图片的各个像素点的值拷贝至硬件缓冲器的物理内存空间。其中,第二图形处理器可以为2D GFX或IMGRZ。
步骤S204:由第一图形处理器将窗口尺寸较小的窗口与拷贝至硬件缓冲器中的窗口尺寸较大的窗口进行合成,以形成图形用户界面。在步骤S204中,由第一图形处理器将第二窗口对应的虚拟地址空间保存的第二层图片的各个像素点的值与拷贝至硬件缓冲器中的第一层图片的各个像素点的值进行合成,从而形成图形用户界面,进一步通过OSD显示在屏幕上。此外,当第二图形处理器为2D GFX时,步骤S204也可替换为由第二图形处理器将窗口尺寸较小的窗口与拷贝至硬件缓冲器中的窗口尺寸较大的窗口进行合成。本发明第二实施例的显示图形用户界面的方法通过由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片,由第二图形处理器将窗口尺寸较大的窗口拷贝至硬件缓冲器,由第一图形处理器将窗口尺寸较小的窗口与拷贝至硬件缓冲器中的窗口尺寸较大的窗口进行合成,从而减少了第一图形处理器的处理负荷,提高了图片处理的效率,进而使人眼在屏幕上能看到连贯、流畅的画面。
图7是本发明第三实施例的显示图形用户界面的方法的流程图。本发明基于两个窗口。需注意的是,若有实质上相同的结果,本发明的方法并不以图7所示的流程顺序为限。举例来说,图7所示的方法可由图1中的显示图形用户界面的装置100执行。如图7所示,该方法包括如下步骤:
步骤S301:由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片;其中两个窗口由应用程序创建,分别记为第一窗口和第二窗口。其中,第一窗口和第二窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。
图形用户界面包括两层图片,分别记为第一层图片和第二层图片。其中,由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片的步骤具体为:由第一图形处理器将第一层图片中各个像素点的值写入第一窗口对应的虚拟内存空间,将第二层图片中各个像素点的值写入第二窗口对应的虚拟内存空间。其中,第一图形处理器为3D GPU。
步骤S302:分别获取绘制有图片的两个窗口的层次属性,按照层次属性从底层到顶层的顺序将两个窗口依次记为下层窗口和上层窗口;在步骤S302中,设定第一窗口的层次属性为下层窗口,第二窗口的层次属性为上层窗口。在另一举例说明中,可以按照层次属性为背景图片或者动态变化图片将两个窗口记为下层窗口和上层窗口,其中下层窗口对应背景图片,上层窗口对应动态变化图片。
步骤S303:由第二图形处理器将下层窗口拷贝至硬件缓冲器;在步骤S303中,由第二图形处理器将下层窗口(也即第一窗口)对应的虚拟地址空间保存的第一层图片的各个像素点的值拷贝至硬件缓冲器的物理地址空间。其中,第二图形处理器可以为2D GFX或IMGRZ。
步骤S304:由第一图形处理器将上层窗口与拷贝至硬件缓冲器中的下层窗口进行合成。在步骤S304中,由第一图形处理器将上层窗口(也即第二窗口)对应的虚拟地址空间保存的第二层图片的各个像素点的值与拷贝至硬件缓冲器中的第一层图片的各个像素点的值进行合成,从而形成图形用户界面,进一步通过OSD显示在屏幕上。此外,当第二图形处理器为2D GFX时,步骤S304也可替换为由第二图形处理器将上层窗口与拷贝至硬件缓冲器中的下层窗口进行合成。
本发明第三实施例的显示图形用户界面的方法通过由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片,由第二图形处理器将下层窗口拷贝至硬件缓冲器,由第一图形处理器将上层窗口与拷贝至硬件缓冲器中的下层窗口进行合成,从而减少了第一图形处理器的处理负荷,提高了图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
图8是本发明第四实施例的显示图形用户界面的方法的流程图。需注意的是,若有实质上相同的结果,本发明的方法并不以图8所示的流程顺序为限。举例来说,图8所示的方法可由图3中的显示图形用户界面的装置300执行。
如图8所示,该方法包括如下步骤:
步骤S401:由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片,其中,多个窗口中的至少一个存储于硬件缓冲器;
步骤S402:由第一图形处理器或第二图形处理器将存储于硬件缓冲器中的绘制有图片的窗口与剩余的窗口进行合成。
在步骤S401中,多个窗口包括虚拟窗口和物理窗口。其中,虚拟窗口对应由虚拟地址访问的一段虚拟内存空间。物理窗口对应由物理地址访问的一段物理内存空间,也即物理窗口存储于硬件缓冲器中。由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片的步骤具体为:由第一图形处理器将图形用户界面中每层图片的各个像素点的值写入对应窗口的内存空间,其中,如果窗口为虚拟窗口,则写入对应的虚拟内存空间,如果窗口为物理空间,则写入对应的物理内存空间,也即写入硬件缓冲器中。
举例来说,当多个窗口为两个窗口,分别记为第一窗口和第二窗口时,相应地,图形用户界面包括两层图片,分别记为第一层图片和第二层图片时。假设第一窗口为虚拟窗口,第二窗口为物理窗口,则由第一图形处理器将第一层图片的各个像素点的值写入虚拟窗口(也即第一窗口)对应的虚拟地址空间,将第二层图片的各个像素点的值写入物理窗口(也即第二窗口)对应的物理地址空间,也即写入硬件缓冲器中。
在步骤S402中,将虚拟窗口对应的虚拟内存空间保存的图片的各个像素点的值与保存在硬件缓冲器中的物理窗口中的各个像素点的值进行合成,从而形成图形用户界面,进一步通过OSD显示在屏幕上。
承接上述举例,将第一层图片的各个像素点的值从虚拟内存空间读出,与保存在硬件缓冲器中第二层图片的各个像素点的值进行合成,继续将合成后得到的各个像素点的值保存在硬件缓冲器中,进一步通过OSD显示在屏幕上。
本发明第四实施例的显示图形用户界面的方法通过由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片,其中,多个窗口中的至少一个存储于硬件缓冲器,由第一图形处理器或第二图形处理器将存储于硬件缓冲器中的绘制有图片的窗口与剩余的窗口进行合成,以形成图形用户界面。由于形成图形用户界面的部分图片直接写入硬件缓冲器,省略了该部分图片的拷贝操作,从而提高了图片的处理效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
图9是本发明第五实施例的显示图形用户界面的方法的流程图。需注意的是,若有实质上相同的结果,本发明的方法并不以图9所示的流程顺序为限。举例来说,图9所示的方法可由图4中的显示图形用户界面的装置400执行。
如图9所示,该方法包括如下步骤:
步骤S501:由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片;
步骤S502:根据预设规则,选择第一图形处理器、第二图形处理器和第三图形处理器中的至少一个合成绘制有图片的多个窗口至硬件缓冲器中,以形成图形用户界面。
其中,多个窗口由应用程序创建,每个窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。图形用户界面一般由多层图片叠加形成,其中,图形用户界面中图片的层数与创建的窗口的数量相对应。在步骤S501中,由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片步骤具体为:由第一图形处理器将图形用户界面中各层图片的各个像素点的值写入对应窗口的虚拟内存空间。
在步骤S502中,预设规则可根据第一图形处理器、第二图形处理器、第三图形处理器的状态或者根据多个窗口的属性来设置。举例来说,待显示的应用程序的图形用户界面通常包含多层图片,从而应用程序通常在多个窗口中分别绘制该多层图片。以第一图形处理器在两个窗口中分别绘制了第一层图片和第二层图片为例,如果分别将绘制有第一层图片和第二层图片的窗口记为第一窗口以及第二窗口,则可选择第三图形处理器的拷贝功能将绘制有第一层图片的第一窗口拷贝至硬件缓冲器,也可选择第二图形处理器的拷贝功能将绘制有第一层图片的第一窗口拷贝至硬件缓冲器,接下来处理绘制有第二层图片的第二窗口时,可根据第一图形处理器与第二图形处理器的工作负荷选择其中之一来将已拷贝至硬件缓冲器中的第一层图片与绘制有第二层图片的第二窗口合成,并将合成之后的图片存储至硬件缓冲器,从而将待显示的应用程序的图形用户界面存储至硬件缓冲器中待显示。
进一步举例来说,当多个窗口具有不同的属性时,可根据多个窗口的属性来设定预设规则,例如具体可以为以下两种:
第一种:分别获取绘制有图片的多个窗口的窗口尺寸,并根据窗口尺寸选择第一图形处理器、第二图形处理器和第三处理器中的至少一个合成绘制有图片的多个窗口。
第二种,分别获取绘制有图片的多个窗口的层次属性,其中层次属性用于指示窗口的层次关系,并根据层次属性选择第一图形处理器、第二图形处理器和第三图形处理器中的至少一个合成绘制有图片的多个窗口。
上述两种预设规则在图10、图11中所描述的显示图形用户界面的方法中详细描述。其中,硬件缓冲器为物理地址连续的物理存储器,其可通过地址和数据总线对其存储的内容直接进行读写。合成绘制有图片的多个窗口至硬件缓冲器中的步骤具体为:将多个窗口对应的虚拟内存空间中保存的图片的各个像素点的值在硬件缓冲器中进行合成,同时将合成得到的各个像素点的值保存在硬件缓冲器的物理内存空间。
其中,第一图形处理器、第二图形处理器和第三图形处理器彼此不同。
本发明第五实施例的显示图形用户界面的方法通过创建多个窗口,由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片,根据预设规则,选择第一图形处理器、第二图形处理器和第三图形处理器合成绘制有图片的多个窗口至硬件缓冲器中,从而提高了图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
图10是本发明第六实施例的显示图形用户界面的方法的流程图。本发明基于两个窗口。需注意的是,若有实质上相同的结果,本发明的方法并不以图10所示的流程顺序为限。举例来说,图10所示的方法可由图4中的显示图形用户界面的装置400执行。
如图10所示,该方法包括如下步骤:
步骤S601:由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片;其中,两个窗口由应用程序创建,分别记为第一窗口和第二窗口。其中,第一窗口和第二窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。图形用户界面包括两层图片,分别记为第一层图片和第二层图片。其中,由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片的步骤具体为:由第一图形处理器将第一层图片中各个像素点的值写入第一窗口对应的虚拟内存空间,将第二层图片中各个像素点的值写入第二窗口对应的虚拟内存空间。其中,第一图形处理器为3D GPU。
步骤S602:分别获取绘制有图片的两个窗口的窗口尺寸;在步骤S602中,设定绘制有图片的第一窗口和第二窗口具有不同的窗口尺寸,其中,第一窗口的窗口尺寸大于第二窗口的窗口尺寸。
步骤S603:由第三图形处理器将窗口尺寸较大的窗口拷贝至硬件缓冲器;在步骤S603中,由第三图形处理器将窗口尺寸较大的窗口(也即第一窗口)对应的虚拟地址空间保存的第一层图片的各个像素点的值拷贝至硬件缓冲器的物理地址空间。其中,第三图形处理器为IMGRZ。此外,步骤S603也可替换为采用第二图形处理器2D GFX将窗口尺寸较大的窗口拷贝至硬件缓冲器。
步骤S604:由第二图形处理器将窗口尺寸较小的窗口与拷贝至硬件缓冲器中的窗口尺寸较大的窗口进行合成。在步骤S604中,由第二图形处理器将窗口尺寸较小的窗口(也即第二窗口)对应的虚拟地址空间保存的第二层图片的各个像素点的值与拷贝至硬件缓冲器中的第一层图片的各个像素点的值进行合成,从而形成图形用户界面,进一步通过OSD显示在屏幕上。此外,步骤S604也可替换为采用第一图形处理器将窗口尺寸较小的窗口与拷贝至硬件缓冲器中的窗口尺寸较大的窗口进行合成。本发明第六实施例的显示图形用户界面的方法通过由第一图形处理器在两个窗口中分别绘制用于形成图形用户界面的图片,由第三图形处理器将窗口尺寸较大的窗口拷贝至硬件缓冲器,由第二图形处理器将窗口尺寸较小的窗口与拷贝至硬件缓冲器中的窗口尺寸较大的窗口进行合成,从而减少了第一图形处理器的处理负荷,提高了图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
图11是本发明第七实施例的显示图形用户界面的方法的流程图。本发明基于三个窗口。需注意的是,若有实质上相同的结果,本发明的方法并不以图11所示的流程顺序为限。举例来说,图11所示的方法可由图4中的显示图形用户界面的装置400执行。
如图11所示,该方法包括如下步骤:
步骤S701:由第一图形处理器在三个窗口中分别绘制用于形成图形用户界面的图片;其中,上述三个窗口由应用程序创建,分别记为第一窗口、第二窗口和第三窗口。其中,第一窗口、第二窗口和第三窗口为虚拟窗口,其对应由虚拟地址访问的一段虚拟内存空间。
图形用户界面包括三层图片,分别记为第一层图片、第二层图片和第三层图片。其中,由第一图形处理器在多个窗口中分别绘制用于形成图形用户界面的图片的步骤具体为:由第一图形处理器将第一层图片中各个像素点的值写入第一窗口对应的虚拟内存空间,将第二层图片中各个像素点的值写入第二窗口对应的虚拟内存空间,将第三层图片中各个像素点的值写入第三窗口对应的虚拟内存空间。其中,第一图形处理器为3D GPU。
步骤S702:分别获取绘制有图片的三个窗口的层次属性,按照层次属性从底层到顶层的顺序将三个窗口依次记为下层窗口、中层窗口和上层窗口;在步骤S702中,设定第一窗口的层次属性为下层窗口,第二窗口的层次属性为中层窗口,第三窗口的层次属性为上层窗口。在另一举例说明中,可按照层次属性为背景图片或者动态变化图片将三个窗口记为下层窗口、中层窗口和上层窗口,其中下层窗口对应背景图片,中层窗口对应第一动态变化图片以及上层窗口对应第二动态变化图片。
步骤S703:由第三图形处理器将下层窗口拷贝至硬件缓冲器;在步骤S703中,由第三图形处理器将下层窗口(也即第一窗口)对应的虚拟地址空间保存的第一层图片的各个像素点的值拷贝至硬件缓冲器的物理地址空间。其中,第三图形处理器为IMGRZ。在另一举例说明中,步骤S703也可替换为可由第二图形处理器将下层窗口拷贝至硬件缓冲器中,其中第二图形处理器是2D GFX。
步骤S704:由第二图形处理器和第一图形处理器中的一个将中层窗口与拷贝至硬件缓冲器的下层窗口进行合成,以形成存储于硬件缓冲器的合成图形;在步骤S704中,由第二图形处理器和第一图形处理器中的一个将中层窗口(也即第二窗口)对应的虚拟地址空间中保存的第二层图片的各个像素点的值与拷贝至硬件缓冲器中的第一层图片的各个像素点的值进行合成,以形成合成图像并保存于硬件缓冲器中。其中,第二图形处理器为2D GFX。
步骤S705:由第二图形处理器和第一图形处理器中的另一个将上层窗口与存储于硬件缓冲器的合成图形进行合成。在步骤S705中,由第二图形处理器和第一图形处理器中的另一个将上层窗口(也即第三窗口)对应的虚拟地址空间保存的第三层图片的各个像素点的值与保存在硬件缓冲器中合成图片对应的各个像素点的值进行合成,以形成图形用户界面,进一步通过OSD显示在屏幕上。
本发明第七实施例的显示图形用户界面的方法通过首先由第一图形处理器在三个窗口中分别绘制用于形成图形用户界面的图片,接着由第三图形处理器将下层窗口拷贝至硬件缓冲器,然后由第二图形处理器和第一图形处理器中的一个将中层窗口与拷贝至硬件缓冲器的下层窗口进行合成,以形成存储于硬件缓冲器的合成图形,最后由第二图形处理器和第一图形处理器中的另一个将上层窗口与存储于硬件缓冲器的合成图形进行合成,从而减少了第一图形处理器的处理负荷,提高了图片处理的效率,进而使得图形用户界面的显示帧率得到提高,使人眼在屏幕上能看到连贯、流畅的画面。
以上所述仅为本发明的实施方式,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (34)

1.一种显示图形用户界面的方法,其中该图形用户界面是基于多个窗口而产生,其特征在于,所述方法包括:
由第一图形处理器在所述多个窗口中分别绘制用于形成所述图形用户界面的图片;以及
根据预设规则,选择所述第一图形处理器或第二图形处理器合成绘制有所述图片的所述多个窗口至硬件缓冲器中,以形成所述图形用户界面;
其中所述第一图形处理器与所述第二图形处理器不同。
2.根据权利要求1所述的显示图形用户界面的方法,其特征在于,所述预设规则具体为:选择所述第二图形处理器合成绘制有所述图片的所述多个窗口。
3.根据权利要求1所述的显示图形用户界面的方法,其特征在于,所述预设规则具体为:
判断所述第一图形处理器的使用率是否超过预定阈值;
若超过预定阈值,由所述第二图形处理器合成绘制有所述图片的所述多个窗口。
4.根据权利要求1所述的显示图形用户界面的方法,其特征在于,所述根据预设规则,选择所述第一图形处理器或第二图形处理器合成绘制有所述图片的所述多个窗口至硬件缓冲器中的步骤包括:
分别获取绘制有所述图片的所述多个窗口的窗口尺寸;
根据所述窗口尺寸选择所述第一图形处理器或所述第二图形处理器合成绘制有所述图片的所述多个窗口。
5.根据权利要求4所述的显示图形用户界面的方法,其特征在于,所述多个窗口包括两个窗口,所述方法包括:
分别获取绘制有所述图片的两个所述窗口的所述窗口尺寸;
由所述第二图形处理器将所述窗口尺寸较大的所述窗口拷贝至所述硬件缓冲器;
由所述第一图形处理器将所述窗口尺寸较小的所述窗口与拷贝至所述硬件缓冲器中的所述窗口尺寸较大的所述窗口进行合成。
6.根据权利要求1所述的显示图形用户界面的方法,其特征在于,所述根据预设规则,选择所述第一图形处理器或第二图形处理器合成绘制有所述图片的所述多个窗口至硬件缓冲器中的步骤包括:
分别获取绘制有所述图片的所述多个窗口的层次属性,其中所述层次属性用于指示所述窗口的层次关系;
根据所述层次属性选择所述第一图形处理器或所述第二图形处理器合成绘制有所述图片的所述多个窗口。
7.根据权利要求6所述的显示图形用户界面的方法,其特征在于,所述多个窗口包括两个窗口,所述方法包括:
分别获取绘制有所述图片的两个所述窗口的所述层次属性,按照所述层次属性从底层到顶层的顺序将两个所述窗口依次记为下层窗口和上层窗口;
由所述第二图形处理器将所述下层窗口拷贝至所述硬件缓冲器;
由所述第一图形处理器将所述上层窗口与拷贝至所述硬件缓冲器的所述下层窗口进行合成。
8.根据权利要求1-7任意一项所述的显示图形用户界面的方法,其特征在于,所述第一图形处理器为三维图形处理单元,所述第二图形处理器为二维图形处理单元。
9.根据权利要求1,4-7任意一项所述的显示图形用户界面的方法,其特征在于,所述第一图形处理器为三维图形处理单元,所述第二图形处理器为图形缩放处理单元。
10.一种显示图形用户界面的装置,其特征在于,所述装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成所述图形用户界面的图片;
第二图形处理器;以及
硬件缓冲器,耦接于所述第一图形处理器与所述第二图形处理器;
窗口管理模块,根据预设规则,选择所述第一图形处理器或所述第二图形处理器合成绘制有所述图片的所述多个窗口至所述硬件缓冲器中;
其中所述第一图形处理器与所述第二图形处理器不同。
11.根据权利要求10所述的显示图形用户界面的装置,其特征在于,所述预设规则具体为:选择所述第二图形处理器合成绘制有所述图片的所述多个窗口。
12.根据权利要求10所述的显示图形用户界面的装置,其特征在于,所述预设规则具体为:所述窗口管理模块判断所述第一图形处理器的使用率是否超过预定阈值;若所述窗口管理模块判断所述第一图形处理器的使用率超过预定阈值,选择所述第二图形处理器合成绘制有所述图片的所述多个窗口。
13.根据权利要求10所述的显示图形用户界面的装置,其特征在于,所述预设规则具体为:所述窗口管理模块分别获取绘制有所述图片的所述多个窗口的窗口尺寸,并根据所述窗口尺寸选择所述第一图形处理器或所述第二图形处理器合成绘制有所述图片的所述多个窗口。
14.根据权利要求13所述的显示图形用户界面的装置,其特征在于,所述多个窗口包括两个窗口,所述窗口管理模块分别获取绘制有所述图片的两个所述窗口的所述窗口尺寸;
所述第二图形处理器将所述窗口尺寸较大的所述窗口拷贝至所述硬件缓冲器;
所述第一图形处理器将所述窗口尺寸较小的所述窗口与拷贝至所述硬件缓冲器中的所述窗口尺寸较大的所述窗口进行合成。
15.根据权利要求13所述的显示图形用户界面的装置,其特征在于,所述预设规则具体为:所述窗口管理模块分别获取绘制有所述图片的所述多个窗口的层次属性,其中所述层次属性用于指示所述窗口的层次关系,并根据所述层次属性选择所述第一图形处理器或所述第二图形处理器合成绘制有所述图片的所述多个窗口。
16.根据权利要求15所述的显示图形用户界面的装置,其特征在于,所述多个窗口包括两个窗口,所述窗口管理模块分别获取绘制有所述图片的两个所述窗口的所述层次属性,按照所述层次属性从底层到顶层的顺序将两个所述窗口依次记为下层窗口和上层窗口;
其中,所述第二图形处理器将所述下层窗口拷贝至硬件缓冲器;所述第一图形处理器将所述上层窗口与拷贝至所述硬件缓冲器的所述下层窗口进行合成。
17.根据权利要求10-16所述的显示图形用户界面的装置,其特征在于,所述第一图形处理器为三维图形处理单元,所述第二图形处理器为二维图形处理单元。
18.根据权利要求10,13-16任意一项所述的显示图形用户界面的方法,其特征在于,所述第一图形处理器为三维图形处理单元,所述第二图形处理器为图形缩放处理单元。
19.一种显示图形用户界面的方法,其中该图形用户界面是基于多个窗口而产生,其特征在于,所述方法包括:
由所述第一图形处理器在多个窗口中分别绘制用于形成所述图形用户界面的图片,其中,所述多个窗口中的至少一个存储于所述硬件缓冲器;
由所述第一图形处理器或第二图形处理器将存储于所述硬件缓冲器中的绘制有所述图片的窗口与剩余的窗口进行合成,以形成所述图形用户界面;
其中所述第一图形处理器与所述第二图形处理器不同。
20.一种显示图形用户界面的装置,其特征在于,所述装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成所述图形用户界面的图片;
硬件缓冲器,与所述第一图形处理器耦接;
其中,所述多个窗口中的至少一个存储于所述硬件缓冲器;所述第一图形处理器将存储于所述硬件缓冲器中绘制有所述图片的窗口与剩余的窗口进行合成,以形成所述图形用户界面。
21.一种显示图形用户界面的装置,其特征在于,所述装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成所述图形用户界面的图片;
第二图形处理器;
硬件缓冲器,与所述第一图形处理器以及第二图形处理器耦接;
其中,所述多个窗口中的至少一个存储于所述硬件缓冲器;所述第二图形处理器将存储于所述硬件缓冲器中绘制有所述图片的窗口与剩余的窗口进行合成,以形成所述图形用户界面;
其中所述第一图形处理器与所述第二图形处理器不同。
22.一种显示图形用户界面的方法,其中该图形用户界面是基于多个窗口而产生,其特征在于,所述方法包括:
由第一图形处理器在所述多个窗口中分别绘制用于形成所述图形用户界面的图片;以及
根据预设规则,选择所述第一图形处理器、第二图形处理器和第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口至硬件缓冲器中;
其中所述第一图形处理器、所述第二图形处理器以及所述第三图形处理器彼此不同。
23.根据权利要求22所述的显示图形用户界面的方法,其特征在于,所述预设规则具体为:分别获取绘制有所述图片的所述多个窗口的窗口尺寸,并根据所述窗口尺寸选择所述第一图形处理器、所述第二图形处理器和所述第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口。
24.根据权利要求23所述的显示图形用户界面的方法,其特征在于,所述多个窗口包括两个窗口,所述方法包括:
分别获取绘制有所述图片的两个所述窗口的所述窗口尺寸;
由所述第三图形处理器将所述窗口尺寸较大的所述窗口拷贝至所述硬件缓冲器;
由所述第二图形处理器将所述窗口尺寸较小的所述窗口与拷贝至所述硬件缓冲器中的所述窗口尺寸较大的所述窗口进行合成。
25.根据权利要求22所述的显示图形用户界面的方法,其特征在于,所述根据预设规则,选择所述第一图形处理器、第二图形处理器和第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口至所述硬件缓冲器中的步骤包括:
分别获取绘制有所述图片的所述多个窗口的层次属性,其中所述层次属性用于指示所述窗口的层次关系,并根据所述层次属性选择所述第一图形处理器、所述第二图形处理器和所述第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口。
26.根据权利要求25所述的显示图形用户界面的方法,其特征在于,所述多个窗口包括三个窗口,所述方法包括:
分别获取绘制有所述图片的三个所述窗口的所述层次属性,按照所述层次属性从底层到顶层的顺序将三个所述窗口依次记为下层窗口、中层窗口和上层窗口;
由所述第三图形处理器将所述下层窗口拷贝至硬件缓冲器;
由所述第二图形处理器和所述第一图形处理器中的一个将所述中层窗口与拷贝至所述硬件缓冲器的所述下层窗口进行合成,以形成存储于所述硬件缓冲器的合成图形;
由所述第二图形处理器和所述第一图形处理器中的另一个将所述上层窗口与存储于所述硬件缓冲器的所述合成图形进行合成。
27.根据权利要求22-26任意一项所述的方法,其特征在于,所述第一图形处理器为三维图形处理单元,所述第二图形处理器为二维图形处理单元,所述第三图形处理器为图形缩放处理单元。
28.一种显示图形用户界面的装置,其特征在于,所述装置包括:
第一图形处理器,在多个窗口中分别绘制用于形成所述图形用户界面的图片;
第二图形处理器;
第三图形处理器,以及
硬件缓冲器,耦接于所述第一图形处理器为、所述第二图形处理器和所述第三图形处理器;
窗口管理模块,根据预设规则,选择所述第一图形处理器、所述第二图形处理器和所述第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口至所述硬件缓冲器中;
其中所述第一图形处理器、第二图形处理器与第三图形处理器彼此不同。
29.根据权利要求28所述的显示图形用户界面的装置,其特征在于,所述预设规则具体为:所述窗口管理模块分别获取绘制有所述图片的所述多个窗口的窗口尺寸,并根据所述窗口尺寸选择所述第一图形处理器、所述第二图形处理器和所述第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口。
30.根据权利要求29所述的显示图形用户界面的装置,其特征在于,所述多个窗口包括两个窗口,所述窗口管理模块分别获取绘制有所述图片的两个所述窗口的所述窗口尺寸;
所述第三图形处理器将所述窗口尺寸较大的所述窗口拷贝至所述硬件缓冲器;
所述第二图形处理器将所述窗口尺寸较小的所述窗口与拷贝至所述硬件缓冲器中的所述窗口尺寸较大的所述窗口进行合成。
31.根据权利要求28所述的显示图形用户界面的装置,其特征在于,所述预设规则具体为:所述窗口管理模块分别获取绘制有所述图片的所述多个窗口的层次属性,其中所述层次属性用于指示所述窗口的层次关系,并根据所述层次属性选择所述第一图形处理器、所述第二图形处理器和所述第三图形处理器中的至少一个合成绘制有所述图片的所述多个窗口。
32.根据权利要求31所述的显示图形用户界面的装置,其特征在于,所述多个窗口包括两个窗口,所述窗口管理模块分别获取绘制有所述图片的两个所述窗口的所述层次属性,按照所述层次属性从底层到顶层的顺序将两个所述窗口依次记为下层窗口和上层窗口;
其中,所述第三图形处理器将所述下层窗口拷贝至硬件缓冲器;所述第二图形处理器将所述上层窗口与拷贝至所述硬件缓冲器的所述下层窗口进行合成。
33.根据权利要求31所述的显示图形用户界面的装置,其特征在于,所述多个窗口包括三个窗口,所述窗口管理模块分别获取绘制有所述图片的三个所述窗口的所述层次属性,按照所述层次属性从底层到顶层的顺序将三个所述窗口依次记为下层窗口、中层窗口和上层窗口;
所述第三图形处理器将所述下层窗口拷贝至硬件缓冲器;
所述第二图形处理器和所述第一图形处理器中的一个将所述中层窗口与拷贝至所述硬件缓冲器的所述下层窗口进行合成,以形成存储于所述硬件缓冲器的合成图形;
所述第二图形处理器和所述第一图形处理器中的另一个将所述上层窗口与存储于所述硬件缓冲器的所述合成图形进行合成。
34.根据权利要求28-33所述的显示图形用户界面的装置,其特征在于,所述第一图形处理器为三维图形处理单元,所述第二图形处理器为二维图形处理单元,所述第三图形处理器为图形缩放处理单元。
CN201410008802.7A 2014-01-08 2014-01-08 一种显示图形用户界面的方法及装置 Active CN104765594B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201410008802.7A CN104765594B (zh) 2014-01-08 2014-01-08 一种显示图形用户界面的方法及装置
US14/592,177 US9786256B2 (en) 2014-01-08 2015-01-08 Method and device for generating graphical user interface (GUI) for displaying

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410008802.7A CN104765594B (zh) 2014-01-08 2014-01-08 一种显示图形用户界面的方法及装置

Publications (2)

Publication Number Publication Date
CN104765594A true CN104765594A (zh) 2015-07-08
CN104765594B CN104765594B (zh) 2018-07-31

Family

ID=53495582

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410008802.7A Active CN104765594B (zh) 2014-01-08 2014-01-08 一种显示图形用户界面的方法及装置

Country Status (2)

Country Link
US (1) US9786256B2 (zh)
CN (1) CN104765594B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105975176A (zh) * 2016-04-27 2016-09-28 上海斐讯数据通信技术有限公司 一种相机的快速启动系统及方法
CN106060622A (zh) * 2016-07-26 2016-10-26 青岛海信电器股份有限公司 电视的截屏方法及电视
CN106780510A (zh) * 2016-11-30 2017-05-31 宇龙计算机通信科技(深圳)有限公司 一种图像处理方法及终端设备
WO2017167127A1 (zh) * 2016-03-31 2017-10-05 阿里巴巴集团控股有限公司 一种图形合成方法、窗口设置方法及系统
WO2018161585A1 (zh) * 2017-03-10 2018-09-13 广东欧珀移动通信有限公司 电子设备帧率的控制方法、装置、存储介质及电子设备
CN109791755A (zh) * 2016-09-23 2019-05-21 三星电子株式会社 图像处理装置、显示装置及其控制方法
WO2021104104A1 (zh) * 2019-11-28 2021-06-03 华为技术有限公司 一种高能效的显示处理方法及设备
CN114035851A (zh) * 2021-11-08 2022-02-11 北京鲸鲮信息系统技术有限公司 多系统的图形数据处理方法及装置、电子设备和存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10216681B2 (en) * 2015-12-01 2019-02-26 Dell Products, Lp System and method for managing workloads and hot-swapping a co-processor of an information handling system
US20180025704A1 (en) * 2016-07-21 2018-01-25 Tektronix, Inc. Composite user interface
CN110018759B (zh) * 2019-04-10 2021-01-12 Oppo广东移动通信有限公司 界面显示方法、装置、终端及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100058229A1 (en) * 2008-09-02 2010-03-04 Palm, Inc. Compositing Windowing System
CN103310761A (zh) * 2012-03-08 2013-09-18 株式会社泛泰 用于选择性地显示图像的源设备和方法
US20130328922A1 (en) * 2012-06-11 2013-12-12 Qnx Software Systems Limited Cell-based composited windowing system

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8659615B2 (en) * 2003-01-31 2014-02-25 Nvidia Corporation System and method for providing transparent windows of a display
US7636097B1 (en) * 2006-02-15 2009-12-22 Adobe Systems Incorporated Methods and apparatus for tracing image data
US8432332B2 (en) * 2008-06-18 2013-04-30 Hewlett-Packard Development Company, L.P. Extensible user interface for digital display devices
US8610737B2 (en) * 2010-05-27 2013-12-17 National Taiwan University Graphic processing unit (GPU) with configurable filtering module and operation method thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100058229A1 (en) * 2008-09-02 2010-03-04 Palm, Inc. Compositing Windowing System
CN103310761A (zh) * 2012-03-08 2013-09-18 株式会社泛泰 用于选择性地显示图像的源设备和方法
US20130328922A1 (en) * 2012-06-11 2013-12-12 Qnx Software Systems Limited Cell-based composited windowing system

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107292807B (zh) * 2016-03-31 2020-12-04 阿里巴巴集团控股有限公司 一种图形合成方法、窗口设置方法及系统
WO2017167127A1 (zh) * 2016-03-31 2017-10-05 阿里巴巴集团控股有限公司 一种图形合成方法、窗口设置方法及系统
CN107292807A (zh) * 2016-03-31 2017-10-24 阿里巴巴集团控股有限公司 一种图形合成方法、窗口设置方法及系统
CN105975176A (zh) * 2016-04-27 2016-09-28 上海斐讯数据通信技术有限公司 一种相机的快速启动系统及方法
CN106060622B (zh) * 2016-07-26 2019-02-19 青岛海信电器股份有限公司 电视的截屏方法及电视
US10169898B2 (en) 2016-07-26 2019-01-01 Hisense Electric Co., Ltd. Method for generating screenshot image on television terminal and associated television
CN106060622A (zh) * 2016-07-26 2016-10-26 青岛海信电器股份有限公司 电视的截屏方法及电视
CN109791755A (zh) * 2016-09-23 2019-05-21 三星电子株式会社 图像处理装置、显示装置及其控制方法
CN109791755B (zh) * 2016-09-23 2022-04-19 三星电子株式会社 图像处理装置、显示装置及其控制方法
CN106780510A (zh) * 2016-11-30 2017-05-31 宇龙计算机通信科技(深圳)有限公司 一种图像处理方法及终端设备
WO2018161585A1 (zh) * 2017-03-10 2018-09-13 广东欧珀移动通信有限公司 电子设备帧率的控制方法、装置、存储介质及电子设备
US10863213B2 (en) 2017-03-10 2020-12-08 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Method and device for controlling frame rate of electronic device, storage medium, and electronic device
WO2021104104A1 (zh) * 2019-11-28 2021-06-03 华为技术有限公司 一种高能效的显示处理方法及设备
CN114035851A (zh) * 2021-11-08 2022-02-11 北京鲸鲮信息系统技术有限公司 多系统的图形数据处理方法及装置、电子设备和存储介质
CN114035851B (zh) * 2021-11-08 2023-10-03 北京字节跳动网络技术有限公司 多系统的图形数据处理方法及装置、电子设备和存储介质

Also Published As

Publication number Publication date
US20150193906A1 (en) 2015-07-09
CN104765594B (zh) 2018-07-31
US9786256B2 (en) 2017-10-10

Similar Documents

Publication Publication Date Title
CN104765594A (zh) 一种显示图形用户界面的方法及装置
US8436857B2 (en) System and method for applying level of detail schemes
US8839142B2 (en) Desktop system object removal
KR101713177B1 (ko) 가상 디스플레이들에 대한 시스템 및 방법
CN108476306B (zh) 一种图像显示的方法及终端设备
CN104765595A (zh) 一种显示图形用户界面的方法及装置
US20150123993A1 (en) Image processing device and image processing method
CN103530078A (zh) 用于显示镜像的系统与方法
CN102122502B (zh) 一种三维字体显示方法以及相关装置
KR101993941B1 (ko) 안티앨리어싱 기법을 이용하여 텍스트를 렌더링하기 위한 커버리지 값의 캐싱 기법
WO1999039328A1 (en) Multiscreen display system and method
CN105467603B (zh) 一种立体显示装置
MXPA03007879A (es) Aparato de procesamiento de despliegue de pantalla, metodo de procesamiento de despliegue d pantalla y programa de computo.
US9384593B2 (en) Level of detail processing
US9318078B2 (en) Intelligent memory management system and method for visualization of information
CN107277483A (zh) 一种虚拟现实显示方法、装置及虚拟现实眼镜
US8887073B2 (en) Reshaping interfaces using content-preserving warps
JP2011511991A (ja) グラフィックディジタル文書の動画化装置および方法
US20150310833A1 (en) Displaying Hardware Accelerated Video on X Window Systems
US20110316877A1 (en) Display area control apparatus, display area control method, and integrated circuit
US10424084B2 (en) Digital content rendering that supports alpha is shape (AIS) as part of knockout groups
EP2672480B1 (en) Tiled viewport composition
CN106354449A (zh) 一种文档在线演示方法及客户端
CN106415473A (zh) 显示器装置及其控制方法
SE538519C2 (en) A method and computer program for simulating a three dimensional display of data on a two dimensional display

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant