CN106204675A - 虚拟桌面呈现设备中的2d显示加速方法 - Google Patents
虚拟桌面呈现设备中的2d显示加速方法 Download PDFInfo
- Publication number
- CN106204675A CN106204675A CN201610534471.XA CN201610534471A CN106204675A CN 106204675 A CN106204675 A CN 106204675A CN 201610534471 A CN201610534471 A CN 201610534471A CN 106204675 A CN106204675 A CN 106204675A
- Authority
- CN
- China
- Prior art keywords
- display device
- view data
- virtual desktop
- desktop display
- envelope
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Generation (AREA)
Abstract
本发明涉及一种虚拟桌面呈现设备中的2D显示加速方法，包括：S1：确定2D图像的最小矩形包络，并矩形包络中的图像数据进行压缩；S2：将压缩后的图像数据，以及对应矩形包络的尺寸和位置发送至客户端；S3：客户端对压缩后的图像数据进行解压，并由GPU根据解压后的图像数据以及对应矩形包络的尺寸和位置对2D图像进行渲染。与现有技术相比，本发明采用差异更新策略，对变更的区域，计算其最小矩形包络，并对这些变更的区域才进行计算，渲染过程由GPU进行，解放了CPU，解决虚拟桌面呈现设备的2D图像渲染性能不足的问题，提高设备在高帧率场景下的流畅度，提升用户体验。
Description
技术领域
本发明涉及一种虚拟桌面技术，尤其是涉及一种虚拟桌面呈现设备中的2D显示加速方法。
背景技术
目前的虚拟桌面的客户端设备中的2D图像渲染主要是利用纯软件方法完成。即将从服务器端接收的经无损压缩后的2D图像流一帧一帧的传输到客户端，在客户端软件解压后直接渲染到屏幕上。该方式渲染速度缓慢，且占用大量的内存带宽，对整体性能拖累较大，给用户最直观的感受便是视频播放等高帧率场景下很不流畅。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种虚拟桌面呈现设备中的2D显示加速方法。
本发明的目的可以通过以下技术方案来实现：
一种虚拟桌面呈现设备中的2D显示加速方法，包括：
S1：确定2D图像的一个或多个最小矩形包络，并对所有矩形包络中的图像数据进行压缩；
S2：将压缩后的图像数据，以及对应矩形包络的尺寸和位置发送至客户端；
S3：客户端对压缩后的图像数据进行解压，并由GPU根据解压后的图像数据以及对应矩形包络的尺寸和位置对所述2D图像进行渲染。
所述步骤S1具体包括步骤：
S11：确定2D图像中的所有图像变更区域；
S12：基于图像变更区域确定一个或多个矩形包络，使得所有矩形包络的总面积最小。
所述步骤S3具体包括步骤：
S31：客户端接收压缩后的图像数据后，由CPU对其进行解压，并将解压后的数据存放于系统内存中；
S32：DMA控制器控制系统内存中存放的解压后的图像数据，以及对应矩形包络的尺寸和位置传输至GPU中；
S33：GPU根据解压后的图像数据以及对应矩形包络的尺寸和位置对所述2D图像进行渲染。
所述步骤S32的过程中，DMA控制器接管系统总线的控制权。
所述步骤S32的过程中，DMA控制器和CPU交替访问系统内存。
所述系统内存为物理内存和/或虚拟内存。
矩形包络的尺寸为长宽。
矩形包络的位置为坐标。
与现有技术相比，本发明具有以下优点：
1)采用差异更新策略，对变更的区域，计算其最小矩形包络，并对这些变更的区域才进行计算，渲染过程由GPU进行，解放了CPU，解决虚拟桌面呈现设备的2D图像渲染性能不足的问题，提高设备在高帧率场景下的流畅度，提升用户体验。
2)数据从内存中到GPU中的过程采用了DMA方式，这种方式可以不需要CPU来执行中转，因此CPU可以处理自己的计算任务，不会被拖累，提高了CPU的效率。
3)采用DMA和CPU交替访问系统内存的方式，CPU既不停止主程序的运行，也不进入等待状态，可以更加高效。
附图说明
图1为本发明方法的主要步骤流程示意图；
图2为本发明实现系统的组成结构示意图；
其中1、CPU，2、GPU，3、DMA控制器，4、系统内存，5、SoC，6、系统总线。
具体实施方式
下面结合附图和具体实施例对本发明进行详细说明。本实施例以本发明技术方案为前提进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
为了实现本申请，如图2所示，客户端的SoC 5包含CPU 1、GPU 2以及DMA控制器3，CPU 1、GPU 2以及DMA控制器均与系统总线6连接，此外系统内存4也连接至系统总线6。
一种虚拟桌面呈现设备中的2D显示加速方法，如图1所示，包括：
S1：确定2D图像的一个或多个最小矩形包络，并对所有矩形包络中的图像数据进行压缩，具体包括步骤：
S11：确定2D图像中的所有图像变更区域；
S12：基于图像变更区域确定一个或多个矩形包络，使得所有矩形包络的总面积最小。
最小矩形包络的确定算法不属于本申请的讨论范畴，本领域技术人员可以根据步骤S12中提出的要求自行选择合适的算法。
S2：将压缩后的图像数据，以及对应矩形包络的尺寸和位置发送至客户端，其中矩形包络的尺寸为长宽，位置为坐标；
S3：客户端对压缩后的图像数据进行解压，并由GPU 1根据解压后的图像数据以及对应矩形包络的尺寸和位置对2D图像进行渲染，具体包括步骤：
S31：客户端接收压缩后的图像数据后，由CPU 1对其进行解压，并将解压后的数据存放于系统内存4中，其中，系统内存4为物理内存和/或虚拟内存，具体由操作系统安排控制；
S32：DMA控制器3控制系统内存4中存放的解压后的图像数据，以及对应矩形包络的尺寸和位置传输至GPU 1中，在DMA控制的过程中，DMA控制器3接管系统总线6的控制权，更优的，DMA控制器和CPU 1交替访问系统内存4。
S33：GPU 1根据解压后的图像数据以及对应矩形包络的尺寸和位置对2D图像进行渲染。
本申请主要使用客户端SoC 5内的硬件GPU 2进行2D图形的渲染，该模块会利用DMA的方式直接将2D图像将GPU 2解码完成的数据流输出到客户端虚拟桌面呈现设备上，而不再通过软件方式由CPU 1完成2D图形的解码和渲染。
本申请充分利用客户端设备的GPU硬件加速功能以及DMA控制器的空能来提升2D图形显示速度，将图形数据流由客户端的GPU硬件模块直接渲染，整个过程节省了大量的内存带宽和CPU占用，一方面在计算资源本就紧张的客户端设备上节省下大量的CPU 1计算资源，另一方面也极大地提高了显示速度，硬件拷贝的速度是远快于软件拷贝，实现低成本与高性能的统一。
Claims (8)
1.一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，包括：
S1：确定2D图像的一个或多个最小矩形包络，并对所有矩形包络中的图像数据进行压缩；
S2：将压缩后的图像数据，以及对应矩形包络的尺寸和位置发送至客户端；
S3：客户端对压缩后的图像数据进行解压，并由GPU根据解压后的图像数据以及对应矩形包络的尺寸和位置对所述2D图像进行渲染。
2.根据权利要求1所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，所述步骤S1具体包括步骤：
S11：确定2D图像中的所有图像变更区域；
S12：基于图像变更区域确定一个或多个矩形包络，使得所有矩形包络的总面积最小。
3.根据权利要求1所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，所述步骤S3具体包括步骤：
S31：客户端接收压缩后的图像数据后，由CPU对其进行解压，并将解压后的数据存放于系统内存中；
S32：DMA控制器控制系统内存中存放的解压后的图像数据，以及对应矩形包络的尺寸和位置传输至GPU中；
S33：GPU根据解压后的图像数据以及对应矩形包络的尺寸和位置对所述2D图像进行渲染。
4.根据权利要求3所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，所述步骤S32的过程中，DMA控制器接管系统总线的控制权。
5.根据权利要求4所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，所述步骤S32的过程中，DMA控制器和CPU交替访问系统内存。
6.根据权利要求3所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，所述系统内存为物理内存和/或虚拟内存。
7.根据权利要求1所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，矩形包络的尺寸为长宽。
8.根据权利要求1所述的一种虚拟桌面呈现设备中的2D显示加速方法，其特征在于，矩形包络的位置为坐标。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610534471.XA CN106204675A (zh) | 2016-07-08 | 2016-07-08 | 虚拟桌面呈现设备中的2d显示加速方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610534471.XA CN106204675A (zh) | 2016-07-08 | 2016-07-08 | 虚拟桌面呈现设备中的2d显示加速方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106204675A true CN106204675A (zh) | 2016-12-07 |
Family
ID=57472740
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610534471.XA Pending CN106204675A (zh) | 2016-07-08 | 2016-07-08 | 虚拟桌面呈现设备中的2d显示加速方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106204675A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110515686A (zh) * | 2019-08-28 | 2019-11-29 | 联想(北京)有限公司 | 一种图像显示方法及装置 |
| CN117909268A (zh) * | 2024-03-19 | 2024-04-19 | 麒麟软件有限公司 | 一种gpu驱动优化方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110102443A1 (en) * | 2009-11-04 | 2011-05-05 | Microsoft Corporation | Virtualized GPU in a Virtual Machine Environment |
| CN102857819A (zh) * | 2012-09-12 | 2013-01-02 | 广东威创视讯科技股份有限公司 | 一种纹理图片的加载方法及显示终端、服务器和系统 |
| CN103002288A (zh) * | 2012-12-28 | 2013-03-27 | 北京视博云科技有限公司 | 一种视频图像的编解码方法及装置 |
| CN103440612A (zh) * | 2013-08-27 | 2013-12-11 | 华为技术有限公司 | 一种gpu虚拟化中图像处理方法和装置 |
| CN104660687A (zh) * | 2015-02-02 | 2015-05-27 | 上海视聪网络信息技术有限公司 | 虚拟桌面显示的实现方法和系统 |
| CN105678680A (zh) * | 2015-12-30 | 2016-06-15 | 魅族科技（中国）有限公司 | 一种图像处理的方法和装置 |
-
2016
- 2016-07-08 CN CN201610534471.XA patent/CN106204675A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20110102443A1 (en) * | 2009-11-04 | 2011-05-05 | Microsoft Corporation | Virtualized GPU in a Virtual Machine Environment |
| CN102857819A (zh) * | 2012-09-12 | 2013-01-02 | 广东威创视讯科技股份有限公司 | 一种纹理图片的加载方法及显示终端、服务器和系统 |
| CN103002288A (zh) * | 2012-12-28 | 2013-03-27 | 北京视博云科技有限公司 | 一种视频图像的编解码方法及装置 |
| CN103440612A (zh) * | 2013-08-27 | 2013-12-11 | 华为技术有限公司 | 一种gpu虚拟化中图像处理方法和装置 |
| CN104660687A (zh) * | 2015-02-02 | 2015-05-27 | 上海视聪网络信息技术有限公司 | 虚拟桌面显示的实现方法和系统 |
| CN105678680A (zh) * | 2015-12-30 | 2016-06-15 | 魅族科技（中国）有限公司 | 一种图像处理的方法和装置 |
Non-Patent Citations (2)
| Title |
|---|
| MICAH DOWTY 等: "GPU Virtualization on VMware’s Hosted I/O Architecture", 《ACM SIGOPS OPERATING SYSTEMS REVIEW》 * |
| 陈志佳 等: "一种改进的GPU虚拟化实施方法", 《计算机工程与科学》 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110515686A (zh) * | 2019-08-28 | 2019-11-29 | 联想(北京)有限公司 | 一种图像显示方法及装置 |
| CN117909268A (zh) * | 2024-03-19 | 2024-04-19 | 麒麟软件有限公司 | 一种gpu驱动优化方法 |
| CN117909268B (zh) * | 2024-03-19 | 2024-05-24 | 麒麟软件有限公司 | 一种gpu驱动优化方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103688240B (zh) | 用于发送数字场景描述数据的方法以及发送器和接收器场景处理设备 | |
| US8885208B2 (en) | Progressive refinement of an edited image using secondary high resolution image processing | |
| TWI582751B (zh) | 避免發送未改變區域至顯示器之技術 | |
| CN109035383B (zh) | 一种体积云的绘制方法、装置及计算机可读存储介质 | |
| CN112513937B (zh) | 分布式图形处理 | |
| EP2525294A1 (en) | Method and device for rendering user interface font | |
| CN103336816A (zh) | 安卓系统上基于GPU实现的Canvas元素渲染方法及装置 | |
| CN108366288A (zh) | 一种用于高清视频的高效解码和播放方法及系统 | |
| WO2021057097A1 (zh) | 图像渲染和编码方法及相关装置 | |
| CN101908216B (zh) | 一种实现矢量字体的方法及装置 | |
| WO2013086530A2 (en) | Method and apparatus for processing partial video frame data | |
| WO2022095797A1 (zh) | 图像的压缩方法、装置、智能终端及计算机可读存储介质 | |
| CN105450986B (zh) | 一种Linux下视频处理方法 | |
| CN106204675A (zh) | 虚拟桌面呈现设备中的2d显示加速方法 | |
| CN104952088A (zh) | 一种对显示数据进行压缩和解压缩的方法 | |
| CN112714357A (zh) | 视频播放方法、视频播放装置、电子设备和存储介质 | |
| CN105719321A (zh) | 一种压缩纹理的方法及装置 | |
| CN110049347B (zh) | 在直播界面配置图像的方法、系统、终端和装置 | |
| WO2012109582A1 (en) | System and method for multistage optimized jpeg output | |
| CN106210036A (zh) | 虚拟桌面呈现设备中的视频显示加速方法 | |
| WO2024022391A1 (zh) | 多媒体数据传输方法、装置、电子设备及存储介质 | |
| CN104008565B (zh) | 一种利用cocos2d‑x以及HGE引擎播放Flash位图动画的系统和方法 | |
| TW201842775A (zh) | 用於在視訊編碼中的順延後處理的系統及方法 | |
| CN106201401A (zh) | 用于虚拟桌面呈现的3d图像加速显示方法 | |
| WO2023051590A1 (zh) | 一种渲染格式选择方法及其相关设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20180613 Address after: 523000 A2, 7 floor, home town plaza, South five village, Houjie Town, Dongguan, Guangdong Applicant after: Dongguan Zheng Xun Industrial Investment Co., Ltd. Address before: 200070 8005, room 3, 533 Po Chang Road, Zhabei District, Shanghai. Applicant before: Ting Yun computing technology (Shanghai) Co., Ltd. |
|
| TA01 | Transfer of patent application right | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20161207 |
|
| WD01 | Invention patent application deemed withdrawn after publication |