CN105187853A - 基于opengl es的arm终端系统及视频显示方法 - Google Patents

基于opengl es的arm终端系统及视频显示方法 Download PDF

Info

Publication number
CN105187853A
CN105187853A CN201510569642.8A CN201510569642A CN105187853A CN 105187853 A CN105187853 A CN 105187853A CN 201510569642 A CN201510569642 A CN 201510569642A CN 105187853 A CN105187853 A CN 105187853A
Authority
CN
China
Prior art keywords
client
spice
server
gpu
opengles
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510569642.8A
Other languages
English (en)
Inventor
陈立新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Saiwei Information Technology Co Ltd
Original Assignee
Shanghai Saiwei Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Saiwei Information Technology Co Ltd filed Critical Shanghai Saiwei Information Technology Co Ltd
Priority to CN201510569642.8A priority Critical patent/CN105187853A/zh
Publication of CN105187853A publication Critical patent/CN105187853A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明涉及一种基于OPENGL？ES的ARM终端及视频显示方法，所述的终端包括：客户端，用以通过协议远程连接服务器，以接收服务器发送的绘图指令；GPU，通过OPENGL？ES接口与客户端相连接，用以接收客户端所接收的绘图命令并绘制以显示；所述的客户端为SPICE客户端，所述的服务器为SPICE服务器。采用该种结构的基于OPENGL？ES的ARM终端及视频显示方法，解决了现有技术中ARM终端作为访问远程桌面的客户端，普遍存在体验差，即显示内容时比较慢的问题，其结构简单，应用范围广泛。

Description

基于OPENGL ES的ARM终端系统及视频显示方法
技术领域
本发明涉及计算机技术领域，尤其涉及远程控制，具体是指一种基于OPENGLES的ARM终端系统及视频显示方法。
背景技术
SPICE：一种开源的远程桌面连接协议，和微软的RDP协议类似，但实现方式完全不同；
ARM：一种中央处理器，属于低功耗处理器；
CPU：中央处理器；
GPU：图形图像处理器；
OPENGLES：一种3D图形处理的标准，有一致的应用程序开发接口；
目前使用ARM终端系统作为访问远程桌面的客户端，普遍存在体验差，即显示内容时比较慢，主要原因是由于ARM的CPU处理能力低造成的，而客户端程序采用CPU的处理方式来处理图形，图像的各种处理，比如图像融合；
现有技术中存在以下缺点：
(1)现有技术是采用纯CPU处理的方式进行图形，图像的处理，在处理过程中耗费大量的CPU资源，而且还比较耗时，这就造成在显示远程桌面上内容时有延迟，用户体验就差；
(2)现有技术的缺点是反应速度慢，终端用户体验差；
发明内容
本发明的目的是克服了上述现有技术的缺点，提供了一种能够实现的基于OPENGLES的ARM终端系统及视频显示方法。
为了实现上述目的，本发明的基于OPENGLES的ARM终端系统及视频显示方法具有如下构成：
该基于OPENGLES的ARM终端系统，其主要特点是，所述的终端系统包括：
客户端，用以通过协议远程连接服务器，以接收服务器发送的绘图指令；
GPU，通过OPENGLES接口与客户端相连接，用以接收客户端所接收的绘图命令并绘制以显示。
进一步地，所述的客户端为SPICE客户端，所述的服务器为SPICE服务器。
本发明还涉及一种ARM终端视频显示的方法，其主要特点是，所述的方法包括以下步骤：
(1)所述的服务器生成绘图命令并发送至所述的客户端；
(2)所述的客户端通过OPENGLES接口将所述的绘图命令发送至所述的GPU；
(3)所述的GPU执行所述的绘图命令并显示。
进一步地，所述的客户端为SPICE客户端，所述的服务器为SPICE服务器；所述的步骤(1)具体包括以下步骤：
(1.1)所述的SPICE服务器生成绘图命令；
(1.2)所述的SPICE服务器将所述的绘图命令通过网络传输至所述的SPICE客户端。
更进一步地，所述的步骤(2)具体包括以下步骤：
(2.1)所述SPICE客户端初始化OPENGLES环境并设置GPU运行参数；
(2.2)所述的SPICE客户端创建显示窗口；
(2.3)所述的SPICE客户端解析所述的绘图命令，并转化为OPENGLES命令；
(2.4)所述的SPICE客户端通过OPENGLES接口将所述的绘图命令发送至所述的GPU。
再进一步地，所述的步骤(3)具体包括以下步骤：
(3.1)所述的GPU将所述的绘图命令绘制到所述的显示窗口；
(3.2)所述的GPU将绘制结果显示到显示屏幕。
采用了该发明中的基于OPENGLES的ARM终端系统及视频显示方法，解决了现有技术中ARM终端系统作为访问远程桌面的客户端，普遍存在体验差，即显示内容时比较慢的问题，本发明的基于OPENGLES的ARM终端系统能够明显提升远程桌面的显示效果。降低显示延迟。
附图说明
图1为本发明的ARM终端视频显示的方法的步骤流程图。
具体实施方式
为了能够更清楚地描述本发明的技术内容，下面结合具体实施例来进行进一步的描述。
针对现有技术的图形、图像采用CPU处理比较慢的情况，本发明采用ARM所带的GPU硬件进行处理，把之前放在CPU上处理的事件交由GPU来处理，从而节省CPU资源，减少图形，图像从处理到显示的时间。
GPU硬件本身对图形、图像具有很强的处理能力，ARM平台上的GPU硬件大部分支持OPENGLES标准，本发明所提出的优化是基于OPENGLES标准来编写的SPICE客户端程序。
请参阅图1所示，图1为本发明的ARM终端视频显示的方法的步骤流程图，该方法是基于ARM终端系统实现的，该基于OPENGLES的ARM终端系统包括：
客户端，用以通过协议远程连接服务器，以接收服务器发送的绘图指令；
GPU，通过OPENGLES接口与客户端相连接，用以接收客户端所接收的绘图命令并绘制以显示。
在一种优选的实施方式中，所述的客户端为SPICE客户端，所述的服务器为SPICE服务器。
SPICE服务端提供远程桌面服务，SPICE客户端通过SPICE协议连接SPICE服务端，SPICE客户端程序接收SPICE服务端的各种绘图指令，然后调用OPENGLES的标准接口，交由GPU来进行绘图。
本发明是基于SPICE的远程控，在基于SPICE的远程控制中引入上述ARM终端系统时，显示视频流是有技术难点，需要最优化使用系统内存和显存，使视频的每一帧以最快的方式绘制完成，并显示到屏幕上。
本发明的是通过以下技术方案实现的：
步骤一：SPICE服务端生成各种绘图命令，如画点，画线，画一幅图片；
步骤二：SPICE服务端把绘图命令通过网络传输到客户端程序；
步骤三：在ARM中初始化OPENGLES环境，设置GPU运行所需要的参数；
步骤四：在ARM中创建显示窗口，用于显示绘图后的结果；
步骤五：在ARM中解析绘图命令，把绘图命令转化为OPENGLES命令；
步骤六：把OPENGLES命令传递给GPU，由GPU进行实际的绘制操作；
步骤七：GPU接收绘图命令；
步骤八：GPU根据绘图命令绘制到显示平面；
步骤九：绘图完成后，显示到屏幕。采用了该发明中的基于OPENGLES的ARM终端系统及视频显示方法，解决了现有技术中ARM终端系统作为访问远程桌面的客户端，普遍存在体验差，即显示内容时比较慢的问题，本发明的基于OPENGLES的ARM终端系统能够明显提升远程桌面的显示效果。降低显示延迟。
在此说明书中，本发明已参照其特定的实施例作了描述。但是，很显然仍可以作出各种修改和变换而不背离本发明的精神和范围。因此，说明书和附图应被认为是说明性的而非限制性的。

Claims (6)

1.一种基于OPENGLES的ARM终端系统，其特征在于，所述的终端系统包括：
客户端，用以通过协议远程连接服务器，以接收服务器发送的绘图指令；
GPU，通过OPENGLES接口与客户端相连接，用以接收客户端所接收的绘图命令并绘制以显示。
2.根据权利要求1所述的基于OPENGLES的ARM终端系统，其特征在于，所述的客户端为SPICE客户端，所述的服务器为SPICE服务器。
3.一种基于权利要求1或2中所述的系统实现ARM终端视频显示的方法，其特征在于，所述的方法包括以下步骤：
(1)所述的服务器生成绘图命令并发送至所述的客户端；
(2)所述的客户端通过OPENGLES接口将所述的绘图命令发送至所述的GPU；
(3)所述的GPU执行所述的绘图命令并显示。
4.根据权利要求3所述的ARM终端视频显示的方法，其特征在于，所述的客户端为SPICE客户端，所述的服务器为SPICE服务器；所述的步骤(1)具体包括以下步骤：
(1.1)所述的SPICE服务器生成绘图命令；
(1.2)所述的SPICE服务器将所述的绘图命令通过网络传输至所述的SPICE客户端。
5.根据权利要求4所述的ARM终端视频显示的方法，其特征在于，所述的步骤(2)具体包括以下步骤：
(2.1)所述SPICE客户端初始化OPENGLES环境并设置GPU运行参数；
(2.2)所述的SPICE客户端创建显示窗口；
(2.3)所述的SPICE客户端解析所述的绘图命令，并转化为OPENGLES命令；
(2.4)所述的SPICE客户端通过OPENGLES接口将所述的绘图命令发送至所述的GPU。
6.根据权利要求5所述的ARM终端视频显示的方法，其特征在于，所述的步骤(3)具体包括以下步骤：
(3.1)所述的GPU将所述的绘图命令绘制到所述的显示窗口；
(3.2)所述的GPU将绘制结果显示到显示屏幕。
CN201510569642.8A 2015-09-09 2015-09-09 基于opengl es的arm终端系统及视频显示方法 Pending CN105187853A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510569642.8A CN105187853A (zh) 2015-09-09 2015-09-09 基于opengl es的arm终端系统及视频显示方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510569642.8A CN105187853A (zh) 2015-09-09 2015-09-09 基于opengl es的arm终端系统及视频显示方法

Publications (1)

Publication Number Publication Date
CN105187853A true CN105187853A (zh) 2015-12-23

Family

ID=54909654

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510569642.8A Pending CN105187853A (zh) 2015-09-09 2015-09-09 基于opengl es的arm终端系统及视频显示方法

Country Status (1)

Country Link
CN (1) CN105187853A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108322781A (zh) * 2018-02-08 2018-07-24 武汉噢易云计算股份有限公司 提升虚拟桌面中播放高清视频效果的方法及系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102609971A (zh) * 2012-01-11 2012-07-25 南京大学 嵌入式gpu实现3d-gis的快速渲染系统
CN103336816A (zh) * 2013-06-28 2013-10-02 广州市动景计算机科技有限公司 安卓系统上基于GPU实现的Canvas元素渲染方法及装置
US20140184622A1 (en) * 2012-12-29 2014-07-03 Futurewei Technologies, Inc. Adaptive OpenGL 3D graphics in Virtual Desktop Infrastructure

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102609971A (zh) * 2012-01-11 2012-07-25 南京大学 嵌入式gpu实现3d-gis的快速渲染系统
US20140184622A1 (en) * 2012-12-29 2014-07-03 Futurewei Technologies, Inc. Adaptive OpenGL 3D graphics in Virtual Desktop Infrastructure
CN103336816A (zh) * 2013-06-28 2013-10-02 广州市动景计算机科技有限公司 安卓系统上基于GPU实现的Canvas元素渲染方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李博: "基于SPICE协议的桌面虚拟化客户端的设计与实现", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108322781A (zh) * 2018-02-08 2018-07-24 武汉噢易云计算股份有限公司 提升虚拟桌面中播放高清视频效果的方法及系统

Similar Documents

Publication Publication Date Title
EP3046331B1 (en) Media control method and system based on cloud desktop
US8941673B2 (en) Rendering images in a remote web browser
EP2649533B1 (en) Methods and systems for facilitating a remote desktop session utilizing long polling
CN104199723B (zh) 基于虚拟设备的摄像头映射方法
US20050204393A1 (en) Home network server
US8656443B2 (en) Method and system for providing dynamic time slice encoding for complete internet anywhere
US8856212B1 (en) Web-based configurable pipeline for media processing
US20210099553A1 (en) Integration of a standard network protocol layer in a web browser by compilation to webassembly and use of a websocket
EP2323048A1 (en) Method and system for providing complete internet anywhere with partial server processing
US20140108940A1 (en) Method and system of remote communication over a network
EP2963885A1 (en) A client-server-communication system running a client-side-script-program
CN103248682A (zh) 一种带宽使用优化方法及装置
CN103607654A (zh) 基于多屏协同系统的移动终端辅助输入装置及方法
JP2023515392A (ja) 情報処理方法、システム、装置、電子機器及び記憶媒体
CN113779054A (zh) 数据更新方法、装置、服务端、存储介质及程序产品
CN115550687A (zh) 三维模型场景交互方法、系统、设备、装置及存储介质
US11601490B2 (en) Visualization and interaction of 3D models via remotely rendered video stream system and method
CN113655975A (zh) 图像显示方法、装置、电子设备和介质
US9614900B1 (en) Multi-process architecture for a split browser
CN105187853A (zh) 基于opengl es的arm终端系统及视频显示方法
US8856651B2 (en) Remote user interface cooperative application
US11758016B2 (en) Hosted application as web widget toolkit
CN114443192B (zh) 基于云桌面的多窗口虚拟应用方法及装置
CN115731319A (zh) 图形绘制方法、装置、设备及存储介质
CN114840159A (zh) 一种渲染上屏方法、装置、设备及介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151223