CN103858095B - 一种图像显示方法和装置 - Google Patents

一种图像显示方法和装置 Download PDF

Info

Publication number
CN103858095B
CN103858095B CN201380002633.XA CN201380002633A CN103858095B CN 103858095 B CN103858095 B CN 103858095B CN 201380002633 A CN201380002633 A CN 201380002633A CN 103858095 B CN103858095 B CN 103858095B
Authority
CN
China
Prior art keywords
strategy
image
corresponding relation
idsplay order
described image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380002633.XA
Other languages
English (en)
Other versions
CN103858095A (zh
Inventor
陈普
许天锡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Cloud Computing Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN103858095A publication Critical patent/CN103858095A/zh
Application granted granted Critical
Publication of CN103858095B publication Critical patent/CN103858095B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/957—Browsing optimisation, e.g. caching or content distillation
    • G06F16/9577—Optimising the visualization of content, e.g. distillation of HTML documents
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/02—Handling of images in compressed format, e.g. JPEG, MPEG
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G09G2340/0435—Change or adaptation of the frame rate of the video stream
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2350/00—Solving problems of bandwidth in display systems
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/565—Conversion or adaptation of application format or content

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Digital Computer Display Output (AREA)
  • Stored Programmes (AREA)

Abstract

本发明实施例提出了一种图像显示方法、装置和系统，在获取图像显示指令之后，确定触发所述图像显示指令的应用程序，并根据所述应用程序进行图像处理，并发送给客户端进行显示，由于图像处理是根据用户当前触发的应用程序执行的，因此所确定的图像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应用需求的问题。

Description

一种图像显示方法和装置
技术领域
本发明实施例涉及计算机技术，特别是一种图像显示方法、系统和装置。
背景技术
当用户登录远程计算机，远程计算机需要将其桌面内容通过远程桌面技术传送到客户端，并通过客户端的本地设备显示远程计算机的桌面内容。目前大多数的远程桌面系统都是基于IP网络来传送远程桌面内容。远程桌面可以包括远程计算机的桌面图像的显示、远程声音传送或可插拔硬件映射等技术。远程桌面又可以称为虚拟桌面。在虚拟桌面场景下至少存在一台服务器和一台客户机，通过客户机上安装的虚拟桌面客户端软件登陆到远端服务器上。
桌面图像传送到客户端可以绘图指令的方式进行。例如，客户端接收到远程计算机发送的“将XX区域填充为XX颜色”、“从XX点画一条XX颜色，宽度为XX的直线到XX点”、或者“将XX图片画到XX位置”。对于最后一种绘图指令，由于其携带了占用带宽的图像信息，远程计算机在发送到客户端的时候，会根据一定的策略对图像进行处理，目的是为了降低远程计算机和客户端之间传送的数据量，减少带宽占用量，例如图片压缩策略。而远程计算机对发往客户端的图像采用何种处理策略，现有技术中，主要依赖对图像的识别技术，远程计算机识别图像的类型，根据图像的不同类型确定其对应的处理策略。然而，该技术依赖于远程计算机对图像类型的识别，而根据图像类型确定图像处理策略将可能导致传输到客户端的图像数据无法达到客户端的要求，例如，远程计算机将识别出来的图像采用有损压缩之后，传输到客户端进行显示后无法到达客户端对图像画质高质量的要求，影响用户体验。
发明内容
本发明实施例提出了一种图像显示方法、装置和系统，不再采用根据图像类型制定图像处理策略的方法，而采用更贴近于客户端需求的图像处理方法，从而实现满足客户端需求的图像显示。
第一方面，本发明实施例提出了一种图像显示方法，包括：
获取图像显示指令，所述图像显示指令携带待显示的图像；
确定触发所述图像显示指令的应用程序；
根据所述应用程序，确定所述待显示的图像的图像处理策略；
根据所述图像处理策略，对所述待显示的图像进行处理；
向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
结合第一方面，在第一种可能的实现方式中，还包括：
预先配置应用程序与图像处理策略的对应关系；
相应地，所述根据所述应用程序，确定所述待显示的图像的图像处理策略，包括：
根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略。
结合第一方面或者第一方面的第一种可能的实现方式，在第二种可能的实现方式中，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第一对应关系，其中，所述第一对应关系包括不同应用程序所对应的图像压缩策略。
其中，所述图像压缩策略包括无损压缩策略，所述配置第一对应关系包括：配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置采用所述无损压缩策略的第一进程名称集合；或者，所述图像压缩策略包括有损压缩策略，所述配置第一对应关系包括：将所述有损压缩策略划分为多个有损压缩级别；为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级别配置对应的进程名称集合。
结合第一方面或第一方面的第一种可能的实现方式，在第三种可能的实现方式中，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第二对应关系，其中，所述第二对应关系包括不同应用程序所对应的图像频率控制策略。
其中，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率或延时时间；
所述配置第二对应关系包括：
配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集合。
结合第一方面或第一方面的第一种可能的实现方式，在第四种可能的实现方式中，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第三对应关系，其中，所述第三对应关系包括不同应用程序所对应的光标渲染策略。
其中，所述光标渲染策略包括服务器光标渲染策略，所述配置第三对应关系包括：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。
结合第一方面或第一方面的上述所有的可能的实现方式，在第五种可能的实现方式中，所述确定触发所述图像显示指令的应用程序，包括：
确定所述图像显示指令当前归属的进程。
结合第一方面的第五种可能的实现方式，在第六种可能的实现方式中，所述确定所述图像显示指令当前归属的进程，包括：向操作系统查询所述图像显示指令当前归属的进程名称；或者，向操作系统查询所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称；或者，获取所述图像显示指令携带的所述图像显示指令当前归属的进程名称；或者，获取所述图像显示指令携带的所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称。
第二方面，本发明实施例提出了一种图像显示装置，包括：
获取单元，用于获取图像显示指令，所述图像显示指令携带待显示的图像；
确定单元，用于确定触发所述图像显示指令的应用程序；
处理单元，用于根据确定单元确定的所述应用程序，对所述待显示的图像进行处理；
发送单元，用于向客户端发送图像显示消息，所述图像显示消息包括经过所述处理单元处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示；
所述处理单元包括：
策略子单元，用于根据确定单元确定的所述应用程序，确定所述待显示的图像的图像处理策略；
处理子单元，用于根据所述图像处理策略，对所述待显示的图像进行处理。
第三方面，本发明实施例提出了一种图像显示系统，包括：
服务器，用于获取图像显示指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应用程序，根据确定的所述应用程序，确定所述待显示的图像的图像处理策略，根据所述图像处理策略，对所述待显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像；
客户端，用于接收所述服务器发送的所述图像显示消息，根据所述图像显示消息进行图像显示。
第四方面，本发明实施例提出了一种计算机，包括应用程序模块、操作系统模块、显示驱动模块和远程通信模块，所述操作系统模块用于根据所述应用程序模块的调用指令，向所述显示驱动模块发送图像显示指令；所述显示驱动模块接收到所述操作系统模块发送的所述图像显示指令之后，将所述图像显示指令发送给所述远程通信模块；
所述远程通信模块用于获取所述显示驱动模块发送的所述图像显示指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应用程序，获取预先配置的应用程序与图像处理策略的对应关系，根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略，根据所述图像处理策略，对所述待显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
第五方面，本发明实施例提出了一种计算机，包括：处理器、存储器、总线和通信接口；
所述存储器用于存储计算机执行指令，所述处理器与所述存储器通过所述总线连接，当所述计算机运行时，所述处理器执行所述存储器存储的所述计算机执行指令，以使所述计算机执行如下方法：
获取图像显示指令，所述图像显示指令携带待显示的图像；
确定触发所述图像显示指令的应用程序；
根据所述应用程序，确定所述待显示的图像的图像处理策略；
根据所述图像处理策略，对所述待显示的图像进行处理；
向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
本发明实施例中，在获取图像显示指令之后，确定触发所述图像显示指令的应用程序，并根据所述应用程序进行图像处理，并发送给客户端进行显示，由于图像处理是根据用户当前触发的应用程序执行的，因此所确定的图像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应用需求的问题。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是根据本发明实施例提供的一种方法流程图；
图2是根据本发明实施例提供的一种系统的架构图；
图3是根据本发明实施例提供的又一种方法流程图；
图4是根据本发明实施例提供的又一种方法流程图；
图5是根据本发明实施例提供的一种图像显示装置的组成图；
图6是根据本发明实施例提供的又一种图像显示装置的组成图；
图7是根据本发明实施例提供的一种图像显示系统的组成图；
图8是根据本发明实施例提供的一种计算机的组成图；
图9是根据本发明实施例提供的一种计算机的组成图。
具体实施方式
本发明实施例提出了一种图像显示方法、装置和系统，避免采用根据图像类型制定图像处理策略的方法，而采用更贴近于客户端需求的图像策略制定方法，从而实现满足客户端不同需求的图像显示。
本发明实施例一
如图1所示，为本发明实施例提供的流程图，本发明实施例提供的图像显示方法包括：
S101：获取图像显示指令，所述图像显示指令携带待显示的图像；
优选地，在本发明实施例中，可以由配置于远程计算机或者服务器内的图像处理模块从远程计算机或者服务器的操作系统模块、显示驱动模块或者远程通信模块的任意一个模块中获取图像显示指令。具体实施中，所述图像处理模块可以配置于所述操作系统、显示驱动模块或者远程通信模块中的任意一个之中，或者是独立配置，任何一种图像处理模块的具体实现方式都能够实现本发明实施例的图像显示方法，本发明实施例对其具体实现不作出限制。
S102：确定触发所述图像显示指令的应用程序；
本发明实施例中，当图像处理模块接收到显示指令后，需要对触发该显示指令的源头进行探查，确定是哪一个或者是哪些应用程序触发该图像显示指令。
S103：根据所述应用程序，对所述待显示的图像进行处理；
本发明实施例对待显示图像的处理不再依赖图像识别，而是根据触发图像显示指令的应用程序来进行相应的图像处理。
优选地，所述S103包括：
S103-1：根据所述应用程序，确定所述待显示的图像的图像处理策略；
在确定了所述应用程序之后，即根据所述应用程序的信息确定图像处理策略；优选地，可以根据所述应用程序的类型或者应用程序的名称确定为其预先配置的图像处理策略，具体实施方式将在后续的实施例中详细描述。
S103-2：根据所述图像处理策略，对所述待显示的图像进行处理；
根据策略对图像进行处理可以出于节省传输带宽的目的，也可能是基于满足客户需求的目的，也可能是基于两者同时考虑。但图像处理的处理是基于在步骤103-2所确定的图像处理策略来进行的。
S104：向客户端发送图像显示信息，所述图像显示信息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
在本实施例中，在获取图像显示指令之后，配置于远程计算机或者服务器内的图像处理模块确定触发所述图像显示指令的应用程序，并根据所述应用程序进行图像处理，并发送给客户端进行显示，由于图像处理是根据用户当前触发的应用程序执行的，因此所确定的图像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应用需求的问题。
本发明实施例二
如图2所示，为本发明实施例提供的系统架构图，该系统包括服务器20，该服务器20可以包含多个虚拟机VM200，每个虚拟机VM200包括远程通信模块201、应用程序模块202、操作系统模块203和显示驱动模块204；所述远程通信模块201用于负责其所在的VM与外部的通信，例如与客户端或者管理系统的通信，负责读取显示驱动上传的显示指令，并将其发送给客户端，接收客户端发来的用户鼠标键盘操作事件并上报给操作系统模块203；所述应用程序模块202运行在用户模式，用于对操作系统模块203发起调用指令以提供业务实现；所述操作系统模块203用于管理服务器的硬件资源，控制其他模块的运行，以及为用户提供交互式操作界面，在本实施例中，操作系统模块203用于根据应用程序模块202的调用指令，向显示驱动模块204发送图像显示指令；显示驱动模块204接收到操作系统模块203发送的图像显示指令之后，将所述操作系统模块203发送的统一的指令格式进行格式转换，再将转换后的图像显示指令发送给远程通信模块201，以指令远程通信模块201通过远程通信协议向客户端发送图像显示信息。当然，显示驱动模块204也可不执行上述格式转换步骤，而由远程通信模块201进行格式转换。
另外，本发明系统实施例中所述远程通信模块201还实现图形处理模块的功能，即所述远程通信模块201还用以获取图像显示指令，确定触发所述图像显示指令的应用程序，根据所述应用程序，确定所述待显示的图像的图像处理策略，根据所述图像处理策略，对所述待显示的图像进行处理，以及向客户端发送图像显示信息，所述图像显示信息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
本实施例中，由远程通信模块201实现图像处理模块的功能，在其他的实施例中，所述图像处理模块的功能还可以可以由所述操作系统模块203或者显示驱动模块204实现，或者是图像处理模块独立配置，本发明实施例对其具体实现不作出限制。
在如图2所示的系统架构实施例下，本发明实施例提供的又一图像显示方法，如图3所示，包括：
S300：预先配置应用程序与图像处理策略的对应关系；
本发明实施例，为了解决现有技术图像处理策略是根据图像类型来确定所带来的一系列问题，提出了针对应用程序配置图像处理策略的方法，即预先配置应用程序与图像处理策略的对应关系，相应的模块根据应用程序的信息查询对应关系，确定对应的图像处理策略。
具体地，如果所述图像处理策略包括图像压缩策略，所述步骤300为：
S300-a：配置第一对应关系，其中，所述第一对应关系包括不同应用程序所对应的图像压缩策略。
当所述图像压缩策略具体包括无损压缩策略时，所述配置第一对应关系包括：配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置采用所述无损压缩策略的第一进程名称集合；其中，优选地，所述第一类型应用软件主要指对图像画质显示质量要求高的软件，例如可以包括医学行业软件或专业绘图软件，所述第一进程名称集合可以包括：xtop.exe(pro/E，制图软件)、CNEXT.exe(CAITA，制图软件)、acad.exe(AutoCAD，制图软件)、Revit.exe(Revit，建筑设计软件)、Inventor.exe(Inventor，机械设计软件)、3dsmax.exe(3ds Max,3D动画制作软件)或Showcase.exe(Showcase，3D视觉创意软件)等等，进程名称集合可以根据实际情况选择配置，本实施例不再一一列举。
当所述图像压缩策略具体包括有损压缩策略时，所述配置第一对应关系包括：将所述有损压缩策略划分为多个有损压缩级别；为每一个有损压缩级别配置对应的应用软件类型，或者为每一个有损压缩级别配置对应的进程名称集合，其中，所述的每一个有损压缩级别包括有损压缩的算法或级别。
如果所述图像处理策略具体包括图像频率控制策略，所述步骤300为：
S300-b：配置第二对应关系，其中，所述第二对应关系包括不同应用程序所对应的图像频率控制策略。
当所述图像压缩策略包括低于默认值的图像频率控制策略时(所述默认值为系统默认的图像显示帧率或延时时间)，所述配置第二对应关系包括：配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集合。对于一些类型的软件，其图像数量较多，如果每一幅图像都传送到客户端，将占用大量的带宽，因此，采用图像频率控制，对于图像流量大的软件，可以采用低于默认值的图像频率控制策略，例如系统默认的图像频率控制策略为30帧/秒，在本实施例中将低于默认值的图像频率控制策略配置为20帧/秒。其中，优选地，所述第二类型应用软件主要指图像流量大的软件，例如可以包括视频类软件，所述第二进程名称集合可以包括：wmplayer.exe(windows Media Player)，qqplayer.exe(腾讯QQ影音播放器),splayer.exe(射手播放器)、vlc.exe(VLC播放器)或StomPlayer.exe(暴风影音播放器)等等，进程名称集合根据实际情况选择配置，本实施例不再一一列举。
如果所述图像处理策略具体包括光标渲染策略，所述步骤300为：
S300-c：配置第三对应关系，其中，所述第三对应关系包括不同应用程序所对应的光标渲染策略。
当所述光标渲染策略包括服务器光标渲染策略时，所述配置第三对应关系包括：配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。光标渲染策略包括服务器光标渲染策略和客户端光标渲染策略，服务器光标渲染策略由服务器执行光标渲染，客户端光标渲染策略由客户端执行光标渲染，客户端光标渲染使得对用户的响应更快，但可能存在显示在图像上的光标与应用程序自行绘制的光标存在位置偏差，服务器光标则能够保证显示在图像上的光标与应用程序自行绘制的光标保持一致，因此，对于一些精准度要求较高的绘图软件、测绘行业软件或者游戏软件，可以采用服务器光标渲染，所述所述第三类型应用软件主要指一些精准度要求较高的绘图软件、测绘行业软件或者游戏软件，所述第三进程名称集合可以包括：xtop.exe，vlc.exe，或autocad.exe等等，进程名称集合可以根据实际情况选择配置，本实施例不再一一列举。
本实施例中仅以示例形式列出了可能的图像处理策略，例如图像压缩策略、图像频率控制策略以及光标渲染策略，实际上，根据本发明实施例和公制技术，本领域技术人员还可以联想到更多的图像策略，本发明实施例不再一一列举。另外，上述实施例中的各个策略虽然是单独列出，本领域技术人员却完全可以明了，上述图像压缩策略、图像频率控制策略以及光标渲染策略相关的第一对应关系、第二对应关系或第三对应关系可以单独配置，也可以同时或者以任意组合的形式配置，例如同时配置第一对应关系和第二对应关系，或者同时配置第一对应关系和第三对应关系，或者同时配置三个对应关系。其配置形式可以采用数据表的形式，每一个对应关系可以单独配置一个表单，也可以将多个对应关系配置在一个表单上。
S301：应用程序模块202向操作系统模块203发起调用指令；
优选地，若用户或者系统自动触发某个应用程序，则该应用程序的应用程序模块202向操作系统模块203发起调用指令，具体地，可以是图形函数调用指令。
S302：操作系统模块203根据所述调用指令，向显示驱动模块204发送图像显示指令，所述图像显示指令携带待显示的图像；
S303：显示驱动模块204向远程通信模块201发送所述图像显示指令；
优选地，所述显示驱动模块204还可以在接收到所述图像显示指令后，根据客户端预先制定的格式对所述图像显示指令进行格式转换，再将转换格式后的图像显示指令发送给所述远程通信模块201。
S304：远程通信模块201获取所述图像显示指令，确定触发所述图像显示指令的应用程序；
具体地，远程通信模块201确定触发所述图像显示指令的应用程序可以通过多种方式实现，在本实施例中，列举出的一种示例性的实现方式是：远程通信模块201确定所述图像显示指令所归属的进程信息。由于应用程序是通过进程被计算机执行的，所述图像显示指令归属的进程可以代表触发所述图像显示指令的应用程序。进一步地，由于操作系统模块203会为每个被执行的进程分配进程空间，在该进程空间内包含进程信息。绘图发生时，用于执行图像显示指令的显示驱动模块204工作在该进程的进程空间，因此，显示驱动模块204可以通过操作系统模块203提供的接口去查询进程信息，例如通过Windows操作系统的应用程序接口API函数GetCurrentProcessId或EngGetCurrentProcessId获取当前进程ID号，或者调用Windows API函数PsGetCurrentProcess和PsGetProcess Image FileName得到当前进程的进程名称。远程通信模块201可通过操作系统模块203提供的接口去查询进程ID对应的进程名称，例如通过Windows操作系统的应用程序接口API函数OpenProcess和GetModule FileName。在具体实现中，可以由远程通信模块201或者显示驱动模块204查询操作系统模块203获取进程名称。
如果由远程通信模块201来向操作系统模块203查询，则步骤304确定所述图像显示指令所归属的进程信息可以通过如下方式实现：
S304-a1：远程通信模块201向操作系统模块203查询所述图像显示指令所归属的进程标识；
S304-a2：远程通信模块201根据所述进程标识向操作系统模块203查询所述进程的进程名称。
或者，
S304-a1’：远程通信模块201向操作系统模块203查询所述图像显示指令所归属的进程名称；
S304-a2’：远程通信模块201获取操作系统模块203返回的进程名称。
如果由显示驱动法模块204来向操作系统模块203查询，则在步骤303之前，显示驱动模块204还可以执行：
S303-a1：显示驱动模块204向操作系统模块203查询所述图像显示指令所归属的进程标识；
S303-a2：显示驱动模块204根据所述进程标识向操作系统模块203查询所述进程的进程名称；
或者，
S303-a1’：显示驱动模块204向操作系统模块203查询所述图像显示指令所归属的进程名称；
S303-a2’：显示驱动模块204获取操作系统模块203返回的进程名称；
或者，
S303-c1：显示驱动模块204向操作系统模块203查询所述图像显示指令所归属的进程标识。相应地，所述步骤303中，显示驱动模块204除了向远程通信模块201发送所述图像显示指令之外，还向远程通信模块201发送其所查询到的进程信息，即进程标识或者进程名称；
相应地，如果步骤303中所述显示驱动模块204向远程通信模块201发送其查询获取到的进程名称，则步骤304中，远程通信模块201获取所述图像显示指令携带的进程名称；如果步骤303中所述显示驱动模块204向远程通信模块201发送其查询获取到的进程标识，则步骤304中，远程通信模块201根据所述进程标识，向操作系统模块203查询所述进程的进程名称。
上述示例性地介绍了远程通信模块确定所述图像显示指令的进程的多种实现方式，总之，根据根据本发明实施例提到的查询操作系统模块中进程空间中的信息的实现原理，可以演变出多种灵活的实现方式，具体实现本发明实施例不再一一介绍。
继续回到主流程，后续流程包括：
S305：远程通信模块201根据所述应用程序，确定所述待显示的图像的图像处理策略；
具体地，如果在步骤304中远程通信模块201确定了所述图像显示指令所归属的进程信息，则远程通信模块201根据所述进程信息，查询步骤300中配置的对应关系，确定针对所述待显示的图像的图像处理策略。
S306：远程通信模块201根据所述图像处理策略，对所述待显示的图像进行处理；
具体地，如果所述图像处理策略为无损压缩策略，所述远程通信模块201对所述待显示的图像进行无损压缩；如果所述图像处理策略为有损压缩策略，所述远程通信模块201根据有损压缩策略的级别对所述待显示的图像进行有损压缩；如果所述图像处理策略为图像频率控制策略，所述远程通信模块201根据图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅图像进行去冗余操作并得到一幅图像；如果所述图像处理策略为服务器端光标渲染策略，所述远程通信模块201通知显示驱动模块204在所述待显示图像上渲染光标，再获得所述显示驱动模块204返回的渲染后的待显示图像；如果所述图像处理策略包括图像压缩策略和图像频率控制策略，所述远程通信模块201根据图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅图像进行去冗余操作并得到一幅图像，对所述去冗余操作得到的图像采用所述图像压缩策略进行压缩。
S307：远程通信模块201向客户端22发送图像显示信息，所述图像显示信息包括经过处理后的所述待显示的图像，以使得所述客户端22根据所述图像显示消息进行图像显示。
在本实施例中，首先配置应用程序与图像处理策略的对应关系，在远程通信模块在接收图像显示指令之后，确定触发所述图像显示指令的应用程序，并根据所述应用程序确定图像处理策略，根据确定的图像处理策略进行图像处理，并发送给客户端进行显示，由于图像处理程序是根据用户当前触发的应用程序确定的，因此所确定的图像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应用需求的问题，并且还可以平衡远程计算机和客户端之间的数据传输的带宽占用量。具体地，由于为图像画质显示质量要求高的软件配置了无损压缩策略，使得发送到客户端进行显示的图像能够满足此类用户对图像高精度高仿真的要求；由于为视频类流量大的软件配置了低于默认值的图像频率控制策略，使得发送到客户端的图像时去冗余之后的图像，减轻了服务器和客户端之间的带宽占用，提高了系统传输效率；由于为光标精度要求高的软件配置了服务器光标渲染策略，能够保证显示在图像上的光标与应用程序自行绘制的光标保持一致，提高用户的体验。
在如图2所示的系统架构实施例下，本发明实施例提供的又一图像显示方法，如图4所示，包括：
S400：在管理系统中预先配置应用程序与图像处理策略的对应关系；
所述对应关系的具体配置形式和方法与步骤S300的描述类似，在此不再赘述。
S401：客户端与服务器中的虚拟机建立连接；
具体地，客户端与虚拟机中的远程通信模块201建立远程桌面连接。
S402：管理系统将所述应用程序与图像处理策略的对应关系下发给所述虚拟机；
具体地，管理系统将所述对应关系下发给所述远程通信模块201，所述远程通信模块201将所述对应关系进行保存。
S403：应用程序模块202向操作系统模块203发起调用指令；
优选地，若用户或者系统自动触发某个应用程序，则该应用程序的应用程序模块202向操作系统模块203发起调用指令，具体地，可以是图形函数调用指令。
S404：操作系统模块203根据所述调用指令，向显示驱动模块204发送图像显示指令，所述图像显示指令携带待显示的图像；
S405：显示驱动模块204向操作系统模块203查询所述图像显示指令所归属的进程标识；
S406：显示驱动模块204接收操作系统模块203返回的进程标识，根据所述进程标识确定所述进程的进程名称；
S407：显示驱动模块204向远程通信模块201发送所述图像显示指令和所述进程名称；
在另一种实施例中，显示驱动模块204向远程通信模块201发送所述图像显示指令，所述图像显示指令携带所述进程名称；
S408：远程通信模块201根据所述进程名称查询保存的所述应用程序与图像处理策略的对应关系，确定所述待显示的图像的图像处理策略；
S409：远程通信模块201根据所述图像处理策略，对所述待显示的图像进行处理；
具体地，如果所述图像处理策略为无损压缩策略，所述远程通信模块201对所述待显示的图像进行无损压缩；如果所述图像处理策略为有损压缩策略，所述远程通信模块201根据有损压缩策略的级别对所述待显示的图像进行有损压缩；如果所述图像处理策略为图像频率控制策略，所述远程通信模块201根据图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅图像进行去冗余操作并得到一幅图像；如果所述图像处理策略为服务器端光标渲染策略，所述远程通信模块201通知显示驱动模块204在所述待显示图像上渲染光标，再获得所述显示驱动模块204返回的渲染后的待显示图像；如果所述图像处理策略包括图像压缩策略和图像频率控制策略，所述远程通信模块201根据图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅图像进行去冗余操作并得到一幅图像，对所述去冗余操作得到的图像采用所述图像压缩策略进行压缩。
S410：远程通信模块201向客户端22发送图像显示信息，所述图像显示信息包括经过处理后的所述待显示的图像，以使得所述客户端22根据所述图像显示消息进行图像显示。
在本实施例中，首先配置应用程序与图像处理策略的对应关系，在远程通信模块在接收图像显示指令之后，确定触发所述图像显示指令的应用程序，并根据所述应用程序确定图像处理策略，根据确定的图像处理策略进行图像处理，并发送给客户端进行显示，由于图像处理程序是根据用户当前触发的应用程序确定的，因此所确定的图像处理策略满足了用户当前的应用需求，避免了现有技术中根据图像类别的识别来确定图像处理策略，使得最终在客户端的图像显示忽略了客户当前应用需求的问题。具体地，由于为图像画质显示质量要求高的软件配置了无损压缩策略，使得发送到客户端进行显示的图像能够满足此类用户对图像高精度高仿真的要求；由于为视频类流量大的软件配置了低于默认值的图像频率控制策略，使得发送到客户端的图像时去冗余之后的图像，减轻了服务器和客户端之间的带宽占用，提高了系统传输效率；由于为光标精度要求高的软件配置了服务器光标渲染策略，能够保证显示在图像上的光标与应用程序自行绘制的光标保持一致，提高用户的体验。
本发明实施例的装置
如图5，本发明实施例提供的一种图像显示装置，包括：
获取单元501，用于获取图像显示指令，所述图像显示指令携带待显示的图像；
确定单元502，用于确定触发所述图像显示指令的应用程序；
处理单元503，用于根据确定单元502确定的所述应用程序，对所述待显示的图像进行处理；
发送单元504，用于向客户端发送图像显示消息，所述图像显示消息包括经过所述处理单元503处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
优选地，如图6所示，本发明实施例提供的又一装置实施例中，所述处理单元503包括：
策略子单元5031，用于根据确定单元502确定的所述应用程序，确定所述待显示的图像的图像处理策略；
处理子单元5032，用于根据所述图像处理策略，对所述待显示的图像进行处理。
优选地，所述装置还包括配置单元601，用于预先配置应用程序与图像处理策略的对应关系；
则所述策略子单元5031，具体用于根据确定单元确定的所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略。
优选地，所述配置单元601包括：
第一配置子单元6011，用于配置第一对应关系，其中，所述第一对应关系包括不同应用程序所对应的图像压缩策略。
其中，所述图像压缩策略包括无损压缩策略，所述第一配置子单元6011具体用于：
配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置采用所述无损压缩策略的第一进程名称集合。
所述图像压缩策略包括有损压缩策略，所述第一配置子单元6011具体用于：
将所述有损压缩策略划分为多个有损压缩级别；
为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级别配置对应的进程名称集合。
优选地，所述配置单元601包括：
第二配置子单元6012，用于配置第二对应关系，其中，所述第二对应关系包括不同应用程序所对应的图像频率控制策略。
其中，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率或延时时间；
所述第二配置子单元6012具体用于：
配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集合。
优选地，所述配置单元601包括：
第三配置子单元6013，用于配置第三对应关系，其中，所述第三对应关系包括不同应用程序所对应的光标渲染策略。
其中，所述光标渲染策略包括服务器光标渲染策略，所述第三配置子单元具体用于：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。
优选地，所述确定单元502具体用于确定所述图像显示指令当前归属的进程.
优选地，所述确定单元502具体用于向操作系统查询所述图像显示指令当前归属的进程名称，或者向操作系统查询所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称，或者，获取所述图像显示指令携带的所述图像显示指令当前归属的进程名称，或者获取所述图像显示指令携带的所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称。
优选地，所述处理子单元5032包括以下模块任意之一或任意组合：
压缩模块，若所述图像处理策略包括图像压缩策略，用于根据所述图像压缩策略对所述待显示的图像进行压缩处理；
去冗余模块，若所述图像处理策略包括图像频率控制策略，用于根据所述图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图像；
光标处理模块，若所述图像处理策略包括服务器光标渲染策略，用于在所述待显示图像上渲染光标。
如图7所示，本发明实施例提供的图像显示系统，包括：
服务器70，用于获取图像显示指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应用程序，根据所述应用程序，对所述待显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像；
客户端72，用于接收所述服务器发送的所述图像显示消息，根据所述图像显示消息进行图像显示。
本发明实施例还提供一种计算机，如图8所示，该图8所示的计算机可以是如图2所示的虚拟机，也可是是一台物理服务器。
该计算机包括：应用程序模块802、操作系统模块803、显示驱动模块804和远程通信模块801，所述操作系统模块803用于根据所述应用程序模块801的调用指令，向所述显示驱动模块804发送图像显示指令；所述显示驱动模块804接收到所述操作系统模块803发送的所述图像显示指令之后，将所述图像显示指令发送给所述远程通信模块801；
所述远程通信模块801用于获取所述显示驱动模块发送的所述图像显示指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应用程序，根据所述应用程序，对所述待显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
具体地，所述所述远程通信模块801具体用于根据所述应用程序，确定所述待显示的图像的图像处理策略，以及根据所述图像处理策略，对所述待显示的图像进行处理。
优选地，所述远程通信模块801还用于获取预先配置的应用程序与图像处理策略的对应关系；则所述远程通信模块801根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略。
优选地，所述显示驱动模块804还用于向操作系统模块803查询所述图像显示指令当前归属的进程的信息，并将所述进程的信息携带在所述图像显示指令中发送到所述远程通信模块801；
所述远程通信模块801获取所述图像显示指令携带的所述图像显示指令当前归属的进程的信息，根据所述进程的信息确定所述待显示的图像的图像处理策略。
优选地，所述所述远程通信模块801还用于向操作系统模块803查询所述图像显示指令当前归属的进程的信息，根据所述进程的信息确定所述待显示的图像的图像处理策略。
如图9，为本发明实施例的计算机的结构组成示意图。本发明实施例的计算机可包括：
处理器901、存储器902、系统总线904和通信接口905。CPU901、存储器902和通信接口905之间通过系统总线904连接并完成相互间的通信。
处理器901可能为单核或多核中央处理单元，或者为特定集成电路，或者为被配置成实施本发明实施例的一个或多个集成电路。
存储器902可以为高速RAM存储器，也可以为非易失性存储器(non-volatilememory)，例如至少一个磁盘存储器。
存储器902用于计算机执行指令903。具体的，计算机执行指令903中可以包括程序代码。
当计算机运行时，处理器901运行计算机执行指令903，可以执行图1、3或4任意之一所述的方法流程。
本领域普通技术人员将会理解，本发明的各个方面、或各个方面的可能实现方式可以被具体实施为系统、方法或者计算机程序产品。因此，本发明的各方面、或各个方面的可能实现方式可以采用完全硬件实施例、完全软件实施例(包括固件、驻留软件等等)，或者组合软件和硬件方面的实施例的形式，在这里都统称为“电路”、“模块”或者“系统”。此外，本发明的各方面、或各个方面的可能实现方式可以采用计算机程序产品的形式，计算机程序产品是指存储在计算机可读介质中的计算机可读程序代码。
计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质包含但不限于电子、磁性、光学、电磁、红外或半导体系统、设备或者装置，或者前述的任意适当组合，如随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或者快闪存储器)、光纤、便携式只读存储器(CD-ROM)。
计算机中的处理器读取存储在计算机可读介质中的计算机可读程序代码，使得处理器能够执行在流程图中每个步骤、或各步骤的组合中规定的功能动作；生成实施在框图的每一块、或各块的组合中规定的功能动作的装置。
计算机可读程序代码可以完全在用户的计算机上执行、部分在用户的计算机上执行、作为单独的软件包、部分在用户的计算机上并且部分在远程计算机上，或者完全在远程计算机或者服务器上执行。也应该注意，在某些替代实施方案中，在流程图中各步骤、或框图中各块所注明的功能可能不按图中注明的顺序发生。例如，依赖于所涉及的功能，接连示出的两个步骤、或两个块实际上可能被大致同时执行，或者这些块有时候可能被以相反顺序执行。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (40)

1.一种图像显示方法，其特征在于，包括：
获取图像显示指令，所述图像显示指令携带待显示的图像；
确定触发所述图像显示指令的应用程序；
根据所述应用程序，确定所述待显示的图像的图像处理策略；
根据所述图像处理策略，对所述待显示的图像进行处理；向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
2.根据权利要求1所述的方法，其特征在于，还包括：
预先配置应用程序与图像处理策略的对应关系；
相应地，所述根据所述应用程序，确定所述待显示的图像的图像处理策略，包括：
根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略。
3.根据权利要求2所述的方法，其特征在于，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第一对应关系，其中，所述第一对应关系包括不同应用程序所对应的图像压缩策略。
4.根据权利要求3所述的方法，其特征在于，所述图像压缩策略包括无损压缩策略，所述配置第一对应关系包括：
配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置采用所述无损压缩策略的第一进程名称集合。
5.根据权利要求3或4所述的方法，其特征在于，所述图像压缩策略包括有损压缩策略，所述配置第一对应关系包括：
将所述有损压缩策略划分为多个有损压缩级别；
为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级别配置对应的进程名称集合。
6.根据权利要求2或3所述的方法，其特征在于，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第二对应关系，其中，所述第二对应关系包括不同应用程序所对应的图像频率控制策略。
7.根据权利要求6所述的方法，其特征在于，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率或延时时间；
所述配置第二对应关系包括：
配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集合。
8.根据权利要求2或3或6所述的方法，其特征在于，所述预先配置应用程序与图像处理策略的对应关系包括：
配置第三对应关系，其中，所述第三对应关系包括不同应用程序所对应的光标渲染策略。
9.根据权利要求8所述的方法，其特征在于，所述光标渲染策略包括服务器光标渲染策略，所述配置第三对应关系包括：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。
10.根据权利要求1或2所述的方法，其特征在于，所述确定触发所述图像显示指令的应用程序，包括：
确定所述图像显示指令当前归属的进程。
11.根据权利要求10所述的方法，其特征在于，所述确定所述图像显示指令当前归属的进程，包括：
向操作系统查询所述图像显示指令当前归属的进程名称；或者，
向操作系统查询所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称；或者，
获取所述图像显示指令携带的所述图像显示指令当前归属的进程名称；或者，
获取所述图像显示指令携带的所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称。
12.根据权利要求11所述的方法，其特征在于，所述根据所述应用程序，确定所述待显示的图像的图像处理策略，包括：
确定所述进程名称属于的进程类型或者所述进程名称所对应的图像处理策略。
13.根据权利要求10所述的方法，其特征在于，所述根据所述图像处理策略，对所述待显示的图像进行处理，包括：
若所述图像处理策略包括图像压缩策略，根据所述图像压缩策略对所述待显示的图像进行压缩处理；或者，
若所述图像处理策略包括图像频率控制策略，根据所述图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图像；或者，
若所述图像处理策略包括服务器光标渲染策略，则在所述待显示图像上渲染光标；或者，
若所述图像处理策略包括图像压缩策略和图像频率控制策略，则根据所述图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图像，对所述去冗余操作得到的待显示的图像采用所述图像压缩策略进行压缩。
14.一种图像显示装置，其特征在于，包括：
获取单元，用于获取图像显示指令，所述图像显示指令携带待显示的图像；
确定单元，用于确定触发所述图像显示指令的应用程序；
处理单元，用于根据确定单元确定的所述应用程序，对所述待显示的图像进行处理；
发送单元，用于向客户端发送图像显示消息，所述图像显示消息包括经过所述处理单元处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示；所述处理单元包括：
策略子单元，用于根据确定单元确定的所述应用程序，确定所述待显示的图像的图像处理策略；
处理子单元，用于根据所述图像处理策略，对所述待显示的图像进行处理。
15.根据权利要求14所述的装置，其特征在于，所述装置还包括：
配置单元，用于预先配置应用程序与图像处理策略的对应关系；
则所述策略子单元，具体用于根据确定单元确定的所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略。
16.根据权利要求15所述的装置，其特征在于，所述配置单元包括：
第一配置子单元，用于配置第一对应关系，其中，所述第一对应关系包括不同应用程序所对应的图像压缩策略。
17.根据权利要求16所述的装置，其特征在于，所述图像压缩策略包括无损压缩策略，所述第一配置子单元具体用于：
配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置采用所述无损压缩策略的第一进程名称集合。
18.根据权利要求16或17所述的装置，其特征在于，所述图像压缩策略包括有损压缩策略，所述第一配置子单元具体用于：
将所述有损压缩策略划分为多个有损压缩级别；
为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级别配置对应的进程名称集合。
19.根据权利要求16或17所述的装置，其特征在于，所述配置单元包括：
第二配置子单元，用于配置第二对应关系，其中，所述第二对应关系包括不同应用程序所对应的图像频率控制策略。
20.根据权利要求19所述的装置，其特征在于，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率或延时时间；
所述第二配置子单元具体用于：
配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集合。
21.根据权利要求15所述的装置，其特征在于，所述配置单元包括：
第三配置子单元，用于配置第三对应关系，其中，所述第三对应关系包括不同应用程序所对应的光标渲染策略。
22.根据权利要求21所述的装置，其特征在于，所述光标渲染策略包括服务器光标渲染策略，所述第三配置子单元具体用于：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。
23.根据权利要求14或15所述的装置，其特征在于，所述确定单元具体用于确定所述图像显示指令当前归属的进程。
24.根据权利要求23所述的装置，其特征在于，所述确定单元具体用于向操作系统查询所述图像显示指令当前归属的进程名称，或者向操作系统查询所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称，或者，获取所述图像显示指令携带的所述图像显示指令当前归属的进程名称，或者获取所述图像显示指令携带的所述图像显示指令当前归属的进程标识，根据所述进程标识确定进程名称。
25.根据权利要求24所述的装置，其特征在于，所述策略子单元具体用于确定所述进程名称属于的进程类型或者所述进程名称所对应的图像处理策略。
26.根据权利要求23所述的装置，其特征在于，所述处理子单元包括以下模块任意之一或任意组合：
压缩模块，若所述图像处理策略包括图像压缩策略，用于根据所述图像压缩策略对所述待显示的图像进行压缩处理；
去冗余模块，若所述图像处理策略包括图像频率控制策略，用于根据所述图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图像；
光标处理模块，若所述图像处理策略包括服务器光标渲染策略，用于在所述待显示图像上渲染光标。
27.根据权利要求26所述的装置，其特征在于，当所述处理子单元包括压缩模块和去冗余模块，所述去冗余模块根据所述图像频率控制策略所指定的频率，计算出第一间隔时间，将在所述第一间隔时间内收到的多幅待显示的图像进行去冗余操作，获得一幅待显示的图像；所述压缩模块对所述去冗余操作得到的待显示的图像采用所述图像压缩策略进行压缩。
28.一种图像显示系统，其特征在于，包括：
服务器，用于获取图像显示指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应用程序，根据确定的所述应用程序，确定所述待显示的图像的图像处理策略，根据所述图像处理策略，对所述待显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像；
客户端，用于接收所述服务器发送的所述图像显示消息，根据所述图像显示消息进行图像显示。
29.根据权利要求28所述的系统，其特征在于，所述服务器还用于预先配置应用程序与图像处理策略的对应关系。
30.根据权利要求29所述的系统，其特征在于，所述服务器具体用于配置第一对应关系，其中，所述第一对应关系包括不同应用程序所对应的图像压缩策略；和/或，配置第二对应关系，其中，所述第二对应关系包括不同应用程序所对应的图像频率控制策略；和/或，配置第三对应关系，其中，所述第三对应关系包括不同应用程序所对应的光标渲染策略。
31.根据权利要求30所述的系统，其特征在于，所述图像压缩策略包括无损压缩策略，所述服务器具体用于：
配置所述无损压缩策略与第一类型应用软件的第一对应关系，或者配置采用所述无损压缩策略的第一进程名称集合。
32.根据权利要求30或31所述的系统，其特征在于，所述图像压缩策略包括有损压缩策略，所述服务器具体用于：
将所述有损压缩策略划分为多个有损压缩级别；
为每个有损压缩级别配置对应的应用软件类型，或者为每个有损压缩级别配置对应的进程名称集合。
33.根据权利要求30所述的系统，其特征在于，所述图像压缩策略包括低于默认值的图像频率控制策略，所述默认值为系统默认的图像显示帧率或延时时间；
所述服务器具体用于：配置所述低于默认值的图像频率控制策略与第二类型应用软件的第二对应关系，或者配置采用所述低于默认值的图像频率控制策略的第二进程名称集合。
34.根据权利要求30所述的系统，其特征在于，所述光标渲染策略包括服务器光标渲染策略，所述服务器具体用于：
配置所述服务器光标渲染策略与第三类型应用软件的第三对应关系，或者配置采用所述服务器光标渲染策略的第三进程名称集合。
35.根据权利要求28-31任一项所述的系统，其特征在于，所述服务器具体用于确定所述图像显示指令当前归属的进程。
36.一种计算机，其特征在于，包括应用程序模块、操作系统模块、显示驱动模块和远程通信模块，所述操作系统模块用于根据所述应用程序模块的调用指令，向所述显示驱动模块发送图像显示指令；所述显示驱动模块接收到所述操作系统模块发送的所述图像显示指令之后，将所述图像显示指令发送给所述远程通信模块；
所述远程通信模块用于获取所述显示驱动模块发送的所述图像显示指令，所述图像显示指令携带待显示的图像，确定触发所述图像显示指令的应用程序，获取预先配置的应用程序与图像处理策略的对应关系，根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略，根据所述图像处理策略，对所述待显示的图像进行处理，以及向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
37.根据权利要求36所述的计算机，其特征在于，所述远程通信模块还用于获取预先配置的应用程序与图像处理策略的对应关系；则所述远程通信模块根据所述应用程序查询所述对应关系，确定所述待显示的图像的图像处理策略。
38.根据权利要求36或37所述的计算机，其特征在于，所述显示驱动模块还用于向操作系统模块查询所述图像显示指令当前归属的进程的信息，并将所述进程的信息携带在所述图像显示指令中发送到所述远程通信模块；
所述远程通信模块获取所述图像显示指令携带的所述图像显示指令当前归属的进程的信息，根据所述进程的信息确定所述待显示的图像的图像处理策略。
39.根据权利要求36或37所述的计算机，其特征在于，所述所述远程通信模块还用于向操作系统模块查询所述图像显示指令当前归属的进程的信息，根据所述进程的信息确定所述待显示的图像的图像处理策略。
40.一种计算机，其特征在于，包括：处理器、存储器、总线和通信接口；
所述存储器用于存储计算机执行指令，所述处理器与所述存储器通过所述总线连接，当所述计算机运行时，所述处理器执行所述存储器存储的所述计算机执行指令，以使所述计算机执行如下方法：
获取图像显示指令，所述图像显示指令携带待显示的图像；
确定触发所述图像显示指令的应用程序；
根据所述应用程序，确定所述待显示的图像的图像处理策略；
根据所述图像处理策略，对所述待显示的图像进行处理；
向客户端发送图像显示消息，所述图像显示消息包括经过处理后的所述待显示的图像，以使得所述客户端根据所述图像显示消息进行图像显示。
CN201380002633.XA 2013-08-02 2013-08-02 一种图像显示方法和装置 Active CN103858095B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2013/080728 WO2015013981A1 (zh) 2013-08-02 2013-08-02 一种图像显示方法和装置

Publications (2)

Publication Number Publication Date
CN103858095A CN103858095A (zh) 2014-06-11
CN103858095B true CN103858095B (zh) 2015-08-19

Family

ID=50864333

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380002633.XA Active CN103858095B (zh) 2013-08-02 2013-08-02 一种图像显示方法和装置

Country Status (6)

Country Link
US (2) US8856385B1 (zh)
EP (2) EP3301585A3 (zh)
JP (1) JP6276408B2 (zh)
CN (1) CN103858095B (zh)
CA (1) CA2920050C (zh)
WO (1) WO2015013981A1 (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9582240B2 (en) * 2012-12-26 2017-02-28 Vmware, Inc. Using contextual and spatial awareness to improve remote desktop imaging fidelity
CN104636445B (zh) * 2015-01-16 2019-05-24 白天 截屏图像的处理和分组操作方法及其装置
CN106454403B (zh) * 2016-09-09 2020-06-12 北京星选科技有限公司 数据显示方法、设备及系统
CN108319493A (zh) * 2017-06-28 2018-07-24 新华三云计算技术有限公司 数据处理方法、装置及机器可读存储介质
CN107729483B (zh) * 2017-10-17 2021-05-11 Oppo广东移动通信有限公司 一种分类显示方法、装置、终端及计算机可读存储介质
CN111433743B (zh) * 2017-12-12 2022-05-20 荣耀终端有限公司 一种app远程控制方法及相关设备
CN109741463B (zh) 2019-01-02 2022-07-19 京东方科技集团股份有限公司 虚拟现实场景的渲染方法、装置及设备
CN110868614B (zh) * 2019-11-14 2021-09-28 北京京航计算通讯研究所 显卡透传环境下基于spice协议的差异图像显示系统
CN110740352B (zh) * 2019-11-14 2021-07-20 北京京航计算通讯研究所 显卡透传环境下基于spice协议的差异图像显示方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101420610A (zh) * 2007-10-26 2009-04-29 闪联信息技术工程中心有限公司 显示远程桌面内容的方法及其装置
CN102446341A (zh) * 2010-09-30 2012-05-09 联想(北京)有限公司 服务器及其图像处理方法
CN102474624A (zh) * 2009-08-04 2012-05-23 阿沃森特公司 用于静态和视频图像的远程观看的方法和系统
CN102713882A (zh) * 2009-11-16 2012-10-03 思杰系统有限公司 用于选择性地实现渐进显示技术的方法和系统

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8352400B2 (en) * 1991-12-23 2013-01-08 Hoffberg Steven M Adaptive pattern recognition based controller apparatus and method and human-factored interface therefore
JP3339668B2 (ja) * 1996-06-19 2002-10-28 株式会社日立製作所 時系列データ圧縮・復元方法および装置
US6675239B1 (en) * 1999-10-05 2004-01-06 Ati Technologies Inc. Method and apparatus for providing commands to a command memory
US20040010805A1 (en) * 2000-10-17 2004-01-15 Ira Dvir Method and system for remote video display through a wireless projector
CN1332300C (zh) * 2005-04-30 2007-08-15 广东威创日新电子有限公司 一种基于服务器端\客户端结构远程显示处理方法
JP4751647B2 (ja) * 2005-06-03 2011-08-17 株式会社リコー 画面共有装置、画面共有方法、画面共有プログラム及び記録媒体
JP2007206644A (ja) * 2006-02-06 2007-08-16 Seiko Epson Corp 画像表示システム，画像表示方法，画像表示プログラム，記録媒体，データ処理装置，画像表示装置
JP4785579B2 (ja) * 2006-03-17 2011-10-05 キヤノン株式会社 情報処理装置および情報処理装置における印刷設定反映方法とプログラム
US20070288640A1 (en) * 2006-06-07 2007-12-13 Microsoft Corporation Remote rendering of multiple mouse cursors
US8244883B2 (en) * 2006-08-03 2012-08-14 Citrix Systems, Inc. Systems and methods of for providing multi-mode transport layer compression
EP2165259A1 (en) 2007-10-20 2010-03-24 Citrix Systems, Inc. Methods and systems for remoting three dimensional graphical data
US8675739B2 (en) * 2007-12-17 2014-03-18 Samsung Electronics Co., Ltd. Method and apparatus for video decoding based on a multi-core processor
US8456380B2 (en) * 2008-05-15 2013-06-04 International Business Machines Corporation Processing computer graphics generated by a remote computer for streaming to a client computer
US8200896B2 (en) * 2008-06-06 2012-06-12 Microsoft Corporation Increasing remote desktop performance with video caching
US8254704B2 (en) * 2008-10-30 2012-08-28 Microsoft Corporation Remote computing platforms providing high-fidelity display and interactivity for clients
US8189661B2 (en) * 2009-03-09 2012-05-29 Microsoft Corporation Remote desktop protocol (RDP) tile image classification for improving compression efficiency and quality
JP5077272B2 (ja) * 2009-03-12 2012-11-21 カシオ計算機株式会社 クライアント装置、サーバベース・コンピューティング・システム、およびクライアント制御プログラム
EP2237526A1 (en) * 2009-03-30 2010-10-06 NEC Corporation Method for optimizing the remote display transfer in thin client computing environment
JP2010237726A (ja) * 2009-03-30 2010-10-21 Nec Personal Products Co Ltd 情報処理装置、そのパラメータ設定方法、プログラム及び記録媒体
US8392596B2 (en) * 2009-05-26 2013-03-05 Red Hat Israel, Ltd. Methods for detecting and handling video and video-like content in remote display system
WO2011032114A1 (en) * 2009-09-11 2011-03-17 Citrix Systems, Inc. Remote rendering of three-dimensional images using virtual machines
US8392497B2 (en) * 2009-11-25 2013-03-05 Framehawk, LLC Systems and algorithm for interfacing with a virtualized computing service over a network using a lightweight client
US9582238B2 (en) * 2009-12-14 2017-02-28 Qualcomm Incorporated Decomposed multi-stream (DMS) techniques for video display systems
US8504694B2 (en) 2010-03-08 2013-08-06 Microsoft Corporation Remote content classification and transmission using multiple transport channels
US8868642B2 (en) * 2010-07-08 2014-10-21 Red Hat Israel, Ltd. System and method for dynamically switching between mouse modes
US9001135B2 (en) * 2010-09-18 2015-04-07 Google Inc. Method and mechanism for delivering applications over a wan
US20130039408A1 (en) * 2011-02-07 2013-02-14 Screenovate Technologies Ltd Method for enhancing compression and transmission process of a screen image
US20130132971A1 (en) * 2011-11-22 2013-05-23 International Business Machines Corporation System, method and program product for streamlined virtual machine desktop display
US20150200998A1 (en) * 2012-01-30 2015-07-16 Google Inc. Displaying portions of a host display area of a host device at a client device
US8774536B1 (en) * 2012-07-03 2014-07-08 Google Inc. Efficient processing of streams of images within a moving window session
US9930082B2 (en) * 2012-11-20 2018-03-27 Nvidia Corporation Method and system for network driven automatic adaptive rendering impedance

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101420610A (zh) * 2007-10-26 2009-04-29 闪联信息技术工程中心有限公司 显示远程桌面内容的方法及其装置
CN102474624A (zh) * 2009-08-04 2012-05-23 阿沃森特公司 用于静态和视频图像的远程观看的方法和系统
CN102713882A (zh) * 2009-11-16 2012-10-03 思杰系统有限公司 用于选择性地实现渐进显示技术的方法和系统
CN102446341A (zh) * 2010-09-30 2012-05-09 联想(北京)有限公司 服务器及其图像处理方法

Also Published As

Publication number Publication date
EP2849080B1 (en) 2017-10-11
CA2920050A1 (en) 2015-02-05
JP6276408B2 (ja) 2018-02-07
US10320886B2 (en) 2019-06-11
EP3301585A3 (en) 2018-07-25
EP3301585A2 (en) 2018-04-04
US20150046520A1 (en) 2015-02-12
EP2849080A1 (en) 2015-03-18
CA2920050C (en) 2019-04-02
CN103858095A (zh) 2014-06-11
EP2849080A4 (en) 2015-09-09
US8856385B1 (en) 2014-10-07
WO2015013981A1 (zh) 2015-02-05
JP2016532952A (ja) 2016-10-20

Similar Documents

Publication Publication Date Title
CN103858095B (zh) 一种图像显示方法和装置
CN112233217B (zh) 一种虚拟场景的渲染方法和装置
CA2922867C (en) Desktop-cloud-based media control method and device
CN105094983B (zh) 计算机，控制设备和数据处理方法
CN106330986B (zh) 消息传输方法及装置
CN109640116A (zh) 云手机网络视频编码方法与服务器
WO2021103363A1 (zh) 弹幕呈现方法和系统
CN111654746A (zh) 视频的插帧方法、装置、电子设备和存储介质
CN104796393A (zh) 一种基于服务器实时渲染的网络游戏系统及方法
CN110996097B (zh) Vr多媒体的体验质量确定方法及装置
JP6053345B2 (ja) 送信装置、映像表示装置、送信方法、映像表示方法、及びプログラム
CN112653898B (zh) 用户形象生成方法、相关装置及计算机程序产品
CN104765636B (zh) 一种远程桌面图像的合成方法和装置
EP2974317A1 (en) Computer system, distribution control system, distribution control method, and computer-readable storage medium
CN113778593B (zh) 云桌面控制方法、装置、电子设备、存储介质及程序产品
CN104639501A (zh) 一种数据流传输的方法、设备及系统
CN111007982A (zh) 一种电子白板实现方法、设备以及相关系统
CN112565818A (zh) 二三维一体化的操作站平台构建方法和电子设备
JP2018077897A (ja) 画像表示方法および装置
CN113066139A (zh) 图片处理方法和装置、存储介质及电子设备
CN103648053A (zh) 在智能电视中连接远程存储设备的方法和装置
JP2016033790A (ja) 画面転送サーバ装置、および画面転送方法
EP2849453A1 (en) Distribution management apparatus, distribution system, and distribution management method
CN104954856A (zh) 一种用户设备的交互方法及用户设备
CN113724355A (zh) 用于视频的图表绘制方法、装置及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220225

Address after: 550025 Huawei cloud data center, jiaoxinggong Road, Qianzhong Avenue, Gui'an New District, Guiyang City, Guizhou Province

Patentee after: Huawei Cloud Computing Technology Co.,Ltd.

Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen

Patentee before: HUAWEI TECHNOLOGIES Co.,Ltd.

TR01 Transfer of patent right