CN114489552B - 远程显示控制系统、远程控制界面显示方法及计算设备 - Google Patents

远程显示控制系统、远程控制界面显示方法及计算设备 Download PDF

Info

Publication number
CN114489552B
CN114489552B CN202210308739.3A CN202210308739A CN114489552B CN 114489552 B CN114489552 B CN 114489552B CN 202210308739 A CN202210308739 A CN 202210308739A CN 114489552 B CN114489552 B CN 114489552B
Authority
CN
China
Prior art keywords
display
main control
data
controlled
card
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210308739.3A
Other languages
English (en)
Other versions
CN114489552A (zh
Inventor
肖星
魏青
金奇才
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Tongxin Software Co ltd
Original Assignee
Guangdong Tongxin Software Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Tongxin Software Co ltd filed Critical Guangdong Tongxin Software Co ltd
Priority to CN202210308739.3A priority Critical patent/CN114489552B/zh
Priority to CN202210775616.0A priority patent/CN114995778A/zh
Publication of CN114489552A publication Critical patent/CN114489552A/zh
Application granted granted Critical
Publication of CN114489552B publication Critical patent/CN114489552B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G06F3/1462Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay with means for detecting differences between the image stored in the host and the images displayed on the remote displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4092Image resolution transcoding, e.g. by using client-server architectures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L1/00Arrangements for detecting or preventing errors in the information received
    • H04L1/0001Systems modifying transmission characteristics according to link quality, e.g. power backoff
    • H04L1/0002Systems modifying transmission characteristics according to link quality, e.g. power backoff by adapting the transmission rate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/08Protocols specially adapted for terminal emulation, e.g. Telnet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H04L67/125Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明公开了一种远程显示控制系统、远程控制界面显示方法及计算设备,系统包括远程通信连接的主控端和受控端,其中:主控端包括主控显卡、与主控显卡通信相连的主控显示器,适于获取主控显示器的显示参数,将显示参数发送至受控端;受控端包括受控显卡,适于创建显卡模拟器,将显示参数、与受控端的待显示界面相关的待处理显示数据提供至显卡模拟器,以便显卡模拟器基于显示参数对待处理显示数据进行处理以生成与主控显示器相适配的目标显示数据,并将目标显示数据发送至主控端,以便主控端基于目标显示数据在主控显示器显示与主控显示器相适配的控制界面。根据本发明的技术方案,能实现在主控端以最佳模式显示控制界面,避免了系统崩溃的问题。

Description

远程显示控制系统、远程控制界面显示方法及计算设备
技术领域
本发明涉及远程控制技术领域,尤其涉及一种远程显示控制系统、远程控制界面显示方法及计算设备。
背景技术
在桌面远程操作时,由于受控端与主控端的显示分辨率可能存在差异,如果直接将受控端的界面显示信息直接以拷贝形式显示在主控端的显示器,常常会出现界面显示不匹配的问题。
根据常规的远程控制软件,当受控端的显示分辨率高于主控端时,会在主控端右侧和下方添加轮动条,用户通过拖拽滚动条才能查看界面上的全部信息。当受控端的显示分辨率低于主控端时,根据常规的远程控制软件会将受控端界面显示在主控端屏幕的中间。
根据现有的远程控制软件,必须手动修改主控端与受控端的显示分辨率以确保两个终端的显示分辨率统一,才能在主控端屏幕上显示出与受控端的显示界面相匹配的最佳分辨率的控制界面。例如,TeamViewer、向日葵等远程控制软件为了避免因对受控端调整分辨率而导致系统崩溃(因调整分辨率的过程依赖系统进行处理,不可避免会导致系统崩溃),而不允许用户随意调整分辨率,导致主控端无法以最佳分辨率来显示受控端的界面信息,而且,手动调整分辨率会增加业务处理时效,影响用户体验。另外,不同厂商的屏幕分辨率不同,这导致主控端和受控端无法达到相同的显示分辨率,进而影响主控端在进行远程控制过程中对目标定位的准确性。
为此,需要一种远程显示控制系统,以解决现有技术中存在的问题。
发明内容
为此,本发明提供一种远程显示控制系统、远程控制界面显示方法及计算设备,以解决或至少缓解上面存在的问题。
根据本发明的一个方面,提供一种远程显示控制系统,包括远程通信连接的主控端和受控端,其中:所述主控端,包括主控显卡、与主控显卡通信相连的主控显示器,适于获取主控显示器的显示参数,将所述显示参数发送至受控端;所述受控端,包括受控显卡,适于创建显卡模拟器,将所述显示参数、与受控端的待显示界面相关的待处理显示数据提供至所述显卡模拟器,以便显卡模拟器基于所述显示参数对待处理显示数据进行处理以生成与所述主控显示器相适配的目标显示数据,并将所述目标显示数据发送至主控端,以便主控端基于目标显示数据在主控显示器显示与主控显示器相适配的控制界面。
可选地,在根据本发明的远程显示控制系统中,所述主控端进一步适于:通过主控显卡对所述目标显示数据进行图形计算和渲染后得到最终显示数据,并控制所述主控显示器基于最终显示数据显示所述控制界面。
可选地,在根据本发明的远程显示控制系统中,所述系统还包括:数据分发服务器,所述受控端与一个或多个主控端通过数据分发服务器通信连接。
可选地,在根据本发明的远程显示控制系统中,所述目标显示数据包括一帧或多帧数据,所述受控端进一步适于执行以下步骤来将目标显示数据发送至主控端:将当前帧数据发送至数据分发服务器,以便经由数据分发服务器将当前帧数据转发至一个或多个主控端;响应于数据分发服务器发送下一帧数据的指令,将下一帧数据发送至数据分发服务器,以便经由数据分发服务器将下一帧数据转发至一个或多个主控端。
可选地,在根据本发明的远程显示控制系统中,所述数据分发服务器适于:在确定至少一个主控端接收到所述当前帧数据后,向受控端发送所述发送下一帧数据的指令。
可选地,在根据本发明的远程显示控制系统中,所述显卡模拟器进一步适于:利用图像处理算法,基于所述显示参数对所述待处理显示数据进行处理。
可选地,在根据本发明的远程显示控制系统中,所述受控端包括受控处理器;所述显卡模拟器适于截获所述受控处理器发送至受控显卡的待处理显示数据、以及主控显示器的显示参数。
可选地,在根据本发明的远程显示控制系统中,所述显示参数包括:主控显示器的显示分辨率和DPI。
根据本发明的一个方面,提供一种远程控制界面显示方法,在受控端执行,所述受控端与主控端远程通信连接,所述方法包括步骤:接收主控端发送的主控显示器的显示参数;创建显卡模拟器,将所述显示参数、与受控端的待显示界面相关的待处理显示数据提供至显卡模拟器,以便显卡模拟器基于所述显示参数对所述待处理显示数据进行处理以生成与所述主控显示器相适配的目标显示数据;以及将所述目标显示数据发送至主控端,以便主控端基于目标显示数据在主控显示器显示与主控显示器相适配的控制界面。
根据本发明的一个方面,提供一种远程控制界面显示方法,在主控端执行,所述主控端与受控端远程通信连接,所述方法包括步骤:向受控端发送主控显示器的显示参数,以便受控端创建显卡模拟器,将所述显示参数、与受控端的待显示界面相关的待处理显示数据提供至所述显卡模拟器,并通过显卡模拟器基于所述显示参数对所述待处理显示数据进行处理以生成与所述主控显示器相适配的目标显示数据;以及接收受控端发送的目标显示数据,并基于目标显示数据在所述主控显示器显示与主控显示器相适配的控制界面。
根据本发明的一个方面,提供一种计算设备,包括:至少一个处理器;存储器,存储有程序指令,其中,程序指令被配置为适于由上述至少一个处理器执行,所述程序指令包括用于执行如上所述的远程控制界面显示方法的指令。
根据本发明的一个方面,提供一种存储有程序指令的可读存储介质,当该程序指令被计算设备读取并执行时,使得该计算设备执行如上所述的远程控制界面显示方法。
根据本发明的技术方案,提供了一种远程显示控制系统,是由主控端和受控端协作处理在主控端对控制界面的显示,其中,主控端向受控端提供主控显示器的显示参数,由受控端创建的显卡模拟器基于该显示参数对待显示界面对应的待处理显示数据进行适应性处理,并将处理后得到的目标显示数据发送至主控端,以便主控端基于目标显示数据在主控显示器显示与主控显示器的显示参数相适配的控制界面。这样,有利于降低对主控端内存空间的占用,能实现在主控端显示的控制界面与主控显示器的分辨率相匹配,使主控端以最佳模式显示控制界面,增强控制界面的显示效果,而且,避免了系统崩溃的问题。
进一步地,受控端经由数据分发服务器来与主控端进行通信,基于数据分发服务器的发布/订阅模式,可以通过对显示数据的发送帧率进行动态调整来控制受控端与主控端之间的数据发送频率,这样能保证在主控端对受控端进行远程控制操作的流畅性,并且有利于根据网络环境来动态调整控制界面的显示效果,从而提高用户体验。
上述说明仅是本发明技术方案的概述,为了能够更清楚了解本发明的技术手段,而可依照说明书的内容予以实施,并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
为了实现上述以及相关目的,本文结合下面的描述和附图来描述某些说明性方面,这些方面指示了可以实践本文所公开的原理的各种方式,并且所有方面及其等效方面旨在落入所要求保护的主题的范围内。通过结合附图阅读下面的详细描述,本公开的上述以及其它目的、特征和优势将变得更加明显。遍及本公开,相同的附图标记通常指代相同的部件或元素。
图1示出了根据本发明一个实施例的远程显示控制系统100的示意图;
图2示出了根据本发明一个实施例的计算设备200的示意图;
图3示出了根据本发明一个实施例的远程控制界面显示方法300的流程图;
图4示出了根据本发明一个实施例的远程控制界面显示方法400的流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
图1示出了根据本发明一个实施例的远程显示控制系统100的示意图。
如图1所示,远程显示控制系统100包括至少一个主控端110和至少一个受控端120,主控端110与受控端120可以建立远程通信连接,以使主控端110可以向受控端120发送远程控制指令,实现在主控端110远程控制受控端120的操作。
需要说明的是,在主控端110与受控端120建立远程通信连接后,主控端110需要获取受控端120的显示数据并在主控端110进行显示。具体地,需要根据受控端120的显示界面在主控端110显示出相应的控制界面,这样,用户可以在主控端110显示的控制界面上进行交互操作,来向受控端120发送相应的远程控制指令,从而实现对受控端120进行远程控制操作。
在本发明的实施例中,如图1所示,主控端110包括主控处理器113、主控显卡115、与主控显卡通信相连的主控显示器(图中未示出)。在一个实施例中,主控处理器113与主控显卡115集成在主控端110的主板上,并通过总线、主板连接器进行通信。主控显卡115上包括依次耦接的主控图形处理器、主控显卡内存(帧缓冲存储器)以及主控视频控制器。主控视频控制器可以经由监视器连接设备与主控显示器通信相连。
受控端120包括受控处理器123、受控显卡125、与受控显卡通信相连的受控显示器(图中未示出)。在一个实施例中,受控处理器123与受控显卡125集成在受控端120的主板上,并通过总线、主板连接器进行通信。受控显卡125上包括依次耦接的受控图形处理器、受控显卡内存(帧缓冲存储器)以及受控视频控制器。受控视频控制器可以经由监视器连接设备与受控显示器通信相连。
在主控端110与受控端120建立远程通信连接后,主控端110通过获取主控显示器的显示参数,并将该显示参数发送至受控端120,以指示受控端120根据主控显示器的显示参数来对受控端120的界面进行适应性处理。这里,主控显示器的显示参数例如包括主控显示器的显示分辨率、DPI。
受控端120在接收到主控端120发送的主控显示器的显示参数之后,创建一个显卡模拟器124,以通过显卡模拟器124来截获受控处理器123发送至受控显卡125的待处理显示数据、以及主控显示器的显示参数,并模拟受控显卡来对数据进行处理。这里,待处理显示数据与受控端120的待显示界面相关,是受控端120的受控处理器123本应(通过总线、主板连接器)发送至受控显卡125的交互数据。根据现有技术,受控处理器123可以将待显示数据(通过总线、主板连接器)发送至受控显卡125的受控图形处理器,通过受控图形处理器来对待处理显示数据进行处理待处理显示数据例如包括显示处理指令、界面数据信息等,经由受控端120的受控显卡对待处理显示数据进行处理后可以在受控显示器显示出待显示界面。
在根据本发明的实施例中,受控端120通过在受控处理器123与受控显卡125之间创建一个显卡模拟器,并将与受控端120的待显示界面相关的待处理显示数据、以及由主控端提供的主控显示器的显示参数提供给显卡模拟器124,以便通过显卡模拟器124来基于主控显示器的显示参数对待处理显示数据进行处理。具体地,显卡模拟器124在基于主控显示器的显示参数对待处理显示数据进行处理后,可以生成与主控显示器相适配的目标显示数据,并将目标显示数据发送至主控端110,以便主控端110基于目标显示数据在主控显示器显示与主控显示器的显示参数相适配的控制界面。
在一种实现方式中,显卡模拟器124可以利用图像处理算法,基于主控显示器的显示参数对待处理显示数据进行处理。
根据本发明的技术方案,是由主控端和受控端协作处理在主控端对控制界面的显示。其中,主控端向受控端提供主控显示器的显示参数,由受控端的显卡模拟器基于该显示参数对待显示界面对应的待处理显示数据进行适应性处理。这样,降低了对主控端内存空间的占用,能实现在主控端显示的控制界面与主控显示器的分辨率相匹配,使主控端可以以最佳模式显示控制界面,增强控制界面的显示效果。另外,当主控端110与一个或多个受控端120远程通信连接时,主控端110只需要向各个受控端120提供主控显示器的显示参数,对于待处理显示数据的适应性处理分别由各个受控端120的显卡模拟器执行,这样,使得主控端可以快速响应多个受控端、对多个受控端进行流畅的远程控制操作,并且,极大降低了主控端和受控端系统崩溃的风险。
进一步地,在主控端110从受控端120获取到目标显示数据后,通过主控显卡115对目标显示数据进行图形计算和渲染后得到最终显示数据,并控制主控显示器基于最终显示数据显示控制界面。
在一个实施例中,主控显卡115上部署有主控图形处理器和主控显卡内存。其中,主控图形处理器对目标显示数据进行图形计算和渲染后得到最终显示数据,并将最终显示数据写入主控显卡内存。随后,主控视频控制器从主控显卡内存获取最终显示数据,并对最终显示数据进行数模信号转换后提供给主控显示器,以便主控显示器基于数模信号转换后的最终显示数据来显示出控制界面。
可以理解,受控端120的受控显示器最终也会呈现出待处理显示数据对应的待显示界面。而主控端110基于目标显示数据在主控显示器显示出相应的控制界面。这样,主控端110显示出的控制界面与其主控显示器的分辨率相匹配,从而提高控制界面的呈现效果和用户的交互体验感,便于用户基于控制界面进行准确的远程控制操作。
在一个实施例中,如图1所示,远程显示控制系统100还包括数据分发服务器150,受控端120与主控端110可以通过数据分发服务器150通信连接。数据分发服务器150即DDS(Data Distribution Service),其采用发布/订阅模式的通信模式。受控端120与主控端110可以经由数据分发服务器150转发数据。
在一种实现方式中,受控端120可以与一个或多个主控端110通过数据分发服务器150通信连接。例如,对于线上教学应用场景,教师使用的终端相当于受控端,而多个学生使用的终端相当于多个主控端。
目标显示数据包括一帧或多帧数据,在受控端120将目标显示数据发送至主控端110时,每次将一帧数据经由数据分发服务器150转发至主控端110。具体地说,受控端120进一步可以通过执行以下步骤来将目标显示数据发送至主控端110:将当前帧数据发送至数据分发服务器150,以便经由数据分发服务器150将当前帧数据转发至一个或多个主控端110;响应于数据分发服务器150发送下一帧数据的指令,将下一帧数据发送至数据分发服务器,以便经由数据分发服务器将下一帧数据转发至一个或多个主控端110。
在一个实施例中,数据分发服务器150在确定至少一个主控端110接收到当前帧数据后,向受控端120发送“发送下一帧数据”的指令。随后,受控端120响应于该指令,将下一帧数据经由数据分发服务器150发送至主控端110。
需要说明的是,数据分发服务器150作为受控端与主控端之间的数据同步中间件,可以通过对显示数据的发送帧率进行动态调整来控制受控端与主控端之间的数据发送频率,这样能保证在主控端对受控端进行远程控制操作的流畅性,并且有利于根据网络环境来动态调整控制界面的显示效果,从而提高用户体验。
根据数据分发服务器150采用的发布/订阅模式的通信模型,受控端120作为发布者,需要发布一个数据发送请求,同时订阅一个是否允许发送下一帧数据的状态。
一个或多个主控端110作为订阅者,需要订阅一个数据获取请求(基于主控端ID来订阅主控端发布的数据),同时发布一个数据接收事件的反馈,以便数据分发服务器150可以根据数据接收事件的反馈来确定主控端110是否接收到帧数据。
主控端110在接收到每一帧数据后存放在主控端的内存中,随后直接接收下一帧数据,当接收到下一帧数据后直接覆盖原来的内存数据(内存数据的读写过程需要加锁)。对于主控端接收到的每一帧数据,如果能够及时处理,直接对帧数据进行处理后进行显示。如果无法处理,首先可以丢弃该帧数据,并降低控制界面刷新显示的频率,进而还可以降低显示分辨率。
在一种实现方式中,受控端120创建显卡模拟器具体包括:创建OpenGL(OpenGraphics Library,开放图形库),OpenGL是用于渲染2D、3D矢量图形的跨语言、跨平台的应用程序编程接口(API)。该接口用于根据简单的图形比特绘制复杂的三维景象。受控端120通过调用OpenGL库可以获取来自于受控端的受控处理器123发送至受控显卡(受控图形处理器)的待处理显示数据(显示处理指令、界面数据信息),并模拟受控显卡对待处理显示数据进行处理。
在一个实施例中,主控端110的操作系统112上运行有远程控制应用111,受控端120的操作系统122上运行有远程控制应用121,远程控制应用111与远程控制应用121可以经由远程控制服务器进行通信,以使主控端110与受控端120实现远程通信。
根据本发明的远程显示控制系统,是由主控端和受控端协作处理在主控端对控制界面的显示,其中,主控端向受控端提供主控显示器的显示参数,由受控端创建的显卡模拟器基于该显示参数对待显示界面对应的待处理显示数据进行适应性处理,并将处理后得到的目标显示数据发送至主控端,以便主控端基于目标显示数据在主控显示器显示与主控显示器的显示参数相适配的控制界面。这样,有利于降低对主控端内存空间的占用,能实现在主控端显示的控制界面与主控显示器的分辨率相匹配,使主控端可以以最佳模式显示控制界面,增强控制界面的显示效果,而且,避免了系统崩溃的问题。
根据本发明的一个实施例,受控端120适于执行根据本发明的远程控制界面显示方法300,主控端110适于执行根据本发明的远程控制界面显示方法400,以便在受控端对待处理显示数据进行适应性处理后提供给主控端,使主控端可以适配于于主控显示器的分辨率来显示控制界面。
根据本发明的一个实施例,主控端110、受控端120分别可以实现如下所示的计算设备200。
图2示出了根据本发明一个实施例的计算设备200的示意图。
如图2所示,在基本配置202中,计算设备200典型地包括系统存储器206和一个或者多个处理器204。存储器总线208可以用于在处理器204和系统存储器206之间的通信。
取决于期望的配置,处理器204可以是任何类型的处理,包括但不限于:微处理器(UP)、微控制器(UC)、数字信息处理器(DSP)或者它们的任何组合。处理器204可以包括诸如一级高速缓存210和二级高速缓存212之类的一个或者多个级别的高速缓存、处理器核心214和寄存器216。示例的处理器核心214可以包括运算逻辑单元(ALU)、浮点数单元(FPU)、数字信号处理核心(DSP核心)或者它们的任何组合。示例的存储器控制器218可以与处理器204一起使用,或者在一些实现中,存储器控制器218可以是处理器204的一个内部部分。
取决于期望的配置,系统存储器206可以是任意类型的存储器,包括但不限于:易失性存储器(诸如RAM)、非易失性存储器(诸如ROM、闪存等)或者它们的任何组合。系统存储器206可以包括操作系统220、一个或者多个应用222以及程序数据224。应用222实际上是多条程序指令,其用于指示处理器204执行相应的操作。在一些实施方式中,应用222可以布置为在操作系统上使得处理器204利用程序数据224进行操作。
计算设备200还包括储存设备232,储存设备232包括可移除储存器236和不可移除储存器238。
计算设备200还可以包括储存接口总线234。储存接口总线234实现了从储存设备232(例如,可移除储存器236和不可移除储存器238)经由总线/接口控制器230到基本配置202的通信。操作系统220、应用222以及程序数据224的至少一部分可以存储在可移除储存器236和/或不可移除储存器238上,并且在计算设备200上电或者要执行应用222时,经由储存接口总线234而加载到系统存储器206中,并由一个或者多个处理器204来执行。
计算设备200还可以包括有助于从各种接口设备(例如,输出设备242、外设接口244和通信设备246)到基本配置202经由总线/接口控制器230的通信的接口总线240。示例的输出设备242包括图像处理单元248和音频处理单元250。它们可以被配置为有助于经由一个或者多个A/V端口252与诸如显示器或者扬声器之类的各种外部设备进行通信。示例外设接口244可以包括串行接口控制器254和并行接口控制器256,它们可以被配置为有助于经由一个或者多个I/O端口258和诸如输入设备(例如,键盘、鼠标、笔、语音输入设备、触摸输入设备)或者其他外设(例如打印机、扫描仪等)之类的外部设备进行通信。示例的通信设备246可以包括网络控制器260,其可以被布置为便于经由一个或者多个通信端口264与一个或者多个其他计算设备262通过网络通信链路的通信。
网络通信链路可以是通信介质的一个示例。通信介质通常可以体现为在诸如载波或者其他传输机制之类的调制数据信号中的计算机可读指令、数据结构、程序模块,并且可以包括任何信息递送介质。“调制数据信号”可以这样的信号,它的数据集中的一个或者多个或者它的改变可以在信号中以编码信息的方式进行。作为非限制性的示例,通信介质可以包括诸如有线网络或者专线网络之类的有线介质,以及诸如声音、射频(RF)、微波、红外(IR)或者其它无线介质在内的各种无线介质。这里使用的术语计算机可读介质可以包括存储介质和通信介质二者。
在根据本发明的实施例中,计算设备200被配置为执行根据本发明的远程控制界面显示方法300或远程控制界面显示方法400。计算设备200的应用中包含用于执行本发明的远程控制界面显示方法300或远程控制界面显示方法400的多条程序指令,以便计算设备可以执行本发明的远程控制界面显示方法300或远程控制界面显示方法400。
在根据本发明的实施例中,受控端120被配置为执行根据本发明的远程控制界面显示方法300。受控端120在与至少一个主控端110建立远程通信连接后,执行本发明的远程控制界面显示方法300。
图3示出了根据本发明一个实施例的远程控制界面显示方法300的流程图。方法300适于在受控端120执行。
如图3所示,方法300包括步骤S310~S330。
在步骤S310中,接收主控端110发送的主控显示器的显示参数。这里,主控显示器的显示参数例如包括主控显示器的显示分辨率、DPI。
随后,在步骤S320中,创建显卡模拟器124,将显示参数、与受控端的待显示界面相关的待处理显示数据提供至显卡模拟器124,以便显卡模拟器基于显示参数来对待处理显示数据进行处理以生成与主控显示器相适配的目标显示数据。
最后,将目标显示数据发送至主控端110,以便主控端110基于目标显示数据在主控显示器显示与主控显示器的显示参数相适配的控制界面。
在根据本发明的实施例中,主控端110被配置为执行根据本发明的远程控制界面显示方法400。主控端110在与至少一个受控端120建立远程通信连接后,执行本发明的远程控制界面显示方法400。
图4示出了根据本发明一个实施例的远程控制界面显示方法400的流程图。方法400适于在主控端110执行。
如图4所示,方法400包括步骤S410~S420。
在步骤S410中,向受控端120发送主控显示器的显示参数,以便受控端120创建显卡模拟器124,将显示参数、与受控端的待显示界面相关的待处理显示数据提供至显卡模拟器124,并通过显卡模拟器124基于显示参数来对待处理显示数据进行处理,以生成与主控显示器相适配的目标显示数据。
随后,在步骤S420中,接收受控端120发送的目标显示数据,并基于目标显示数据在主控显示器显示与主控显示器相适配的控制界面。
需要说明的是,根据受控端120创建的显卡模拟器124可以截获受控处理器123发送至受控显卡125的待处理显示数据、以及主控显示器的显示参数,并模拟受控显卡来对数据进行处理。
在主控端110从受控端120获取到目标显示数据后,通过主控显卡115对目标显示数据进行图形计算和渲染后得到最终显示数据,并控制主控显示器基于最终显示数据显示控制界面。
在一个实施例中,受控端120进一步可以通过执行以下步骤来将目标显示数据发送至主控端110:将当前帧数据发送至数据分发服务器150,以便经由数据分发服务器150将当前帧数据转发至一个或多个主控端110;响应于数据分发服务器150发送下一帧数据的指令,将下一帧数据发送至数据分发服务器,以便经由数据分发服务器将下一帧数据转发至一个或多个主控端110。
在一个实施例中,数据分发服务器150在确定至少一个主控端110接收到当前帧数据后,向受控端120发送“发送下一帧数据”的指令。随后,受控端120响应于该指令,将下一帧数据经由数据分发服务器150发送至主控端110。
应当指出,关于远程控制界面显示方法300和400的具体实现可以参见前文中对远程显示控制系统100的描述,此处不再赘述。
根据本发明的远程控制界面显示方法受控端在接收到主控显示器的显示参数后,通过创建显卡模拟器,根据显卡模拟器基于主控显示器的显示参数对待显示界面对应的待处理显示数据进行适应性处理,并将处理后得到的目标显示数据发送至主控端,以便主控端基于目标显示数据在主控显示器显示与主控显示器的显示参数相适配的控制界面。这样,能实现在主控端显示的控制界面与主控显示器的分辨率相匹配,使主控端可以以最佳模式显示控制界面,增强控制界面的显示效果,而且,避免了系统崩溃的问题。
这里描述的各种技术可结合硬件或软件,或者它们的组合一起实现。从而,本发明的方法和设备,或者本发明的方法和设备的某些方面或部分可采取嵌入有形媒介,例如可移动硬盘、U盘、软盘、CD-ROM或者其它任意机器可读的存储介质中的程序代码(即指令)的形式,其中当程序被载入诸如计算机之类的机器,并被所述机器执行时,所述机器变成实践本发明的设备。
在程序代码在可编程计算机上执行的情况下,移动终端一般包括处理器、处理器可读的存储介质(包括易失性和非易失性存储器和/或存储元件),至少一个输入装置,和至少一个输出装置。其中,存储器被配置用于存储程序代码;处理器被配置用于根据该存储器中存储的所述程序代码中的指令,执行本发明的远程控制界面显示方法。
以示例而非限制的方式,可读介质包括可读存储介质和通信介质。可读存储介质存储诸如计算机可读指令、数据结构、程序模块或其它数据等信息。通信介质一般以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据,并且包括任何信息传递介质。以上的任一种的组合也包括在可读介质的范围之内。
在此处所提供的说明书中,算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与本发明的示例一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下被实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本公开并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员应当理解在本文所公开的示例中的设备的模块或单元或组件可以布置在如该实施例中所描述的设备中,或者可替换地可以定位在与该示例中的设备不同的一个或多个设备中。前述示例中的模块可以组合为一个模块或者此外可以分成多个子模块。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
此外,所述实施例中的一些在此被描述成可以由计算机系统的处理器或者由执行所述功能的其它装置实施的方法或方法元素的组合。因此,具有用于实施所述方法或方法元素的必要指令的处理器形成用于实施该方法或方法元素的装置。此外,装置实施例的在此所述的元素是如下装置的例子:该装置用于实施由为了实施该发明的目的的元素所执行的功能。
如在此所使用的那样,除非另行规定,使用序数词“第一”、“第二”、“第三”等等来描述普通对象仅仅表示涉及类似对象的不同实例,并且并不意图暗示这样被描述的对象必须具有时间上、空间上、排序方面或者以任意其它方式的给定顺序。
尽管根据有限数量的实施例描述了本发明,但是受益于上面的描述,本技术领域内的技术人员明白,在由此描述的本发明的范围内,可以设想其它实施例。此外,应当注意,本说明书中使用的语言主要是为了可读性和教导的目的而选择的,而不是为了解释或者限定本发明的主题而选择的。因此,在不偏离所附权利要求书的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。对于本发明的范围,对本发明所做的公开是说明性的而非限制性的,本发明的范围由所附权利要求书限定。

Claims (11)

1.一种远程显示控制系统,包括远程通信连接的主控端和受控端,其中:
所述主控端,包括主控显卡、与所述主控显卡通信相连的主控显示器,适于获取所述主控显示器的显示参数,将所述显示参数发送至所述受控端;
所述受控端,包括受控处理器、受控显卡、与所述受控显卡通信相连的受控显示器,适于在接收到所述显示参数后创建显卡模拟器,所述显卡模拟器适于截获所述受控处理器发送至所述受控显卡的待处理显示数据、以及所述主控显示器的显示参数,并基于所述显示参数对所述待处理显示数据进行处理以生成与所述主控显示器相适配的目标显示数据,并将所述目标显示数据发送至所述主控端,以便所述主控端基于所述目标显示数据在所述主控显示器显示与所述主控显示器相适配的控制界面;所述受控显卡适于对所述待处理显示数据进行处理后在所述受控显示器显示出待显示界面。
2.如权利要求1所述的系统,其中,所述主控端进一步适于:
通过所述主控显卡对所述目标显示数据进行图形计算和渲染后得到最终显示数据,并控制所述主控显示器基于所述最终显示数据显示所述控制界面。
3.如权利要求1所述的系统,其中,所述系统还包括:
数据分发服务器,所述受控端与一个或多个主控端通过数据分发服务器通信连接。
4.如权利要求3所述的系统,其中,所述目标显示数据包括一帧或多帧数据,所述受控端进一步适于执行以下步骤来将目标显示数据发送至主控端:
将当前帧数据发送至所述数据分发服务器,以便经由所述数据分发服务器将当前帧数据转发至一个或多个主控端;
响应于所述数据分发服务器发送下一帧数据的指令,将下一帧数据发送至所述数据分发服务器,以便经由所述数据分发服务器将下一帧数据转发至一个或多个主控端。
5.如权利要求4所述的系统,其中,
所述数据分发服务器适于:在确定至少一个主控端接收到所述当前帧数据后,向所述受控端发送所述发送下一帧数据的指令。
6.如权利要求1-5中任一项所述的系统,其中,所述显卡模拟器进一步适于:
利用图像处理算法,基于所述显示参数对所述待处理显示数据进行处理。
7.如权利要求1-5中任一项所述的系统,其中,
所述显示参数包括:所述主控显示器的显示分辨率和 DPI。
8.一种远程控制界面显示方法,在受控端执行,所述受控端与主控端远程通信连接,所述方法包括步骤:
接收所述主控端发送的主控显示器的显示参数;
创建显卡模拟器,通过所述显卡模拟器截获受控处理器发送至受控显卡的待处理显示数据、以及所述主控显示器的显示参数,基于所述显示参数对所述待处理显示数据进行处理以生成与所述主控显示器相适配的目标显示数据,并通过受控显卡对所述待处理显示数据进行处理后在受控显示器显示出待显示界面;以及
将所述目标显示数据发送至所述主控端,以便所述主控端基于目标显示数据在所述主控显示器显示与所述主控显示器相适配的控制界面。
9.一种远程控制界面显示方法,在主控端执行,所述主控端与受控端远程通信连接,所述方法包括步骤:
向所述受控端发送主控显示器的显示参数,以便所述受控端在接收到所述显示参数后创建显卡模拟器,通过所述显卡模拟器截获受控处理器发送至受控显卡的待处理显示数据、以及所述主控显示器的显示参数,基于所述显示参数对所述待处理显示数据进行处理以生成与所述主控显示器相适配的目标显示数据,并通过受控显卡对所述待处理显示数据进行处理后在受控显示器显示出待显示界面;以及
接收所述受控端发送的所述目标显示数据,并基于所述目标显示数据在所述主控显示器显示与主控显示器相适配的控制界面。
10.一种计算设备,包括:
至少一个处理器;以及
存储器,存储有程序指令,其中,所述程序指令被配置为适于由所述至少一个处理器执行,所述程序指令包括用于执行如权利要求8或9所述的方法的指令。
11.一种存储有程序指令的可读存储介质,当所述程序指令被计算设备读取并执行时,使得所述计算设备执行如权利要求8或9所述方法。
CN202210308739.3A 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备 Active CN114489552B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210308739.3A CN114489552B (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备
CN202210775616.0A CN114995778A (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210308739.3A CN114489552B (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN202210775616.0A Division CN114995778A (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备

Publications (2)

Publication Number Publication Date
CN114489552A CN114489552A (zh) 2022-05-13
CN114489552B true CN114489552B (zh) 2022-08-12

Family

ID=81488948

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202210775616.0A Pending CN114995778A (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备
CN202210308739.3A Active CN114489552B (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202210775616.0A Pending CN114995778A (zh) 2022-03-28 2022-03-28 远程显示控制系统、远程控制界面显示方法及计算设备

Country Status (1)

Country Link
CN (2) CN114995778A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115859335B (zh) * 2023-02-03 2023-06-16 合肥科颖医药科技有限公司 基于远控技术的远程信息数据查阅方法及系统

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101794237B (zh) * 2009-02-02 2014-12-31 联想(北京)有限公司 一种实现通用显示的计算机和方法
CN101754433A (zh) * 2009-12-24 2010-06-23 深圳市同洲电子股份有限公司 显示移动终端中文件内容的方法及移动终端
CN102857726A (zh) * 2012-08-17 2013-01-02 北京君正集成电路股份有限公司 基于同步显示的远程控制方法、终端、对端及系统
CN106383689B (zh) * 2016-09-20 2019-11-29 青岛海信电器股份有限公司 显示字体大小调整方法、装置及终端设备
CN106873932B (zh) * 2017-02-17 2020-03-03 浙江大学 一种Android系统服务端、远程桌面图像重定向方法及系统
CN110389730B (zh) * 2018-04-13 2022-05-06 杭州海康威视数字技术股份有限公司 基于虚拟显卡进行大屏显示的方法、装置及电子设备
CN109358951B (zh) * 2018-10-29 2021-07-02 北京京航计算通讯研究所 基于spice协议的智能支持显卡直通和虚拟显卡的显示方法
CN109542377A (zh) * 2018-11-16 2019-03-29 深圳时空数字科技有限公司 智能设备、显示设备、存储设备及屏显互动控制方法

Also Published As

Publication number Publication date
CN114489552A (zh) 2022-05-13
CN114995778A (zh) 2022-09-02

Similar Documents

Publication Publication Date Title
CN1329870C (zh) 任意形状图像的基于块的旋转
US20230120253A1 (en) Method and apparatus for generating virtual character, electronic device and readable storage medium
US20180126272A1 (en) Virtual-reality providing system, virtual-reality providing method, virtual-reality-provision supporting apparatus, virtual-reality providing apparatus, and non-transitory computer-readable recording medium
CN112416505A (zh) 一种远程控制系统、方法及计算设备
CN114489552B (zh) 远程显示控制系统、远程控制界面显示方法及计算设备
KR20130081829A (ko) 이미지 제공 시스템, 이를 위한 장치 및 이미지 제공 방법
CN116821040B (zh) 基于gpu直接存储器访问的显示加速方法、装置及介质
CN113849254A (zh) 页面布局的自适应调整方法及计算设备
CN112965771A (zh) 一种虚拟屏幕构建方法、计算设备及存储介质
JP2016224942A (ja) イメージビューバインディングの最適化のためのシステムおよび方法
US20200210038A1 (en) Robot eye lamp control method and apparatus and terminal device using the same
US8854385B1 (en) Merging rendering operations for graphics processing unit (GPU) performance
GB2538797A (en) Managing display data
CN117292039A (zh) 顶点坐标生成方法、装置、电子设备及计算机存储介质
CN111915714A (zh) 用于虚拟场景的渲染方法、客户端、服务器及计算设备
CN110288523B (zh) 图像生成方法和装置
JP2005055573A (ja) 高速表示処理装置
CN109308862B (zh) 信号控制方法、控制装置、处理装置及信号控制设备
CN113885758B (zh) 一种虚拟屏幕生成方法、计算设备及存储介质
CN112528707A (zh) 图像处理方法、装置、设备及存储介质
CN114998504A (zh) 二维图像光照渲染方法、装置、系统和电子装置
US20230206519A1 (en) Freehand sketch image generating method and system for machine learning
CN115861510A (zh) 对象渲染方法、装置、电子设备、存储介质及程序产品
CN115619904A (zh) 图像处理方法、装置及设备
CN113613043A (zh) 屏幕显示和图像处理方法以及嵌入式设备和云服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant