CN111694442A - 一种降低分布式kvm系统鼠标延时的方法 - Google Patents

一种降低分布式kvm系统鼠标延时的方法 Download PDF

Info

Publication number
CN111694442A
CN111694442A CN202010552606.1A CN202010552606A CN111694442A CN 111694442 A CN111694442 A CN 111694442A CN 202010552606 A CN202010552606 A CN 202010552606A CN 111694442 A CN111694442 A CN 111694442A
Authority
CN
China
Prior art keywords
instruction
command
local input
mouse
decoding unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010552606.1A
Other languages
English (en)
Other versions
CN111694442B (zh
Inventor
林春育
邓国伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Createk Electronics Co ltd
Original Assignee
Shenzhen Createk Electronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Createk Electronics Co ltd filed Critical Shenzhen Createk Electronics Co ltd
Priority to CN202010552606.1A priority Critical patent/CN111694442B/zh
Publication of CN111694442A publication Critical patent/CN111694442A/zh
Application granted granted Critical
Publication of CN111694442B publication Critical patent/CN111694442B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
    • G06F3/03543—Mice or pucks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种降低分布式KVM系统鼠标延时的方法。一种降低分布式KVM系统鼠标延时的方法包括：解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；所述解码单元将所述视频信息并显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；解码单元将所述图像层与所述视频层结合，并在显示装置中显示。本发明旨在降低KWM系统的鼠标操作延时，提升用户体验。

Description

一种降低分布式KVM系统鼠标延时的方法
技术领域
本发明涉及KVM技术领域，尤其涉及一种降低分布式KVM系统鼠标延时的方法。
背景技术
KVM代表着键盘(Keyboard)、显示器(Video)和鼠标(Mouse)，即利用一组键盘、显示器和鼠标实现对多台设备的控制，在远程调度监控方面发挥着重要作用。KVM技术可以向远程终端发送调度信息网中的各项数据资料，实现信息的共享。
目前市面上绝大部分的分布式KVM系统，都是鼠标，键盘，显示器在本地，提供信号源的电脑则在远处机房。因此通过本地的鼠标控制远程的电脑进行操作往往存在鼠标的操作延时的问题。目前使用输出节点本地显示的鼠标代替远程电脑的鼠标的方式，依次来解决鼠标延迟的问题，但是这样移动鼠标的时候，就会出现本地显示的鼠标和远程电脑鼠标两个鼠标一起移动，而且是一个快一个慢，鼠标显示存在重影，用户体验差。
发明内容
本申请实施例通过提供一种降低分布式KVM系统鼠标延时的方法，旨在降低KWM系统的鼠标操作延时，提升用户体验。
本申请实施例提供了一种降低分布式KVM系统鼠标延时的方法，包括：
解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；
所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
所述解码单元将所述视频信息并显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
在一些实施例中，所述编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令之前，还包括：
解码单元获取本地输入设备的操作指令，并发送至编码单元。
在一些实施例中，所述本地输入设备为本地鼠标。
在一些实施例中，所述操作指令包括点击指令、滚轮指令和可视操作指令中的至少之一。
在一些实施例中，所述点击指令包括左键点击指令和/或右键点击指令。
在一些实施例中，所述可视操作指令包括指针移动指令。
在一些实施例中，所述模拟指令为触控指令。
在一些实施例中，所述触控指令包括：点击指令、滑动指令、长按指令。
在一些实施例中，所述编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；包括:
根据预设规则对所述操作指令转换成模拟指令。
在一些实施例中，所述预设规则为对左键点击指令和指针移动指令进行转换，对右键点击指令不转换。
本申请通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
附图说明
图1为本发明的一种降低分布式KVM系统鼠标延时的方法的实施例一的流程图；
图2为本发明的一种降低分布式KVM系统鼠标延时的方法的实施例二的流程图；
图3为本发明的一种降低分布式KVM系统鼠标延时的方法的实施例三的流程图；
图4为本发明的一种降低分布式KVM系统鼠标延时的方法的实施例四的流程图；
图5为本发明的一种降低分布式KVM系统鼠标延时的方法的实施例五的流程图；
图6为本发明的一种降低分布式KVM系统鼠标延时的方法的实施例六的流程图；
图7为本发明的KWM系统的一个实施例的功能模块图。
具体实施方式
为了更好的理解上述技术方案，下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
为了更好的理解上述技术方案，下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。
实施例一
目前市面上绝大部分的分布式KVM系统，都是鼠标，键盘，显示器在本地，提供信号源的终端设备则在远处机房。因此通过本地的鼠标控制远程的终端设备进行操作往往存在鼠标的操作延时的问题。如果终端设备分辨率为1920x1080的话，大概延时在50到70毫秒，如果按每秒30帧的速度，就是会延时1到2帧的视觉效果，在鼠标移动的时候会有一种延迟感觉，如果终端设备是3840x2160分辨率的话，这个延时会超过100毫秒，延迟的感觉更加强烈。这个延迟的感觉主要体现在鼠标的移动，左右键点击则不会，由于终端设备对处理左右健消息本来就需要时间，因此鼠标左右键点击的延迟感不如鼠标移动的延迟感明显。根据这个特点目前使用输出节点本地显示的鼠标代替终端设备的鼠标，这样就可以解决延迟的问题，但是这样移动鼠标的时候，出现本地显示的鼠标和远程终端设备鼠标两个鼠标一起移动，而且是一个移动快一个移动慢，鼠标显示存在重影，用户体验差。
因此需要实现一种实现本地鼠标显示同时隐藏终端设备中鼠标的方法，以降低KWM系统的鼠标操作延时，提升用户体验。鉴于此，请参照图1，本申请实施例提供了一种降低分布式KVM系统鼠标延时的方法，包括：
S110、解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；
其中，所述解码单元或所述编码单元均能执行所述步骤S110的操作，且所述解码单元或所述编码单元均能执行所述步骤S110能获得相同的效果。所述本地输入设备指的是位于本地端的输入操作设备。所述输入操作设备包括鼠标，触控笔，操纵杆，触控面板等。需要说明的是，一个本地端可能设置有一个或多个输入操作设备。对于本地段设置有多个输入操作设备，同一时间段内只会有一个输入操作设备的操作有效，从而用户通过操控所述输入操作设备，实现对远端终端设备的操作控制。
另外，本地输入设备的操作指令指的是用户对本地输入设备执行操作而产生的操作指令。以鼠标为典型的例子进行说明，用户对鼠标的操作指令包括点击指令、滚轮指令和可视操作指令。进一步地，所述点击指令包括左键点击指令和/或右键点击指令。所述可视操作指令包括指针移动指令。
需要注意的是，用户对鼠标的操作指令一次可能包括一个指令或包括多个指令组成的复合指令。例如当需要打开文件夹或者应用程序的时候，用户通过将鼠标指针移动至想要打开的文件夹或者应用程序处，再通过双击鼠标左键得以进入文件夹或者应用程序进行后续操作。在这个过程中，存在两次独立的操作指令，即指鼠标指针移动时的指针移动指令，以及双击鼠标左键的左键点击指令。又例如，当需要拖动文件夹或者应用程序调节位置的时候，通过鼠标左键长按文件夹或者应用程序，再通过移动选中的文件夹或者应用程序实现文件夹或者应用程序位置的调整。上述过程中，用户一次操作同时存在两个指令操作，即左键长按指令和指针移动指令。
为了实现将远程终端设备中的鼠标隐藏的效果。换句话说，即将本地输入设备的可视化操作指令进行隐藏。进一步地，可通过将本地输入设备的可视化操作指令转换成在远端终端设备的“不可视”的操作指令，从而实现对远端终端设备中鼠标的隐藏。
在本实施例中，通过将本地输入设备的移动指令转换成模拟指令，可实现对远端终端设备的鼠标的隐藏。所述模拟指令可以是实现本地输入设备的可视化操作指令的功能，同时通过人体视觉无法观看的指令。进一步地，所述模拟指令为触控指令。所述触控指令包括：点击指令、滑动指令、长按指令。根据前述内容，由于用户在本地鼠标的操作指令包括一次可能包括一个指令或者包括多个指令的复合指令。在远程的终端设备中对应存在本地鼠标的操作指令一次操作的一个指令或者多个指令的复合指令。根据前面的典型例子，当需要打开文件夹或者应用程序的时候，本地鼠标存在指针移动指令和左键点击指令，对应在远程的终端设备中，指针移动指令可转换成触控指令中的滑动指令，左键点击指令可转换成触控指令中的点击指令。而当需要拖动文件夹或者应用程序调节位置的时候，本地鼠标存在指针移动指令和左键点击指令的复合指令，对应在远程的终端设备中，指针移动指令可转换成触控指令中的滑动指令，左键点击指令可转换成触控指令中的长按指令。
综上，通过将本地鼠标的点击指令和可视化操作指令转换成远程终端设备的触控指令，实现了对将远程终端设备中的鼠标隐藏。
S120、所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
需要说明的是，所述编码单元可以是将信号(如比特流)或数据进行编制、转换为可用以通讯、传输和存储的信号形式的设备。例如所述编码单元为编码器。所述终端设备为计算机设备或平板电脑。所述计算机设备需是接收触控指令操作的计算机设备。所述终端设备的数量可以包括多个，从而用户可以通过本地输入设备在多个不同操作系统的远程终端设备之间进行切换并实施管理。
所述视频信息指的是终端设备根据编码单元处理后的模拟指令(即触控指令)执行相应操作(即对应于本地输入设备的操作指令的相关操作)，在终端设备的一段时间内的画面信息组成的视频信息。
S130、所述解码单元将所述视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
所述解码单元可以是用于对编码器的编码信号进行解码的解码器。所述解码单元将所述本地输入设备的可视操作指令在显示装置的画面中。例如，以鼠标为例，鼠标的指针移动时，指针的移动即是可视操作指令。此外，鼠标在执行某些操作时可能还会产生指针本身形状的变化，例如在将鼠标指针从空白桌面移动到可编辑文字时，指针会从一个箭头变化为I形的图标。展示本地输入设备的可视操作是为了方便用户对自身执行的操作进行观察和判断。
S140、解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
所述显示装置可以是计算机显示器，电视显示器或智能手机显示屏等。在一个分布式KVM系统的本地端，可以设置有一个或者多个显示装置，所述的合并数据可以只输出至某一个显示装置进行显示，也可以输出至某几个显示装置进行显示，还可以输出至所有显示装置进行显示。
由前述内容可知，所述视频信息是远程终端设备基于模拟指令而生成的相应操作在一段时间内的画面信息组成的视频信息。所以所述视频信息是缺少鼠标指针的视频信息，所述解码单元将所述视频信息显示在视频层，并将视频层与包含鼠标的可视操作指令的图像层相结合，由此得到有完整操作过程，即只包含一个本地输入设备(即鼠标)的可视化操作指令的远程终端设备的视频信息，并通过显示装置进行显示。
本实施例通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
实施例二
本实施例建立在实施例一的基础之上，请参照图2，本实施例的一种降低分布式KVM系统鼠标延时的方法包括：包括：
S210、解码单元获取本地输入设备的操作指令，并发送至编码单元；
在本实施例中，由于解码单元设置于本地，更方便获取本地输入设备的操作指令，所以选择解码节点执行步骤S210。当执行步骤S220和步骤S230的是编码节点时，编码节点需要通过网络从解码节点间接获取操作指令；而当执行步骤S220和步骤S230的是解码节点时，解码节点可以直接获取操作指令，此时将所述操作指令发送给编码节点的步骤可以选择不执行，但在该步骤会产生其他有益效果时可以选择执行。步骤S210是一个准备初始数据的步骤，明确了初始数据的获取来源以及初始数据的传输过程，是进行后续步骤的基础。
S220、解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；
S230、所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
S240、所述解码单元将所述视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
S250、解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
本实施例通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
实施例三
本实施例建立在实施例二的基础之上，请参照图3，本实施例的一种降低分布式KVM系统鼠标延时的方法包括：包括：
S310、解码单元获取本地输入设备的操作指令，并发送至编码单元；
S320、解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；
S330、所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
S340、所述编码单元接收所述视频信息，对所述视频信息进行编码，并将编码后的所述视频信息发送至解码单元；
S350、所述解码单元对编码后的所述视频信息进行解码；
由于本地端的解码单元与所述远程的终端设备之间相距较遥远，且远端的视频信息的数据量较大，远端的视频信息在传输过程中容易丢失或者乱码，所以通过编码单元对远程的终端设备的视频信息进行编码，再通过解码单元对视频信息进行解码，有利于提高视频信息的传输效率和降低传输的误码率。所述编码单元对所述远程的终端设备输出的视频信息的编码格式可以包括但不限于H264或H265格式。
S360、所述解码单元将解码后的所述视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
S370、解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
本实施例通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
实施例四
本实施例建立在实施例三的基础之上，请参照图4，本实施例的一种降低分布式KVM系统鼠标延时的方法包括：包括：
S410、解码单元获取本地输入设备的操作指令，并发送至编码单元；
S420、解码单元或编码单元获取本地输入设备的操作指令，根据预设规则对左键点击指令和指针移动指令进行转换，对右键点击指令不转换。
由于左键点击指令和右键点击指令并不存在画面显示的可视化，而指针移动指令涉及鼠标指针的移动。于是至少将指针移动指令转换成模拟指令。
在本实施例中，通过将本地输入设备的左键点击指令转换成远程终端设备的触控指令中的点击指令，以及将本地输入设备的指针移动指令转换成远程终端设备的触控指令中的滑动指令，实现对远程终端设备的中本地输入设备的可视化操作指令的隐藏。由于右键点击指令不涉及的画面显示的可视化，所以对于右键点击指令不进行转换，直接在远程终端设备中响应右键点击指令执行相应操作。
S430、所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
S440、所述编码单元接收所述视频信息，对所述视频信息进行编码，并将编码后的所述视频信息发送至解码单元；
S450、所述解码单元对编码后的所述视频信息进行解码；
S460、所述解码单元将解码后的所述视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
S470、解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
本实施例通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
实施例五
本实施例建立在实施例三的基础之上，请参照图5，本实施例的一种降低分布式KVM系统鼠标延时的方法包括：包括：
S510、解码单元获取本地输入设备的操作指令，并发送至编码单元；
S520、解码单元或编码单元获取本地输入设备的操作指令，根据预设规则对左键点击指令、指针移动指令进行转换，对右键点击指令和滚轮指令不转换。
由于左键点击指令、右键点击指令和滚轮指令并不存在画面显示的可视化，而指针移动指令涉及鼠标指针的移动。于是至少将指针移动指令转换成模拟指令。
在本实施例中，通过将本地输入设备的左键点击指令转换成远程终端设备的触控指令中的点击指令，以及将本地输入设备的指针移动指令转换成远程终端设备的触控指令中的滑动指令，实现对远程终端设备的中本地输入设备的可视化操作指令的隐藏。由于右键点击指令和不滚轮指令涉及的画面显示的可视化，所以对于右键点击指令和滚轮指令不进行转换，直接在远程终端设备中响应右键点击指令和滚轮指令执行相应操作。
S530、所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
S540、所述编码单元接收所述视频信息，对所述视频信息进行编码，并将编码后的所述视频信息发送至解码单元；
S550、所述解码单元对编码后的所述视频信息进行解码；
S560、所述解码单元将解码后的所述视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
S570、解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
本实施例通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
实施例六
本实施例建立在实施例三的基础之上，请参照图6，本实施例的一种降低分布式KVM系统鼠标延时的方法包括：包括：
S610、解码单元获取本地输入设备的操作指令，并发送至编码单元；
S620、解码单元或编码单元获取本地输入设备的操作指令，根据预设规则对左键点击指令、指针移动指令和滚轮指令进行转换，对右键点击指令不转换。
由于左键点击指令、右键点击指令和滚轮指令并不存在画面显示的可视化，而指针移动指令涉及鼠标指针的移动。于是至少将指针移动指令转换成模拟指令。
在本实施例中，由于滚轮指令对应于远程终端设备的触控指令中的滑动指令。通过将本地输入设备的左键点击指令转换成远程终端设备的触控指令中的点击指令，将本地输入设备的指针移动指令转换成远程终端设备的触控指令中的滑动指令，以及将本地输入设备的滚轮指令转换成远程终端设备的触控指令中的滑动指令，实现对远程终端设备的中本地输入设备的可视化操作指令的隐藏。由于右键点击指令不涉及的画面显示的可视化，所以对于右键点击指令不进行转换，直接在远程终端设备中响应右键点击指令执行相应操作。
S630、所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
S640、所述编码单元接收所述视频信息，对所述视频信息进行编码，并将编码后的所述视频信息发送至解码单元；
S650、所述解码单元对编码后的所述视频信息进行解码；
S660、所述解码单元将解码后的所述视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
S670、解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
本实施例通过解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令，终端设备响应于所述模拟指令形成不含本地输入设备图形的视频信息，再通过所述解码单元将视频信息显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层，解码单元将所述图像层与所述视频层结合，并在显示装置中显示包含本地输入设备图形的远程终端设备的操作视频，实现了对将远程终端设备中的鼠标隐藏，降低KWM系统的鼠标操作延时，提升用户体验。
请参照图7，基于同一发明构思，本发明实施例还提供了实施例一至实施例六中方法对应的系统，一种KWM系统，包括本地输入设备，位于本地的显示装置，位于远端的终端设备，解码单元和编码单元。所述解码单元分别与所述本地输入设备和显示装置通信连接，所述解码单元和所述编码单元通过网络通信连接，所述编码单元和所述终端设备通信连接。其中，具体地，所述编码单元和所述终端设备可基于USB HID(Human Interface Device，译为人机接口设)协议进行通信。同样地，所述解码单元与所述本地输入设备和显示装置也可通过USB HID协议进行通信。
其中所述编码单元可设置为编码器。所述终端设备设置为计算机设备或平板电脑。所述编码单元设置为编码器。所述本地输入设备可设置为鼠标，触控笔，操纵杆或触控面板。显示装置可设置为计算机显示器，电视显示器或智能手机显示屏等。
所述解码单元，用于获取与其连接的本地输入设备的可视操作指令并绘制于图像层；还用于将接收所述编码单元的视频信息解码并显示在视频层；以及用于将所述图像层与所述视频层结合，并在显示装置中显示；还用于将本地输入设备的可视操作指令发送至所述编码单元。
所述编码单元，用于接收所述本地输入设备的操作指令并将其转换成模拟指令，再将模拟指令发送给与所述编码单元连接的终端设备；还用于将接收到的终端设备的视频信息进行编码并发送至所述解码单元。
由于本发明实施例七所介绍的系统，为实施本发明实施例一的方法所采用的系统，故而基于本发明实施例一所介绍的方法，本领域所属人员能够了解该系统的具体结构及变形，故而在此不再赘述。凡是本发明实施例一的方法所采用的系统都属于本发明所欲保护的范围。由于实施例七采用了上述所有实施例的全部技术方案，因此至少具有上述实施例的技术方案所带来的所有有益效果，在此不再一一赘述。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发
明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种降低分布式KVM系统鼠标延时的方法，其特征在于，包括：
解码单元或编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；
所述编码单元将所述模拟指令发送至终端设备，终端设备响应于所述模拟指令形成视频信息；
所述解码单元将所述视频信息并显示在视频层，同时所述解码单元将所述本地输入设备的可视操作指令绘制于图像层；
解码单元将所述图像层与所述视频层结合，并在显示装置中显示。
2.根据权利要求1所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令之前，还包括：
解码单元获取本地输入设备的操作指令，并发送至编码单元。
3.根据权利要求2所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述本地输入设备为本地鼠标。
4.根据权利要求2所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述操作指令包括点击指令、滚轮指令和可视操作指令中的至少之一。
5.根据权利要求4所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述点击指令包括左键点击指令和/或右键点击指令。
6.根据权利要求5所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述可视操作指令包括指针移动指令。
7.根据权利要求2所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述模拟指令为触控指令。
8.根据权利要求7所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述触控指令包括：点击指令、滑动指令、长按指令。
9.根据权利要求6所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述编码单元获取本地输入设备的操作指令，并将所述操作指令转换成模拟指令；包括:
根据预设规则对所述操作指令转换成模拟指令。
10.根据权利要求9所述的一种降低分布式KVM系统鼠标延时的方法，其特征在于，所述预设规则为对左键点击指令和指针移动指令进行转换，对右键点击指令不转换。
CN202010552606.1A 2020-06-16 2020-06-16 一种降低分布式kvm系统鼠标延时的方法 Active CN111694442B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010552606.1A CN111694442B (zh) 2020-06-16 2020-06-16 一种降低分布式kvm系统鼠标延时的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010552606.1A CN111694442B (zh) 2020-06-16 2020-06-16 一种降低分布式kvm系统鼠标延时的方法

Publications (2)

Publication Number Publication Date
CN111694442A true CN111694442A (zh) 2020-09-22
CN111694442B CN111694442B (zh) 2023-10-20

Family

ID=72481449

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010552606.1A Active CN111694442B (zh) 2020-06-16 2020-06-16 一种降低分布式kvm系统鼠标延时的方法

Country Status (1)

Country Link
CN (1) CN111694442B (zh)

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101447998A (zh) * 2008-12-25 2009-06-03 广东威创视讯科技股份有限公司 桌面共享方法及系统
CN102857534A (zh) * 2011-07-01 2013-01-02 云联（北京）信息技术有限公司 一种基于云计算的远程交互方法
CN104216531A (zh) * 2014-09-25 2014-12-17 陕西高新实业有限公司 一种基于鼠标同步方法的kvm系统
CN104853157A (zh) * 2015-05-06 2015-08-19 金三立视频科技（深圳）有限公司 Nvr远程控屏方法、控屏装置以及控屏系统
CN105988602A (zh) * 2016-06-24 2016-10-05 北京小米移动软件有限公司 鼠标模拟方法和装置
CN106598295A (zh) * 2016-12-12 2017-04-26 广东威创视讯科技股份有限公司 一种改善kvm鼠标操作延时感的方法及系统
CN108024133A (zh) * 2016-10-28 2018-05-11 深圳市中兴微电子技术有限公司 一种信息输出显示方法及装置
WO2018107715A1 (zh) * 2016-12-12 2018-06-21 威创集团股份有限公司 一种降低坐席管理系统成本的方法及系统
CN110427116A (zh) * 2019-06-27 2019-11-08 深圳市拔超科技有限公司 一种降低kvm系统鼠标延迟的方法及kvm系统
CN110489042A (zh) * 2019-07-17 2019-11-22 视联动力信息技术股份有限公司 一种基于视联网模拟拖拽的方法及系统
KR102050068B1 (ko) * 2018-06-14 2019-11-28 (주)시스윈일렉트로닉스 Rcs 구현을 위한 마우스 영상 지연 제거 장치

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101447998A (zh) * 2008-12-25 2009-06-03 广东威创视讯科技股份有限公司 桌面共享方法及系统
CN102857534A (zh) * 2011-07-01 2013-01-02 云联（北京）信息技术有限公司 一种基于云计算的远程交互方法
CN104216531A (zh) * 2014-09-25 2014-12-17 陕西高新实业有限公司 一种基于鼠标同步方法的kvm系统
CN104853157A (zh) * 2015-05-06 2015-08-19 金三立视频科技（深圳）有限公司 Nvr远程控屏方法、控屏装置以及控屏系统
CN105988602A (zh) * 2016-06-24 2016-10-05 北京小米移动软件有限公司 鼠标模拟方法和装置
CN108024133A (zh) * 2016-10-28 2018-05-11 深圳市中兴微电子技术有限公司 一种信息输出显示方法及装置
CN106598295A (zh) * 2016-12-12 2017-04-26 广东威创视讯科技股份有限公司 一种改善kvm鼠标操作延时感的方法及系统
WO2018107715A1 (zh) * 2016-12-12 2018-06-21 威创集团股份有限公司 一种降低坐席管理系统成本的方法及系统
KR102050068B1 (ko) * 2018-06-14 2019-11-28 (주)시스윈일렉트로닉스 Rcs 구현을 위한 마우스 영상 지연 제거 장치
CN110427116A (zh) * 2019-06-27 2019-11-08 深圳市拔超科技有限公司 一种降低kvm系统鼠标延迟的方法及kvm系统
CN110489042A (zh) * 2019-07-17 2019-11-22 视联动力信息技术股份有限公司 一种基于视联网模拟拖拽的方法及系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
ZUO XIANG: "Reducing Latency in Virtual Machines: Enabling Tactile Internet for Human-Machine Co-Working", 《IEEE JOURNAL ON SELECTED AREAS IN COMMUNICATIONS》 *
冯健;倪明;郭自刚;赵建波;: "基于视频流的云桌面设计与实现", 计算机工程, no. 10 *

Also Published As

Publication number Publication date
CN111694442B (zh) 2023-10-20

Similar Documents

Publication Publication Date Title
CN114390359B (zh) 一种消息的展示方法及显示设备
US9723123B2 (en) Multi-screen control method and device supporting multiple window applications
CN111601120A (zh) 一种无线传屏显示系统与显示方法
EP2784641B1 (en) User interface display method and device using same
CN110231904B (zh) 对在显示设备上显示的窗口进行远程配置
US20140078240A1 (en) Method and apparatus for video resource management in video conference
KR101596505B1 (ko) 멀티미디어 시스템의 사용자 인터페이스 장치 및 방법
CN103281580A (zh) 分离用户界面的电视机遥控方法及其系统
CN109379549A (zh) 一种无线传屏方法、设备及系统
CN104837051A (zh) 视频播放方法及客户端
CN105874807A (zh) 用于在电视设备上对Web内容远程渲染的方法、系统和介质
US8860773B2 (en) Telepresence for remote collaboration with a gestural interface
CN111694442B (zh) 一种降低分布式kvm系统鼠标延时的方法
JP5281324B2 (ja) 画面出力コンバータ、ディスプレイ装置および画面表示方法
CN106210665B (zh) 一种基于视频采集的远程主机控制方法及系统
CN102272719A (zh) 包括提供有经由图像共享协议进行通信的图形接口的终端和服务器的系统
CN116980554A (zh) 一种显示设备及视频会议界面显示方法
CN101295427A (zh) 多媒体软件的远程控制系统及方法
KR102362140B1 (ko) 스트리밍 게임 제공 방법 및 장치
CN115103054B (zh) 信息处理方法、装置、电子设备及介质
CN113766164B (zh) 显示设备及信号源界面显示方法
CN113190144A (zh) 显示页面上焦点置顶方法及显示设备
CN111722899A (zh) 图像处理方法、装置和图像传输系统
CN113535023A (zh) 一种显示设备及展示方法
CN114302131A (zh) 显示设备和黑屏检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant