CN112068749A - 多屏幕单终端设备屏幕集中显示、控制的系统及方法 - Google Patents

多屏幕单终端设备屏幕集中显示、控制的系统及方法 Download PDF

Info

Publication number
CN112068749A
CN112068749A CN202010848210.1A CN202010848210A CN112068749A CN 112068749 A CN112068749 A CN 112068749A CN 202010848210 A CN202010848210 A CN 202010848210A CN 112068749 A CN112068749 A CN 112068749A
Authority
CN
China
Prior art keywords
screen
display
mouse
screens
area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010848210.1A
Other languages
English (en)
Other versions
CN112068749B (zh
Inventor
庄洵
李强
王立
徐航
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yi Si Si Hangzhou Technology Co ltd
Original Assignee
Isvision Hangzhou Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Isvision Hangzhou Technology Co Ltd filed Critical Isvision Hangzhou Technology Co Ltd
Priority to CN202010848210.1A priority Critical patent/CN112068749B/zh
Publication of CN112068749A publication Critical patent/CN112068749A/zh
Application granted granted Critical
Publication of CN112068749B publication Critical patent/CN112068749B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04803Split screen, i.e. subdividing the display area or the window area into separate subareas

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种多屏幕单终端设备屏幕集中显示、控制的系统及方法,该设备包括一个主屏和至少一个从屏,均受控于同一终端设备;主屏被划分为激活屏幕显示区和屏幕列表区;该系统屏幕显示范围检测单元用于获取屏幕数据;屏幕内容获取单元用于获取指定显示范围当前显示的图像;鼠标位置获取单元用于获取鼠标在全局像素坐标中的位置;鼠标位置计算单元用于计算鼠标所在屏幕、及其相对位置;激活区显示单元、列表区显示单元分别触发屏幕内容获取单元获取指定图像并按预设比例在主屏两区实时显示。该方案能在主屏的列表区集中显示所有从屏内容,且能直观确定鼠标所在屏幕,并能基于鼠标位置在激活屏幕显示区保证清晰度的情况下显示从屏内容。

Description

多屏幕单终端设备屏幕集中显示、控制的系统及方法
技术领域
本发明涉及图像显示领域,具体涉及一种多屏幕单终端设备屏幕集中显示、控制的系统及方法。
背景技术
当代计算机单个终端可以支持多个屏幕。通过键盘鼠标可以直接查看和控制各个屏幕的内容。一般情况下,需要各个屏幕显示不同的内容。
为了将应用软件的显示界面布置到各个显示屏上,已经存在多种方法。而要检测最终的显示效果,以往的方法,需要直接对各个屏幕进行查看,即需要各个屏幕都处于视野之内。如果各个屏幕之间距离较远或者朝向不同,直接观察和控制各个屏幕画面,效率很低或者难以执行。多屏幕系统,各个屏幕显示范围之间的关系、各个屏幕的当前的显示内容、鼠标当前位于哪个屏幕的哪个位置,都难以知晓。借助操作系统自带的屏幕分辨率配置,可以获知各个屏幕显示范围之间的关系,但是却未给出显示内容和鼠标位置。一旦鼠标落入视野之外的屏幕上,将难以进行鼠标甚至键盘操作。
针对如上问题,一种解决思路是不直接在其他屏幕上操作——先规划窗口的显示范围,再将窗口设置到目标显示范围之上。CN200910180021.5公开了一种多屏幕监控方法及装置,可以通过从屏监视窗口检查对应屏幕的显示画面,不需要直接对各个屏幕逐一观察。但这种技术有如下:其通过从屏监视窗口虽然可以查看到对应屏幕的显示界面,但是难以在从屏监视窗口中操控操作系统和其他软件。从屏监视窗口如果尺寸较小,当前的鼠标位置、屏幕上的文字很难看清。简言之,这里的从屏监视窗口就是从屏的缩略显示窗口,虽然方便查看,但不方便键鼠操作。
另一种解决思路是直接查看指定的屏幕内容,如既有的MultiMonitorTool等软件,其可查看指定屏幕的显示内容。但这种技术具有如下局限性:首先,一旦鼠标落入其他不在视野且未打开查看窗口的屏幕同样难以找到鼠标、进行键鼠操作。其次,其他屏幕显示内容的清晰度受限于对应窗口所在的屏幕。如果显示窗口较小或者所在的屏幕分辨率较低,而查看的屏幕分辨率较高时,鼠标图标和文字即会模糊,难以阅读,以致影响操作。再次,MultiMonitorTool等软件虽然可以查看各屏幕显示范围的文字描述,但不够直观。鼠标位于所有显示区的哪个位置同样不够明确。
可见,现有技术对于具有多屏幕的单终端设备,难以在一个屏幕直接操作其他屏幕的显示内容。在部分屏幕不方便直接查看的场景下,失去鼠标视野和控制的问题没有得到根本解决。
发明内容
为了解决上述技术问题,本发明提供一种多屏幕单终端设备屏幕集中显示、控制的系统及方法,其能在主屏的屏幕列表区集中显示所有屏幕内容,且能直观确定鼠标所在屏幕和在屏幕中的方位,并能基于鼠标位置在主屏的激活屏幕显示区保证清晰度的情况下显示从屏内容。
为此,本发明的技术方案如下:
一种多屏幕单终端设备屏幕集中显示、控制的系统,该多屏幕单终端设备包括一个主屏和至少一个从屏,均受控于同一终端设备;所述主屏位于操作人员视野范围内,所述从屏分布在不同位置,是否在操作人员视野范围内无需限定;
所述主屏的显示范围被划分为激活屏幕显示区和屏幕列表区;所述屏幕列表区按照一定比例缩小、排列显示所有屏幕的显示范围内画面,所述激活屏幕显示区用于显示鼠标所在屏幕的画面;
所述多屏幕单终端设备对所有屏幕按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置;
该系统包括屏幕显示范围检测单元、屏幕内容获取单元、鼠标位置获取单元、鼠标位置计算单元、激活区显示单元和列表区显示单元;
所述屏幕显示范围检测单元用于获取屏幕数据,所述屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
所述屏幕内容获取单元用于获取指定显示范围当前显示的图像;所述指定显示范围为鼠标所在屏幕的显示范围或所有屏幕的显示范围;
所述鼠标位置获取单元用于获取鼠标在全局像素坐标中的位置;
所述鼠标位置计算单元分别从所述屏幕显示范围检测单元调取屏幕数据,从所述鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕显示范围和在屏幕中的相对位置;
所述激活区显示单元从所述鼠标位置计算单元获取鼠标所在屏幕显示范围和在屏幕中的相对位置,触发所述屏幕内容获取单元调取鼠标所在屏幕显示范围的图像,将其按预设比例缩放后在所述主屏的激活屏幕显示区进行实时显示,并将鼠标保持在所在屏幕相同相对位置进行显示;
所述列表区显示单元触发所述屏幕内容获取单元获取所有屏幕显示的图像,从所述鼠标位置计算单元获取鼠标所在屏幕显示范围和在屏幕中的相对位置,按照预设比例缩放后传输至所述主屏的屏幕列表区进行实时显示,并将鼠标保持在所在屏幕相同相对位置进行显示。
进一步,所述激活区显示单元、列表区显示单元以相同或不同的频率触发所述屏幕内容获取单元获取图像,并在激活屏幕显示区和屏幕列表区显示。
进一步,当鼠标位于主屏时,屏幕列表区内主屏的显示范围为纯色,对应的,激活屏幕显示区也显示为相同颜色。
进一步,所述屏幕列表区内主屏显示为纯色。
进一步,所述屏幕列表区屏幕图像的缩放比例能变化,以使屏幕列表显示区能够容纳所有屏幕画面。
一种多屏幕单终端设备屏幕集中显示、控制的方法,该多屏幕单终端设备包括一个主屏和至少一个从屏,均受控于同一终端设备,且该多屏幕单终端设备对所有屏幕按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置;所述主屏位于操作人员视野范围内,所述从屏分布在不同位置,是否在操作人员视野范围内无需限定;
所述主屏的显示范围被划分为激活屏幕显示区和屏幕列表区;所述屏幕列表区按照一定比例缩小、排列显示所有屏幕的画面,所述激活屏幕显示区用于显示鼠标所在屏幕的画面;
主屏显示范围内的画面通过如下步骤获取:
1)屏幕显示范围检测单元获取屏幕数据,所述屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
2)获取鼠标所在屏幕和在屏幕中的相对位置,作为数据I;
3)激活区显示单元触发屏幕内容获取单元获取步骤1)得到的屏幕数据,步骤2)得到的数据I,将鼠标所在屏幕显示的图像按预设比例缩放后在所述主屏的激活屏幕显示区进行显示,并将鼠标保持在所在屏幕相同相对位置进行显示;
列表区显示单元触发屏幕内容获取单元获取步骤1)得到的屏幕数据,步骤2)得到的数据I,按照预设比例缩放后传输至所述主屏的屏幕列表区进行实时显示,并将鼠标保持在所在屏幕相同相对位置进行显示。
进一步,步骤2)中获取鼠标所在屏幕和在屏幕中的相对位置的步骤为:
①鼠标位置获取单元获取鼠标在全局像素坐标中的位置;
②鼠标位置计算单元分别从所述屏幕显示范围检测单元调取屏幕数据,从所述鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕和在屏幕中的相对位置。
进一步,所述屏幕列表区屏幕图像的缩放比例能变化,以使屏幕列表显示区能够容纳所有屏幕画面。
进一步,所述激活区显示单元触发屏幕内容获取单元的频率与列表区显示单元触发屏幕内容获取单元的频率相同或者不相同,以使得所述激活区显示单元和所述列表显示单元以适当的频率周期刷新显示。基于不同显示区域对图片更新速度的要求,可以以不同频率获取屏幕图像,如将屏幕列表区更新频率减缓,降低对系统硬件的要求。
本发明提供的多屏幕单终端设备屏幕集中显示、控制的系统及方法,其能在主屏的屏幕列表区集中显示所有屏幕内容,且能直观确定鼠标所在屏幕,并能基于鼠标位置在主屏的激活屏幕显示区保证清晰度的情况下显示屏幕内容。
附图说明
图1为多屏幕单终端设备屏幕分布示意图;
图2为现有技术中多屏幕单终端设备屏幕显示画面示意图;
图3为图2中设备鼠标位于主屏时的屏幕显示示意图;
图4为图2中设备鼠标位于从屏时的屏幕显示示意图;
图5为图2中设备鼠标位于另一从屏时的屏幕显示示意图;
图6为本发明提供多屏幕单终端设备屏幕集中显示、控制的系统的工作流程图;
图7为本发明具体实施方式中提供的多屏幕单终端设备主屏示意图;
图8为本发明一实施例鼠标位于主屏时的屏幕显示示意图;
图9为图8同一实施例鼠标位于从屏1时的屏幕显示示意图;
图10为图8同一实施例鼠标位于从屏2时的屏幕显示示意图;
图11为屏幕列表区屏幕的不同显示形态。
具体实施方式
以下结合附图和具体实施方式对本发明的技术方案进行详细描述。
一种多屏幕单终端设备屏幕集中显示、控制的系统,该多屏幕单终端设备包括一个主屏和至少一个从屏,均受控于同一终端设备;主屏位于操作人员视野范围内,从屏分布在不同位置,是否在操作人员视野范围内无需限定;
主屏被划分为激活屏幕显示区和屏幕列表区;屏幕列表区按照一定比例缩小、排列显示所有从屏的画面,激活屏幕显示区用于显示鼠标所在屏幕的画面;如果从屏数量较多,屏幕列表区内屏幕图像能左右或上下滚动,以显示所有屏幕图像;
多屏幕单终端设备对所有从屏按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置;
该系统包括屏幕显示范围检测单元、屏幕内容获取单元、鼠标位置获取单元、鼠标位置计算单元、激活区显示单元和列表区显示单元;
屏幕显示范围检测单元用于获取屏幕数据,屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
屏幕内容获取单元用于获取指定显示范围当前显示的图像;指定显示范围为鼠标所在屏幕的显示范围和预设屏幕的显示范围;
鼠标位置获取单元用于获取鼠标在全局像素坐标中的位置;
鼠标位置计算单元分别从屏幕显示范围检测单元调取屏幕数据,从鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕和在屏幕中的相对位置;
激活区显示单元从鼠标位置计算单元获取鼠标所在屏幕和在屏幕中的相对位置,从屏幕内容获取单元调取鼠标所在屏幕的图像,并将其按预设比例缩放后在主屏的激活屏幕显示区进行显示;
列表区显示单元从屏幕内容获取单元获取鼠标所在屏幕的显示图像、所有预设屏幕当前显示的图像,按照预设比例缩放后传输至主屏的屏幕列表区进行实时显示。
基于不同显示区域对图片更新速度的要求,屏幕内容获取单元以相同或不同频率获取鼠标所在屏幕的显示范围和预设屏幕的显示范围。
为了突出显示主屏位置,当鼠标位于主屏时,屏幕列表区内主屏图像显示为不为白色的纯色,对应的,激活屏幕显示区也显示为相同颜色。
为了方便操作者快速定位主屏位置,屏幕列表区内主屏显示为不为白色的纯色。
一种多屏幕单终端设备屏幕集中显示、控制的方法,该多屏幕单终端设备包括一个主屏和至少一个从屏,均受控于同一终端设备,且该多屏幕单终端设备对所有从屏按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置;主屏位于操作人员视野范围内,从屏分布在不同位置,是否在操作人员视野范围内无需限定;
主屏被划分为激活屏幕显示区和屏幕列表区;屏幕列表区按照一定比例缩小、排列显示所有从屏的画面,激活屏幕显示区用于显示鼠标所在屏幕的画面;
激活屏幕显示区显示画面经如下步骤实现:
①屏幕显示范围检测单元获取屏幕数据,屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
②鼠标位置获取单元获取鼠标在全局像素坐标中的位置;
③鼠标位置计算单元分别从屏幕显示范围检测单元调取屏幕数据,从鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕和在屏幕中的相对位置;
④屏幕内容获取单元获取指定显示范围当前显示的图像;指定显示范围为鼠标所在屏幕的显示范围和预设屏幕的显示范围;
⑤激活区显示单元从鼠标位置计算单元获取鼠标所在屏幕和在屏幕中的相对位置,从屏幕内容获取单元调取鼠标所在屏幕的图像,并将其按预设比例缩放后在主屏的激活屏幕显示区进行显示;
屏幕列表区显示画面经如下步骤实现:
1)屏幕显示范围检测单元获取屏幕数据,屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
2)屏幕内容获取单元获取指定显示范围当前显示的图像;指定显示范围为鼠标所在屏幕的显示范围和预设屏幕的显示范围;
3)列表区显示单元从屏幕内容获取单元获取鼠标所在屏幕的显示图像、所有预设屏幕当前显示的图像,按照预设比例缩放后传输至主屏的屏幕列表区进行实时显示。
基于不同显示区域对图片更新速度的要求,屏幕内容获取单元以相同或不同频率获取鼠标所在屏幕的显示范围和预设屏幕的显示范围。当以不同频率获取屏幕图像时,将屏幕列表区更新频率减缓,降低对系统硬件的要求。
具体实现时,如附图8~11所示,以3块屏幕为例,按照如下方法进行:
一种多屏幕单终端设备屏幕集中显示、控制的方法,该多屏幕单终端设备包括1个主屏和2个从屏,均受控于同一终端设备(各屏幕的像素尺寸均为1920×1080,即横向1920个像素,纵向1080个像素),且该多屏幕单终端设备对所有屏幕按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置(本实施例中屏幕横向由左到右排列,以第一个屏幕的左上角为(0,0),则第一块屏幕的右下角的坐标为(1920,1080);第二块屏幕左上角坐标为(1921,0),右下角坐标为(3840,1080);第三块屏幕左上角坐标为(3841,0),右下角坐标为(5760,1080);第一块屏幕为主屏,第二、三块屏幕分别为从屏1,从屏2);主屏位于操作人员视野范围内,从屏分布在不同位置,是否在操作人员视野范围内无需限定;(如图11所示,实际使用过程中,多个屏幕的显示范围可能并非在同一水平线上,可参照如上方法在全局像素坐标中标记各个屏幕的位置信息,继而构建出确定具体屏幕位置、鼠标所在屏、鼠标在屏幕中相对位置的基础。)
主屏的显示范围被划分为激活屏幕显示区和屏幕列表区;屏幕列表区按照一定比例缩小、排列显示所有屏幕的画面(各屏幕的缩略显示像素尺寸为192×108),激活屏幕显示区用于显示鼠标所在屏幕的画面(激活屏幕显示区的像素尺寸为960×540,即横向960个像素,纵向540个像素;显示放缩比例为960:1920=1:2);
主屏显示范围内的画面通过如下步骤获取:
1)屏幕显示范围检测单元获取屏幕数据,屏幕数据为屏幕的总数量3、各屏幕的像素范围及显示范围:本实施例中屏幕横向由左到右排列,以第一个屏幕的左上角为(0,0),则第一块屏幕的右下角的坐标为(1920,1080);第二块屏幕左上角坐标为(1921,0),右下角坐标为(3840,1080);第三块屏幕左上角坐标为(3841,0),右下角坐标为(5760,1080);各屏幕的显示范围为全屏显示;
2)获取鼠标所在屏幕为第二屏幕,即从屏1,鼠标在屏幕中的相对位置为(500,400),作为数据I;
具体获取方法为:
①鼠标位置获取单元获取鼠标在全局像素坐标中的位置为(2420,400);
②鼠标位置计算单元分别从屏幕显示范围检测单元调取屏幕数据,从鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕为第二屏幕,即从屏1,显示范围的左上角坐标为(1921,0)、右下角坐标为(3840,1080),以及鼠标在屏幕中的像素坐标为(500,400);
3)激活区显示单元触发屏幕内容获取单元获取步骤1)得到的屏幕数据,步骤2)得到的数据I,将鼠标所在屏幕(第二屏幕)显示的图像按1:2比例缩放后在主屏的激活屏幕显示区进行显示,即显示左上角坐标为(1921,0)、右下角坐标为(3840,1080)范围内的图像,缩放后的像素尺寸为960×540;并将鼠标保持在所在屏幕相同相对位置进行显示,鼠标位于第二屏幕,且其在第二屏幕中的位置为(500,400),缩放后鼠标在激活区显示区的坐标为(250,200);
列表区显示单元触发屏幕内容获取单元获取3块屏幕,左上角(0,0)、右下角(5760,1080)之间的图像,鼠标所在位置为左上角坐标为(1921,0)、右下角坐标为(3840,1080)之间的第二屏幕,且在第二屏幕内的相对位置为(500,400);按照1:10的比例缩放传输至主屏的屏幕列表区进行实时显示,并将鼠标保持在所在屏幕相同相对位置(第二屏幕的(50,40)处)进行显示。
基于激活屏幕显示区、屏幕列表区对图片更新速度的要求,屏幕内容获取单元可以以相同的频率,也可以以不同的频率获取鼠标所在屏幕的显示范围和预设屏幕的显示范围。如以相同频率,譬如以50ms为周期循环执行上述步骤,则激活屏幕显示区、屏幕列表区中均将以20帧/s的速度显示鼠标、鼠标所在屏幕的变化;用户可以借此实时查看鼠标所在屏幕的显示内容和鼠标方位,清晰的获取鼠标所在屏幕的显示内容和鼠标相对于所在屏幕的位置。同时也能实时查看所有屏幕的显示内容和鼠标方位,直观查看到鼠标在所有屏幕显示范围内的位置。当列表区实时显示要求不高时,列表区显示单元触发屏幕内容获取单元的周期加长,屏幕列表区更新速度变缓,有利于减少对系统硬件的要求。
而为了清晰明了的分辨出主屏,主屏可用纯色,本实施例中选用纯黑色显示(如图8~10所示)。此外,对于屏幕内容获取单元来说,获取屏幕内容的方式有多种。可以通过Windows提供的StretchBlt接口获取屏幕内容;可以通过OpenGL的glReadPixels()接口获取屏幕内容;也可以通过Qt的grabWindow()接口获取屏幕内容。对于鼠标位置获取单元来说,获取鼠标位置的方式同样有多种。可以通过Windows提供的GetCursorInfo()接口获取鼠标位置;也可以通过Qt的QCursor::pos()接口获取鼠标位置。对于屏幕显示范围检测单元来说,屏幕显示范围,可以通过Qt的screenGeometry()接口获取。屏幕数目,可以通过Qt的screenCount()接口获取。对于鼠标位置计算单元来说,鼠标所在屏幕显示范围和在屏幕内的相对位置,可以根据各个屏幕的显示范围和鼠标的当前位置推算得出。
前面对本发明具体示例性实施方案所呈现的描述是出于说明和描述的目的。前面的描述并不想要成为毫无遗漏的,也不是想要把本发明限制为所公开的精确形式,显然,根据上述教导很多改变和变化都是可能的。选择示例性实施方案并进行描述是为了解释本发明的特定原理及其实际应用,从而使得本领域的其它技术人员能够实现并利用本发明的各种示例性实施方案及其不同选择形式和修改形式。本发明的范围旨在由所附权利要求书及其等价形式所限定。

Claims (9)

1.一种多屏幕单终端设备屏幕集中显示、控制的系统,该多屏幕单终端设备包括一个主屏和至少一个从屏,均受控于同一终端设备;所述主屏位于操作人员视野范围内,所述从屏分布在不同位置;
其特征在于:所述主屏的显示范围被划分为激活屏幕显示区和屏幕列表区;所述屏幕列表区按照一定比例缩小、排列显示所有屏幕的显示范围内画面,所述激活屏幕显示区用于显示鼠标所在屏幕的画面;
所述多屏幕单终端设备对所有屏幕按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置;
该系统包括屏幕显示范围检测单元、屏幕内容获取单元、鼠标位置获取单元、鼠标位置计算单元、激活区显示单元和列表区显示单元;
所述屏幕显示范围检测单元用于获取屏幕数据,所述屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
所述屏幕内容获取单元用于获取指定显示范围当前显示的图像;所述指定显示范围为鼠标所在屏幕的显示范围或所有屏幕的显示范围;
所述鼠标位置获取单元用于获取鼠标在全局像素坐标中的位置;
所述鼠标位置计算单元分别从所述屏幕显示范围检测单元调取屏幕数据,从所述鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕显示范围和在屏幕中的相对位置;
所述激活区显示单元从所述鼠标位置计算单元获取鼠标所在屏幕显示范围和在屏幕中的相对位置,触发所述屏幕内容获取单元调取鼠标所在屏幕显示范围的图像,将其按预设比例缩放后在所述主屏的激活屏幕显示区进行实时显示,并将鼠标保持在所在屏幕相同相对位置进行显示;
所述列表区显示单元触发所述屏幕内容获取单元获取所有屏幕显示的图像,从所述鼠标位置计算单元获取鼠标所在屏幕显示范围和在屏幕中的相对位置,按照预设比例缩放后传输至所述主屏的屏幕列表区进行实时显示,并将鼠标保持在所在屏幕相同相对位置进行显示。
2.如权利要求1所述多屏幕单终端设备屏幕集中显示、控制的系统,其特征在于:所述激活区显示单元、列表区显示单元以相同或不同的频率触发所述屏幕内容获取单元获取图像,并在激活屏幕显示区和屏幕列表区显示。
3.如权利要求1所述多屏幕单终端设备屏幕集中显示、控制的系统,其特征在于:当鼠标位于主屏时,屏幕列表区内主屏的显示范围为纯色,对应的,激活屏幕显示区也显示为相同颜色。
4.如权利要求1所述多屏幕单终端设备屏幕集中显示、控制的系统,其特征在于:所述屏幕列表区内主屏显示为纯色。
5.如权利要求1所述多屏幕单终端设备屏幕集中显示、控制的系统,其特征在于:所述屏幕列表区屏幕图像的缩放比例能变化,以使屏幕列表显示区能够容纳所有屏幕画面。
6.一种多屏幕单终端设备屏幕集中显示、控制的方法,该多屏幕单终端设备包括一个主屏和至少一个从屏,均受控于同一终端设备,且该多屏幕单终端设备对所有屏幕按照像素坐标位置进行排列,得到各个屏幕在全局像素坐标中的位置;所述主屏位于操作人员视野范围内,所述从屏分布在不同位置;
其特征在于:所述主屏的显示范围被划分为激活屏幕显示区和屏幕列表区;所述屏幕列表区按照一定比例缩小、排列显示所有屏幕的画面,所述激活屏幕显示区用于显示鼠标所在屏幕的画面;
主屏显示范围内的画面通过如下步骤获取:
1)屏幕显示范围检测单元获取屏幕数据,所述屏幕数据为屏幕的总数量、各屏幕的像素范围及显示范围;
2)获取鼠标所在屏幕和在屏幕中的相对位置,作为数据I;
3)激活区显示单元触发屏幕内容获取单元获取步骤1)得到的屏幕数据,步骤2)得到的数据I,将鼠标所在屏幕显示的图像按预设比例缩放后在所述主屏的激活屏幕显示区进行显示,并将鼠标保持在所在屏幕相同相对位置进行显示;
列表区显示单元触发屏幕内容获取单元获取步骤1)得到的屏幕数据,步骤2)得到的数据I,按照预设比例缩放后传输至所述主屏的屏幕列表区进行实时显示,并将鼠标保持在所在屏幕相同相对位置进行显示。
7.如权利要求6所述多屏幕单终端设备屏幕集中显示、控制的方法,其特征在于:步骤2)中获取鼠标所在屏幕和在屏幕中的相对位置的步骤为:
①鼠标位置获取单元获取鼠标在全局像素坐标中的位置;
②鼠标位置计算单元分别从所述屏幕显示范围检测单元调取屏幕数据,从所述鼠标位置获取单元调取鼠标在全局像素坐标的位置数据,基于此计算确定鼠标所在屏幕和在屏幕中的相对位置。
8.如权利要求6所述多屏幕单终端设备屏幕集中显示、控制的方法,其特征在于:所述屏幕列表区屏幕图像的缩放比例能变化,以使屏幕列表显示区能够容纳所有屏幕画面。
9.如权利要求6所述多屏幕单终端设备屏幕集中显示、控制的方法,其特征在于:所述激活区显示单元触发屏幕内容获取单元的频率与列表区显示单元触发屏幕内容获取单元的频率相同或者不相同。
CN202010848210.1A 2020-08-21 2020-08-21 多屏幕单终端设备屏幕集中显示、控制的系统及方法 Active CN112068749B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010848210.1A CN112068749B (zh) 2020-08-21 2020-08-21 多屏幕单终端设备屏幕集中显示、控制的系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010848210.1A CN112068749B (zh) 2020-08-21 2020-08-21 多屏幕单终端设备屏幕集中显示、控制的系统及方法

Publications (2)

Publication Number Publication Date
CN112068749A true CN112068749A (zh) 2020-12-11
CN112068749B CN112068749B (zh) 2021-09-21

Family

ID=73659029

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010848210.1A Active CN112068749B (zh) 2020-08-21 2020-08-21 多屏幕单终端设备屏幕集中显示、控制的系统及方法

Country Status (1)

Country Link
CN (1) CN112068749B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407043A (zh) * 2021-06-29 2021-09-17 杭州海康威视数字技术股份有限公司 一种数据处理方法、装置、设备及系统
CN114371805A (zh) * 2021-12-28 2022-04-19 易思维(杭州)科技有限公司 一种列车表面缺陷查看系统及方法

Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1622619A (zh) * 2004-12-24 2005-06-01 北京中星微电子有限公司 一种多屏幕显示方法与装置
CN1782966A (zh) * 2004-08-23 2006-06-07 国际商业机器公司 多监视器系统、多监视器方法、和标记显示程序产品
CN101188104A (zh) * 2007-12-07 2008-05-28 北京方正国际软件系统有限公司 一种多显示器监控方法及装置
CN101739137A (zh) * 2008-11-05 2010-06-16 北京广利核系统工程有限公司 一种实现快速切换的kvm装置
CN102693006A (zh) * 2011-02-25 2012-09-26 微软公司 用户界面呈现和交互
CN103686064A (zh) * 2012-08-31 2014-03-26 杭州海康威视数字技术股份有限公司 画面分割显示的方法及客户端
CN104798129A (zh) * 2012-11-27 2015-07-22 索尼公司 显示装置、显示方法和计算机程序
CN106293160A (zh) * 2016-09-08 2017-01-04 青岛海信电器股份有限公司 一种多显示器之间鼠标指针切换的方法及装置
CN107153520A (zh) * 2017-05-08 2017-09-12 广州美凯信息技术股份有限公司 多屏协作控制方法、装置以及多屏管理系统
CN206541277U (zh) * 2017-01-20 2017-10-03 广州魅视电子科技有限公司 分布式kvm坐席协作管理系统
CN108700983A (zh) * 2016-02-22 2018-10-23 西门子股份公司 具有多个显示器的用户界面和用于在多个显示器上放置内容的方法
CN108845783A (zh) * 2018-08-01 2018-11-20 广州魅视电子科技有限公司 一种基于kvm装置的多视窗合屏显示方法和系统
CN109743602A (zh) * 2018-12-29 2019-05-10 百视通网络电视技术发展有限责任公司 一种用于智能电视的多屏展示和切换方法
CN110362207A (zh) * 2019-07-17 2019-10-22 广州魅视电子科技有限公司 一种基于面部微表情的鼠标控制系统
US20190339836A1 (en) * 2016-11-28 2019-11-07 Sony Corporation Information processing apparatus, method, and program
CN110716704A (zh) * 2019-09-18 2020-01-21 广州魅视电子科技有限公司 基于web的拼接大屏幕显示布局处理方法
CN110851044A (zh) * 2013-08-06 2020-02-28 三星电子株式会社 用于显示的方法及其电子装置
CN111176514A (zh) * 2020-01-03 2020-05-19 南京巨鲨显示科技有限公司 一种控制显示器进行信号切换后自动将鼠标显示在当前屏幕的系统和方法
CN111459307A (zh) * 2020-03-30 2020-07-28 北京英格福科贸有限公司 一种多主机和显示器的控制切换系统

Patent Citations (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1782966A (zh) * 2004-08-23 2006-06-07 国际商业机器公司 多监视器系统、多监视器方法、和标记显示程序产品
CN1622619A (zh) * 2004-12-24 2005-06-01 北京中星微电子有限公司 一种多屏幕显示方法与装置
CN101188104A (zh) * 2007-12-07 2008-05-28 北京方正国际软件系统有限公司 一种多显示器监控方法及装置
CN101739137A (zh) * 2008-11-05 2010-06-16 北京广利核系统工程有限公司 一种实现快速切换的kvm装置
CN102693006A (zh) * 2011-02-25 2012-09-26 微软公司 用户界面呈现和交互
CN103686064A (zh) * 2012-08-31 2014-03-26 杭州海康威视数字技术股份有限公司 画面分割显示的方法及客户端
CN104798129A (zh) * 2012-11-27 2015-07-22 索尼公司 显示装置、显示方法和计算机程序
CN110851044A (zh) * 2013-08-06 2020-02-28 三星电子株式会社 用于显示的方法及其电子装置
CN108700983A (zh) * 2016-02-22 2018-10-23 西门子股份公司 具有多个显示器的用户界面和用于在多个显示器上放置内容的方法
CN106293160A (zh) * 2016-09-08 2017-01-04 青岛海信电器股份有限公司 一种多显示器之间鼠标指针切换的方法及装置
US20190339836A1 (en) * 2016-11-28 2019-11-07 Sony Corporation Information processing apparatus, method, and program
CN206541277U (zh) * 2017-01-20 2017-10-03 广州魅视电子科技有限公司 分布式kvm坐席协作管理系统
CN107153520A (zh) * 2017-05-08 2017-09-12 广州美凯信息技术股份有限公司 多屏协作控制方法、装置以及多屏管理系统
CN108845783A (zh) * 2018-08-01 2018-11-20 广州魅视电子科技有限公司 一种基于kvm装置的多视窗合屏显示方法和系统
CN109743602A (zh) * 2018-12-29 2019-05-10 百视通网络电视技术发展有限责任公司 一种用于智能电视的多屏展示和切换方法
CN110362207A (zh) * 2019-07-17 2019-10-22 广州魅视电子科技有限公司 一种基于面部微表情的鼠标控制系统
CN110716704A (zh) * 2019-09-18 2020-01-21 广州魅视电子科技有限公司 基于web的拼接大屏幕显示布局处理方法
CN111176514A (zh) * 2020-01-03 2020-05-19 南京巨鲨显示科技有限公司 一种控制显示器进行信号切换后自动将鼠标显示在当前屏幕的系统和方法
CN111459307A (zh) * 2020-03-30 2020-07-28 北京英格福科贸有限公司 一种多主机和显示器的控制切换系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407043A (zh) * 2021-06-29 2021-09-17 杭州海康威视数字技术股份有限公司 一种数据处理方法、装置、设备及系统
CN113407043B (zh) * 2021-06-29 2023-09-05 杭州海康威视数字技术股份有限公司 一种数据处理方法、装置、设备及系统
CN114371805A (zh) * 2021-12-28 2022-04-19 易思维(杭州)科技有限公司 一种列车表面缺陷查看系统及方法
CN114371805B (zh) * 2021-12-28 2023-08-01 易思维(杭州)科技有限公司 一种列车表面缺陷查看系统及方法

Also Published As

Publication number Publication date
CN112068749B (zh) 2021-09-21

Similar Documents

Publication Publication Date Title
US6822662B1 (en) User selected display of two-dimensional window in three dimensions on a computer screen
US6337709B1 (en) Image display device
JP3478192B2 (ja) 画面重畳表示型情報入出力装置
US10600169B2 (en) Image processing system and image processing method
CN112068749B (zh) 多屏幕单终端设备屏幕集中显示、控制的系统及方法
EP2053592A2 (en) Method and apparatus for maintaining a visual appearance of at least one window when a resolution of the screen changes
US7679643B2 (en) Remote instruction system, remote instruction method, and program product for remote instruction
CA2648614C (en) Method of synchronizing multiple views of multiple displayed documents
US10209797B2 (en) Large-size touch apparatus having depth camera device
US10203926B2 (en) Visual focus-aware techniques for visualizing display changes
KR100963679B1 (ko) 정보단말기의 이동에 의해 가상화면을 디스플레이하는 방법
JPH0713554A (ja) 表示装置及び表示方法
CN110162288A (zh) 一种确定显示区域的方法、装置、设备和介质
CN112286474B (zh) 一种图像处理方法、装置、系统及显示控制器
CN103631551A (zh) 医疗会诊系统中远程桌面的本地显示方法
US20170155827A1 (en) Camera pan-tilt-zoom (ptz) control apparatus
US11553897B2 (en) Ultrasound imaging system image identification and display
CN108399058B (zh) 一种信号显示控制方法及装置
US10728522B2 (en) Control device for a camera apparatus, camera arrangement and method for the stereoscopic recording of a monitoring area
US20090213067A1 (en) Interacting with a computer via interaction with a projected image
WO2020228679A1 (zh) 显示设备及其控制方法、控制装置、控制系统
JP2002312123A (ja) タッチ位置検出装置
CN104639969A (zh) 一种页面全屏显示方法和装置
CN108845776B (zh) 一种控制方法和装置、存储介质
CN113110732A (zh) 多画面显示屏幕的眼动追踪控制方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Room 495, building 3, 1197 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province 310051

Patentee after: Yi Si Si (Hangzhou) Technology Co.,Ltd.

Address before: Room 495, building 3, 1197 Bin'an Road, Binjiang District, Hangzhou City, Zhejiang Province 310051

Patentee before: ISVISION (HANGZHOU) TECHNOLOGY Co.,Ltd.

CP01 Change in the name or title of a patent holder