CN107783702A - 显示数据的控制方法、装置和系统 - Google Patents
显示数据的控制方法、装置和系统 Download PDFInfo
- Publication number
- CN107783702A CN107783702A CN201610800156.7A CN201610800156A CN107783702A CN 107783702 A CN107783702 A CN 107783702A CN 201610800156 A CN201610800156 A CN 201610800156A CN 107783702 A CN107783702 A CN 107783702A
- Authority
- CN
- China
- Prior art keywords
- display
- server
- display device
- information
- action events
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 55
- 230000009471 action Effects 0.000 claims abstract description 85
- 238000004088 simulation Methods 0.000 claims abstract description 19
- 238000005096 rolling process Methods 0.000 claims description 12
- 230000003993 interaction Effects 0.000 abstract description 18
- 230000000875 corresponding effect Effects 0.000 description 88
- 230000006399 behavior Effects 0.000 description 39
- 230000015654 memory Effects 0.000 description 24
- 238000003860 storage Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000009826 distribution Methods 0.000 description 7
- 230000009975 flexible effect Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 230000002452 interceptive effect Effects 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 239000011159 matrix material Substances 0.000 description 4
- 230000001360 synchronised effect Effects 0.000 description 4
- VYZAMTAEIAYCRO-UHFFFAOYSA-N Chromium Chemical compound [Cr] VYZAMTAEIAYCRO-UHFFFAOYSA-N 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 101100264195 Caenorhabditis elegans app-1 gene Proteins 0.000 description 2
- 241000406668 Loxodonta cyclotis Species 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000004321 preservation Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明公开了一种显示数据的控制方法、装置和系统。其中，该方法包括：控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。本发明解决了现有技术中采用大显示屏展示数据内容时，展示信息的交互过程不灵活的技术问题。
Description
技术领域
本发明涉及数据处理领域，具体而言，涉及一种显示数据的控制方法、装置和系统。
背景技术
现有技术提供了一种由多块小显示屏拼接而得到的大显示屏，这种大显示屏作为一种显示设备，所包括的每块小显示屏都需要与一台计算机PC相连，进而展示每台计算机PC的桌面内容。
基于如图1所示的大屏显示设备，传统的大屏展示项目是基于如图2所示的架构实现，如图2所示，每个计算机PC的控制信号来拼接组装得到整个大显示屏的最终显示内容，例如，采用18台PC计算机，总共输出18路信号，每个PC运行一个H5页面，投射到一个大屏显示器上对应的一个小显示屏幕中。
而对每块小显示屏接收到的控制信号的布局则是通过大屏厂商提供的控制软件来实现，控制软件需要交给专业的IT人员来处理，具体的，研发人员通过视频控制器来执行信号控制和布局，即工作人员可以通过控制设备控制视频控制器来远程控制信号的切换和布局，其中，In接口表示视频控制器的多路HD信号，Out接口表示视频控制器的多路信号输出。
控制的业务流程如下：首先，UED交互h5页面给业务方，业务方部署到各自的服务器，然后，每个PC浏览器访问业务方的服务器，将桌面通过视频控制器投射到屏幕组，同时，有专门的工作人员通过控制设备来控制信号的切换和布局。
分析可知，上述现有技术提供的的方案主要包括如下两个缺点：每次要修改大显示屏上的信号内容时，需要远程登录到播放该信号的计算机PC，修改chrome浏览器访问的内容；而如果修改大显示屏的信号布局，比如修改信号的位置，缩放信号的大小等，都需要专业IT人员来操控厂商的控制软件，不是很灵活。
由此在一种采用大显示屏来展示业务内容的场景下，如果演讲人员基于展示的业务内容进行演讲时，每次对外讲解业务内容的时候，除了主讲人外，都需要一个额外的IT人员配合切换信号，降低了整个讲解体验。并且该控制软件没有公共标准，每个厂商都有自己的实现，不通用不开源，给维护带来一定麻烦。
针对上述的问题，目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种显示数据的控制方法、装置和系统，以至少解决现有技术中采用大显示屏展示数据内容时，展示信息的交互过程不灵活的技术问题。
根据本发明实施例的一个方面，提供了一种显示数据的控制系统，该系统包括：显示设备，包括多个显示屏幕，每个显示屏幕用于显示页面内容；服务器，与显示设备连接，用于保存与页面内容关联的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备，与服务器连接，用于根据获取到的显示配置信息绘制对应的操作界面，并在检测到操作行为，生成对应的操作事件，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；其中，服务器还用于接收操作事件，并根据操作事件控制在显示设备上执行与操作行为相同的操作
根据本发明实施例的一个方面，提供了一种显示数据的控制方法，该方法包括：控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
根据本发明实施例的一个方面，提供了一种显示数据的控制方法，该方法包括：服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；服务器根据控制设备在操作界面上检测到的操作行为生成对应的操作事件，其中，操作界面为控制设备根据显示配置信息绘制，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；服务器根据操作事件控制在显示设备上执行与操作行为相同的操作
根据本发明实施例的另一方面，还提供了一种显示数据的控制装置，该装置包括：获取模块，用于从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；绘制模块，用于根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；生成模块，用于如果操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
在本发明实施例中，采用控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作的方式，通过控制设备从服务器获取显示设备的显示配置信息，并根据显示配置信息绘制对应的操作界面，在用户使用该操作界面进行相应的操作时，控制设备可以检测到上述操作行为，从而生成对应的操作事件，此时服务器会响应该操作事件，并基于操作事件控制在显示设备上执行与操作行为相同的操作，由于上述控制设备可以通过服务器来实现，将控制设备本地的操作事件同步至对应的显示设备上，实现了用户可以通过控制设备灵活的对大屏幕的显示设备的操作过程，降低了大屏幕显示设备的展示信息的交互灵活性，进而解决了现有技术中采用大显示屏展示数据内容时，展示信息的交互过程不灵活的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1是根据现有技术的大显示屏端的显示示意图；
图2是根据现有技术的大显示屏的系统控制结构示意图；
图3是本发明实施例提供的一种视频数据的控制系统的结构示意图；
图4根据本发明实施例的控制显示设备中windows桌面的事件分发的显示示意图；
图5示出了一种用于实现显示数据的控制方法的计算机终端的硬件结构框图；
图6是根据本发明实施例一的显示数据的控制方法的流程图；
图7是根据本发明实施例的在控制设备中显示各个显示对象的对象信息的示意图；
图8是根据本发明实施例的控制设备中抽象的显示对象的控件的示意图；
图9a-图9d是根据本发明实施例的操作事件的业务流程图；
图10是根据本发明实施例的控制设备的业务交互图；
图11是根据本发明的实施例的控制设备与服务器交互的流程示意图；
图12是根据本发明实施例一的显示数据的控制方法的流程图；
图13是根据本发明实施例的显示数据的控制装置的示意图；以及
图14是根据本发明实施例的一种控制设备的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先，在对本申请实施例进行描述的过程中出现的部分名词或术语适用于如下解释：
信号源：指视频信号源，比如显卡的一路DVI信号输出，PC桌面信号等。
信息片app：软件层面抽象的一个对象，逻辑上用于表示块数据信息，例如一个网页，实现上表示一个iframe,是这个技术方案中的一个基本概念。
实施例1
图3是本发明实施例提供的一种视频数据的控制系统的结构示意图，如图3所示，该控制系统可以包括：显示设备10、服务器30和控制设备50。
其中，显示设备10，包括多个显示屏幕0、1、……、n，每个显示屏幕用于显示页面内容；服务器30，与显示设备10连接，用于保存与页面内容关联的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备50，与服务器30连接，用于根据获取到的显示配置信息绘制对应的操作界面，并在检测到操作行为，生成对应的操作事件，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；其中，服务器还用于接收操作事件，并根据操作事件控制在显示设备上执行与操作行为相同的操作。
本申请提供的上述实施例中，控制设备从服务器获取显示设备的显示配置信息，并根据显示配置信息绘制对应的操作界面，在用户使用该操作界面进行相应的操作时，控制设备可以检测到上述操作行为，从而生成对应的操作事件，此时服务器会响应该操作事件，并基于操作事件控制在显示设备上执行与操作行为相同的操作。由此可知，控制设备一端可以抽象展示大屏的显示设备中对应的显示对象app的信息展示给用户，并接收用户输入的交互指令和控制指令，并转化为服务器系统可识别的操作事件的指令发送给服务器server，进而服务器server可以根据不同指令做相应逻辑处理，由于上述控制设备可以通过服务器来实现，将控制设备本地的操作事件同步至对应的显示设备上，实现了用户可以通过控制设备灵活的对大屏幕的显示设备的操作过程，降低了大屏幕显示设备的展示信息的交互灵活性。
上述解决方案还进一步定义了一套操作事件的分发机制，使得各种控制设备都能接入显示设备的系统，完成对展现内容的灵活控制。
此处需要说明的是上述桌面信息至少可以包括：显示设备的桌面尺寸；显示对象的对象信息至少包括：显示对象的尺寸、位于显示设备中的位置信息、显示内容和显示深度。上述操作事件可以包括如下至少之一：点击事件、缩放事件、移动事件和滚动事件。
具体的，如图3所示，上述显示设备10是完整的大屏显示设备，例如可以是超大的长方形桌面，在这个长方形桌面上放了多个显示内容不同的对象信息(即可以是信息片app1、app2、app3和app4)，上述每个App可以放置在大桌面上的任意位置，app的尺寸也可以在桌面允许的范围内扩展。
例如，以获取显示对象位于显示设备中的位置信息为例，需要先获知每个显示屏幕在显示设备中的位置，首先可以将大屏抽象为[M x N]的小屏矩阵拼接成的桌面系统，矩阵中的每个点代表一块物理显示屏幕screen，所有的screen分辨率都相同，比如都为1400x1050。每个screen特有的属性是其在矩阵中的位置(x,y),例如如图3所示的显示设备中，display0这块显示屏幕screen的位置是(0,0),而display6这块screen的位置是(1,2)。每个显示屏幕screen里运行的是一个全屏的chrome浏览器，访问的地址是server提供的display.html？id＝(x,y)。通过id参数可以告知server自己代表哪一块screen。
上述服务器30可以实现管理显示对象的资源文件，并作为网络服务器webserver对外部设备提供资源服务，同时可以对每个对象信息创建和删除对应的app instance，以及所有app在抽象桌面中的位置信息，并保存有所有大显示屏中每个display显示屏幕的连接情况，并可以将关键信息(比如app和screen)的数据实时广播给对应的控制设备。
上述控制设备50抽象展示大屏的显示设备10和服务器中app的信息展示给用户，接受用户的交互和控制指令，并转化为系统可识别的指令发送给服务器server，服务器server根据不同指令做相应逻辑处理。
一种可选实施例中，控制设备可以向服务器发送器请求信息，用于获取显示设备的显示系统桌面的显示配置信息，显示配置信息可以包括桌面配置的桌面信息(例如显示设备的总长宽)，以及拼接该显示设备的每个显示屏幕的显示对象的对象信息。
由上可知，本发明实现了一种如图4所示的示例，控制设备设计了一套合理的事件分发系统，例如模拟图4中windows桌面的事件分发机制，该操作事件的分发系统通过服务器对显示屏幕上的显示对象进行同步控制。从而实现了灵活的交互控制。
由此可知，通过本发明提供的设计方案，至少可以解决传统方案中遇到至少如下两个问题：
不用远程登录信号PC，直接在控制端打开希望呈现的web page。
不需要专业I T的介入，脱离大屏硬件厂商的限制，直接在iPad上方便的摆放webpage在大屏上的位置和尺寸。
实施例2
根据本发明实施例，还提供了一种显示数据的控制的方法实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。
本申请实施例一所提供的方法实施例可以在移动终端、计算机终端或者类似的运算装置中执行。图5示出了一种用于实现显示数据的控制方法的计算机终端(或移动设备)的硬件结构框图。如图5所示，计算机终端10(或移动设备10)可以包括一个或多个(图中采用102a、102b，……，102n来示出)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)、用于存储数据的存储器104、以及用于通信功能的传输模块106。除此以外，还可以包括：显示器、输入/输出接口(I/O接口)、通用串行总线(USB)端口(可以作为I/O接口的端口中的一个端口被包括)、网络接口、电源和/或相机。本领域普通技术人员可以理解，图1所示的结构仅为示意，其并不对上述电子装置的结构造成限定。例如，计算机终端10还可包括比图5中所示更多或者更少的组件，或者具有与图5所示不同的配置。
应当注意到的是上述一个或多个处理器102和/或其他数据处理电路在本文中通常可以被称为“数据处理电路”。该数据处理电路可以全部或部分的体现为软件、硬件、固件或其他任意组合。此外，数据处理电路可为单个独立的处理模块，或全部或部分的结合到计算机终端10(或移动设备)中的其他元件中的任意一个内。如本申请实施例中所涉及到的，该数据处理电路作为一种处理器控制(例如与接口连接的可变电阻终端路径的选择)。
存储器104可用于存储应用软件的软件程序以及模块，如本发明实施例中的显示数据的控制方法对应的程序指令/数据存储装置，处理器102通过运行存储在存储器104内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的应用程序的漏洞检测方法。存储器104可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器104可进一步包括相对于处理器102远程设置的存储器，这些远程存储器可以通过网络连接至计算机终端10。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端10的通信供应商提供的无线网络。在一个实例中，传输装置106包括一个网络适配器(Network Interface Controller，NIC)，其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中，传输装置106可以为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。
此处需要说明的是，在一些实施例中，上述图5所示的计算机设备(或移动设备)具有触摸显示器(也被称为“触摸屏”或“触摸显示屏”)，该触摸显示器可使得用户能够与计算机终端10(或移动设备)的用户界面进行交互。在一些实施例中，上述图1所示的计算机设备(或移动设备)具有图像用户界面(GUI)，用户可以通过触摸触敏表面上的手指接触和/或手势来与GUI进行人机交互，此处的人机交互功能可选的包括如下交互：创建网页、绘图、文字处理、制作电子文档、游戏、视频会议、即时通信、收发电子邮件、通话界面、播放数字视频、播放数字音乐和/或网络浏览等、用于执行上述人机交互功能的可执行指令被配置/存储在一个或多个处理器可执行的计算机程序产品或可读存储介质中。
在上述运行环境下，本申请提供了如图6所示的显示数据的控制方法。图6是根据本发明实施例一的显示数据的控制方法的流程图。
如图6所示，该显示数据的控制方法可以包括如下实施步骤：
步骤S20，控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息。
一种可选实施例中，控制设备可以向服务器发送器请求信息，用于获取显示设备的显示系统桌面的显示配置信息，显示配置信息可以包括桌面配置的桌面信息(例如显示设备的总长宽)，以及拼接该显示设备的每个显示屏幕的显示对象的对象信息(例如如图6中的app信息)。
由此可知，服务器可以实现管理显示对象的资源文件，并作为网络服务器webserver对外部设备提供资源服务，同时可以对每个对象信息创建和删除对应的appinstance，以及所有app在抽象桌面中的位置信息，并保存有所有大显示屏中每个display显示屏幕的连接情况，并可以将关键信息(比如app和screen)的数据实时广播给对应的控制设备。
优选地，上述桌面信息至少包括：显示设备的桌面尺寸；显示对象的对象信息至少包括：显示对象的尺寸、位于显示设备中的位置信息、显示内容和显示深度z-index，显示深度z-index用于表示当多个显示对象app在同一个位置有重叠的时候，每个显示对象处于图层中的位置，例如可以区别开哪一个显示对象处于其他显示对象的上层。
例如，以获取显示对象位于显示设备中的位置信息为例，需要先获知每个显示屏幕在显示设备中的位置，首先可以将大屏抽象为[M x N]的小屏矩阵拼接成的桌面系统，矩阵中的每个点代表一块物理显示屏幕screen，所有的screen分辨率都相同，比如都为1400x1050。每个screen特有的属性是其在矩阵中的位置(x,y),例如如图3所示的显示设备中，display0这块显示屏幕screen的位置是(0,0),而display6这块screen的位置是(1,2)。每个screen里运行的是一个全屏的chrome浏览器，访问的地址是server提供的display.html？id＝(x,y)。通过id参数可以告知server自己代表哪一块screen
一种可选实施例中，以图7所示的在控制设备中显示各个显示对象的对象信息为例中，在显示设备的桌面可以为如图7所示的长方形桌面，在这个长方形桌面上放了多个显示内容不同的对象信息(即可以是信息片app1、app2、app3和app4)，上述每个App可以放置在大桌面上的任意位置，app的尺寸也可以在桌面允许的范围内扩展。
步骤S22，控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象。
具体的，在控制设备可以根据显示配置信息绘制一个模拟的桌面和模拟对象app的显示图，用户可以根据控制设备中当前显示的图像来获取当前大显示屏设备中各个显示屏幕的内容的布局情况。
步骤S24，控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
进而可以收集用户的交互事件，例如在控制设备为移动端的情况下，可以采用hammer.js库收集用户手势操作，优选地，上述操作事件包括如下至少之一：点击事件、缩放事件、移动事件和滚动事件。
以操作事件为缩放事件和移动事件为例，用户可以通过在控制设备上移动和缩放app来控制显示设备上对应的显示屏幕中的显示对象执行移动和缩放。上述显示设备作为一种大屏的显示屏幕，显示设备的桌面可以抽象为桌面容器，显示设备显示的对象信息可以抽象为容器内的信息片app,由此，大屏的显示设备展现的结果可以抽象为多个显示对象app的组合。
由上可知，本申请提供的上述实施例中，控制设备从服务器获取显示设备的显示配置信息，并根据显示配置信息绘制对应的操作界面，在用户使用该操作界面进行相应的操作时，控制设备可以检测到上述操作行为，从而生成对应的操作事件，此时服务器会响应该操作事件，并基于操作事件控制在显示设备上执行与操作行为相同的操作。由此可知，控制设备一端可以抽象展示大屏的显示设备中对应的显示对象app的信息展示给用户，并接收用户输入的交互指令和控制指令，并转化为服务器系统可识别的操作事件的指令发送给服务器server，进而服务器server可以根据不同指令做相应逻辑处理，由于上述控制设备可以通过服务器来实现，将控制设备本地的操作事件同步至对应的显示设备上，实现了用户可以通过控制设备灵活的对大屏幕的显示设备的操作过程，降低了大屏幕显示设备的展示信息的交互灵活性。
上述解决方案还进一步定义了一套操作事件的分发机制，使得各种控制设备都能接入显示设备的系统，完成对展现内容的灵活控制。
一种可选实施例中，在步骤S24执行控制设备的操作界面检测到操作行为，生成对应的操作事件之后，还可以执行如下实施步骤：
步骤S241，将操作事件发送给服务器。
步骤S243，服务器控制显示设备上展示的显示对象执行操作事件所对应的应用逻辑。
由此可知，上述步骤S241和步骤S243所实现方案中，控制设备端可以将用户的交互行为转化为服务器server端可识别的操作pointer事件发送给服务器server，服务器server运行对应的应用逻辑后，还可以更新app信息，并广播给控制设备，使得控制设备一端可以更新模拟的操作界面中的控件(mock UI)。以上应用逻辑的判断可以运行在服务器server端，而操作事件(例如鼠标似乎)的触发则由控制设备一端来实现，控制设备模拟得到的UI如图8所示。
优选地，为了在控制设备一端实现灵活的交互控制，需要设计一套合理的事件分发系统。例如以显示设备的操作系统为windows的情况下，控制设备可以实现模拟windows桌面的事件分发机制，定义的事件分发系统描述如下:将每个显示对象app的类对应为windows系统的一个应用窗口，将服务器server的类对应为windows系统，将来自控制设备一端的操作事件的控制命令的类对应为鼠标操作。
基于以上设计，抽象出以下事件消息:
pointerPress(point,button)模拟鼠标点下(button区分左右键)
pointerRelease(point,button)模拟鼠标放开(button区分左右键)
pointerMove(point)模拟鼠标移动
pointerScroll(point,wheelDelta)模拟鼠标中键滚动，用于放大或缩小app。
由此可知，上述执行操作事件所对应的应用逻辑至少可以包括如下几种应用方式：
方式一：在操作事件为点击事件的情况下，服务器选择显示深度最高的显示对象执行点击事件。
具体的，如图9a所示，在检测到点击事件之后，从所有显示对象中查找到被选中的且显示深度最高的显示对象，并对该对象执行点击操作，从而实现从控制设备的显示屏中选中要操作的对象，并将该对象的点击指令进行保存或缓存selectdApp.prevPt＝pointer。
方式二:在操作事件为移动事件的情况下，服务器对选中的显示对象执行移动事件。
具体的，如图9b所示，在检测到移动事件之后，查找是否存在被选中的显示对象，如果有，则将选中的显示对象移动至目标位置，并保存该对象的移动指令，即对选中的需要执行移动的显示对象的指针进行保存selectdApp.prevPt＝pointer。
方式三：在操作事件为鼠标抬起事件、缩放事件或浏览事件的情况下，服务器对选中的显示对象执行缩放事件。
具体的，如图9c所示，如果检测到鼠标抬起事件，则放弃选中的显示对象。另外，在检测到缩放事件或浏览事件之后，查找是否存在被选中的显示对象，如果有，则将选中的显示对象进行缩放或浏览目标区域内的显示对象，并保存该对象的指令。
方式四：在操作事件为滚动事件的情况下，服务器对浏览到的显示对象执行滚动事件。
具体的，如图9d所示，在检测到滚动之后，查找是否存在被选中的显示对象，如果有，则将选中的显示对象进行滚动式的浏览，并保存该对象的滚动指令。
一种可选实施例中，在执行步骤S243服务器控制显示设备上展示的显示对象执行操作事件所对应的应用逻辑之后，还可以实施如下步骤：
步骤S245，服务器根据操作事件的执行结果更新对应的显示对象的对象信息，得到新的显示配置信息。
步骤S246，服务器将新的显示配置信息返回给控制设备，使得控制设备显示新的操作界面。
一种可选实施例中，在步骤S20执行控制设备从服务器获取显示设备的显示配置信息之前，还可以实施如下步骤：
步骤S10，服务器接收到控制设备发送的对象打开指令，其中，对象打开指令至少包括：待显示对象的访问地址；
步骤S12，服务器根据对象打开指令创建待显示对象的对象信息，其中，待显示对象的对象信息至少包括：待显示对象的尺长、显示深度和位置信息；
步骤S14，服务器控制显示设备显示待显示对象。
图10是根据本发明实施例的控制设备的业务交互图。结合图10所示的实施例，对于如何打开一个新的信息片app，处理流程如下:
步骤90，控制设备一端接收到用户输入的待显示对象的访问地址，此处的访问地址可以是网页地址(webpage url)；
步骤92，控制设备发送对象打开指令给服务器，进而打开显示设备上的APP该指令携带了待显示对象的访问地址这个参数；
步骤94，服务器根据该指令创建新的对象信息，包括对象信息所对应的显示屏幕在大屏幕显示设备上的位置和尺寸。
步骤S96，服务器发送上述创建的新的对象信息至显示设备，使得显示设备获取该对象信息APP对应的DOM，从而在显示设备的对应位置显示该对象。
优选地，上述步骤S14服务器控制显示设备显示待显示对象可以包括如下可选的实施方案：
步骤S141，显示设备从服务器下载与待显示对象相关的对象信息.
步骤S143，显示设备生成与待显示对象对应的DOM数据。
步骤S145，显示设备按照任意一个或多个显示屏幕的屏幕信息加载并显示DOM数据。
由上分析可知，上述步骤S141至步骤S145所提供的实施方案中，在大屏幕的显示设备中实现显示屏幕中的屏幕信息需要包括如下几个关键点：首先，每个显示屏幕screen都会将所有运行的app相关的class定义文件(js文件)下载下来,并在当前运行环境生成app instance；每个app instance实际对应的是一个dom节点，所以app instance生成之后实际上挂在到相应的dom上，以此实现最终的视觉呈现。app的定义文件本质上是一个reactjs组件的定义，而reactjs组件可以很方便的mount到一个dom上每个screen都有其标识，比如标示id为(i,j)的screen，会将容器内的所有app都做一定偏移，实现手段是对app的容器dom进行translate(offsetX,offsetY),其中offsetX＝(1400*i+app.x),offsetY＝(1050*j+app.y)。
图11是根据本发明的实施例的控制设备与服务器交互的流程示意图。下面基于图11所示的实施例对本发明的控制设备一端与服务器server的数据流程的核心方案进行详细描述如下：
步骤S101，控制设备向服务器server请求获知系统的桌面配置(大屏的总长宽)，以及所有app的信息，包括app的位置，长宽，以及z-index，当app位置有重叠的时候表征谁在更上层。
步骤S103，根据以上信息绘制一个mock的桌面和app图，提示用户当前的布局情况，以及收集用户的交互事件，移动端用hammer.js库收集用户手势操作。
步骤S105，用户通过移动和缩放app来控制系统。
步骤S107，控制端将用户的交互行为转化为server端可识别的pointer事件发送给server。
步骤S109，服务器server运行对应逻辑后，更新对象app信息，并广播给控制设备一端。
步骤S111，控制设备一端更新虚拟的控件对象mock UI。
由此可知，通过本发明提供的设计方案，至少可以解决传统方案中遇到至少如下两个问题：
不用远程登录信号PC，直接在控制端打开希望呈现的web page。
不需要专业IT的介入，脱离大屏硬件厂商的限制，直接在iPad上方便的摆放webpage在大屏上的位置和尺寸。
同时，不仅仅上述的两种控制问题得以解决，我们通过写简单的脚本，还能获得很多传统方案无法实现的功能，比如控制app从大屏右侧滑入，左侧划出，以及滑入滑出的时间和变化的快慢都可以精确控制。这些都在情报三期项目中得到较好的应用。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
实施例3
同样基于图4所示的运行环境下，本申请提供了如图12所示的显示数据的控制方法。图12是根据本发明实施例一的显示数据的控制方法的流程图。
如图12所示，该显示数据的控制方法可以包括如下实施步骤：
步骤S121，服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；
步骤123，服务器根据控制设备在操作界面上检测到的操作行为生成对应的操作事件，其中，操作界面为控制设备根据显示配置信息绘制，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；
步骤125，服务器根据操作事件控制在显示设备上执行与操作行为相同的操作。
由上可知，本申请提供的上述实施例中，控制设备从服务器获取显示设备的显示配置信息，并根据显示配置信息绘制对应的操作界面，在用户使用该操作界面进行相应的操作时，控制设备可以检测到上述操作行为，从而生成对应的操作事件，此时服务器会响应该操作事件，并基于操作事件控制在显示设备上执行与操作行为相同的操作。由此可知，控制设备一端可以抽象展示大屏的显示设备中对应的显示对象app的信息展示给用户，并接收用户输入的交互指令和控制指令，并转化为服务器系统可识别的操作事件的指令发送给服务器server，进而服务器server可以根据不同指令做相应逻辑处理，由于上述控制设备可以通过服务器来实现，将控制设备本地的操作事件同步至对应的显示设备上，实现了用户可以通过控制设备灵活的对大屏幕的显示设备的操作过程，降低了大屏幕显示设备的展示信息的交互灵活性。
上述解决方案还进一步定义了一套操作事件的分发机制，使得各种控制设备都能接入显示设备的系统，完成对展现内容的灵活控制。
本申请实施例3从服务器一侧来保护本发明的核心，该实施例还可以提供与上述实施例2提供的具有相同或相应的可选或优选的实施例，所实现的实例和应用场景相同，但不限于上述实施例二所公开的内容。
实施例4
根据本发明实施例，还提供了一种用于实施上述显示数据的控制方法的显示数据的控制装置，图13是根据本发明实施例的显示数据的控制装置的示意图。如图13所示，该装置可以包括：获取模块130、绘制模块133和生成模块135。
其中，获取模块130，用于从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；
绘制模块133，用于根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；
生成模块135，用于如果操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
此处需要说明的是，上述获取模块130、绘制模块133和生成模块135对应于实施例2中的步骤S20至步骤S24，三个模块与对应的步骤所实现的实例和应用场景相同，但不限于上述实施例一所公开的内容。需要说明的是，上述模块作为装置的一部分可以运行在实施例二提供的计算机终端10中。
本发明实施例4还可以提供对应于上述实施例1提供的可选或优选实施例，所实现的实例和应用场景相同，但不限于上述实施例一所公开的内容。
实施例5
本发明的实施例可以提供一种控制设备，该控制设备可以是计算机终端群中的任意一个控制设备。可选地，在本实施例中，上述控制设备也可以替换为移动终端等终端设备。
可选地，在本实施例中，上述控制设备可以位于计算机网络的多个网络设备中的至少一个网络设备。
在本实施例中，上述计算机终端可以执行应用程序的漏洞检测方法中以下步骤的程序代码：控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
可选地，图14是根据本发明实施例的一种控制设备的结构框图。如图14所示，该控制设备14可以包括：一个或多个(图中仅示出一个)处理器、存储器、以及其他必要装置。
其中，存储器可用于存储软件程序以及模块，如本发明实施例中的安全漏洞检测方法和装置对应的程序指令/模块，处理器通过运行存储在存储器内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的系统漏洞攻击的检测方法。存储器可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器可进一步包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至终端14。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
处理器可以通过传输装置调用存储器存储的信息及应用程序，以执行下述步骤：控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
可选的，上述处理器还可以执行如下步骤的程序代码：将操作事件发送给服务器；服务器控制显示设备上展示的显示对象执行操作事件所对应的应用逻辑，其中，在操作事件为点击事件的情况下，服务器选择显示深度最高的显示对象执行点击事件；在操作事件为移动事件的情况下，服务器对选中的显示对象执行移动事件；在操作事件为缩放事件的情况下，服务器对选中的显示对象执行缩放事件；在操作事件为滚动事件的情况下，服务器对浏览到的显示对象执行滚动事件。
可选的，上述处理器还可以执行如下步骤的程序代码：服务器根据操作事件的执行结果更新对应的显示对象的对象信息，得到新的显示配置信息；服务器将新的显示配置信息返回给控制设备，使得控制设备显示新的操作界面。
可选的，上述处理器还可以执行如下步骤的程序代码：服务器接收到控制设备发送的对象打开指令，其中，对象打开指令至少包括：待显示对象的访问地址；服务器根据对象打开指令创建待显示对象的对象信息，其中，待显示对象的对象信息至少包括：待显示对象的尺长、显示深度和位置信息；服务器控制显示设备显示待显示对象。
可选的，上述处理器还可以执行如下步骤的程序代码：显示设备从服务器下载与待显示对象相关的对象信息；显示设备生成与待显示对象对应的DOM数据；显示设备按照任意一个或多个显示屏幕的屏幕信息加载并显示DOM数据。
采用本发明实施例，提供了一种显示数据的控制方案。通过控制设备从服务器获取显示设备的显示配置信息，并根据显示配置信息绘制对应的操作界面，在用户使用该操作界面进行相应的操作时，控制设备可以检测到上述操作行为，从而生成对应的操作事件，此时服务器会响应该操作事件，并基于操作事件控制在显示设备上执行与操作行为相同的操作，从而达到了用户可以通过控制设备灵活的对大屏幕的显示设备的操作过程，达到了降低大屏幕显示设备的展示信息的交互灵活性的目的，进而解决了现有技术中采用大显示屏展示数据内容时，展示信息的交互过程不灵活的技术问题。
本领域普通技术人员可以理解，图14所示的结构仅为示意，计算机终端也可以是智能手机(如Android手机、iOS手机等)、平板电脑、掌声电脑以及移动互联网设备(MobileInternet Devices，MID)、PAD等终端设备。图10其并不对上述电子装置的结构造成限定。例如，计算机终端10还可包括比图10中所示更多或者更少的组件(如网络接口、显示装置等)，或者具有与图10所示不同的配置。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(RandomAccess Memory，RAM)、磁盘或光盘等。
实施例5
本发明的实施例还提供了一种存储介质。可选地，在本实施例中，上述存储介质可以用于保存上述实施例一所提供的显示数据的控制方法所执行的程序代码。
可选地，在本实施例中，上述存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中，或者位于移动终端群中的任意一个移动终端中。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：控制设备从服务器获取显示设备的显示配置信息，其中，显示配置信息包括：显示设备的桌面信息以及显示设备所包括的每个显示屏幕展示的显示对象的对象信息；控制设备根据显示配置信息绘制对应的操作界面，其中，操作界面包括：与桌面信息对应的模拟桌面和与显示对象对应的模拟对象；控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，操作事件用于控制在显示设备上执行与操作行为相同的操作。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：服务器根据操作事件的执行结果更新对应的显示对象的对象信息，得到新的显示配置信息；服务器将新的显示配置信息返回给控制设备，使得控制设备显示新的操作界面。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：服务器接收到控制设备发送的对象打开指令，其中，对象打开指令至少包括：待显示对象的访问地址；服务器根据对象打开指令创建待显示对象的对象信息，其中，待显示对象的对象信息至少包括：待显示对象的尺长、显示深度和位置信息；服务器控制显示设备显示待显示对象。
可选地，在本实施例中，存储介质被设置为存储用于执行以下步骤的程序代码：显示设备从服务器下载与待显示对象相关的对象信息；显示设备生成与待显示对象对应的DOM数据；显示设备按照任意一个或多个显示屏幕的屏幕信息加载并显示DOM数据。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (12)
1.一种显示数据的控制系统，其特征在于，包括：
显示设备，包括多个显示屏幕，每个显示屏幕用于显示页面内容；
服务器，与所述显示设备连接，用于保存与所述页面内容关联的显示配置信息，其中，所述显示配置信息包括：所述显示设备的桌面信息以及所述显示设备所包括的每个显示屏幕展示的显示对象的对象信息；
控制设备，与所述服务器连接，用于根据获取到的所述显示配置信息绘制对应的操作界面，并在检测到操作行为，生成对应的操作事件，其中，所述操作界面包括：与所述桌面信息对应的模拟桌面和与所述显示对象对应的模拟对象；
其中，所述服务器还用于接收所述操作事件，并根据所述操作事件控制在所述显示设备上执行与所述操作行为相同的操作。
2.根据权利要求1所述的方法，其特征在于，所述桌面信息至少包括：所述显示设备的桌面尺寸；所述显示对象的对象信息至少包括：所述显示对象的尺寸、位于所述显示设备中的位置信息、显示内容和显示深度。
3.根据权利要求2所述的方法，其特征在于，所述操作事件包括如下至少之一：点击事件、缩放事件、移动事件和滚动事件。
4.一种显示数据的控制方法，其特征在于，包括：
控制设备从服务器获取显示设备的显示配置信息，其中，所述显示配置信息包括：所述显示设备的桌面信息以及所述显示设备所包括的每个显示屏幕展示的显示对象的对象信息；
所述控制设备根据所述显示配置信息绘制对应的操作界面，其中，所述操作界面包括：与所述桌面信息对应的模拟桌面和与所述显示对象对应的模拟对象；
所述控制设备的操作界面检测到操作行为，生成对应的操作事件，其中，所述操作事件用于控制在所述显示设备上执行与所述操作行为相同的操作。
5.根据权利要求4所述的方法，其特征在于，所述桌面信息至少包括：所述显示设备的桌面尺寸；所述显示对象的对象信息至少包括：所述显示对象的尺寸、位于所述显示设备中的位置信息、显示内容和显示深度。
6.根据权利要求5所述的方法，其特征在于，所述操作事件包括如下至少之一：点击事件、缩放事件、移动事件和滚动事件。
7.根据权利要求6所述的方法，其特征在于，在所述控制设备的操作界面检测到操作行为，生成对应的操作事件之后，所述方法还包括：
将所述操作事件发送给所述服务器；
所述服务器控制所述显示设备上展示的显示对象执行所述操作事件所对应的应用逻辑，其中，
在所述操作事件为所述点击事件的情况下，所述服务器选择显示深度最高的显示对象执行所述点击事件；
在所述操作事件为所述移动事件的情况下，所述服务器对选中的显示对象执行所述移动事件；
在所述操作事件为所述缩放事件的情况下，所述服务器对选中的显示对象执行所述缩放事件；
在所述操作事件为所述滚动事件的情况下，所述服务器对浏览到的显示对象执行所述滚动事件。
8.根据权利要求7所述的方法，其特征在于，在所述服务器控制所述显示设备上展示的显示对象执行所述操作事件所对应的应用逻辑之后，所述方法还包括：
所述服务器根据所述操作事件的执行结果更新对应的显示对象的对象信息，得到新的显示配置信息；
所述服务器将所述新的显示配置信息返回给所述控制设备，使得所述控制设备显示新的操作界面。
9.根据权利要求2所述的方法，其特征在于，在控制设备从服务器获取显示设备的显示配置信息之前，所述方法还包括：
所述服务器接收到所述控制设备发送的对象打开指令，其中，所述对象打开指令至少包括：待显示对象的访问地址；
所述服务器根据所述对象打开指令创建所述待显示对象的对象信息，其中，所述待显示对象的对象信息至少包括：所述待显示对象的尺长、显示深度和位置信息；
所述服务器控制所述显示设备显示所述待显示对象。
10.根据权利要求9所述的方法，其特征在于，所述服务器控制所述显示设备显示所述待显示对象，包括：
所述显示设备从所述服务器下载与所述待显示对象相关的对象信息；
所述显示设备生成与所述待显示对象对应的DOM数据；
所述显示设备按照任意一个或多个显示屏幕的屏幕信息加载并显示所述DOM数据。
11.一种显示数据的控制方法，其特征在于，包括：
服务器获取显示设备的显示配置信息，其中，所述显示配置信息包括：所述显示设备的桌面信息以及所述显示设备所包括的每个显示屏幕展示的显示对象的对象信息；
所述服务器根据所述控制设备在操作界面上检测到的操作行为生成对应的操作事件，其中，所述操作界面为所述控制设备根据所述显示配置信息绘制，所述操作界面包括：与所述桌面信息对应的模拟桌面和与所述显示对象对应的模拟对象；
所述服务器根据所述操作事件控制在所述显示设备上执行与所述操作行为相同的操作。
12.一种显示数据的控制装置，其特征在于，包括：
获取模块，用于从服务器获取显示设备的显示配置信息，其中，所述显示配置信息包括：所述显示设备的桌面信息以及所述显示设备所包括的每个显示屏幕展示的显示对象的对象信息；
绘制模块，用于根据所述显示配置信息绘制对应的操作界面，其中，所述操作界面包括：与所述桌面信息对应的模拟桌面和与所述显示对象对应的模拟对象；
生成模块，用于如果操作界面检测到操作行为，生成对应的操作事件，其中，所述操作事件用于控制在所述显示设备上执行与所述操作行为相同的操作。
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610800156.7A CN107783702A (zh) | 2016-08-31 | 2016-08-31 | 显示数据的控制方法、装置和系统 |
| TW106120044A TW201812567A (zh) | 2016-08-31 | 2017-06-15 | 顯示資料的控制方法、裝置和系統 |
| PCT/CN2017/097952 WO2018040943A1 (zh) | 2016-08-31 | 2017-08-18 | 显示数据的控制方法、装置和系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610800156.7A CN107783702A (zh) | 2016-08-31 | 2016-08-31 | 显示数据的控制方法、装置和系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107783702A true CN107783702A (zh) | 2018-03-09 |
Family
ID=61300047
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610800156.7A Pending CN107783702A (zh) | 2016-08-31 | 2016-08-31 | 显示数据的控制方法、装置和系统 |
Country Status (3)
| Country | Link |
|---|---|
| CN (1) | CN107783702A (zh) |
| TW (1) | TW201812567A (zh) |
| WO (1) | WO2018040943A1 (zh) |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108683936A (zh) * | 2018-05-15 | 2018-10-19 | 杭州橙鹰数据技术有限公司 | 一种数据同步的方法及装置 |
| CN108958868A (zh) * | 2018-06-30 | 2018-12-07 | 深圳市技达信息技术有限公司 | 显示界面的方法、装置及计算机可读存储介质 |
| CN110008430A (zh) * | 2019-04-10 | 2019-07-12 | 广州视源电子科技股份有限公司 | 传屏设备的桌面组件配置方法及装置 |
| CN110290209A (zh) * | 2019-06-27 | 2019-09-27 | 绿漫科技有限公司 | 园区数据云图与移动终端联动的方法 |
| CN110362259A (zh) * | 2018-04-10 | 2019-10-22 | 北京仁光科技有限公司 | 指挥调度系统、方法、设备及计算机可读存储介质 |
| CN111176596A (zh) * | 2019-12-24 | 2020-05-19 | 北京大米未来科技有限公司 | 一种图像显示区域切换方法、装置、存储介质及电子设备 |
| CN111221482A (zh) * | 2018-11-23 | 2020-06-02 | 北京仁光科技有限公司 | 基于指挥台的界面布局调整方法 |
| CN111262909A (zh) * | 2020-01-09 | 2020-06-09 | 中国建设银行股份有限公司 | 一种大屏信息显示方法、装置、设备和存储介质 |
| CN113111277A (zh) * | 2021-04-01 | 2021-07-13 | 苏州美房云客软件科技股份有限公司 | 一种移动端操控虚幻引擎pc大屏的方法 |
| CN114374726A (zh) * | 2022-01-07 | 2022-04-19 | 阿里巴巴（中国）有限公司 | 一种云桌面处理方法及系统 |
| CN115242523A (zh) * | 2022-07-26 | 2022-10-25 | 亿咖通(湖北)技术有限公司 | 一种基于tee系统的终端使用方法、装置、设备及介质 |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113747206B (zh) * | 2020-05-27 | 2024-03-15 | 西安诺瓦星云科技股份有限公司 | 数据回传控制方法和系统、显示屏控制器及显示控制卡 |
| CN114661102A (zh) * | 2022-05-23 | 2022-06-24 | 深圳市华曦达科技股份有限公司 | 一种用于安卓智能终端的屏幕组合显示方法、装置及系统 |
| CN115665123B (zh) * | 2022-11-14 | 2023-07-25 | 广东美的暖通设备有限公司 | 展厅大屏控制方法、系统、遥控设备和服务器 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102595159A (zh) * | 2010-11-11 | 2012-07-18 | 索尼公司 | 信息处理装置、立体显示方法以及程序 |
| US20140068504A1 (en) * | 2012-08-28 | 2014-03-06 | Samsung Electronics Co., Ltd. | User terminal apparatus and controlling method thereof |
| CN103927171A (zh) * | 2014-04-14 | 2014-07-16 | 广州市久邦数码科技有限公司 | 一种立体桌面多屏预览的实现方法及系统 |
| CN104331243A (zh) * | 2014-10-22 | 2015-02-04 | 积成电子股份有限公司 | 基于缩略图重构的移动终端与大屏显示互动控制方法 |
| CN105493152A (zh) * | 2013-07-22 | 2016-04-13 | 株式会社得那 | 图像处理装置以及图像处理程序 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102938834B (zh) * | 2012-11-21 | 2016-04-27 | 北京佳讯飞鸿电气股份有限公司 | 一种多屏多视频缩微视图调度系统及调度操作方法 |
| CN104317521B (zh) * | 2014-11-05 | 2016-06-01 | 成都智元汇文化传媒股份有限公司 | 智能触摸拼接屏人机交互式系统及方法 |
-
2016
- 2016-08-31 CN CN201610800156.7A patent/CN107783702A/zh active Pending
-
2017
- 2017-06-15 TW TW106120044A patent/TW201812567A/zh unknown
- 2017-08-18 WO PCT/CN2017/097952 patent/WO2018040943A1/zh active Application Filing
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102595159A (zh) * | 2010-11-11 | 2012-07-18 | 索尼公司 | 信息处理装置、立体显示方法以及程序 |
| US20140068504A1 (en) * | 2012-08-28 | 2014-03-06 | Samsung Electronics Co., Ltd. | User terminal apparatus and controlling method thereof |
| CN105493152A (zh) * | 2013-07-22 | 2016-04-13 | 株式会社得那 | 图像处理装置以及图像处理程序 |
| CN103927171A (zh) * | 2014-04-14 | 2014-07-16 | 广州市久邦数码科技有限公司 | 一种立体桌面多屏预览的实现方法及系统 |
| CN104331243A (zh) * | 2014-10-22 | 2015-02-04 | 积成电子股份有限公司 | 基于缩略图重构的移动终端与大屏显示互动控制方法 |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110362259A (zh) * | 2018-04-10 | 2019-10-22 | 北京仁光科技有限公司 | 指挥调度系统、方法、设备及计算机可读存储介质 |
| CN108683936A (zh) * | 2018-05-15 | 2018-10-19 | 杭州橙鹰数据技术有限公司 | 一种数据同步的方法及装置 |
| CN108958868A (zh) * | 2018-06-30 | 2018-12-07 | 深圳市技达信息技术有限公司 | 显示界面的方法、装置及计算机可读存储介质 |
| CN111221482A (zh) * | 2018-11-23 | 2020-06-02 | 北京仁光科技有限公司 | 基于指挥台的界面布局调整方法 |
| CN110008430A (zh) * | 2019-04-10 | 2019-07-12 | 广州视源电子科技股份有限公司 | 传屏设备的桌面组件配置方法及装置 |
| CN110290209A (zh) * | 2019-06-27 | 2019-09-27 | 绿漫科技有限公司 | 园区数据云图与移动终端联动的方法 |
| CN111176596A (zh) * | 2019-12-24 | 2020-05-19 | 北京大米未来科技有限公司 | 一种图像显示区域切换方法、装置、存储介质及电子设备 |
| CN111176596B (zh) * | 2019-12-24 | 2023-07-25 | 北京大米未来科技有限公司 | 一种图像显示区域切换方法、装置、存储介质及电子设备 |
| CN111262909A (zh) * | 2020-01-09 | 2020-06-09 | 中国建设银行股份有限公司 | 一种大屏信息显示方法、装置、设备和存储介质 |
| CN113111277A (zh) * | 2021-04-01 | 2021-07-13 | 苏州美房云客软件科技股份有限公司 | 一种移动端操控虚幻引擎pc大屏的方法 |
| CN114374726A (zh) * | 2022-01-07 | 2022-04-19 | 阿里巴巴（中国）有限公司 | 一种云桌面处理方法及系统 |
| CN115242523A (zh) * | 2022-07-26 | 2022-10-25 | 亿咖通(湖北)技术有限公司 | 一种基于tee系统的终端使用方法、装置、设备及介质 |
| CN115242523B (zh) * | 2022-07-26 | 2024-05-17 | 亿咖通(湖北)技术有限公司 | 一种基于tee系统的终端使用方法、装置、设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| TW201812567A (zh) | 2018-04-01 |
| WO2018040943A1 (zh) | 2018-03-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107783702A (zh) | 显示数据的控制方法、装置和系统 | |
| CN109446570B (zh) | 业务流程展示方法、装置、计算机设备以及存储介质 | |
| CN108073438A (zh) | 页面展示方法、装置及电子终端 | |
| CN107111416A (zh) | 标签清扫和分组 | |
| KR20120045744A (ko) | 체험형 학습 콘텐츠 저작 장치 및 방법 | |
| CN107111496A (zh) | 可定制刀片应用 | |
| WO2017124795A1 (zh) | 联系人分组处理方法、装置以及移动终端 | |
| CN110505079A (zh) | 用于基于上下文的多维网络可视化的系统及方法 | |
| CN107368996B (zh) | 现场项目的问题处理/监管方法/系统，存储介质，终端 | |
| CN106572139A (zh) | 多终端控制方法、终端、服务器和系统 | |
| CN107368511A (zh) | 一种信息展示方法及装置 | |
| CN110008011A (zh) | 一种任务切换方法及终端设备 | |
| CN108351688A (zh) | 组合的抓握和移动性感测 | |
| CN111679818A (zh) | 编辑展示软件的方法和系统 | |
| CN105630375A (zh) | 基于图形界面的信息输入的辅助实现方法和系统 | |
| CN110347458A (zh) | 一种按钮控件展示方法、装置、存储介质及交互智能平板 | |
| CN109948101A (zh) | 页面切换方法、装置、存储介质及电子设备 | |
| CN111338721A (zh) | 在线交互方法、系统、电子设备和存储介质 | |
| CN106503009A (zh) | 显示页面中数据的转移方法及装置 | |
| CN102411467B (zh) | 电子设备及其内容管理方法 | |
| CN106855772A (zh) | 一种信息展示方法及装置 | |
| CN110928397A (zh) | 用户界面刷新方法、装置、存储介质及电子装置 | |
| CN100589073C (zh) | 窗口显示系统及显示方法 | |
| JP4847991B2 (ja) | 情報処理装置、方法、プログラムシステム及びサーバコンピュータ | |
| CN109521914A (zh) | 恢复文件中数据的方法、装置和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180309 |