CN111049868B - 数据交互系统和数据交互方法 - Google Patents
数据交互系统和数据交互方法 Download PDFInfo
- Publication number
- CN111049868B CN111049868B CN201811197080.9A CN201811197080A CN111049868B CN 111049868 B CN111049868 B CN 111049868B CN 201811197080 A CN201811197080 A CN 201811197080A CN 111049868 B CN111049868 B CN 111049868B
- Authority
- CN
- China
- Prior art keywords
- client
- signal source
- server
- shared data
- shared
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- Information Transfer Between Computers (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明公开了一种数据交互系统、方法及用于所述系统的客户端,数据交互系统包括:信号源、客户端、和服务器;所述信号源和客户端通过接入所述服务器以建立数据传输通道;所述服务器,用于与所述接入的信号源进行通信,并为所述客户端提供信号源标识列表;所述信号源用于根据服务器的指示通过所述数据传输通道向所述客户端传送采集的共享数据;所述客户端用于通过共享信号源标识列表向所述服务器发出请求,并根据所述服务器的响应将所述信号源传送的共享数据显示在数据共享界面。通过本发明,可以实现多方交互,且交互各方可以根据需要对多个共享方的屏幕数据进行快捷、方便地交互和分享,从而大大提升交互效率。
Description
技术领域
本发明涉及数据交互领域,尤其涉及一种数据交互系统系统和数据交互方法,及用于所述数据交互系统的客户端。
背景技术
随着科技的发展,用户通过网络进行数据交互的场合越来越多。例如腾讯QQ、微信等网络通讯工具的出现,用户可以随时随地通过网络与其他用户进行交流和传输数据。
但是,如上所述的网络通讯工具仅能单方地进行数据交互且交互过程仅仅涉及两个交互方。在日常的办公环境中,工作的复杂的程度越来越高,往往需要多人一起参与会议讨论和进行信息分享和分析才能完成一项工作。上述简单的网络通讯工作无法满足多人同时参与办公的要求。
发明内容
针对上述现有技术中的问题,本申请第一方面提出一种数据交互系统,其包括:信号源、客户端、和服务器;所述信号源和客户端通过接入所述服务器以建立数据传输通道;所述服务器,用于与所述接入的信号源进行通信,并为所述客户端提供信号源标识列表;所述信号源用于根据服务器的指示通过所述数据传输通道向所述客户端传送采集的共享数据;所述客户端用于通过共享信号源标识列表向所述服务器发出请求,并根据所述服务器的响应将所述信号源传送的共享数据显示在数据共享界面。
根据本发明的一些实施例,所述数据共享界面包括共享信号源标识列表以及共享数据显示区域;所述共享信号源标识列表中的标识包括信号源的网络IP地址。
根据本发明的一些实施例,所述客户端对共享信号源标识列表中的标识进行选定操作,以便在一个相应的显示位置处以一个显示窗口大小来显示所选取的标识对应的信号源的共享数据。
根据本发明的一些实施例,所述对共享信号源标识列表中的标识进行选定操作包括点击共享信号源标识列表中的标识并将其拖拽至所述共享数据显示区域中。
根据本发明的一些实施例,所述共享数据显示区域包括相应于共享信号源标识列表中信号源数量的预设尺寸的窗格,用于供所述客户端将要显示的共享数据放置到所述窗格中。
根据本发明的一些实施例,所述信号源包括至少两个信号源;所述客户端还用于于所述至少两个信号源中选择目标信号源以分享共享数据至该目标信号源,并向服务器发出分享请求;
所述服务器将所述分享请求发送给所述目标信号源;
所述服务器指示所述共享数据所在的信号源将共享数据发送给目标信号源中同意接收的目标信号源。
根据本发明的一些实施例,所述服务器还用于对客户端的共享权限进行管理和分配;
所述客户端根据所述共享权限对其接收的共享数据进行访问和/或操控。
根据本发明的一些实施例,所述信号源包括个人计算机、手持式或膝上型计算机、平板计算机、蜂窝电话、移动设备、电子设备、智能手机、智能电视之一、摄像头或其组合;
所述客户端包括个人计算机、手持式或膝上型计算机、平板计算机、蜂窝电话、移动设备、电子设备、智能手机、智能电视之一或其组合;
所述共享数据包括桌面、文件夹、文件、图标、窗口、按钮之一或其组合或所述桌面、文件夹、文件、图标、窗口、按钮或其组合的截图或所述截图的组合。
根据本发明的一些实施例,所述客户端将对所述共享数据进行操控时形成的布局实时上报给服务器;所述布局包括共享数据在数据共享界面中的显示窗口大小、位置、叠放次序和生成时间。
根据本发明的一些实施例,所述信号源为能够用于将其他信号转换成视频信号输出的信号源。
根据本发明的一些实施例,所述客户端根据所述数据共享界面的缩放同比例地缩放所述共享数据显示区域。
本发明第二方面提供一种用于前述系统的客户端,其包括处理器和显示模块;
所述处理器,用于接入服务器时,接收来自所述服务器的共享信号源标识列表;以及通过共享信号源标识列表向所述服务器发出请求;
所述显示模块,用于在所述服务器响应后将信号源传送的共享数据显示在数据共享界面。
根据本发明的一些实施例,所述处理器还用于选择共享信号源标识列表中的信号源以分享数据,并向服务器发出分享请求。
根据本发明的一些实施例,所述处理器还用于对所述共享数据进行操控时形成的布局实时上报给服务器;所述布局包括共享数据在数据共享界面中的显示窗口大小、位置、叠放次序和生成时间。
本发明第三方面提供一种数据交互方法,其包括:
将信号源、客户端接入服务器以形成网络连接;
所述服务器根据接入的信号源为所述客户端提供共享信号源标识列表;
所述客户端通过所述共享信号源标识列表选择要共享数据的信号源;
选定的信号源根据服务器的指示向所述客户端传送共享数据;
所述客户端将所述信号源传送的共享数据显示在数据共享界面。
根据本发明的一些实施例,所述数据共享界面包括共享信号源标识列表以及共享数据显示区域。
根据本发明的一些实施例,所述客户端通过对共享信号源标识列表中的标识进行选定操作,并将选定操作指令发送给所述服务器,所述服务器对所述选定操作指令进行响应,所述客户端根据所述服务器的响应将从选定的信号源采集的共享数据显示在所述共享数据显示区域中。
根据本发明的一些实施例,所述对共享信号源标识列表中的标识进行选定操作包括点击共享信号源标识列表中选定的标识并将其拖拽至所述共享数据显示区域中。
根据本发明的一些实施例,所述共享数据显示区域包括相应于共享信号源标识列表中所述信号源数量的预设尺寸的窗格,用于供所述客户端将要显示的共享数据放置到其中一个所述窗格中。
根据本发明的一些实施例,所述方法包括:所述客户端于所述至少两个信号源中选择目标信号源以分享共享数据至该目标信号源,并向服务器发出分享请求;
所述服务器将所述分享请求发送给所述目标信号源;
所述服务器指示所述共享数据所在的信号源将共享数据发送给目标信号源中同意接收的目标信号源。
根据本发明的一些实施例,所述方法包括:所述选定的信号源响应所述客户端的选择对其内的共享数据进行截屏操作,以获取共享数据所对应的桌面的截图;
选定的信号源对所述截图进行编码,转换成可传输的编码格式;
选定的信号源将上述编码后的截图传输给所述客户端;
所述客户端对所述编码后的截图进行解码。
根据本发明的一些实施例,所述方法包括:所述服务器对信号源的共享权限进行管理和分配;
所述信号源根据所述共享权限对其接收的共享数据进行访问和/或操控。
根据本发明的一些实施例,所述方法包括:所述客户端将对所述共享数据进行操控时形成的布局实时上报给服务器;所述布局包括共享数据在数据共享界面中的显示窗口大小、位置、叠放次序和生成时间。
根据本发明的一些实施例,所述方法包括:所述客户端将显示在共享数据显示区域的界面保存成一个场景预案并发给服务器,或者服务器根据客户端的请求将显示在共享数据显示区域的界面保存成一个场景预案;服务器响应客户端的请求,根据界面中的所述布局形成界面布局缩略图并将其保存在场景预案列表中。
根据本发明的一些实施例,所述信号源为能够用于将其他信号转换成视频信号输出的信号源。
根据本发明的一些实施例,所述方法包括:所述客户端根据所述数据共享界面的缩放同比例地缩放所述共享数据显示区域。
根据本发明的一些实施例,所述客户端确定执行所述拖拽操作后光标在显示屏幕上的位置;
根据预设的由拖拽操作所要形成的目标窗口尺寸确定共享数据对应的桌面的缩放比例;以及
根据所述光标在显示屏幕上的位置和缩放比例将共享数据对应的桌面显示出来。
根据本发明的一些实施例,所述客户端确定执行所述拖拽操作后光标所处的窗格;以及
根据所处的窗格的顶点初始位置坐标和窗格尺寸确定共享数据对应的桌面的将要放置的位置和缩放比例并将共享数据对应的桌面显示出来。
根据本发明的一些实施例,所述客户端根据所述数据共享界面的缩放同比例地缩放所述共享数据显示区域包括如下步骤:
所述客户端对用户缩放动作进行识别,且根据最终鼠标的位置坐标确定缩放比例,并对所述共享数据显示区域进行同比例得缩放以及显示。
根据本发明的一些实施例,所述方法包括:所述客户端根据用户对共享数据的操作,生成鼠标位置信息和操控指令;
所述客户端将生成的鼠标位置信息和操控指令传输给共享数据所源自的信号源;
所述共享数据所源自的信号源将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置,并根据换算后的鼠标位置和操控指令进行响应。
根据本发明的一些实施例,所述共享数据所源自的信号源将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置,包括如下步骤:
所述共享数据所源自的信号源根据接收到的鼠标位置信息中的鼠标位置以及鼠标工作窗口的缩放比例,将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置,所述鼠标工作窗口的缩放比例为鼠标在所述客户端的工作窗口和鼠标在共享数据所源自的信号源中的工作窗口之间的比例。
通过本发明,可以实现多方交互,且交互各方可以根据需要对多个共享方的屏幕数据进行快捷、方便地交互和分享,从而大大提升交互效率。
附图说明
图1为根据本发明的实施例的数据交互系统示意图;
图2为图1所示的数据交互系统将其中一个客户端数据显示在主界面中的示意图;
图3为根据本发明实施例的将两个或以上客户端数据显示在主界面中的示意图;
图4为根据本发明实施例的将两个或以上客户端数据显示在共享数据区域(或称共享数据显示区域)的窗格中的示意图;
图5为根据本发明实施例的客户端与其共享信号源鼠标位置示意图;
图6为根据本发明实施例的客户端主动分享数据的操作界面示意图;
图7为根据本发明实施例的客户端对分享数据进行裁剪的操作界面示意图;
图8为将图7所示的裁剪数据添加至裁剪节点的操作界面示意图;
图9为根据本发明实施例的客户端进行共享数据截图拼接并保存预案的操作界面示意图;
图10为根据本发明实施例的客户端中显示场景预案的操作界面示意图。
图11为根据本发明实施例的客户端对裁剪截图进行操作的界面示意图;
图12为根据本发明实施例的客户端对裁剪截图进行操作时的鼠标位置示意图;图13为根据本发明实施例的客户端的模块图。
具体实施方式
为了便于理解本发明的技术方案,本发明的实施例以个人计算机为例进行描述。但是本领域技术人员可以理解,本发明的交互系统可使用各种电子设备进行实施,该电子设备包括但不限于个人计算机、服务器计算机、手持式或膝上型设备、移动设备(比如移动电话、个人数字助理(PDA)、媒体播放器等等)、多处理器系统、消费型电子设备、小型计算机、大型计算机、包括上述任意系统或设备的分布式计算环境,等等。
图1示出根据本发明的一个实施例的数据交互系统1,其包括多个客户端以及采集端信号源31-34。采集端信号源31-34采集的数据可以为如图所示的计算机、手机、摄像头等设备的信号数据。
客户端10、11、12、13可以分别与采集端信号源31-34之间通过网络进行连接,每个采集端信号源31-34被分别分配了网络IP地址,例如IP1、IP2、IP3、IP4。
本领域技术人员可以理解,在不考虑网络吞吐量等因素下,其中,客户端和信号源的个数可以根据用户需要任意设置,例如可以多于上述的4个,也可以仅包括2个。
所述网络可以包括Wi-fi网络、蓝牙网络、私人区域网络(PAN)、局域网(LAN)、广域网(WAN)、IEEE 802.1x、内联网、互联网、外联网及其各项组合。网络也可以包括数字蜂窝电话网络,其可以包括全球移动通信系统(GSM)、通用分组无线服务(GPRS)、cdmaOne、CDMA2000、演进-数据优化的(EV-DO)、增强型数据速率GSM演进(EDGE)、通用移动通信系统(UMTS)、数字增强型无绳通信(DECT)、数字AMPS(IS-136/TDMA)、集成数字增强型网络(iDEN)、WiMAX、LTE、LTE advanced、移动宽带无线接入(MBWA)、IEEE 802.20。网络可以是公共接入的、私人的、虚拟私人的例如VPN。
在所有的客户端10-13中可以安装本发明的数据交互系统相关的软件。所述数据交互系统无需单独架设服务器或租用空间或者增加其他额外的硬件设备,可以利用已有的网络数据交互体系。
数据交互系统1还包括服务器2,安装了数据交互软件的全部客户端10-13能够与服务器2进行通讯,向服务器2发送请求以及将其运行状态实时上报给服务器2,服务器2中进一步包括权限管理模块21和数据库22,还可以对客户端10-13的权限进行管理和分配。数据库22的作用在下文中将详细描述。
例如,服务器2分配给客户端10的权限为允许其访问和操控信号源31、32、33和34的数据;服务器2分配给客户端11的权限为仅允许其访问和操控信号源32和33的数据;服务器2分配给客户端12的权限为允许其访问和操控信号源31、32、33的数据;服务器2分配给客户端13的权限为仅允许其访问而不能操控信号源31、32的数据,也可以设置一台高级客户端用于可以访问并操控其他所有客户端的数据,而其他客户端无权限访问客户端,以此类推。可以理解的是,也可以使得:仅当信号源采集的信号为可以操控的数据,例如计算机、手机等的文件、文件夹时,客户端才可以对共享数据进行操控;而当信号源采集的数据为摄像头的视频或图像数据时,客户端无法对共享数据进行操控。所述操控包括但不限于打开、删除、编辑修改、保存信号源31-34的文件夹及文件,和/或对任何打开的界面中的按钮进行操作等。
为方便理解,本发明的实施例以客户端10作为接收端客户端为例,并假设客户端10享有全部访问及操控其他采集端信号源31-34全部内容的权限,来描述其访问和/或操控其他共享信号源内容的工作过程。本领域技术人员可知,当采集端信号源为计算机或手机时,采集端信号源也可以作为客户端工作。
在客户端10的登录界面中,设置了用户名、密码的登录窗口,只有知晓用户名和密码的用户能够进入到客户端10的计算机中。
在客户端10的用户成功登录后,向服务器2发送接入请求;服务器2通过验证用户名、密码后根据其预设给客户端10的权限将分配给客户端10共享权限的信号源标识信息发送给客户端10,所述信号源标识信息包括但不限于信号源的IP地址或其他标识,例如信号源0、信号源1、信号源2、信号源3、信号源4等;客户端10进而生成一主界面(或数据共享届面),其中,主界面可以包括其有权限访问的客户端IP地址列表栏及共享数据区域(或称共享数据显示区域),如图2所示。
参考图2,在本实施例中,在主界面左边区域为客户端10访问权限范围内所有客户端的IP地址列表,例如客户端10的可访问权限为采集端信号源31-34,则其显示的列表即为IP1、IP2、IP3、IP4。在一些实施例中,IP地址列表也可以包含客户端10-13的IP地址。
在一些实施例中,如果客户端10访问权限范围内的一些或全部信号源未接入到服务器2中,则其列表中对应的信号源标识位置可以呈现为灰色的不可操作状态,方便用户对可操作的客户端一目了然。
客户端10的用户可以对左边的IP列表进行操作,例如如果用户想要访问信号源32(设为IP2)的数据,则可以在列表中的IP2的位置处单击鼠标(进行选取)并实施一个将IP2拖拽到主界面的共享数据区域中的动作(其中,IP2标识可以不发生真正的移动);在首次建立与IP2的连接时,前述动作对应的指令被发送给服务器2,若服务器同意进行该操作,包括同意在拖拽操作对应的位置处,以拖拽操作对应的窗口大小显示信号源32的数据,则服务器2将该请求发送给信号源32,以指示信号源32将其共享数据,例如,桌面,发送给客户端10;客户端10然后将信号源32传送的桌面以前述位置和显示窗口大小显示在主界面中的共享数据显示区域,如图2右边的共享数据显示区域。类似地,客户端10可以向服务器2发出请求,如同时请求共享多个共享信号源(例如信号源31-34)的桌面,并将这些信号源标识均拖拽到共享数据显示区域中。客户端可以重叠显示信号源31-34的桌面窗口,如图3所示。在一些实施例中,在客户端和信号源建立联系后,用户可以直接拖拽并实现对相关信号源的显示,其中无需经由服务器的同意。以上操作也适用于对共享数据或桌面进行裁剪所得的裁剪区域的共享数据,如结合图8所描述的裁剪部分,此时针对裁剪区域也可以相应地形成有子节点标识,该标识可以类似于信号源标识。相应地,所述客户端可以对共享信号源标识列表中的子节点标识进行选取和拖拽操作,以便在一个相应的显示位置处以一个显示窗口大小来显示对应的裁剪区域的共享数据。可以理解的是,随着信号源的实时变动,所述裁剪区域的内容可以相应变动,所述裁剪区域限定了客户端想要关注的信号源上的对应的空间范围内的内容,也即,所述显示窗口将显示子节点标识对应的截图所源自的信号源在裁剪区域中的实时更新内容。通过生成裁剪区域,便于客户端每次打开子节点标识时可以直接看到该裁剪区域对应的共享数据及其变化,而无需分散精力至其他区域。
可以理解的是,上述的桌面可以指的是在例如信号源31的计算机未打开任何文件或者文件夹时的原始桌面,也可以是在打开某个或多个文件或文件夹时的当前时刻的任何操作桌面,所述桌面可以根据客户端10的用户发出共享请求的时间而变化。
其中,在一些实施例中,客户端10执行上述拖拽指令并显示桌面的方法(上文所述的拖拽相关的过程)可以包括:
步骤101,确定执行所述拖拽操作后光标在显示屏上的坐标位置;
步骤102,根据预设的由拖拽操作所要形成的目标窗口尺寸(例如1920×1080像素)确定要显示的桌面的缩放比例(如,假设此时拖拽的是图2中左边光标所指的信号源,则该信号源自身内的当前桌面和最终被呈现在客户端10上的如图2右边所述的桌面之间将有个缩放比例,所述右边的目标窗口尺寸可以预先设置好);
步骤103,根据所述光标的坐标位置和缩放比例将要显示桌面显示出来。
优选地,出于界面友好的考虑,可以在客户端10主界面的初始化的共享数据显示区域显示预设的多个窗格或空白窗格,如图4所示,空白窗格可以为根据共享信号源个数对屏幕的共享数据显示区域平均划分后形成的窗格。所述多个窗格可以供用户将要访问的客户端的桌面拖拽到相应的窗格。客户端10的用户可以在列表中信号源32位置处单击鼠标并将信号源32拖拽到任何一个窗格,从而将信号源32的桌面显示在相应的窗格。本领域技术人员可以知道,客户端10也可以将共享数据任意拖拽而不受窗格的限制。
在一些实施例中,客户端10执行上述拖拽指令并显示桌面的方法具体包括:
步骤201,确定执行所述拖拽操作后光标的坐标所处的窗格,例如第二个窗格;
步骤202,根据所述窗格的顶点初始位置坐标(例如左上角顶点位置坐标)和窗格尺寸确定最终桌面的位置和缩放比例,并将桌面最终显示出来。
在一些实施例中,信号源协助实现其桌面被显示于客户端10的过程可以包括以下步骤:
步骤301,(响应客户端10对信号源标识的拖拽操作或选定操作或其他动作)信号源对其自身的桌面进行截屏操作,以获取桌面的截图;
步骤302,将所述截图进行编码,转换成可传输的编码格式,例如H264码流格式;
步骤303,将上述编码后的截图传输给接收端客户端10,例如可以根据预设的传输速率将上述编码后的截图传输给接收端客户端10;
步骤304,在客户端10进行解码并得到上述截图。
优选地,可以根据需要预设传输帧率,例如15帧/秒,或者30帧/秒;可以通过无线或有线网络进行传输。
优选地,客户端10可以对主界面进行自由地拖拽、缩放,本发明的实施例中,在对主界面进行拖拽、缩放的同时,主界面中的共享数据区域也随着主界面的拖拽和缩放同时进行移动和缩放。具体地,可以通过如下方式实现:
客户端10可以对用户拖拽的动作进行识别,例如,如果鼠标为左键按住主界面顶点位置并向下拖拽动作,则识别该动作为放大主界面,且其放大比例可以根据最终鼠标的位置坐标进行确定,然后将主界面及主界面上相关共享数据区域进行相应比例的放大并显示出来。在一些实施例中,客户端10可以拖拽窗格,以使其改变大小。
客户端对主界面和/或主界面中信号源对应的桌面(所述桌面如图2中右边图片对应的桌面)和/或窗格的拖拽、缩放、操控后形成的布局可以被实时发送或上报给服务器2,所述布局包括各信号源和客户端(或共享数据和截图)在客户端10的共享数据显示区域(或主界面)的开窗大小、位置、叠放次序等信息。在一些实施例中,服务器可以根据所述客户端的保存场景预案请求将操控后出现的界面保存成场景预案,存储在数据库中;或者由客户端将操控后形成的共享数据显示区域的界面保存成场景预案,然后将该场景预案发送给服务器。在一些实施例中,服务器可以响应客户端的请求,根据界面中的所述布局形成界面布局缩略图并将其保存在场景预案列表中(以下将详细说明)。用户在下次开机时,可以选择生成的场景预案并直接打开而无需重新进行操作。
之后,客户端10的用户可以对其享有权限的数据的内容进行访问和操控。例如,用户可以使用鼠标或键盘或者触摸动作等根据权限打开、删除、修改复制、移动、删除、查看、保存和/或关闭信号源对应的桌面中显示的所有文件及文件夹的内容,从而对共享信号源的更多数据进行操作。
优选地,客户端10对桌面(或数据)进行操控的过程可以通过如下方法实现:
步骤501,客户端10根据用户对桌面的操作生成鼠标的位置信息和操控指令;
步骤502,客户端10将生成的鼠标的位置信息和操控指令传输给所述桌面所源自的信号源(或客户端);
步骤503,所述桌面所源自的信号源(选定的信号源)将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置,并根据换算后的鼠标位置和操控指令进行响应。
其中,客户端用户对桌面进行操作的动作包括但不限于,使用鼠标对某个文件夹进行单击、双击,或使用鼠标对某个按钮进行点击操作,或者使用鼠标滚轮进行上下翻页,或者通过键盘、视频、音频进行如上输入操作等。
其中,在一些实施例中,所述选定的信号源将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置可以通过如下方法实现:
所述选定的信号源根据接收到的鼠标位置信息中的鼠标位置以及鼠标工作窗口的缩放比例,将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置。
例如,如图5所示,客户端10的显示屏幕31中显示了其中一个信号源的共享数据窗口32(或桌面),其中,客户端10想要通过鼠标操控共享数据窗口32中的一个文件夹,例如双击打开;客户端10的CPU获取鼠标的位置信息,例如(x1,y1)并将该位置信息及操控指令发送给共享该数据窗口32所源自的或所处的信号源,该信号源接收到鼠标的位置信息后,根据共享数据窗口32(或桌面)的尺寸相对于其本地屏幕33(或桌面)的尺寸的缩放比例,将原鼠标的坐标换算成其本地坐标(X1,Y1),并根据操控指令进行响应,例如响应鼠标的双击指令,打开图中的文件夹。再例如,可以确定鼠标在客户端10的窗口中的相对位置(如位于窗口对角线的中点位置,或1/3位置等),将该相对位置对应地映射到信号源的窗口33中(例如映射到窗口33的对角线的中点位置或1/3位置)。
在本发明的另一个实施例中,客户端10还可以主动推送要共享的内容给其他客户端或信号源,可以通过如下方法实现:
如图6所示,客户端10发起内容共享请求给服务器2,通过例如在其要共享的内容位置点击鼠标右键后选择“共享”按钮的方式实现;客户端10可以主动选择要分享的客户端,例如客户端11、12、13;
服务器2将内容共享请求转发给其他客户端11、12、13;客户端11、12、13接收到内容共享请求后,向服务器2发送响应请求,例如,同意接收内容或不同意接收内容;
如果是同意接收内容请求,则服务器2响应该请求,并指示客户端10将要共享的内容发送给客户端11、12、13,客户端11、12、13将内容显示在其数据共享区域;
如果是不同意接收内容请求,则服务器2不响应该请求。
在本发明的另一个实施例中,当客户端10的用户需要向其他信号源的用户重点强调某部分内容而不是整个桌面的时候,可以通过裁剪指令裁剪一个截图,然后再发送裁剪分享请求来实现,如图6所示。具体地,在一些实施例中,客户端10可以使用鼠标在其显示的桌面或者某个打开的文件或文件夹(所述显示的桌面或者打开的文件夹可以是客户端10自己的也可以是接收到的来自采集端信号源的)选定要裁剪的区域,然后单击右键,从而进入裁剪模式;然后客户端10自动生成菜单,包括例如“分享”按钮,如图6所示。如果客户端10的用户点击该按钮,则可以出现信号源列表界面,客户端10的用户可以根据列表选中要分享至的信号源(或称目标信号源),则该分享请求被发送给服务器2,该分享请求包含目标信号源信息;
服务器2接收上述裁剪分享请求并发送给目标信号源;
如果目标信号源返回同意接收指令,则服务器2指示裁剪部分所对应的客户端10将相应的裁剪后的截图发送给同意接收的信号源,同意接收的信号源可以显示该裁剪后的截图。
如图8所示,在本发明的另一个实施例中,客户端10还可以选择要求在所述共享信号源标识列表中添加一个与所述的裁剪内容相关联的子节点,以便下次访问时可以直接将子节点的内容拖拽到共享数据显示区域。具体地,在一些实施例中,可以通过如下方法实现:在进入裁剪模式时,客户端10自动生成菜单,包括例如“添加子节点”按钮,如果客户端10的用户点击该按钮,则客户端10向服务器2发送添加子节点请求;
然后,服务器2接收该请求,并在列表中添加该子节点;
服务器2将子节点添加到列表后的列表信息选择性地发送给客户端或所有有权限的客户端(例如,如果该裁剪的内容隶属于信号源32,而客户端14无权限查看信号源32,则服务器2不发送该添加了子节点的列表给客户端14);
所有接收到该列表的,例如客户端10,将该添加了子节点的列表信息显示出来。
进一步地,客户端10还可以对各子节点进行删除和修改名称。具体地,需要客户端10向服务器2发出删除或修改名称请求,例如通过单击鼠标右键选中菜单中的“删除节点”或“修改名称”按钮,服务器2对所述请求进行响应,然后再将进行删除或修改后的名称列表发送给所有有权限的客户端,各客户端可以将更新后的列表进行显示。
进一步地,在一些实施例中,客户端10还可以对至少两个裁剪形成的截图(或至少两个前述共享数据或整个桌面)进行联合操作。例如,客户端10的用户可以使用鼠标对显示于客户端10上的客户端11(或其他信号源,如信号源31)的内容进行裁剪并将裁剪后的截图显示在共享数据显示区域的一个区域中,然后继续对信号源32的内容进行裁剪,使其显示在共享数据显示区域的另一个区域中,然后将前两个裁剪形成的布局保存成一个新的场景预案并发给服务器2;或者,由服务器将前述两个裁剪操作形成的布局保存成一个新的场景预案,将该场景预案保存在数据库中,并根据实际需要选择性地发送给有关客户端或有权限获知的客户端或客户端10。优选地,服务器可以根据客户端的请求将该场景预案添加至数据共享界面的一个场景预案列表中,如图10。这样,可以方便用户在下次开机时直接打开该场景预案而省去了每次都需要重新进行裁剪内容的麻烦。此外,所述客户端可以从两个共享数据对应的桌面的整体或部分截图各裁剪一部分形成新截图。
所述客户端对所述新截图进行操控,以及将对所述新截图进行操控时生成的鼠标位置信息和操控指令发送至所述新截图中的鼠标作用部分所源自的信号源,所述新截图中的鼠标作用部分所源自的信号源将接收到的鼠标位置信息中的鼠标位置换算成其本地鼠标位置,并根据本地鼠标位置和操控指令进行响应,以及将响应结果发送至所述客户端。此处,例如,如果鼠标位于新截图的左边,而根据前述新截图的形成过程可以得知,新截图的左边部分是由第一共享数据的截图提供的,右边部分是由第二共享数据的截图提供的,则当鼠标作用在新截图的左边部分时,相应的鼠标操作指令将被发送给第一共享数据所源自的信号源,由其进行响应。
服务器可以根据客户端的请求针对该新截图形成一个新的子节点,子节点形成方式如前所述,此处不再赘述。在本发明的另一个实施例中,也可以将上述两个裁剪后的截图进行绑定,并可以生成新的子节点来指示该绑定在一起的两个截图,以及将该子节点添加到列表中。
在本发明的另一个实施例中,如图11所示,客户端10可以对裁剪的截图进行相应的操控,例如,如果裁剪的截图包括一个或多个文件夹、文件、菜单和/或按钮,则可以对上述截图进行操控,例如打开、删除、修改复制、移动、删除、查看、保存和/或关闭文件或文件夹,选择菜单中的某个选项,点击按钮中的暂停、播放按钮等,从而对所述截图所在客户端相关联的相应内容进行操控。
上述过程例如可以包括以下步骤:客户端10将对所述截图进行操控时生成的鼠标位置信息和操控指令发送至所述截图所源自的信号源,所述截图所源自的信号源根据鼠标在客户端10上的截图中的鼠标位置以及客户端10上的截图相对于该截图在信号源上对应的原始截图的缩放比例、原始截图起始点相对于原始截图所在窗口的起始点的坐标,将客户端10上的鼠标位置换算成信号源的本地鼠标位置,并根据本地鼠标位置和操控指令进行响应,以及将响应结果发送至客户端10。
例如,如图12所示,客户端10的显示屏幕31中显示了其中一个信号源的截图或共享数据窗口32’(根据前面的描述可知,此窗口为截图形成的窗口,或称截图窗口)。其中,客户端10想要通过鼠标操控共享数据窗口32’中的一个文件夹,例如双击打开;客户端10的CPU获取鼠标的位置信息,例如(x2,y2)并发送给共享该数据窗口32’或截图所源自的信号源,该信号源接收到鼠标的位置信息后,根据该截图或截图窗口32’相对于原始截图33’的缩放比例,并根据该截图起始点(例如左上顶点(X0,Y0))相对于截图所在窗口33的起始点(例如左上顶点(0,0))的位置信息,计算出信号源本地的鼠标坐标(X2,Y2)。
如前所述的实施例,实现了客户端和信号源之间的数据共享和操控,大大方便了参与共享的用户之间的交互需要。
上文中,服务器接收客户端10的各种请求,并进行响应,以及指示各信号源执行相应的操作等。在一些实施例中,服务器也可以拒绝客户端10的各种请求,例如拒绝其将某个信号源标识对应的信号源显示在窗格中的请求。在一些实施例中,服务器在接收客户端10的请求,如在某个位置开多大的窗口用于供显示另一客户端内容这样的请求时,可以连带存储与各信号源在共享数据显示区域中的显示窗口大小、位置等有关的布局信息。前述布局包括各客户端在客户端10的主界面中的开窗大小、位置、叠放次序等信息。
如图13所示,本发明进一步提供了一种用户数据交互系统的客户端,包括处理器101及显示模块102。
其中,在一些实施例中,所述处理器101,用于接入服务器时,接收来自所述服务器所发送的共享信号源标识列表;以及通过共享信号源标识列表向所述服务器发出请求;
所述显示模102,在所述服务器响应后将所述信号源传送的数据显示在数据共享界面。
所述处理器101还用于选择所述信号源将所述数据进行分享,并向服务器发出分享请求。
所述处理器101还用于对所述共享数据进行裁剪,并向服务器发出生成子节点请求。
所述处理器101还用于对所述数据进行操控,并将其操控后形成的布局实时上报给服务器。
此外,前面围绕图1-12对客户端所做的描述也适用于此,即,所述处理器可以完成前述客户端的相应功能,为简化起见,此处不再赘述。
本发明进一步提供了一种计算机可读介质,其中包括指令,当其在计算机上运行时,使得所述计算机执行如上述实施例中任一个实施例所述的数据交互方法。
前述实施例以个人计算机作为客户端的例子对本发明的发明思路进行了具体的描述。但是本领域技术人也可以知道,本发明的发明思路并不局限于个人计算机之间的数据共享,任何手持式或膝上型计算机、平板计算机、蜂窝电话、移动设备、电子设备、智能手机、智能电视的数据均在本发明的保护范围之内。并且,在这些实施例中,计算机或手机的采集端信号源31、32也可以同时作为客户端工作,根据分配的权限而定。
采集端信号源34也可以为任何采集或输出图像和/或视频信号的信号源,例如视频游戏控制器和电视接收器等;或者只要能够将任何信号转换成图像信号的所有信号源,例如能够将音频信号、电子设备、家用电器设备等的信号转换成图像信号的信号源的数据,均包含在本发明的实施例中。
前述实施例中的鼠标可以替换为用于向客户端的处理器提供数据和控制信号的任何一个输入装置。输入装置的示例可以包括键盘、鼠标、扫描器、数字相机、操纵杆、手柄、麦克风和触摸屏。所述触摸屏可以包括红外边框式或红外光幕式触控屏幕。也可以包括其他多种触控屏,所述触控也相应地可以通过相应的各种传感器以其他各种方式捕获,如矢量压力传感式、电容式、电阻式、红外边框式、近场成像式、电磁感应式、表面声波式触控屏中所展示的各种触控捕获方式。所述触控信息可以包括触控位置坐标值和/或触控轨迹信息。所述触控坐标可以随时间变化,或具有某种分布特性。所述触控还可以包括激光光束作用在屏幕上形成的对屏幕的触控。
前述的共享数据包括但不限于桌面、文件夹、文件、图标、窗口、按钮之一或其组合或所述桌面、文件夹、文件、图标、窗口、按钮或其组合的截图。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (4)
1.一种数据交互方法,包括:
将信号源、客户端接入服务器以形成网络连接;
所述服务器根据接入的信号源为所述客户端提供共享信号源标识列表;
所述客户端通过所述共享信号源标识列表中的标识进行选定操作以便在共享数据显示区域中的一个相应显示位置处以一个显示窗口大小来显示信号源传送的共享数据,选定操作包括点击共享信号源标识列表中的标识并将其拖拽至共享数据显示区域中;
所述客户端将选定操作指令发送给所述服务器;
所述服务器对所述选定操作指令进行响应,以指示在所述显示位置处以所述显示窗口大小来显示所述信号源传送的共享数据;
选定的信号源根据服务器的指示向所述客户端传送共享数据;
所述客户端在所述显示位置处以所述显示窗口大小来显示所述信号源传送的共享数据;
所述信号源包括至少两个信号源;所述客户端还于所述至少两个信号源中选择目标信号源以分享共享数据至该目标信号源,并向服务器发出分享请求;
所述服务器将所述分享请求发送给所述目标信号源;
所述服务器指示所述共享数据所在的信号源将共享数据发送给目标信号源中同意接收的目标信号源;
所述客户端还将对所述共享数据进行拖拽、缩放、操控时形成的布局实时上报给服务器;所述布局包括共享数据在共享数据显示区域中的显示窗口大小、位置、叠放次序和生成时间。
2.根据权利要求1所述的方法,其特征在于,包括:
所述选定的信号源响应所述客户端的选择对其内的共享数据进行截屏操作,以获取共享数据所对应的桌面的截图;
选定的信号源对所述截图进行编码,转换成可传输的编码格式;
选定的信号源将上述编码后的截图传输给所述客户端;
所述客户端对所述编码后的截图进行解码。
3.根据权利要求1所述的方法,其特征在于:包括:
所述客户端将显示在共享数据显示区域的界面保存成一个场景预案并发给服务器,或者服务器根据客户端的请求将显示在共享数据显示区域的界面保存成一个场景预案;服务器响应客户端的请求,根据界面中的所述布局形成界面布局缩略图并将其保存在场景预案列表中。
4.根据权利要求1所述的方法,其特征在于,包括:
所述客户端根据用户对共享数据的操作,生成鼠标位置信息和操控指令;
所述客户端将生成的鼠标位置信息和操控指令传输给共享数据所源自的信号源;
所述共享数据所源自的信号源将接收到的鼠标位置信息中的鼠标位置换算成本地鼠标位置,并根据换算后的鼠标位置和操控指令进行响应。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811197080.9A CN111049868B (zh) | 2018-10-15 | 2018-10-15 | 数据交互系统和数据交互方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811197080.9A CN111049868B (zh) | 2018-10-15 | 2018-10-15 | 数据交互系统和数据交互方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111049868A CN111049868A (zh) | 2020-04-21 |
CN111049868B true CN111049868B (zh) | 2020-08-25 |
Family
ID=70230411
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811197080.9A Active CN111049868B (zh) | 2018-10-15 | 2018-10-15 | 数据交互系统和数据交互方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111049868B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111818150B (zh) * | 2020-07-03 | 2021-03-05 | 重庆中科云仿科技有限公司 | 一种基于云平台的cae仿真系统 |
CN111813363B (zh) * | 2020-07-15 | 2023-08-18 | 锐捷网络股份有限公司 | 一种信息共享方法、装置、介质和设备 |
CN111949239B (zh) * | 2020-09-02 | 2022-07-08 | Tcl通讯(宁波)有限公司 | 一种屏幕共享方法、装置、存储介质及终端 |
CN112559111B (zh) * | 2021-02-25 | 2021-05-18 | 全时云商务服务股份有限公司 | 一种共享桌面时的截屏方法和装置 |
CN113535645B (zh) * | 2021-03-11 | 2023-08-18 | 北京字跳网络技术有限公司 | 共享文档的展示方法、装置、电子设备及存储介质 |
CN113238999A (zh) * | 2021-05-20 | 2021-08-10 | 广州极飞科技股份有限公司 | 数据共享方法、装置、电子设备及计算机可读存储介质 |
CN114579996B (zh) * | 2022-03-04 | 2022-08-30 | 北京仁光科技有限公司 | 移动盘数据交互系统和方法 |
CN115328372B (zh) * | 2022-07-30 | 2024-01-09 | 深圳乐播科技有限公司 | 同步显示方法、装置、电子设备及存储介质 |
CN117406896A (zh) * | 2023-09-14 | 2024-01-16 | 北京仁光科技有限公司 | 通过安卓端控制一个或多个信号源的方法和系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103414751A (zh) * | 2013-07-16 | 2013-11-27 | 广东工业大学 | 一种pc屏幕内容分享互动控制方法 |
CN103812915A (zh) * | 2012-11-15 | 2014-05-21 | 中兴通讯股份有限公司 | 资源共享方法、装置、系统及终端、资源管理中心 |
CN106357746A (zh) * | 2016-08-29 | 2017-01-25 | 武汉启目科技有限公司 | 一种远程操作智能终端的方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9082106B2 (en) * | 2010-04-30 | 2015-07-14 | American Teleconferencing Services, Ltd. | Conferencing system with graphical interface for participant survey |
-
2018
- 2018-10-15 CN CN201811197080.9A patent/CN111049868B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103812915A (zh) * | 2012-11-15 | 2014-05-21 | 中兴通讯股份有限公司 | 资源共享方法、装置、系统及终端、资源管理中心 |
CN103414751A (zh) * | 2013-07-16 | 2013-11-27 | 广东工业大学 | 一种pc屏幕内容分享互动控制方法 |
CN106357746A (zh) * | 2016-08-29 | 2017-01-25 | 武汉启目科技有限公司 | 一种远程操作智能终端的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN111049868A (zh) | 2020-04-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111049868B (zh) | 数据交互系统和数据交互方法 | |
CN111049790B (zh) | 数据交互方法 | |
JP7263442B2 (ja) | モバイルアプリケーションのリアルタイム遠隔制御のためのシステムおよび方法 | |
US11301200B2 (en) | Method of providing annotation track on the content displayed on an interactive whiteboard, computing device and non-transitory readable storage medium | |
CN107636584B (zh) | 协作系统中虚拟工作空间视口的跟随模式和位置标记 | |
EP2701152B1 (en) | Media object browsing in a collaborative window, mobile client editing, augmented reality rendering. | |
US7624192B2 (en) | Framework for user interaction with multiple network devices | |
JP3546705B2 (ja) | アプリケーション・ウインドウにアノテーション・データを対応付ける方法及び装置、システム、アプリケーション・ウインドウへのアノテーション・データの対応付けを制御するプログラムを格納した記憶媒体 | |
AU2013345759B2 (en) | Transmission system and program | |
EP2813942A1 (en) | Communication system and information processing device | |
US20180307406A1 (en) | Object processing and selection gestures for forming relationships among objects in a collaboration system | |
EP2429188A2 (en) | Information processing device, information processing method, computer program, and content display system | |
US20090006977A1 (en) | Method and System of Computer Remote Control that Optimized for Low Bandwidth Network and Low Level Personal Communication Terminal Device | |
CN102053867B (zh) | 一种动态切换图片的方法和装置 | |
CN110928506B (zh) | 数据交互系统和数据交互方法 | |
WO2006049506A1 (en) | A method for remote operation of a computer using a mobile device | |
WO2024045985A1 (zh) | 屏幕控制方法、屏幕控制装置、电子设备、程序及介质 | |
CN114510205B (zh) | 显示交互方法、显示设备、电子设备和存储介质 | |
US11799925B2 (en) | Communication system, communication terminal, and screen sharing method | |
JP2018525744A (ja) | アプリケーション及びデータをタッチスクリーンコンピュータ間で相互共有する方法並びにこの方法を実施するコンピュータプログラム | |
CN111083036B (zh) | 场景联动方法及场景联动系统 | |
US20080036695A1 (en) | Image display device, image display method and computer readable medium | |
CN117941323A (zh) | 用于管理虚拟工作空间的方法、设备和介质 | |
CN112511601B (zh) | 多屏幕数据交互系统和多屏幕数据交互方法 | |
JP2010020159A (ja) | 画面出力コンバータ、ディスプレイ装置、ディスプレイシステム、および画面表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |