CN107924298A - 用于在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该方法的计算机程序 - Google Patents

用于在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该方法的计算机程序 Download PDF

Info

Publication number
CN107924298A
CN107924298A CN201680049537.4A CN201680049537A CN107924298A CN 107924298 A CN107924298 A CN 107924298A CN 201680049537 A CN201680049537 A CN 201680049537A CN 107924298 A CN107924298 A CN 107924298A
Authority
CN
China
Prior art keywords
electronic equipment
shared
data
application
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680049537.4A
Other languages
English (en)
Inventor
法比恩·亨伯特
纪尧姆·麦赫什
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kai Ti Technology Co
Original Assignee
Kai Ti Technology Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kai Ti Technology Co filed Critical Kai Ti Technology Co
Publication of CN107924298A publication Critical patent/CN107924298A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/544—Buffers; Shared memory; Pipes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明涉及一种用于在至少两个电子设备之间交互式共享至少一个程序和/或至少一条数据的方法，该方法至少包括以下步骤：由至少一个第一电子设备发起至少一个共享会话；将至少一个第二电子设备连接到所述一个或多个开启的共享会话；在所述一个或多个开启的共享会话中，执行至少一个应用和/或至少一条数据和/或用于控制至少一个外设的至少一个接口；在通过连接到所述共享会话的电子设备中的每一个开启的所述一个或多个共享会话中，对至少一个应用和/或至少一条数据和/或用于控制至少一个共享外设的至少一个接口进行控制；在连接到所述一个或多个共享会话的每个电子设备上，对至少一个应用和/或至少一条数据和/或至少一个共享外设的至少一个控制接口执行显示模块；在连接到所述一个或多个共享会话的每个电子设备的显示屏上显示由所述电子设备中的至少一个共享的一个或多个应用和/或一条或多条数据和/或至少一个共享外设的控制接口。

Description

用于在触摸屏计算机之间交互式共享应用和数据的方法以及 用于实现该方法的计算机程序
技术领域
本发明涉及一种用于在诸如例如智能手机(又称为手持终端)、平板电脑或触控板(table tactile)之类的至少两个触摸屏计算机之间交互式共享应用和/或数据和/或外设的方法，以及一种用于实施该方法的计算机程序。更特别地，本发明涉及一种用于通过使所消耗的带宽最小并且使在外设上显示的数据的质量最好来在至少两个外设之间实时交换、查看及操作数据的方法。此外，本发明还使得多个人能够在同一外设上和/或在多个外设上同时键入和/或修改数据。
背景技术
在计算及电信领域，存在多种带有触摸屏的计算机，诸如被称为智能手机的手机、平板电脑或触控板、膝上电脑，该多种带有触摸屏的计算机可以以越来越多的方式用于日常生活中，尤其是被用来识别信息以及与其他用户共享信息。
无论是在私人领域和/或在专业领域，这种信息共享在日常生活中变得至关重要。
然而，尽管已知的共享系统提供了一些有趣的特征，但是仍然无法使得同时且实时地操作多个对象、并将其实时显示在不同的远程电子设备上。事实上，现有技术的数据共享系统只允许用户逐个操作。
此外，用于电话会议设备或视频会议设备的应用(applications)也是已知的，电话会议设备或视频会议设备使得能够在至少两个电子设备的两个屏幕之间进行屏幕共享。第一电子设备的第一屏幕以视频格式记录，然后其通过流式传输进行重传并被显示在第二电子设备的第二屏幕上。然而，由于图像每10ms或20ms传输一次，所以该方法是消耗带宽的。因此，该方法要求对视频数据进行强压缩，这样会降低图像的质量。除此之外，每当连接不好时，即一旦带宽较低时，交换的稳定性就很差。
为了克服上述缺陷，已经设计了能够在共享数据期间改进交互性的应用和/或数据共享方法。在美国专利申请US 8,965,349和欧洲专利申请EP 2,869,188中，尤其如此。
US 8,965,349公开了一种用于交互地共享应用的方法，该方法包括：由第一电子设备发起与第二电子设备的通信，其中，在通信开始后，传送来自第一电子设备的请求以与第二电子设备共享应用；在第一电子设备处接收来自第二电子设备的共享确认；在第一电子设备上显示与所述通信相关的应用和数据；第一电子设备给第二电子设备生成指令，其中，所述指令涉及在第二电子设备上显示应用；以及将指令传送给第二电子设备。所述指令为待在第二电子设备上显示的屏幕图像。所述通信可以是视频会议，并且在这种情况下，与通信相关的数据是视频会议的图像。因此，多个设备可以以如下方式共享应用或应用数据：电子设备的各用户可以查看另一用户的应用的数据、或通过共享的应用彼此交互。
文献EP 2,869,188公开了一种用于共享应用的电子设备以及一种用于控制该电子设备的方法。与客户端电子设备通信的服务器电子设备包括：通信单元，其被配置成形成与客户端电子设备的连接；控制器，其被配置成确定待与客户端电子设备共享的应用以为共享应用生成共享数据，并控制通信单元给客户端电子设备传送共享数据；以及屏幕，其被配置成显示共享应用的执行屏幕。该控制方法包括以下步骤：建立与客户端电子设备的连接；确定待与客户端电子设备共享的应用；生成共享应用的数据，其中，信息被用来共享；以及传送共享数据，然后将其显示在客户端电子设备的屏幕上。
然而，上述这些方法的缺点在于需要相当大的带宽，使得当带宽不够宽时，数据传输下降，从而不能在不同的电子设备之间进行实时交互。
因此，需要一种高效、简单、直观、稳定的解决方案，通过在远程用户所需的所有设备上进行多用户实时交互以及实时显示反馈以用于交互式共享所有类型的文档、文件、对象、应用、软件、或应用数据或软件。
发明内容
因此，本发明的目的之一在于通过提供一种在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该简单廉价的方法的计算机程序，同时使得能够交互式共享所有类型的文档、文件、对象、应用、软件或应用数据、或者软件，并且无论各设备之间的通信带宽如何都能在所有需要的设备上进行多用户实时交互以及实时显示反馈来克服上述这些缺点。
为此并且根据本发明，设置成在至少两个电子设备之间交互式共享至少一个程序和/或至少一个数据项和/或至少一个外设的方法至少包括以下步骤：
-由至少一个第一电子设备发起至少一个共享会话；
-将至少一个第二电子设备连接到开启的共享会话；
-在开启的共享会话中，执行至少一个应用和/或至少一个数据项和/或至少一个共享外设的至少一个控制接口；
-在通过连接到所述共享会话的所述电子设备中的每一个开启的一个或多个共享会话中，对至少一个应用和/或至少一个数据项和/或至少一个共享外设的至少一个控制接口进行控制；
-在连接到共享会话的所述电子设备上，对至少一个应用和/或至少一个数据项和/或至少一个共享外设的至少一个控制接口执行显示模块；
-在连接到共享会话的所述电子设备的屏幕上显示通过所述电子设备中的至少一个共享的所述应用和/或数据和/或至少一个共享外设的所述控制接口。
根据第一实施例，发起共享会话至少包括以下步骤：
-将第一电子设备连接到服务器；
-从所述电子设备开启共享会话。
根据第二实施例，发起共享会话至少包括以下步骤：
-从第一电子设备开启共享会话；
-将第一电子设备连接到服务器；
此外，根据本发明的方法还包括以下步骤：
-通过互联网连接将第一电子设备连接到服务器；
-由服务器识别所述第一电子设备作为客户端，
-将至少一个第二电子设备连接到服务器；
-由所述服务器在共享会话中识别所述一个或多个电子设备作为客户端；
-将至少一个命令或至少一个数据项从连接到共享会话的所述电子设备中的一个传送给在共享会话中执行的至少一个应用和/或至少一个数据项和/或至少一个控制接口；
-通过在共享会话中执行的所述应用和/或数据和/或控制接口来执行所述命令和/或所述数据；
-将通过在共享会话中执行的应用和/或数据和/或控制接口执行所述命令和/或数据得到的结果发送给显示模块。
除此之外，该方法包括以下步骤：
-由所述服务器根据数据的变化生成用于改变所述一个或多个电子设备的屏幕显示的至少一个命令；
-将所述命令传送给所述客户端电子设备以改变屏幕显示。
优选地，该方法还包括以下步骤：
-确定在时刻t和时刻t-1之间与第一电子设备的屏幕显示有关的数据的变化；
-将与所述第一电子设备的屏幕显示有关的所述数据的变化传送给所述服务器。
服务器位于所述电子设备中的至少一个上。
可替选地，服务器可以包括连接到通信网络的远程服务器。
有利地，服务器根据客户端电子设备和服务器之间的连接带宽为一个或多个客户端电子设备生成一个或多个命令。
当第一电子设备和第二电子设备之间的连接带宽小于或等于预定值时，压缩所述程序和/或所共享的数据。
在电子设备每次连接到共享会话期间，根据本发明的方法优选地还包括：确定隐私指示符以确定应用和/或数据和/或设备是否可以被全部或部分共享。
除此之外，在电子设备每次连接到共享会话期间，根据本发明的方法还包括：确定共享指示符以确定是否授权连接到共享会话的其他电子设备访问该电子设备的应用和/或数据和/或外设。
有利地，共享的应用和/或数据被记录在远程服务器或云上。
多个用户可以有利地在同一电子设备上操作应用和/或数据和/或外设。
优选地，至少一个电子设备包括触摸屏。
此外，根据本发明的方法包括：根据至少一个用户与电子设备之间的交互生成至少一个命令。该交互可以由本领域技术人员已知的任何方式来执行，诸如在触摸屏上按压、在Kinect系统(注册商标)前方移动等、移动鼠标、在键盘上输入等等。
手指在设备的触摸屏上的按压和/或移动生成传送给其它电子设备以显示指针的请求。
此外，两个手指在电子设备的触摸屏上的按压和/或移动生成传送给其他电子设备的、用于移动和/或缩放和/或改变位于手指下方的所述应用和/或数据的请求。
除此之外，该方法包括根据与所述电子设备交互的对象生成至少一个命令。
例如，与电子设备的触摸屏交互的笔在由所述电子设备的显示模块生成的窗口中生成注释。
有利地，每个共享会话的历史记录被记录在介质上。“每个共享会话的历史记录”指的是在各电子设备上显示的命令和/或元素和/或电子设备与共享会话连接/断开等。
此外，有利地，根据一个或多个电子设备的屏幕尺寸和/或电子设备的技术特征来调整由电子设备中的至少一个共享的应用和/或数据和/或外设应用和/或数据和/或外设在连接到共享会话的一个或多个电子设备的屏幕上的显示，即，尺寸和/或方向和/或定位。
除此之外，根据电子设备的屏幕尺寸和/或技术特征，在电子设备的屏幕上的显示对应于连接到共享会话的另一电子设备的至少一个确定的显示区域的放大或缩小。
本发明的另一目的涉及一种计算机程序产品，用于交互式共享至少两个电子设备之间的至少一个程序和/或至少一个数据项和/或至少一个外设，其中，所述计算机程序产品包括用于实现根据本发明的方法的一系列指令。
附图说明
根据附图，通过以下作为非限制性示例给出的在触摸屏计算之间交互式共享应用和数据的方法及用于实施根据本发明的方法的计算机程序的多个替选实施例的说明，本发明的其他优点和特征将变得明显，在附图中：
图1示出了根据本发明的触摸屏计算机的示意性表示框图，
图2示出了根据本发明的使得至少两个用户能够在根据本发明的单个触摸屏计算机上共享数据的方法的第一应用的示意性表示，
图3示出了根据本发明的使得根据本发明的第一触摸屏计算机的至少一个用户能够与根据本发明的至少一个第二触摸屏计算机的至少一个另一用户共享数据的方法的第二应用的示意性表示，
图4示出了根据本发明的方法的第一步骤的示意性流程图，
图5示出了根据本发明的方法的第二步骤的示意性流程图，
图6示出了根据本发明的方法的第三步骤的示意性流程图，
图7示出了根据本发明的方法的第四步骤的示意性流程图，
图8示出了根据本发明的方法的第五步骤的示意性流程图，
图9示出了根据本发明的方法的第六步骤的示意性流程图，
图10示出了根据本发明的方法的第七步骤的示意性流程图，
图11示出了使用根据本发明的方法在不同的触摸屏计算机之间的通信带宽较低的情况下的数据压缩步骤的示意性流程图，
图12是示出了根据本发明的方法的用于采用客户端触摸屏将由第一客户端触摸屏计算机发送的消息传送给其他触摸屏计算机的步骤的流程图，
图13是示出了根据本发明的方法的用于在第一客户端触摸屏计算机和其他客户端触摸屏计算机之间传送pdf文件的步骤的流程图，
图14是示出了根据本发明的方法的用于在第一客户端触摸屏计算机和其他客户端触摸屏之间传送视频的步骤的流程图，
图15A和图15B分别示出了根据本发明的第一触摸屏计算机和第二触摸屏计算机在时刻t处的显示的示意性表示，
图16A和图16B分别示出了根据本发明的第一触摸屏计算机和第二触摸屏计算机在时刻t+1处的显示的示意性表示，
图17A和图17B分别示出了根据本发明的第一触摸屏计算机和第二触摸屏计算机在时刻t+2处的显示的示意性表示。
具体实施方式
下面将对根据本发明的包括文件共享模块的触摸屏平板电脑或触控板类型的计算机进行描述；然而，显而易见的是，在不脱离本发明的范围的情况下，该计算机可以包括任何类型的有或没有触摸屏的计算机，诸如智能手机或PC类型的计算机。
参照图1，图1为根据本发明的可以用来交互式共享应用和/或数据和/或外设的电子设备100的示例的框图，电子设备100可以是诸如智能手机、触控板或平板电脑、膝上电脑、数码相机、数字电话手机等等之类的便携设备，其中，电子设备100至少包括中央处理单元(CPU)110，CPU 110控制电子设备100的各种操作并且可以与该设备的其他部件交互。处理器110可以是本领域技术人员已知的任何处理器，诸如例如由销售的或处理器或由公司销售的A4或A5处理器。处理器可以包括单核微处理器或多核微处理器。多核微处理器可以理解为指的是具有多个并行工作的物理内核的微处理器，其中，每个物理内核包括能够自动执行程序以及执行程序所需的功能的一组电路，其中，这些内核包括：程序计数器、寄存器、计算单元等。而且，需要注意的是，虽然图1中仅示出了一个处理器，但是电子设备100可以包括多个处理器。例如，可以使用图形处理单元(GPU)，其中，所述图形处理器本身就是公知的通常存在于图形卡、母板或CPU 110上并提供显示计算功能的集成电路。
显而易见的是，在不脱离本发明的范围的情况下，电子设备100可以是诸如台式计算机、PC、数字电话基座、电视机、媒体中心等等之类的固定设备。
此外，可以观察到，在图1中，连接电子设备的各种元件的线表示元件之间的通信路径，其中，这些通信路径可以是双向或全向的。
除了微处理器110之外，电子设备100还包括存储器120或其他类似的存储设备、用户输入模块130、输入/输出端口140(使得能够向设备100传送数据或者将数据传送到设备100)、显示屏150和内部或外部外设160。内部或外部外设160例如包括使得电子设备的用户能够根据本发明来实施与另一个人(诸如第二电子设备的用户)的视频会议的相机、摄像装置、打印机、红外探测器或传感器。应该注意的是，用户输入模块130通常使得用户能够操作电子设备100的某些功能(包括交互或共享装置的存储中驻留的或者由处理器110执行的应用)，并且可以包括诸如触摸板、键盘、鼠标、触控笔等之类的设备，其中，所述外设可以经由有线或无线连接(例如，Wi-Fi或蓝牙)被连接到电子设备或触摸屏，其中，所述触摸屏还形成显示屏150。该触摸屏可以包括电容式、电阻式屏幕，或者可以基于对电子波的干扰、或者可以是本领域技术人员已知的任何类型的触摸屏。
此外，根据本发明的电子设备包括被称为共享模块170的软件，共享模块170使得能够如下文详细所描述的那样对与交互式共享一个或多个应用和/或数据和/或外设有关的方面和交互进行控制。“软件”指的是一组机器可解释的指令序列和上述操作所需的数据集。因此，软件包括存储在存储器120中并且每当应用被共享或者共享被发起时由处理器110来执行的计算机程序。
不言而喻，在不脱离本发明的范围的情况下，共享模块170可以包括固件、硬件或软件、或者他们的组合。此外，共享模块170可以整体或部分驻存在服务器或其他远程设备上并且可以被从事共享应用的其他电子设备访问。
该共享模块170使得能够在多个用户之间或者两个或多个本地或远程的电子设备之间交互式共享单个电子设备100上的数据、文件、应用或软件、或者应用软件数据。
这些数据、文件、应用、软件、或者应用软件数据因此可以被多个设备上的多个用户访问。多个用户可以甚至例如位于诸如触摸板或垂直的交互式屏幕之类的单个设备上。除此之外。一些电子设备不需要用户作为服务器。然后，每个用户可以访问被设置成可访问的数据、文件、应用或软件、或者应用软件数据。每个电子设备的每个用户可以通过共享的软件或应用来实时显示、查看、修改以及操作不同的文件、数据、对象、应用或软件；这在每个电子设备上是单独进行或多个一起进行，并且同时与其他用户执行所有操作。因此，共享模块170使得所有用户能够单独在所有设备上进行交互或者多个在每个设备上同时进行交互。根据每个用户被赋予来显示、查看、修改和操作各种数据、文件、对象、应用或软件或者应用软件数据的可能的权限；或者甚至是根据被赋予给数据、文件、对象、应用或软件、或者应用软件数据的可能的权限，该共享将是可能的。
用户的所有动作可以在根据本发明的各种电子设备上几乎即时进行反馈显示的同时被执行。
以这种方式，多个用户可以共享信息并进行协作，而不必实际在场，这是由于他们可能希望聚集在单个设备周围并且同时在单个电子设备上彼此交互。
例如，在巴黎的一用户可以在触摸交互板上操作绘图，其中，所述触摸交互板形成根据本发明的第一电子设备，另一用户可以在同一板的角上作注释，在纽约的第三个用户在另一触摸板(即根据本发明的第二电子设备)的另一角上做标记，在莫斯科的第四个用户可以在中心显示他的智能手机相机(即根据本发明的第三电子设备)正在拍摄的照片，与此同时，在东京的其他用户在交互式板上查看上述元素(élément)，并且可以与每个元素进行交互。因此，所有用户可以看到各种图形元素并与它们进行交互。
为此，所有的电子设备能够通过某种方式(网络、电话信息等)彼此交互，其中，所有设备都装配有用于电子设备彼此之间或者至少与被指定为服务器的电子设备对话的电子部件和驱动器。
电子设备可以用作交互式共享方案软件的主机，并且其他电子设备可以仅需要通过也被安装在该电子设备上的该相同的共享应用来传送它们的数据或用户的动作。然后，“服务器”应用可以将显示信息发送给希望得到该显示反馈的各个电子设备。所显示的各个对象的方向可以由显示它们的电子设备来解释以将方向调整为适于使用。
交互共享模块170还用作网关，用于管理并组织用户界面和所有电子设备以及所有设备和内部或外部设备的外设的功能。用户与电子设备的交互方式取决于每个电子设备。所有的用户设备的交互方式是可能的。
在远程使用期间，与现有技术的方法不同，根据本发明的方案使得能够通过不永久传送用户的屏幕的视频来限制带宽消耗。根据本发明，每个电子设备具有与其自身的图形构件一起交互的屏幕。构件是软件部件。除此之外，针对未被压缩的项，屏幕上的渲染质量也将得到提高。
参照图2，至少两个或多个用户(n个用户)交互式共享电子设备100上的数据、文件、应用或软件、或者应用或软件数据并且可以同时与不同的元件交互。这个方案使得每个用户能够在电子设备100上同时主动协作。该方案的优点在于，使得n个用户能够相协作以一起同时进行实时交互，并共享所有种类的数据、文件、应用或软件、或者应用软件数据。
参照图3，至少一个或多个用户与在至少一个其他电子设备上的至少一个另一用户交互式共享第一电子设备100上的数据、文件、应用或软件、或者应用软件数据，并且可以同时与各个电子设备的各个用户交互。该方案使得每个用户能够采用允许显示的各个设备上的几乎实时的显示反馈来在各个电子设备上主动协作。当有至少两个用户想要在至少两个远程电子设备上共享、协作以及交互，以使得它们可以相协作、共享交互数据、文件、应用或软件、或者应用软件数据而不必实际存在于相同的地理位置时，该方案特别有用。
参照图4至图10，在第一步骤(图4)中，共享模块170使得能够经由例如互联网连接将第一电子设备100连接到服务器180，并通过服务器180识别第一电子设备100作为客户端。参照图5，第一电子设备100然后向服务器180传送创建共享会话的请求，同时服务器180创建共享会话并将与该共享会话有关的信息传送给第一设备100。参照图6，第一电子设备100给其他电子设备100发送连接到共享会话的邀请。该邀请可以以不同方式进行。根据第一实施例，用户从第一电子设备100向其他电子设备的用户发送邀请邮件。在第二实施例中，连接到共享会话的邀请邮件可以由服务器180自动生成，并通过服务器180发送给其他电子设备的用户。可替选地，在不脱离本发明的范围的情况下，连接到共享会话的邀请可以由电话、被称为In-App的通知等等来执行。应该注意的是，接收到连接到共享会话的邀请的每个新的电子设备也可以例如经由电子邮件地址簿给其他电子设备发送连接到该会话的邀请。
参照图7，其他电子设备100接受来自服务器180的邀请，然后服务器180测试每个电子设备100与服务器180连接的比特率。每当电子设备连接到服务器时，对连接比特率进行检查以选择信息传输模式和所发送的信息质量。使用这种方式，人们可以将连续(nonsaccadés)且愉快交流的机会最大化。除此之外，稍后定期检查连接速度以根据连接带宽调整传输模式和发送质量。
参照图8，当第一电子设备100加载诸如例如图像的数据时，该图像被实时传送到其他电子设备100。应该注意的是，根据电子设备100和服务器180之间的连接比特率，可以对由服务器180传送给其他电子设备的图像进行压缩(如稍后将详细描述的)。一旦用户要下载图像，如果不同用户的连接不够强或者如果该图像太大，必要的话，修改该图像的大小。可选地压缩该图像以使所使用的比特率最小。因此，与现有技术的方法不同，电子设备的显示屏上的渲染在没有任何图像质量损失的情况下是相同的，并且只有该图像而不是整个屏幕被传输。参照图9，当第一电子设备的用户在来自他们的电子设备的图像上执行动作时，诸如例如移动或缩放图像，与该移动和/或缩放有关的数据被传送给服务器180，然后服务器180将该数据重新传送给另一电子设备100，以使得将该图像的移动和/或缩放显示在其他电子设备100的屏幕上。使用这种方式，不重新加载整个图像，仅将位置的变化及缩放因子的变化传送到服务器180，然后再传送给各个电子设备。因此，与现有技术的流传输相比，这节省了大量带宽。随后，参照图10，当一电子设备100添加注释并且当另一电子设备100添加新的图像时，数据被分别传送到服务器180，然后服务器180再将数据实时传送给所有其他的电子设备，用于如图15A-图17B所示在电子设备上显示数据。在该示例中，两个用户同时进行交互，其中，第一用户创建注释，第二用户添加图像。在第一用户的注释的情况下，只有对象的位置和文字(字体)被传输，这减少了所使用的带宽的量。在添加视频的情况下，对视频实时进行流传输，但是仅流传输视频的框架，而不是包括该视频的显示屏。
参照图11，共享模块170包括使得能够选择数据将如何进行传输的压缩模块。根据客户端比特率和/或会议类型和/或对象大小，确定对数据传输的选择：传输原始数据(未压缩)或调整数据的大小。因此，在与客户端1对应的第一电子设备100和服务器180之间的连接的质量较差的情况下，数据在被传送到服务器180和与客户端2对应的电子设备100之前被压缩。假定与客户端1对应的第一电子设备100和服务器180之间的连接的质量良好，但是服务器180与客户端2对应的电子设备100之间的质量较差，则由客户端1传送的数据在未压缩的情况下被发送给服务器180，然后服务器180压缩该数据以将它们传送给与客户端2对应的电子设备100。
因此，参照图13，在从第一电子设备100给服务器180传输pdf型文件(步骤200)期间，在步骤210中，共享模块确定该pdf型文件的大小是否太大。如果该pdf型文件的大小太大，则在步骤220中，共享模块确定图像文件必须被发送给其他电子客户端设备100。在步骤230中，服务器共享模块180检查服务器180和客户端电子设备之间的连接，并且如果该连接具有足够的比特率，则在步骤240中，高质量的图像被传送给客户端电子设备，反之，如果该连接的比特率不足，则在步骤250中，低质量的图像被传送给客户端电子设备。假定pdf型文件的大小太大，共享模块检查服务器180和客户端电子设备之间的连接的比特率，并且如果该连接具有足够的比特率，则在步骤270中，共享模块确定以pdf格式的完整文件被传送给客户端电子设备，反之，如果该连接的比特率不足，则在步骤220中，共享模块确定图像文件必须被发送给其他的客户端电子设备100。
在视频会议的情况下，参照图14，在步骤300中，当视频会议请求被传送给服务器180时，在步骤310中，服务器共享模块180测试该服务器与其他电子设备100连接的比特率。如果连接的比特率不足，则服务器180给对应的电子设备发送低质量的有声音的视频(320)。如果连接比特率非常不足，则服务器180仅给对应的电子设备发送声音(330)，反之，如果连接比特率足够，则服务器180给对应的电子设备发送高质量的有声音的视频(340)。
此外，参照图12，共享模块170包括驻存在可由连接到互联网的任何设备访问的公共服务器上的服务器模块。该服务器可以包括远程服务器或在其中一个电子设备100上的嵌入式服务器。该服务器模块借助于标识符对用户的连接、被授权访问这些连接的人以及会议室进行管理。然后，该模块将接收来自客户端的消息并将它们重新分配给正确的人。这种重新分配以智能的方式进行，并且传送的命令将根据可用于用户的带宽而不同。因此，参照图12，在步骤400中，服务器模块接收并监听由电子设备传送的消息，然后在步骤410中对包含在消息中的访问权限进行验证。如果访问被拒绝，则在步骤420中，服务器模块与电子设备断开连接。如果访问被允许，则在步骤430中服务器模块解析消息以确定该消息是否是为配置消息或协作消息。如果该消息是配置消息，则在步骤440中，服务器模块验证高安全性访问是否被授权并且如果该访问被授权，在步骤450中继续进行配置，或者如果该访问未被允许，则断开连接(420)。如果该消息是协作消息，则在步骤460中，服务器模块搜索与该消息对应的会议室，并在步骤470中将该消息发送给连接到正在讨论的会议室的不同用户。在该消息被发送到各用户之前，在步骤480中可以根据每个用户与服务器180的连接的质量对消息的内容进行压缩。
此外，根据本发明的方法包括根据至少一个用户与电子设备之间的交互生成至少一个命令的步骤。该交互可以由本领域技术人员已知的任何装置来执行，诸如在触摸屏上的按压、在Kinect系统(注册商标)前方移动等、鼠标的移动、键盘上的输入等等。
例如，在设备的触摸屏上按压和/或移动手指生成传送给其他电子设备用于显示指针的请求，同时采用两个手指在设备的触摸屏上按压和/或移动生成被传送给其他设备用于移动和/或缩放和/或改变位于手指下方的应用和/或数据的请求。
除此之外，该方法包括根据与所述电子设备交互的对象生成至少一个命令的步骤。例如，与电子设备的触摸屏交互的笔在由所述电子设备的显示模块生成的窗口中生成注释。
有利地，每个共享会话的历史记录被记录在介质中。“每个共享会话的历史记录”指的是在各电子设备上显示的命令和/或元素和/或电子设备与共享会话连接/断开等。
根据本发明的方法包括加载给定共享会话的最后状态的步骤。术语“状态”指的是事先保存的所有应用和/或数据和/或控制接口。在这种情况下，共享会话的所有电子设备被自动连接到共享会话，并且所有的应用和/或数据和/或控制接口被自动共享在电子设备上，其中，在连接到共享会话的各电子设备的屏幕上显示的所述应用和/或数据和/或控制接口为在最终关闭共享会话期间所显示的那些，其中，在关闭共享会话期间保存最终显示的那些应用和/或数据和/或控制接口。使用这种方式，能够例如在休息几小时和/或几天之后重新开始工作会话。
此外，有利地，根据一个或多个电子设备的屏幕尺寸和/或电子设备的技术特征来调整由电子设备中的至少一个共享的应用和/或数据和/或外设应用和/或数据和/或外设在连接到共享会话的一个或多个电子设备的屏幕上的显示，即，尺寸和/或方向和/或定位。
除此之外，根据电子设备的屏幕尺寸和/或技术特征，在电子设备的屏幕上的显示对应于连接到共享会话的另一电子设备的至少一个确定的显示区域的放大或缩小。
最后，很显然，平板电脑或触摸屏板可以是本领域技术人员已知的任何电子设备，并且上文中给出的示例仅作为特别的说明，绝不是对本发明的应用场景的限制。

Claims (25)

1.一种用于在至少两个电子设备之间交互式共享至少一个程序和/或至少一个数据项和/或至少一个外设的方法，所述方法至少包括以下步骤：
-由至少一个第一电子设备发起至少一个共享会话；
-将至少一个第二电子设备连接到开启的共享会话；
-在所述开启的共享会话中，执行至少一个应用和/或至少一个数据项和/或至少一个共享外设的至少一个控制接口；
-在连接到所述共享会话的电子设备中的每个电子设备所开启的一个或多个共享会话中，对所述至少一个应用和/或至少一个数据项和/或至少一个共享外设的至少一个控制接口进行控制；
-在连接到所述共享会话的电子设备上，执行所述至少一个应用和/或至少一个数据项和/或至少一个共享外设的至少一个控制接口的显示模块；
-在连接到所述共享会话的所述电子设备的屏幕上显示由所述电子设备中的至少一个共享的所述应用和/或数据和/或至少一个共享外设的所述控制接口。
2.根据权利要求1所述的方法，其中，发起所述共享会话至少包括以下步骤：
-将第一电子设备连接到服务器；
-从所述电子设备开启共享会话。
3.根据权利要求1所述的方法，其中，发起所述共享会话至少包括以下步骤：
-从第一电子设备开启共享会话；
-将所述第一电子设备连接到服务器。
4.根据权利要求1至3中任一项所述的方法，还包括以下步骤：
-通过互联网连接将第一电子设备连接到服务器；
-所述服务器识别所述第一电子设备作为客户端；
-将至少一个第二电子设备连接到所述服务器；
-所述服务器在所述共享会话中识别一个或多个电子设备作为客户端；
-将至少一个命令或至少一个数据项从连接到所述共享会话的所述电子设备中的一个电子设备传送到在所述共享会话中执行的至少一个应用和/或至少一个数据项和/或至少一个控制接口；
-通过在所述共享会话中执行的所述应用和/或数据和/或控制接口来执行所述命令和/或所述数据；
-将在所述共享会话中执行的所述应用和/或数据和/或控制接口执行所述命令和/或所述数据所得到的结果传送给所述显示模块。
5.根据权利要求4所述的方法，还包括以下步骤：
-所述服务器根据所述数据的变化生成至少一个命令，用于改变所述一个或多个客户端电子设备所显示的屏幕；
-将所述命令传送给所述客户端电子设备以改变所显示的屏幕。
6.根据权利要求4或5中任一项所述的方法，还包括以下步骤：
-确定在时刻t和时刻t-1之间与第一电子设备所显示的屏幕有关的数据的变化；
-将与所述第一电子设备所显示的屏幕有关的所述数据的变化传送给所述服务器。
7.根据权利要求4至6中任一项所述的方法，其中，所述服务器位于所述电子设备中的至少一个上。
8.根据权利要求4至6中任一项所述的方法，其中，所述服务器包括连接到通信网络的远程服务器。
9.根据权利要求4至8中任一项所述的方法，其中，所述服务器根据所述一个或多个客户端电子设备和所述服务器之间的连接带宽为所述一个或多个客户端电子设备生成一个或多个命令。
10.根据权利要求1至9中任一项所述的方法，其中，当所述第一电子设备和所述第二电子设备之间的连接带宽小于或等于预定值时，压缩所述程序和/或所共享的数据。
11.根据权利要求1至10中任一项所述的方法，还包括以下步骤：在电子设备每次连接到所述共享会话时，确定隐私指示符以确定所述应用和/或所述数据和/或设备是否被全部或部分地共享。
12.根据权利要求1至11中任一项所述的方法，还包括以下步骤：当电子设备每次连接到所述共享会话时，确定共享指示符以确定连接到所述共享会话的其他设备被允许还是阻止访问所述电子设备的应用和/或数据和/或设备控制接口。
13.根据权利要求1至12中任一项所述的方法，其中，所述应用和/或所共享的数据被存储在远程服务器或云上。
14.根据权利要求1至13中任一项所述的方法，其中，多个用户在同一电子设备上操作所述应用和/或所述数据和/或所述外设。
15.根据权利要求1至14中任一项所述的方法，其中，至少一个电子设备包括至少一个触摸屏。
16.根据权利要求1至15中任一项所述的方法，其中，所述方法包括以下步骤：根据至少一个用户和所述电子设备之间的交互生成至少一个命令。
17.根据权利要求16所述的方法，其中，手指在所述电子设备的触摸屏上的按压和/或移动生成传送给其他电子设备的、用于显示指针的请求。
18.根据权利要求16或17所述的方法，其中，两个手指在所述电子设备的触摸屏上的按压和/或移动生成传送给其他电子设备的、用于移动和/或缩放和/或改变位于手指下方的所述应用和/或数据的请求。
19.根据权利要求1至18中任一项所述的方法，其中，所述方法包括以下步骤：根据与所述电子设备交互的对象来生成至少一个命令。
20.根据权利要求19所述的方法，其中，与电子设备的触摸屏交互的笔在所述电子设备的显示模块所生成的窗口中生成注释。
21.根据权利要求1至20中任一项所述的方法，其中，每个共享会话的历史被记录在介质上。
22.根据权利要求1至21中任一项所述的方法，其中，根据所述一个或多个电子设备的屏幕尺寸和/或所述一个或多个电子设备的技术特征来调整由所述电子设备中的至少一个共享的所述应用和/或所述数据和/或所述外设在连接到共享会话的所述一个或多个电子设备的屏幕上的显示，即，尺寸和/或方向和/或定位。
23.根据权利要求1至22中任一项所述的方法，其中，根据所述电子设备的屏幕尺寸和/或技术特征，在所述电子设备的屏幕上的显示对应于连接到所述共享会话的另一电子设备的至少一个确定的显示区域的放大或缩小。
24.根据权利要求1至23中任一项所述的方法，其中，当所述电子设备中的一个关闭所述共享会话时，所述应用和/或数据和/或控制接口被保存，以及当重新开启所述共享会话时，所述共享会话的所有电子设备被自动连接到所述共享会话，同时所有的所述应用和/或数据和/或控制接口在所述电子设备上被自动共享。
25.一种计算机程序产品，用于在至少两个电子设备之间交互式共享至少一个程序和/或至少一个数据项和/或至少一个设备，其中，所述计算机程序产品包括用于实现根据权利要求1至24中任一项所述的方法的一系列指令。
CN201680049537.4A 2015-08-04 2016-08-03 用于在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该方法的计算机程序 Pending CN107924298A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1557526A FR3039906B1 (fr) 2015-08-04 2015-08-04 Procede de partage interactif d'applications et de donnees entre ordinateurs a ecran tactile et programme d'ordinateur pour la mise en œuvre dudit procede
FR1557526 2015-08-04
PCT/EP2016/068569 WO2017021460A1 (fr) 2015-08-04 2016-08-03 Procédé de partage interactif d'applications et de données entre ordinateurs à écran tactile et programme d'ordinateur pour la mise en œuvre dudit procédé

Publications (1)

Publication Number Publication Date
CN107924298A true CN107924298A (zh) 2018-04-17

Family

ID=55451257

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680049537.4A Pending CN107924298A (zh) 2015-08-04 2016-08-03 用于在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该方法的计算机程序

Country Status (6)

Country Link
US (1) US20180234505A1 (zh)
EP (1) EP3326066A1 (zh)
JP (1) JP2018525744A (zh)
CN (1) CN107924298A (zh)
FR (1) FR3039906B1 (zh)
WO (1) WO2017021460A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111124339A (zh) * 2019-12-23 2020-05-08 维沃移动通信有限公司 一种界面分享方法及电子设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3079048B1 (fr) * 2018-03-19 2021-11-19 Fabian Humbert Procede d’interaction entre d’une part au moins un utilisateur et/ou un premier dispositif electronique et d’autre part un second dispositif electronique
JP7146434B2 (ja) * 2018-04-20 2022-10-04 キヤノン株式会社 通信装置およびその制御方法、プログラム
TWI771660B (zh) * 2020-03-05 2022-07-21 大陸商東莞寶德電子有限公司 滑鼠裝置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101472135A (zh) * 2007-12-27 2009-07-01 苏州新际多媒体技术有限公司 一种多媒体信息的交互式处理方法和装置
CN102656564A (zh) * 2009-12-15 2012-09-05 国际商业机器公司 降低应用处理中的开销
EP2575327A1 (fr) * 2011-09-30 2013-04-03 France Télécom Procédé de partage d'une application web entre plusieurs terminaux informatiques reliés à un réseau de communication
US20130194374A1 (en) * 2012-01-26 2013-08-01 Apple Inc. Interactive application sharing

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120079399A1 (en) * 2010-09-28 2012-03-29 Ahmet Mufit Ferman Methods and Systems for Routing Meeting-Related Content
JP6051549B2 (ja) * 2012-03-16 2016-12-27 株式会社リコー 通信制御システム、制御装置、プログラムおよび電子情報ボード
US9250983B2 (en) * 2012-06-01 2016-02-02 Blackberry Limited System and method for sharing items between electronic devices
JP6020397B2 (ja) * 2013-09-12 2016-11-02 株式会社リコー 画像処理装置および画像処理システム
KR102107404B1 (ko) 2013-10-30 2020-05-07 삼성전자주식회사 어플리케이션을 공유하는 전자 장치 및 그 제어 방법
RO131668A2 (ro) * 2015-06-08 2017-01-30 Ixia, A California Corporation Metode, sisteme şi suport citibil pe calculator, pentru partajarea sesiunii de aplicaţie
US20180167426A1 (en) * 2015-10-29 2018-06-14 CrankWheel ehf. Multiplatform Screen Sharing Solution for Software Demonstration

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101472135A (zh) * 2007-12-27 2009-07-01 苏州新际多媒体技术有限公司 一种多媒体信息的交互式处理方法和装置
CN102656564A (zh) * 2009-12-15 2012-09-05 国际商业机器公司 降低应用处理中的开销
EP2575327A1 (fr) * 2011-09-30 2013-04-03 France Télécom Procédé de partage d'une application web entre plusieurs terminaux informatiques reliés à un réseau de communication
US20130194374A1 (en) * 2012-01-26 2013-08-01 Apple Inc. Interactive application sharing

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111124339A (zh) * 2019-12-23 2020-05-08 维沃移动通信有限公司 一种界面分享方法及电子设备
CN111124339B (zh) * 2019-12-23 2021-06-04 维沃移动通信有限公司 一种界面分享方法及电子设备
US12106127B2 (en) 2019-12-23 2024-10-01 Vivo Mobile Communication Co., Ltd. Interface sharing between electronic devices

Also Published As

Publication number Publication date
JP2018525744A (ja) 2018-09-06
WO2017021460A1 (fr) 2017-02-09
FR3039906A1 (fr) 2017-02-10
FR3039906B1 (fr) 2018-09-07
EP3326066A1 (fr) 2018-05-30
US20180234505A1 (en) 2018-08-16

Similar Documents

Publication Publication Date Title
US8965349B2 (en) Interactive application sharing
US10574735B2 (en) Application of asset control features to assets in a shared workspace
US9479549B2 (en) Collaboration system with whiteboard with federated display
US9386270B2 (en) Displaying information about at least one participant in a video conference session
CN101535973B (zh) 用于在协作对话期间动态共享显示器的一部分的方法和设备
CN1825808B (zh) 向用户提供另一类用户的视觉体验内容视图的系统和方法
CN111290695B (zh) 基于优先级控制的终端控制方法、装置和终端
CN103597468A (zh) 用于视频通信系统中改进的交互式内容共享的系统和方法
US9058475B2 (en) Account creating and authenticating method
KR20150032674A (ko) 통신 시스템
EP3466023B1 (en) Interactive display synchronisation
CN101484886A (zh) 动态共享基于应用的屏幕采样的一部分显示的方法和装置
CN111309226B (zh) 基于通信质量的终端控制方法、装置、终端和计算机设备
CN107924298A (zh) 用于在触摸屏计算机之间交互式共享应用和数据的方法以及用于实现该方法的计算机程序
US9756096B1 (en) Methods for dynamically transmitting screen images to a remote device
CN111273850A (zh) 终端控制方法、装置、计算机设备和存储介质
CN117044189A (zh) 用于改进视频会议的多用户交互板
CN105359513B (zh) 用于视频会议中的房间系统配对的系统和方法
TWI602436B (zh) 虛擬會議系統
KR20120079636A (ko) 다자간 회의에서 문서 작업 공유 방법
CN107885811B (zh) 一种共享文件显示方法、装置、设备及存储介质
CN111314442B (zh) 基于分时控制的终端控制方法、装置、终端和计算机设备
CN111263004B (zh) 终端控制方法、装置、计算机设备和存储介质
US20090183087A1 (en) Method and Apparatus for Real Time Image Transfer Between Two or More Computers
TWM491308U (zh) 虛擬會議系統

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180417