CN117941323A - 用于管理虚拟工作空间的方法、设备和介质 - Google Patents
用于管理虚拟工作空间的方法、设备和介质 Download PDFInfo
- Publication number
- CN117941323A CN117941323A CN202280059880.2A CN202280059880A CN117941323A CN 117941323 A CN117941323 A CN 117941323A CN 202280059880 A CN202280059880 A CN 202280059880A CN 117941323 A CN117941323 A CN 117941323A
- Authority
- CN
- China
- Prior art keywords
- local
- user
- workspace
- devices
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 112
- 238000004891 communication Methods 0.000 claims description 63
- 230000004044 response Effects 0.000 claims description 30
- 230000015654 memory Effects 0.000 claims description 18
- 238000012545 processing Methods 0.000 claims description 12
- 230000002093 peripheral effect Effects 0.000 claims description 8
- 230000005540 biological transmission Effects 0.000 claims description 6
- 230000002452 interceptive effect Effects 0.000 claims description 6
- 230000003213 activating effect Effects 0.000 claims description 3
- 230000003993 interaction Effects 0.000 description 21
- 239000004106 carminic acid Substances 0.000 description 13
- 238000009877 rendering Methods 0.000 description 8
- 238000013459 approach Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000012546 transfer Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 5
- 230000000977 initiatory effect Effects 0.000 description 4
- 238000005755 formation reaction Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 2
- 230000001404 mediated effect Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000005355 Hall effect Effects 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000001149 cognitive effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0486—Drag-and-drop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
Abstract
描述了用于管理由多个设备共享的虚拟工作空间的方法、设备和处理器可读介质。向每个设备呈现统一GUI,其中,共享所述虚拟工作空间的其它设备由GUI元素表示,在同一本地环境内存在的其它本地设备的位置对应于围绕GUI屏幕的周边的对应GUI元素的显示位置。所述其它本地设备的所述位置基于来自所述本地设备的传感器数据(例如NFC无线数据或其它短程传感器数据)确定,而不需要专用的、专门定位的相机或用于追踪所述本地环境中的所述设备的其它传感器。
Description
技术领域
本申请大体上涉及用于协作工作的多用户虚拟环境,尤其涉及用于管理由多个设备共享的虚拟工作空间的方法、设备和介质。
背景技术
随着工作越来越多地在计算机和其它电子设备上进行,对工具的需求越来越大,以便于多设备多用户之间的工作协作。目前类似工具已经开发了几种,而现有的多用户或多设备协作方法一般分为三类。
现有方法中,第一种是基于云的虚拟设备和虚拟存储。Google DriveTM、Microsoft OneDriveTM、DropBoxTM以及Apple iCloudTM等工具都提供了基于云的存储,可以由多个用户访问,并使用户能够在多个设备上协调(即“同步”)一组共享数据(如文件)。但是,这种方法受到多用户实时交互能力的限制;相反,将文件上传到云服务器和从云服务器下载文件是协作的瓶颈。由于存储在云中的每个文件的每个更新都需要上传和下载,用户的网速也限制了用户处理共享数据的能力。此外,这些工具的访问控制和安全特征通常是初级的;根据Gartner(Kasey Panetta,“云安全吗?(Is the Cloud Secure?)”,Gartner,2019年10月19日,https://www.gartner.com/smarterwithgartner/is-the-cloud-secure/),到2025年,90%的组织无法控制公共云使用,会无意或不当地共享信息。
现有的多设备协作方法中,第二种是以基于云的协作平台,例如Google DocsTM、MiroTM、ZoomTM以及aggie.ioTM。这些平台使用户能够随时随地通过任何类型的用户设备或软件平台(例如,手机、不同的桌面计算机操作系统等)进行输出,从而可以轻松地邀请更多的人加入一个协作项目。Google DocsTM支持多用户编辑同一文件;MiroTM是用于构思和头脑风暴的在线协作白板;ZoomTM支持在线会议期间的屏幕共享和文件共享;aggie.ioTM支持用户使用基于网页浏览器的界面通过互联网实时绘制图片。但是,这种方法也有一些限制。首先,使用这些平台进行内容共享通常比较复杂:当进行屏幕共享等常见的协作任务时,用户需要执行三个步骤(停止共享,将控制权交给另一个用户,开始共享新用户的屏幕)。同样,与个人或群组共享文件通常至少需要四个步骤(打开聊天窗口,从下拉菜单中选择用户或群组,使用文件浏览器界面选择文件,确认文件共享操作)。第二个限制是,在运行协作会话时难以进行文件共享和窗口管理:在基于云的协作期间,如果用户没有第二台监视器,则用户的本地桌面通常被协作平台界面完全占据或遮挡,从而使需要与用户的本地桌面交互的任务的执行复杂化,例如在查看另一个用户的演示时做笔记,或者在在线会议期间查找本地文件时,不得不频繁地在用户的本地工作空间与协作工作空间之间切换。这为与协作平台的内容交互增加了额外的时间,并给用户带来了认知负荷。第三个限制是,远程通信通常会减少用户参与少:因为缺乏面对面互动中所存在的上下文(如面部表情和身体手势),与面对面接触相比,在线协作会降低沟通质量,并减慢决策进度。
现有的多用户协作方法中,第三种是点对点(peer-to-peer,P2P)文件共享应用,包括Apple AirDropTM和Android BeamTM等面对面或近距离文件共享技术,以及Takeafile.com等基于网络的P2P文件共享软件。面对面P2P文件共享通常使用近场通信(near field communication,NFC)等短距离无线技术,直接以无线方式将数字数据从一个设备发送到另一个设备。基于网络的P2P文件共享通常使用WebRTC等P2P网络协议将文件从一个网络连接的设备传输到另一个设备,而无需使用中间服务器来存储文件。虽然P2P文件共享可以提供一种快速安全的数据传输技术,但这种方法不适合实时协作工作,如实时协作文档编辑或任何实时协作内容创建。
除了上述三种现有的多用户协作方法,研究人员还提出了多种面对面多设备协作方法,用于在面对面会议期间跨多个设备进行实时协同创建。这类提议包括如下系统等:Micro-mobility和F-formation,描述于“通过micro-mobility和f-formation的跨设备交互(Cross-device interaction via micro-mobility and f-formations)”,UIST'12:第25届ACM用户界面软件和技术年度研讨会论文集,2012年10月,第13至22页.DOI:https://doi.org/10.1145/2380116.2380121,以及HuddleLamp,描述于“HuddleLamp:用于Ad-hocAround-the-Table协作的空间感知型移动显示器(HuddleLamp:Spatially-Aware MobileDisplays for Ad-hoc Around-the-Table Collaboration)”,ITS'14:第九届ACM国际交互式桌面和表面会议论文集,2015年4月,第45至54页.DOI:https://doi.org/10.1145/2669485.2669500。
这些方法旨在实现协作特征,例如共享物理空间内存在的多个设备之间的文件共享和屏幕共享。但是,这些方法中的每一种方法都依赖于共享物理空间配备的各种传感器,例如头顶RGB相机、Microsoft Kinect传感器和/或专门定位和用于追踪协作会话中涉及的设备的无线收发器。
因此,需要在技术上能够实现多用户和多设备实时协作,以克服上述方法(现有的和提出的方法)的缺点。
发明内容
本发明描述了用于管理由多个设备共享的虚拟工作空间的方法、设备和介质。在一些实施例中,向每个设备呈现统一图形用户界面(graphical user interface,GUI),其中,共享虚拟工作空间的其它设备由GUI元素表示,在同一本地环境内存在的其它本地设备的位置对应于围绕GUI屏幕的周边的对应GUI元素的显示位置。其它本地设备的位置基于来自本地设备的传感器数据(例如近场通信(near field communication,NFC)无线数据或其它短程传感器数据)确定,而不需要专用的、专门定位的相机或用于追踪本地环境中的设备的其它传感器。
使用布置在GUI屏幕的周边的GUI元素来指示和实现与其它本地设备的交互,可以提高涉及多设备协作的人机交互(human computer interaction,HCI)的直观性和效率,如研究“空间感知或空间不可知?:用户定义的跨设备交互的启发和评估(Spatially-awareor Spatially-agnostic?:Elicitation and Evaluation of User-Defined Cross-Device Interactions)”,CHI'15:第33届ACM计算系统人为因素年度会议论文集,第3913至3922页,DOI:https://doi.org/10.1145/2702123.2702287所建议。该研究比较了用户使用三种不同的GUI配置执行三种不同的常见协作任务(复制视图、复制文本和移动对象)的效率和舒适度。GUI配置是:从列出设备的弹出式菜单中选择设备;从示出在屏幕一角的设备位置的微型空间表示中选择设备;以及选择示出为GUI元素的设备,所述GUI元素显示在围绕屏幕周边对应于其实际位置的位置处。研究结果表明,第三种GUI配置对用户来说是最高效、最舒适的。
因此,与其它GUI配置相比,本文描述的示例可以为与多设备共享虚拟工作空间交互的用户提供更高的舒适度和效率。因此,与其它设备的常见交互,例如与另一设备共享文件或将屏幕共享控制授权给其它设备,可以通过与对应于其它设备的GUI元素进行简单直观的交互来完成。通过不需要安装在环境中的头顶相机或其它固定传感器以追踪各种本地设备的位置,本文描述的示例可以在任何空间中实现这种形式的舒适、高效的交互,而不仅仅是为这种交互而专门准备和配置的空间。
各种实施例还包括其它特征。多个设备可以包括存在于同一本地环境内的本地设备,以及通过网络通信会话相互通信的远程设备;当新的本地设备或远程设备开始共享虚拟工作空间时,它被加入到网络通信会话中。响应于在本地环境内检测到设备,随后是来自共享虚拟工作空间的现有设备的手动或自动授权,可以与新设备共享虚拟工作空间。还公开了其它特征,例如用于在本地工作空间与共享工作空间之间,以及在提供屏幕边界内其它设备的详细信息的雷达视图与最大化用于显示工作空间的屏幕实际使用面积量的门户视图之间切换的用户交互。
如本文所使用的,第二项(例如,值、计算或确定)“基于”第一项的陈述可以表示第二项的特征至少部分地受到第一项的特征的影响或至少部分地由第一项的特征确定。第一项可以被认为是运算或计算的输入,或者是一系列运算或计算的输入,所述运算或计算产生第二项作为与第一项相关的输出。
在一些方面,本发明描述了一种用于管理在包括用户设备和一个或多个本地设备的多个设备之间共享的虚拟工作空间,使得所述多个设备中的每个设备都能够访问与所述虚拟工作空间关联的共享工作空间信息的方法。所述方法包括:基于位置信息,为每个本地设备确定所述本地设备相对于所述用户设备的方向,所述位置信息是基于所述多个设备中的一个或多个设备采集的传感器数据获得的。图形用户界面(graphical user interface,GUI)屏幕在用户设备的显示器上显示。所述GUI屏幕针对每个本地设备包括链接设备GUI元素,所述链接设备GUI元素对应于所述本地设备并且包括所述本地设备的相应方向的图形指标。
在一些方面,本发明描述了一种用于管理在包括用户设备和一个或多个本地设备的多个设备之间共享的虚拟工作空间,使得所述多个设备中的每个设备都能够访问与所述虚拟工作空间关联的共享工作空间信息的用户设备。所述用户设备包括:处理器设备、显示器以及存储机器可执行指令的存储器,所述机器可执行指令当由所述处理器设备执行时,使所述用户设备:基于所述多个设备中的一个或多个设备采集的传感器数据处理位置信息,以针对每个本地设备确定所述本地设备相对于所述用户设备的方向;在所述显示器上显示图形用户界面(graphical user interface,GUI)屏幕,所述GUI屏幕针对每个本地设备包括链接设备GUI元素,所述链接设备GUI元素对应于所述本地设备并且包括所述本地设备的相应方向的图形指标。
在一些方面,本发明描述了一种非瞬时性处理器可读介质,存储有机器可执行指令,所述机器可执行指令当由用户设备的处理器执行时,使所述用户设备管理在包括所述用户设备和一个或多个本地设备的多个设备之间共享的虚拟工作空间,使得所述多个设备中的每个设备都能够访问与所述虚拟工作空间关联的共享工作空间信息。基于所述多个设备中的一个或多个设备采集的传感器数据处理位置信息,以针对每个本地设备确定所述本地设备相对于所述用户设备的方向。在所述用户设备的显示器上显示图形用户界面(graphical user interface,GUI)屏幕,所述GUI屏幕针对每个本地设备包括链接设备GUI元素,所述链接设备GUI元素对应于所述本地设备并且包括所述本地设备的相应方向的图形指标。
在一些示例中,所述方法还包括获得标识一个或多个远程设备的远程设备信息。所述虚拟工作空间进一步在所述一个或多个远程设备之间共享。针对所述一个或多个远程设备中的每个远程设备,所述GUI屏幕还包括对应于所述远程设备并且包括所述远程设备的图形指标的链接设备GUI元素。
在一些示例中,每个链接设备GUI元素包括交互式GUI元素,所述交互式GUI元素用于经由所述用户设备的定点设备接收用户输入。
在一些示例中,对应于本地设备的每个链接设备GUI元素通过在所述GUI屏幕内,在沿着所述GUI屏幕的周边的相应位置处显示来图形指示所述本地设备的所述方向,所述相应位置指示所述相应本地设备的所述方向。
在一些示例中,所述方法在显示所述GUI屏幕之前还包括多个步骤。在所述用户设备处接收请求设备加入所述虚拟工作空间的请求。获得指示允许所述请求设备加入所述虚拟工作空间的请求接受信息。响应于获得所述请求接受信息,与所述请求设备共享所述虚拟工作空间,使得所述请求设备包括在所述一个或多个本地设备或所述一个或多个远程设备中。
在一些示例中,获得所述请求接受信息包括多个步骤。在所述用户设备的所述显示器上显示表示所述请求的请求GUI元素。经由所述用户设备的输入设备接收指示接受所述请求的请求接受用户输入。处理所述请求接受用户输入以生成所述请求接受信息。
在一些示例中,获得所述请求接受信息包括:从所述请求设备接收指示所述请求设备和以下设备中的一个或多个设备所共享的公共用户账户的用户账户信息:所述用户设备;所述一个或多个本地设备中的一个本地设备;所述一个或多个远程设备中的一个远程设备。
在一些示例中,所述请求设备是所述一个或多个本地设备中的本地设备,并且响应于基于所述传感器数据确定所述请求设备在所述用户设备的本地环境内,接收所述请求。
通过与新设备自动共享虚拟工作空间,使其接近本地环境内的其它本地设备,示例性实施例相比于通常将新设备加入本地或远程协作会话的多步骤过程可以提供优点:连接到WiFi、在加入的新设备上启动协作软件应用,以及使用会话标识符将新设备的用户登录到协作会话。
在一些示例中,所述一个或多个远程设备用于经由网络通信会话相互通信;在所述一个或多个远程设备和所述多个设备之间共享所述虚拟工作空间还包括配置所述多个设备以经由所述网络通信会话相互通信以及与所述一个或多个远程设备通信。
在一些示例中,所述GUI屏幕包括虚拟工作空间GUI屏幕,所述虚拟工作空间GUI屏幕还包括所述共享工作空间信息的至少一部分。
在一些示例中,所述方法还包括多个步骤。经由所述用户设备的输入设备接收工作空间切换用户输入。在所述用户设备的所述显示器上显示本地工作空间GUI屏幕。所述本地工作空间GUI屏幕还包括所述一个或多个本地设备中的每个本地设备以及所述一个或多个远程设备中的每个远程设备的链接设备GUI元素。所述本地工作空间GUI屏幕包括与所述虚拟工作空间不关联的本地工作空间信息。
通过提供用于在本地桌面与共享桌面之间切换的简单、直观的基于手势的技术,同时向用户呈现非侵入式GUI,本文描述的一些示例性实施例可以提供优于现有方法的优点。统一GUI的混合性质,将来自本地工作空间和共享工作空间的内容统一在同一个视觉框架中,这表示用户用一个简单的手势即可轻松访问需要在本地桌面或共享桌面上执行的各种操作。
在一些示例中,所述方法还包括经由所述定点设备接收指示拖动手势的拖动用户输入,所述拖动手势是相对于对应于与所述虚拟工作空间不关联的本地数据对象的数据对象图标执行的。所述拖动手势在所述GUI屏幕内对应于所述链接设备GUI元素的第一链接设备GUI元素的位置处终止。所述第一链接设备GUI元素对应于所述一个或多个本地设备或所述一个或多个远程设备中的第一设备。响应于接收到所述拖动用户输入,向第一设备发送所述本地数据对象。
在一些示例中,所述方法还包括在所述第一设备处接收所述用户设备的所述本地数据对象。在所述第一设备的显示器上显示第一设备GUI屏幕。所述第一设备GUI屏幕包括接收到的数据对象图标。经由所述第一设备的定点设备接收第一设备拖动用户输入,所述第一设备拖动用户输入指示相对于所述接收到的数据对象图标执行的拖动手势。响应于接收到所述第一设备拖动用户输入,在所述第一设备的所述显示器上显示第一设备本地工作空间GUI屏幕,所述第一设备本地工作空间GUI屏幕包括与所述虚拟工作空间不关联的第一设备本地工作空间信息。将所述接收到的本地数据对象与所述第一设备本地工作空间信息关联地保存到所述第一设备的存储器中。
在一些示例中,所述方法还包括经由所述定点设备接收指示周边拖动手势的拖动用户输入,所述周边拖动手势是相对于对应于与所述虚拟工作空间不关联的本地数据对象的数据对象图标执行的。所述周边拖动手势在所述GUI屏幕内与所述GUI屏幕的边缘相距预定距离内的位置处终止。响应于接收到所述周边拖动用户输入,向所述一个或多个本地设备和所述一个或多个远程设备发送所述本地数据对象。
通过提供用于与共享虚拟工作空间的一个或多个设备共享文件或其它数据对象的直观且高效的技术,示例性实施例可以提供优于现有方法的优点。单个手势可以用于同时与所有连接的设备共享文件。此外,通过直观地呈现每个链接的本地设备的空间关系,本文描述的示例性实施例可以将环境信息作为高度可用和可导航的界面的一部分提供给用户。
在一些示例中,所述方法还包括激活所述用户设备的共享屏幕模式,使得所述用户设备的本地工作空间GUI屏幕可作为所述共享工作空间信息的一部分由所述一个或多个本地设备和所述一个或多个远程设备访问,所述用户设备的所述本地工作空间GUI屏幕包括与所述虚拟工作空间不关联的所述用户设备的本地工作空间信息。经由所述用户设备的输入设备接收屏幕共享传输用户输入,所述屏幕共享传输用户输入指示选择与所述一个或多个本地设备或所述一个或多个远程设备中的第一设备关联的所述链接设备GUI元素中的一个链接设备GUI元素。响应于接收到所述屏幕共享传输用户输入,在所述用户设备的所述显示器上显示包括所述第一设备的本地工作空间信息的第一设备工作空间GUI屏幕。
在一些示例中,所述输入设备包括所述定点设备;所述GUI屏幕包括虚拟工作空间GUI屏幕,所述虚拟工作空间GUI屏幕还包括所述共享工作空间信息的至少一部分;所述屏幕共享传输用户输入包括拖动手势,所述拖动手势:在所述GUI屏幕内所述多个链接设备GUI元素中的第一链接设备GUI元素的位置处开始;在所述GUI屏幕内显示所述共享工作空间信息的所述部分的位置处结束。
通过提供用于在共享虚拟工作空间的设备之间传输屏幕共享控制的直观且高效的技术,示例性实施例可以提供优于现有方法的优点。ZoomTM等云协作平台在执行屏幕共享任务时会表现低效率,这至少需要三个步骤:第一设备停止共享其屏幕,第一设备的用户将控制权交给另一个用户,另一个用户开始共享其设备的屏幕。在本文描述的示例性实施例中,当前共享其设备屏幕的用户(或管理协作会话的用户)的单个手势可以用于停止共享一个设备的屏幕并开始共享另一设备的屏幕。
在一些示例中,当所述用户设备在门户模式下运行时,所述GUI屏幕是在所述用户设备的所述显示器上显示的门户屏幕。除了包括在沿所述门户屏幕的周边的相应位置处显示的所述链接设备GUI元素外,所述门户屏幕还包括具有第一显示尺寸的工作空间面板。当所述用户设备在雷达模式下运行时,所述用户设备的所述显示器显示雷达屏幕。所述雷达屏幕包括:雷达屏幕工作空间面板,其具有比所述第一显示尺寸小的第二显示尺寸,使得边界由在所述雷达屏幕工作空间显示面板外部的所述显示器显示;对于所述门户屏幕的每个链接设备GUI元素,对应的雷达屏幕链接设备GUI元素显示在所述边界内沿着所述显示器的所述周边的相应位置处。所述方法还包括:经由所述用户设备的输入设备接收显示模式切换用户输入;响应于接收到所述显示模式切换用户输入,在所述门户模式与所述雷达模式之间切换所述用户设备。
在一些示例中,所述输入设备包括触摸屏。所述显示模式切换用户输入包括:用于从门户模式切换到雷达模式的向内捏合手势;用于从雷达模式切换到门户模式的向外撑开手势。
所描述的实施例可以提供用于在门户模式与雷达模式之间切换的快速且直观的方式,其中,门户屏幕最大化用于共享虚拟工作空间信息的显示区域,并且雷达屏幕示出用于主动设备管理的已连接设备的详细视图。
在一些方面,本发明描述了一种非瞬时性处理器可读介质,其上有形地存储有指令。所述指令在由处理器设备执行时,使得所述处理器设备执行上述方法步骤。
因此,本文公开的示例可以提供各种优点。首先,通过为常见的协作任务(如屏幕共享和文件共享)提供直观且简单的交互,统一GUI可以提高协作会话期间的组工作效率。其次,一些示例可以简化新设备加入协作会话所需的交互,包括与本地设备和远程设备建立通信。第三,一些示例可以提供单个高效、安全、稳定和灵活的平台,用于多个用户之间的协作,以及用于在单个用户控制的多个设备上执行任务。第四,一些示例可以提供一个用于无缝衔接面对面和远程协作的平台。
附图说明
现在将通过示例参考示出本申请的示例性实施例的附图,其中:
图1是根据本文描述的示例,示出本地环境中的本地设备和网络通信会话中的远程设备共享虚拟工作空间的框图;
图2是图1的示例性用户设备的一些组件的框图;
图3是图1的本地设备和远程设备共享的虚拟工作空间的示例性统一UI的数据流的框图;
图4是图1的用户设备和本地设备B的组件之间使用图3的统一UI共享虚拟工作空间的数据流的框图;
图5是分别在门户模式和雷达模式下在图2的示例性用户设备的显示器上显示的门户屏幕和雷达屏幕的前视图;
图6A是可以由图1的设备执行的用于管理虚拟工作空间的第一示例性方法的流程图;
图6B是可以由图1的设备执行的用于管理虚拟工作空间的第二示例性方法的流程图;
图7是用于将本地设备加入到图1的网络通信会话的示例性方法的流程图;
图8是图1的用户设备的GUI屏幕的三个前视图,示出了用于在虚拟工作空间GUI屏幕与本地工作空间GUI屏幕之间切换的方法的三个步骤;
图9A是图5的雷达屏幕的两个前视图,示出了用于与共享虚拟工作空间的另一设备共享文件的方法的两个步骤;
图9B是图5的雷达屏幕的两个前视图,示出了用于与共享虚拟工作空间的多个设备共享文件的方法的两个步骤;
图10是图5的雷达屏幕的三个前视图,示出了用于接收和本地保存从共享虚拟工作空间的另一设备接收的文件的方法的三个步骤;
图11是图5的雷达屏幕的三个前视图,示出了用于向共享虚拟工作空间的另一设备授权屏幕共享控制的方法的三个步骤;
图12A是用户设备显示器的两个前视图,示出了用于从图5的雷达模式切换到门户模式的方法的两个步骤;
图12B是用户设备显示器的两个前视图,示出了用于从图5的门户模式切换到雷达模式的方法的两个步骤;
不同附图中可以使用相似的附图标记来表示相似的组件。
具体实施方式
本发明描述了用于管理由多个设备共享的虚拟工作空间的方法、设备和介质。将参考用于管理虚拟工作空间的显示图形用户界面(graphical user interface,GUI)的用户设备来描述示例性实施例。但是,应当理解,共享虚拟工作空间的其它设备中的一些或所有设备可以配置有相同的GUI,用于执行本文参考用户设备描述的相同操作。因此,所描述的用户设备作为共享虚拟工作空间的设备的操作的示例提供。
图1示出了存在于本地环境110(例如,正在进行面对面会议的房间)中的用户设备112(例如笔记本电脑或台式电脑、平板电脑或智能手机)和一个或多个其它本地设备(示出为设备B 114、设备C 116、设备D 118和设备E 120),以及网络通信会话130中的一个或多个远程设备(示出为设备F 132、设备G 134和设备H 136)。在本文描述的示例性实施例中,远程设备132、134、136不需要存在于本地环境110中。在所示示例中,网络通信会话130由云服务器等服务器140介导;但是,应当理解,在一些实施例中,网络通信会话130可以通过网络使用点对点(peer-to-peer,P2P)通信来实现。
在本文描述的示例性实施例中,用户设备112、本地设备114、116、118、120和远程设备132、134、136用于共享虚拟工作空间,从而实现设备112、114、116、118、120、132、134、136的用户之间的协作,包括如文件共享和屏幕共享等常见协作任务,如下文进一步描述的。
在一些实施例中,存在于“本地环境”内的设备是那些在共享物理空间(例如房间)内相互在物理上相对接近的设备,这种相对接近由设备的短距离通信能力定义;不在本地环境内存在的所有设备被认为相对于本地环境中的设备是“远程”设备。在一些实施例中,设备的状态为“远程”或“本地”是基于它与共享虚拟工作空间的其它设备交互的方式来确定的:因此,即使设备存在于本地环境内,如果它仅经由网络通信会话130与其它设备交互,设备也可能被视为“远程”(例如,对于缺少使用短距离通信手段与本地设备通信所需的能力的设备可能是这样)。在一些示例中,单个设备可以同时被视为远程设备和本地设备。
图2示出了用户设备112的框图。尽管下文示出并讨论了用户设备112的示例性实施例,但可以使用其它实施例来实现本文公开的示例,其可以包括与所示不同的组件。虽然图2示出了用户设备112的每个组件的单个实例,但所示的每个组件可以有多个实例。
用户设备112包括一个或多个处理器202,例如中央处理单元、微处理器、专用集成电路(application-specific integrated circuit,ASIC)、现场可编程门阵列(field-programmable gate array,FPGA)、专用逻辑电路或其组合。一个或多个处理器202可以统称为“处理器设备”。
用户设备112还包括一个或多个输入/输出(input/output,I/O)接口204,这些接口与输入设备220和输出设备240连接。输入设备220可以包括定点设备222(例如触摸屏224或鼠标226)、传感器232(例如距离传感器234和相对方向传感器236)、键盘228、相机230,以及任何其它输入模块。输出设备240可以包括显示器242、扬声器244和其它输出模块。在一些实施例中,相机230或其它传感器232可以用于感测用户手势或其它可视或触觉用户输入,并由此可以充当定点设备222。因此,本文中对定点设备222或触摸屏224的任何引用也可以应用于基于相机或基于传感器的手势识别用户输入技术。
在一些实施例中,传感器232可以包括使用天线250的一个或多个传感器,天线250也可以由下文描述的网络接口206使用。天线250可以用于基于无线的感测和通信技术的各种实施例中,例如超宽带(ultra-wideband,UWB)、BluetoothTM、WiFi(IEEE 802.11)或近场通信(near-field communication,NFC)。在各种实施例中使用的传感器232可以包括光传感器(例如,可见或不可见光相机230)、声传感器和/或声信号发生器(例如,使用扬声器244和麦克风)、电磁信号发射器和/或检测器(例如,霍尔效应传感器或上述各种基于无线的传感技术)、物理接触传感器(例如,惯性测量单元和/或力传感器),或者适合作为相对距离传感器234和/或相对方向传感器236的任何其它传感器类型,用于检测本地环境110中其它电子设备的位置。应当理解,使用上述传感器232中的一个或多个传感器的任何合适的感测技术可以由本文所述的示例性用户设备使用,以感测本地环境110内的其它本地设备的相对距离和相对方向。
用户设备112可以包括一个或多个网络接口206,用于与本地环境110和/或网络通信会话130中的网络(例如,内联网、因特网、P2P网络、WAN和/或LAN)或其它设备进行有线或无线通信。一个或多个网络接口206可以包括用于网络内和/或网络间通信的有线链路(例如,以太网线)和/或无线链路(例如,一个或多个天线250)。
用户设备112包括一个或多个存储器(统称为存储器208),所述一个或多个存储器208可以包括易失性或非易失性存储器(例如,闪存、随机存取存储器(random accessmemory,RAM)和/或只读存储器(read-only memory,ROM))。非瞬时性存储器208可以存储数据260,以及由处理器设备202执行的指令262,例如,以执行本发明中所述的示例。存储器208可以包括其它软件指令262,例如用于实现操作系统和其它软件应用272或功能的软件指令。
数据260可以包括参考本文中的示例性实施例描述的各种类型的数据,例如共享工作空间信息504、本地工作空间信息806、由传感器232采集的传感器数据、本地数据对象(例如文件)等。指令262可以包括用于实现解释器264的指令,所述解释器264用于管理用户设备以及本地设备和远程设备之间共享的虚拟工作空间。解释器264通过以下方式操作:从用户设备112的传感器232获得传感器数据和/或基于来自本地环境110中的一个或多个其它本地设备的传感器的传感器数据获得位置信息,并使用设备位置识别模块270来处理传感器数据和/或位置信息,从而识别用户设备112和其它本地设备114、116、118、120的相对位置。在一些实施例中,解释器264还可以获得与网络通信会话130有关的信息。然后,解释器264使用用户界面(user interface,UI)模块266来生成和管理由各种设备112、114、116、118、120以及可选的132、134、136共享的统一GUI,从而实现对共享虚拟工作空间的访问。各种设备112、114、116、118、120、132、134、136的用户可以使用用户输入模块(图2中示出为手势识别模块268)与虚拟工作空间交互并影响虚拟工作空间,以识别由用户执行的基于手势的控制(例如,使用触摸屏224或相机230来检测手势)。
在一些示例中,用户设备112还可以包括一个或多个电子存储单元(未示出),例如固态硬盘、硬盘驱动器、磁盘驱动器和/或光盘驱动器。在一些示例中,一个或多个数据集和/或模块可以由外部存储器(例如,与用户设备112进行有线通信或无线通信的外部驱动器)提供,也可以由瞬时性或非瞬时性计算机可读介质提供。非瞬时性计算机可读介质的示例包括RAM、ROM、可擦除可编程ROM(erasable programmable ROM,EPROM)、电可擦除可编程ROM(electrically erasable programmable ROM,EEPROM)、闪存、CD-ROM或其它便携式存储器。例如,用户设备112的组件可以通过总线270相互通信。
图3示出了由本地设备和远程设备112、114、116、118、120、132、134、136共享的虚拟工作空间的示例性统一UI的数据流。可以在设备112、114、116、118、120、132、134、136中的一个、一些或所有设备上或在服务器140上实现的GUI渲染引擎302与每个设备的GUI客户端引擎304通信以生成可以由共享虚拟工作空间的每个设备访问的共享工作空间信息504。共享工作空间信息504可以包括适合于与协作工作空间的用户共享的任何信息,例如示出对应于文件或软件应用的图标的共享桌面视图、文件浏览器视图、示出来自共享虚拟工作空间的其它设备的相机输入的视频馈送、正在协作编辑的文档或数据对象的内容等。
每个设备实现GUI客户端引擎304,其可以访问设备的本地软件应用272、本地工作空间信息806(例如,本地桌面视图)和相应设备的数据260。当设备(例如,用户设备112)与共享虚拟工作空间和/或共享虚拟工作空间的其它设备交互时,来自这些源272、806、260中的每个源的信息可以经由GUI客户端引擎304与虚拟工作空间共享,从而可能将此本地信息272、806、260(即在用户设备112上本地存储或渲染的信息)结合到经由GUI渲染引擎302与其它设备共享的共享工作空间信息504中。下文描述将本地信息结合到共享工作空间信息504中的具体示例,例如屏幕共享(即,与其它设备共享设备的本地工作空间信息806)和文件共享(即,与其它设备共享存储在存储器208中作为数据260的本地数据对象)。但是,应当理解,设备(例如,用户设备112)和共享虚拟工作空间之间任何形式的交互都会导致本地信息结合到共享工作空间信息504中:例如,对协作编辑的文档的改变可以由在用户设备112上运行的本地软件应用272进行,并且这些改变可以经由用户设备112的GUI客户端引擎304传播到共享工作空间信息504。
图4示出了用户设备112和本地设备B 114的组件之间使用图3的统一UI共享虚拟工作空间的数据流。在所示示例中,每个设备(例如用户设备112和设备B 114)包括GUI渲染引擎302和相应的GUI客户端引擎304,作为由设备的处理器202执行的设备的UI模块266的一部分。因此,共享工作空间信息504由每个设备的GUI渲染引擎302生成,所述GUI渲染引擎302通过设备的GUI客户端引擎304相互通信以共享用于生成共享工作空间信息504的信息。因此,用户设备112的GUI客户端引擎304经由网络接口206,例如经由适合在本地环境内通信的短距离无线通信协议(例如UWB),与设备B 114的GUI客户端引擎304通信。类似地,在一些实施例中,用户设备112的GUI客户端引擎304可以经由网络接口206,例如经由适合于与用于在互联网上通信的网络路由器通信的无线通信协议(例如WiFi),与远程设备F 132的GUI客户端引擎304通信,使得用户设备112能够参与网络通信会话130。
每个设备(例如,112和114)使用其相应的GUI渲染引擎302渲染用于共享虚拟工作空间的GUI,所述GUI经由I/O接口204使用显示器242或其它输出设备240显示给用户。I/O接口还支持经由一个或多个输入设备220接收用户输入以与GUI交互;由I/O接口204接收的用户输入在被提供给UI模块266用于与GUI交互之前可以发送到解释器264(未示出)进行处理(例如,从触摸屏224接收的手势输入可以由手势识别模块268处理)。
图5示出了由GUI渲染引擎302在用户设备112的显示器242上渲染的GUI屏幕的两个示例。左侧示出了门户屏幕502,其可以在用户设备112在门户模式下运行时在显示器242上渲染。右侧示出了雷达屏幕503,其可以在用户设备112在雷达模式下运行时在显示器242上渲染。下文参考图12A和图12B描述用于在门户模式与雷达模式之间切换用户设备112的示例性方法。
在门户模式期间显示的门户屏幕502可以是用于与共享虚拟工作空间的其它设备进行被动协作的GUI屏幕。门户屏幕502最大化用于示出工作空间(例如共享虚拟工作空间(包括共享工作空间信息504,如图所示)或本地工作空间(例如,包括本地工作空间信息806的本地桌面))的显示区域,并且仅以沿门户屏幕502的周边510显示的链接设备GUI元素512的形式显示共享虚拟工作空间的其它设备的周围图形指标。每个链接设备GUI元素512对应于本地设备(在本地环境110内)或远程设备(参与网络通信会话130)。本地设备的每个链接设备GUI元素512显示在沿门户屏幕502的周边510、指示相应本地设备相对于用户设备112的方向的相应位置处,所述相应位置如由设备位置识别模块270通过基于传感器数据(例如,来自用户设备112和/或一个或多个本地设备114、116、118、120的相对方向传感器236)处理位置信息所确定。在所示实施例中,远程设备的链接设备GUI元素512是远程链接设备GUI元素514,其包括以图形指示链接设备远离本地环境110的另一远程状态指标516。在一些实施例中,所有远程链接设备GUI元素514可以一起聚集在门户屏幕502的区域中,例如在门户屏幕502的右边缘的中心附近,如图5所示。
在雷达模式期间显示的雷达屏幕503可以是用于与共享虚拟工作空间的其它设备进行更主动或详细的协作或管理共享虚拟工作空间的其它设备的GUI屏幕。雷达屏幕503包括雷达屏幕工作空间面板506内的工作空间(例如,包括共享工作空间信息504的共享虚拟工作空间或包括本地工作空间信息806的本地工作空间),雷达屏幕工作空间面板506由边界518包围,在边界518内显示沿雷达屏幕503的周边510显示的雷达屏幕链接设备GUI元素520。在一些实施例中,对应于远程设备的雷达屏幕链接设备GUI元素520可以显示为雷达屏幕远程链接设备GUI元素522,其可以在图形上区别于对应于本地设备的雷达屏幕链接设备GUI元素520(如图5中通过围绕雷达屏幕远程链接设备GUI元素522的虚线示出)。在一些实施例中,雷达屏幕链接设备GUI元素520可以显示与门户屏幕502的链接设备GUI元素512相比更多的与每个相应设备有关的信息,并且可以实现与每个相应设备更复杂的交互,以管理与共享虚拟工作空间相关的设备的关系或状态。边界518还可以包括一个或多个附加GUI元素524,例如用于管理虚拟工作空间的特定方面(例如共享数据或用户设备112自身相对于虚拟工作空间的状态)的交互式图标。
在一些实施例中,链接设备GUI元素512和雷达屏幕链接设备GUI元素520是交互式GUI元素,可以使用输入设备220交互以执行关于虚拟工作空间的各种操作,如本文所述。
图6A是示出可以由图1的设备(例如用户设备112)执行的用于管理虚拟工作空间的第一示例性方法600A的步骤的流程图。具体地,方法600A描述了当新的本地设备进入本地环境110时与新的本地设备共享虚拟工作空间的一组步骤。方法600A将参考用户设备112进行描述,但与本文描述的其它方法和操作一样,可以同样适用于共享虚拟工作空间的任何其它本地设备或远程设备。
在602处,确定称为请求设备的新设备在本地环境110内。出于本示例的目的,假设请求设备是设备B 114,并且假设其它本地设备(用户设备112、设备C 116、设备D 118和设备E 120)已经共享虚拟工作空间。
基于由请求设备114和其它本地设备112、116、118、120中的一个或多个的传感器232采集的传感器数据来确定请求设备114在本地环境110内。例如,请求设备114和用户设备112的距离传感器234(例如各种光传感器、具有声信号发生器的声传感器、电磁信号发射器和/或检测器,和/或上述物理接触传感器)可以检测到请求设备114在用户设备112的预定接近范围内,从而确定请求设备114在本地环境110内。或者,用户设备112可以相对于用户设备112和/或一个或多个其它本地设备的当前位置定义本地环境110的地理位置,并且请求设备114可以使用全球定位系统(global positioning system,GPS)传感器,通过比较GPS传感器读数和用户设备112定义的本地环境110的地理位置来确定请求设备114在本地环境110内。本地环境110的地理位置可以经由因特网或短距离P2P无线协议从用户设备112发送到请求设备114。在一些实施例中,本地环境的地理位置可以相对于具有固定位置的设备(例如安装在会议室中的设备)或服务器140来定义。
在604处,响应于确定请求设备114在本地环境110内,用户设备112接收请求设备114加入虚拟工作空间的请求。可以从请求设备114接收请求,或者可以响应于确定请求设备114在本地环境110内,从用户设备112本身或另一本地设备发起请求。
在606处,在用户设备112的显示器242上显示请求GUI元素。请求GUI元素表示请求:例如,在一些实施例中,请求GUI元素是向用户设备112的用户通知请求的性质的弹出窗口或对话框,例如,标识请求设备114并询问用户是否希望与请求设备114共享虚拟工作空间。在一些实施例中,请求GUI元素可以是链接设备GUI元素512的版本,沿着用户设备112的GUI屏幕的周边在对应于请求设备114的相对方向的位置上显示,但是具有指示设备114正在请求加入虚拟工作空间的图形指标(例如,独特的颜色、周期性变化的外观(如闪烁或脉冲)、叠加在GUI元素上的独特图标,等等)。
在608处,用户设备112例如经由用户设备112的输入设备220接收指示接受请求的请求接受用户输入。例如,如果请求GUI元素是窗口或对话框,则它可以包括指示接受或拒绝请求的交互式按钮(例如,标记为“确定”和“取消”的按钮)。如果请求GUI元素是链接设备GUI元素512,则请求接受用户输入可以是选择链接设备GUI元素512的定点设备输入,然后是指示响应于进一步提示接受请求的定点设备输入。应当理解,任何合适的GUI交互都可以用于步骤606和608。
在610处,处理请求接受用户输入以生成请求接受信息。请求接受信息指示允许请求设备114加入虚拟工作空间。在一些实施例中,请求接受信息可以包括授权与请求设备114共享虚拟工作空间所必需的信息,例如支持请求设备114的GUI客户端引擎304与共享虚拟工作空间的其它设备的GUI客户端引擎304进行通信所必需的认证信息或账户凭证,如图4所示。
在612处,响应于在步骤610处获得请求接受信息,与请求设备114共享虚拟工作空间,使得请求设备包括在一个或多个本地设备中。请求接受信息,或通过授权请求设备114的GUI客户端引擎304与其它设备的GUI客户端引擎304之间的通信授权访问虚拟环境的其它信息可以发送到共享虚拟工作空间的每个其它设备。指示请求设备114相对于每个其它本地设备112、116、118、120的位置的位置信息也可以发送到每个本地设备,以使每个这种设备能够在沿着相应设备的GUI屏幕的周边510的相应适当位置显示请求设备114的链接设备GUI元素512。
在614处,处理基于由一个或多个设备采集的传感器数据的每个本地设备的位置信息,以针对每个本地设备112、114、116、118、120确定本地设备相对于用户设备112的方向。可以在每个本地设备处执行此步骤614以确定每个本地设备相对于处理位置信息的设备的方向,从而使处理位置信息的本地设备能够(使用其UI渲染引擎302)渲染UI,以相对于所述本地设备在其适当位置显示链接设备GUI元素512。
在616处,获得远程设备信息。远程设备信息标识正在其中共享虚拟工作空间的一个或多个远程设备(例如132、134、136)。在一些实施例中,经由介导远程通信会话130的服务器140接收远程设备信息。在一些实施例中,使用P2P网络通信协议从每个相应的远程设备接收远程设备信息。在一些实施例中,远程设备信息可以由参与远程通信会话130并与其它本地设备相关的单个本地设备接收,而在其它实施例中,远程设备信息由所有本地设备直接接收。
在618处,包括请求设备114的本地设备用于经由网络通信会话130与远程设备132、134、136通信,并且可选地与其它本地设备112、116、118、120通信。此配置步骤618可以包括使用一个或多个预定义的网络协议发起各种设备之间的网络通信,以经由网络接口206实现每个设备的GUI客户端引擎304之间的通信,如图4所示。在一些实施例中,本地设备之间的通信可以经由短距离P2P协议或由服务器140(如果服务器140存在于本地环境110中)或其中一个本地设备等单个设备介导的短距离协议发生;在一些实施例中,本地设备之间的通信可以经由网络通信会话130发生。
在620处,在用户设备112的显示器242上显示GUI屏幕,所述GUI屏幕针对每个本地设备(包括请求设备114,现在在步骤612处添加到本地设备的集合中)包括链接设备GUI元素512,所述链接设备GUI元素512对应于本地设备并且包括本地设备的相应方向的图形指标。这种GUI屏幕的示例包括图5中所示的门户屏幕502和雷达屏幕503,分别包括每个本地设备的链接设备GUI元素512和雷达屏幕链接设备GUI元素520。下文参考图8描述可以在门户模式或雷达模式下渲染的其它示例性GUI屏幕。在一些实施例中,GUI屏幕还可以包括共享虚拟工作空间的每个远程设备的远程链接设备GUI元素514(或雷达屏幕远程链接设备GUI元素522)。
在一些实施例中,类似于方法600A的方法可以用于与新的远程设备(例如设备F132)共享虚拟工作空间。代替步骤602,加入虚拟工作空间的请求可以由新的远程设备132通过网络(例如因特网)向本地设备或远程设备中的一个发送请求来发起。在步骤612的替代版本中,虚拟工作空间将与请求设备(即,新的远程设备132)共享,使得请求设备包括在一个或多个远程设备中。
图6B是可以由图1的设备(例如用户设备112)执行的用于管理虚拟工作空间的第二示例性方法600B的流程图。在此方法600B中,执行与方法600A中相同的步骤,除了步骤604、606和608(即,控制接收和批准将与请求设备114共享的虚拟工作空间的请求的步骤)被步骤630代替。
在630处,从请求设备114接收用户账户信息。用户账户信息指示由请求设备114和共享虚拟工作空间的现有设备112、116、118、120、132、134、136中的一个现有设备共享的公共用户账户。例如,新设备(请求设备114)可以是第一用户拥有的手机,第一用户也可以拥有用户设备112,用户设备112是当前共享虚拟工作空间的笔记本电脑。在步骤630处,第一用户的手机(请求设备114)可以向用户设备112或另一设备发送与第一用户关联的用户账户信息,例如第一用户的用户账户的登录凭证、使用第一用户的私有加密密钥签名的加密认证信息,或适于证明请求设备114与当前被授权访问共享虚拟工作空间的用户设备112的用户关联的任何其它用户账户信息。
在方法600B中,用户账户信息可以用于代替在步骤612处处理的请求接受信息或作为请求接受信息的一部分,以允许请求设备114访问虚拟工作空间。在一些实施例中,请求接受信息可以不仅包括用户账户信息,而且包括来自请求设备114或另一设备的附加信息,所述附加信息经由请求设备114或经由该用户拥有的另一设备指示与用户账户信息关联的用户已经批准了请求。
图7示出了用于将本地设备加入网络通信会话130的示例性方法700的步骤。方法700可以认为是方法600A和600B的步骤618的替代方案。尽管方法600A和600B假设一个或多个本地设备已经用于经由网络通信会话130进行通信的场景,但方法700假设本地设备正在共享虚拟工作空间,但虚拟工作空间尚未与任何远程设备共享的场景。方法700是结合用户设备112描述的,但与本文描述的其它方法和操作一样,它同样适用于共享虚拟工作空间的任何本地设备。
在702处,用户设备112加入网络通信会话130。此步骤702可以响应于用户设备112从其中一个远程设备或服务器140接收到允许一个或多个远程设备共享虚拟工作空间的请求而由用户设备112执行。响应于请求,用户设备112可以例如通过在用户设备112的网络接口206上发起与一个或多个远程设备和/或服务器140的网络通信会话来加入网络通信会话130。
在704处,每个其它本地设备114、116、118、120接收加入网络通信会话130的请求。这些请求可以由用户设备112、服务器140或其中一个远程设备发送。这些请求可以被自动处理,也可以通过用户交互来确定是否应该接受或拒绝这些请求。
在706处,确定接受请求的每个本地设备加入网络通信会话130。本地设备用于例如通过在相应本地设备的网络接口206上发起与一个或多个远程设备和/或服务器140的网络通信会话,经由网络通信会话130与远程设备通信。
因此,方法700支持当前共享虚拟工作空间的本地设备响应于其中一个本地设备加入网络通信会话130而加入网络通信会话130,从而使虚拟工作空间能够与包括在网络通信会话130中的所有远程设备共享。在一些示例中,方法700可以允许本地设备和远程设备在用于与共享共享虚拟工作空间的新设备进行通信时不再需要其各自用户提供附加认证凭证:因此,如果用户设备112被授权加入网络通信会话130,这可能足以授权所有其它本地设备加入网络通信会话130,并且也足以授权所有远程设备与本地设备通信。在一些示例中,可以使用替代方法来允许当前参与网络通信会话130的单个远程设备用于与本地设备通信,从而自动授权所有其它远程设备与本地设备通信。在一些示例中,共享虚拟工作空间的本地设备和远程设备之间的通信可以认为是混合通信会话,其中,一些通信经由网络通信会话130执行,而其它通信使用本地通信技术(例如使用NFC的P2P通信等)执行。
图8示出了用于在用户设备112的显示器242上在虚拟工作空间GUI屏幕802与本地工作空间GUI屏幕804之间切换的方法的三个步骤820、830、840。虚拟工作空间GUI屏幕802显示共享工作空间信息504的至少一部分,即,如上所述,在虚拟工作空间中共享的内容,例如共享桌面、另一设备的共享屏幕、被协作编辑的文档等。本地工作空间GUI屏幕804显示与虚拟工作空间不关联的本地工作空间信息806的至少一部分,例如用户设备112的本地桌面的视图。在步骤820处,在显示器242上显示虚拟工作空间GUI屏幕802。在步骤830处,用户设备112经由I/O接口204接收工作空间切换用户输入:在此示例中,工作空间切换用户输入是由触摸屏224检测到的滑动手势,由此用户的手810沿着触摸屏224的表面在方向812上滑动以使用户设备112在步骤840处在显示器242上显示本地工作空间GUI屏幕804。
应当理解,在各种实施例中,由任何合适的输入设备220检测到的任何合适的用户输入可以用作工作空间切换用户输入。尽管图8示出了处于门户模式下的虚拟工作空间GUI屏幕802和本地工作空间GUI屏幕804,但是应当理解,可以在雷达模式下执行图8中所示的相同方法。
图9A示出了用于与共享虚拟工作空间的另一设备共享本地数据对象(例如文件)的方法的两个步骤920、930。在第一步骤920中,在用户设备112的显示器242上显示雷达屏幕503,所述雷达屏幕503包括在雷达屏幕工作空间面板506内显示的本地工作空间信息806。本地工作空间信息806包括对应于与虚拟工作空间不关联的本地数据对象的数据对象图标910,例如与作为数据260本地存储在存储器208内的文件关联的文件图标或其它GUI元素。在第一步骤920期间,本地数据对象与虚拟工作空间不关联,这表示共享虚拟工作空间的其它设备无法访问本地数据对象。在步骤920处,用户的手810通过将其手指放在触摸屏224上的数据对象图标910上发起拖动手势。
在步骤930处,用户的手810已经通过将仍然与触摸屏224接触的手指移动到雷达屏幕链接设备GUI元素520中的一个雷达屏幕链接设备GUI元素(在所示示例中,对应于本地设备B 114的雷达屏幕链接设备GUI元素520)上方的位置来完成拖动手势。然后,用户的手810将手指抬离触摸屏224以完成拖动手势。此拖动手势被手势识别模块268解释为拖动用户输入意图在对应于本地设备B 114的雷达屏幕链接设备GUI元素520上拖动数据对象图标910。
响应于接收到拖动用户输入,用户设备112例如通过向设备B 114发送文件来与设备B 114共享与数据对象图标910关联的数据对象(例如,文件)。在一些实施例中,向设备B114发送文件还可以包括子步骤,例如使用网络文件传输协议向设备B 114发送文件传输请求,通过软件过程或设备B 114的用户交互接受文件传输请求,等等。
图9B示出了用于与共享虚拟工作空间的多个设备共享本地数据对象的方法的两个步骤920、940。图9B中示出的方法与图9A中示出的方法的区别仅在于,用户手810的拖动手势是周边拖动手势,所述周边拖动手势在步骤940处在GUI屏幕内与GUI屏幕边缘相距预定距离内的位置处终止,即在雷达屏幕503的边界518内,而不在雷达屏幕链接设备GUI元素520的上方的位置处终止(如在图9A的方法的步骤930中)。响应于接收到步骤920和940中所示的拖动用户输入,用户设备112向共享虚拟工作空间的一些或所有设备发送数据对象。在一些实施例中,数据对象被发送到所有设备;在其它实施例中,基于用户设备112、一个或多个链接设备或整体虚拟工作空间的配置设置,一些设备可以被包括在文件共享步骤内或排除在文件共享步骤之外。
图10示出了用于接收和本地保存从共享虚拟工作空间的另一设备接收的文件的方法的三个步骤1020、1030和1040。图10中所示的方法表示接收设备可以如何分别响应图9A或图9B的方法的最终步骤930或940的示例。例如,响应于图9B的步骤930,其中,文件被发送到设备B 114,设备B 114可以通过在步骤1020处在设备B 114的显示器242上显示的雷达屏幕503的边界518内显示接收到的数据对象图标1010来响应。然后,设备B 114的用户可以在步骤1020和1030之间使用其手810来执行类似于图9A和图9B的拖动手势的拖动手势。在所示示例中,拖动手势在接收到的数据对象图标1010上开始,并在显示共享工作空间信息504的雷达屏幕工作空间面板506上终止或暂停,但是,应当理解,在一些示例中,设备B 114可以在门户模式下运行,并且该手势可以在门户屏幕502的另一部分内终止,例如在显示共享工作空间信息504的区域内终止。拖动手势被解释为设备B 114的手势识别模块268拖动用户输入。
响应于接收到拖动用户输入,设备B 114在其显示器242上显示包括设备B 114的本地工作空间(例如,本地桌面视图)的本地工作空间信息806的本地工作空间GUI屏幕。这在步骤1040中示出,其中,共享工作空间信息504(例如,共享桌面视图)沿方向814向下滑动,以由本地工作空间信息806(例如,设备B 114的本地桌面的视图)移位。一旦本地工作空间信息806在设备B 114的显示器242上显示,用户的手810可以继续拖动接收到的数据对象图标1010以将其定位在本地桌面显示器内,使得当拖动手势终止(例如,通过手指从触摸屏224抬起)时,将接收到的数据对象存储在设备B 114的存储器208中,与本地桌面上对应于拖动手势终止的位置的位置(即,作为本地工作空间信息806的一部分)关联。
因此,图9A、图9B和图10中所示的方法可以实现用于与共享虚拟工作空间的一个或多个设备共享文件或其它数据对象的直观且高效的技术。
图11示出了用于将屏幕共享控制授权给共享虚拟工作空间的另一设备的方法的三个步骤1120、1130、1140。该方法示为由用户设备112执行。在步骤1120之前,用户设备1120正在与共享虚拟工作空间的其它设备共享其屏幕:这表示用户设备112的本地工作空间GUI屏幕1102正在与其它设备114……136共享,从而授权其它设备查看用户设备112的本地工作空间信息806的访问权,例如用户设备112的本地桌面视图的内容,或者作为由用户设备112执行的软件应用272的一部分在本地设备112上渲染的窗口的可查看内容。因此,当用户设备112共享其屏幕时,作为共享工作空间信息504的一部分,用户设备112的本地工作空间信息806的至少一部分变得可由其它设备访问。
在步骤1120处,用户设备112的用户的手810在对应于设备E 120的雷达屏幕链接设备GUI元素520上发起拖动手势。在步骤1130处,拖动手势在雷达屏幕工作空间面板506内终止。拖动手势被手势识别模块268识别为屏幕共享传输用户输入,指示选择与设备E 120关联的雷达屏幕链接设备GUI元素520。响应于接收到屏幕共享传输用户输入,将屏幕共享控制从用户设备112传输到设备E 120。在一些实施例中,这可能导致设备E 120的本地工作空间GUI屏幕可作为共享工作空间信息504的一部分由用户设备112和其它设备访问(即,设备E 120立即共享其屏幕);在其它实施例中,设备E 120屏幕的共享可以在来自同意共享设备E 120的屏幕的设备E 120的用户的一系列提示和用户输入之前并取决于所述一系列提示和用户输入。在共享设备E 120的屏幕之后,在步骤1140处,用户设备112可以在其显示器242上显示包括设备E 120的本地工作空间信息806的设备E工作空间GUI屏幕1104,例如,设备E 120的本地桌面的视图。也使设备E工作空间GUI屏幕1104可由共享虚拟工作空间的其它设备访问。
因此,图11的方法可以实现用于在共享虚拟工作空间的设备之间传输屏幕共享控制的直观且高效的技术。
在一些示例中,如上文参考图9A、图9B、图10和图11所述的用于发起文件共享和屏幕共享等任务的拖动用户输入也可以使用其它形式的用户输入发起,例如响应于与其中一个链接设备GUI元素交互的用户输入而显示的上下文菜单或其它提示。例如,用户可以在链接设备GUI元素512中的一个链接设备GUI元素的位置触摸触摸屏,从而导致上下文菜单被显示,其中,选项之一是“与此设备共享文件”;激活此选项将进一步导致提示的显示,以选择用于与链接设备共享的文件,等等。
图12A示出了用于将用户设备112从雷达模式切换到门户模式的方法的两个步骤1220、1230。在步骤1220处,当用户的手810执行向外撑开手势时,例如,用户的手810的两个手指在两个初始位置接触触摸屏224,然后在与触摸屏224接触的同时相互远离(如虚线箭头所示),直到手势以手指在相对于两个初始位置相互相距较远的两个位置处终止,用户设备112正在显示雷达屏幕503。响应于识别到向外撑开手势,使用手势识别模块268作为显示模式切换用户输入,在步骤1230处,用户设备112切换到门户模式并因此显示门户屏幕502。
图12B示出了用于将用户设备112从门户模式切换到雷达模式的方法的两个步骤1240、1250。图12B的方法实质上是图12A的方法的逆过程:在步骤1240处,当用户设备112从用户的手810接收到向内捏合手势时(即,当手指与触摸屏224接触时移动得更接近,如由虚线箭头所示),用户设备112处于显示门户屏幕502的门户模式。用户设备1250使用手势识别模块268识别向内捏合手势作为显示模式切换用户输入,并且作为响应,在步骤1250处,用户设备112切换到雷达模式并因此显示雷达屏幕503。
在一些示例中,用于发起任务(例如,在本地工作空间显示与共享工作空间显示之间切换(如上文参考图8所述)或在门户模式与雷达模式之间切换(如上文参考图12A和图12B所述))的拖动或捏用户输入也可以使用其它形式的用户输入,例如经由与为此目的指定的专用GUI元素的交互来发起。
概述
尽管本发明通过按照一定的顺序执行的步骤描述方法和过程,但是可以适当地省略或改变方法和过程中的一个或多个步骤。在适当情况下,一个或多个步骤可以按所描述的顺序以外的顺序执行。
尽管本发明在方法方面至少部分地进行了描述,但本领域普通技术人员将理解,本发明也针对用于执行所述方法的至少一些方面和特征的各种组件,无论是通过硬件组件、软件还是其任何组合。相应地,本发明的技术方案可以通过软件产品的形式体现。合适的软件产品可以存储在预先记录的存储设备或其它类似的非易失性或非瞬时性计算机可读介质中,包括DVD、CD-ROM、USB闪存盘、可移动硬盘或其它存储介质等。软件产品包括有形地存储在其上的指令,所述指令使得处理设备(例如,个人计算机、服务器或网络设备)能够执行本文中公开的方法的示例。
在不脱离权利要求书的主题的前提下,本发明可以通过其它特定形式实施。所描述的示例性实施例在所有方面均被视为仅是说明性的而非限制性的。可以组合从一个或多个上述实施例中选择的特征,以创建非显式描述的可选实施例,在本发明的范围内可以理解适合于此类组合的特征。
还公开了公开范围内的所有值和子范围。此外,虽然本文所公开和示出的系统、设备和过程可以包括特定数量的元件/组件,但是可以修改这些系统、设备和组件以包括更多或更少此类元件/组件。例如,虽然所公开的任何元件/组件可以引用为单数,但是可以修改本文所公开的实施例以包括多个此类元件/组件。本文所描述的主题旨在覆盖和涵盖所有适当的技术变更。
Claims (20)
1.一种用于管理在包括用户设备和一个或多个本地设备的多个设备之间共享的虚拟工作空间,使得所述多个设备中的每个设备都能够访问与所述虚拟工作空间关联的共享工作空间信息的方法,其特征在于,所述方法包括:
基于位置信息,为每个本地设备确定所述本地设备相对于所述用户设备的方向,所述位置信息是基于所述多个设备中的一个或多个设备采集的传感器数据获得的;
在所述用户设备的显示器上显示图形用户界面(graphical user interface,GUI)屏幕,所述GUI屏幕针对每个本地设备包括链接设备GUI元素,所述链接设备GUI元素对应于所述本地设备并且包括所述本地设备的相应方向的图形指标。
2.根据权利要求1所述的方法,其特征在于:
还包括获得标识一个或多个远程设备的远程设备信息,所述虚拟工作空间进一步在所述一个或多个远程设备之间共享;
其中,针对所述一个或多个远程设备中的每个远程设备,所述GUI屏幕还包括对应于所述远程设备并且包括所述远程设备的图形指标的链接设备GUI元素。
3.根据权利要求2所述的方法,其特征在于:
每个链接设备GUI元素包括交互式GUI元素,所述交互式GUI元素用于经由所述用户设备的定点设备接收用户输入。
4.根据权利要求3所述的方法,其特征在于:
对应于本地设备的每个链接设备GUI元素通过在所述GUI屏幕内,在沿着所述GUI屏幕的周边的相应位置处显示来图形指示所述本地设备的所述方向,所述相应位置指示所述相应本地设备的所述方向。
5.根据权利要求4所述的方法,其特征在于,还包括,在显示所述GUI屏幕之前:
在所述用户设备处接收请求设备加入所述虚拟工作空间的请求;
获得指示允许所述请求设备加入所述虚拟工作空间的请求接受信息;
响应于获得所述请求接受信息,与所述请求设备共享所述虚拟工作空间,使得所述请求设备包括在所述一个或多个本地设备或所述一个或多个远程设备中。
6.根据权利要求5所述的方法,其特征在于,获得所述请求接受信息包括:
在所述用户设备的所述显示器上显示表示所述请求的请求GUI元素;
经由所述用户设备的输入设备接收指示接受所述请求的请求接受用户输入;
处理所述请求接受用户输入以生成所述请求接受信息。
7.根据权利要求5所述的方法,其特征在于,获得所述请求接受信息包括:
从所述请求设备接收指示所述请求设备和以下设备中的一个或多个设备所共享的公共用户账户的用户账户信息:
所述用户设备;
所述一个或多个本地设备中的一个本地设备;
所述一个或多个远程设备中的一个远程设备。
8.根据权利要求5所述的方法,其特征在于:
所述请求设备是所述一个或多个本地设备中的本地设备;
响应于基于所述传感器数据确定所述请求设备在所述用户设备的本地环境内,接收所述请求。
9.根据权利要求4所述的方法,其特征在于:
所述一个或多个远程设备用于经由网络通信会话相互通信;
在所述一个或多个远程设备和所述多个设备之间共享所述虚拟工作空间还包括配置所述多个设备以经由所述网络通信会话相互通信以及与所述一个或多个远程设备通信。
10.根据权利要求4所述的方法,其特征在于:
所述GUI屏幕包括虚拟工作空间GUI屏幕,所述虚拟工作空间GUI屏幕还包括所述共享工作空间信息的至少一部分。
11.根据权利要求10所述的方法,其特征在于,还包括:
经由所述用户设备的输入设备接收工作空间切换用户输入;
在所述用户设备的所述显示器上显示本地工作空间GUI屏幕,所述本地工作空间GUI屏幕还包括所述一个或多个本地设备中的每个本地设备以及所述一个或多个远程设备中的每个远程设备的链接设备GUI元素,所述本地工作空间GUI屏幕包括与所述虚拟工作空间不关联的本地工作空间信息。
12.根据权利要求4所述的方法,其特征在于,还包括:
经由所述定点设备接收指示拖动手势的拖动用户输入,所述拖动手势是相对于对应于与所述虚拟工作空间不关联的本地数据对象的数据对象图标执行的,所述拖动手势在所述GUI屏幕内对应于所述链接设备GUI元素的第一链接设备GUI元素的位置处终止,所述第一链接设备GUI元素对应于所述一个或多个本地设备或所述一个或多个远程设备中的第一设备;
响应于接收到所述拖动用户输入,向第一设备发送所述本地数据对象。
13.根据权利要求12所述的方法,其特征在于,还包括:
在所述第一设备处接收所述用户设备的所述本地数据对象;
在所述第一设备的显示器上显示包括接收到的数据对象图标的第一设备GUI屏幕;
经由所述第一设备的定点设备接收第一设备拖动用户输入,所述第一设备拖动用户输入指示相对于所述接收到的数据对象图标执行的拖动手势;
响应于接收到所述第一设备拖动用户输入,在所述第一设备的所述显示器上显示第一设备本地工作空间GUI屏幕,所述第一设备本地工作空间GUI屏幕包括与所述虚拟工作空间不关联的第一设备本地工作空间信息;
将所述接收到的本地数据对象与所述第一设备本地工作空间信息关联地保存到所述第一设备的存储器中。
14.根据权利要求4所述的方法,其特征在于,还包括:
经由所述定点设备接收指示周边拖动手势的拖动用户输入,所述周边拖动手势是相对于对应于与所述虚拟工作空间不关联的本地数据对象的数据对象图标执行的,所述周边拖动手势在所述GUI屏幕内与所述GUI屏幕的边缘相距预定距离内的位置处终止;
响应于接收到所述周边拖动用户输入,向所述一个或多个本地设备和所述一个或多个远程设备发送所述本地数据对象。
15.根据权利要求4所述的方法,其特征在于,还包括:
激活所述用户设备的共享屏幕模式,使得所述用户设备的本地工作空间GUI屏幕可作为所述共享工作空间信息的一部分由所述一个或多个本地设备和所述一个或多个远程设备访问,所述用户设备的所述本地工作空间GUI屏幕包括与所述虚拟工作空间不关联的所述用户设备的本地工作空间信息;
经由所述用户设备的输入设备接收屏幕共享传输用户输入,所述屏幕共享传输用户输入指示选择与所述一个或多个本地设备或所述一个或多个远程设备中的第一设备关联的所述链接设备GUI元素中的一个链接设备GUI元素;
响应于接收到所述屏幕共享传输用户输入,在所述用户设备的所述显示器上显示包括所述第一设备的本地工作空间信息的第一设备工作空间GUI屏幕。
16.根据权利要求15所述的方法,其特征在于:
所述输入设备包括所述定点设备;
所述GUI屏幕包括虚拟工作空间GUI屏幕,所述虚拟工作空间GUI屏幕还包括所述共享工作空间信息的至少一部分;
所述屏幕共享传输用户输入包括拖动手势,所述拖动手势:
在所述GUI屏幕内所述多个链接设备GUI元素中的第一链接设备GUI元素的位置处开始;
在所述GUI屏幕内显示所述共享工作空间信息的所述部分的位置处结束。
17.根据权利要求4所述的方法,其特征在于:
当所述用户设备在门户模式下运行时,所述GUI屏幕是在所述用户设备的所述显示器上显示的门户屏幕;
除了包括在沿所述门户屏幕的周边的相应位置处显示的所述链接设备GUI元素外,所述门户屏幕还包括具有第一显示尺寸的工作空间面板;
当所述用户设备在雷达模式下运行时,所述用户设备的所述显示器显示雷达屏幕,所述雷达屏幕包括:
雷达屏幕工作空间面板,其具有比所述第一显示尺寸小的第二显示尺寸,使得边界由在所述雷达屏幕工作空间显示面板外部的所述显示器显示;
对于所述门户屏幕的每个链接设备GUI元素,对应的雷达屏幕链接设备GUI元素显示在所述边界内沿着所述显示器的所述周边的相应位置处;
所述方法还包括:
经由所述用户设备的输入设备接收显示模式切换用户输入;
响应于接收到所述显示模式切换用户输入,在所述门户模式与所述雷达模式之间切换所述用户设备。
18.根据权利要求17所述的方法,其特征在于:
所述输入设备包括触摸屏;
所述显示模式切换用户输入包括:
用于从门户模式切换到雷达模式的向内捏合手势;
用于从雷达模式切换到门户模式的向外撑开手势。
19.一种用于管理在包括用户设备和一个或多个本地设备的多个设备之间共享的虚拟工作空间,使得所述多个设备中的每个设备都能够访问与所述虚拟工作空间关联的共享工作空间信息的用户设备,其特征在于,所述用户设备包括:
处理器设备;
显示器;
存储机器可执行指令的存储器,所述机器可执行指令当由所述处理器设备执行时,使所述用户设备:
基于所述多个设备中的一个或多个设备采集的传感器数据处理位置信息,以针对每个本地设备确定所述本地设备相对于所述用户设备的方向;
在所述显示器上显示图形用户界面(graphical user interface,GUI)屏幕,所述GUI屏幕针对每个本地设备包括链接设备GUI元素,所述链接设备GUI元素对应于所述本地设备并且包括所述本地设备的相应方向的图形指标。
20.一种非瞬时性处理器可读介质,其特征在于,存储有机器可执行指令,所述机器可执行指令当由用户设备的处理器执行时,使所述用户设备通过以下方式管理在包括所述用户设备和一个或多个本地设备的多个设备之间共享的虚拟工作空间,使得所述多个设备中的每个设备都能够访问与所述虚拟工作空间关联的共享工作空间信息:
基于所述多个设备中的一个或多个设备采集的传感器数据处理位置信息,以针对每个本地设备确定所述本地设备相对于所述用户设备的方向;
在所述用户设备的显示器上显示图形用户界面(graphical user interface,GUI)屏幕,所述GUI屏幕针对每个本地设备包括链接设备GUI元素,所述链接设备GUI元素对应于所述本地设备并且包括所述本地设备的相应方向的图形指标。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US17/509,460 US20230127644A1 (en) | 2021-10-25 | 2021-10-25 | Methods, devices, and media for managing a virtual workspace |
US17/509,460 | 2021-10-25 | ||
PCT/CN2022/124063 WO2023071737A1 (en) | 2021-10-25 | 2022-10-09 | Methods, devices, and media for managing a virtual workspace |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117941323A true CN117941323A (zh) | 2024-04-26 |
Family
ID=86056463
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280059880.2A Pending CN117941323A (zh) | 2021-10-25 | 2022-10-09 | 用于管理虚拟工作空间的方法、设备和介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20230127644A1 (zh) |
EP (1) | EP4393117A1 (zh) |
CN (1) | CN117941323A (zh) |
WO (1) | WO2023071737A1 (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230409343A1 (en) * | 2022-06-20 | 2023-12-21 | Dell Products L.P. | Location-based computer configuration |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7280851B2 (en) * | 2001-08-28 | 2007-10-09 | Sony Corporation | Information processing apparatus and method, and recording medium |
US7970870B2 (en) * | 2005-06-24 | 2011-06-28 | Microsoft Corporation | Extending digital artifacts through an interactive surface |
US20090106667A1 (en) * | 2007-10-19 | 2009-04-23 | International Business Machines Corporation | Dividing a surface of a surface-based computing device into private, user-specific areas |
JP2011248768A (ja) * | 2010-05-28 | 2011-12-08 | Sony Corp | 情報処理装置、情報処理システム及びプログラム |
US9031543B2 (en) * | 2012-06-06 | 2015-05-12 | Qualcomm Incorporated | Visualization of network members based on location and direction |
EP2760177B1 (en) * | 2013-01-29 | 2019-03-13 | BlackBerry Limited | Method, Apparatus and Computer storage media for Suspending Screen Sharing During Confidential Data Entry |
US9704137B2 (en) * | 2013-09-13 | 2017-07-11 | Box, Inc. | Simultaneous editing/accessing of content by collaborator invitation through a web-based or mobile application to a cloud-based collaboration platform |
WO2016179401A1 (en) * | 2015-05-06 | 2016-11-10 | Haworth, Inc. | Virtual workspace viewport follow mode and location markers in collaboration systems |
EP3803558A1 (en) * | 2018-06-01 | 2021-04-14 | Re Mago Ltd | Method, apparatus, and computer-readable medium for desktop sharing over a web socket connection in a networked collaboration workspace |
-
2021
- 2021-10-25 US US17/509,460 patent/US20230127644A1/en active Pending
-
2022
- 2022-10-09 CN CN202280059880.2A patent/CN117941323A/zh active Pending
- 2022-10-09 EP EP22885618.3A patent/EP4393117A1/en active Pending
- 2022-10-09 WO PCT/CN2022/124063 patent/WO2023071737A1/en active Application Filing
Also Published As
Publication number | Publication date |
---|---|
US20230127644A1 (en) | 2023-04-27 |
WO2023071737A1 (en) | 2023-05-04 |
EP4393117A1 (en) | 2024-07-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11256392B2 (en) | Unified interfaces for paired user computing devices | |
US10567481B2 (en) | Work environment for information sharing and collaboration | |
AU2018421189B2 (en) | Method for quickly opening application or application function, and terminal | |
EP2533493B1 (en) | Proximity session mobility extension | |
US20140181683A1 (en) | Method and system for controlling external device | |
US9208001B2 (en) | Object mediated data transfer between electronic devices | |
US20160147400A1 (en) | Tab based browser content sharing | |
EP2987269B1 (en) | Method and system for controlling external device | |
EP3549046B1 (en) | Gesture-based access control in virtual environments | |
KR20160087268A (ko) | 이동 단말기 및 이의 제어방법 | |
KR20140120050A (ko) | 그룹 대화에서 사적 대화 제공 장치 및 방법 | |
US10114543B2 (en) | Gestures for sharing data between devices in close physical proximity | |
US11733857B2 (en) | Graphical user interface (GUI) for controlling virtual workspaces produced across information handling systems (IHSs) | |
WO2021086599A1 (en) | Teleconferencing interfaces and controls for paired user computing devices | |
CA2808642C (en) | Object mediated data transfer between electronic devices | |
CN117941323A (zh) | 用于管理虚拟工作空间的方法、设备和介质 | |
CN117223301A (zh) | 智能流式设备的超宽带控制 | |
US11150860B1 (en) | Dynamic virtual workspace with contextual control of input/output (I/O) devices | |
US20190096130A1 (en) | Virtual mobile terminal implementing system in mixed reality and control method thereof | |
US11010204B1 (en) | Splitting input/output functions between multiple communication devices | |
US11928382B2 (en) | Contextual intelligence for virtual workspaces produced across information handling systems (IHSs) | |
KR20140098916A (ko) | 제스처 기반의 소셜리티 생성 장치 및 방법과 소셜 네트워크 서비스 서버 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |