CN102257471B - 一种用于在移动计算设备上显示在服务器上执行的应用的窗口的方法 - Google Patents
一种用于在移动计算设备上显示在服务器上执行的应用的窗口的方法 Download PDFInfo
- Publication number
- CN102257471B CN102257471B CN200980151451.2A CN200980151451A CN102257471B CN 102257471 B CN102257471 B CN 102257471B CN 200980151451 A CN200980151451 A CN 200980151451A CN 102257471 B CN102257471 B CN 102257471B
- Authority
- CN
- China
- Prior art keywords
- window
- computing device
- mobile computing
- server
- virtual screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2310/00—Command of the display device
- G09G2310/04—Partial updating of the display screen
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/14—Solving problems related to the presentation of information to be displayed
- G09G2340/145—Solving problems related to the presentation of information to be displayed related to small screens
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
描述了用于将窗口从扩展虚拟屏幕提供到移动计算设备的本地显示器上的方法和系统。该系统包括服务器,其检测与服务器上执行的应用关联的第一窗口,所述服务器将应用输出到扩展虚拟屏幕;识别与扩展虚拟屏幕上第一窗口的位置关联的坐标;以及将第一窗口的坐标传输到移动计算设备以便在移动计算设备的本地显示器上显示第一窗口。该系统还包括移动计算设备,其在本地显示器上接收基于手势的指令;评估在接收基于手势的指令的位置处的第二窗口的内容;如果所述内容包括滚动条则滚动第二窗口的内容;以及如果所述内容不包括滚动条,则平移第二窗口的内容。
Description
临时申请的交叉引用
根据美国专利法119条e款(35 U.S.C.§119(e)),本申请要求2008年10月26日提交的美国临时申请No.61/108532的优先权,该申请通过引用被整体包含于此。
技术领域
本发明总的涉及在移动计算设备上显示应用。本发明尤其涉及用于将移动计算设备的本地显示器平移(pan)到窗口,解释基于手势的指令以滚动窗口的内容,以及在窗口中换行文本。
背景技术
远程访问系统使用户可以从各种入口访问服务器上的工作空间、计算环境、应用和文件。随着移动计算设备的日益流行,用户还能从手持设备上访问那些服务器上的应用和文件。然而,这些设备上的本地显示器通常具有低分辨率。因此,用户在移动计算设备的屏幕上可能只能查看应用或文件的一部分。用户通过在本地显示器上四处滚动应用或文件来获得另外的信息。
本地显示器的低分辨率给操作提出了挑战。例如窗口可能在本地显示器的范围外打开。用户可能错过重要的通知或警告,因为用户可能没有理由四处滚动应用或文件。另外,诸如子对话框的窗口可能在应用继续执行前要求用户输入。如果用户不能看到该窗口,那么简单看来,应用似乎是冻结的。
而且,在移动计算设备上,本地显示器上的基于手势的指令可能会产生不希望的结果,因为这些指令通常没有考虑低分辨率的显示。在一个例子中,在本地显示器上触摸和拖动窗口可能仅被解释为移动窗口的指令。在又一个例子中,放大窗口内的文本可以扩大文本的大小,但是有限的显示可能会切断单词和句子。这些复杂情况削弱了用户使用移动计算设备访问应用和文件的体验。
发明内容
本发明针对用于将窗口从扩展虚拟屏幕提供到移动计算设备的本地显示器上的方法和系统。一个实施例中,本发明涉及将本地显示器平移到新窗口,所述新窗口应该引起用户注意。这样,当服务器检测到子对话框、通知、警告或其他这样的窗口时,服务器指示移动计算设备向扩展虚拟屏幕的适当位置平移。因此,移动计算设备用户可以获知有关应用的使用的事件,以及提供输入给应用。
在又一个实施例中,本发明涉及解释本地显示器上基于手势的指令以便滚动窗口的内容,而不是平移内容或窗口本身。当移动计算设备接收这样的指令时,该设备检查正在执行的窗口的滚动条。如果该窗口包括滚动条,即使用户没有操作滚动条本身,移动计算设备依然滚动窗口的内容。因此,通过经由上下文解释基于手势的指令,用户可以使用已知的手势从应用和文件获取不同的结果。
在又一个实施例中,本发明涉及当用户放大应用时,确保窗口中的文本换行。移动计算设备计算新的字体大小,服务器调用函数以便以该大小显示应用并自动调整换行参数。因此,用户可以查看邻近内容而不是到处滚动来查看其他的采用新的字体大小的内容。
在目前所描述的系统和方法的一个方面,说明和描述了用于在移动计算设备上显示在服务器上执行的应用的窗口的方法。该方法包括由服务器检测与在服务器上执行的应用关联的窗口,所述服务器将应用输出到扩展虚拟屏幕。该方法还包括由服务器识别与扩展虚拟屏幕上窗口的位置关联的坐标,并且由服务器将窗口的坐标传输到移动计算设备上以便在移动计算设备的本地显示器上显示该窗口。窗口是对话框、用户接口、通知和警告之一。
在更多的实施例中,该方法还包括由服务器将服务器上扩展虚拟屏幕的分辨率与移动计算设备上本地显示器的分辨率进行比较;由服务器确定分辨率是否相差预定的阀值;以及如果分辨率相差至少为预定的阀值,则由服务器传输用于缩放窗口的指令。另外的实施例中,通过抓取扩展虚拟屏幕来获得窗口的坐标。在各种实施例中,服务器响应于事件触发器来检测窗口,其中所述事件触发器是从由应用的开发者编码的事件触发器和应用的用户插入的事件触发器构成的组中选择的。移动计算设备的用户通过,例如,定制在服务器上执行的应用,来指定事件触发器。
在其他实施例中,该方法还包括由移动计算设备在本地显示器上接收基于手势的指令;由移动计算设备评估在接收基于手势的指令的位置处的窗口内容;如果所述内容包括滚动条则由移动计算设备滚动窗口内容;以及如果所述内容不包括滚动条,则由移动计算设备平移窗口内容。
在本发明的又一个方面,说明和描述了用于在移动计算设备的本地显示器上显示在服务器上执行的应用的窗口的计算机实现的系统。该系统包括服务器,所述服务器包括处理器和收发器;所述处理器检测与应用关联的窗口并识别与扩展虚拟屏幕上的窗口位置关联的坐标;所述收发器将窗口的坐标传输到移动计算设备。在这个具体实施例中,移动计算设备包括根据由服务器识别的坐标来显示窗口的本地显示器。窗口是对话框、用户接口、通知和警告之一。
在系统的一个实施例中,处理器将服务器的扩展虚拟屏幕的分辨率与移动计算设备上的本地显示器的分辨率进行比较;确定分辨率是否相差预定的阀值;以及如果分辨率相差至少为预定的阀值,则传输用于缩放窗口的指令。在又一个实施例中,处理器抓取扩展虚拟屏幕以识别窗口的坐标。在又一个实施例中,处理器响应于事件触发器来检测窗口,其中所述事件触发器是从包含由应用开发者编码的事件触发器和应用的用户插入的事件触发器构成的组中选择的。在这个具体实施例中,移动计算设备的用户通过定制在服务器上的应用来指定事件触发器。在多个这样的实施例中,移动计算设备的本地显示器接收基于手势的指令;并且移动计算设备的处理器评估在接收基于手势的指令的位置处的窗口内容,如果所述内容包括滚动条则滚动窗口内容,以及当所述内容不包括滚动条时平移窗口内容。
在又一个方面,描述了根据在移动计算设备的本地显示器上所显示的窗口内容来解释基于手势的指令的方法。该方法包括由移动计算设备在移动计算设备的本地显示器上接收基于手势的指令;由移动计算设备评估在接收基于手势的指令的位置处的窗口内容;如果所述内容包括滚动条则由移动计算设备滚动窗口内容;以及如果所述内容不包括滚动条,则由移动计算设备平移窗口内容。
在一个实施例中,滚动窗口内容包括由移动计算设备传输用于滚动服务器上执行的应用所输出的窗口内容的指令。在又一个实施例中,滚动窗口内容包括由移动计算设备根据所传输的指令从服务器接收经更新的窗口内容, 并且由移动计算设备将经更新的内容显示在本地显示器上。在另外的实施例中,评估窗口内容包括抓取窗口以确定窗口是否包括滚动条。
在许多实施例中,该方法还包括由移动计算设备根据基于手势的指令计算新的字体大小;由移动计算设备将新的字体大小传输到执行应用的服务器;由服务器将全局函数应用于服务器的操作系统以便将应用调整到新的字体大小;以及由服务器将采用新的字体大小的应用传输到移动计算设备。
在又一个方面,说明和描述了用于根据在移动计算设备的本地显示器上所显示的窗口内容来解释基于手势的指令的移动计算设备。该移动计算设备包括接收基于手势的指令的本地显示器。移动计算设备还包括处理器,所述处理器评估在接收基于手势的指令的位置处的窗口内容;如果所述内容包括滚动条则滚动窗口内容;以及如果所述内容不包括滚动条时,则平移窗口内容。
在一些实施例中,处理器通过传输用于滚动服务器上执行的应用所输出的窗口内容的指令来滚动窗口内容。在进一步的实施例中,处理器通过根据所传输的指令从服务器接收经更新的窗口内容来滚动窗口内容。在另外的实施例中,处理器通过抓取窗口以确定窗口是否包括滚动条来评估窗口内容。在多个实施例中,处理器根据基于手势的指令计算新的字体大小并将新的字体大小传输到执行应用的服务器,以及服务器将全局函数应用于服务器的操作系统以便将应用调整到新的字体大小并将采用新的字体大小的应用传输到移动计算设备。
在又一个方面,说明和描述了用于将窗口从扩展虚拟屏幕提供到移动计算设备的本地显示器上的方法。该方法包括由服务器检测与在服务器上执行的应用关联的第一窗口,所述服务器将应用输出到扩展虚拟屏幕。该方法还包括由服务器识别与扩展虚拟屏幕上的第一窗口的位置关联的坐标。该方法还包括由服务器将第一窗口的坐标传输到移动计算设备以便在移动计算设备的本地显示器上显示第一窗口。该方法还包括由移动计算设备在本地显示器上接收基于手势的指令;该方法还包括由移动计算设备评估在接收基于手势的指令的位置处的第二窗口的内容。该方法还包括如果所述内容包括滚动条,则由移动计算设备滚动第二窗口的内容,以及如果所述内容不包括滚动条,则由移动计算设备平移窗口的内容。
附图说明
通过下面结合附图的描述,本发明前面提到的以及其他目的、方面、特征和优点将会更加明显并且更易于理解,其中:
图1是描述用于在移动计算设备上显示在服务器上执行的应用的窗口的系统的一个实施例的框图;
图2是说明根据本发明的一个实施例的用于在移动计算设备上显示在服务器上执行的应用的窗口的方法的流程图;
图3是说明在服务器上执行的应用在移动计算设备上常规显示的框图;
图4和5说明了根据本发明用于将图3的应用的用户接口平移到移动计算设备的本地屏幕中的系统的框图。
图6是描述用于根据移动计算设备的本地显示器上所显示的窗口内容来解释基于手势的指令的方法的一个实施例的流程图;
图7是描述用于根据移动计算设备的本地显示器上所显示的窗口内容来解释基于手势的指令的又一个方法的一个实施例的流程图。
具体实施方式
参考图1,框图示出了用于在移动计算设备上显示在服务器106上执行的应用的系统100的一个实施例。简而言之,该系统包括通过网络104与移动计算设备102通信的服务器106。服务器106通过处理器110执行应用并将应用输出到扩展虚拟屏幕115。服务器106经由收发器120将虚拟屏幕115上的输出通过网络104传输到移动计算设备102。移动计算设备102上的处理器125在又一个扩展虚拟屏幕130上存储所接收的输出。虚拟图形驱动器135和处理器125通信以在本地显示器140上显示扩展虚拟屏幕130的一部分。
在操作中,服务器106的处理器110检测与应用相关联的窗口并识别与窗口在扩展虚拟屏幕115上的位置相关联的坐标。移动计算设备102接收该坐标并将本地显示器140平移到扩展虚拟屏幕130上对应的位置。这样,移动计算设备102的用户不必主动查看最初出现在视野之外的窗口。
而且,根据本发明,移动计算设备102的处理器125将通过本地显示器140所接收的基于手势的指令解释为,例如,用于平移的指令。在这样的示例中,服务器106或移动计算设备102确定位于接收到基于手势的指令的位置处的窗口是否具有滚动条。如果有,服务器106或移动计算设备102将滚 动窗口的内容,而不是平移窗口的内容或移动窗口本身。这样的对手势的智能解释提供用于与低分辨率的本地显示器上的应用交互的简化的用户命令。
在又一个实施例中,处理器125将基于手势的指令解释为缩放指令并计算对应的新的字体大小。移动计算设备102将新的字体大小传输给服务器106,服务器106考虑到在本地显示器140上当前显示的文本以及在有限的显示上对应用文本换行的需要来相应地调整应用。服务器106将应用以期望的格式传输到移动计算设备以用于显示。相应地,用户可以改变应用的字体大小而不是到处滚动应用来获得连续的数据。
继续参考图1,现在描述服务器106及其用于系统100的组件。服务器106可以是应用服务器、应用网关、网关服务器、虚拟化服务器或部署服务器。在一些实施例中,服务器106可以作为应用服务器或主应用服务器。在其他实施例中,服务器106提供远程认证拨入用户服务(“RADIUS”)。服务器106可以是刀片服务器。
服务器106的处理器110可以是响应于以及处理从主存储器单元取回的指令的任何逻辑电路。在多个实施例中,处理器110可以由微处理器单元提供,例如:由California,Mountain View的Intel公司制造的微处理器单元;由Illinois,Schaumburg的Motorola公司制造的微处理器单元;由Califirnia,Santa Clara的Transmeta公司制造的微处理器单元;由New York,White Plains的International Business Machines公司制造的RS/6000处理器;或者由California,Sunnyvale的Advanced Micro Devices公司制造的微处理器单元。
在多个实施例中,处理器110包括多个处理器并提供用于在不只一个数据片上同时执行多个指令或同时执行一个指令的功能。处理器110可包括具有一个或多个核的并行处理器。服务器106可以是共享存储器并行设备,其具有多个处理器和/或多个处理器核,将所有可利用的存储器作为单个全局地址空间来访问。服务器106可以是分布式存储器并行设备,其具有多个处理器,每个处理器仅访问本地存储器。服务器106可具有一些共享存储器和一些仅对特定处理器或其子集可访问的存储器。在不同的实施例中,服务器106可以包括单个封装,所述单个封装将两个或者更多独立的处理器组合到单个封装中,例如单个集成电路(IC)。
在一些实施例中,处理器110可在多个数据片上执行单个指令(SIMD)。在其他实施例中,处理器110可在多个数据片上执行多个指令(MIMD)。然 而,处理器110可在单个设备中使用SIMD和MIMD核的任何组合。服务器106可以基于这些处理器的任何一个,或能够如此处所描述的操作的任何其他处理器。
服务器106上处理器110运行一个或多个应用,诸如提供瘦客户端计算的应用或远程显示表示应用。服务器106可执行Citrix Systems公司的CITRIX ACCESS SUITE的任何部分,诸如METAFRAM、CITRIX PRESENTATION SERVER,和/或Microsoft公司制造的MICROSOFT WINDOWS终端服务的任何部分。服务器106可以执行由位于Ft.Lauderdale,Florida的Citrix Systems公司开发的ICA客户端。服务器106可以运行邮件服务,诸如由位于Redmond,Washington的微软公司提供的MICROSOFT EXCHANGE。应用可包括任何类型的所寄载的服务或产品,诸如位于California,Santa Barbara的Citrix Online Division提供的GOTOMEETING、位于California,Santa Clara的WebEx公司提供的WEBEX,或者位于Washington,Redmond的微软公司提供的Microsoft Office LIVE MEETING。
服务器106的处理器110还可代表移动计算设备102上的用户执行应用。一些实施例中,服务器106执行提供执行会话的虚拟机。服务器106在执行会话中代表用户执行应用。在多个实施例中,执行会话提供对计算环境的访问,所述计算环境包括一个或多个:应用、多个应用、桌面应用和桌面会话。在一些实施例中,桌面会话是所寄载的桌面会话。
继续参考图1,现在描述移动计算设备102及其用于系统100的组件。在多个实施例中,移动计算设备102可以是JAVA使能(JAVA-enabled)蜂窝电话或个人数据助理(PDA),诸如i55sr、i58sr,i85s,i88s,i90c,i95c1或im1100,以上这些均由位于Illinois Schaumburg的摩托罗拉公司制造,由位于日本东京的Kyocera公司制造的6035或7135,或者由位于韩国首尔的Samsung电子有限公司制造的i300或i330。在一些实施例中,移动计算设备102是由位于芬兰的Nokia公司制造的移动设备,或者由位于瑞典Lund的Sony Ericsson Mobile Communications AB公司制造的移动设备。仍在其他实施例中,移动计算设备是黑莓(Blackberry)手持或智能电话,诸如由Research In Motion有限公司制造的设备,包括黑莓7100系列、8700系列、7700系列、7200系列、黑莓7520或黑莓Pearl 8100。在其他实施例中,移动计算设备102是智能电话、掌上电脑(Pocket PC);掌上电脑电话或支持Microsoft Windows Mobile Software的任何其他手持移动设备。这 些实施例的又一个中,移动计算设备102是由位于California Cupertino的苹果计算机公司制造的iPhone智能电话。
移动计算设备102的处理器125可以是此处所描述的与服务器106的处理器110有关的任何处理器。
虚拟图形驱动器135可以是管理扩展虚拟屏幕130的驱动器级组件,其可以是帧缓冲。移动计算设备102的虚拟图形驱动器135可将从服务器106接收的输出存储在扩展虚拟屏幕130上。在许多实施例中,虚拟图形驱动器135将扩展虚拟屏幕130上的数据传输到本地显示器140以用于显示。
本地显示器140可以在扩展虚拟屏幕130上显示输出。本地显示器140还可接收用户输入。在一些实施例中,本地显示器140通过触摸屏接收基于手势的指令。触摸屏可以包括接触响应表面,其检测来自移动计算设备102的用户的触摸输入。接触响应表面识别用户接触表面的位置并将该位置重定向到移动计算设备的处理器125。处理器125解释用户输入的位置来确定用户的指令。在多个实施例中,用户指令可以是缩放、滚动或平移指令,或对本领域普通技术人员显而易见的任何其他指令。
继续参考图1,网络104可以是局域网(LAN),例如公司内网,城域网(MAN),或广域网(WAN),例如因特网或万维网。在一些实施例中,在客户机102和服务器106之间有多个网络104。在这些实施例的一个中,第一网络是专用网且第二网络是公网。或者,第一网络和第二网络都是专用网,或者都是公网。
网络104可以是任意类型和/或形式的网络,包括下列任何一个:点对点网络,广播网络,广域网,局域网,电信网络,数据通信网络,计算机网络,ATM(异步传输模式)网络,SONET(同步光纤网络)网络,SDH(同步数字体系)网络,无线网络和有线网络。在一些实施例中,网络104包括无线链路,诸如红外信道或者卫星频带。网络104的拓扑可为总线型、星型或环型网络拓扑。网络104可以具有对于本领域普通技术人员所熟知的、可以支持此处描述的操作的任何这样的网络拓扑。网络可包括采用用于在移动设备间通信的任何协议的移动电话网络,所述协议包括:AMPS、TDMA、CDMA、GSM、GRPS或UMTS。在一些实施例中,可以通过不同的协议传输不同类型的数据。在其他实施例中。可以通过不同的协议传输同一类型的数据。
图2是描述用于在移动计算设备上显示服务器上执行的应用的窗口的方法中所采用的步骤的一个实施例的流程图。在这个实施例中,该方法包括: 检测与在服务器上执行的应用相关联的窗口,所述服务器将应用输出到扩展虚拟屏幕(步骤201);识别与扩展虚拟屏幕上窗口的位置相关联的坐标(步骤203);以及将窗口的坐标传输到移动计算设备以便在移动计算设备的本地显示器上显示窗口(步骤205)。
仍参考图2,更具体地,服务器106检测与应用相关联的窗口(步骤201)。在一些实施例中,服务器106上的处理器110通过抓取扩展虚拟屏幕115来检测窗口,所述扩展虚拟屏幕115接收所执行的应用的输出。例如,处理器110可对应用中的数据执行光学字符识别(OCR)算法以便检测窗口和收集相关信息。在又一个实施例中,处理器110可查询与到扩展虚拟屏幕115的输出相关联的底层编程对象来收集信息。
处理器110可收集关于扩展虚拟屏幕115上窗口的任何类型和形式的信息。在一些例子中,处理器110可收集窗口的名称、窗口在扩展虚拟屏幕上的位置、窗口的大小、与窗口相关联的应用、或上述的任何组合。处理器110可识别窗口的类型。例如,处理器110可确定窗口是否是对话框、用户接口、通知或警告。处理器110可确定窗口是否要求用户焦点,这样移动计算设备102可以将本地显示器140平移到该窗口以便使该窗口引起用户的注意。处理器110可收集关于窗口内容的信息,例如窗口是否包括滚动条。
由于处理器110检测每个窗口,处理器110可以将有关窗口的信息加入关于被输出到扩展虚拟屏幕115的多个窗口的信息的数组中。该数组可包括所收集的关于每个窗口的信息的任何组合。例如,该数组中的一项可能指示窗口#1是与Microsoft Word相关联的,在扩展虚拟屏幕上的位置坐标为(480,680)的“打开文件”窗口,所述窗口#1是子对话框并且要求用户焦点。在又一个实施例中,该数组中的一项可指示窗口#2是与Microsoft Outlook相关联的,在扩展虚拟屏幕上的位置坐标为(560,240)的“新电子邮件”窗口,所述窗口#2是通知且不要求用户焦点。在又一个实施例中,该数组中的一项可指示窗口#7是与web浏览器相关联的,在扩展虚拟屏幕上的位置坐标为(300,270)的“弹出广告”窗口,所述窗口#7是通知且不要求用户焦点。
在一些实施例中,处理器110可能会发现已经与在抓屏期间所检测的窗口相对应的数组项。如果所收集的关于该窗口的任何信息发生了改变,处理器110可以更新该数组项。在多个实施例中,处理器110可以发现对应于数组项的窗口不再显示于扩展虚拟屏幕115上。例如,接收到用户输入后对话 框可能已关闭,或者经过预定的时间后,通告收到新电子邮件的临时窗口可能已关闭。处理器110可以从数组中删除对应于所关闭的窗口的项目。
处理器110可以在任何时间或响应于任何事件来抓取扩展虚拟屏幕115,这对本领域普通技术人员是显而易见的。处理器110可以在预定的时间间隔后,抓取扩展虚拟屏幕115作为窗口。应用特定的事件也可以初始化屏幕的抓取。例如,已知的产生用于接收进一步的用户输入的子对话框的用户行为可触发这样的抓取。从而,用于打开文件、访问帮助菜单、调整应用所使用的参数(例如,字体大小、页边距、音量等)、或其他行为的命令可以给处理器发信号以抓取扩展虚拟屏幕115。
除了抓取扩展虚拟屏幕115之外或代替抓取扩展虚拟屏幕115,处理器110可以通过根据事件触发器识别窗口来检测窗口。事件触发器可以被编码到在服务器106执行的应用中。在一些实施例中,应用可包括由应用开发者插入的事件触发器。例如,每当服务器106接收到来自与应用关联的第三方服务器的指示应用更新是可利用的通知时,可以触发应用的事件触发器。在又一个例子中,应用的事件触发器可以在用户的预定试用期过去后停止应用的执行。在第三个例子中,应用的事件触发器可以在检测到应用之前被非正常关闭时恢复文件。
在更多实施例中,用户可以将事件触发器编码到服务器上可利用的应用中。在这些实施例中,服务器106可以向用户打开应用源代码,由此允许用户定制应用。用户可以插入在特定事件发生时执行的代码,并且该代码可以指示当事件发生时本地显示器140平移到何处。例如,用户插入的事件触发器可检测按键或按键的组合,如“Ctrl-X”。作为响应,事件触发器可以将本地显示器140平移到扩展虚拟屏幕130的预定的位置,例如左上角。在又一个例子中,用户插入的事件触发器可以检测来自应用的通常不要求用户焦点的通知。事件触发器可以覆盖处理器110的操作并将本地显示器140平移到该通知。
在检测到与应用相关联的窗口后,处理器110可以识别与该窗口在扩展虚拟屏幕115上的位置相关联的坐标(步骤203)。当处理器110通过屏幕抓取来检测窗口时,处理器110可以查询关于被输出到扩展虚拟屏幕115的多个窗口的信息的数组来识别该窗口的坐标。处理器110可以从对应于该窗口的项目检索坐标。
当处理器110通过事件触发器检测窗口时,处理器110可获得事件触发器所引用的坐标。在一些实施例中,事件触发器可指定窗口的坐标。例如,如果按键“Ctrl-X”将本地显示器平移到扩展虚拟屏幕115的左上角,那么事件触发器可包括向其左上角位于1024像素x768像素的屏幕上(0,768)位置的窗口平移的指令。在其他实施例中,事件触发器可指示如何获得窗口的坐标。例如,如果电子邮件的通知打开临时窗口,事件触发器可指示本地显示器140平移到与对应于该临时窗口的数组项相符的位置。
在服务器106识别与扩展虚拟屏幕上窗口的位置相关联的坐标后,服务器106上的收发器120可将窗口的坐标传输到移动计算设备102以便在移动计算设备102的本地显示器140上显示该窗口(步骤205)。收发器145可接收坐标并将坐标转发到移动计算设备102的处理器125。处理器125可与虚拟图形驱动器135通信以便根据所接收的坐标驱动本地显示器140。在一些实施例中,坐标对应于窗口的左上角。在其他实施例中,坐标对应于窗口的中央。
在许多实施例中,当服务器106通过屏幕抓取识别窗口时,只有当窗口要求用户焦点时,收发器145才可传输坐标。这样的窗口必须或应该引起移动计算设备的用户的注意。例如,子对话框打开以接收来自用户的输入,并且直到该对话框接收到期望的输入时,应用才继续执行。如果子对话框出现在本地显示器140外部的扩展虚拟屏幕115上,那么从用户的角度看,该应用看起来是没有反应的。必须使用户注意到子对话框以便继续执行应用。在又一个例子中,警告可以指示用户正在访问的网站可能有可疑的证书。因为该网站可能影响移动计算设备的安全,所以该警告应当引起用户的注意。在又一个例子中,访问网站可能打开弹出式广告,其不要求用户的焦点。在这些实施例的任何一个中,处理器110通过访问对应于窗口的数组项来确定窗口是否要求用户的焦点。
在一些实施例中,服务器106还可以向移动计算设备102传输缩放指令。服务器106可通过评估扩展虚拟屏幕115和本地显示器140的分辨率,或者通过评估窗口和本地显示器140的大小来确定缩放指令是否是适当的。例如,如果扩展虚拟屏幕115和本地显示器140的分辨率相差至少为预定的阀值,那么处理器110可以肯定缩放是合适的。又一个例子中,如果窗口的大小与本地显示器140的大小相差至少为又一个预定的阀值,那么处理器110可以肯定缩放是合适的。处理器110可将差值与不同的阀值来比较以便确定本地 显示器140应该放大还是缩小。移动计算设备102可对扩展虚拟屏幕130的上数据执行任何算法来完成缩放,例如插值或采样。
图3、4和5是描述根据本发明的服务器106的扩展虚拟屏幕115的应用输出和本地显示器140上的输出之间的关系的框图。具体参考图3,通常,扩展虚拟屏幕115的分辨率大于本地显示器140的分辨率。因此,本地显示器140只显示扩展虚拟屏幕115的一部分。服务器106与移动计算设备102通信以便驱动本地显示器140来显示期望的扩展虚拟屏幕115的部分。例如,在图4中,如上文所述,服务器106将子对话框的坐标传递给移动计算设备102以便在本地显示器140上显示该子对话框。如图5,在又一个例子中,服务器106将警告的坐标传递给移动计算设备102以在本地显示器140上显示该警告。
图6是描述用于根据移动计算设备的本地显示器上所显示的窗口内容来解释基于手势的指令的方法的一个实施例的流程图。在一个实施例中,该方法包括:在移动计算设备的本地显示器上接收基于手势的指令(步骤601);评估在接收基于手势的指令的位置处的窗口内容(步骤603);如果所述内容包括滚动条则滚动窗口内容(步骤605);以及如果所述内容不包括滚动条,则平移窗口内容(步骤607)。
仍参考图6,更具体地,移动计算设备102在移动计算设备102的本地显示器140上接收基于手势的指令(步骤601)。本地显示器140包括接触响应表面,其检测来自移动计算设备102的用户的触摸输入。接触响应表面可识别用户接触该表面的位置并将该位置重定向到移动计算设备102的处理器125。在一些实施例中,接触响应表面只将用户触摸输入的起始位置和终止位置重定向到处理器125。在其他实施例中,接触响应表面周期性地重定向所接收的位置。
在一些实施例中,基于手势的指令可以是用于移动本地显示器140上的数据的指令。例如,用户可在一个位置触摸接触响应表面并沿一条线拖动手指或光笔。处理器125可任意方式来计算该指令的尺寸。在一些实施例中,处理器125可计算用户触摸输入的起始位置和终止位置之间的距离。在其他实施例中,处理器125可沿本地显示器140的一个坐标轴计算起始和终止位置之间的一个距离并且沿本地显示器140的其他坐标轴计算起始和终止位置之间的另一个距离。
在收到移动计算设备的本地显示器上的基于手势的指令后,移动计算设备102评估在接收基于手势的指令的位置处的窗口内容(步骤603)。移动计算设备102可根据用户触摸输入开始的位置来检测窗口。在一些实施例中,处理器125可以查询关于扩展虚拟屏幕130上的多个窗口的信息的数组来识别在那个位置的窗口。在其他实施例中,在包含窗口的位置的用户触摸输入可以触发识别该窗口的事件。
一旦处理器125识别该窗口,处理器110可评估内容以确定内容是否包含滚动条。例如,处理器110可以访问窗口在有关扩展虚拟屏幕130上的窗口的信息数组中的项目。该项目可指示窗口是否包括滚动条,其在抓屏的期间已经被确定。在又一个的例子中,处理器125可访问对应于窗口的数据结构(例如对象)来确定该窗口是否包括滚动条。在这些例子的任何一个中,处理器125可确定滚动条的移动方向,例如水平或垂直。
评估在接收基于手势的指令的位置处的窗口内容后,如果所述内容包括滚动条,则移动计算设备102滚动窗口内容(步骤605)或如果所述内容不包括滚动条则平移窗口内容(步骤605)。如果窗口包括滚动条,处理器125可向服务器106传输用于滚动服务器上执行的应用输出的窗口内容的指令。该指令可包括滚动的尺寸和方向。处理器125可以根据如本领域普通技术人所显而易见的任何算法来计算该尺寸。例如,该尺寸可以与用户触摸输入的起始和终止位置之间的总距离、沿滚动条移动方向的距离或任何其他这样的距离成比例。处理器125可根据滚动条移动的方向来比较起始位置和终止位置以确定滚动方向。
如果窗口不包括滚动条,处理器125可向服务器106传输用于平移在服务器上执行的应用输出的窗口内容的指令。在这些实施例中,用于平移的指令包括两条移动内容的指令,一个沿垂直方向而另一个沿水平方向。对于在水平方向移动的指令,该尺寸可以与用户触摸输入的起始位置和终止位置之间的水平距离成比例。处理器125可通过对位置进行比较来确定水平移动的方向,例如,左或右。可以通过比较的方法为在垂直方向移动的指令确定尺寸和方向。
在所有这些实施例中,移动计算设备102根据所传输的指令从服务器106接收经更新的窗口内容。处理器125可与虚拟图形驱动器135通信以将经更新的内存存储在扩展虚拟屏幕130上。虚拟图形驱动器135进而驱动本地显示器140以便显示经更新的内容。
图7是描述用于根据移动计算设备的本地显示器上所显示的窗口内容来解释基于手势的指令的方法的又一个实施例的流程图。在一个实施例中,该方法包括:在移动计算设备的本地显示器上接收基于手势的指令(步骤701);根据基于手势的指令计算新的字体大小(步骤703);将新的字体大小传输到执行应用的服务器(步骤705);将全局函数应用于服务器的操作系统以便将应用调整到新的字体大小(步骤707);并采用新的字体大小下的应用传输到移动计算设备(步骤709)。移动计算设备102可根据所描述的与图6有关的任何方法来接收基于手势的指令。
在移动计算设备102的本地显示器140上接收到基于手势的指令后,移动计算设备102上的处理器125根据基于手势的指令来计算新的字体大小。当基于手势的指令是缩放指令时,用户触摸输入包括在触摸屏上所接收的两条线。接着,处理器125比较线的起始位置和终止位置以便确定用户要放大还是缩小应用。处理器125计算线的长度来确定缩放的尺寸并使用所计算的长度来计算新的字体大小。
在一些实施例中,处理器125可将应用所使用的字体大小乘以或除以与所计算的长度成比例的因子以便计算新的字体大小。在其他实施例中,处理器125可通过具有对应于可能的所计算的长度的表项的查询表来获得因子并放大/缩小。或者,处理器125可以直接从所计算的长度来计算因子。
在根据基于手势的指令计算新的字体大小后,移动计算设备102将新的字体大小传输到执行应用的服务器,同时服务器将全局函数应用于服务器的操作系统来将应用调整到新的字体大小。服务器使用新的字体大小调用API。该API可覆盖操作系统所使用的参数来以新的字体大小显示应用。在一些实施例中,该API可自动解决文本换行的细节。处理器将采用新的字体大小的应用输出到扩展虚拟屏幕115。接着,服务器106将采用新字体大小的应用传输到移动计算设备102以用于显示。
已经描述了用于在移动计算设备上显示在服务器上执行的应用的窗口的系统和方法的某些实施例,对本领域普通技术人员而言,可以使用包含本发明的概念的其他实施例将是显而易见的。因此,本发明应该不限于某些实施例。
Claims (13)
1.一种用于在移动计算设备上显示在服务器上执行的应用的窗口的方法,其特征在于所述方法包括:
由服务器检测与在服务器上执行的应用关联的第一窗口,所述服务器将应用输出到存在于服务器上的第一扩展虚拟屏幕以及存在于移动计算设备上的第二扩展虚拟屏幕,所述第一扩展虚拟屏幕和所述第二扩展虚拟屏幕的分辨率大于要显示所述第一窗口的所述移动计算设备的本地显示器的分辨率;
由服务器识别与所述第一扩展虚拟屏幕上所述第一窗口的位置关联的坐标;
由服务器将所述第一窗口的坐标传输到移动计算设备以便在移动计算设备的所述本地显示器上显示所述第一窗口;
由服务器将服务器上第一扩展虚拟屏幕的分辨率与移动计算设备上的本地显示器的分辨率进行比较;
由服务器确定第一扩展虚拟屏幕的分辨率与本地显示器的分辨率相差预定的阀值;以及
基于分辨率相差至少为所述预定的阀值,由服务器传输用于在所述第一窗口上平移的指令。
2.根据权利要求1所述的方法,其特征在于其中所述第一窗口是对话框、用户接口、通知和警告之一。
3.根据权利要求1所述的方法,其特征在于其中通过抓取所述第一扩展虚拟屏幕来获得所述第一窗口的坐标。
4.根据权利要求1所述的方法,其特征在于其中服务器响应于事件触发器检测所述第一窗口,所述事件触发器是从由应用开发者编码的事件触发器和应用的用户插入的事件触发器构成的组中选择的。
5.根据权利要求4所述的方法,其特征在于其中移动计算设备的用户通过定制在服务器上执行的应用来指定事件触发器。
6.根据权利要求1所述的方法,其特征在于还包括
由移动计算设备在本地显示器上接收基于手势的指令;
由移动计算设备评估在收到基于手势的指令的位置处的窗口的内容;
如果所述内容包括滚动条,则由移动计算设备滚动所述第一窗口的内容;以及
如果所述内容不包括滚动条,则由移动计算设备平移所述第一窗口的内容。
7.一种用于在移动计算设备的本地显示器上显示在服务器上执行的应用的窗口的计算机实现的系统,其特征在于所述系统包括:
包括处理器和收发器的服务器,
所述处理器用于:
检测与应用关联的窗口并且识别与存在于服务器上的第一扩展虚拟屏幕和存在于移动计算设备上的第二扩展虚拟屏幕上的第一窗口的位置关联的坐标,所述第一扩展虚拟屏幕和所述第二扩展虚拟屏幕的分辨率大于要显示所述第一窗口的所述移动计算设备的本地显示器的分辨率;
将服务器上第一扩展虚拟屏幕的分辨率与移动计算设备上的本地显示器的分辨率进行比较;
确定第一扩展虚拟屏幕的分辨率与本地显示器的分辨率相差预定的阀值;以及
基于所确定的差,提供用于在所述第一窗口上平移的指令;
所述收发器将所述第一窗口的坐标传输到所述移动计算设备;以及
包括本地显示器的移动计算设备,所述本地显示器根据来自服务器的坐标显示所述第一窗口。
8.根据权利要求7所述的系统,其特征在于其中所述第一窗口是对话框、用户接口、通知和警告之一。
9.根据权利要求7所述的系统,其特征在于其中所述处理器抓取所述第一扩展虚拟屏幕以便识别所述第一窗口的坐标。
10.根据权利要求7所述的系统,其中所述处理器响应于事件触发器来检测所述第一窗口,其特征在于所述事件触发器是从由应用开发者编码的事件触发器和应用的用户插入的事件触发器构成的组中选择的。
11.根据权利要求10所述的系统,其特征在于其中移动计算设备的用户通过定制在服务器上执行的应用来指定事件触发器。
12.根据权利要求7所述的系统,其特征在于其中
移动计算设备的本地显示器接收基于手势的指令;以及
移动计算设备的处理器评估在接收到基于手势指令的位置处的窗口内容,如果所述内容包括滚动条则滚动所述第一窗口内容,以及当所述内容不包括滚动条时平移所述第一窗口内容。
13.一种用于将窗口从扩展虚拟屏幕提供到移动计算设备的本地显示器上的方法,其特征在于所述方法包括:
由服务器检测与在服务器上执行的应用关联的第一窗口,所述服务器将应用输出到存在于服务器上的第一扩展虚拟屏幕和存在于移动计算设备上的第二扩展虚拟屏幕;
由服务器识别与第一扩展虚拟屏幕上第一窗口的位置关联的坐标,所述第一扩展虚拟屏幕和所述第二扩展虚拟屏幕的分辨率大于要显示所述第一窗口的所述移动计算设备的本地显示器的分辨率;
由服务器将第一窗口的坐标传输到移动计算设备以便在移动计算设备的本地显示器上显示第一窗口;
由服务器将服务器上第一扩展虚拟屏幕的分辨率与移动计算设备上的本地显示器的分辨率进行比较;
由服务器确定第一扩展虚拟屏幕的分辨率与本地显示器的分辨率相差预定的阀值;
基于不同的分辨率,由服务器传输用于在所述第一窗口上平移的指令;
由移动计算设备在本地显示器上接收基于手势的指令;
由移动计算设备评估在收到基于手势的指令的位置处的第二窗口的内容;
如果所述内容包括滚动条,则由移动计算设备滚动第二窗口的内容;以及
如果所述内容不包括滚动条,则由移动计算设备平移第二窗口的内容。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10853208P | 2008-10-26 | 2008-10-26 | |
US61/108532 | 2008-10-26 | ||
PCT/US2009/061900 WO2010048539A1 (en) | 2008-10-26 | 2009-10-23 | Panning a native display on a mobile computing device to a window, interpreting a gesture-based instruction to scroll contents of the window, and wrapping text on the window |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102257471A CN102257471A (zh) | 2011-11-23 |
CN102257471B true CN102257471B (zh) | 2015-07-22 |
Family
ID=41404521
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200980151451.2A Active CN102257471B (zh) | 2008-10-26 | 2009-10-23 | 一种用于在移动计算设备上显示在服务器上执行的应用的窗口的方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20100115458A1 (zh) |
EP (1) | EP2350807A1 (zh) |
CN (1) | CN102257471B (zh) |
WO (1) | WO2010048539A1 (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101432812B1 (ko) * | 2007-07-31 | 2014-08-26 | 삼성전자주식회사 | 이동통신 단말기의 디스플레이 화면에서 아이콘의 좌표를결정하는 좌표결정장치 및 좌표결정방법 |
KR100983027B1 (ko) | 2008-12-16 | 2010-09-17 | 엘지전자 주식회사 | 이동 단말기 및 이를 이용한 데이터 송수신 방법 |
US20100259464A1 (en) * | 2009-04-14 | 2010-10-14 | Jae Young Chang | Terminal and controlling method thereof |
EP2605413B1 (en) * | 2010-08-13 | 2018-10-10 | LG Electronics Inc. | Mobile terminal, system comprising the mobile terminal and a display device, and control method therefor |
US9258434B1 (en) | 2010-09-13 | 2016-02-09 | Sprint Communications Company L.P. | Using a mobile device as an external monitor |
WO2012046890A1 (ko) * | 2010-10-06 | 2012-04-12 | 엘지전자 주식회사 | 이동단말기, 디스플레이 장치 및 그 제어 방법 |
US8572508B2 (en) * | 2010-11-22 | 2013-10-29 | Acer Incorporated | Application displaying method for touch-controlled device and touch-controlled device thereof |
US9134899B2 (en) | 2011-03-14 | 2015-09-15 | Microsoft Technology Licensing, Llc | Touch gesture indicating a scroll on a touch-sensitive display in a single direction |
US10872454B2 (en) | 2012-01-06 | 2020-12-22 | Microsoft Technology Licensing, Llc | Panning animations |
US20140075377A1 (en) * | 2012-09-10 | 2014-03-13 | Samsung Electronics Co. Ltd. | Method for connecting mobile terminal and external display and apparatus implementing the same |
CN102981755A (zh) * | 2012-10-24 | 2013-03-20 | 深圳市深信服电子科技有限公司 | 基于远程应用的手势控制方法及系统 |
CN103838481B (zh) * | 2012-11-27 | 2017-09-29 | 联想(北京)有限公司 | 一种数据处理方法和电子设备 |
US20140215382A1 (en) * | 2013-01-25 | 2014-07-31 | Agilent Technologies, Inc. | Method for Utilizing Projected Gesture Completion to Improve Instrument Performance |
KR20160048429A (ko) * | 2014-10-24 | 2016-05-04 | 엘지전자 주식회사 | 이동 단말기 및 그 제어 방법 |
US9996311B2 (en) | 2016-03-15 | 2018-06-12 | Roku, Inc. | Efficient communication interface for casting interactively controlled visual content |
CN109901766B (zh) * | 2017-12-07 | 2023-03-24 | 珠海金山办公软件有限公司 | 文档视口的移动方法、装置及电子设备 |
CN108121491B (zh) * | 2017-12-18 | 2021-02-09 | 威创集团股份有限公司 | 一种显示方法及装置 |
CN114237779A (zh) * | 2020-09-09 | 2022-03-25 | 华为技术有限公司 | 一种显示窗口的方法、切换窗口的方法、电子设备和系统 |
US11175791B1 (en) * | 2020-09-29 | 2021-11-16 | International Business Machines Corporation | Augmented reality system for control boundary modification |
CN114764300B (zh) * | 2020-12-30 | 2024-05-03 | 华为技术有限公司 | 一种窗口页面的交互方法、装置、电子设备以及可读存储介质 |
Family Cites Families (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4766581A (en) * | 1984-08-07 | 1988-08-23 | Justin Korn | Information retrieval system and method using independent user stations |
SE516552C2 (sv) * | 1997-10-02 | 2002-01-29 | Ericsson Telefon Ab L M | Handburen displayenhet och metod att visa skärmbilder |
US6710790B1 (en) * | 1998-08-13 | 2004-03-23 | Symantec Corporation | Methods and apparatus for tracking the active window of a host computer in a remote computer display window |
US6597374B1 (en) * | 1998-11-12 | 2003-07-22 | Microsoft Corporation | Activity based remote control unit |
US6704024B2 (en) * | 2000-08-07 | 2004-03-09 | Zframe, Inc. | Visual content browsing using rasterized representations |
US20030085922A1 (en) * | 2001-04-13 | 2003-05-08 | Songxiang Wei | Sharing DirectDraw applications using application based screen sampling |
US20040046787A1 (en) * | 2001-06-01 | 2004-03-11 | Attachmate Corporation | System and method for screen connector design, configuration, and runtime access |
US7478338B2 (en) * | 2001-07-12 | 2009-01-13 | Autodesk, Inc. | Palette-based graphical user interface |
US7275212B2 (en) * | 2003-10-23 | 2007-09-25 | Microsoft Corporation | Synchronized graphics and region data for graphics remoting systems |
US20050256923A1 (en) * | 2004-05-14 | 2005-11-17 | Citrix Systems, Inc. | Methods and apparatus for displaying application output on devices having constrained system resources |
US7434173B2 (en) * | 2004-08-30 | 2008-10-07 | Microsoft Corporation | Scrolling web pages using direct interaction |
US20070038955A1 (en) * | 2005-08-09 | 2007-02-15 | Nguyen Mitchell V | Pen-based computer system having first and second windows together with second window locator within first window |
US8191008B2 (en) * | 2005-10-03 | 2012-05-29 | Citrix Systems, Inc. | Simulating multi-monitor functionality in a single monitor environment |
US8079037B2 (en) * | 2005-10-11 | 2011-12-13 | Knoa Software, Inc. | Generic, multi-instance method and GUI detection system for tracking and monitoring computer applications |
US8054241B2 (en) * | 2006-09-14 | 2011-11-08 | Citrix Systems, Inc. | Systems and methods for multiple display support in remote access software |
US8630512B2 (en) * | 2007-01-25 | 2014-01-14 | Skyfire Labs, Inc. | Dynamic client-server video tiling streaming |
US8176434B2 (en) * | 2008-05-12 | 2012-05-08 | Microsoft Corporation | Virtual desktop view scrolling |
-
2009
- 2009-10-23 CN CN200980151451.2A patent/CN102257471B/zh active Active
- 2009-10-23 WO PCT/US2009/061900 patent/WO2010048539A1/en active Application Filing
- 2009-10-23 US US12/605,132 patent/US20100115458A1/en not_active Abandoned
- 2009-10-23 EP EP09747957A patent/EP2350807A1/en not_active Ceased
Also Published As
Publication number | Publication date |
---|---|
CN102257471A (zh) | 2011-11-23 |
EP2350807A1 (en) | 2011-08-03 |
WO2010048539A1 (en) | 2010-04-29 |
US20100115458A1 (en) | 2010-05-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102257471B (zh) | 一种用于在移动计算设备上显示在服务器上执行的应用的窗口的方法 | |
US8847739B2 (en) | Fusing RFID and vision for surface object tracking | |
US10535198B2 (en) | Systems and methods for an augmented display system | |
CN104571813B (zh) | 一种信息的显示方法及装置 | |
CN102609130A (zh) | 计算设备中的触摸事件预期 | |
CN102375878A (zh) | Web页浏览系统和中继服务器 | |
WO2021047230A1 (zh) | 一种获取截图信息的方法及装置 | |
US20140304321A1 (en) | Desktop Application Synchronization to Process Data Captured on a Mobile Device | |
CN110221753A (zh) | 应用程序下载分类方法及终端设备 | |
WO2014040534A1 (en) | Method and apparatus for manipulating and presenting images included in webpages | |
CN111913620A (zh) | 通知类消息展示方法、装置、存储介质及移动终端 | |
CN107122120A (zh) | 一种虚拟键盘的处理方法、装置及终端 | |
CN111090489A (zh) | 一种信息控制方法及电子设备 | |
CN114968023A (zh) | 终端控制方法、装置、电子设备及存储介质 | |
CN110223615B (zh) | 一种广告展示控制方法、装置、介质及广告推送服务器 | |
CN103412704A (zh) | 用于通过姿势或触摸控制用户界面的优化方案 | |
CN111796736B (zh) | 应用程序的分享方法、装置和电子设备 | |
KR20150130800A (ko) | 데이터 공유 기능을 지원하는 사용자 단말 장치와 그 방법 | |
CN114090896A (zh) | 信息展示方法、装置及电子设备 | |
CN103905629B (zh) | 显示处理方法和显示处理设备 | |
CN113835820A (zh) | 图形码的显示方法及装置 | |
CN108021234B (zh) | 获取方法、系统、电子设备与存储介质 | |
CN112905075A (zh) | 页面显示方法、装置及介质 | |
CN111353422A (zh) | 信息提取方法、装置及电子设备 | |
CN111639282A (zh) | 信息显示方法、显示装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |