CN107408011B - 将多个屏幕动态地合并到一个视口 - Google Patents

将多个屏幕动态地合并到一个视口 Download PDF

Info

Publication number
CN107408011B
CN107408011B CN201680018481.6A CN201680018481A CN107408011B CN 107408011 B CN107408011 B CN 107408011B CN 201680018481 A CN201680018481 A CN 201680018481A CN 107408011 B CN107408011 B CN 107408011B
Authority
CN
China
Prior art keywords
computing device
mobile computing
proximity
sensitive display
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680018481.6A
Other languages
English (en)
Other versions
CN107408011A (zh
CN107408011A8 (zh
Inventor
丹尼尔·M·凯泽斯
托马斯·德泽莱斯
维克托·克尔布内
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN107408011A publication Critical patent/CN107408011A/zh
Publication of CN107408011A8 publication Critical patent/CN107408011A8/zh
Application granted granted Critical
Publication of CN107408011B publication Critical patent/CN107408011B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
    • G01S5/0009—Transmission of position information to remote stations
    • G01S5/0072—Transmission between mobile stations, e.g. anti-collision systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/16—Details of telephonic subscriber devices including more than one display unit
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

公开了包括用于对触摸显示器执行动态的基于笔划的对准的在计算机存储介质上编码的计算机程序的方法、系统和设备。在一个方面，一种方法包括由第一移动计算装置提供主对准用户界面进行输出，所述第一移动计算装置(i)具有第一接近敏感显示器并且(ii)已经被指定为主显示装置。所述方法还包括由所述第一移动计算装置向第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器并且(ii)已经被指定为辅助显示装置。

Description

将多个屏幕动态地合并到一个视口
技术领域
本说明书涉及计算机屏幕，并且一个特别实现方式涉及动态地对准多个触摸显示器。
背景技术
诸如智能电话、个人数字助理(PDA)和平板计算机的移动装置通常包括触摸显示器，用户可通过触摸显示器提供输入，并且移动装置可通过触摸显示器向用户显示信息。在许多情形下，多个移动装置可能同时可供用户使用，从而使得可以使用多个触摸显示器进行输入和输出。
发明内容
总体上，本说明书中描述的主题的一个创新方面可在动态配置不同装置的两个或更多个显示器以基于装置之间的关联来显示单个视口的过程中实施。该过程还可使用显示器之间的转换来对准不同尺寸、纵横比或分辨率的多个显示器，以使显示器能够表现为单个更大的显示器。该过程还可允许用户在单个视口中添加或删除所配置的显示器。
总体上，本说明书中描述的主题的一个创新方面可在如下方法中实施，所述方法包括：确定第一移动计算装置与第二移动计算装置关联；至少基于确定所述第一移动计算装置与所述第二移动计算装置关联，自动确定所述第一移动计算装置相对于所述第二移动计算装置的位置信息；响应于确定所述第一移动计算装置相对于所述第二移动计算装置的位置信息，生成所述第一移动计算装置的第一接近敏感显示器和所述第二移动计算装置的第二接近敏感显示器之间的转换；以及使用所述转换来动态地合并所述第一接近敏感显示器和所述第二接近敏感显示器的视口。
这些和其它实现方式均可以可选地包括以下特征中的一个或多个。例如，由第一移动计算装置提供主对准用户界面进行输出，所述第一移动计算装置(i)具有第一接近敏感显示器并且(ii)已经被指定为主显示装置。所述方法还包括由所述第一移动计算装置向所述第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器并且(ii)已经被指定为辅助显示装置。所述方法还包括由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个笔划片段的数据。所述方法还包括至少基于用于所述第二接近敏感显示器的显示对准参数来确定用于所述第二接近敏感显示器的转换；以及使用用于所述第二接近敏感显示器的转换来处理(i)通过所述第二接近敏感显示器接收的后续接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的后续输出。
在另外的实现方式中，所述对准参数包括(i)相对于所述主显示装置上的参考点的水平偏移、(ii)相对于所述主显示装置上的参考点的垂直偏移、(iii)相对于与所述主显示装置关联的轴的角度偏移、(iv)全球定位参考和(V)尺度差异；由所述第一移动计算装置获得表征所述第一移动计算装置的数据，由所述第一移动计算装置接收表征所述第二移动计算装置的数据，以及至少基于(i)表征所述第一移动计算装置的数据以及(ii)表征所述第二移动计算装置的数据，将所述第一移动计算装置指定为所述主显示装置。所述方法包括建立所述第一移动计算装置和所述第二移动计算装置之间的直接连接；在所述主对准用户界面上提供关于已经生成转换的指示进行输出；确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的偏移可能已经改变包括由所述第一移动计算装置接收来自(i)所述第一移动计算装置的运动传感器或(ii)所述第二移动计算装置的运动数据，并且将所述运动数据与一个或多个阈值进行比较。
在另外的实现方式中，转换可包括将第二接近敏感显示器的显示坐标映射到在与所述第一接近敏感显示器关联的坐标系中的显示坐标的查找表、函数或数学表达。
在一些实现方式中，使用用于所述第二接近敏感显示器的转换包括：由所述第一移动计算装置从所述第二移动计算装置接收指示通过所述第二接近敏感显示器接收的后续接收的输入的数据；由所述第一移动计算装置将指示后续接收的输入的数据应用于所述转换，以生成转换后的输入；以及将转换后的所述输入提供到在所述第一移动计算装置上执行的应用；由所述第一移动计算装置接收指示来自所述第一移动计算装置上执行的应用的后续输出的数据；由所述第一移动计算装置接收指示来自所述第一移动计算装置上执行的应用的后续输出的数据；由所述第一移动计算装置接收指示来自所述第一移动计算装置上执行的应用的后续输出的数据；由所述第一移动计算装置将转换后的输出提供到所述第二移动计算装置。
在一些实现方式中，在使用用于所述第二接近敏感显示器的转换之后，确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的偏移可能已经改变；响应于确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的偏移可能已经改变，由所述第一移动计算装置提供所述主对准用户界面进行输出；由所述第一移动计算装置向所述第二移动计算装置传输输出所述辅助对准用户界面的第二指令；由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个附加笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个附加笔划片段的数据；至少基于(i)指示通过所述主对准用户界面输入的所述一个或多个附加笔划片段的数据以及(ii)从所述第二移动计算装置接收的、指示通过所述辅助对准用户界面输入的所述一个或多个附加笔划片段的数据，确定用于所述第二接近敏感显示器的一个或多个后续显示对准参数；至少基于用于所述第二接近敏感显示器的后续显示对准参数来确定用于所述第二接近敏感显示器的第二转换；以及使用用于所述第二接近敏感显示器的所述第二转换来处理(i)通过所述第二接近敏感显示器接收的其它接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的其它输出。
在其它实现方式中，在所述主对准用户界面上提供用于所述第一移动计算装置和所述第二移动计算装置的用户的指示进行输出，以：(i)将所述第一移动计算装置和所述第二移动计算装置按它们将要被使用的那样对准，以及(ii)通过所述主对准用户界面和所述辅助对准用户界面，输入跨所述主对准用户界面和所述辅助对准用户界面的至少一个连续笔划。另外，显示对准参数进一步基于如下确定：(iii)通过所述主对准用户界面或所述辅助对准用户界面输入的所述笔划片段中的一个或多个的斜率、(iv)所述第一移动计算装置或所述第二移动计算装置的用户的标识符、(v)与通过所述主对准用户界面或所述辅助对准用户界面输入的所述笔划片段中的一个或多个的输入相关的定时信息、(vi)所述第一移动计算装置或所述第二移动计算装置的模型信息或者(vii)所述第一接近敏感显示器或所述第二接近敏感显示器的一个或多个特性。
在另一个实现方式中，一种用于动态配置两个或更多个显示器的过程包括使用两个或更多个触摸显示器。该过程可以基于触摸输入的接收，所述触摸输入具有在每个装置上出现的片段。通过将装置置于非常接近的位置来启动对准显示器的过程，从而启动将一个装置指定为主装置的装置之间的自动通信。然后，指示用户跨装置的触摸显示器提供输入模式，以确定多个装置之间的对准。对准过程自动发生在主装置上，其中，基于两个触摸显示器上的用户的触摸笔划片段的显示坐标来计算触摸显示器之间的转换。使用笔划片段来确定参数，诸如装置之间的水平偏移、垂直偏移和角度位移，所述参数用于将两个显示视图动态地组合成一个视口。
在附图和以下描述中阐述了一个或更多个实现方式的细节。根据说明书、附图和权利要求书，其它潜在的特征和优点将变得清楚。
这些方面的其它实现方式包括编码在计算机存储装置上的被配置成执行所述方法中的动作的对应系统、设备和计算机程序。
附图说明
图1A示出了用于动态配置多个显示器的示例过程。
图1B示出了基于一个或多个笔划输入的两个装置的示例对准。
图1C示出了多个显示器之间的三个示例对准。
图2是可用于执行多个装置之间的对准的示例系统的示图。
图3A是示出了用于动态配置多个显示器的示例过程的流程图。
图3B是示出了用于对准多个触摸显示器的屏幕的示例过程的流程图。
图4是示例对准过程的泳道图。
图5是可用于将本文献中描述的系统和方法实现为客户端或一个服务器或多个服务器的计算装置的框图。
在附图中，类似的附图标记表示对应的部分。
具体实施方式
图1A示出了用于动态配置多个屏幕的示例过程。简言之，过程100A示出了在第一装置上的视口上的图形显示，过程100B示出了将第一装置上的视口与第二装置合并，过程100C示出了从视口中去除第一装置并且添加第三装置，过程100D示出了将第四装置添加到合并的视口。虽然图1A中的装置包括膝上型计算机、两个智能电话和平板，但是其它类型的移动计算装置也可与图1A中展示的装置形成关联。
初始地，过程100A中的视口包括图1A中展示的第一装置。第一装置可与过程100B中的第二装置形成关联，这使得能够配置显示在第一装置上的图形的单个视口。即使在去除与第一装置的关联之后，也可在第二装置上保持动态视口。然后，第二装置可与第三装置形成后续关联并且继续保持显示图形的动态视口，如过程100C中展示的。然后，第三装置可与第四装置形成关联，从而将第四装置配置为也显示动态视口上的图形。
图1B示出了基于一个或多个笔划输入的两个装置的示例对准。主装置101和辅助装置102分别包括触摸显示器104和触摸显示器105，触摸显示器104和触摸显示器105检测触摸显示器的显示区内触摸输入的存在。虽然图1仅示出了两个装置，但是在一些实现方式中，可存在与主装置101一起使用的两个或更多个辅助装置。
主装置101和辅助装置102可以是诸如智能电话、平板计算机、膝上型计算机的具有触摸显示器的任何类型的移动计算装置。在一个实现方式中，主装置101和辅助装置102可以是诸如智能电话和膝上型计算机的不同类别的移动计算装置。在另一个实现方式中，主装置101和辅助装置102可运行诸如用于智能电话的移动操作系统、用于膝上型计算机的桌面操作系统或基于装置制造商的不同移动操作系统这样的不同操作系统。
在一个特别实现方式中，主装置101和辅助装置102可通过特定指定过程被指定为主装置和辅助装置，该特定指定过程将主装置标识为执行对准所必需的所有过程的控制器，并且将辅助装置标识为将用户输入传输到主装置的接收器。在其它实现方式中，主装置101和辅助装置102之间的装置指定过程可由对等通信组成，该对等通信将所有装置标识为作为用于执行特定过程的控制器的主装置。在该实现方式中，可按分段方式执行对准处理，以使处理速度最大化。例如，主装置101和辅助装置102可被指定为对等装置，其中，可在辅助装置101上执行对接收到的输入的优化，而在主装置101上执行转换处理。
如本说明书所使用的，“触摸显示器”(或“触摸屏幕”或“触摸敏感显示器”或“接近敏感显示器”)是可检测显示区内触摸的存在和位置的电子视觉显示器。触摸定义了可表示触摸显示器104和触摸显示器105上的任何特定位置处的单个输入的用户输入，或者触摸可分别表示主触摸显示器104和辅助触摸显示器105上跨多个位置的移动或“笔划片段”。在其它实现方式中，可使用接近敏感显示器来代替触摸显示器。
主触摸显示器104或辅助触摸显示器105可以是接收输入的导电信号的电容显示器。在一些实现方式中，主触摸显示器104或辅助触摸显示器105也可以是通过有源数字化触笔以及通过电容触摸而接收输入的数字化触摸显示器。主触摸显示器104和辅助触摸显示器105不需要是与本说明书内讨论的将使用的触摸显示器相同类型的触摸显示器。
用户可向主触摸显示器104和辅助触摸显示器105提供触摸输入，以响应于主触摸显示器104上的屏幕上的指令106来控制应用。用户可直接通过手指触摸或通过能够被任一触摸显示器检测到的诸如触笔的任何其它装置来提供输入。
在一些实现方式中，可通过主装置101的操作系统来呈现屏幕上的指令106(在图中，“请跨所有屏幕画‘X’！”)。例如，该指令可被呈现为操作系统的主屏幕上的通知。在其它实现方式中，可通过主装置101的操作系统内的应用来呈现屏幕上的指令106。例如，可用在用户已经进入应用之后在智能电话上执行的移动应用来呈现屏幕上的指令。屏幕上的指令还可在不同的背景(诸如，对用户说明动作的文本消息或表示动作的图片)中呈现。
屏幕上的指令106可指示用户提供触摸手势107，包括从主触摸显示器104上的任何位置到辅助触摸显示器105上的任何位置的连续笔划。用户可例如提供从主装置101的触摸点109到边界点110并且继续到辅助装置102的边界点111并且继续到辅助装置102的触摸点112的笔划片段。随后，用户可使用从触摸点115到边界点116并且继续到主装置101上的边界点117并且继续到主装置101上的触摸点119的触摸手势114来输入后续笔划片段。可从显示屏幕表面从任何方向在主显示器104和辅助显示器105之间执行笔划片段输入。虽然在图1B中仅呈现了两个笔划片段输入，但用户可在主显示器104和辅助显示器105之间提供任何数量的笔划片段。
使用分别从触摸点109到触摸点112和从触摸点115到触摸点119的笔划片段输入来通过主对准用户界面生成主装置101和辅助装置102的代表性主装置数据120和代表性辅助装置数据121，如图3B中讨论的。可存储在主装置101或辅助装置102上的代表性数据包括但不限于装置标识符(ID)、用户ID或简档信息、片段的周期性数据、主参考点122、辅助参考点124的触摸显示坐标、触摸点109、110、112和15的触摸显示坐标、边界点110、111、116和117的触摸显示坐标、触摸点109和边界点110之间、边界点111和触摸点112之间、触摸点119和边界点117之间以及边界点116和触摸点115之间的笔划片段的斜率。在一些实现方式中，主装置数据120内的多个数据项可能与辅助装置数据121不同。
用户笔划片段输入被作为主装置数据120和辅助装置数据121存储，其包括来自主装置101和辅助装置102的诸如装置ID、用户ID、起始坐标、结束坐标、参考位置和笔划片段斜率的特定数据。来自触摸输入的数据被传输到客户端装置125，以启动优化和转换过程。
在一个实现方式中，客户端装置125包括优化器125，优化器125使用根据用户笔划片段输入生成的主装置数据120和辅助装置数据121来计算诸如水平偏移、垂直偏移和旋转角度的对准参数130集合，参数130表示主显示器104和辅助显示器105上的笔划片段之间的关系。在一个实现方式中，例如，对准参数130可表示用户笔划片段输入以及在两个屏幕之间映射到公共坐标轴上的像素的坐标，包括相对于参考坐标122的垂直和水平位移。
在另一实现方式中，对准参数130可包括诸如从边界点110和边界点111的时间流逝的用户笔划片段输入的定时信息，用于计算主触摸显示器104和辅助触摸显示器105之间的距离。例如，如果用户提供了从智能手机触摸显示器到作为较大平板计算机的辅助装置的笔划片段输入，则优化器126可使用坐标之间的位移和触摸输入之间的时间流逝来计算各个笔划片段的速率分布，以确定两个装置的边界触摸点之间的位移。
在另一实现方式中，对准参数130可包括用户笔划片段输入的地理和时间信息的组合，用于重新建立主触摸显示器104和辅助触摸显示器105之间的连接。例如，如果主装置101和辅助装置102在整个对准过程中发生断开连接，则优化器126可使用诸如水平和垂直偏移、输入笔划片段的斜率以及触摸输入坐标之间的时间流逝的对准参数来预测在重新建立装置之间的网络连接时辅助装置102的可能位置。优化器126计算出的对准参数130被传输到转换发生器131，转换发生器131确定辅助触摸显示器105相对于主触摸显示器104的转换132。在一个实现方式中，转换可以是查找表，查找表包括在诸如触摸点109和119的主触摸显示器104上的用户笔划片段输入的像素坐标和诸如触摸点112和114的辅助触摸显示器105上的用户笔划片段输入的像素坐标。
在另一实现方式中，查找表还可表示从辅助触摸显示器105到主触摸显示器104上的参考像素坐标位置的像素位置转换。例如，触摸点109可在水平地测得有100个像素并且垂直地测得有150个像素的主触摸显示器104内具有坐标像素位置(40,25)，但是在辅助触摸显示器内没有坐标像素位置，因为它在辅助触摸显示器105的可寻址边界之外。因此，可在查找表内将触摸点109的辅助坐标像素位置表示为“N/A”，或者表示为没有值或NULL(无效)值。在另一个示例中，触摸点112可在水平地测得有100个像素并且垂直地测得有150个像素的辅助触摸显示器105内具有坐标像素位置(80,20)，但是在主触摸显示器内具有坐标像素位置(250,90)，因为其坐标系统在超出触摸显示器的边界之外是可寻址的。另一个示例可以是点127，其不在辅助触摸显示器的边界内，但是具有主坐标像素位置(45,125)。另一个示例可以是触摸点129，触摸点129可具有辅助坐标像素位置(10,15)和主坐标像素位置(215,-5)，因为其水平坐标超出主触摸显示器104的水平边界之外。
在其它实现方式中，对于与主装置101共享笔划片段输入的多个辅助装置，所述转换可有所不同。例如，如果有两台智能手机与用作主装置101的一个平板计算机共享输入，则可存在由每个辅助装置的触摸显示器特定的转换发生器131来计算的两个不同转换。
在一些实现方式中，可使用转换来利用用户在触摸显示器上输入的触摸像素坐标在主装置101和其它辅助装置之间进行公共视口的映射。例如，主触摸显示器104可在屏幕上示出视觉表示的一个方面，而触摸显示器105可在屏幕上示出视觉表示的替代方面。在其它实现方式中，可使用主装置101和辅助装置102的转换来形成用于增加显示器尺寸的触摸显示器104的连续视口。例如，用户可通过将主触摸显示器104上显示的对象拖拽到辅助触摸显示器105来将辅助触摸显示器105用作主触摸显示器104的扩展显示器。
在其它实现方式中，可使用转换来协调使用装置的触摸显示器传送给用户的主装置101和辅助装置102上的用户活动或计算过程。另外，可使用主显示器104和辅助显示器105之间的转换，基于由用户以不同设置配置而提供的笔划片段输入来确定触摸显示器的最佳位置。例如，用户可能希望将多个显示器彼此垂直放置，并且使用不同的触摸配置来生成多个转换，以确定辅助显示器105相对于主显示器104的最佳放置。
在其它实现方式中，可使用转换来检测多个装置之间的时间相关输入并且在装置之间创建指令或命令的集合。例如，用户可使用转换来跟踪主装置101上提供的输入，以便在触摸显示器104上的输入和传输到辅助触摸显示器105的输出之间的指定时间延迟之后，在辅助装置102上执行命令。另一个示例可包括使用转换来检测指定输入以输出动作集合，诸如运行应用、配置装置和/或打开或关闭操作系统的特征。
在其它实现方式中，转换可被用作输入/输出阈值，以基于在主触摸显示器104上提供的输入的特性来指定或指示辅助装置上的不同动作集合。例如，可使用转换来生成像素映射，在像素映射中，只有主显示器104内的特定位置触发针对辅助装置102的输出动作。用户可以指示主装置101基于主触摸显示器104上提供的输入的位置来执行过程或动作的不同集合。
图1C示出了多个显示器之间的三个示例对准。在第一示例中，在主装置152和辅助装置154之间进行成功对准之后，可跨包括主触摸显示器155和辅助触摸显示器156的公共视口呈现图形表示151。图形片段157是图形表示151的在主触摸显示器155的物理可寻址像素坐标区域内显示的部分，并且图形片段159是图形表示151的在辅助触摸显示器156的物理可寻址像素坐标区域内显示的部分。例如，图形表示151可以是用户可能希望跨多个触摸显示器呈现的图片文件。在此示例中，两台智能电话的触摸显示器的对准可使得能够通过包括每个触摸显示器的可寻址像素坐标区域的单个视口来显示图片文件。
在第二示例中，多个显示器之间的对准可通过辅助触摸显示器164上耦合的触摸输入165和主触摸显示器162上显示的输入通知166来表示。通过输入控制器167将触摸输入165和输入通知166处理为主装置160和辅助装置161的相应输入和输出，输入控制器167基于用户在每个触摸显示器上提供的输入动作，从每个装置或在先输入/输出命令的仓库接收诸如触摸输入的像素坐标位置的特征数据169。例如，当用户在辅助装置的触摸显示器上提供触摸输入时，输入控制器167可存储辅助触摸显示器的触摸输入的像素坐标位置，并且使用所生成的显示器之间的转换来确定主触摸显示器上的对应像素坐标位置。
输入控制器167还可将辅助触摸显示器164上提供的输入与响应于接收这种输入而执行的在先输出动作关联，并且将后续的输入指令传输到主装置160的操作系统。例如，响应于辅助显示器上的触摸手势，输入控制器167可以将指令传输到主显示器，以将文本消息输出到位于主装置上的移动应用。在一些实现方式中，输入控制器还可处理初始输入，初始输入从主触摸显示器162上提供的输入来触发来自主装置160的后续输出指令。
第三个示例演示了可如何利用转换来对准多个装置的显示，以便将一个装置上示出的输入视频在共享单个视口的多个装置上观看。如图中演示的，用户可在主装置169上播放驾驶游戏，在该驾驶游戏的视频中，在主触摸显示器174上同时观看到方向盘与侧视镜。用户可能希望通过使用代表两个显示器之间对准的所生成的主触摸显示器174和辅助触摸显示器175之间的转换来将游戏的视图中的一个输出到辅助触摸显示器175。随后，主触摸显示器176可显示诸如方向盘的游戏的一个视图，并且辅助触摸显示器177可显示诸如侧视镜的游戏的另一个视图。
用户随后可更改装置中的一个或多个相对于彼此的对准并且利用转换来保持单个视口。例如，用户可初始地水平对准主装置169和辅助装置170，接着随后相对于主装置169倾斜辅助装置170。在新配置的位置中，主触摸显示器176显示与其之前配置的位置相同的视频，因为其像素坐标系没有旋转至处于其原始位置的主触摸显示器174的像素坐标系。虽然辅助触摸显示器177相对于辅助显示器175的之前配置的位置旋转，但是通过在辅助触摸显示器177和主触摸显示器176的新像素坐标系之间进行转换，将所显示的视频朝向主触摸显示器176取向，以保持每个装置之间的单个视点。
在另一个实现方式中，用户可使用主装置169和辅助装置170来跨多个触摸显示器(诸如，主触摸显示器174和辅助触摸显示器175)观看单个视频。例如，用户可能希望扩展单个装置的视口以扩展一个触摸显示器的可寻址区域，从而跨多个屏幕观看单个视频内容。如之前所述的，随着装置相对于原始对准配置中的参考点进行旋转，随后可使用对准过程中的所生成的转换来保持视图。
图2是可用于执行多个装置之间的对准的示例系统的示图。简言之，主装置201包括：触摸显示器202，其接收来自用户202a的用户笔划片段输入；输入控制器204，其处理来自触摸显示器202的用户输入和从辅助装置205传输的输入；优化器206，其接收来自输入控制器204的用户笔划片段输入并且使用特定对准参数在主装置201和辅助装置205之间形成偏移；转换发生器207，其确定主装置201和辅助装置205之间的转换209并且将转换与简档信息210关联；以及界面211，其用于传输信息数据以在主装置201和辅助装置205之间输入和输出等并且存储用于主装置201和辅助装置205的笔划片段信息212。网络214用于建立主装置201和辅助装置205之间的连接。
当用户将笔划输入提供到主装置201的触摸显示器202中时，对准过程开始。可通过使用手指或者通过使用能够向诸如数字化器或触笔的触摸显示器传输输入的装置来直接传递输入。
用户笔划片段输入从触摸显示器传输到输入控制器204。输入控制器204可将所述输入与诸如装置ID和用户ID的来自主装置201的信息关联并且将它们作为简档信息210存储在主装置201内的计算机可读介质内。此外，输入控制器204将用户笔划片段输入传输到优化器206以计算诸如水平偏移、垂直偏移和旋转角度的对准参数。输入控制器204还将指令经由界面211传输到辅助装置205，以创建辅助对准用户界面。
在一个实现方式中，用户笔划片段输入数据可以是触摸显示器202上的用户触摸点的坐标像素位置，该坐标像素位置随后被作为整数值传输到输入控制器。例如，可根据如装置规范内指定的触摸显示器的像素映射来确定坐标像素位置。在另一个实现方式中，用户笔划片段输入数据也可以是被传输到输入控制器的图像文件，其中，在触摸显示板上绘制了笔划路径。例如，可在指定的时间过去之后，由触摸显示器上的电信号路径来生成图像。
在一个实现方式中，输入控制器204可顺序地处理和存储从触摸显示器202输入的用户笔划片段。例如，输入控制器可在将用户笔划片段输入存储在具有关联的简档信息的计算机可读介质中之前，初始地将用户笔划片段输入传输到优化器。在另一实现方式中，输入控制器204还可并行处理和存储用户笔划片段输入，以减少优化器206和转换发生器207中的后续输入处理和计算步骤中的处理时间。
输入控制器204向界面211传输指令，以建立与辅助装置205的连接。在一个实现方式中，指令可由针对辅助装置的操作系统的处理步骤组成，用于执行诸如使得205的触摸显示器能够接收触摸用户输入的功能集合。在另一个实现方式中，指令可包括在辅助装置205的触摸显示器上显示文本消息，用于确认在主装置201和辅助装置205之间已经建立了连接。
输入控制器204将来自主装置201和辅助装置205二者的用户笔划片段输入传输到优化器206，优化器206随后确定诸如两个装置的触摸显示器之间的水平偏移、垂直偏移和旋转角度的对准参数集合。对准参数被从优化器206传输到转换发生器207，以生成用于辅助装置205的转换209。
在一些实现方式中，对于优化和转换生成过程的计算可在外部服务器215上发生，外部服务器215通过诸如网络连接的任何形式的已建立连接从输入控制器204接收用户笔划片段输入。例如，外部服务器215可远程连接到同一网络上的主装置101并且通过无线网络连接接收用户笔划输入。在已经执行了必要计算之后，外部服务器215可将对准参数和转换209传输回输入控制，输入控制对转换进行处理并且将其存储在计算机可读存储介质中。
转换发生器207基于来自辅助装置205的对准参数和用户笔划片段输入来确定转换。转换发生器将转换209传输到输入控制器204，输入控制器204将所生成的转换存储在主装置201内的计算机可读介质中。
在一些实现方式中，可使用转换来开发示出单个图形表示的两个独立触摸显示器的互补视口。例如，触摸显示器202可示出三维物体的侧视图，而辅助装置205上的触摸显示器可示出三维物体的顶视图。在其它实现方式中，可使用主装置201和辅助装置205的转换来形成用于跨多个触摸显示器显示一个图形表示的触摸显示器202的公共视口。例如，用户可通过将触摸显示器202上显示的图片文件拖拽到辅助装置205的触摸显示器中来将辅助装置205的触摸显示器用作触摸显示器202的扩展显示器，以跨这两个触摸显示器显示同一图片中的要素。
在其它实现方式中，可使用转换来协调使用装置的触摸显示器传送给用户的主装置201和辅助装置205上的用户活动或计算过程。另外，可使用触摸显示器之间的转换，基于由用户以不同设置配置而供应的笔划片段输入来确定触摸显示器的最佳位置。例如，用户可能希望将多个显示器彼此垂直放置，并且使用不同的触摸配置来生成多个转换，以确定辅助触摸显示器相对触摸显示器202的最佳放置。
在其它实现方式中，可使用转换来检测多个装置之间的时间相关输入并且在装置之间创建指令或命令的集合。例如，用户可使用转换来跟踪主装置201上提供的输入，以便在触摸显示器202上的输入和发送到辅助触摸显示器的输出之间的指定时间延迟之后，在辅助装置205上执行命令。另一个示例可包括使用转换来检测指定输入以输出动作集合，诸如运行应用、配置装置和/或打开或关闭操作系统的特征。
在其它实现方式中，转换可被用作输入/输出阈值，以基于在主触摸显示器202上提供的输入的特性来指定或指示辅助装置上的不同动作集合。例如，可使用转换来生成像素映射，在像素映射中，只有触摸显示器202内的某些位置触发针对辅助装置205的输出动作。用户可指示主装置201基于触摸显示器202上提供的输入的位置来执行过程或动作的不同集合。
图3A是示出了用于动态配置多个显示器的示例过程的流程图。简言之，过程300A包括确定第一移动计算装置与第二移动计算装置关联；至少基于确定第一移动计算装置与第二移动计算装置关联，自动确定第一移动计算装置相对于第二移动计算装置的位置信息；响应于确定第一移动计算装置相对于第二移动计算装置的位置信息，生成第一移动计算装置的第一接近敏感显示器和第二移动计算装置的第二接近敏感显示器之间的转换；以及使用所述转换来动态地合并第一接近敏感显示器和第二接近敏感显示器的视口。
更详细地，当过程300A开始时，确定第一移动计算装置和第二移动计算装置之间的关联(301)。例如，移动计算装置例如可以是智能电话或平板计算机。该关联可以是任何类型的有线或无线通信协议允许诸如广域网(WAN)、个域网(PAN)或局域网(LAN)的信息交换。
相对于第二移动计算装置的第一移动计算装置的位置信息是基于装置之间的关联来自动确定的(302)。例如，位置信息可包括两个装置之间的位移，包括水平和垂直位移或每个装置的主轴之间的旋转角度。
响应于确定位置信息，确定相对于第二移动计算装置的第二触摸显示器的第一移动计算装置的第一触摸显示器之间的转换(303)。例如，转换可表示映射两个触摸显示器的显示的数字表示。
使用该转换来动态合并第一触摸显示器和第二触摸显示器的视口(304)。例如，可使用两个触摸显示器的转换来生成合并了两个触摸显示器的视口的共享坐标系。
图3B是示出了用于对准多个触摸显示器的屏幕的示例过程300B的流程图。简言之，过程300B包括：由第一移动计算装置提供主对准用户界面进行输出，所述第一移动计算装置(i)具有第一接近敏感显示器且(ii)已经被指定为主显示装置；由第一移动计算装置向第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器和(ii)已经被指定为辅助显示装置；由第一移动计算装置向第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器并且(ii)已经被指定为辅助显示装置；由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个笔划片段的数据，以及(ii)来自第二移动计算装置的、指示在第二移动计算装置的第二接近敏感显示器上输出的通过辅助对准用户界面输入的一个或多个笔划片段的数据；至少基于(i)指示通过主对准用户界面输入的一个或多个笔划片段的数据，以及(ii)从第二移动计算装置接收的、指示通过辅助对准用户界面输入的一个或多个笔划片段的数据，确定用于第二接近敏感显示器的一个或多个显示对准参数，其中，用于第二接近敏感显示器的显示对准参数指示第二接近敏感显示器相对于第一接近敏感显示器的偏移；至少基于用于第二接近敏感显示器的显示对准参数来确定用于第二接近敏感显示器的转换；以及使用用于所述第二接近敏感显示器的转换来处理(i)通过所述第二接近敏感显示器接收的后续接收的输入，或者(ii)用于在第二接近敏感显示器上显示的后续输出。
更详细地，当过程300B开始时，提供主对准用户界面以供第一移动计算装置输出，所述第一移动计算装置(i)具有触摸显示器并且(ii)被指定为第二移动计算装置的主显示装置。例如，该移动计算装置可以是智能电话或平板计算机(311)。
在一些实现方式中，第一移动计算装置可以是与第二移动计算装置类型不同的移动计算装置。例如，第一移动计算装置可以是智能电话，第二移动计算装置可以是平板计算机。
主对准用户界面可以是图形用户界面、基于web的用户界面、手势界面或接收用户输入的任何其它类型的界面。在一些实现方式中，主对准用户界面从第一移动计算装置输出到多于一个移动计算装置。例如，平板计算机可将主对准用户界面输出到与同一网络连接相连的多个智能电话。
被指定为主显示装置的移动计算装置向辅助显示装置传输输出辅助对准用户界面的指令(312)。
在存在多个辅助显示装置的一些实现方式中，主显示装置可向辅助显示装置发送不同的指令。例如，被设计为主显示装置的智能电话可通过移动应用将图形用户界面输出到作为智能电话的辅助显示装置，并且将基于web的图形用户界面输出到作为平板计算机的辅助装置。
在一些实现方式中，一旦用户在辅助对准用户界面上提供输入，主显示装置就可将指令顺序传输到多个辅助显示装置。例如，主显示装置可初始地向智能电话传输指令，然后一旦用户向第一辅助对准用户界面提供了输入，就向第二智能电话提交第二指令。在其它实现方式中，主显示装置可并行地向多个辅助显示装置传输降低装置之间的传输时间的指令。
主移动计算装置通过主对准用户界面接收主触摸显示器上的输入用户笔划片段，并且通过辅助对准用户界面接收对辅助显示装置的用户笔划片段输入，所述辅助对准用户界面将输入笔划片段数据输出到主对准用户界面(313)。在一些实现方式中，主对准用户界面可接收来自多个辅助对准用户界面的输出。在其它实现方式中，主对准用户界面可以是与辅助对准用户界面的类型不同的用户界面。例如，具有作为触摸用户界面的主对准用户界面的智能电话可用辅助对准用户界面接收来自另一台智能手机的输出，辅助对准用户界面是硬件用户界面，通过推动物理按钮来向主对准用户界面提供输出。
主移动计算装置分别地至少使用通过主对准用户界面输入的用户笔划片段和通过辅助对准用户界面进行的、输入到辅助显示装置的用户笔划片段的输出的一个或多个对准参数来确定辅助触摸显示器相对于主触摸显示器的偏移(314)。
在一些实现方式中，对准参数可以是使用主触摸显示器的参考坐标系的主触摸显示器和辅助触摸显示器上的输入笔划片段中的位移。例如，如果主触摸显示器和辅助触摸显示器位于彼此旁边，则偏移可以是相对于主触摸显示器上的参考点(诸如，左上角像素)的每个触摸显示器上的输入笔划片段的水平位移。
在一些实现方式中，主触摸显示器和辅助触摸显示器可具有不同的尺寸。例如，如果主装置是智能电话并且辅助装置是平板，则将基于智能电话的触摸显示器来确定在这两个装置上提供的输入笔划片段之间的对准参数。在其它实现方式中，两个触摸显示器的屏幕分辨率可能不同。
在其它实现方式中，对准参数可由其它类型的定向和旋转位移或二者的组合来表示。例如，如果辅助触摸显示器的垂直或水平面与主触摸显示器的水平或垂直平面不垂直，则对准参数将被确定为是垂直和水平位移以及主触摸显示器上的参考坐标和辅助触摸显示器上的输入笔划片段坐标之间的旋转角度。
主移动计算装置至少基于用于辅助触摸显示器的显示参数来确定相对于主触摸显示器的用于辅助触摸显示器的转换(315)。
主移动计算装置使用用于辅助触摸显示器的转换来处理辅助触摸敏感显示器上接收到的用户笔划输入或输出(316)。
在一些实现方式中，主移动装置可使用转换来形成主触摸显示器和辅助触摸显示器之间的共享坐标系，以形成单个视口。例如，如果用户将来自作为智能电话的主移动计算装置的连续笔划片段输入到作为平板计算机的辅助移动计算装置，则智能电话可使用平板计算机的触摸显示器上的输入笔划片段的转换来映射参照智能电话的坐标系的输入坐标。
图4示出了多个装置可如何通过对准过程来发送和接收笔划片段输入。对准过程400包括主装置401、辅助装置402和辅助装置404，但是可包括如图4中展示的更多辅助装置。整个对准过程中的所有装置之间的通信包括指定阶段(405)、优化阶段(406)、转换阶段(407)和输入/输出过程阶段(409)。
指定阶段(405)是从用户对主装置的触发(诸如，主装置401的触摸显示器上的输入)开始的，该触发随后初始化主装置401、辅助装置402、辅助装置404和可能在主装置附近的具有触摸显示器的任何其它装置之间的信息交换。可由网络媒介通过操作系统或通过所有装置之间的公共移动应用来传送该信息交换。在所有装置之间已经建立了公共连接之后，指定决策被从主装置401传输到诸如辅助装置402和辅助装置404的所有辅助装置，以识别将发生后续对准过程的装置。
优化阶段(406)先开始在主装置401上提供用于输出到诸如辅助装置402和辅助装置404的所有辅助装置的主对准用户界面。主装置向辅助装置402和辅助装置404传输用户界面指令，以输出辅助对准用户界面。随后，用户被指示在主装置401的触摸显示器上提供输入笔划片段，然后将其提供到输入控制器。用户继续在所有辅助装置上进行后续笔划片段输入，后续笔划片段输入经由网络媒介通过对准用户界面传输回主装置。主装置401的输入控制器从诸如辅助装置404的辅助装置接收笔划片段信息，然后将笔划片段信息优化，以确定主装置401和辅助装置404的触摸显示器上的笔划片段之间的偏移。随后，将输入笔划片段的坐标传输到转换发生器，以生成分别在主装置401和辅助装置404上的输入笔划片段的显示坐标之间的转换。
在优化阶段(406)中已经确定对准参数之后，转换阶段(407)利用在主装置401的触摸显示器上的用户输入进行初始化。前一阶段计算的转换被应用于用户输入并且通过对准用户界面传输到诸如辅助装置404的辅助装置。随后，辅助装置404接收转换后的输出，该输出表示应用转换后的主装置401上的用户输入。
输入/输出过程阶段(409)利用在辅助装置404上的用户输入初始化，该用户输入通过辅助对准用户界面被传输回主装置401。对来自辅助装置404的用户输入应用转换，以计算主装置401的触摸显示器上的映射坐标。
可输出转换后的输入，以完成存储过程。在一个实现方式中，转换后的输入可被输出到主装置401上的移动应用，该移动应用执行指示成功对准的动作集合。例如，转换后的输入可形成触发器来在主装置的触摸显示器上打开指示对准已经完成的文本通知。
在另一个实现方式中，转换后的输入也可被输出，以在转换后的输入不满足特定标准时指定故障对准尝试。例如，如果转换完成，则转换后的输入可能具有不足的值，该值可能不足以通过后处理数据过滤器进行分析来确定转换是否成功。随后，可使用不足的转换后的输入向移动应用输出故障文本通知。
在其它实现方式中，转换后的输入可被输出到装置中的一个或多个的操作系统，以初始化主装置和所有辅助装置之间的协调活动。例如，在成功进行对准过程之后，可使用转换后的输入来自动发起用户活动，用户活动利用装置的所有触摸显示器在诸如玩游戏或看视频的一个视口中同时使用。在另一个实现方式中，转换后的输入可被输出到诸如视频会议应用的共享移动应用，以在成功对准之后将这些装置同步。
图5是可用于将本文献中描述的系统和方法实现为客户端或一个服务器或多个服务器的计算装置500、550的框图。计算装置500旨在代表诸如膝上型计算机、台式机、工作站、个人数字助理、服务器，刀片服务器、大型机和其它适宜计算机的各种形式的数字计算机。计算装置550旨在代表诸如个人数字助理、蜂窝电话、智能电话和其它类似计算装置的各种形式的移动装置。另外，计算装置500或550可包括通用串行总线(USB)闪存驱动器。USB闪存驱动器可存储操作系统和其它应用。USB闪存驱动器可包括输入/输出组件(诸如，可插入另一个计算装置的USB端口中的无线传输器或USB连接器)。这里所示出的组件、其连接和关系及其功能意味着仅仅是示例性的，并不意味着限制本文献中描述和/或要求保护的发明的实现方式。
计算装置500包括处理器502、存储器504、存储装置506、与存储器504和高速扩展端口510连接的高速接口508、以及与低速总线514和存储装置506连接的低速接口512。组件502、504、506、508、510和512中的每个使用各种总线互连并且可被安装在公共主板上或酌情以其它方式安装。处理器502可处理在计算装置500内执行的指令，包括存储在存储器504中或存储装置506上的指令，以在诸如与高速接口508联接的显示器516的外部输入/输出装置上显示用于GUI的图形信息。在其它实现方式中，可酌情使用多个处理器和/或多条总线连同多个存储器和多种类型的存储器。此外，可连接多个计算装置500，其中，每个装置提供必要操作的一部分(例如，作为服务器阵列、一组刀片服务器或多处理器系统)。
存储器504将信息存储在计算装置500内。在一个实现方式中，存储器504是易失性存储器单元(一个或多个)。在另一实现方式中，存储器504是非易失性存储器单元(一个或多个)。存储器504还可以是诸如磁盘或光盘的另一种形式的计算机可读介质。
存储装置506能够为计算装置500提供大量存储。在一个实现方式中，存储装置506可以是或包含诸如软盘装置、硬盘装置、光盘装置或磁带装置、闪存存储器或其它类似固态存储装置的计算机可读介质或者包括存储区域网络中的装置或其它配置的装置阵列。计算机程序产品可在信息载体中有形地实施。计算机程序产品还可包含指令，该指令在被执行时执行诸如上述方法的一种或多种方法。信息载体是计算机或机器可读介质，诸如存储器504、存储装置506或处理器502上的存储器。
高速控制器508管理计算装置500的带宽密集型操作，而低速控制器512管理较低带宽密集型操作。这种功能分配仅仅是示例性的。在一个实现方式中，高速控制器508与存储器504、显示器516(例如，通过图形处理器或加速器)和可接收各种扩展卡(未示出)的高速扩展端口510联接。在该实现方式中，低速控制器512与存储装置506和低速扩展端口514联接。可包括各种通信端口(例如，USB、Bluetooth(蓝牙)、以太网、无线以太网)的低速扩展端口可例如通过网络适配器与诸如键盘、指示装置、麦克风/扬声器对、扫描仪或诸如交换机或路由器的网络装置的一个或多个输入/输出装置联接。计算装置500可按多种不同形式来实现，如图中所示。例如，它可被实现为标准服务器520或者在一组这样的服务器中多次实现。它也可被实现为机架服务器系统524的部分。另外，它可在诸如膝上型计算机522的个人计算机中实现。可供选择地，计算装置500中的组件可与诸如装置550的移动装置(未示出)中的其它组件组合。这些装置中的每个可包含计算装置500、550中的一个或多个，并且整个系统可由彼此通信的多个计算装置500、550组成。
计算装置500可按多种不同形式来实现，如图中所示。例如，它可被实现为标准服务器520或者在一组这样的服务器中多次实现。它也可被实现为机架服务器系统524的部分。另外，它可在诸如膝上型计算机522的个人计算机中实现。可供选择地，计算装置500中的组件可与诸如装置550的移动装置(未示出)中的其它组件组合。这些装置中的每个可包含计算装置500、550中的一个或多个，并且整个系统可由彼此通信的多个计算装置500、550组成。
计算装置550尤其包括处理器552、存储器564、诸如显示器554的输入/输出装置、通信界面566和收发器568。装置550还可设置有诸如微驱动器或其它装置的存储装置，以提供额外的存储。组件550、552、564、554、566和568中的每个使用各种总线互连，并且组件中的一些可被安装在公共主板上或酌情以其它方式安装。
处理器552可执行计算装置550内的指令，包括存储在存储器564中的指令。处理器可被实现为包括单独的和多个模拟和数字处理器的芯片的芯片组。另外，可使用多个架构中的任一个来实现处理器。例如，处理器410可以是CISC(复杂指令集计算机)处理器、RISC(精简指令集计算机)处理器或MISC(最小指令集计算机)处理器。例如，处理器可提供对装置550的其它组件的协调(诸如，对用户界面的控制、由装置550运行的应用以及由装置550进行的无线通信)。
处理器552可通过与显示器554联接的控制界面558和显示界面556与用户通信。显示器554可以是例如TFT(薄膜晶体管液晶显示器)显示器或OLED(有机发光二极管)显示器或其它适宜的显示技术。显示界面556可包括用于驱动显示器554向用户呈现图形和其它信息的适宜电路。控制界面558可从用户接收命令并将其转换以便提交给处理器552。另外，可提供与处理器552通信的外部界面562，以便能够使装置550与其它装置进行近区域通信。例如，外部界面562可在一些实现方式中提供有线通信，或者在其它实现方式中提供无线通信，并且还可使用多个界面。
存储器564将信息存储在计算装置550内。存储器564可被实现为计算机可读介质(一个或多个)、易失性存储器单元(一个或多个)或非易失性存储器单元(一个或多个)中的一种或多种。还可提供扩展存储器574，将其通过扩展界面572连接到装置550，扩展界面552可包括例如SIMM(单列直插存储器模块)卡界面。此扩展存储器574可为装置550提供额外的存储空间，或者还可存储用于装置550的应用或其它信息。具体地，扩展存储器574可包括执行或补充上述处理的指令，并且还可包括安全信息。因此，例如，扩展存储器574可被设置为用于装置550的安全模块，并且可用允许装置550被安全使用的指令对其进行编程。此外，可借助SIMM卡连同附加信息(诸如，以非可攻击方式将识别信息置于SIMM卡上)一起来提供安全应用。
存储器可包括例如闪存存储器和/或NVRAM存储器，如下所讨论的。在一个实现方式中，计算机程序产品在信息载体中有形地实施。计算机程序产品包含指令，该指令在被执行时执行诸如上述方法的一种或多种方法。信息载体是诸如存储器564、扩展存储器574、处理器552上的存储器的计算机或机器可读介质，其例如可通过收发器568或外部界面562接收。
装置550可通过通信界面566进行无线通信，通信界面566可在必要时包括数字信号处理电路。通信界面566可提供各种模式或协议下的通信，尤其是诸如GSM语音呼叫、SMS、EMS或MMS消息、CDMA、TDMA、PDC、WCDMA、CDMA2000或GPRS。可例如通过射频收发器568发生此通信。另外，可能例如使用Bluetooth、WiFi或其它此类收发器(未示出)发生短距离通信。另外，GPS(全球定位系统)接收器模块570可向装置550提供附加的导航和位置相关无线数据，该数据可酌情供在装置550上运行的应用使用。
装置550还可使用音频编解码器560进行听觉通信，音频编解码器560可从用户接收口语信息并将其转换为能使用的数字信息。同样地，音频编解码器560可诸如通过例如在装置550的听筒中的扬声器生成用户可听见的声音。此声音可包括来自语音电话呼叫的声音，可包括所记录的声音(例如，语音消息、音乐文件等)并且还可包括在装置550上操作的应用所生成的声音。
计算装置550可按多种不同形式来实现，如图中所示。例如，它可被实现为蜂窝电话580。它也可以被实现为智能电话582、个人数字助理或其它类似移动装置的部分。
这里描述的系统和方法的各种实现方式可在数字电子电路、集成电路、专门设计的ASIC(专用集成电路)、计算机硬件、固件、软件和/或这些实现方式的组合中实现。这些各种实现方式可包括在可编程系统上能执行和/或能解释的一个或多个计算机程序中的实现，该可编程系统包括可以是专用目的或通用目的的至少一个可编程处理器，其被联接到存储系统、至少一个输入装置和至少一个输出装置，以从其接收数据和指令并且向其传输数据和指令。
这些计算机程序(也称为程序、软件、软件应用程序或代码)包括用于可编程处理器的机器指令，并且可用高级程序和/或面向对象编程语言和/或汇编/机器语言来实现。如本文所使用的，术语“机器可读介质”、“计算机可读介质”是指用于向可编程处理器提供机器指令和/或数据的任何计算机程序产品、设备和/或装置(例如，磁盘、光盘、存储器、可编程逻辑器件(PLD))，包括接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”是指用于向可编程处理器提供机器指令和/或数据的任何信号。
为了提供与用户的交互，这里所描述的系统和技术可在具有向用户显示信息的显示装置(例如，CRT(阴极射线管)或LCD(液晶显示器)监视器)以及键盘和指示装置(例如，鼠标或轨迹球)的计算机上实现，用户能用键盘和指示装置向计算机提供输入。也可使用其它类型的装置来提供与用户的交互；例如，提供给用户的反馈可以是任何形式的感觉反馈(例如，视觉反馈、听觉反馈或触觉反馈)；且可从用户接收任何形式的输入(包括声音、语音或触觉输入)。
这里描述的系统和技术可在包括后端组件(例如，作为数据服务器)或包括中间件组件(例如，应用服务器)或包括前端组件(例如，具有用户可通过其与这里描述的系统和技术的实现方式交互的图形用户界面或web浏览器的客户端计算机)或此类后端组件、中间件组件或前端组件的任何组合的计算系统中实现。可通过任何形式或介质的数字数据通信(例如，通信网络)来将系统中的组件互连。通信网络的示例包括局域网(“LAN”)、广域网(“WAN”)和互联网。
计算系统可包括客户端和服务器。客户端和服务器通常彼此远离并且通常通过通信网络进行交互。客户端和服务器的关系是由于计算机程序在相应计算机上运行并且彼此具有客户端-服务器关系而引起的。
已经描述了多个实施例。但是，应当理解，可在不脱离本发明的主旨和范围的情况下进行各种修改。另外，附图中描绘的逻辑流不需要是所示出的特定次序或顺序的次序来实现所期望的结果。另外，可在所描述的流中提供其它步骤，或者可从所描述的流中消除这些步骤，并且可在所描述的系统中添加或去除其它组件。因此，其它实施例在随附权利要求书的范围内。

Claims (20)

1.一种计算机实现的方法，所述方法包括：
确定具有第一接近敏感显示器的第一移动计算装置与具有第二接近敏感显示器的第二移动计算装置关联，其中，所述第一接近敏感显示器与所述第二接近敏感显示器的屏幕分辨率特性不同；
获得指示多个用户输入的触摸数据，所述多个用户输入至少包括：(i)沿着第一轴从所述第一接近敏感显示器的一部分继续到所述第二接近敏感显示器的一部分的第一笔划片段输入，以及(ii)沿着第二轴从所述第一接近敏感显示器的不同部分继续到所述第二接近敏感显示器的不同部分的第二笔划片段输入，所述第一轴与所述第二轴在所述第一接近敏感显示器与所述第二接近敏感显示器之间的交叉点处相交；
响应于确定所述第一移动计算装置与所述第二移动计算装置关联，基于由所获得的触摸数据指示的所述第一笔划片段输入和所述第二笔划片段输入，自动确定所述第一移动计算装置相对于所述第二移动计算装置的位置信息；
响应于自动确定所述第一移动计算装置相对于所述第二移动计算装置的所述位置信息，使用所述触摸数据，生成考虑所述第一移动计算装置的所述第一接近敏感显示器与所述第二移动计算装置的所述第二接近敏感显示器的不同屏幕分辨率特性的转换；以及
使用所述转换来动态地合并所述第一接近敏感显示器和所述第二接近敏感显示器的视口，尽管所述第一移动计算装置的所述第一接近敏感显示器与所述第二移动计算装置的所述第二接近敏感显示器的不同屏幕分辨率特性。
2.根据权利要求1所述的方法，所述方法包括：
由所述第一移动计算装置提供主对准用户界面进行输出，所述第一移动计算装置(i)具有第一接近敏感显示器并且(ii)已经被指定为主显示装置；
由所述第一移动计算装置向所述第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器并且(ii)已经被指定为辅助显示装置；
由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个笔划片段的数据；
至少基于(i)指示通过所述主对准用户界面输入的所述一个或多个笔划片段的数据以及(ii)从所述第二移动计算装置接收的、指示通过所述辅助对准用户界面输入的所述一个或多个笔划片段的数据，确定用于所述第二接近敏感显示器的一个或多个显示对准参数，其中，用于所述第二接近敏感显示器的所述显示对准参数指示所述第二接近敏感显示器相对于所述第一接近敏感显示器的偏移；
至少基于用于所述第二接近敏感显示器的所述显示对准参数来确定用于所述第二接近敏感显示器的转换；以及
使用用于所述第二接近敏感显示器的所述转换来处理(i)通过所述第二接近敏感显示器接收的后续接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的后续输出。
3.根据权利要求2所述的方法，其中，所述对准参数包括(i)相对于所述主显示装置上的参考点的水平偏移、(ii)相对于所述主显示装置上的参考点的垂直偏移以及(iii)相对于与所述主显示装置关联的轴的角度偏移。
4.根据权利要求2所述的方法，其中，使用用于所述第二接近敏感显示器的所述转换包括：
由所述第一移动计算装置从所述第二移动计算装置接收指示通过所述第二接近敏感显示器接收的所述后续接收的输入的数据；
由所述第一移动计算装置将指示所述后续接收的输入的所述数据应用于所述转换，以生成转换后的输入；以及
将转换后的输入提供到在所述第一移动计算装置上执行的应用。
5.根据权利要求2所述的方法，其中，使用用于所述第二接近敏感显示器的所述转换包括：
由所述第一移动计算装置接收指示来自所述第一移动计算装置上执行的应用的所述后续输出的数据；
由所述第一移动计算装置向所述第二移动计算装置提供转换后的输出。
6.根据权利要求2所述的方法，所述方法包括：
由所述第一移动计算装置获得表征所述第一移动计算装置的数据；
由所述第一移动计算装置接收表征所述第二移动计算装置的数据；以及
至少基于(i)表征所述第一移动计算装置的所述数据以及(ii)表征所述第二移动计算装置的所述数据，将所述第一移动计算装置指定为所述主显示装置。
7.根据权利要求2所述的方法，所述方法包括：
在使用用于所述第二接近敏感显示器的所述转换之后，确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的所述偏移可能已经改变；
响应于确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的所述偏移可能已经改变，由所述第一移动计算装置提供所述主对准用户界面进行输出；
由所述第一移动计算装置向所述第二移动计算装置传输输出所述辅助对准用户界面的第二指令；
由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个附加笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个附加笔划片段的数据；
至少基于(i)指示通过所述主对准用户界面输入的所述一个或多个附加笔划片段的所述数据以及(ii)从所述第二移动计算装置接收的、指示通过所述辅助对准用户界面输入的所述一个或多个附加笔划片段的所述数据，确定用于所述第二接近敏感显示器的一个或多个后续显示对准参数；
至少基于用于所述第二接近敏感显示器的所述后续显示对准参数来确定用于所述第二接近敏感显示器的第二转换；以及
使用用于所述第二接近敏感显示器的所述第二转换来处理(i)通过所述第二接近敏感显示器接收的其它接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的其它输出。
8.根据权利要求2所述的方法，其中，所述显示对准参数进一步基于以下确定：(iii)通过所述主对准用户界面或所述辅助对准用户界面输入的所述笔划片段中的一个或多个的斜率、(iv)所述第一移动计算装置或所述第二移动计算装置的用户的标识符、(v)与通过所述主对准用户界面或所述辅助对准用户界面输入的所述笔划片段中的一个或多个的输入相关的定时信息、(vi)所述第一移动计算装置或所述第二移动计算装置的模型信息或者(vii)所述第一接近敏感显示器或所述第二接近敏感显示器的一个或多个特性。
9.一种用计算机程序编码的非暂时性计算机可读存储装置，所述程序包括指令，所述指令当由数据处理设备执行时使所述数据处理设备执行包括以下的操作：
确定具有第一接近敏感显示器的第一移动计算装置与具有第二接近敏感显示器的第二移动计算装置关联，其中，所述第一接近敏感显示器与所述第二接近敏感显示器的屏幕分辨率特性不同；
获得指示多个用户输入的触摸数据，所述多个用户输入至少包括：(i)沿着第一轴从所述第一接近敏感显示器的一部分继续到所述第二接近敏感显示器的一部分的第一笔划片段输入，以及(ii)沿着第二轴从所述第一接近敏感显示器的不同部分继续到所述第二接近敏感显示器的不同部分的第二笔划片段输入，所述第一轴与所述第二轴在所述第一接近敏感显示器与所述第二接近敏感显示器之间的交叉点处相交；
响应于确定所述第一移动计算装置与所述第二移动计算装置关联，基于由所获得的触摸数据指示的所述第一笔划片段输入和所述第二笔划片段输入，自动确定所述第一移动计算装置相对于所述第二移动计算装置的位置信息；
响应于自动确定所述第一移动计算装置相对于所述第二移动计算装置的所述位置信息，使用所述触摸数据，生成考虑所述第一移动计算装置的所述第一接近敏感显示器与所述第二移动计算装置的所述第二接近敏感显示器的不同屏幕分辨率特性的转换；以及
使用所述转换来动态地合并所述第一接近敏感显示器和所述第二接近敏感显示器的视口，尽管所述第一移动计算装置的所述第一接近敏感显示器与所述第二移动计算装置的所述第二接近敏感显示器的不同屏幕分辨率特性。
10.根据权利要求9所述的计算机可读存储装置，所述计算机可读存储装置包括：
由所述第一移动计算装置提供主对准用户界面进行输出，所述第一移动计算装置(i)具有第一接近敏感显示器并且(ii)已经被指定为主显示装置；
由所述第一移动计算装置向所述第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器并且(ii)已经被指定为辅助显示装置；
由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个笔划片段的数据；
至少基于(i)指示通过所述主对准用户界面输入的所述一个或多个笔划片段的数据以及(ii)从所述第二移动计算装置接收的、指示通过所述辅助对准用户界面输入的所述一个或多个笔划片段的数据，确定用于所述第二接近敏感显示器的一个或多个显示对准参数，其中，用于所述第二接近敏感显示器的所述显示对准参数指示所述第二接近敏感显示器相对于所述第一接近敏感显示器的偏移；
至少基于用于所述第二接近敏感显示器的所述显示对准参数来确定用于所述第二接近敏感显示器的转换；以及
使用用于所述第二接近敏感显示器的所述转换来处理(i)通过所述第二接近敏感显示器接收的后续接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的后续输出。
11.根据权利要求10所述的计算机可读存储装置，其中，所述对准参数包括(i)相对于所述主显示装置上的参考点的水平偏移、(ii)相对于所述主显示装置上的参考点的垂直偏移以及(iii)相对于与所述主显示装置关联的轴的角度偏移。
12.根据权利要求10所述的计算机可读存储装置，其中，使用用于所述第二接近敏感显示器的所述转换包括：
由所述第一移动计算装置从所述第二移动计算装置接收指示通过所述第二接近敏感显示器接收的所述后续接收的输入的数据；
由所述第一移动计算装置将指示所述后续接收的输入的所述数据应用于所述转换，以生成转换后的输入；以及
将转换后的输入提供到在所述第一移动计算装置上执行的应用。
13.根据权利要求10所述的计算机可读存储装置，其中，使用用于所述第二接近敏感显示器的所述转换包括：
由所述第一移动计算装置接收指示来自所述第一移动计算装置上执行的应用的所述后续输出的数据；
由所述第一移动计算装置将指示所述后续输出的所述数据应用于所述转换，以生成转换后的输出；
由所述第一移动计算装置向所述第二移动计算装置提供转换后的输出。
14.根据权利要求10所述的计算机可读存储装置，所述计算机可读存储装置包括：
由所述第一移动计算装置获得表征所述第一移动计算装置的数据；
由所述第一移动计算装置接收表征所述第二移动计算装置的数据；以及
至少基于(i)表征所述第一移动计算装置的所述数据以及(ii)表征所述第二移动计算装置的所述数据，将所述第一移动计算装置指定为所述主显示装置。
15.根据权利要求10所述的计算机可读存储装置，所述计算机可读存储装置包括：
在使用用于所述第二接近敏感显示器的所述转换之后，确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的所述偏移可能已经改变；
响应于确定所述第二接近敏感显示器相对于所述第一接近敏感显示器的所述偏移可能已经改变，由所述第一移动计算装置提供所述主对准用户界面进行输出；
由所述第一移动计算装置向所述第二移动计算装置传输输出所述辅助对准用户界面的第二指令；
由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个附加笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个附加笔划片段的数据；
至少基于(i)指示通过所述主对准用户界面输入的所述一个或多个附加笔划片段的所述数据以及(ii)从所述第二移动计算装置接收的、指示通过所述辅助对准用户界面输入的所述一个或多个附加笔划片段的所述数据，确定用于所述第二接近敏感显示器的一个或多个后续显示对准参数；
至少基于用于所述第二接近敏感显示器的所述后续显示对准参数来确定用于所述第二接近敏感显示器的第二转换；以及
使用用于所述第二接近敏感显示器的所述第二转换来处理(i)通过所述第二接近敏感显示器接收的其它接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的其它输出。
16.根据权利要求10所述的计算机可读存储装置，其中，显示对准参数进一步基于以下确定：(iii)通过所述主对准用户界面或所述辅助对准用户界面输入的所述笔划片段中的一个或多个的斜率、(iv)所述第一移动计算装置或所述第二移动计算装置的用户的标识符、(v)与通过所述主对准用户界面或所述辅助对准用户界面输入的所述笔划片段中的一个或多个的输入相关的定时信息、(vi)所述第一移动计算装置或所述第二移动计算装置的模型信息或者(vii)所述第一接近敏感显示器或所述第二接近敏感显示器的一个或多个特性。
17.一种系统，所述系统包括：
一个或多个计算机和一个或多个存储装置，所述存储装置存储可操作的指令，所述指令当由所述一个或多个计算机执行时使所述一个或多个计算机执行包括以下的操作：
确定具有第一接近敏感显示器的第一移动计算装置与具有第二接近敏感显示器的第二移动计算装置关联，其中，所述第一接近敏感显示器与所述第二接近敏感显示器的屏幕分辨率特性不同；
获得指示多个用户输入的触摸数据，所述多个用户输入至少包括：(i)沿着第一轴从所述第一接近敏感显示器的一部分继续到所述第二接近敏感显示器的一部分的第一笔划片段输入，以及(ii)沿着第二轴从所述第一接近敏感显示器的不同部分继续到所述第二接近敏感显示器的不同部分的第二笔划片段输入，所述第一轴与所述第二轴在所述第一接近敏感显示器与所述第二接近敏感显示器之间的交叉点处相交；
响应于确定所述第一移动计算装置与所述第二移动计算装置关联，基于由所获得的触摸数据指示的所述第一笔划片段输入和所述第二笔划片段输入，自动确定所述第一移动计算装置相对于所述第二移动计算装置的位置信息；
响应于自动确定所述第一移动计算装置相对于所述第二移动计算装置的所述位置信息，使用所述触摸数据，生成考虑所述第一移动计算装置的所述第一接近敏感显示器与所述第二移动计算装置的所述第二接近敏感显示器的不同屏幕分辨率特性的转换；以及
使用所述转换来动态地合并所述第一接近敏感显示器和所述第二接近敏感显示器的视口，尽管所述第一移动计算装置的所述第一接近敏感显示器与所述第二移动计算装置的所述第二接近敏感显示器的不同屏幕分辨率特性。
18.根据权利要求17所述的系统，所述系统包括：
由第一移动计算装置提供主对准用户界面进行输出，所述第一移动计算装置(i)具有第一接近敏感显示器并且(ii)已经被指定为主显示装置；
由所述第一移动计算装置向第二移动计算装置传输输出辅助对准用户界面的指令，所述第二移动计算装置(i)具有第二接近敏感显示器并且(ii)已经被指定为辅助显示装置；
由所述第一移动计算装置接收(i)指示在所述第一移动计算装置的所述第一接近敏感显示器上输出的通过所述主对准用户界面输入的一个或多个笔划片段的数据，以及(ii)来自所述第二移动计算装置的、指示在所述第二移动计算装置的所述第二接近敏感显示器上输出的通过所述辅助对准用户界面输入的一个或多个笔划片段的数据；
至少基于(i)指示通过所述主对准用户界面输入的所述一个或多个笔划片段的数据以及(ii)从所述第二移动计算装置接收的、指示通过所述辅助对准用户界面输入的所述一个或多个笔划片段的数据，确定用于所述第二接近敏感显示器的一个或多个显示对准参数，其中，用于所述第二接近敏感显示器的所述显示对准参数指示所述第二接近敏感显示器相对于所述第一接近敏感显示器的偏移；
至少基于用于所述第二接近敏感显示器的所述显示对准参数来确定用于所述第二接近敏感显示器的转换；以及
使用用于所述第二接近敏感显示器的所述转换来处理(i)通过所述第二接近敏感显示器接收的后续接收的输入，或者(ii)用于在所述第二接近敏感显示器上显示的后续输出。
19.根据权利要求18所述的系统，其中，使用用于所述第二接近敏感显示器的所述转换包括：
由所述第一移动计算装置从所述第二移动计算装置接收指示通过所述第二接近敏感显示器接收的所述后续接收的输入的数据；
由所述第一移动计算装置将指示所述后续接收的输入的所述数据应用于所述转换，以生成转换后的输入；以及
将转换后的输入提供到在所述第一移动计算装置上执行的应用。
20.根据权利要求18所述的系统，其中，使用用于所述第二接近敏感显示器的所述转换包括：
由所述第一移动计算装置接收指示来自所述第一移动计算装置上执行的应用的所述后续输出的数据；
由所述第一移动计算装置将指示所述后续输出的所述数据应用于所述转换，以生成转换后的输出；
由所述第一移动计算装置向所述第二移动计算装置提供转换后的输出。
CN201680018481.6A 2015-03-27 2016-01-29 将多个屏幕动态地合并到一个视口 Active CN107408011B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/671,789 US9965155B2 (en) 2015-03-27 2015-03-27 Dynamically merging multiple screens into one view port
US14/671,789 2015-03-27
PCT/US2016/015607 WO2016160114A1 (en) 2015-03-27 2016-01-29 Dynamically merging multiple screens into one view port

Publications (3)

Publication Number Publication Date
CN107408011A CN107408011A (zh) 2017-11-28
CN107408011A8 CN107408011A8 (zh) 2018-01-12
CN107408011B true CN107408011B (zh) 2021-01-08

Family

ID=55398436

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680018481.6A Active CN107408011B (zh) 2015-03-27 2016-01-29 将多个屏幕动态地合并到一个视口

Country Status (4)

Country Link
US (1) US9965155B2 (zh)
EP (1) EP3274802A1 (zh)
CN (1) CN107408011B (zh)
WO (1) WO2016160114A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10354569B2 (en) 2017-02-08 2019-07-16 Microsoft Technology Licensing, Llc Multi-display system
GB2569815B (en) 2017-12-29 2021-12-01 Francisca Jones Maria Display apparatus
GB2604816B (en) * 2017-12-29 2023-01-18 Francisca Jones Maria Display apparatus
US10880685B2 (en) * 2018-01-08 2020-12-29 Facebook, Inc. Provisioning content across multiple devices
US10564915B2 (en) 2018-03-05 2020-02-18 Microsoft Technology Licensing, Llc Displaying content based on positional state
US11093201B2 (en) * 2019-09-26 2021-08-17 Google Llc Device manager that utilizes physical position of display devices
US11226715B2 (en) * 2019-09-30 2022-01-18 Lenovo (Singapore) Pte. Ltd. Universal size designation for display element during display and transfer
CN111142827B (zh) * 2019-12-31 2021-04-13 镁佳(北京)科技有限公司 应用显示方法及装置，存储介质及电子设备
US11564196B2 (en) * 2020-11-03 2023-01-24 International Business Machines Corporation Determining peripheral device position relative to a primary display
EP4016996A1 (en) * 2020-12-16 2022-06-22 Nokia Technologies Oy Enabling communications actions in a conference session

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070124503A1 (en) * 2005-10-31 2007-05-31 Microsoft Corporation Distributed sensing techniques for mobile devices
CN101276253A (zh) * 2007-03-30 2008-10-01 联想(北京)有限公司 一种多屏显示系统及多屏显示设置方法
US20120244849A1 (en) * 2011-03-21 2012-09-27 John Douglas Thomson Safety system to disable and activate functions in Smartphone's, mobile phones and portable communication devices while driving
US20130169571A1 (en) * 2011-12-30 2013-07-04 Bowei Gai Systems and methods for mobile device pairing
CN103403647A (zh) * 2010-10-01 2013-11-20 Flex Electronics ID Co.,Ltd. 填充多屏幕设备或者横越其多个屏幕的键盘
US20130321310A1 (en) * 2012-05-30 2013-12-05 Chi Mei Communication Systems, Inc. Electronic device and method for determining position of the electronic device
US20140002327A1 (en) * 2012-06-30 2014-01-02 At&T Mobility Ii Llc Real-Time Management of Content Depicted on a Plurality of Displays

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5390279A (en) 1992-12-31 1995-02-14 Apple Computer, Inc. Partitioning speech rules by context for speech recognition
US6904405B2 (en) 1999-07-17 2005-06-07 Edwin A. Suominen Message recognition using shared language model
US7532196B2 (en) * 2003-10-30 2009-05-12 Microsoft Corporation Distributed sensing techniques for mobile devices
US7542907B2 (en) 2003-12-19 2009-06-02 International Business Machines Corporation Biasing a speech recognizer based on prompt context
US8810480B2 (en) * 2006-08-04 2014-08-19 Apple Inc. Methods and apparatuses for controlling display devices
US8823640B1 (en) * 2010-10-22 2014-09-02 Scott C. Harris Display reconfiguration and expansion across multiple devices
TWI475468B (zh) * 2011-03-23 2015-03-01 Acer Inc 可攜式裝置、資料傳輸系統及其相關顯示共享方法
US9131333B2 (en) 2011-12-30 2015-09-08 Linkedin Corporation Systems and methods for mobile device pairing
KR101959347B1 (ko) * 2012-05-25 2019-03-18 삼성전자주식회사 복수의 통신 단말을 이용한 다중 디스플레이 방법, 기계로 읽을 수 있는 저장 매체 및 통신 단말
KR101967670B1 (ko) 2012-06-15 2019-04-11 삼성전자주식회사 단말들 간의 무선 통신 방법
US9043205B2 (en) 2012-06-21 2015-05-26 Google Inc. Dynamic language model
US20140223330A1 (en) 2013-02-01 2014-08-07 Htc Corporation Portable electronic device and multi-device integration method thereof
US20140236726A1 (en) * 2013-02-18 2014-08-21 Disney Enterprises, Inc. Transference of data associated with a product and/or product package
US9691357B2 (en) * 2013-08-09 2017-06-27 Lenovo (Beijing) Co., Ltd. Information processing method and electronic device thereof, image calibration method and apparatus, and electronic device thereof

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070124503A1 (en) * 2005-10-31 2007-05-31 Microsoft Corporation Distributed sensing techniques for mobile devices
CN101276253A (zh) * 2007-03-30 2008-10-01 联想(北京)有限公司 一种多屏显示系统及多屏显示设置方法
CN103403647A (zh) * 2010-10-01 2013-11-20 Flex Electronics ID Co.,Ltd. 填充多屏幕设备或者横越其多个屏幕的键盘
US20120244849A1 (en) * 2011-03-21 2012-09-27 John Douglas Thomson Safety system to disable and activate functions in Smartphone's, mobile phones and portable communication devices while driving
US20130169571A1 (en) * 2011-12-30 2013-07-04 Bowei Gai Systems and methods for mobile device pairing
US20130321310A1 (en) * 2012-05-30 2013-12-05 Chi Mei Communication Systems, Inc. Electronic device and method for determining position of the electronic device
US20140002327A1 (en) * 2012-06-30 2014-01-02 At&T Mobility Ii Llc Real-Time Management of Content Depicted on a Plurality of Displays

Also Published As

Publication number Publication date
CN107408011A (zh) 2017-11-28
US20160283084A1 (en) 2016-09-29
US9965155B2 (en) 2018-05-08
CN107408011A8 (zh) 2018-01-12
WO2016160114A1 (en) 2016-10-06
EP3274802A1 (en) 2018-01-31

Similar Documents

Publication Publication Date Title
CN107408011B (zh) 将多个屏幕动态地合并到一个视口
US11962930B2 (en) Method and apparatus for controlling a plurality of virtual characters, device, and storage medium
WO2019233229A1 (zh) 一种图像融合方法、装置及存储介质
US9894115B2 (en) Collaborative data editing and processing system
EP2965299B1 (en) Modifying functionality based on distances between devices
US10430655B2 (en) Augmented reality information processing system and augmented reality display control method with space information conversion and display control features
US20170316598A1 (en) 3d human face reconstruction method, apparatus and server
US10366537B2 (en) Image processing apparatus, projection control method, and program
US9317972B2 (en) User interface for augmented reality enabled devices
US10163266B2 (en) Terminal control method, image generating method, and terminal
US20200364897A1 (en) Method and device for detecting planes and/or quadtrees for use as a virtual substrate
CN110169056A (zh) 一种动态三维图像获取的方法和设备
US20130002900A1 (en) Object Tracking
EP3842749A2 (en) Positioning method, positioning device and electronic device
CN112907760B (zh) 三维对象的标注方法及装置、工具、电子设备和存储介质
JP2015118442A (ja) 情報処理装置、情報処理方法およびプログラム
CN111275803B (zh) 3d模型渲染方法、装置、设备和存储介质
US11057549B2 (en) Techniques for presenting video stream next to camera
JP2016115268A (ja) 情報処理方法、情報処理プログラム、及び情報処理装置
JP2021174531A (ja) 目標追跡方法及び装置、電子機器、記憶媒体並びにコンピュータプログラム
CN110070617B (zh) 数据同步方法、装置、硬件装置
US20130076622A1 (en) Method and apparatus for determining input
US11736795B2 (en) Shooting method, apparatus, and electronic device
US8755819B1 (en) Device location determination using images
WO2019100547A1 (zh) 投影控制方法、装置、投影交互系统及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CI02 Correction of invention patent application

Correction item: Classification number

Correct: G06F 3/0484(2013.01)|G06F 3/14(2006.01)|H04L 29/08(2006.01)|H04W 4/00(2009.01)

False: A99Z 99/00(2006.01)

Number: 48-01

Page: The title page

Volume: 33

CI02 Correction of invention patent application
CB02 Change of applicant information

Address after: American California

Applicant after: Google limited liability company

Address before: American California

Applicant before: Google Inc.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant