CN102902503A - 对耦合的显示器的基于视觉焦点的控制 - Google Patents

对耦合的显示器的基于视觉焦点的控制 Download PDF

Info

Publication number
CN102902503A
CN102902503A CN2012103761240A CN201210376124A CN102902503A CN 102902503 A CN102902503 A CN 102902503A CN 2012103761240 A CN2012103761240 A CN 2012103761240A CN 201210376124 A CN201210376124 A CN 201210376124A CN 102902503 A CN102902503 A CN 102902503A
Authority
CN
China
Prior art keywords
display
user
visual
visual focus
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012103761240A
Other languages
English (en)
Other versions
CN102902503B (zh
Inventor
T·E·吉布森
M·L·哈蒙特里
V·巴帕特
E·J·阿萨纳斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102902503A publication Critical patent/CN102902503A/zh
Application granted granted Critical
Publication of CN102902503B publication Critical patent/CN102902503B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1438—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/06—Consumer Electronics Control, i.e. control of another device by a display or vice versa
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/24—Keyboard-Video-Mouse [KVM] switch

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Digital Computer Display Output (AREA)

Abstract

本发明涉及对耦合的显示器的基于视觉焦点的控制。本文描述了关于基于在多显示器或多计算设备环境中用户的视觉焦点来控制显示器的功能的各种技术。标识一组显示器中用户视觉聚焦于其上的一个特定显示器。所述一组显示器包括至少第一显示器和第二显示器。此外，可经由第一显示器从用户接收的输入类型和/或第一显示器上呈现的内容基于用户的视觉焦点来控制。

Description

对耦合的显示器的基于视觉焦点的控制
技术领域
本发明涉及多显示器控制，尤其涉及基于视觉焦点的多显示器控制。
背景技术
计算设备常常与显示器进行接口。例如，计算设备可与显示器耦合和/或包括显示器。常规的用户体验常常涉及在单个显示器上输出内容的计算设备，所述内容可由用户查看。最终，多显示器环境的使用（其中多个显示器在单个计算设备上运行）变得越来越流行。对计算设备采用多显示器增加了计算设备可在其上呈现内容的显示器可操作区域（real estate）。根据一种例示，计算设备可在一个显示器上呈现与文字处理应用相关联的内容，而在另一显示器上呈现与电子表格应用相关联的内容。
最近的一种趋势是多个计算设备彼此交互以支持跨分别与这些计算设备相关联的显示器的用户体验（例如，多计算设备环境）。根据一示例，用户可在她的起居室内在耦合至媒体中心的电视机上观看电视节目，并且使用在她的智能电话上执行的应用来改变频道、音量等。然而，随着作为多显示器或多计算设备环境的一部分所采用的显示器的数量增加，用户可能未利用或未充分利用某些显示器的功能。例如，当多显示器或多计算设备环境中的一个显示器的功能被用户使用时，则另一显示器的功能可能未被用户使用或充分使用。
发明内容
此处描述了关于使用用户的视觉焦点来控制显示器功能的各种技术。可接收视觉焦点信息，该视觉焦点信息指明一组显示器中用户视觉聚焦于其上的一个特定显示器。所述一组显示器可包括至少第一显示器和第二显示器。根据某些实施例，第一显示器和第二显示器可分别与第一计算设备和第二计算设备进行接口，并且第一计算设备和第二计算设备可交互。在其他实施例中，第一显示器和第二显示器可与共享的计算设备进行接口。此外，第一显示器被配置成从用户接收的输入类型可基于视觉焦点信息来控制。另外地或另选地，第一显示器上呈现的内容可基于视觉焦点信息来控制。
在各个实施例中，用户的视觉焦点可被标识为在第一显示器上或在第二显示器上。例如，第一显示器可以是启用触摸的显示器。此外，用户的视觉焦点可从接收到的视觉焦点信息标识或者通过使用传感器的输出进行检测来标识。此外，第一显示器上呈现的内容以及可从用户接收的输入类型可基于用户的视觉焦点是在第一显示器上还是在第二显示器上来控制。
以上发明内容呈现了简化概述，以提供对本文讨论的系统和/或方法的一些方面的基本理解。本发明内容并不是对此处所讨论的系统和/或方法的全面综述。它并不旨在标识关键/重要元素，也不描绘这样的系统和/或方法的范围。其唯一目的是以简化形式呈现一些概念，作为稍后呈现的更具体实施例的序言。
附图说明
图1示出一示例性系统的功能框图，所述系统使用包括多个显示器的环境中的视觉焦点来控制显示器的功能。
图2示出一示例性系统的功能框图，所述系统基于用户的视觉焦点来控制显示器上呈现的内容和/或可经由显示器接收的输入类型。
图3-6示出一示例性场景，该场景示出对基于包括多个显示器的环境中的视觉焦点来控制显示器功能的系统的采用。
图7-8示出一示例性场景，该场景示出对基于包括多个显示器的环境中的视觉焦点来控制显示器上呈现的内容的系统的利用。
图9是示出用于控制第一显示器的功能的示例性的方法的流程图。
图10是示出用于控制包括多个显示器的环境中的启用触摸的显示器的示例性方法的流程图。
图11示出了示例性计算设备。
具体实施方式
现在参考附图来描述关于基于包括多个显示器的环境中用户的视觉焦点来控制显示器的功能的各种技术，其中在全部附图中，相同的附图标记用于指代相同的元素。在以下描述中，为解释起见，阐明了众多具体细节以提供对一个或多个方面的全面理解。然而，很明显，这（些）方面可以在没有这些具体细节的情况下实施。在其他实例中，以框图形式示出公知的结构和设备以便描述一个或多个方面。另外，可以理解，被描述为由特定系统组件执行的功能可由多个组件执行。类似地，例如，一组件可被配置成执行被描述为由多个组件执行的功能。
此外，术语“或”意指包括性“或”而非排斥性“或”。即，除非另有指定或从上下文可以清楚，否则短语“X使用A或B”意指任何自然的包括性排列。即，以下情况都满足短语“X使用A或B”：X使用A；X使用B；或X使用A和B两者。另外，本申请中和所附权利要求书中所使用的冠词“一”和“一个”一般应被解释为是指“一个或多个”，除非另有指定或从上下文可以清楚指的是单数形式。
如此处所阐述的，用户的视觉焦点可被检测并被用于控制多显示器或多计算设备环境中的显示器的功能，所述多显示器或多计算设备环境在此被统称为包括多个显示器的环境。例如，一组显示器可在包括多个显示器的环境中耦合。此外，显示器上呈现的内容可基于用户的视觉焦点是在该显示器上还是在不同的显示器上而改变。另外地或另选地，可经由显示器从用户接收的输入类型可基于用户的视觉焦点是在该显示器上还是在不同的显示器上而变化。
现在参考附图，图1示出使用包括多个显示器的环境中的视觉焦点来控制显示器的功能的系统100。系统100包括第一显示器102和第二显示器104。第一显示器102根据用户106的视觉焦点来控制。还构想了第二显示器104可根据用户106的视觉焦点来控制；然而，可以理解，所要求保护的主题不限于此。尽管系统100被描绘为包括两个显示器，但可以理解，系统100实质上可以包括除了第一显示器102和第二显示器104之外的任意数量的显示器。
在此处描述的各实施例中，第一显示器102是启用触摸的显示器（例如，第一显示器102可接收输入的情况）。根据这些实施例，启用触摸的显示器可从用户106接收输入并向用户106呈现输出。例如，启用触摸的显示器可通过检测触摸（例如，通过手指、诸如笔之类施加压力的工具等）、姿势等来从用户106接收输入。此外，在此处描述的其他实施例中，第一显示器102可以是启用触摸的显示器或者是非启用触摸的显示器。例如，非启用触摸的显示器可向用户106呈现输出，但缺少用于从用户106接收输入的功能。类似地，在某些实施例中构想了第二显示器104是启用触摸的显示器，而在其他实施例中可以是启用触摸的显示器或非启用触摸的显示器。
此外，第一计算设备108与系统100中的第一显示器102进行接口。第一计算设备108可与第一显示器102进行接口以经由第一显示器102来输出数据（例如，呈现图像、文本、图形等）。此外，第一计算设备108可与第一显示器102进行接口以经由第一显示器102来接收输入。例如，第一计算设备108可与第一显示器102耦合。根据这一示例，第一显示器102可以是可直接或间接与第一计算设备108连接（例如，经由有线和/或无线连接）的外部显示器。根据另一示例，第一计算设备108可包括第一显示器102。根据这一示例，第一计算设备108可以是平板计算机、膝上型计算机、智能电话、或带有集成显示器的任何其他类型的计算设备。系统100还可包括第二计算设备110，第二计算设备110与第二显示器104进行接口以经由第二显示器104输出数据、经由第二显示器104接收输入等。与关于第一计算设备108与第一显示器102进行接口的上述描述类似，第二计算设备110可与第二显示器104耦合或包括第二显示器104。另选地，尽管未示出，但根据各实施例，还构想了系统100不必包括第二计算设备110，从而第一计算设备108可与第二显示器104以及第一显示器102进行接口。
此外，第一计算设备108可与第二计算设备110交互。例如，第一计算设备108和第二计算设备110可经由无线和/或有线连接来交互。第一计算设备108和第二计算设备110之间的交互可以是指共享分别与其进行接口的显示器的输入功能和/或分别与其进行接口的显示器的输出功能（例如，第一显示器102可被用作第二显示器104的外设，第一显示器102可提供基于触摸的输入功能，而第二显示器104可包括或缺少这样的功能，第一显示器102可延伸第二显示器104的桌面，等等）。另外地或另选地，第一计算设备108和第二计算设备110之间的交互可以是指在它们之间共享上下文信息，此处，被共享的上下文信息可以与第一计算设备108和第二计算设备110分别执行的应用有关。此外，应该理解，第一计算设备108和第二计算设备110之间的交互可以是指其他类型的资源共享。
第一计算设备108可进一步包括第一协作组件112，而第二计算设备110可进一步包括第二协作组件114。第一协作组件112和第二协作组件114使得第一计算设备108和第二计算设备110能够交互。作为示例，第一协作组件112和第二协作组件114可在跨第一计算设备108和第二计算设备110的单个用户106上下文上合作。根据另一示例，第一协作组件112可从第二协作组件114接收要在第一显示器102上呈现内容的指令。根据另一例示，第一协作组件112可将经由第一显示器102从用户106接收的输入相关的数据发送给第二协作组件114。
此外，系统100包括监视环境118的传感器116。例如，用户106可处于传感器116所监视的环境118中。如图1所描绘的，传感器116可以是独立的设备。然而，构想了传感器106另外地或另选地可被包括在第一显示器102、第二显示器104、第一计算设备108和/或第二计算设备110中（例如，第一计算设备108可以是包括相机的平板计算机，第二计算设备110可以是包括相机的膝上型计算机等）。根据一示例，传感器116可以是相机。作为另一示例，传感器116可以是多个相机。根据这一示例，多个相机在环境118中可能是普遍的。例如，来自多个相机的输出可被组合来创建环境118的单个表示；然而，所要求保护的主题不限于采用多个相机或从多个相机的输出来创建环境118的单个表示。此外，还构想了除了相机之外或者作为相机的替代，传感器116可包括监视环境118并提供可被用来检测用户106的视觉焦点的输出的任何其他类型的输入设备。
系统100还包括从传感器116的输出检测与用户106有关的视觉焦点信息的焦点跟踪组件120。焦点跟踪组件120所检测的视觉焦点信息可被输入到第一计算设备108和第二计算设备110。作为示例，焦点跟踪组件120可分析来自传感器116的输出以检测用户106的视觉焦点是在第一显示器102上（例如由虚线122表示）还是在第二显示器104上（例如，由虚线124表示）。焦点跟踪组件120所生成的视觉焦点信息可指明一组显示器中用户106视觉聚焦于其上的一个特定的显示器。因而，例如，视觉焦点信息可指明用户106视觉聚焦于所述一组显示器中的第一显示器102或第二显示器104上（例如，在图1所示的示例中，所述一组显示器包括第一显示器102和第二显示器104）。根据另一示例，焦点跟踪组件120所检测的视觉焦点信息可指明用户106视觉聚焦于特定显示器还是离开特定显示器。根据这一示例，输入到第一计算设备108的视觉焦点信息可指示用户106视觉聚焦于第一显示器102或离开第一显示器102（例如，用户106视觉离开第一显示器102可包括在用户106视觉聚焦于第二显示器104的时候以及在用户106视觉既未聚焦于第一显示器102也未聚焦于第二显示器104的时候）。
焦点跟踪组件120实质上可对来自传感器116的输出采用任何跟踪技术来生成视觉焦点信息。可由焦点跟踪组件120使用的可能的跟踪技术的示例包括眼部跟踪、头部跟踪以及移动跟踪；然而，应该理解，所要求保护的主题不限于上述示例，并且其他跟踪技术旨在落入所附权利要求书的范围内。此外，焦点跟踪组件120可采用标识第一显示器102和第二显示器104的相对位置的信息以便检测视觉焦点信息。
根据一示例，焦点跟踪组件120可对来自传感器116的输出采用眼部跟踪以产生视觉焦点信息（例如，用户106的被跟踪的眼部焦点）。根据这一示例，焦点跟踪组件120可测量眼部位置和/或眼部移动来检测用户106的注视点（例如，在用户106正在看的地方）。从而，焦点跟踪组件120可跟踪用户106的注视点是在特定显示器上（例如，在第一显示器102上、在第二显示器104上等）还是离开了第一显示器102以及第二显示器104。此外，焦点跟踪组件120可跟踪用户106的注视点在特定显示器上的位置、用户106的注视点已停留在该位置处的持续时间、用户106的注视点已停留在特定显示器上的持续时间等等。
焦点跟踪组件120还可将用户106的视觉焦点在特定显示器上的持续时间与例如最小阈值持续时间进行比较。根据一种例示，用户106的视觉焦点可从第二显示器104移至第一显示器102，停留在第一显示器102上持续短于最小阈值持续时间的时间段，然后从第一显示器102移回第二显示器104。根据这一例示，因为视觉焦点停留在第一显示器102上的持续时间短于最小阈值持续时间，所以焦点跟踪组件120可禁止切换视觉焦点信息以指定用户106的视觉焦点改变到第一显示器102上。另选地，在上述例示中，如果视觉焦点停留在第一显示器102上的持续时间超过最小阈值持续时间，则焦点跟踪组件120可输出视觉焦点信息，该视觉焦点信息指明用户106的视觉焦点改变到第一显示器102上并且之后改变回到第二显示器104上。然而，应该理解，所要求保护的主题不限于上述例示。
如图1所示，焦点跟踪组件120可与传感器116分开；然而，根据另一示例，传感器116可包括焦点跟踪组件120。根据另一示例，第一计算设备108和/或第二计算设备110可包括焦点跟踪组件120。例如，如果第一计算设备108包括焦点跟踪组件120，则由其生成的视觉焦点信息可由第一协作组件112传送给第二计算设备110（例如，第二协作组件114）（反之亦然）。此外，如果第一计算设备108和第二计算设备110两者都包括焦点跟踪组件120，则第一协作组件112和第二协作组件114可合作以生成视觉焦点信息。
例如，第一计算设备108和第二计算设备110可从焦点跟踪组件120接收视觉焦点信息；然而，还构想了第二计算设备110不必接收视觉焦点信息。此外，第一计算设备108包括控制组件126，控制组件126基于从焦点跟踪组件120接收的视觉焦点信息来控制第一显示器102。控制组件126可根据视觉焦点信息来控制可经由第一显示器102从用户106接收的输入类型。另外地或另选地，控制组件126可根据视觉焦点信息来控制第一显示器102上呈现的内容。控制组件126可随着用户106的视觉焦点改变来改变可经由第一显示器102接收的输入类型和/或可经由第一显示器102呈现的内容。从而，控制组件126可基于用户106正注视于何处来更改第一显示器102的功能。
提出以下示例性场景来例示控制组件126的操作。然而，应该理解，所要求保护的主题不限于以下示例性场景。根据这一场景，第二计算设备110可执行主要应用，而第一计算设备108可执行伴随应用，该伴随应用补充第二计算设备110所执行的主要应用。在控制组件126接收到指明用户106视觉聚焦于第一显示器102（例如，由虚线122表示）的视觉焦点信息时，第一显示器102可针对伴随应用而被优化。另选地，当控制组件126接收到指明用户106视觉聚焦于第二显示器104（或离开显示器102、聚焦于一不同的显示器（未示出）等）的视觉焦点信息时，第一显示器102可针对主要应用而被优化。此外，控制组件126可致使第一显示器102随着视觉焦点信息的改变而在针对伴随应用被优化以及针对主要应用被优化之间进行转换。
以下是上述示例性场景的例示。例如，电视节目可由执行主要应用的第二计算设备110在第二显示器104上呈现，而由第一计算设备108执行的伴随应用能与收视指南有关。从而，当控制组件126接收到指明用户106视觉聚焦于第一显示器102（例如，由虚线122表示）的视觉焦点信息时，第一显示器102可针对该收视指南而被优化（例如，第一显示器102可呈现与收视指南有关的内容，第一显示器102可被配置成接收与收视指南有关的输入等）。作为示例，第一显示器102可呈现关于正在第二显示器104上呈现的电视节目的丰富元数据，可从用户106接收的输入类型可准许对收视指南进行详细操纵（例如，选择在第一显示器102上呈现的特定频道）等等。此外，当控制组件126接收到指明用户106视觉聚焦于第二显示器104（例如，由虚线124表示）的视觉焦点信息时，第一显示器102可针对电视节目而被优化（例如，第一显示器102可被配置成接收与观看第二显示器104上的电视节目有关的输入）。例如，可经由第一显示器102从用户106接收的输入类型可以是能够致使改变频道、调节音量水平等的粗略的姿势。
此外，上下文敏感的内容可在第一显示器102上呈现。例如，第一协作组件112可从第二协作组件114接收与第二显示器104（或第二计算设备110）有关的上下文信息。上下文信息可涉及用户106最近进行交互的位置；然而，所要求保护的主题不限于此。当由第一协作组件112（和/或控制组件126）接收的视觉焦点信息指明用户106视觉聚焦于第一显示器102时，第一协作组件112（和/或控制组件126）可根据与第二显示器104有关的上下文信息来标识要在第一显示器102上呈现的内容。此外，当视觉焦点信息指明用户视觉聚焦于第一显示器102时，控制组件126可呈现根据第一显示器102上的上下文信息所标识的内容。
根据又一示例，第二计算设备110可缺少与图1中所描绘的控制组件126类似的控制组件。根据一种例示，第一显示器102可以是平板计算机（例如，第一计算设备108）的启用触摸的显示器，而第二显示器104可以是台式计算机（例如，第二计算设备110）的外部显示器。根据这一例示，构想了控制组件126可根据视觉焦点信息来改变启用触摸的显示器的功能，但外部显示器的功能可保持静态而不管视觉焦点信息如何。然而，所要求保护的主题不限于上述例示。
根据另一示例，尽管未示出，但还构想了第二计算设备110可包括与第一计算设备108的控制组件126类似的控制组件。第二计算设备110的此类控制组件可基于从焦点跟踪组件120接收的视觉焦点信息来控制第二显示器104。从而，与控制组件126对第一显示器102的控制类似的，可经由第二显示器104从用户106接收的输入类型和/或在第二显示器104上呈现的内容可由第二计算设备110的控制组件来控制。作为另一例示，第一显示器102和第二显示器104两者都可以是相应的平板计算机（例如，第一计算设备108和第二计算设备110）的启用触摸的显示器。根据这一例示，第一显示器102和第二显示器104的功能可分别由控制组件126和第二计算设备110的控制组件（未示出）基于视觉焦点信息来改变。同样，应该注意，所要求保护的主题不限于上述例示。
尽管图1描绘了系统100包括分别与两个显示器（例如，第一显示器102和第二显示器104）进行接口的两个计算设备（例如，第一计算设备108和第二计算设备110），其中两个计算设备彼此交互，但可以理解，系统100可包括两个以上的显示器和/或一个或多个计算设备（例如，系统100能不必包括第二计算设备110）。作为示例（未示出），系统100可包括第三显示器和第三计算设备。根据这一示例，第三计算设备可与第三显示器进行接口。此外，第三计算设备可与第一计算设备108和第二计算设备110交互。根据另一示例（未示出），系统100另外地或另选地可包括第四显示器。根据这一示例，第一计算设备108或第二计算设备110中的任一个可与第四显示器进行接口；从而，两个以上的显示器可由共享的计算设备来驱动。作为根据这一示例的例示，第一计算设备108可与第一显示器102和第四显示器进行接口。因此，控制组件126可基于从焦点跟踪组件120接收的视觉焦点信息来控制第一显示器102和第四显示器。
参考图2，示出了基于用户的视觉焦点来控制显示器202上呈现的内容和/或可经由显示器202接收的输入类型的系统200。系统200包括显示器202和一不同的显示器204（例如，图1的第一显示器102和第二显示器104），它们被包括在一组显示器206中。根据一示例，显示器202和该不同的显示器204可与不同的计算设备（例如，分别与图1的第一计算设备108和第二计算设备110）进行接口，其中不同的计算设备彼此交互。根据另一示例，显示器202和该不同的显示器204可与共享的计算设备进行接口（例如，图1的第一计算设备108可与显示器202和该不同的显示器204两者进行接口）。
此外，系统200包括（例如，从图1的焦点跟踪组件120）接收视觉焦点信息208的控制组件126。视觉焦点信息208可指明所述一组显示器206中用户（例如，图1的用户106）视觉聚焦于其上的一个特定的显示器。控制组件126基于视觉焦点信息208来控制显示器202。此外，如果显示器202和该不同的显示器204与共享的计算设备进行接口，则控制组件126还可控制该不同的显示器204。尽管未示出，但应该理解，计算设备（例如，图1的第一计算设备108）可包括控制组件126；然而所要求保护的主题不限于此。
控制组件126可进一步包括内容管理组件210和输入管理组件212。内容管理组件210根据视觉焦点信息208来控制显示器202上呈现的内容。此外，输入管理组件212根据视觉焦点信息208来控制可经由显示器202从用户接收的输入类型。此外，如果显示器202和该不同的显示器204与共享计算设备进行接口，则内容管理组件210和输入管理组件212可根据视觉焦点信息208类似地控制该不同的显示器204上呈现的内容以及可经由该不同的显示器204从用户接收的输入类型。
根据一示例，内容管理组件210可基于视觉焦点信息208来控制显示器202以选择性地呈现内容或禁止呈现内容。根据这一示例，当视觉焦点信息208指明用户视觉聚焦于显示器202时，内容管理组件210可在显示器202上呈现内容。另选地，当视觉焦点信息208指明所述一组显示器206中用户视觉聚焦于其上的特定显示器与显示器202不同时（例如，视觉焦点信息208指明用户视觉聚焦于该不同的显示器204或所述一组显示器206中的不同的显示器（未示出）），则内容管理组件210可禁止在显示器202上呈现内容。
作为另一示例，内容管理组件210可根据视觉焦点信息208通过选择显示器202上呈现的内容的粒度来控制显示器202。此外，内容管理组件210可用所选粒度在显示器202上呈现内容。例如，当视觉焦点信息208指明用户视觉聚焦于显示器202时，显示器202上呈现的内容的粒度可以更详细。此外，当视觉焦点信息208指明所述一组显示器206中用户视觉聚焦于其上的特定显示器与显示器202不同时（例如，视觉焦点信息208指明用户视觉聚焦于该不同的显示器204或所述一组显示器206中的不同的显示器（未示出）），显示器202上呈现的内容的粒度可较不详细。根据一种例示，当显示器202处于用户的外围视觉时（例如，出现在注视中心以外的视觉的一部分），较不详细的内容可被用来传达信息或捕捉用户的视觉焦点。
此外，当视觉焦点信息208指明用户视觉聚焦于显示器202时，内容管理组件210可在显示器202上呈现与在该不同的显示器204上呈现的内容有关的内容。例如，由内容管理组件210在显示器202上呈现的内容可以是在该不同的显示器204上呈现的内容、在该不同的显示器204上呈现的内容的不同视角、与在该不同的显示器204上呈现的内容有关的元数据、与在该不同的显示器204上呈现的内容有关的属性网格（例如，其中属性网格中的属性可经由到显示器202的输入而更改等）等等。根据一种例示，当视觉焦点信息208指明用户视觉聚焦于该不同的显示器204时（例如，可向显示器202输入粗略姿势以停止、启动、向后跳转、向前跳转等），可在该不同的显示器204上呈现视频。根据这一例示，当视觉焦点信息208指明用户视觉聚焦于显示器202时，内容管理组件210可在显示器202上呈现视频流的特定帧、视频流的片段等。
此外，输入管理组件212可根据视觉焦点信息208来配置显示器202以接收各种类型的输入。作为例示，如由输入管理组件212所配置的，当视觉焦点信息208指明用户视觉聚焦于显示器202时，可经由显示器202从用户接收的输入类型可与显示器202有关。另选地，如由输入管理组件212所配置的，当视觉焦点信息208指明用户视觉聚焦于该不同的显示器204时，可经由显示器202从用户接收的输入类型可与该不同的显示器204有关。
此外，输入管理组件212可基于视觉焦点信息208来配置显示器202以接收输入类型的不同集合。作为例示，可在该不同的显示器204上呈现幻灯片。当视觉焦点信息208指明用户视觉聚焦于该不同的显示器204时，输入管理组件212可配置显示器202以接收与将在该不同的显示器204上呈现的幻灯片向前或向后移动一个幻灯片有关的输入。此外，当视觉焦点信息208指明用户视觉聚焦于显示器202时，输入管理组件212可配置显示器202以接收与输入类型的较大集合有关的输入（例如，向前或向后移动一个幻灯片、从幻灯片中选择要跳到的一个幻灯片、操纵显示器202上呈现的幻灯片传送带、导航显示器202上呈现的注释等）。然而，应该理解，所要求保护的主题不限于上述示例。
图3-6示出一示例性场景，该场景示出对基于包括多个显示器的环境中的视觉焦点来控制显示器功能的系统300的采用。如该示例性场景中所描绘的，系统300包括启用触摸的显示器302（例如，图1的第一显示器102、图2的显示器202）、显示器304（例如，图1的第二显示器104、图2的不同的显示器204等）、以及传感器306（例如，图1的传感器116）。根据一示例，启用触摸的显示器302可被包括在平板计算机、智能电话等设备内，而显示器304可以是台式计算机的外部显示器。作为另一示例，启用触摸的显示器302和显示器304可与共享计算设备进行接口。该示例性场景示出启用触摸的显示器302的功能根据用户308的视觉焦点而改变。如图3-6所示，启用触摸的显示器302可在作为显示器304的专用输入设备（当用户308视觉聚焦于显示器304时）以及作为输入设备和呈现内容的输出设备（当用户308视觉聚焦于启用触摸的显示器302时）之间切换。应该理解，图3-6的示例性场景是出于例示的目的而提供的，并且不旨在限制所附权利要求书的范围。
如图3所示，用户308视觉聚焦于显示器304（例如，由虚线310表示），这可基于来自传感器306的输出来检测。当用户308的视觉焦点在显示器304上时，用户308被示为采用启用触摸的显示器302。图4示出图3中所示的系统300的另一视角。当用户308被检测到视觉聚焦于显示器304（例如显示器304上呈现的内容）时，启用触摸的显示器302是专用输入设备。例如，当用户308被检测到视觉聚焦于显示器304时，启用触摸的显示器302可从用户308接收基于触摸的输入，该输入可被用于对显示器304上呈现的内容进行操纵、导航等。如图所示，当用户308的视觉焦点被检测为在显示器304上时，可禁止在启用触摸的显示器302上呈现内容。根据另一示例（未示出），当用户308的视觉焦点被检测为在显示器304上时，可在启用触摸的显示器302上呈现内容；然而，当用户308的视觉焦点被检测为在显示器304上时启用触摸的显示器302上呈现的内容可与当用户308的视觉焦点被检测为在启用触摸的显示器302上时启用触摸的显示器302上呈现的内容不同。
现在参考图5，用户308视觉聚焦于启用触摸的显示器302（例如，由虚线502表示），这可基于来自传感器306的输出来检测。用户308被描绘为在视觉聚焦于启用触摸的显示器302的同时使用启用触摸的显示器302。图6示出图5中所示的系统300的另一视角。当用户308被检测为视觉聚焦于启用触摸的显示器302时，启用触摸的显示器302呈现内容。此外，当用户308被检测为视觉聚焦于启用触摸的显示器302时，启用触摸的显示器302可从用户308接收基于触摸的输入，该输入可被用于对启用触摸的显示器302上呈现的内容进行操纵、导航等。
根据一示例，用户308可视觉聚焦于图3和4中所示的显示器304。当用户308的视觉焦点在显示器304上时，在显示器304上呈现内容，并且用户308可使用启用触摸的显示器302来操纵显示器304上呈现的内容。如果用户308将她的视觉焦点更改到启用触摸的显示器302，如图5和6所示，则启用触摸的显示器302可呈现与显示器304上呈现的内容的属性有关的内容。此外，当用户308的视觉焦点停留在启用触摸的显示器302上时，显示器304上呈现的内容的属性可基于经由启用触摸的显示器302接收的输入来操纵。之后，用户308可将她的视觉焦点返回至显示器304，如图3和4所描绘的，并且可在显示器304上显示所操纵的属性的表现（manifestation）。
图7-8示出一示例性场景，该场景示出对基于包括多个显示器的环境中的视觉焦点来控制显示器上呈现的内容的系统700的利用。该示例性场景示出系统700包括显示器702、显示器704以及显示器706（例如，统称为显示器702-706）。根据一示例，不同的计算设备可分别与显示器702、显示器704和显示器706进行接口（例如，计算设备A可与显示器702进行接口，计算设备B可与显示器704进行接口，而计算设备C可与显示器706进行接口），并且计算设备可彼此交互。作为另一示例，计算设备A可与显示器702-706中的两个显示器进行接口，而计算设备B可与显示器702-706中的其余一个显示器进行接口，其中计算设备A和计算设备B交互。该示例性场景描绘了显示器702和显示器706上呈现的内容根据用户710的视觉焦点而变化。尽管未示出，但构想了显示器704上呈现的内容可基于用户710的视觉焦点而类似地变化。然而应该理解，图7-8的示例性场景是出于例示目的而提供的，并且所要求保护的主题不限于此。
如图7所示，用户710视觉聚焦于显示器702（例如，由虚线712表示），这可基于来自传感器708的输出来检测。此外，在图8中，用户710视觉聚焦于显示器706（例如，由虚线802表示），这可基于来自传感器708的输出来检测。图7和8描绘了由显示器702和显示器706呈现的内容根据用户710的视觉焦点而改变。更具体地，当用户710的视觉焦点在显示器702上时（例如，如图7所示），显示器702上呈现的内容可以与当用户710的视觉焦点在显示器706上时（例如，如图8所示）相比更详细。类似地，当用户710的视觉焦点在显示器706上时（例如，如图8所示），显示器706上呈现的内容可以与当用户710的视觉焦点在显示器702上时（例如，如图7所示）相比更详细。
根据一示例，当用户710的视觉焦点移离显示器时，显示器上呈现的内容可变得较不详细。类似地，当用户710的视觉焦点移向显示器时，显示器上呈现的内容可变得较详细（例如，浓缩等）。此外，当显示器处于用户710的外围视觉中时，较不详细的内容可被用于传达信息或捕捉用户的视觉焦点。作为另一示例，位于用户710的外围视觉中的显示器上呈现的较不详细的内容可以是显示器上呈现的颜色；然而，所要求保护的主题不限于此。
图9-10示出与对耦合的显示器的基于视觉焦点的控制的示例性方法。尽管各方法被描述为顺序地执行的一系列动作，但可以理解，这些方法不受该顺序的次序的限制。例如，一些动作能以与本文描述的不同的次序发生。另外，动作可以与另一动作并发地发生。此外，在一些实例下，实现本文描述的方法并不需要所有动作。
此外，本文描述的动作可以是可由一个或多个处理器实现的和/或存储在一个或多个计算机可读介质上的计算机可执行指令。计算机可执行指令可包括例程、子例程、程序、执行的线程等。另外，这些方法的动作的结果可以存储在计算机可读介质中，显示在显示设备上，等等。
图9示出用于控制第一显示器的功能的方法900。在902，可接收视觉焦点信息，该视觉焦点信息指明一组显示器中用户视觉聚焦于其上的一个特定显示器。所述一组显示器可包括至少第一显示器和第二显示器。此外，第一计算设备可与第一显示器进行接口，而第二计算设备可与第二显示器进行接口。此外，第一计算设备可与第二计算设备交互。根据一示例，指明所述一组显示器中用户视觉聚焦于其上的特定显示器的视觉焦点信息可从传感器的输出来检测。作为例示，视觉焦点信息可通过对传感器的输出执行眼部跟踪、头部跟踪、移动跟踪等来检测。
在902，可经由第一显示器从用户接收的输入类型或者在第一显示器上呈现的内容中的至少一个可根据视觉焦点信息来控制。作为示例，当视觉焦点信息指明用户视觉聚焦于第一显示器时，可在第一显示器上呈现内容，而当视觉焦点信息指明所述一组显示器中用户视觉聚焦于其上的特定显示器与第一显示器不同时，可禁止在第一显示器上呈现内容。根据另一示例，可根据视觉焦点信息来选择第一显示器上呈现的内容的粒度，并且可用所选粒度在第一显示器上呈现内容。根据这一示例，当视觉焦点信息指明用户视觉聚焦于第一显示器时，内容的粒度可较详细，而当视觉焦点信息指明所述一组显示器中用户视觉聚焦于其上的特定显示器与第一显示器不同时，内容的粒度可较不详细。根据又一示例，当视觉焦点信息指明用户视觉聚焦于第一显示器时，可经由第一显示器从用户接收的输入类型可与第一显示器有关，而当视觉焦点信息指明用户视觉聚焦于第二显示器时，可经由第一显示器从用户接收的输入类型可与第二显示器有关。
根据另一示例，可接收与第二显示器有关的上下文信息。此外，当视觉焦点信息指明用户视觉聚焦于第一显示器时，第一显示器上呈现的内容可根据与第二显示器有关的上下文信息来标识。此外，当视觉焦点信息指明用户视觉聚焦于第一显示器时，可在第一显示器上呈现根据上下文信息所标识的内容。
根据一示例，构想了所述一组显示器可进一步包括至少第三显示器。根据这一示例，第三计算设备可与第三显示器进行接口。此外，第三计算设备可与第一计算设备和第二计算设备交互。
作为又一示例，应该理解，所述一组显示器可进一步包括至少第四显示器。根据这一示例，第一计算设备或第二计算设备可与第四显示器进行接口。
还构想了第一计算设备可执行伴随应用，所述伴随应用补充由第二计算设备所执行的主要应用。此外，当视觉焦点信息指明用户视觉聚焦于第一显示器时，第一显示器可针对伴随应用而被优化。此外，当视觉焦点信息指明所述一组显示器中用户视觉聚焦于其上的特定显示器与第一显示器不同时，第一显示器可针对主要应用而被优化。
根据另一示例，第一显示器可在作为专用输入设备以及作为输入设备和呈现内容的输出设备之间进行切换。例如，当视觉焦点信息指明用户视觉聚焦于第二显示器时，第一显示器可以是第二显示器的专用输入设备，而当视觉焦点信息指明用户视觉聚焦于第一显示器时，第一显示器可以是输入设备和呈现内容的输出设备。此外，第一显示器可以是启用触摸的显示器。
根据另一示例，当视觉焦点信息指明用户视觉聚焦于第一显示器时，可在第一显示器上呈现内容。根据这一示例，第一显示器上呈现的内容可与第二显示器上呈现的不同内容的属性有关。此外，当视觉焦点信息指明用户视觉聚焦于第一显示器时，第二显示器上呈现的不同内容的属性可基于经由第一显示器接收的输入来操纵。由此，当视觉焦点信息指明用户视觉聚焦于第二显示器时，可在第二显示器上显示所操纵的不同内容的属性的表现。
参考图10，示出了用于控制包括多个显示器的环境中的启用触摸的显示器的方法1000。在1002，用户的视觉焦点可被标识为在第一显示器上。例如，第一显示器可以是启用触摸的显示器。此外，第一计算设备可与第一显示器进行接口，而第二计算设备可与第二显示器进行接口。此外，第一计算设备可与第二计算设备交互。根据一示例，可从接收到的指明用户的视觉焦点的视觉焦点信息中将用户的视觉焦点可标识为在第一显示器上。根据另一示例，可通过分析来自传感器的输出以检测用户的视觉焦点来将用户的视觉焦点标识为在第一显示器上。
在1004，可基于用户的视觉焦点在第一显示器上而在第一显示器上呈现内容。在1006，第一显示器可基于用户的视觉焦点在第一显示器上被配置成接收操纵第一显示器上呈现的内容的第一类型的输入。在1008，可标识用户的视觉焦点到第二显示器的切换。在1010，可基于用户的视觉焦点切换到第二显示器而禁止在第一显示器上呈现内容。在1012，第一显示器可基于用户的视觉焦点切换到第二显示器而被配置成接收操纵第二显示器上呈现的不同内容的第二类型的输入。
根据一示例，用户的视觉焦点可被标识为返回至第一显示器。根据这一示例，可基于用户的视觉焦点返回至第一显示器而在第一显示器上呈现内容。此外，第一显示器可基于用户的视觉焦点返回至第一显示器而被配置成接收操纵第一显示器上呈现的内容的第一类型的输入。
现在参考图11，示出了可以根据本文公开的系统和方法使用的示例性计算设备1100的高级图示。例如，计算设备1100可在基于用户的视觉焦点来控制可经由显示器从用户接收的输入类型的系统中使用。作为另一示例，计算设备1100可在基于用户的视觉焦点来控制显示器上呈现的内容的系统中使用。计算设备1100包括执行存储在存储器1104中的指令的至少一个处理器1102。这些指令可以是例如用于实现被描述为由上述一个或多个组件执行的功能的指令或用于实现上述方法中的一个或多个的指令。处理器1102可以通过系统总线1106访问存储器1104。除了存储可执行指令之外，存储器1104还可存储用户的视觉焦点信息、要在显示器上呈现的内容、标识显示器的相对位置的信息等等。
计算设备1100还包括可由处理器1102通过系统总线1106访问的数据存储1108。数据存储1108可包括可执行指令、用户的视觉焦点信息、要在显示器上呈现的内容、标识显示器的相对位置的信息等等。计算设备1100还包括允许外部设备与计算设备1100进行通信的输入接口1110。例如，可以使用输入接口1110来从外部计算机设备、用户等接收指令。计算设备1100还包括将计算设备1100与一个或多个外部设备进行接口的输出接口1112。例如，计算设备1100可以通过输出接口1112显示文本、图像等。
另外，尽管被示为单个系统，但可以理解，计算设备1100可以是分布式系统。因此，例如，若干设备可以通过网络连接进行通信并且可共同执行被描述为由计算设备1100执行的任务。
如本文所使用的，术语“组件”和“系统”旨在包含用使得在被处理器执行时执行特定功能的计算机可执行指令配置的计算机可读数据存储。计算机可执行指令可包括例程、功能等等。还要理解组件或系统可以位于单个设备上或分布在若干设备之间。
另外，如此处所用的，术语“示例性”旨在是指“充当某事物的图示或示例”。
在此所述的各种功能可以以硬件、软件或其任何组合来实现。如果在软件中实现，则各功能可以作为一条或更多条指令或代码存储在计算机可读介质上或藉其进行传送。计算机可读介质包括计算机可读存储介质。计算机可读介质可以是可由计算机访问的任何可用存储介质。作为示例而非限定，这样的计算机可读介质可包括RAM、ROM、EEPROM、CD-ROM或其他光盘存储、磁盘存储或其他磁存储设备、或能被用来承载或存储指令或数据结构形式的期望程序代码且能被计算机访问的任何其他介质。如本文中所使用的盘（disk）和碟（disc）包括压缩碟（CD）、激光碟、光碟、数字多用碟（DVD）、软盘和蓝光碟（BD），其中盘（disk）往往以磁的方式再现数据，而碟（disc）常常用激光以光学方式再现数据。另外，所传播的信号未被包括在计算机可读存储介质的范围内。计算机可读介质还包括通信介质两者，其包括促成计算机程序从一地向另一地转移的任何介质。连接例如可以是通信介质。例如，如果软件使用同轴电缆、光纤电缆、双绞线、数字订户线（DSL）、或诸如红外线、无线电、以及微波之类的无线技术来从web网站、服务器、或其它远程源传输，则该同轴电缆、光纤电缆、双绞线、DSL、或诸如红外线、无线电、以及微波之类的无线技术被包括在通信介质的定义中。上述的组合也应被包括在计算机可读介质的范围内。
以上所描述的包括一个或多个实施例的示例。当然，出于描绘各方面的目的而描述上述设备的每个可以想到修改和改变是不可能的，但本领域内的普通技术人员可以认识到，许多另外的组合和置换都是可能的。因此，所描述的各方面旨在包括所有这些属于所附权利要求书的精神和范围内的改变、修改和变型。此外，就在详细描述或权利要求书中使用术语“包括”而言，这一术语旨在以与术语“包含”在被用作权利要求书中的过渡词时所解释的相似的方式为包含性的。

Claims (10)

1.一种用于控制第一显示器的功能的方法，包括：
接收视觉焦点信息，所述视觉焦点信息指明一组显示器中用户视觉聚焦于其上的一个特定显示器，其中所述一组显示器包括至少所述第一显示器和第二显示器，第一计算设备与所述第一显示器进行接口而第二计算设备与所述第二显示器进行接口，并且所述第一计算设备与所述第二计算设备交互；以及
使得处理器根据所述视觉焦点信息来控制可经由所述第一显示器从所述用户接收的输入类型或者在所述第一显示器上呈现的内容中的至少一个。
2.如权利要求1所述的方法，其特征在于，还包括从传感器的输出来检测指明所述一组显示器中用户视觉聚焦于其上的特定显示器的视觉焦点信息。
3.如权利要求1所述的方法，其特征在于，根据所述视觉焦点信息来控制所述第一显示器上呈现的内容还包括：
当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器时，在所述第一显示器上呈现内容；以及
当所述视觉焦点信息指明所述一组显示器中所述用户视觉聚焦于其上的特定显示器与所述第一显示器不同时，禁止在所述第一显示器上呈现所述内容。
4.如权利要求1所述的方法，其特征在于，根据所述视觉焦点信息来控制所述第一显示器上呈现的内容还包括：
根据所述视觉焦点信息来选择所述第一显示器上呈现的内容的粒度，其中当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器时，内容的粒度较详细，而当所述视觉焦点信息指明所述一组显示器中所述用户视觉聚焦于其上的所述特定显示器与所述第一显示器不同时，内容的粒度较不详细；以及
用所选粒度在所述第一显示器上呈现所述内容。
5.如权利要求1所述的方法，其特征在于，当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器时，可经由所述第一显示器从所述用户接收的输入类型与所述第一显示器有关，而当所述视觉焦点信息指明所述用户视觉聚焦于所述第二显示器时，可经由所述第一显示器从所述用户接收的输入类型与所述第二显示器有关。
6.如权利要求1所述的方法，其特征在于，所述第一计算设备执行伴随应用，所述伴随应用补充所述第二计算设备所执行的主要应用，所述方法还包括：
当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器时，针对所述伴随应用来优化所述第一显示器；以及
当所述视觉焦点信息指明所述一组显示器中所述用户视觉聚焦于其上的所述特定显示器与所述第一显示器不同时，针对所述主要应用来优化所述第一显示器。
7.如权利要求1所述的方法，其特征在于，还包括所述第一显示器在当所述视觉焦点信息指明所述用户视觉聚焦于所述第二显示器的情况下作为所述第二显示器的专用输入设备与当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器的情况下作为输入设备和呈现所述内容的输出设备之间切换。
8.如权利要求1所述的方法，其特征在于，还包括：
当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器时，在所述第一显示器上呈现所述内容，其中所述第一显示器上呈现的所述内容与所述第二显示器上呈现的不同内容的属性有关；以及
当所述视觉焦点信息指明所述用户视觉聚焦于所述第一显示器时，基于经由所述第一显示器接收的输入来操纵所述第二显示器上呈现的不同内容的属性，其中当所述视觉焦点信息指明所述用户视觉聚焦于所述第二显示器时，在所述第二显示器上显示所操纵的不同内容的属性的表现。
9.一种使用视觉焦点来控制显示器的功能的系统（200），包括：
内容管理组件（210），所述内容管理组件（210）根据视觉焦点信息（208）来控制显示器（202）上呈现的内容，所述视觉焦点信息（208）指明一组显示器中用户视觉聚焦于其上的一个特定显示器，其中所述一组显示器包括至少所述显示器和一不同的显示器（204）；以及
输入管理组件（212），所述输入管理组件（212）根据所述视觉焦点信息来控制可经由所述显示器从所述用户接收的输入类型。
10.一种包括计算机可执行指令的计算机可读存储介质，所述计算机可执行指令在被处理器执行时致使所述处理器执行动作，所述动作包括：
将用户的视觉焦点标识为在第一显示器上，其中第一计算设备与所述第一显示器进行接口而第二计算设备与第二显示器进行接口，且所述第一计算设备与所述第二计算设备交互；
基于所述用户的视觉焦点在所述第一显示器上而在所述第一显示器上呈现内容；
基于所述用户的视觉焦点在所述第一显示器上，将所述第一显示器配置成接收操纵所述第一显示器上呈现的内容的第一类型的输入；
将所述用户的视觉焦点标识为切换到所述第二显示器；
基于所述用户的视觉焦点切换到所述第二显示器，禁止在所述第一显示器上呈现所述内容；以及
基于所述用户的视觉焦点切换到所述第二显示器，将所述第一显示器配置成接收操纵所述第二显示器上呈现的不同内容的第二类型的输入。
CN201210376124.0A 2011-09-30 2012-09-28 对耦合的显示器的基于视觉焦点的控制 Active CN102902503B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/249,239 2011-09-30
US13/249,239 US9658687B2 (en) 2011-09-30 2011-09-30 Visual focus-based control of coupled displays

Publications (2)

Publication Number Publication Date
CN102902503A true CN102902503A (zh) 2013-01-30
CN102902503B CN102902503B (zh) 2016-02-17

Family

ID=47574753

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210376124.0A Active CN102902503B (zh) 2011-09-30 2012-09-28 对耦合的显示器的基于视觉焦点的控制

Country Status (7)

Country Link
US (2) US9658687B2 (zh)
EP (1) EP2761403B1 (zh)
JP (1) JP6059727B2 (zh)
KR (1) KR102079832B1 (zh)
CN (1) CN102902503B (zh)
HK (1) HK1178635A1 (zh)
WO (1) WO2013048723A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104679509A (zh) * 2015-02-06 2015-06-03 腾讯科技（深圳）有限公司 一种渲染图形的方法和装置
CN104866089A (zh) * 2014-02-26 2015-08-26 威斯通全球技术公司 基于检测到的方位调节显示器
CN104898996A (zh) * 2015-05-04 2015-09-09 联想(北京)有限公司 信息处理方法及电子设备
CN105556457A (zh) * 2013-09-17 2016-05-04 诺基亚技术有限公司 视觉事件通知的显示
CN112783411A (zh) * 2020-01-02 2021-05-11 珠海金山办公软件有限公司 一种文档内容显示方法及装置

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9658687B2 (en) 2011-09-30 2017-05-23 Microsoft Technology Licensing, Llc Visual focus-based control of coupled displays
US9383579B2 (en) * 2011-10-12 2016-07-05 Visteon Global Technologies, Inc. Method of controlling a display component of an adaptive display system
KR20140011203A (ko) * 2012-07-18 2014-01-28 삼성전자주식회사 복수의 디스플레이 장치와 연결된 제어 장치 및 그의 제어 방법, 그리고 디스플레이 장치 제어 시스템
KR102100911B1 (ko) 2013-08-30 2020-04-14 엘지전자 주식회사 안경형 단말기와 이를 포함하는 시스템 및 안경형단말기의 제어방법
US20150261293A1 (en) * 2014-03-12 2015-09-17 Weerapan Wilairat Remote device control via gaze detection
US10834450B2 (en) * 2014-09-30 2020-11-10 Nbcuniversal Media, Llc Digital content audience matching and targeting system and method
KR20160051411A (ko) * 2014-11-03 2016-05-11 삼성전자주식회사 외부의 물체를 제어하는 전자 장치 및 그 방법
DE102014017355A1 (de) * 2014-11-18 2016-05-19 DIPAX e. K. Dirk Pachael Verfahren und Anordnung zur intuitiven Auswahl eines Programms, Programmteils oder eines Computers, insbesondere bei Leitständen, wobei jedes Programm, Programmteil oder jeder Computer durch eine eigene Anzeige oder ein Bereich innerhalb einer Anzeige im
KR102183212B1 (ko) 2014-11-18 2020-11-25 삼성전자주식회사 화면 제어 방법 및 그 방법을 처리하는 전자 장치
JP6390380B2 (ja) * 2014-11-25 2018-09-19 トヨタ自動車株式会社 表示操作装置
US9886598B2 (en) * 2014-12-29 2018-02-06 Paypal, Inc. Automatic adjustment of a display to obscure data
US11269403B2 (en) * 2015-05-04 2022-03-08 Disney Enterprises, Inc. Adaptive multi-window configuration based upon gaze tracking
EP3109733B1 (en) 2015-06-22 2020-07-22 Nokia Technologies Oy Content delivery
US10031577B2 (en) * 2015-10-05 2018-07-24 International Business Machines Corporation Gaze-aware control of multi-screen experience
CN110825237B (zh) * 2016-04-20 2024-02-23 日产自动车株式会社 信息显示方法和显示控制装置
US10139901B2 (en) * 2016-07-05 2018-11-27 Immersv, Inc. Virtual reality distraction monitor
US20180024631A1 (en) * 2016-07-21 2018-01-25 Aivia, Inc. Interactive Display System with Eye Tracking to Display Content According to Subject's Interest
US10019849B2 (en) * 2016-07-29 2018-07-10 Zspace, Inc. Personal electronic device with a display system
US10331190B2 (en) 2016-11-09 2019-06-25 Microsoft Technology Licensing, Llc Detecting user focus on hinged multi-screen device
JP7048256B2 (ja) * 2017-10-27 2022-04-05 古野電気株式会社 船舶情報表示装置及び船舶情報表示方法
US10528817B2 (en) 2017-12-12 2020-01-07 International Business Machines Corporation Smart display apparatus and control system
KR102496603B1 (ko) * 2018-05-30 2023-02-03 삼성에스디에스 주식회사 어플리케이션 실행 화면의 위치 선정 방법
CN110868623A (zh) * 2018-08-27 2020-03-06 上海哔哩哔哩科技有限公司 视觉焦点区域的弹幕隐藏方法及处理装置
WO2020144161A1 (en) * 2019-01-08 2020-07-16 Tobii Ab Dual display systems and methods
US10969863B2 (en) * 2019-05-08 2021-04-06 International Business Machines Corporation Configurable sensor array for a multi-target environment
US11644902B2 (en) * 2020-11-30 2023-05-09 Google Llc Gesture-based content transfer
CN114915821B (zh) * 2021-02-09 2023-01-10 海信视像科技股份有限公司 显示设备及其控制方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080036875A1 (en) * 2006-08-09 2008-02-14 Jones Peter W Methods of creating a virtual window
US20100130280A1 (en) * 2006-10-10 2010-05-27 Wms Gaming, Inc. Multi-player, multi-touch table for use in wagering game systems
US20100171808A1 (en) * 2006-04-20 2010-07-08 Cisco Technology, Inc. System and Method for Enhancing Eye Gaze in a Telepresence System
US20110210922A1 (en) * 2010-02-26 2011-09-01 Research In Motion Limited Dual-screen mobile device
US20120162204A1 (en) * 2010-12-22 2012-06-28 Vesely Michael A Tightly Coupled Interactive Stereo Display

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7430721B2 (en) * 2003-04-08 2008-09-30 Tidebreak, Inc. Pointright: a system to redirect mouse and keyboard control among multiple machines
US7391888B2 (en) 2003-05-30 2008-06-24 Microsoft Corporation Head pose assessment methods and systems
KR20050042399A (ko) 2003-11-03 2005-05-09 삼성전자주식회사 게이즈 디텍션을 이용한 비디오 데이터 처리 장치 및 방법
US7545362B2 (en) * 2004-02-26 2009-06-09 Microsoft Corporation Multi-modal navigation in a graphical user interface computing system
US7561143B1 (en) 2004-03-19 2009-07-14 The University of the Arts Using gaze actions to interact with a display
US8232962B2 (en) * 2004-06-21 2012-07-31 Trading Technologies International, Inc. System and method for display management based on user attention inputs
US7331929B2 (en) 2004-10-01 2008-02-19 General Electric Company Method and apparatus for surgical operating room information display gaze detection and user prioritization for control
US7573439B2 (en) 2004-11-24 2009-08-11 General Electric Company System and method for significant image selection using visual tracking
US9213404B2 (en) 2006-02-01 2015-12-15 Tobii Technology Ab Generation of graphical feedback in a computer system
US8793620B2 (en) * 2011-04-21 2014-07-29 Sony Computer Entertainment Inc. Gaze-assisted computer interface
US20080024433A1 (en) * 2006-07-26 2008-01-31 International Business Machines Corporation Method and system for automatically switching keyboard/mouse between computers by user line of sight
US7987423B2 (en) * 2006-10-11 2011-07-26 Hewlett-Packard Development Company, L.P. Personalized slide show generation
US8640034B2 (en) * 2006-11-16 2014-01-28 International Business Machines Corporation Remote GUI control by replication of local interactions
GB2457867B (en) 2007-10-08 2010-11-03 Keymed Electronic camera
JP2009118423A (ja) 2007-11-09 2009-05-28 Canon Inc 表示装置及び制御方法
JP2009245376A (ja) 2008-03-31 2009-10-22 Toshiba Corp 情報処理装置
JP2009301166A (ja) * 2008-06-11 2009-12-24 Panasonic Corp 電子機器制御装置
JP4352156B1 (ja) * 2008-08-25 2009-10-28 兵庫県 地図情報処理装置、ナビゲーションシステム、およびプログラム
KR100960269B1 (ko) 2008-10-07 2010-06-07 한국과학기술원 눈동자 시선 추정 장치 및 추정 방법
KR20100064177A (ko) 2008-12-04 2010-06-14 삼성전자주식회사 전자장치 및 그의 디스플레이방법
TW201203001A (en) 2010-07-07 2012-01-16 Compal Electronics Inc Electronic device, multi-mode input/output device and mode switching method thereof
US10120438B2 (en) * 2011-05-25 2018-11-06 Sony Interactive Entertainment Inc. Eye gaze to alter device behavior
US9563274B2 (en) * 2011-06-10 2017-02-07 Sri International Adaptable input/output device
US9658687B2 (en) 2011-09-30 2017-05-23 Microsoft Technology Licensing, Llc Visual focus-based control of coupled displays

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100171808A1 (en) * 2006-04-20 2010-07-08 Cisco Technology, Inc. System and Method for Enhancing Eye Gaze in a Telepresence System
US20080036875A1 (en) * 2006-08-09 2008-02-14 Jones Peter W Methods of creating a virtual window
US20100130280A1 (en) * 2006-10-10 2010-05-27 Wms Gaming, Inc. Multi-player, multi-touch table for use in wagering game systems
US20110210922A1 (en) * 2010-02-26 2011-09-01 Research In Motion Limited Dual-screen mobile device
US20120162204A1 (en) * 2010-12-22 2012-06-28 Vesely Michael A Tightly Coupled Interactive Stereo Display

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105556457A (zh) * 2013-09-17 2016-05-04 诺基亚技术有限公司 视觉事件通知的显示
US11410276B2 (en) 2013-09-17 2022-08-09 Nokia Technologies Oy Determination of an operation
CN104866089A (zh) * 2014-02-26 2015-08-26 威斯通全球技术公司 基于检测到的方位调节显示器
CN104679509A (zh) * 2015-02-06 2015-06-03 腾讯科技（深圳）有限公司 一种渲染图形的方法和装置
CN104898996A (zh) * 2015-05-04 2015-09-09 联想(北京)有限公司 信息处理方法及电子设备
CN104898996B (zh) * 2015-05-04 2022-04-22 联想(北京)有限公司 信息处理方法及电子设备
CN112783411A (zh) * 2020-01-02 2021-05-11 珠海金山办公软件有限公司 一种文档内容显示方法及装置

Also Published As

Publication number Publication date
EP2761403A1 (en) 2014-08-06
EP2761403B1 (en) 2019-01-16
US10261742B2 (en) 2019-04-16
US9658687B2 (en) 2017-05-23
KR20140081810A (ko) 2014-07-01
KR102079832B1 (ko) 2020-02-20
JP6059727B2 (ja) 2017-01-11
US20170220308A1 (en) 2017-08-03
US20130083025A1 (en) 2013-04-04
JP2014528608A (ja) 2014-10-27
EP2761403A4 (en) 2015-04-08
HK1178635A1 (zh) 2013-09-13
CN102902503B (zh) 2016-02-17
WO2013048723A1 (en) 2013-04-04

Similar Documents

Publication Publication Date Title
CN102902503B (zh) 对耦合的显示器的基于视觉焦点的控制
US10845986B2 (en) Remote control device and method of controlling other devices using the same
US9405452B2 (en) Apparatus and method of searching for contents in touch screen device
EP3396512B1 (en) Multitasking method and apparatus of user device
CN102799382A (zh) 用户设备的系统栏的控制方法和用户设备
CN105556450A (zh) 用于控制设备的柔性设备、方法以及用于通过柔性设备显示对象的方法和装置
EP3362883B1 (en) Touch gesture control of video playback
KR102346571B1 (ko) 컴포넌트 특정 애플리케이션 프레젠테이션 이력들
US20140118626A1 (en) Remote control method, display control device, remote controller, and system
CN103631483A (zh) 一种定位的方法及装置
KR20150046071A (ko) 사용자 인터페이스를 통해 동작을 수행하는 방법
US20170300225A1 (en) Displaying application page of mobile terminal
US11099731B1 (en) Techniques for content management using a gesture sensitive element
CN110647286A (zh) 屏幕元素控制方法、装置、设备、存储介质
US20160154545A1 (en) Electronic device and method for managing and displaying application icons
CN112383825B (zh) 视频推荐方法、装置、电子设备和介质
CN102981771A (zh) 控制方法及触摸屏终端的输入设备
US20230328205A1 (en) Video conference presentation method and apparatus, and terminal device and storage medium
CN113873480B (zh) 交互控制方法、装置、终端和存储介质
CN102945123A (zh) 一种系统资源状况展示设备和系统资源状况展示方法
CN103106023B (zh) 用于控制便携式终端中的显示尺寸的装置和方法
CN103645836A (zh) 一种信息处理方法及电子设备
CN104572602A (zh) 显示消息的方法和装置
CN105025339A (zh) 一种电视盒子中节目的分类搜索方法及装置
Lin et al. Automatic, Manual, or Hybrid? A Preliminary Investigation of Users' Perception of Features for Supporting Notification Management

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1178635

Country of ref document: HK

ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150722

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150722

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1178635

Country of ref document: HK