CN107408100A - 目光用于自动翻页 - Google Patents

目光用于自动翻页 Download PDF

Info

Publication number
CN107408100A
CN107408100A CN201680013407.5A CN201680013407A CN107408100A CN 107408100 A CN107408100 A CN 107408100A CN 201680013407 A CN201680013407 A CN 201680013407A CN 107408100 A CN107408100 A CN 107408100A
Authority
CN
China
Prior art keywords
display
content
user
area
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680013407.5A
Other languages
English (en)
Inventor
A·D·威尔森
S·F·威廉姆斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN107408100A publication Critical patent/CN107408100A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00Digital computers in general; Data processing equipment in general
    • G06F15/02Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators
    • G06F15/025Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators adapted to a specific application
    • G06F15/0291Digital computers in general; Data processing equipment in general manually operated with input through keyboard and computation using a built-in program, e.g. pocket calculators adapted to a specific application for reading, e.g. e-books
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

描述了利用目光和/或其他用户交互来在用户设备的显示器上进行自动翻页。在至少一个示例中,技术描述从一个或多个跟踪组件接收输入。输入可以指示在与用户设备相关联的显示器上检测到用户的目光。技术还可以描述确定用户的目光已经从显示器的至少两个区域中的第一区域移动到显示器的至少两个区域中的第二区域。至少部分地基于确定用户的目光已经从第一区域移动到第二区域,本文中的技术描述经由一个或多个过渡更新显示器的第一区域中的内容的一部分。

Description

目光用于自动翻页
背景技术
眼睛目光可以被认为是用户注意的代表。因此,经由跟踪组件观察眼睛运动可以提供对大脑中的认知过程的了解。随着计算机化设备的增加,人类具有更多的机会来与关联于计算机化设备的显示器进行交互。当前的交互技术可以确定用户正在看计算机化设备的显示器上何处。而且,从跟踪组件所采集的眼睛目光数据可以被用于控制显示器的各方面。
发明内容
本文所描述的技术利用目光和/或其他用户交互来在用户设备上自动翻页。使用眼睛目光和/或其他用户交互来修改用户设备的显示器上的内容,使得用户能够在不手动地(例如,手工、物理交互等)与用户设备交互的情况下与用户设备交互。即,用户可以在不使用其手或其他输入设备的情况下操纵用户设备的显示器上的内容。与当前技术不同,本文所描述的技术避免了与不精确的眼睛跟踪和由此导致的不可预测的滚动行为有关的问题。而且,本文所描述的技术支持使用较不准确或较不精确的跟踪组件,并且因此减少了计算资源的消耗。
在至少一个示例中,所述技术描述从一个或多个跟踪组件接收输入。该输入可以指示在与用户设备相关联的显示器的至少两个区域中的第一区域上检测到用户的目光。所述技术还可以描述确定用户的目光已经从第一区域移动到显示器的至少两个区域中的第二区域。至少部分地基于确定用户的目光已经从显示器的第一区域移动到显示器的第二区域,本文中的技术描述更新显示器的第一区域中的内容的一部分。更新可以在不使用户分心的情况下或不使得用户的目光转移回到显示器的第一区域或转移远离显示器的情况下被执行。
提供该概述以便以简化形式介绍构思的精华,其在下文在详细描述中被进一步描述。该概述不旨在标识要求保护的技术方案的关键特征或必要特征,其也不旨在被用于限制要求保护的技术方案的范围。
附图说明
参考附图描述详细描述。在附图中,附图标记中的最左边的(一个或多个)数字标识该附图标记首次出现的附图。不同附图中的相同附图标记指示类似或相同项。
图1图示了用于利用目光进行自动翻页的示例环境。
图2图示了包括可以被实现用于利用目光进行自动翻页的各种设备和组件的示例操作环境。
图3图示了可以被实现用于利用目光进行自动翻页的示例操作环境。
图4图示了用于更新被呈现在显示器上的内容的一部分的示例过程。
图5图示了用于更新被呈现在显示器上的内容的一部分的示例过程。
图6图示了用于更新被呈现在显示器上的内容的一部分的示例过程。
图7图示了用于更新被呈现在显示器上的内容的一部分的示例过程。
图8图示了用于更新被呈现在显示器上的内容的一部分的示例过程。
图9图示了用于当用户从显示器转移目光时更新被呈现在显示器上的内容的一部分的示例过程。
具体实施方式
本文所描述的技术利用眼睛目光和/或其他用户交互来在用户设备上进行自动翻页。使用眼睛目光和/或其他用户交互来修改用户设备的显示器上的内容使得用户能够在不手动地(例如,手工、物理交互等)与用户设备交互的情况下与用户设备交互。即,用户可以在不使用其手或其他输入设备(例如,光笔、鼠标等)的情况下操纵用户设备的显示器上的内容。与当前技术不同,本文所描述的技术避免了与不精确的眼睛跟踪和由此导致的不可预测的滚动行为有关的问题。本文所描述的技术与当前技术相比,要求的跟踪精度较低,并且利用被称为“变化视盲”的现象来减轻用户在操纵显示器上的内容时的注意力分散。而且,本文所描述的技术使得能够使用较不准确或较不精确的跟踪组件,并且因此减少计算资源的消耗。
如上文所描述的,眼睛目光可以被认为是用户注意的代表。当前技术可以确定用户正在看用户设备的显示器上何处。而且,从跟踪组件所采集的眼睛目光数据可以被用于控制显示器的各方面。作为示例,一些技术使用眼睛目光数据使得用户能够与用户设备直接交互。特别地,其他技术利用与眼睛目光相关联的停留时间来确定用户想要与显示器上的哪些项交互。其他技术使得眼睛姿态和/或其他运动(例如,眼睛的眨眼)能够表示对显示器上的项或对象的选择。
在一些示例中,解译用户设备的显示器上的眼睛运动可以支持对阅读和/或查看行为的检测。系统可以利用眼睛目光来确定人当前正在阅读和/或查看用户设备的显示器上的何处的内容(例如,文本、图像、视频等),并且当用户接近显示器的下部时可以自动地滚动内容。当用户接近显示器的下部时,先前未看到的文本、图像和/或视频可以被呈现在显示器上,从显示器的下部开始滚动,先前看到的内容滚动到显示器的上部。然而,这样的技术可能由于不精确的或有噪声的眼睛跟踪而导致不可预测的滚动运动。附加地或者备选地,确定用户何时在显示器的下部的困难可能在显示器上导致不和谐的或令人分散注意力的滚动运动。因此,用于使用眼睛目光与计算机化设备交互的这样的技术可能导致不愉快的用户体验。此外,当前技术要求精确和准确的跟踪组件,其消耗大量的计算资源和/或包含到用户设备中是昂贵的。
本文中的技术描述用于利用眼睛目光和/或其他用户交互以使得用户能够通过内容而不要求用户手动翻页的系统和方法。本文所描述的技术利用被称为“变化视盲”的现象。变化视盲描述了关注于显示器的一个区域的用户不会注意到用户没有看到的显示器的不同区域的改变的事件,这是因为他或她正关注其他区域。变化视盲支持呈现在显示器上的内容之间的平滑过渡,其防止将用户的眼睛从他或她正关注的显示器的区域吸引开。
在至少一个示例中,本文中的技术描述从一个或多个跟踪组件接收输入。输入可以指示在与用户设备相关联的显示器的至少两个区域中的第一区域上检测到用户的目光。所述技术还可以描述确定用户的目光从第一区域移动到显示器的至少两个区域中的第二区域。至少部分地基于确定用户的目光从显示器的第一区域移动到显示器的第二区域,本文中的技术描述更新显示器的第一区域中的内容的一部分。当用户阅读和/或查看显示器的第二区域中的内容时,本文所描述的技术可以更新显示器的第一区域中的内容,使得当用户完成阅读和/或查看显示器的第二区域中的内容并且返回显示器的第一区域时,用户可以阅读和/或查看先前未看到的内容。在显示器的第一部分中呈现的先前未看到的内容对于用户在显示器的第二区域中先前阅读和/或查看的内容而言可以是连续的和/或连载的。
所述技术还可以描述确定用户的目光从显示器的第二区域移动回到显示器的第一区域或移动到显示器的另一区域。至少部分地基于确定用户的目光从显示器的第二区域移动到显示器的第一区域,本文中的技术描述自动地更新显示器的第二区域中的内容的一部分。随着用户阅读和/或查看显示器的第一区域中的内容,本文所描述的技术可以更新显示器的第二区域中的内容,使得当用户完成阅读和/或查看显示器的第一区域中的内容并且继续到显示器的第二区域中时,用户可以阅读和/或查看先前未看到的内容。在显示器的第二部分中呈现的先前未看到的内容对于用户先前在显示器的第一区域中阅读和/或查看的内容而言是连续的和/或连载的。这些输入和更新可以重复,使得随着用户从上到下(或者从左到右)阅读和/或查看内容并且返回到上部(或左侧)查看,内容连续地前进,而不分散用户的注意力或者以其他方式使得用户的目光离开他或她当前关注和/或交互的显示器的区域(例如,目光转移到显示器的不同区域、离开显示器等)。利用本文中的技术给用户提供了好像他或她正阅读和/或查看永不结束的书或图像集合的体验。
在非限制性示例中,随着用户从上到下阅读电子书(eBook),与相继页面相关联的内容可以过渡到显示器的区域上,同时用户阅读显示器的不同区域中的文本。在附加或者备选示例中,随着用户从显示器的上部到下部查看图像集合,来自该集合的另外的图像可以过渡到显示器的区域上,同时用户查看显示器的不同区域中的图像。因此,用户可以从事从左到右并且从上到下阅读文本和/或查看图像和/或视频、返回到开始位置(例如,左上角、左边缘等)的自然或反射行为,并且可以在不手动地与用户设备交互的情况下接收新内容。
说明性环境
下文所描述的环境仅构成一个示例,并且不旨在将下文所描述的系统的应用限于任何一个特定操作环境。在不脱离要求保护的技术方案的精神和范围的情况下,可以使用其他环境。本文所描述的各种类型的处理可以在任何数目的环境中被实现,包括但不限于独立式计算系统、网络环境(例如,局域网或广域网)、对等网络环境、分布式计算(例如,云计算)环境等。
图1图示了用于利用目光进行自动翻页的示例环境100。环境100包括与一个或多个用户设备104交互的一个或多个用户102。一个或多个用户设备104可以包括例如台式计算机、膝上型计算机、智能电话、可穿戴设备、视频游戏控制台、电视机或在下文关于图2所描述的用户设备104中的任一个。在至少一个示例中,用户设备104可以包括具有以小于预定阈值的速率更新的显示器108(诸如电子墨水显示器(例如,Kindle、Nook等))的(一个或多个)用户设备104。一个或多个用户设备104可以与一个或多个跟踪组件106进行通信,并且在至少一些示例中,与显示器108进行通信。在至少一个示例中,一个或多个跟踪组件106和/或显示器108可以被集成到一个或多个用户设备104中。在其他示例中,一个或多个跟踪组件106和/或显示器108可以是连接到一个或多个用户设备104或者与一个或多个用户设备104通信的分离的设备。在图1中,一个或多个跟踪组件106中的跟踪组件和显示器108被集成到用户设备104中。
一个或多个跟踪组件106可以包括可以被用于跟踪眼睛目光、头部姿势、身体运动等的任何传感器、照相机、设备、系统等。在至少一个示例中,一个或多个跟踪组件106跟踪用户102的眼睛目光扫视、凝视等。扫视描述在两个凝视阶段之间双眼在同一方向上的快速的同时的运动。凝视描述在显示器108的特定区域上的停留时间。在一些示例中,一个或多个跟踪组件106可以跟踪用户102的头部姿势和/或用户的鼻子指向的方向,作为用于目光扫视、凝视等的代表,如下文所描述的。
一个或多个跟踪组件106可以包括Tobii Rex眼睛跟踪系统、SensoMotioricInstruments(SMI)眼睛跟踪系统、Sentry眼睛跟踪系统、Microsoft技术等。在至少一个示例中,一个或多个跟踪组件106可以利用目光感测技术,诸如被设计为检测用户102何时直接地看照相机的那些技术,其采用轴上和离轴红外线照明和图像处理等。在一些示例中,一个或多个照相机和/或传感器可以放置在用户设备104的遮光板周围,以确定用户102何时关注显示器108的区域和/或已经到达了可以被呈现在显示器108上的内容中的某个位置。一个或多个跟踪组件106的精度和/或准确度可以小于预定阈值,使得可以最小化地要求一个或多个跟踪组件106,以确定用户102与显示器的两个或两个以上区域中的哪个区域交互。
在至少一个示例中,显示器108可以表示用户界面,并且用户界面可以将内容呈现给用户102。显示器108可以呈现表示电子书(eBook)中的页面的电子内容、与网页相关联的内容等。在至少一些示例中,内容可以包括文本、图像、视频等。在附加或备选示例中,内容可以被连续布置,使得当用户102阅读和/或查看内容时,用户102以从左到右和从上到下的渐进方式阅读和/或查看内容。
显示器108可以被划分为两个或两个以上区域。在至少一个示例中,显示器108可以被划分为上部区域108A和下部区域108B,如在图1中所图示的。下部区域108B可以邻近上部区域108A,并且在上部区域108A下方。在其他示例中,显示器108可以被划分为左侧区域和右侧区域,右侧区域邻近左侧区域并在左侧区域的右侧,可以被划分为、上部区域、中部区域和下部区域,可以被划分为以圆形、矩形、抽象形状等布置的多个区域。虽然显示器108可以被划分为两个或两个以上区域,显示器108对一个或多个用户102而言可以表现为单个显示器。即,一个或多个用户102可能无法辨别显示器被划分108为区域。
一个或多个用户102可以经由各种通信模式(诸如注视、手势、面部表情等)与用户设备104交互。用户输入可以包括目光输入110、手势输入等中的一个或多个。在一些示例中,两个或两个以上用户102可以同时地与用户设备104交互。目光可以表示用户的眼睛在用户设备104的显示器108上的位置。一个或多个跟踪组件106可以跟踪用户目光,以生成目光输入110。目光输入110可以包括眼睛目光输入、头部姿态输入和/或鼻子指向输入。头部姿态输入可以包括在与用户设备104的用户交互期间用户102的头部摆好姿态的配置。鼻子指向可以包括在与用户设备104的用户交互期间用户102的鼻子指向的方向。头部姿态输入和鼻子指向输入可以各自用作眼睛目光输入的代表。取决于一个或多个跟踪组件106的范围和/或显示器108的大小,可以使用备选和/或附加的面部定向特性(例如,头部姿态和/或鼻子指向)。在至少一个示例中,一个或多个跟踪组件106可以在距用户102的面部的预定距离内,和/或显示器108的大小可以小于预定阈值(例如,可穿戴装置、智能电话等上的显示器),并且因此,一个或多个跟踪组件106可以跟踪用户102目光获得目光输入110。在备选示例中,跟踪组件可以超过距用户102的面部预定距离,和/或显示器108的大小可以大于预定阈值(例如,电视机上的显示器、投影屏幕等),并且因此,一个或多个跟踪组件106可以跟踪头部姿态或鼻子指向,作为用户102目光的代表。
一个或多个跟踪组件106可以跟踪用户102的眼睛(或头部、鼻子等)的运动,以生成用户102的目光输入110。在至少一个示例中,一个或多个跟踪组件106可以确定目光输入110所针对的显示器108上的特定位置,并且然后,一个或多个跟踪组件106可以与被存储在用户设备104上的一个或多个组件交互,以做出关于目光输入110对应于显示器108的哪个区域的确定。一个或多个跟踪组件106继续跟踪目光输入110,以便确定目光输入110是否移动,以及目光输入110是否已经转移到显示器108的不同区域。
至少部分地基于目光输入110,系统104可以利用先前未看到的内容来替换显示器上的内容。在至少一些示例中,系统104可以基本上同时地或在系统104检测到用户102的眼睛目光的运动之后的阈值时间内替换显示器108上的内容。在其他示例中,系统104可以检测用户102的眼睛目光的运动,但是可以至少部分地基于一个或多个参数(例如,阅读或查看分类器、停留引擎等)进行等待以替换内容。一个或多个参数可以被用于消除假肯定或可能错误地触发显示器108上的内容的更新的眼睛移动。在至少一个示例中,当一个或多个跟踪组件106从显示器108的上部区域108A到显示器的下部区域108B跟踪用户102的眼睛时,系统可以利用先前未看到的内容替换上部区域108A中的内容。当一个或多个跟踪组件106从下部区域108B到上部区域108A跟踪用户的眼睛时,系统可以利用先前未看到的内容替换下部区域108B中的内容。可以重复该模式,使得用户102简单地从显示器的上部到下部进行读取,并且连续地被呈现先前未看到的内容。内容可以包括来自电子书的页面、来自图像集合的图像等。先前未看到的内容可以包括电子书中的相继页面、图像集合中的新图像等。
图2图示了包括可以被实现用于利用目光进行自动翻页的各种设备和组件的示例操作环境200。在至少一个示例中,本文所描述的技术可以远程地被执行(例如,由服务器、云等执行)。在一些示例中,本文所描述的技术可以在计算设备上本地执行,如下文所描述的。更特别地,示例操作环境200可以包括服务提供商202、一个或多个网络204、一个或多个用户102和与一个或多个用户102相关联的一个或多个用户设备104,如在图1中所描述的。
如所示的,服务提供商202可以包括一个或多个服务器和其他机器206和/或一个或多个用户设备104,其中的任何一个都可以包括一个或多个处理单元208和计算机可读介质210。在各种示例中,服务提供商202可以使得用户102能够在不手动地与用户设备104交互的情况下自动地对文本翻页和/或查看显示器108上的内容翻页。
在一些示例中,(一个或多个)网络204可以是本领域中已知的任何类型的网络,诸如因特网。而且,一个或多个用户设备104可以以任何方式通信地耦合到(一个或多个)网络204,诸如通过全球或本地有线或无线连接(例如,局域网(LAN)、内联网等)。(一个或多个)网络204可以促进(一个或多个)服务器与其他机器206和/或与一个或多个用户102相关联的一个或多个用户设备104之间的通信。
在一些示例中,一个或多个用户102可以与对应的(一个或多个)用户设备104交互,以执行与一个或多个用户设备104相关联的各种功能,其可以包括一个或多个处理单元208、计算机可读介质210、一个或多个跟踪组件106和显示器108。
一个或多个用户设备104可以表示不同的各种设备类型,并且不限于任何特定类型的设备。(一个或多个)用户设备104的示例可以包括但不限于固定计算机、移动计算机、嵌入式计算机或其组合。示例固定计算机可以包括台式计算机、工作站、个人计算机、瘦客户端、终端、游戏控制台、个人录像机(PVR)、机顶盒等。示例移动计算机可以包括膝上型计算机、平板计算机、可穿戴计算机、植入式计算设备、电信设备、汽车计算机、个人数字助理(PDA)、便携式游戏设备、媒体播放器、照相机、电子读取器等。示例嵌入式计算机可以包括支持网络的电视机、包括在计算设备中的集成组件、电器、微控制器、数字信号处理器或任何其他种类的处理设备等。
服务提供商202可以是任何实体、(一个或多个)服务器、平台等,其可以至少部分地基于跟踪眼睛目光来促进自动翻页。而且,并且如所示的,服务提供商202可以包括一个或多个服务器和/或其他机器206,其可以包括一个或多个处理单元208和计算机可读介质210,诸如存储器。一个或多个服务器和/或其他机器206可以包括设备,如下文所描述的。
在示例所支持的场景中,可以被包括在一个或多个服务器和/或其他机器206中的设备可以包括一个或多个计算设备,其在集群或其他分组配置中操作,以共享资源、平衡负载、提高性能、提供容错支持或冗余或用于其他目的。在一个或多个服务器和/或其他机器206中所包括的(一个或多个)设备可以属于各种类别或种类的设备,诸如传统的服务器类型设备、台式计算机类型设备、移动设备、专用类型设备、嵌入式类型设备和/或可穿戴类型设备。因此,虽然被图示为台式计算机,(一个或多个)设备可以包括不同的各种设备类型并且不限于特定类型的设备。在一个或多个服务器和/或其他机器206中所包括的(一个或多个)设备可以表示但不限于台式计算机、服务器计算机、网络服务器计算机、个人计算机、移动计算机、膝上型计算机、平板计算机、可穿戴计算机、植入式计算设备、电信设备、汽车计算机、支持网络的电视机、瘦客户端、终端、个人数字助理(PDA)、游戏控制台、游戏设备、工作站、媒体播放器、个人录像机(PVR)、机顶盒、照相机、包括在计算设备中的集成组件、电器或任何其他种类的计算设备。
可以被包括在一个或多个服务器和/或其他机器206中的(一个或多个)设备可以包括任何类型的计算设备,其具有例如经由总线操作地连接到计算机可读介质210的一个或多个处理单元208,总线在一些实例中可以包括以下各项中的一项或多项:系统总线、数据总线、地址总线、PCI总线、Mini-PCI总线和任何各种本地、外围和/或独立总线。在计算机可读介质210上所存储的可执行指令可以包括例如显示模块212、接收模块214、更新模块216和其他模块、程序和应用,其可由(一个或多个)处理单元208加载和执行。备选地或者附加地,可以至少部分地由一个或多个硬件逻辑组件(诸如加速器)执行本文所描述的功能。例如,并且非限制性地,可以使用的说明性类型的硬件逻辑组件包括现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统系统(SOC)、复杂可编程逻辑设备(CPLD)等。例如,加速器可以表示混合设备,诸如ZYLEX或ALTERA中之一,其包括被嵌入在FPGA结构中的CPU过程。
可以被包括在一个或多个服务器和/或其他机器206中的(一个或多个)设备还可以包括一个或多个输入/输出(I/O)接口,其被耦合到总线以允许(一个或多个)设备与其他设备通信,其他设备例如为用户输入外围设备(例如,键盘、鼠标、笔、游戏控制器、语音输入设备、触摸输入设备、手势输入设备、眼睛和/或身体跟踪设备等)和/或输出外围设备(例如,显示器、打印机、音频扬声器、触觉输出等)。一个或多个输入/输出(I/O)接口可以允许(一个或多个)用户设备104与一个或多个跟踪组件106和/或显示器108通信。可以包括在一个或多个服务器和/或其他机器206中的设备还可以包括一个或多个网络接口,其被耦合到总线以支持计算设备与其他联网设备(诸如一个或多个用户设备104)之间的通信。这样的(一个或多个)网络接口可以包括一个或多个网络接口控制器(NIC)或其他类型的收发器设备,以通过网络发送和接收通信。为了简单起见,从所图示的设备中省略了一些组件。
(一个或多个)用户设备104还可以包括一个或多个输入/输出(I/O)接口,其被耦合到总线,以允许(一个或多个)用户设备与其他设备通信,其他设备例如为用户输入外围设备(例如,键盘、鼠标、笔、游戏控制器、语音输入设备、触摸输入设备、手势输入设备、眼睛和/或身体跟踪设备等)和/或输出外围设备(例如,显示器、打印机、音频扬声器、触觉输出等)。一个或多个输入/输出(I/O)接口可以允许(一个或多个)用户设备104与一个或多个跟踪组件106和/或显示器108通信。
(一个或多个)处理单元208可以表示例如中央处理单元(CPU)类型处理单元、GPU类型处理单元、现场可编程门阵列(FPGA)、另一种类的数字信号处理器(DSP)或在一些实例中可以由CPU驱动的其他硬件逻辑组件。例如,并且非限制性地,可以使用的说明性类型的硬件逻辑组件包括专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统系统(SOC)、复杂可编程逻辑设备(CPLD)等。在各种示例中,(一个或多个)处理单元208可以执行一个或多个模块和/或过程,以使得一个或多个用户设备104执行各种功能,如上文阐述和在以下公开内容中更详细解释的。此外,(一个或多个)处理单元208中的每一个可以具有其自身的本地存储器,其还可以存储程序模块、程序数据和/或一个或多个操作系统。
在至少一个示例中,一个或多个用户设备104中的计算机可读介质210可以包括促进(一个或多个)用户设备104与(一个或多个)用户102之间的交互的组件。例如,计算机可读介质210可以至少包括显示模块212、接收模块214和更新模块216,其可以经由(一个或多个)处理单元208被实现为计算机可读指令、各种数据结构等等,以将设备配置为利用先前未看到的内容替换显示器108的区域上的内容。
在至少一个示例中,显示模块212可以被配置为与显示器108通信,并且使得内容(例如,文本、图像、视频等)显现在显示器108上。如上文所描述的,显示器108可以表示用户界面,并且显示模块212可以与显示器108通信以在与网络浏览器、电子书等相关联的用户界面中将内容呈现给用户102。在至少一个示例中,接收模块214可以被配置为接收来自一个或多个用户102的输入,诸如手势、目光输入110、身体定位等,如下文所描述的,并且确定与来自一个或多个用户102的输入相关联的位置。更新模块216可以被配置为确定何时更新显示器108的区域,并且至少部分地基于确定更新显示器108的区域,更新模块216可以将先前未看到的内容发送到显示模块212,以用于使得内容被呈现在显示器108上。
取决于(一个或多个)用户设备104和/或服务器和/或其他机器206的确切配置和类型,计算机可读介质210可以包括计算机存储介质和/或通信介质。计算机存储介质可以包括以用于信息(诸如计算机可读指令、数据结构、程序模块或其他数据)存储的任何方法或技术实现的易失性存储器、非易失性存储器和/或其他持久和/或辅助计算机存储介质、可移除和不可移除计算机存储介质。计算机存储器是计算机存储介质的示例。因此,计算机存储介质包括被包括在设备和/或硬件组件中的有形和/或物理形式的介质,所述硬件组件是设备的一部分或位于设备外部,计算机存储介质包括但不限于随机存取存储器(RAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、相变存储器(PRAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、闪速存储器、压缩光盘只读存储器(CD-ROM)、数字多用光盘(DVD)、光卡或其他光学存储介质、微型硬驱动、记忆卡、磁带盒、磁带、磁盘存储、磁性卡或其他磁性存储设备或介质、固态存储器设备、存储阵列、网络附加存储、存储区域网络、主机计算机存储或任何其他存储存储器、存储设备和/或可以被用于存储和维持用于由计算设备访问的信息的存储介质。
相反,通信介质可以在已调数据信号(例如载波或其他传输机制)中实现计算机可读指令、数据结构、程序模块或其它数据。如本文所定义的,计算机存储介质不包括通信介质。
图3图示了可以被实现用于利用目光进行自动翻页的示例操作环境300。在图3中,一个或多个跟踪组件106可以检测和跟踪与显示器108的用户交互。在至少一个示例中,一个或多个跟踪组件106可以确定用户交互所针对的显示器108上的特定位置,并且然后,一个或多个跟踪组件106可以与接收模块214和/或更新模块216交互,以做出关于用户交互对应于显示器108的哪个区域的确定。一个或多个跟踪组件106继续跟踪目光输入110,以便确定目光输入110是否移动,以及目光输入110是否已经转移到不同区域。
接收模块214可以经由一个或多个跟踪组件106接收目光输入110。目光输入110可以指示一个或多个跟踪组件106已经检测到显示器108上的用户交互,并且可以提供指示用户102眼睛目光凝视如何与显示器108交互的跟踪信息。接收模块214可以利用目光输入110确定与显示器108的用户交互的位置。例如,接收模块214可以确定用户交互是与显示器108的第一区域(例如,上部区域108A)相关联还是与显示器108的第二区域(例如,下部区域108B)相关联等等。接收模块214还可以确定用户交互已经从第一区域(例如,上部区域108A)移动到第二区域(例如,下部区域108B)和/或从第二区域移动到第三区域等等。在至少一个示例中,第二区域可以表示中间区域,并且用户交互可以从中间区域移动到下部区域(例如,下部区域108B)等。接收模块214可以将包括与显示器108的用户交互的位置的确定的目光输入110发送到更新模块216。至少部分地基于接收到显示器108上的用户交互的位置,更新模块216可以将更新数据302和内容304发送到显示模块212。
更新数据302可以包括关于更新显示器108的哪个区域的指导。在至少一个示例中,更新数据302可以引导显示模块212以更新显示器108的不与用户交互相关联的区域(例如,显示器108的、用户没有看的区域等)中的内容304。内容304可以包括用于更新的内容304。在至少一个示例中,内容304可以包括先前未看到的内容,如上文所描述的。显示模块212可以使先前未看到的内容在显示器108上被呈现在显示器108的由更新数据302所指示的区域中。
图4图示了用于更新被呈现在用户设备104的显示器108上的内容的一部分的示例过程400。每个块具有对应的被显示在该块的右侧的示意图。
块402图示了接收来自一个或多个组件106的输入,其指示在显示器108上检测到用户102的目光。如上文所描述的,除了用户目光以外或者替代用户目光,鼻子位置或头部位置也可以被用于检测和/或确定显示器108上的用户交互的位置。一个或多个跟踪组件106可以利用可以用于跟踪眼睛目光、头部姿态、身体运动等的一个或多个传感器、照相机、设备、系统等,来跟踪用户102在显示器108上的目光。在至少一个示例中,一个或多个跟踪组件106可以利用目光感测技术,诸如被设计为检测何时用户直接地看照相机的那些技术,其采用备选轴上和离轴红外线照射和图像处理等,如上文所描述的。一个或多个跟踪组件106可以将目光输入110发送到接收模块214。接收模块214可以确定用户102在显示器108上的目光的位置。如上文所描述的,显示器108可以具有两个或两个以上区域,并且因此,接收模块214可以确定用户交互针对的是两个或两个以上区域中的哪个区域(例如,用户正看哪个区域)。例如,接收模块214可以确定用户102的目光与显示器108的至少两个区域中的第一区域相关联。
对应于块402的示意图402图示了显示器108的第一区域108A中的目光输入110。在图4的非限制性示例中,显示器108正呈现与第一图像页面相关联的多个图像,如由上部区域108A和下部区域108B的右上角中的数字“1”所指示的。
块404图示了确定用户102的目光从第一区域108A移动到显示器108的至少两个区域中的第二区域108B中。至少部分地基于目光输入110,接收模块214可以确定用户102的目光从第一区域108A移动到显示器108的至少两个区域中的第二区域108B。对应于块404的示意图404图示了目光输入110从显示器108的第一区域108A移动到显示器108的第二区域108B。
在至少一些示例中,接收模块214可以至少部分地基于一个或多个参数,确定在第二区域108B中检测到用户102的目光(即,用户目光从第一区域108A移动到第二区域108B)。一个或多个参数可以被用于消除假肯定或可能错误地触发显示器108上的内容的更新的眼睛运动。一个或多个参数可以包括阅读或查看分类器、停留引擎等。在至少一个示例中,阅读分类器可以检测用户眼睛运动(例如,扫视、凝视等)中的指示用户102在阅读以文本行布置的词语的模式。附加地或者备选地,阅读分类器可以检测用户眼睛运动中(例如,扫视、凝视等)的指示用户102返回到页面上的页边空白或预定位置的模式。查看分类器可以检测用户102眼睛运动(例如,扫视、凝视等)中的指示用户102滚动或查看以预定配置布置的图像的模式。停留引擎可以确定用户102眼睛运动与显示器108的特定区域相关联的时间量,并且如果所确定的时间量大于预定阈值,则停留引擎可以确定在第二区域102B中检测到用户102的目光。接收模块214可以利用所述一个或多个参数来减少由于用户102随机地扫描显示器108而错误地触发的内容更新。所述一个或多个参数还可以帮助控制自动翻页的速度和定时。
块406图示了更新显示器108的第一区域108A中的内容的一部分。至少部分地基于确定用户102的目光从第一区域108A移动到第二区域108B,更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新显示器的第一区域108A中的内容。内容304可以包括先前未看到的内容,显示模块212可以使先前未看到的内容被呈现在显示器108的第一区域108A中。在至少一个示例中,显示模块212可以使呈现在显示器108的第一区域108A中的内容被先前未看到的内容替换,而不分散用户102的注意力。即,显示模块212可以使呈现在显示器108的第一区域108A中的内容被先前未看到的内容替换,而不会使用户102的目光转移回到显示器108的第一区域108A,也不会使用户102的目光在其他方向上(诸如远离显示器108)转移。显示模块212可以利用变化视盲,使得用户102(其正关注显示器108的第二区域108B)没有注意到显示器108的第一区域108A的变化。变化视盲支持呈现在显示器108上的内容之间的平滑过渡,以防止将用户102的眼睛从他或她正关注的显示器的区域吸引开。
显示模块212可以使用一个或多个过渡利用先前未看到的内容来自动地更新第一区域108A中的内容。所述一个或多个过渡可以包括使内容与先前未看到的内容交叉淡变。交叉淡变包括溶解或者逐渐地从第一条内容过渡到第二条内容。在逐行执行交叉淡变的交叉淡变示例中,因为先前未看到的内容逐行替换先前阅读的内容,所以与交叉淡入相比,过渡看起来可能更像擦拭。擦拭或者清除描述通过看起来是从显示器108的第一区域行进到显示器108的第二区域或预定形状的过渡,利用第二条内容替换第一条内容。所述一个或多个过渡还可以包括将内容变形为先前未看到的内容,或者清除内容并且利用先前未看到的内容将其替换。变形描述逐渐地重塑第一条内容以变为另一条内容。其他过渡也可以被用于利用新的先前未看到的内容来更新显示器108上的内容,只要过渡平滑得不分散不使用户106的注意力即可。所述一个或多个过渡可以取决于由显示模块212更新的内容而变化。例如,如果内容包括文本,则交叉淡入可能比变形更适当。然而,如果内容包括图像,则变形可能比交叉淡入更适当。在至少一些示例中,文本、图像和/或视频可以关于字体、大小、对齐、色调、亮度、显示器108上的位置等被标准化为特定格式,以最小化用户102的任何注意力分散,并且实现对用户102没有看和/或与显示器108交互的显示器108的区域的微妙变化。
对应于块406的示意图406图示了显示器108的第二区域108B中的目光输入110。此外,示意图406图示了由上部区域108A的右上角中的数字“1”指示的、先前与第一图像页面相关联的内容已经被替换成由上部区域108A的右上角中的数字“2”所指示的、先前未看到的图像页面。然而,显示器108的下部区域108B继续显示与第一图像页面相关联的图像,其由下部区域108B的右上角中的数字“1”所指示。在用户102的目光关注在显示器108的下部区域108B中时,显示模块212使得先前未看到的内容被呈现以替代显示器108的上部区域108A中的内容,而不分散用户102的注意力。因此,当用户102准备继续查看新图像时,用户102本能地看向显示器108的上部。当用户102看向显示器108的上部时,先前未看到的内容(例如,新图像)可以被呈现,并且用户102可能对过渡一无所知。
图5图示了用于替换被呈现在显示器108上的内容的一部分的示例过程500。块504-508具有被显示在这些块的右侧的对应的示意图。
块502图示了从一个或多个跟踪设备106接收指示用户设备104的显示器108上的用户交互的数据。如上文所描述的,一个或多个跟踪设备106可以被用于跟踪眼睛目光、鼻子位置和/或头部位置,以检测显示器108上的用户交互。一个或多个跟踪组件106可以将目光输入110发送到接收模块214。在至少一个示例中,目光输入110可以包括用于确定显示器108上的用户交互的位置的跟踪数据。
块504图示了确定用户交互与显示器108的区域相关联。接收模块214可以确定显示器108上的用户交互的位置。如上文所描述的,显示器108可以具有两个或两个以上区域,并且因此,接收模块214可以确定用户交互针对的是两个或两个以上区域中的哪个区域(例如,用户正在看哪个区域)。至少部分地基于目光输入110和/或跟踪数据,接收模块214可以确定用户交互针对的是显示器108的特定区域。在至少一些示例中,特定区域可以是上部区域108A、下部区域108B、左侧区域、右侧区域等。对应于块504的示意图504图示了显示器108的特定区域(例如,上部区域108A)中的用户交互(例如,目光输入110)。在图5的非限制性示例中,显示器108正在呈现与第一文本页面(例如,电子书、网页等)相关联的文本,如由上部区域104A和底区域108B的右上角中的数字“1”所指示的。
块506图示了确定用户交互移动到显示器108的不同区域。至少部分地基于目光输入110和/或跟踪数据,接收模块214可以确定用户交互从显示器108的特定区域移动到显示器108的不同区域。在至少一些示例中,特定区域可以是上部区域108A,并且不同区域可以是显示器的下部区域108B。在其他示例中,不同区域可以是上部区域108A、中间区域、左侧区域、右侧区域等。在至少一些示例中,接收模块214可以至少部分地基于上文所描述的一个或多个参数(例如,停留引擎、阅读和/或查看分类器等),确定在不同区域108B中检测到用户交互。所述一个或多个参数可以被用于消除假肯定或可能错误地触发显示器108上的内容的替换的眼睛运动。对应于块506的示意图506图示了用户交互(例如,目光输入110)从显示器108的区域(例如,第一区域108A)移动到显示器108的不同区域(例如,第二区域108B)。
块508图示了替换与显示器108的区域相关联的内容。至少部分地基于确定用户交互从区域(例如,第一区域108A)移动到不同区域(例如,第二区域108B),更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新显示器108的、缺少用户交互的区域(例如,显示器108的、用户102没有看的区域)中的内容。内容304可以包括先前未看到的内容,显示模块212可以使先前未看到的内容被呈现在显示器108的该区域中。在至少一个示例中,显示模块212可以使呈现在显示器108的该区域中的内容由先前未看到的内容替换,而不分散用户102的注意力。该内容可以经由一个或多个过渡(例如,交叉淡变、变形、清除等)由先前未看到的内容替换,如上文所描述的。如上文所描述的,显示模块212可以利用变化视盲,使得用户102(其正关注显示器108的不同区域)没有注意到对显示器108的其他区域的改变。
对应于块508的示意图508图示了显示器108的不同区域(例如,下部区域108B)中的用户交互(例如,目光输入110)。此外,示意图508图示了由上部区域108A的右上角中的数字“1”所指示的、先前与第一文本页面相关联的内容已经被替换为由上部区域108A的右上角中的数字“2”所指示的先前未看到文本页面。然而,显示器108的下部区域108B继续显示与第一页面相关联的文本,如由下部区域108B的右上角中的数字“1”所指示的。在用户交互关注在显示器108的不同区域(例如,下部区域108B)中时,显示模块212可以使先前未看到的内容替换显示器108的其他区域(例如,上部区域108A)中的内容,而不分散用户102的注意力。因此,当用户102准备继续阅读电子书中的下一页或者网站上的另外内容时,用户本能地看向显示器108的上部。当用户102看向显示器108的上部时,先前未看到的内容(例如,新文本)可以被呈现,并且用户102可能对过渡一无所知。
图6图示了用于替换呈现在显示器108上的内容的一部分的示例过程600。每个块具有显示在该块的右侧的对应的示意图。
块602图示了确定用户交互与显示器108的区域相关联。至少部分地基于目光输入110和/或跟踪数据,接收模块214可以确定用户交互针对显示器108的特定区域。在至少一些示例中,特定区域可以是上部区域108A、中间区域、下部区域108B、左侧区域、右侧区域等。对应于块602的示意图602图示了显示器108的特定区域(例如,上部区域108A)中的用户交互(例如,目光输入110)。在图6的非限制性示例中,显示器108正呈现与第一文本页面相关联的文本,如由上部区域108A和下部区域108B的右上角中的数字“1”所指示的。文本可以与电子书、网页等相关联。
块604图示了确定用户交互与显示器108的不同区域相关联。至少部分地基于目光输入110和/或跟踪数据,接收模块214可以确定用户交互从显示器108的特定区域移动到显示器108的不同区域。在至少一些示例中,不同区域可以是显示器的下部区域108B。在其他示例中,不同区域可以是上部区域108A、中间区域、左侧区域、右侧区域等。在至少一些示例中,接收模块214可以至少部分地基于一个或多个参数(例如,停留引擎、阅读和/或查看分类器等),确定在不同区域108B中检测到用户交互。所述一个或多个参数可以被用于消除假肯定或可能错误地触发显示器108上的内容的替换的眼睛运动。对应于块604的示意图604图示了用户交互(例如,目光输入110)从显示器108的区域(例如,第一区域108A)移动到显示器108的不同区域(例如,第二区域108B)。
块606图示了利用先前未看到的内容替换与显示器108的区域108A相关联的内容。至少部分地基于确定用户输入从区域(例如,第一区域108A)移动到不同区域(例如,第二区域108B),更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新显示器108的缺少用户交互的区域(例如,用户102未看到的、显示器108的区域)中的内容。内容304可以包括先前未看到的内容,显示模块212可以使先前未看到的内容被呈现在显示器108的该区域中。在至少一个示例中,显示模块212可以使呈现在显示器108的该区域中的内容由先前未看到的内容替换,而不分散用户102的注意力。该内容可以经由一个或多个过渡(例如,交叉淡入、变形、清除等)由先前未看到的内容替换,如上文所描述的。如上文所描述的,显示模块212可以利用变化视盲,使得用户102(其正关注显示器108的不同区域)没有注意到对显示器108的其他区域的改变。
对应于块606的示意图606图示了显示器108的不同区域(例如,下部区域108B)中的用户交互(例如,目光输入110)。此外,示意图606图示了由上部区域108A的右上角中的数字“1”所指示的、先前地与第一文本页面相关联的内容已经被替换为由上部区域108A的右上角中的数字“2”所指示、先前未看到的文本页面。然而,显示器108的下部区域108B继续显示与第一页面相关联的文本,如由下部区域108B的右上角中的数字“1”所指示的。在用户交互关注在显示器108的不同区域(例如,下部区域108B)中时,显示模块212可以使先前未看到的内容替换显示器108的其他区域(例如,上部区域108A)中的内容,而不分散用户102的注意力。因此,当用户102准备继续阅读电子书中的下一页或者网站上的额外内容时,用户本能地看向显示器108的上部。当用户102看向显示器108的上部时,先前未看到的内容(例如,新文本)可以被呈现,并且用户102可能对过渡一无所知。
块608图示了确定用户交互从不同区域移动到另一区域。在至少一个示例中,不同区域可以是下部区域108B,并且用户交互可以移动回到上部区域108A。在其他示例中,不同区域可以是中间区域,并且用户交互可以移动到下部区域108B。至少部分地基于目光输入110和/或跟踪数据,接收模块214可以确定用户交互从显示器108的不同区域(例如,下部区域108B)移动到显示器108的另一区域(例如,上部区域108A)。在至少一些示例中,接收模块214可以至少部分地基于一个或多个参数(例如,停留引擎、阅读和/或查看分类器等),确定用户交互移动到另一区域(例如,上部区域10A)。对应于块608的示意图608图示了用户交互(例如,目光输入110)从显示器108的不同区域(例如,下部区域108B)移动到显示器108的另一区域(例如,上部区域108A)。在至少一个示例中,这样的用户交互可以指示用户自动地翻页到电子书中的下一页或者图像集合中的一组新图像。
块610图示了利用先前未看到的内容替换与显示器108的不同区域108B相关联的内容。至少部分地基于确定用户输入从不同区域(例如,下部区域108B)移动到另一区域(例如,上部区域108A),更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新缺少用户交互的、显示器108的区域(例如,用户102没有看的、显示器108的区域)中的内容。内容304可以包括先前未看到的内容,显示模块212可以使先前未看到的内容被呈现在显示器108的区域中。在至少一个示例中,显示模块212可以使呈现在显示器108的区域中的内容由先前未看到的内容替换,而不分散用户102的注意力(例如,不使用户102的目光转移回到显示器108的不同区域或者从显示器108转移开)。内容可以经由一个或多个过渡(例如,交叉淡变、变形、清除等)由先前未看到的内容替换,如上文所描述的。如上文所描述的,显示模块212可以利用变化视盲,使得用户102(其正关注显示器108的不同区域)没有注意到对显示器108的其他区域的改变。在至少一个示例中,更新模块216可以在将更新数据302和内容304发送到显示模块212之前等待预定时间量。在其他示例中,更新模块216可以等待发送更新数据302和内容304,直到一个或多个参数(例如,阅读分类器、查看分类器等)指示用户102正与显示器108的另一区域(例如,上部区域108A)交互为止。因此,当用户102决定他或她想要查看他或她最近完成阅读的区域(例如,不同区域、下部区域108B等)中的几行文本、几个文本词语、图像等时,用户102可以容易地返回到他或她先前正阅读的内容部分。
对应于块610的示意图610图示了显示器108的另一区域(例如,上部区域108A)中的用户交互(例如,目光输入110)。此外,示意图608图示了由下部区域108B的右上角中的数字“1”所指示的、先前与第一文本页面相关联的内容已经被替换为由下部区域108B的右上角中的数字“2”所指示的先前未看到的文本页面。显示器108的上部区域108A继续显示与第二页面相关联的文本,如由上部区域108A的右上角中的数字“2”所指示的。在用户交互关注在显示器108的另一区域(例如,上部区域108A)中,显示模块212可以使先前未看到的内容替换显示器108的其他区域(例如,下部区域108B)中的内容,而不分散用户102的注意力。因此,在显示器108上所呈现的内容可以代表电子书的完整页面(例如,页面“2”)。因此,当用户102准备继续阅读电子书中的页面的剩余部分或者网站上的额外内容时,用户本能地看向显示器108的下部。当用户102看向显示器108的下部时,先前未看到的内容(例如,新文本)可以被呈现,并且用户102可能对这种过渡一无所知。
该过程可以重复,使得用户102可以从上到下并且从左到右地阅读和/或查看显示器108上的内容,并且可以自动地接收先前未看到的内容而无需手动地对内容进行翻页。过程600可以重复,直到用户102到达电子书的最后一页或耗尽网页上、图像的集合等中的内容。在至少一个示例中,接收模块214可以重复地确定用户交互针对显示器108的特定区域(例如,显示器的区域、显示器的不同区域或显示器的另一区域)。至少部分地基于重复地确定用户交互针对显示器108的特定区域(例如,显示器的区域、显示器的不同区域或显示器的另一区域),更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新缺少用户交互的、显示器108的区域(例如,用户102没有看的、显示器108的区域)中的内容。
图7图示了用于更新呈现在显示器108上的内容的一部分的示例过程700。每个块具有显示在该块的右侧的对应的示意图。
块702图示了接收来自一个或多个跟踪组件106的输入,其指示在显示器108上检测到用户102的目光,如上文所描述的。在图7的非限制性示例中,对应于块702的示意图702图示了显示器108具有第一区域108A和第二区域108B,第一区域108由多个内容项周围的虚线框所图示。显示器108的第一区域108A中的目光输入110与多个内容项中的特定内容项相关联。特定内容项标记有“x”。
块704图示了确定用户目光从显示器108的至少两个区域中的第一区域108A移动到显示器108的至少两个区域中的第二区域108B中。即,用户目光可以在显示器108的第二区域108B中终止。至少部分地基于目光输入110,接收模块214可以确定用户102的目光从第一区域108A移动到显示器108的至少两个区域中的第二区域108B。在至少一些示例中,接收模块214可以至少部分地基于一个或多个参数,确定在第二区域108B中检测到用户102的目光,如上文所描述的。对应于块704的示意图404图示了目光输入110从显示器108的第一区域108A移动到显示器108的第二区域108B。
块706图示了更新显示器108的第二区域108B中的内容。至少部分地基于确定用户102的目光从第一区域108A移动到第二区域108B,更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新显示器108的第二区域108B中的内容。
内容304可以包括对应于多个内容项中的内容项(例如,在图7中标记有“x”的内容项)的内容。在至少一个示例中,显示模块212可以使与显示器108的第一区域108A中的内容项相关联的内容被呈现在显示器的第二区域108B中。显示模块212可以利用变化视盲,使得在用户102将他或她的目光从第一区域108A移动到第二区域108B(例如,从第一区域108A扫视到第二区域108B)时,显示器的第二区域108B中的内容304可以基本上同时被更新。与用户102将他或她的目光从第一区域108A移动到第二区域108B基本上同时,视盲时段可能发生,使得第二区域108中的内容可以被更新,而不使用户102的目光转移回到第一区域108A、转移到显示器108的至少第三区域或从显示器108转移开。显示模块212可以使用一个或多个过渡利用先前未看到的内容自动地呈现第二区域108B中的内容,如上文所描述的。
对应于块706的示意图706图示了显示器108的第二区域108B中的目光输入110。此外,示意图706图示了与显示器的第一区域108A中的内容项相关联的内容被呈现在显示器108的第二区域108B中。因此,当用户102准备查看与第一区域108A中的内容项相关联的内容时,用户102本能地看向显示器108的右侧而进入第二区域108中。当用户102看向显示器108的右侧时,与第一区域108A中的内容项相关联的先前未看到的内容可以被呈现,并且用户102可能对这种过渡很少知道或一无所知。
在非限制性示例中,显示器的第一区域108A可以包括多个电子邮件主题行(例如,用户102的收件箱中所列出的电子邮件)。用户可以查看对应于电子邮件的特定主题行。当用户102将他或她的目光移动到显示器108的第二区域中时,一个或多个跟踪设备106可以检测到用户102的目光已经从显示器108的第一区域108A移动到显示器108的第二区域108B。因此,接收模块214可以确定用户102的目光已经从显示器108的第一区域108A移动到显示器108的第二区域108B,并且可以将更新数据302和内容304发送到显示模块212。显示模块212可以使与特定主题行相关联的内容(例如,电子邮件的主体)经由一个或多个过渡被呈现在显示器108的第二区域108B中,并且用户可能很少知道这种过渡。
在附加的非限制性示例中,显示器的第一区域108A可以包括可以代表数据文件的多个部分的多个内容项。例如,多个内容项可以包括文档的页面的缩略图、代表数据文件的一部分的缩略图、代表网页的缩略图等。用户可以查看多个数据项中的特定数据项(例如,在图7中标记有“x”的内容项)。当用户102将他或她的目光移动到显示器108的第二区域中时,一个或多个跟踪设备106可以检测用户102的目光已经从显示器108的第一区域108A移动到显示器108的第二区域108B。因此,接收模块214可以确定用户102的目光已经从显示器108的第一区域108A移动到显示器108的第二区域108B,并且可以将更新数据302和内容304发送到显示模块212。显示模块212可以使与特定数据项相关联的内容304经由一个或多个过渡被呈现在显示器108的第二区域108B中,并且用户可能很少知道这种过渡。例如,用户102可能正在查看第二区域108B中的文档的页面。用户102可能对查看不同文档的页面感兴趣。在图7中标记有“x”的内容项可以是来自不同文档的页面的缩略图。因此,用户102可以查看图7中标记有“x”的内容项,并且然后可以看向第二区域108B。与用户102从第一区域108A看向第二区域108B基本上同时地,显示模块212可以使与特定缩略图相关联的内容(例如,不同文档的页面)经由一个或多个过渡被呈现在显示器108的第二区域108B中,并且用户可能很少知道这种过渡。
图8图示了用于更新呈现在显示器108上的内容的一部分的示例过程800。每个块具有显示在该块的右侧的对应的示意图。
块802图示了接收来自一个或多个跟踪组件106的输入,其指示在显示器108上检测到用户102的目光,如上文所描述的。在图8的非限制性示例中,对应于块802的示意图802图示了显示器108具有第一区域108A和第二区域108B,第一区域108A由特定内容项周围的虚线框所图示,第二区域108B由多个内容项周围的虚线框所图示。这些区域可以包括任何数目的内容项,并且可以具有相等或不相等的大小,如上文所描述的。显示器108的第一区域108A中的目光输入110与第一区域108A中的特定内容项相关联。
块804图示了至少部分地基于目光输入110来确定用户102正在阅读和/或查看显示器的第一区域108A中的内容。在至少一些示例中,系统104可以至少部分地基于一个或多个参数(例如,阅读或查看分类器、停留引擎等),来确定用户正在阅读和/或查看显示器的第一区域108A中的内容。对应于块804的示意图804图示了目光输入110已经在显示器108的第一区域108A内移动,这指示用户102正在阅读和/或查看显示器的第一区域108A中的内容。
块806图示了更新显示器108的第二区域108B中的内容。至少部分地基于确定用户102正在阅读显示器108的第一区域108A中的内容,更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212更新显示器108的第二区域108B中的内容。
内容304可以包括对应于内容项的内容。在至少一个示例中,显示模块212可以使由显示器108的第一区域108A中的内容项所表示的内容被呈现在显示器的第二区域108B中。显示模块212可以利用变化视盲,使得当用户102正在阅读和/或查看显示器108的第一区域108A中的内容时,可以更新显示器的第二区域108B中的内容304。因此,可以在不使用户102的目光转移到第二区域108B、转移到显示器108的至少第三区域或转移离开显示器108的情况下,更新第二区域108中的内容。显示模块212可以使用一个或多个过渡利用先前未看到的内容自动地呈现第二区域108B中的内容,如上文所描述的。
对应于块806的示意图806图示了显示器108的第二区域108B中的目光输入110。此外,示意图806图示了与显示器的第一区域108A中的内容项相关联的内容被呈现在显示器108的第二区域108B中。因此,当用户102正在阅读与第一区域108A中的内容项相关联的内容时,与第一区域108A中的内容项相关联的先前未看到的内容可以被呈现在第二区域108B中,并且用户102可能对这种过渡很少知道或一无所知。
在非限制性示例中,显示器108可以包括表示搜索结果的多个内容项。这些内容项可以包括代表文档、网页等的缩略图、标题、文本预览等。显示器的第一区域108A可以包括一个或多个内容项(例如,个体搜索结果)。用户可以查看与一个或多个内容项(例如,缩略图、标题、文本预览等)相关联的内容。当用户102开始阅读标题和/或与标题相关联的短的文本预览时,一个或多个跟踪设备106可以检测到用户102正在阅读和/或查看显示器108的第一区域108A中的内容。在至少一些示例中,系统104可以至少部分地基于一个或多个参数(例如,阅读或查看分类器、停留引擎等),确定用户102正在阅读和/或查看内容。因此,接收模块214可以确定用户102正在阅读和/或查看显示器108的第一区域108A中的内容,并且可以将更新数据302和内容304发送到显示模块212。显示模块212可以使与特定内容项相关联的内容(例如,搜索结果所表示的文档、网页等)经由一个或多个过渡被呈现在显示器108的第二区域108B中,并且用户可能很少知道这种过渡。
图9图示了用于当用户102从显示器108转移目光时更新被呈现在显示器上的内容的一部分的示例过程900。每个块具有显示在该块的右侧的对应的示意图。
块902图示了接收来自一个或多个组件106的输入,其指示在显示器108上检测到用户102的目光,如上文所描述的。对应于块902的示意图902图示了显示器108的第一区域108A中的目光输入110。在图9的非限制性示例中,显示器108正在呈现第一内容页,如由上部区域108A和下部区域108B的右上角中的数字“1”所指示的。
块904图示了确定用户102的目光从显示器108的至少两个区域中的第一区域108A移动到显示器108的至少两个区域中的第二区域108B。至少部分地基于目光输入110,接收模块214可以确定用户102的目光从第一区域108A移动到显示器108的至少两个区域中的第二区域108B。在至少一些示例中,接收模块214可以至少部分地基于一个或多个参数,确定用户102的目光在第二区域108B中,如上文所描述的。对应于块904的示意图904图示了目光输入110从显示器108的第一区域108A移动到显示器108的第二区域108B。
块906图示了更新显示器108的第一区域108A中的内容的一部分。至少部分地基于确定用户102的目光从第一区域108A移动到第二区域108B,更新模块216可以将更新数据302和内容304发送到显示模块212。更新数据302可以引导显示模块212利用先前未看到的内容来更新显示器108的第一区域108A中的内容,如上文所描述的。对应于块906的示意图906图示了显示器108的第二区域108B中的目光输入110。此外,示意图906图示了由上部区域108A的右上角中的数字“1”所指示的、先前与第一内容页面相关联的内容已经被替换为由上部区域108A的右上角中的数字“2”所指示的先前未看到的内容页面。然而,显示器108的下部区域108B继续显示与第一内容页面相关联的内容,如由下部区域108B的右上角中的数字“1”所指示的。在用户102的目光关注在显示器108的底区域108B中时,显示模块212使先前未看到的内容替换显示器108的上部区域108A中的内容,而不分散用户102的注意力。因此,当用户102准备继续查看新内容时,用户102本能地看向显示器108的上部。当用户102看向显示器108的上部时,先前未看到的内容(例如,新内容)可以被呈现,并且用户102可能对这种过渡很少知道或一无所知。
块908图示了接收来自一个或多个跟踪组件108的输入,其指示在显示器108上不再检测到用户102目光。在至少一个示例中,用户102可能放下用户设备104并且转移目光。在另一示例中,用户102可能盯着窗户,而忘记了他或她正在与用户设备102交互。对应于块908的示意图908图示了在显示器108上没有检测到目光输入110。
块910图示了更新第一区域中的内容。为了确保当用户102返回显示器时显示器108以一致的状态被呈现,更新模块216可以将更新数据302和内容304发送到显示模块212。显示模块212可以利用先前看到的内容来更新显示器的所有区域(例如,显示器108的第一区域108A),使得当用户102返回显示器108时,用户102可以开始阅读或者查看显示器108A上的任何位置上的内容。对应于块910的示意图910图示了由上部区域108A的右上角中的数字“2”所指示的与第二内容页面相关联的内容(先前未看到的)已经被替换为由上部区域108A的右上角中的数字“1”所指示的先前看到的内容部分。然而,显示器108的下部区域108B继续显示与第一内容页面相关联的内容,如由下部区域108B的右上角中的数字“1”所指示的。当用户102的目光离开显示器108时,显示模块212使得先前看到的内容替换显示器108的上部区域108A中的先前未看到的内容,而不分散用户102的注意力。因此,当用户102返回显示器108时,用户102可以返回代表相同内容页面的显示器,并且用户102可能对这种过渡一无所知。
A.一种系统,包括:一个或多个跟踪组件;显示器,其包括用于呈现内容的至少两个区域;一个或多个处理器;和计算机可读介质,其存储由一个或多个处理器可执行以执行操作的一个或多个模块,所述操作包括:从一个或多个跟踪组件接收输入,输入指示在显示器的至少两个区域中的第一区域上检测到用户的目光;确定用户的目光已经从第一区域移动到显示器的至少两个区域中的第二区域;并且至少部分地基于确定用户的目光从第一区域移动到第二区域,更新显示器的第一区域中的内容。
B.根据段落A记载的系统,其中内容包括以从左到右行进或从上到下行进中的至少一个布置在显示器上的文本或图像中的至少一个。
C.根据段落A或B记载的系统,其中更新内容包括使用一个或多个过渡利用先前未看到的内容替换内容。
D.根据段落C记载的系统,其中一个或多个过渡包括以下各项中的至少一项:将内容与先前未看到的内容交叉淡变;将内容变形为先前未看到的内容;或者清除内容并且利用先前未看到的内容替换内容。
E.根据段落A至D中的任意一个记载的系统,其中更新内容包括在不使用户的目光进行以下各项中的至少一项的情况下更新内容:转移回到显示器的第一区域、转移到显示器的至少两个区域中的第三区域或转移离开显示器。
F.根据段落A至E中的任一个记载的系统,其中更新内容至少部分地基于在所述输入中检测到指示用户正在阅读或查看与显示器的第二区域相关联的内容的模式。
G.根据段落A至F中的任一个记载的系统,其中第一区域是显示器的左侧区域,并且第二区域是显示器的右侧区域,右侧区域邻近左侧区域并且在左侧区域的右侧边。
H.根据段落A至FG中的任一个记载的系统,其中第一区域是显示器的上部区域,并且第二区域是显示器的下部区域,所述下部区域邻近上部区域并且在上部区域下方。
I.一种计算机实现的方法,包括:从一个或多个跟踪组件接收与用户设备的显示器上的用户交互相关联的跟踪数据,用户交互包括以下各项中的至少一项:用户的目光、用户的头部位置或用户的鼻子位置;至少部分地基于跟踪数据,确定用户交互与显示器的区域相关联;至少部分地基于跟踪数据,确定用户交互已经从显示器的区域移动到显示器的不同区域;以及在所述用户交互与显示器的不同区域相关联时,修改与显示器的区域相关联的内容。
J.根据段落I记载的计算机实现的方法,其中确定用户交互已经从显示器的区域移动到显示器的不同区域至少部分地基于以下各项中的至少一项:用于检测跟踪数据中的模式的阅读分类器或确定与用户设备相关联的用户正在阅读显示器的不同区域中的内容。
K.根据段落I至J中的任一个记载的计算机实现的方法,其中修改与显示器的区域相关联的内容包括使用一个或多个过渡利用先前未看到的内容来替换内容。
L.根据段落K记载的计算机实现的方法,其中一个或多个过渡包括以下各项中的至少一项:将内容与先前未看到的内容交叉淡入;将内容变形为先前未看到的内容;或者清除内容并且利用先前未看到的内容来替换内容。
M.根据段落I至L中的任一个记载的计算机实现的方法,其中修改与显示器的区域相关联的内容包括在不使得用户交互进行以下各项中的至少一项的情况下利用先前未看到的内容来替换内容:转移回到显示器的区域、移动到显示器的不是所述区域或所述不同区域的另一区域、或者从显示器转移离开。
N.根据段落M记载的计算机实现的方法,其中:内容包括电子书的页面的至少一部分;并且先前未看到的内容包括电子书的后续页面的至少一部分。
O.根据段落M记载的计算机实现的方法,其中:内容包括多个图像中的第一组图像;并且先前未看到的内容包括多个图像中的第二组图像。
P.根据段落I至O中的任一个记载的计算机实现的方法,还包括:至少部分地基于跟踪数据,确定在显示器上没有检测到用户交互;以及利用先前看到的内容替换与显示器的区域相关联的先前修改的内容。
Q.一个或多个计算机可读介质,其编码有指令,指令当由处理器执行时将计算机配置为执行根据段落I至P中的任一个记载的方法。
R.一种设备,包括一个或多个处理器和编码有指令的一个或多个计算机可读介质,指令当由一个或多个处理器执行时将计算机配置为执行根据段落I至P中的任一个记载的计算机实现的方法。
S.一种系统,包括:用于从一个或多个跟踪组件接收与用户设备的显示器上的用户交互相关联的跟踪数据的装置,用户交互包括以下各项中的至少一项:用户的目光、用户的头部位置或用户的鼻子位置;用于至少部分地基于跟踪数据,确定用户交互与显示器的区域相关联的装置;用于至少部分地基于跟踪数据确定用户交互已经从显示器的区域移动到显示器的不同区域的装置;以及用于在用户交互与显示器的不同区域相关联时修改与显示器的区域相关联的内容的装置。
T.根据段落S记载的系统,其中确定用户交互已经从显示器的区域移动到显示器的不同区域至少部分地基于以下各项中的至少一项:用于检测跟踪数据中的模式的阅读分类器,或确定与用户设备相关联的用户正在阅读显示器的不同区域中的内容。
U.根据段落S或T中的任一个记载的系统,其中修改与显示器的区域相关联的内容包括使用一个或多个过渡利用先前未看到的内容替换内容。
V.根据段落U记载的系统,其中一个或多个过渡包括以下各项中的至少一项:将内容与先前未看到的内容交叉淡变;将内容变形为先前未看到的内容;或者清除内容并且利用先前未看到的内容替换内容。
W.根据段落S至V中的任一个记载的系统,其中修改与显示器的区域相关联的内容包括在不使用户交互进行以下各项中的至少一项的情况下利用先前未看到的内容替换内容:转移回到显示器的区域、转移到显示器的不是所述区域或所述不同区域的另一区域、或者转移离开显示器。
X.根据段落W记载的系统,其中:内容包括电子书的页面的至少一部分;并且先前未看到的内容包括电子书的后续页面的至少一部分。
Y.根据段落W记载的系统,其中:内容包括多个图像中的第一组图像;并且先前未看到的内容包括多个图像中的第二组图像。
Z.根据段落S至Y中的任一个记载的系统,还包括:用于至少部分地基于跟踪数据来确定在显示器上没有检测到用户交互的装置;以及用于利用先前看到的内容替换先前修改的与显示器的区域相关联的内容的装置。
AA.一个或多个计算机可读介质,其编码有指令,指令当由处理器执行时执行包括以下各项的动作:至少部分地基于来自一个或多个跟踪组件的输入,确定用户的目光与显示器的区域相关联;至少部分地基于输入,确定用户的目光与显示器的不同区域相关联;并且至少部分地基于确定用户的目光与不同区域相关联,并且在不使得用户的目光进行以下各项中的至少一项的情况下,利用先前未看到的内容替换与显示器的区域相关联的内容:转移回到显示器的区域、转移到显示器的新区域、或转移离开显示器。
AB.根据段落AA记载的一个或多个计算机可读介质,其中替换与显示器的区域相关联的内容包括使用交叉淡变过渡利用先前未看到的内容替换内容。
AC.根据段落AA或AB中的任一个记载的一个或多个计算机可读介质,动作还包括:确定用户的目光已经从显示器的不同区域移动到显示器的另一区域;并且在不使得用户的目光进行以下各项中的至少一项的情况下,利用新的先前未看到的内容替换与显示器的不同区域相关联的内容:转移回到显示器的不同区域、转移到显示器的新区域、或转移离开显示器。
AD.根据段落AA至AC中的任一个记载的一个或多个计算机可读介质,动作还包括:重复地确定用户的目光与以下各项中的至少一项相关联:显示器的区域、显示器的不同区域或显示器的另一区域;并且至少部分地基于重复地确定,利用先前未看到的内容替换与显示器的一个或多个区域相关联的内容,所述一个或多个区域不与用户的目光相关联。
AE.一种设备,其包括一个或多个处理器和根据段落AA至AD中的任一个记载的一个或多个计算机可读介质。
结论
最后,虽然已经以特定于结构特征和/或方法动作的语言描述了各种示例,但是应理解的是,随附的表示中所定义的技术方案不必限于所描述的特定特征或动作。相反,这些特定特征和动作被公开作为实现要求保护的技术方案的示例形式。

Claims (15)

1.一种系统,包括:
一个或多个跟踪组件;
显示器,其包括用于呈现内容的至少两个区域;
一个或多个处理器;以及
计算机可读介质,其存储一个或多个模块,所述一个或多个模块由所述一个或多个处理器可执行以执行操作,所述操作包括:
从所述一个或多个跟踪组件接收输入,所述输入指示在所述显示器的所述至少两个区域中的第一区域上检测到用户的目光;
确定所述用户的所述目光已经从所述第一区域移动到所述显示器的所述至少两个区域中的第二区域;以及
至少部分地基于确定所述用户的所述目光从所述第一区域移动到所述第二区域,更新所述显示器的所述第一区域中的内容。
2.根据权利要求1所述的系统,其中所述内容包括以从左到右行进或从上到下行进中的至少一个被布置在所述显示器上的文本或图像中的至少一个。
3.根据权利要求1或2所述的系统,其中更新所述内容包括:使用一个或多个过渡利用先前未看到的内容来替换所述内容。
4.根据权利要求3所述的系统,其中所述一个或多个过渡包括以下各项中的至少一项:
使所述内容与所述先前未看到的内容交叉淡变;
将所述内容变形为所述先前未看到的内容;或
清除所述内容并且利用所述先前未看到的内容替换所述内容。
5.根据权利要求1至4中的任一项所述的系统,其中更新所述内容包括:在不使所述用户的所述目光进行以下各项中的至少一项的情况下更新所述内容:转移回到所述显示器的所述第一区域、转移到所述显示器的所述至少两个区域中的第三区域、或转移离开所述显示器。
6.根据权利要求1至5中的任一项所述的系统,其中更新所述内容至少部分地基于在所述输入中检测到指示所述用户正在阅读或查看与所述显示器的所述第二区域相关联的内容的模式。
7.根据权利要求1至6中的任一项所述的系统,其中所述第一区域是所述显示器的左侧区域,并且所述第二区域是所述显示器的右侧区域,所述右侧区域邻近所述左侧区域并且在所述左侧区域的右侧。
8.根据权利要求1至7中的任一项所述的系统,其中所述第一区域是所述显示器的上部区域,并且所述第二区域是所述显示器的下部区域,所述下部区域邻近所述上部区域并且在所述上部区域的下方。
9.一种计算机实现的方法,包括:
从一个或多个跟踪组件接收与用户设备的显示器上的用户交互相关联的跟踪数据,所述用户交互包括用户的目光、所述用户的头部位置或所述用户的鼻子位置中的至少一个;
至少部分地基于所述跟踪数据,确定所述用户交互与所述显示器的区域相关联;
至少部分地基于所述跟踪数据,确定所述用户交互已经从所述显示器的所述区域移动到所述显示器的不同区域;以及
在所述用户交互与所述显示器的所述不同区域相关联时,修改与所述显示器的所述区域相关联的内容。
10.根据权利要求9所述的计算机实现的方法,其中确定所述用户交互已经从所述显示器的所述区域移动到所述显示器的所述不同区域至少部分地基于以下各项中的至少一项:用于检测所述跟踪数据中的模式的阅读分类器,或者确定与所述用户设备相关联的用户正在阅读所述显示器的所述不同区域中的内容。
11.根据权利要求9或10所述的计算机实现的方法,其中修改与所述显示器的所述区域相关联的所述内容包括:使用一个或多个过渡利用先前未看到的内容来替换所述内容。
12.根据权利要求11所述的计算机实现的方法,其中所述一个或多个过渡包括以下各项中的至少一项:
使所述内容与所述先前未看到的内容交叉淡变;
将所述内容变形为所述先前未看到的内容;或
清除所述内容并且利用所述先前未看到的内容替换所述内容。
13.根据权利要求9至12中的任一项所述的计算机实现的方法,其中修改与所述显示器的所述区域相关联的所述内容包括:在不使所述用户交互进行以下各项中的至少一项的情况下,利用先前未看到的内容替换所述内容:转移回到所述显示器的所述区域,转移到所述显示器的、不是所述区域或所述不同区域的另一区域,或者转移离开所述显示器。
14.根据权利要求13所述的计算机实现的方法,其中:
所述内容包括电子书的页面的至少一部分,并且所述先前未看到的内容包括所述电子书的后续页面的至少一部分;或者
所述内容包括多个图像中的第一组图像,并且所述先前未看到的内容包括所述多个图像中的第二组图像。
15.根据权利要求9至14中的任一项所述的计算机实现的方法,还包括:
至少部分地基于所述跟踪数据,确定在所述显示器上没有检测到所述用户交互;以及
利用先前看到的内容来替换先前修改的与所述显示器的所述区域相关联的内容。
CN201680013407.5A 2015-03-03 2016-02-25 目光用于自动翻页 Pending CN107408100A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/636,291 US20160259405A1 (en) 2015-03-03 2015-03-03 Eye Gaze for Automatic Paging
US14/636,291 2015-03-03
PCT/US2016/019437 WO2016140848A1 (en) 2015-03-03 2016-02-25 Eye gaze for automatic paging

Publications (1)

Publication Number Publication Date
CN107408100A true CN107408100A (zh) 2017-11-28

Family

ID=55487168

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680013407.5A Pending CN107408100A (zh) 2015-03-03 2016-02-25 目光用于自动翻页

Country Status (4)

Country Link
US (1) US20160259405A1 (zh)
EP (1) EP3265894A1 (zh)
CN (1) CN107408100A (zh)
WO (1) WO2016140848A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111190527A (zh) * 2019-12-18 2020-05-22 华为技术有限公司 屏幕显示方法和终端设备

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3109733B1 (en) * 2015-06-22 2020-07-22 Nokia Technologies Oy Content delivery
JP6404196B2 (ja) * 2015-09-16 2018-10-10 グリー株式会社 仮想画像表示プログラム、仮想画像表示装置及び仮想画像表示方法
WO2017113757A1 (zh) * 2015-12-31 2017-07-06 北京小鸟看看科技有限公司 一种环绕式界面布局方法、三维沉浸式环境下内容切换方法和列表切换方法
KR102565402B1 (ko) 2016-09-22 2023-08-08 애플 인크. 무주의 조건 동안 그래픽 사용자 인터페이스에 영향을 미치는 정보의 상태 변화 연기를 위한 방법, 비일시적 컴퓨터 판독가능 매체 및 시스템
US10281980B2 (en) 2016-09-26 2019-05-07 Ihab Ayoub System and method for eye-reactive display
US10503252B2 (en) 2016-09-26 2019-12-10 Ihab Ayoub System and method for eye-reactive display
US10602133B2 (en) 2016-10-04 2020-03-24 Facebook, Inc. Controls and interfaces for user interactions in virtual spaces
US20180095635A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20190235710A1 (en) * 2018-01-29 2019-08-01 James Wen Page Turning Method and System for Digital Devices
US11158206B2 (en) 2018-09-20 2021-10-26 International Business Machines Corporation Assisting learners based on analytics of in-session cognition
US11119572B2 (en) 2019-11-06 2021-09-14 International Business Machines Corporation Selective display of objects based on eye gaze attributes
US11775060B2 (en) * 2021-02-16 2023-10-03 Athena Accessible Technology, Inc. Systems and methods for hands-free scrolling
US20230069764A1 (en) * 2021-08-24 2023-03-02 Meta Platforms Technologies, Llc Systems and methods for using natural gaze dynamics to detect input recognition errors

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120215403A1 (en) * 2011-02-20 2012-08-23 General Motors Llc Method of monitoring a vehicle driver
US20140035794A1 (en) * 2011-07-06 2014-02-06 Google Inc. Dual display computing device
CN103703438A (zh) * 2011-04-08 2014-04-02 亚马逊技术公司 基于注视的内容显示器
US8743021B1 (en) * 2013-03-21 2014-06-03 Lg Electronics Inc. Display device detecting gaze location and method for controlling thereof
CN103914142A (zh) * 2013-01-04 2014-07-09 三星电子株式会社 在电子装置中使用头跟踪技术提供控制服务的设备和方法
US20140365959A1 (en) * 2013-06-09 2014-12-11 Apple Inc. Animation emulating live web page content resizing

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8756516B2 (en) * 2006-10-31 2014-06-17 Scenera Technologies, Llc Methods, systems, and computer program products for interacting simultaneously with multiple application programs
KR101640460B1 (ko) * 2009-03-25 2016-07-18 삼성전자 주식회사 휴대 단말기의 분할 화면 운용 방법 및 이를 지원하는 휴대 단말기
US9423994B2 (en) * 2012-02-22 2016-08-23 Citrix Systems, Inc. Hierarchical display
US9696898B2 (en) * 2012-11-14 2017-07-04 Facebook, Inc. Scrolling through a series of content items
US20140365968A1 (en) * 2013-06-07 2014-12-11 Apple Inc. Graphical User Interface Elements

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120215403A1 (en) * 2011-02-20 2012-08-23 General Motors Llc Method of monitoring a vehicle driver
CN103703438A (zh) * 2011-04-08 2014-04-02 亚马逊技术公司 基于注视的内容显示器
US20140035794A1 (en) * 2011-07-06 2014-02-06 Google Inc. Dual display computing device
CN103914142A (zh) * 2013-01-04 2014-07-09 三星电子株式会社 在电子装置中使用头跟踪技术提供控制服务的设备和方法
US8743021B1 (en) * 2013-03-21 2014-06-03 Lg Electronics Inc. Display device detecting gaze location and method for controlling thereof
US20140365959A1 (en) * 2013-06-09 2014-12-11 Apple Inc. Animation emulating live web page content resizing

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111190527A (zh) * 2019-12-18 2020-05-22 华为技术有限公司 屏幕显示方法和终端设备

Also Published As

Publication number Publication date
US20160259405A1 (en) 2016-09-08
WO2016140848A1 (en) 2016-09-09
EP3265894A1 (en) 2018-01-10

Similar Documents

Publication Publication Date Title
CN107408100A (zh) 目光用于自动翻页
US11609607B2 (en) Evolving docking based on detected keyboard positions
US20220091722A1 (en) Devices, methods, and graphical user interfaces for interacting with three-dimensional environments
CN104364753B (zh) 用于突出显示活动界面元素的方法
CN104106033B (zh) 应用的缩略图图像选择
CN106233240B (zh) 交互式显示器上的文本输入
JP5805794B2 (ja) マルチディスプレイ型機器の対話処理
Lee et al. Towards augmented reality driven human-city interaction: Current research on mobile headsets and future challenges
CN105474157A (zh) 移动设备界面
US20120102400A1 (en) Touch Gesture Notification Dismissal Techniques
CN104854537B (zh) 与计算设备的多距离、多模态自然用户交互
CN105814532A (zh) 用于三维对象显示的方法
CN112114734B (zh) 在线文档的显示方法、装置、终端及存储介质
US10521101B2 (en) Scroll mode for touch/pointing control
Kerber et al. Investigating the effectiveness of peephole interaction for smartwatches in a map navigation task
CN112230909A (zh) 小程序的数据绑定方法、装置、设备及存储介质
CN105393200A (zh) 用户接口反馈元素
CN113546419B (zh) 游戏地图显示方法、装置、终端及存储介质
CN115552366A (zh) 设备背面部分上的触控板
WO2014173549A1 (en) A method for interfacing between a device and information carrier with transparent area(s)
CN108885556A (zh) 控制数字输入
CN107924276B (zh) 电子设备及其文本输入方法
US20240112408A1 (en) User-customized location based content presentation
Guo Human-AI Systems for Visual Information Access

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20171128

WD01 Invention patent application deemed withdrawn after publication