CN108885505A - 具有交互式内容元素的直观文档导航 - Google Patents
具有交互式内容元素的直观文档导航 Download PDFInfo
- Publication number
- CN108885505A CN108885505A CN201780020879.8A CN201780020879A CN108885505A CN 108885505 A CN108885505 A CN 108885505A CN 201780020879 A CN201780020879 A CN 201780020879A CN 108885505 A CN108885505 A CN 108885505A
- Authority
- CN
- China
- Prior art keywords
- content element
- interactive content
- user
- superimposed layer
- layer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/103—Formatting, i.e. changing of presentation of documents
- G06F40/106—Display of layout of documents; Previewing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04804—Transparency, e.g. transparent or translucent windows
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
Abstract
提供了用于文档导航的改进的计算机效率。自动地向交互式内容元素应用透明叠加层,以阻止滚动操作期间与该元素的无意间交互。在一些示例中,在确定用户的意图是导航包括嵌入的交互式元素的父文档时,应用所述叠加层,并且临时地禁用与交互式元素的用户交互。在确定了用户的意图是与交互式元素进行交互时,移除所述叠加层,并且启用与交互式元素的用户交互。当移除了所述叠加层时,可以提供上下文提示(例如,经由用户界面控件)以指示如何继续导航父文档。在其他示例中,根据每个交互式内容元素来自定义所述透明叠加层,其中,与交互式元素相关联的用户控件被显露,并且其中,所述叠加层被永久地应用于交互式元素。
Description
背景技术
计算机和软件用户已经习惯于用户友好的软件应用,它们提供直观的图形用户界面和准确高效的用户体验。诸如生产力应用文档、讲故事演示文稿、网页等的许多文档包括诸如嵌入式地图、视频剪辑、图表、网页内容等的交互式内容元素。通常,当用户试图滚动经过交互式内容元素时,该滚动交互被无意间应用于交互式内容元素,而不是该交互式内容元素被嵌入其中的父文档。因此,用户可能“卡在”交互式内容元素内部移动/滚动而不是继续导航父文档。
例如,考虑在计算设备的屏幕上显示的包括交互式地图的网页。用户可能想要向下导航网页;然而,在交互式地图被显示在屏幕上的鼠标指针下方或者触摸屏上的接触点下方的同时,用户可能尝试进行滚动。结果,用户可能使滚动“卡在”交互式地图,而不是向下滚动网页。当使用诸如移动电话之类的小型形状因子设备时,例如由于交互式内容元素占据有限屏幕空间的较大部分,因此可能进一步加剧交互式内容元素的无意滚动。因此,“卡住”可能更频繁地发生,并且“不被卡住”可能具有挑战性。
发明内容
提供本概括以便以简化的形式介绍对将在以下的详细描述中进一步描述的构思的选择。本概括并不是旨在标识要求保护的主题的关键特征或本质特征,也不是用于帮助确定要求保护的主题的范围。
本文的方面针对用于改进用于文档导航的计算机效率的设备、方法和计算机可读介质。具体而言,本文的方面针对向交互式内容元素自动地应用透明叠加层,以在滚动操作期间阻止与交互式内容元素的无意间交互。根据一个示例,在确定了用户的意图是导航经过交互式内容元素时,向交互式内容元素应用透明叠加层,因此提供了对用户使滚动“卡在”交互式内容元素内的“滚动陷阱”体验的缓解。
在计算设备上显示包括至少一个交互式内容元素(例如,嵌入的web内容对象、嵌入的视频、嵌入的应用内容对象等等)的文档。在一个示例中,当检测到滚动操作时,向显示的交互式内容元素应用透明叠加层,使得用户能够导航经过交互式内容元素,而不会在交互式内容元素内进行无意地选择或滚动。此外,还确定是否自动地移除透明叠加层,以允许与交互式内容元素的用户交互。
在另一示例中,向交互式内容元素应用自定义形状的透明叠加层,其中,控件被显露以用于用户交互。因此,减少了与交互式内容元素的无意间交互的风险。
向文档中的交互式内容元素自动地应用和移除透明叠加层,提供了直观用户界面,并改进了用于导航文档的计算机效率。例如,向交互式内容元素自动地应用和移除透明叠加层使用户能够以最少的努力来执行滚动动作,其中,期望的导航结果被递送。用户不需要重复滚动动作或者不需要找到一种方法来退出非期望的交互以获得他们想要的结果。
示例被实现为计算机过程、计算系统或者诸如设备、计算机程序产品或计算机可读介质之类的制品。根据一个方面,计算机程序产品是计算机系统可读取的计算机存储介质,对用于执行计算机过程的指令的计算机程序进行编码。
在附图和下面的描述中,阐述了一个或多个方面的细节。通过阅读以下详细描述并查看相关联的附图,其他特征和优点将变得显而易见。应当理解的是,下面的详细描述仅是说明性的,而并非是对权利要求的限制。
附图说明
并入并且构成本公开内容的一部分的附图描绘了各个方面。在附图中:
图1是与用于为文档导航提供改进的计算机效率的直观文档导航系统进行通信的环境表示的框图;
图2A和图2B示出了与嵌入在文档中的交互式内容元素的无意间交互的示例;
图3A和图3B示出了应用于示例性交互式内容元素的叠加层;
图3C和图3D示出了阻止与嵌入在文档中的交互式内容元素的无意间交互的叠加层的示例;
图4示出了应用于交互式内容元素的自定义叠加层的示例;
图5A和图5B示出了从交互式内容元素中移除叠加层的示例;
图5C和图5D示出了向用户提供在从交互式内容元素中移除了叠加层时如何继续文档导航的视觉指示的示例;
图6是示出用于改进在选择一组数字笔画时的准确性和计算机效率的示例性方法中所涉及的通常阶段的流程图;
图7是示出计算设备的示例性物理组件的框图;
图8A和图8B是移动计算设备的框图;以及
图9是分布式计算系统的框图。
具体实施方式
以下详细描述参考了附图。只要可能,在附图中使用相同的附图标记,并且以下描述参考相同或相似的元素。虽然示例可能被描述,但是修改、改编和其他实施方式也是可能的。例如,可以对附图示出的元素进行替换、添加或修改,并且可以通过对所公开的方法进行替换、重新排序或添加阶段来修改本文描述的方法。因此,以下详细描述不是限制性的,相反,适当的范围由所附权利要求所定义。示例可以采用硬件实施方式、或者完全软件的实施方式、或者组合软件和硬件方面的实施方式的形式。因此,以下详细描述不应被认为是限制性的。
本公开内容的方面针对用于文档导航的改进的计算机效率的方法、系统和计算机存储介质。自动地向交互式内容元素应用透明叠加层,以阻止滚动操作期间与该元素的无意间交互。在一些示例中,在确定了用户的意图是导航包括嵌入的交互式内容元素的父文档时,应用所述叠加层,并且临时地禁用与交互式内容元素的用户交互。在确定了用户的意图是与交互式内容元素进行交互时,移除所述叠加层,并且启用与交互式内容元素的用户交互。当移除所述叠加层时,可以向用户提供上下文提示(例如,经由用户界面控件)以指示如何继续导航父文档。在其他示例中,根据每个交互式内容元素来自定义所述透明叠加层,其中,与交互式内容元素相关联的用户控件被显露,并且其中,所述叠加层被永久地应用于交互式内容元素。
现参见图1,该图示出了与直观文档导航系统116进行通信的一种示例性环境100的简化框图。如图所示,该示例性环境包括计算设备102。将图1中所示出的计算设备102示出为桌面型计算机;然而,应当领会的是,计算设备102可以是用于执行应用108的各种类型的计算设备中的一种(例如,平板计算设备、桌面型计算机、移动通信设备、膝上型计算机、膝上型/平板混合计算设备、大屏幕多触摸显示器、游戏设备、智能电视、可穿戴设备或者其他类型的计算设备),以执行各种任务。通过图7、图8A、图8B和图9来更详细地讨论这些计算设备的硬件。
用户110可以使用计算设备102上的应用108来用于各种任务,例如,这些任务可以包括写入、计算、绘画、记笔记和组织笔记、准备和组织幻灯片、发送和接收电子邮件、浏览web内容、制作音乐等等。应用108可以包括可以被本地存储在计算设备102上的厚客户端应用,或者可以包括位于远程服务器上并可通过网络(例如,互联网或内联网)访问的瘦客户端应用(即,web应用)。瘦客户端应用可以被托管在浏览器控制的环境中,或者以浏览器支持的语言来编码,并且依赖于通用web浏览器来呈现可在计算设备102上执行的应用108。根据一个方面,应用108是由操作系统发起和操纵的程序,并且管理位于电子文档114中并发布在显示器屏幕上的内容。根据示例,提供了图形用户界面(GUI)104以使用户110能够通过图形图标、视觉指示符等等的操纵,与应用108的功能以及与电子文档114进行交互。
电子文档114中的内容可以根据用于提供电子文档114的应用108来变化。该内容可以包括在电子文档114中呈现或嵌入的一个或多个对象,其包括但不限于:文本(其包括文本容器)、数字数据、宏、图像、电影、声音文件和元数据。根据一个示例,电子文档114充当包括一个或多个嵌入的交互式内容元素112(例如,内联框架(iframe)元素、应用外接元素、电影、声音文件、图像或其他交互式对象)的容器文档。
在各个方面,电子文档以诸如以下各项的元素形式来存储包括内容的数据:可扩展标记语言(XML)、Java脚本对象表示法(JSON)元素、超文本标记语言(HTML)、或者可由schema解释的另一声明语言。Schema可以经由标签来定义段或内容项,并且可以经由直接指派或分层继承向内项应用各种属性。例如,包括文本的对象可以具有以文本的元素定义来定义(例如,“<text typeface=garamond>example text</text>”)或者通过文档层次结构中的元素所依赖的对象上方的样式表或元素来定义的文本的字体。
仍然参见图1,应用108包括直观文档导航系统116或者与直观文档导航系统116进行通信,所述直观文档导航系统116操作用于向交互式内容元素提供直观的透明叠加层应用,以获得用于文档导航的改进的计算机效率。在一个示例中,计算设备102包括直观滚动应用编程接口(API),所述直观滚动API操作用于使应用108能够经由存储的指令来采用直观的交互式内容元素透明叠加层应用。
根据一些方面,直观文档导航系统116包括:用户界面(UI)引擎118,其操作用于生成电子文档114和一个或多个嵌入的交互式内容元素112的显示;输入管理器120,其操作用于接收用户输入;事件监听器122,其操作用于监听特定的事件;以及元素叠加器124,其操作用于响应于对特定事件的检测,向显示的交互式内容元素112应用或移除透明叠加层。
UI引擎118说明了操作用于生成电子文档114的GUI显示的软件模块、系统或设备。根据一个示例,当在应用108中打开电子文档114时,UI引擎118在显示空间(例如,应用窗)中显示文档114中的内容的至少一部分。用户110可以在显示空间中选择性地修改电子文档114的视图,例如通过缩小或放大文档、滚动到文档中的另一位置等等。因此,UI引擎118更新GUI 104,以显示电子文档114中的被选择在显示空间中显示的部分内的内容。当交互式内容元素112被包括在电子文档114中,并且交互式内容元素112的至少一部分位于该文档中的被选择为在显示空间中显示的一部分内时,UI引擎118还操作用于更新GUI 104以显示交互式内容元素112(的至少一部分)。
元素叠加器124说明了操作用于在交互式内容元素112上应用透明叠加层,以阻止与交互式内容元素112的无意间交互的软件模块、系统或设备。在图2A和图2B中示出了与交互式内容元素112的无意间交互的示例。现在参见图2A,用户110可以在计算设备102上查看包括至少一个交互式内容元素112的电子文档114。例如,在图2A中所示出的示例性电子文档114包括嵌入的地图对象,并且在移动计算设备上的GUI 104中显示。用户110可能希望例如通过使用手指触摸计算设备102的触摸敏感型屏幕以及滑动或移动手指以滚动经过嵌入的地图(即,交互式内容元素112),来导航浏览文档114。
现参见图2B,在尝试导航经过嵌入的地图的同时,用户110无意地“卡在”交互式内容元素112内部。例如,如图所示,不是滚动电子文档114,滚动输入已被应用于交互式内容元素112,并且嵌入的地图对象被示出为向下滚动。如可以被领会的,当没有递送期望的导航的结果时,用户110可能变得沮丧。此外,由于与交互式内容元素11的无意间滚动输入、取消该无意间输入、以及用于产生预期结果的另外输入,因此计算机效率被降低,并且另外的计算机处理被要求。
根据一个示例,如图3A-3B中所示,当在GUI 104中显示交互式内容元素112的至少一部分时,元素叠加器124向交互式内容元素112应用透明叠加层302,其中,叠加层302阻止与交互式内容元素112的无意间交互。
现参见图3C,当向交互式内容元素112应用叠加层302,并且用户110尝试导航浏览文档114时(例如,通过使用手指触摸计算设备102的触摸敏感型屏幕以及滑动或移动手指以滚动或平移经过交互式内容元素112),叠加层302提供了用户输入和交互式内容元素112之间的障碍,因此阻止了对交互式内容元素112的激活。例如,如图3D中所示,即使用户控制的光标(例如,触摸屏界面上的触摸点)在滚动或平移操作期间位于交互式内容元素112上,也将用户输入应用于电子文档114。因此,使用户110能够导航浏览文档114,而不会无意地与交互式内容元素112进行交互。根据一个示例,叠加层302充当外部文档114的延续,使得滚动、触摸和应用于叠加层302附近的其他交互对外部的文档114进行操作。
元素叠加器124还操作用于确定是否从交互式内容元素112中移除叠加层302,并且当对此做出肯定确定时,移除叠加层302。此外,元素叠加器124操作用于确定是否向交互式内容元素112重新应用叠加层302,并且当做出重新应用叠加层302的肯定确定时,重新应用叠加层302。下面将进一步详细地描述对叠加层302的移除和重新应用。
在另一示例中,如图4中所示,元素叠加器124向电子文档114中的每个交互式内容元素112应用自定义叠加层402,其中,自定义叠加层402始终位于在交互式内容元素112上。根据一个示例,自定义叠加层402对于交互式内容元素112是自定义形状的,并且包括在与交互式内容元素112相关联的交互控件404上的切断,使得当在GUI 104中显示交互式内容元素112时,持久地向用户110显露该交互控件404。
在图4所示出的示例中,在示例性电子文档114中包括的交互式内容元素112是视频对象,并且电子文档114是例如经由数字讲故事应用来创建并可在web浏览器应用中观看的交互式呈现文档。元素叠加器124向每个交互式内容元素112应用自定义叠加层402,其中,通过自定义叠加层402来显露交互控件404(例如,播放按钮),使得用户110能够与交互控件404进行交互。根据一个方面,将用于与交互式内容元素112的交互的点击目标区域限制于显露的交互控件404,因此减少了当导航或者与电子文档114进行交互时与交互式内容元素112的无意间交互。
输入管理器120说明了操作用于接收用户输入的软件模块、系统或设备。根据一些方面,用户输入包括在用户控制的光标(例如,鼠标光标,触摸屏界面上的触摸点,运动姿势检测设备、或者头、眼或注视追踪设备上的聚焦点)的位置处对输入设备106执行的或由输入设备106执行的物理动作或运动。可以使用各种用户接口技术。例如,可以经由诸如鼠标、键盘、远程控制、笔/触控笔等的硬件输入设备来接收用户输入。作为另一示例,可以经由使用户110能够以“自然”方式与计算设备102进行交互的自然输入设备/方法(例如,依赖于语音识别、触摸和触控笔识别、屏幕上和屏幕旁边二者的姿势识别、空中姿势、头部和眼睛跟踪、语音和声音、视觉、触摸、悬停、姿势和机器智能)来接收用户输入。
根据一些示例,用户110使用输入设备106来选择屏幕上对象(例如,交互式内容元素112)或者与之交互。例如,对嵌入的对象(例如,交互式内容元素112)的选择造成对对象的激活(例如,可以听取声音剪辑,可以观看视频剪辑)。作为另一示例,对嵌入的对象(例如,交互式内容元素112)的选择实现对对象的就地导航或就地编辑,其中,接收的用户输入被指引到嵌入的对象,例如,经由输入设备106(例如,鼠标、手指、笔/触控笔、姿势、注视)来滚动经过交互式内容元素112的内容、经由键盘输入在交互式内容元素112中输入内容、经由键盘输入来编辑交互式内容元素112内容、经由对格式控件的选择来编辑交互式内容元素112内容的格式化等等。
在其他示例中,用户110使用输入设备106来操纵电子文档114的显示或者导航电子文档114(例如,经由滚动或平移操作)。用于滚动或平移操作的用户输入的非限制性示例包括:转动鼠标滚轮、选择向上/向下/向左/向右箭头键、选择上页/下页|起始/结束键、拖动滚动条、选择滚动条上的向上/向下箭头、选择滚动条的负空间、在表面上滑动鼠标的同时选择鼠标左键、在触摸敏感型界面上拖动/滑动一个或多个手指或笔/触控笔、手或注视沿着轴的移动等等。
根据一些方面,输入管理器120操作用于从输入设备106接收用户输入,以及以消息的形式来传输用户输入。在一个示例中,输入管理器120操作用于接收用户输入,识别输入和用户控制的光标(例如,鼠标光标、触摸点、聚焦点)的位置,以及发布指向光标在其下方的窗口或框架的消息。例如,如果交互式内容元素112位于光标下方,则输入管理器120可以将用户输入消息指引到交互式内容元素112。作为另一示例,如果交互式内容元素112位于光标下方,并且叠加层302、402被应用于交互式内容元素112,则输入管理器120可以将用户输入消息指引到包含交互式内容元素112的电子文档114。
事件监听器122说明了操作用于监听特定的事件,以及当特定的事件发生时通知元素叠加器124的软件模块、系统或设备。在一个示例中,事件监听器122监听输入管理器120所发布的特定用户输入事件消息,例如滚动事件、平移事件、悬停事件、触摸事件、指针事件等等。根据一个方面,元素叠加器124操作用于至少部分地基于对特定用户输入事件的检测来确定是否在交互式内容元素112上保持对叠加层302的应用。例如,当滚动或平移事件被接收并传输到元素叠加器124时,元素叠加器124操作用于确定继续在交互式内容元素112上保持对叠加层302的应用。
根据另一方面,元素叠加器124操作用于至少部分地基于对特定用户输入事件的检测或者至少部分地基于对特定用户输入事件的不存在的检测,确定是否从交互式内容元素112中移除叠加层302。在一个示例中,当检测到暂停时(例如,悬停或者在预定的时间跨度内没有接收到用户输入),元素叠加器124操作用于确定从交互式内容元素112中移除叠加层302。在另一示例中,当用户控制的光标在交互式内容元素112上时接收到选择或者触摸事件,确定用户110尝试与交互式内容元素112进行交互。因此,元素叠加器124操作用于从交互式内容元素112中移除叠加层302,以允许与交互式内容元素112的交互。
现在参见图5A-5B,这些图示出了从交互式内容元素112中移除叠加层302的示例。例如,在图5A中,当向交互式内容元素112应用叠加层302时,用户110在交互式内容元素112上敲击。作为响应,如图5B中所示,元素叠加器124移除叠加层302,以使用户能够与交互式内容元素112进行交互。
在一些示例中,如图5C中所示,在从交互式内容元素中移除了叠加层时,UI引擎118还操作用于更新GUI 104以显示视觉指示符502,所述视觉指示符502提示如何继续文档导航。在一个示例中,可以将视觉指示符502体现为脉冲或闪烁导航按钮,或者体现为教导用户110在何处点击或触摸以继续观看电子文档114的上下文姿势提示。在一些示例中,按照预定数量的时间来显示视觉指示符502,例如以使用户110了解系统的功能。
在一些示例中,在检测到对叠加层302的用户强制的移除时(例如,当叠加层302被应用于交互式内容元素112时用户110敲击/点击交互式内容元素112时),直观文档导航系统116还操作用于在移除叠加层302之后向交互式内容元素112传输用户输入事件消息,使得启用与交互式内容元素112的有意的用户交互。例如,如果交互式内容元素112是嵌入的视频对象,并且用户110敲击或者点击视频对象上显示的播放按钮,则确定用户的意图是播放该视频。因此,叠加层302被移除,并且用户输入事件消息被发布到视频对象以用于嵌入的视频的自动播放。
根据一个方面,元素叠加器124操作用于至少部分地基于对特定用户输入事件的检测,确定是否重新应用叠加层302。例如,当滚动或平移事件被接收并传输到元素叠加器124时,元素叠加器124操作用于确定向交互式内容元素112重新应用叠加层302。
在一些示例中,事件监听器122操作用于监听来自交互式内容元素112的事件消息,以确定何时重新应用叠加层302。例如,如果交互式内容元素112是嵌入的视频对象,则当视频结束播放时,视频对象可以向直观文档导航系统116发送关于播放已结束并重新应用叠加层302的通信。应当理解的是,图2A-B、3A-B、4和图5A-5C中所示出的示例是非限制性的示例;可以结合本公开内容来使用具有不同元素以及其排列的其他GUI。
在描述了示例性操作环境100、直观文档导航系统116的各个组件和各种GUI示例之后,图6是示出用于改进用于文档导航的计算机效率的示例性方法600中所涉及的通用阶段的流程图。现在参见图6,方法600开始于:开始操作602,并继续至操作604,在所述操作604处,包括至少一个嵌入的交互式内容元素112的电子文档114在应用108中被打开并在GUI 104中被显示。所述至少一个交互式内容元素112可以是各种类型的对象中的一种,犹如地图对象、视频对象、音频对象、图表对象等等。
方法600继续至操作606处,其中,叠加层302被应用于交互式内容元素112,并且与交互式内容元素112的至少一部分的交互被禁用。例如,如果叠加层302是自定义叠加层402,则可以将与交互式内容元素112相关联的交互控件404持久地显露给用户110。然而,如果叠加层302不是自定义叠加层402(例如,图3A-D中所示出的示例性叠加层302),则叠加层302在所有的交互式内容元素112上提供保护层,以阻止与元素112的无意间交互。
方法600继续至操作608处,其中,对用户活动或者不活动的指示被接收。在一个示例中,诸如滚动事件、平移事件、悬停事件、触摸事件、指针事件等等的用户输入被接收并传输到元素叠加器124。在另一示例中,在预定的时间间隔内没有用户输入被检测并传输到元素叠加器124。
在决定操作610处,确定是否从交互式内容元素112中移除叠加层302。在一些示例中,基于叠加层302是否是自定义叠加层402来进行该确定。如果叠加层302是自定义叠加层402,则确定不移除叠加层。在其他示例中,基于在操作608处识别的用户活动或不活动来进行该确定。例如,如果接收到滚动或平移用户输入,则确定是保持叠加层302。作为另一示例,如果接收到交互式内容元素112上的触摸、选择或点击输入,则确定是移除叠加层302。作为另一示例,如果接收到对交互式内容元素112上的悬停事件的指示,或者如果在没有接收到输入事件的情况下流逝了预定的时间间隔(例如,检测到暂停),则确定是移除叠加层302。
当确定是保持叠加层302时(例如,不移除叠加层),方法600结束于操作698,或者返回到操作608,其中,另外的用户活动被接收。当确定是移除叠加层302时,方法600继续至操作612,其中,叠加层302被从交互式内容元素112中移除,并且与交互式内容元素112的用户交互被启用。
方法600继续至决定操作614,其中,确定是否重新应用叠加层302。根据一个示例,确定重新应用叠加层302是基于确定:用户的意图是导航经过交互式内容元素112,因此缓解了用户110使滚动“卡在”交互式内容元素112内的“滚动陷阱”体验。例如,当滚动或平移事件被接收并传输到元素叠加器124时,确定是否向交互式内容元素112重新应用叠加层302。当做出重新应用叠加层302的肯定确定时,方法600返回到操作606,其中,叠加层302被应用于交互式内容元素112,并且与交互式内容元素112的用户交互被禁用。当做出否定确定时(例如,不重新应用叠加层302),方法600在操作698处结束。
虽然在程序模块(其结合在计算机上的操作系统上运行的应用程序来执行)的通常上下文中描述了实施方式,但本领域技术人员应当认识到,本文的方面还可以结合其他程序模块来实现。通常,程序模块包括例程、程序、组件、数据结构、以及执行特定任务或者实现特定的抽象数据类型的其他类型的结构。
本文描述的方面和功能可以经由多种多样的计算系统来操作,所述计算系统包括但不限于:桌面型计算机系统、有线和无线计算系统、移动计算系统(例如,移动电话、上网本、平板或者板(slate)型计算机、笔记本计算机和膝上型计算机)、手持设备、多处理器系统、基于微处理器的或者可编程消费电子设备、微型计算机和大型计算机。
另外,根据一个方面,本文描述的方面和功能可以在分布式系统(例如,基于云的计算系统)上操作,其中,应用功能、存储器、数据存储和获取以及各种处理功能可以彼此之间通过分布式计算网络(例如,互联网或者内联网)来远程操作。根据一个方面,可以经由板上计算设备显示器或者经由与一个或多个计算设备相关联的远程显示单元来显示用户界面和各种类型的信息。例如,可以在将用户界面和各种类型的信息所投影到的墙壁表面上,显示用户界面和各种类型的信息并与其进行交互。与可以实践实施方式的多种多样的计算系统进行的交互,包括:键击输入、触摸屏输入、语音或者其他音频输入、姿势输入(当相关联的计算设备装备有用于捕捉和解释用户姿势的检测(例如,摄像头)功能,以控制该计算设备的功能时)等等。
图7-9以及相关联的描述提供了对可以实践示例的各种操作环境的讨论。然而,参照图7-9所示出和讨论的设备和系统只是用于举例和说明目的,而不是对本文所描述的用于实践本发明的方面的众多数量的计算设备配置进行限制。
图7是示出可以实践本公开内容的示例的计算设备700的物理组件(即,硬件)的框图。在基本配置中,计算设备700包括至少一个处理单元702和系统存储器704。根据一个方面,取决于计算设备的配置和类型,系统存储器704包括但不限于:易失性存储装置(例如,随机存取存储器)、非易失性存储装置(例如,只读存储器)、闪存或者这些存储器的任意组合。根据一个方面,系统存储器704包括操作系统705和适合于运行软件应用750的一个或多个程序模块706。根据一个方面,系统存储器704包括直观文档导航系统116。例如,操作系统705适合于对计算设备700的操作进行控制。此外,本发明的方面可以结合图形库、其他操作系统或者任何其他应用程序来实践,并且不受限于任何特定的应用或系统。在图7中,通过位于虚线708之内的那些组件来示出该基本配置。根据一个方面,计算设备700具有另外的特征或功能。例如,根据一个方面,计算设备700包括另外的数据存储设备(可移动和/或不可移动的),例如磁盘、光盘或磁带。在图7中通过可移动存储设备709和不可移动存储设备710,来示出这样的另外的存储装置。
如上所述,根据一个方面,在系统存储器704中,存储多个程序模块和数据文件。在处理单元702上执行的同时,程序模块706(例如,直观文档导航系统116)执行包括但不限于图6中所示出的方法600的阶段中的一者或多者的过程。根据一个方面,其他程序模块根据示例来使用,并且包括诸如电子邮件和联系人应用、文字处理应用、电子表格应用、数据库应用、幻灯片呈现应用、绘图或计算机辅助应用程序等等的应用。
根据一个方面,本发明的方面用包括离散电子元件的电子电路、包含逻辑门的封装的或者集成的电子芯片、使用微处理器的电路来实现,或者被实现在包含电子元件或微处理器的单个芯片上。例如,经由片上系统(SOC)来实现本发明的方面,其中,图7中所示出的组件里的每一者或大部分被集成到单个集成电路上。根据一个方面,这样的SOC设备包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元和各种应用功能,所有这些都集成(或者“烧”)到芯片基底上作为单个集成电路。当经由SOC进行操作时,本文所描述的功能经由与计算设备700的其他组件集成在单个集成电路(芯片)上的专用逻辑单元来进行操作。根据一个方面,本公开内容的方面使用能够执行诸如与(AND)、或(OR)和非(NOT)之类的逻辑操作的其他技术来实践,所述技术包括但不限于:机械、光、流体和量子技术。另外,还可以在通用计算机或者任何其他电路或系统中实践本发明的方面。
根据一个方面,计算设备700具有诸如键盘、鼠标、笔、声音输入设备、触摸输入设备等的一个或多个输入设备712。根据一个方面,还包括诸如显示器、扬声器、打印机等的输出设备714。前述的设备只是示例性的,可以使用其他设备。根据一个方面,计算设备700包括允许与其他计算设备718进行通信的一个或多个通信连接716。适当通信连接716的示例包括但不限于:射频(RF)发射机、接收机和/或收发机电路;通用串行总线(USB)、并口和/或串口。
如本文所使用的术语计算机可读介质包括计算机存储介质。计算机存储介质包括利用存储信息(例如,计算机可读指令、数据结构或程序模块)的任何方法或技术来实现的易失性和非易失性、可移动和不可移动介质。系统存储器704、可移动存储设备709和不可移动存储设备710都是计算机存储介质的示例(即,存储器存储装置)。根据一个方面,计算机存储介质包括RAM、ROM、电可擦除可编程只读存储器(EEPROM)、闪存或其他存储器技术、CD-ROM、数字通用光盘(DVD)或其他光存储装置、盒式磁带、磁带、磁盘存储装置或其他磁存储设备、或者可以用于存储信息并可以由计算设备700进行存取的任何其他制品。根据一个方面,任何这样的计算机存储介质是计算设备700的一部分。计算机存储介质不包括载波波形或者其他传播的数据信号。
根据一个方面,通信介质通过计算机可读指令、数据结构、程序模块、或者调制的数据信号(例如,载波波形或其他传输机制)中的其他数据来体现,并包括任何信息递送介质。根据一个方面,术语“调制的数据信号”描述其一个或多个特性以用于对信号中的信息进行编码的方式来设置或改变的信号。通过举例而非限制的方式,通信介质包括诸如有线网络或直接有线连接之类的有线介质、以及诸如声波、射频(RF)、红外线和其他无线介质之类的无线介质。
图8A和图8B示出了可以利用其来实践本发明的方面的移动计算设备800,例如移动电话、智能电话、平板个人计算机、膝上型计算机等等。参见图8A,该图示出了用于实现本发明的方面的移动计算设备800的一个示例。在基本配置中,移动计算设备800是具有输入元件和输出元件二者的手持计算机。通常,移动计算设备800包括显示器805和用于允许用户向移动计算设备800输入信息的一个或多个输入按键810。根据一个方面,移动计算设备800的显示器805也可以充当输入设备(例如,触摸屏显示器)。如果包括的话,可选的侧输入元件815也允许另外的用户输入。根据一个方面,侧输入元件815是旋转开关、按钮或者任何其他类型的手工输入元件。在替代的示例中,移动计算设备800并入更多或更少的输入元件。例如,在一些示例中,显示器805可以不是触摸屏。在替代的示例中,移动计算设备800是便携式电话系统,例如,蜂窝电话。根据一个方面,移动计算设备800包括可选的键盘835。根据一个方面,可选的键盘835是物理按键板。根据另一方面,可选的键盘835是在触摸屏显示器上生成的“软”按键板。在各个方面,输出元件包括用于示出图形用户界面(GUI)的显示器805、视觉指示器820(例如,发光二极管)和/或音频换能器825(例如,扬声器)。在一些示例中,移动计算设备800并入振动换能器,以向用户提供触觉反馈。在另一示例中,移动计算设备800并入输入和/或输出端口(例如,音频输入(例如,麦克风插孔)、音频输出(例如,耳机插孔)和视频输出(例如,HDMI端口)),以向外部设备发送信号或者从外部设备接收信号。在另一示例中,移动计算设备800并入外围设备端口840(例如,音频输入(例如,麦克风插孔)、音频输出(例如,耳机插孔)和视频输出(例如,HDMI端口)),以向外部设备发送信号或者从外部设备接收信号。
图8B是示出移动计算设备的一个示例的架构的框图。也就是说,移动计算设备800并入系统(即,架构)802来实现一些示例。在一个示例中,将系统802实现成能够运行一个或多个应用(例如,浏览器、电子邮件、日历、联系人管理器、消息传送客户端、游戏和媒体客户端/播放器)的“智能电话”。在一些示例中,将系统802集成为计算设备,例如,集成的个人数字助理(PDA)和无线电话。
根据一个方面,一个或多个应用程序850被加载到存储器862中,并且在操作系统864上运行或者关联操作系统864来运行。这些应用程序的示例包括电话拨号程序、电子邮件程序、个人信息管理(PIM)程序、文字处理程序、电子表格程序、互联网浏览器程序、消息传送程序等等。根据一个方面,直观文档导航系统116被加载到存储器862中。系统802还包括位于存储器862内的非易失性存储区域868。非易失性存储区域868用于存储当系统802关闭时,不应当丢失的持久信息。应用程序850可以使用非易失性存储区域868中的信息,并在非易失性存储区域868中存储信息,例如电子邮件或者电子邮件应用所使用的其他消息等等。此外,同步应用(没有示出)也位于系统802上,并被编程为与位于主机计算机上的相应同步应用进行交互,以保持非易失性存储区域868中存储的信息与主机计算机处存储的相应信息相同步。如应当领会的,其他应用也可以被加载到存储器862中,并运行在移动计算设备800上。
根据一个方面,系统802具有电源870,所述电源870被实现为一个或多个电池。根据一个方面,电源870还包括外部电源,例如,AC适配器或者对电池进行补充或充电的供电对接支座。
根据一个方面,系统802包括用于执行发送和接收射频通信的无线单元872。无线单元872有助于经由通信载波或服务提供商,实现系统802和“外部世界”之间的无线连接。在操作系统864的控制之下,进行去往和来自无线单元872的传输。换言之,可以经由操作系统864将无线单元872接收的通信传播到应用程序850,反之亦然。
根据一个方面,使用视觉指示器820来提供视觉通知,和/或使用音频接口874来经由音频换能器525产生可听见的通知。在所示出的示例中,视觉指示器820是发光二极管(LED),并且音频换能器825是扬声器。这些设备可以直接地耦合到电源870,使得当被激活时,它们仍保持通知机制所指示的持续时间,即使处理器860和其他组件可能关闭以节省电池电量。可以对LED进行编程以无限期地保持开启,直到用户采取动作来指示该设备的开机状态为止。音频接口874用于向用户提供可听见的信号和从用户接收可听见的信号。例如,除了耦合到音频换能器825之外,音频接口874还可以耦合到麦克风以接收可听见的输入,例如以便促进电话会话。根据一个方面,系统802还包括视频接口876,所述视频接口876实现板上摄像头830的操作以记录静止图像、视频流等等。
根据一个方面,实现系统802的移动计算设备800具有另外的特征或功能。例如,移动计算设备800包括诸如磁盘、光盘或磁带之类的另外的数据存储设备(可移动的和/或不可移动的)。在图8B中,通过非易失性存储区域868来示出这样的另外的存储装置。
根据一个方面,由移动计算设备800生成或捕捉并经由系统802来存储的数据/信息可以本地存储在移动计算设备800上,如上所述。根据另一方面,该数据存储在任意数量的存储介质上,其中,该设备经由无线单元872或者经由移动计算设备800和与该移动计算设备800相关联的单独计算设备(例如,诸如互联网之类的分布式计算网络中的服务器计算机)之间的有线连接来访问该任意数量的存储介质。如应当领会的,可以经由移动计算设备800经由无线单元872或者经由分布式计算网络来访问这样的数据/信息。类似地,根据一个方面,根据公知的数据/信息传送和存储方式(其包括电子邮件和协作式数据/信息共享系统),在计算设备之间容易地传送这样的数据/信息以进行存储和使用。
图9示出了一种系统的架构的一个示例,所述系统提供用于改进的计算机效率的直观文档导航,如上所述。利用直观文档导航系统116所开发的内容、与直观文档导航系统116交互的内容或者关联直观文档导航系统116来编辑的内容被实现为存储在不同的通信信道或其他存储类型中。例如,可以使用目录服务922、web门户924、邮箱服务926、即使消息传送存储装置928或社交网络站点930来存储各种文档。直观文档导航系统116操作用于使用这些类型的系统等中的任何一种来提供用于改进的计算机效率的直观文档导航,如本文所描述的。根据一个方面,服务器920向客户端905a、b、c提供直观文档导航系统116。作为一个示例,服务器920是通过web来提供直观文档导航系统116的web服务器。服务器920通过网络910,在web上向客户端905提供直观文档导航系统116。举例而言,客户端计算设备实现并体现在个人计算机905a、平板计算设备905b或移动计算设备905c(例如,智能电话)或者其他计算设备中。客户端计算设备的这些示例中的任何一者可以从存储装置916获得内容。
例如,上面参照根据本发明的方面的方法、系统和计算机程序产品的框图和/或操作说明来描述实施方式。这些方框中所述的功能/动作可以按不同于任何流程图所示的次序来出现。例如,根据所涉及的功能/动作,连续示出的两个框可以在事实上基本同时地执行,或者这些框有时可以以相反顺序来执行。
这一申请中提供的一个或多个示例的描述和说明并不意在以任何方式限制或约束要求保护的范围。这一申请中提供的方面、示例和细节被认为足以传达所有物并且使其他人能够制造和使用最佳模式。实施方式不应当被解释为仅限于这一申请中提供的任何方面、示例或细节。无论是组合地还是单独地示出和描述,各种特征(结构上和方法上二者)意在被选择性地包括或省略以产生具有特定特征集合的示例。在已经提供本申请的描述和说明的情况下,本领域技术人员可以预见不脱离更广范围而落在这一申请中具体实现的一般发明性构思的更广方面的精神内的变型、修改和替代示例。
Claims (15)
1.一种用于改进对包括交互式内容元素的文档进行导航的计算机效率的设备,包括:
用户界面引擎,其操作用于:
在图形用户界面中显示所述文档的至少一部分;以及
在所述图形用户界面中显示所述交互式内容元素的至少一部分;
元素叠加器,其操作用于:
向所述交互式内容元素应用叠加层,其中,所述叠加层阻止与所述交互式内容元素的至少一部分的用户交互;
接收与用户输入事件相关联的消息;
至少部分地基于所接收的消息,确定是否从所述交互式内容元素中移除所述叠加层;以及
响应于肯定确定:
从所述交互式内容元素中移除所述叠加层;以及
启用与所述交互式内容元素的用户交互。
2.根据权利要求1所述的设备,其中,在至少部分地基于所接收的消息来确定是否从所述交互式内容元素中移除所述叠加层时,所述元素叠加器操作用于:当所接收的消息指示用户控制的光标在所述交互式内容元素上时,确定从所述交互式内容元素中移除所述叠加层,并且所述用户输入事件是以下各项中的一项:
选择;
触摸事件;或者
悬停。
3.根据权利要求1所述的设备,其中,在至少部分地基于所接收的消息来确定是否从所述交互式内容元素中移除所述叠加层时,所述元素叠加器操作用于:当所接收的消息指示没有在预定的时间跨度内接收到用户输入时,确定从所述交互式内容元素中移除所述叠加层。
4.根据权利要求1所述的设备,其中,在至少部分地基于所接收的消息来确定是否从所述交互式内容元素中移除所述叠加层时,所述元素叠加器操作用于:当所接收的消息指示用户输入与滚动或平移操作相关联时,确定在所述交互式内容元素上保持所述叠加层。
5.根据权利要求1所述的设备,还包括:
输入管理器,其操作用于:
接收对用户输入事件的指示;以及
生成用于传输所述用户输入事件的消息;以及
事件监听器,其操作用于:
监听一个或多个特定的用户输入事件;以及
当接收到特定的用户输入事件时,通知所述元素叠加器。
6.根据权利要求1所述的设备,其中,在向所述交互式内容元素应用叠加层时,所述元素叠加器操作用于向所述交互式内容元素应用自定义叠加层,其中,所述自定义叠加层显露与所述交互式内容元素相关联的一个或多个用户交互控件,以使用户能够与所述一个或多个用户交互控件交互。
7.根据权利要求1所述的设备,其中,所述元素叠加器还操作用于:
接收与另一用户输入事件相关联的另一消息;
至少部分地基于所接收的消息,确定是否向所述交互式内容元素重新应用所述叠加层;以及
响应于肯定确定:
向所述交互式内容元素重新应用所述叠加层。
8.根据权利要求1所述的设备,其中,响应于从所述交互式内容元素中移除所述叠加层,所述用户界面引擎还操作用于显示视觉指示符以告知用户如何导航所述文档。
9.一种用于改进对包括交互式内容元素的文档进行导航的计算机效率的计算机实现的方法,包括:
在图形用户界面中显示所述文档的至少一部分;以及
在所述图形用户界面中显示所述交互式内容元素的至少一部分;
向所述交互式内容元素应用叠加层,其中,所述叠加层阻止与所述交互式内容元素的至少一部分的用户交互;
接收与第一用户输入事件相关联的第一消息;
至少部分地基于所接收的第一消息,确定是否从所述交互式内容元素中移除所述叠加层;以及
响应于肯定确定:
从所述交互式内容元素中移除所述叠加层;以及
启用与所述交互式内容元素的用户交互。
10.根据权利要求9所述的计算机实现的方法,其中,至少部分地基于所接收的消息来确定是否从所述交互式内容元素中移除所述叠加层包括:当所接收的消息指示用户控制的光标在所述交互式内容元素上时,确定从所述交互式内容元素中移除所述叠加层,并且所述用户输入事件是以下各项中的一项:
选择;
触摸事件;或者
悬停。
11.根据权利要求9所述的计算机实现的方法,其中,至少部分地基于所接收的消息来确定是否从所述交互式内容元素中移除所述叠加层包括:当所接收的消息指示没有在预定的时间跨度内接收到用户输入时,确定从所述交互式内容元素中移除所述叠加层。
12.根据权利要求9所述的计算机实现的方法,其中,至少部分地基于所接收的消息来确定是否从所述交互式内容元素中移除所述叠加层包括:当所接收的消息指示用户输入与滚动或平移操作相关联时,确定在所述交互式内容元素上保持所述叠加层。
13.根据权利要求9所述的计算机实现的方法,其中,向所述交互式内容元素应用叠加层包括:向所述交互式内容元素应用自定义叠加层,其中,所述自定义叠加层显露与所述交互式内容元素相关联的一个或多个用户交互控件,以使用户能够与所述一个或多个用户交互控件交互。
14.根据权利要求9所述的计算机实现的方法,还包括:
接收与第二用户输入事件相关联的第二消息;
至少部分地基于所接收的消息,确定是否向所述交互式内容元素重新应用所述叠加层;以及
响应于肯定确定:
向所述交互式内容元素重新应用所述叠加层。
15.一种包括指令的计算机可读介质,所述指令当由计算机执行时,提供:
应用;
应用编程接口,其用于使所述应用能够与直观文档导航系统进行通信;以及
所述直观文档导航系统,其中,所述直观文档导航系统操作用于:
向嵌入在文档中的交互式内容元素应用叠加层,其中,所述叠加层阻止与所述交互式内容元素的至少一部分的用户交互;
接收与第一用户输入事件相关联的第一消息;
至少部分地基于所接收的第一消息,确定是否从所述交互式内容元素中移除所述叠加层;
响应于肯定确定:
从所述交互式内容元素中移除所述叠加层;以及
启用与所述交互式内容元素的用户交互;以及
响应于否定确定,在所述交互式内容元素上保持所述叠加层,其中,当所接收的第一消息指示所述第一用户输入事件与滚动或平移操作相关联时,进行所述否定确定。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201662314204P | 2016-03-28 | 2016-03-28 | |
US62/314,204 | 2016-03-28 | ||
US15/222,895 | 2016-07-28 | ||
US15/222,895 US10572137B2 (en) | 2016-03-28 | 2016-07-28 | Intuitive document navigation with interactive content elements |
PCT/US2017/023497 WO2017172424A1 (en) | 2016-03-28 | 2017-03-22 | Intuitive document navigation with interactive content elements |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108885505A true CN108885505A (zh) | 2018-11-23 |
CN108885505B CN108885505B (zh) | 2021-09-28 |
Family
ID=59897184
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780020879.8A Active CN108885505B (zh) | 2016-03-28 | 2017-03-22 | 具有交互式内容元素的直观文档导航 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10572137B2 (zh) |
EP (1) | EP3436903B1 (zh) |
CN (1) | CN108885505B (zh) |
WO (1) | WO2017172424A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111026860A (zh) * | 2019-11-20 | 2020-04-17 | 中车青岛四方机车车辆股份有限公司 | 一种用于电子文档展现的方法及浏览器插件 |
CN111338517A (zh) * | 2018-12-19 | 2020-06-26 | 翰硕电子股份有限公司 | 输入设备与用户接口的互动 |
CN113366442A (zh) * | 2019-01-30 | 2021-09-07 | 微软技术许可有限责任公司 | 视频会议中的显示冲突消除 |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10430926B1 (en) * | 2017-05-09 | 2019-10-01 | Promontech Llc | Systems, media, and methods for improving responsiveness of spotlight tours in a dynamic viewport environment |
US11409430B2 (en) * | 2018-11-02 | 2022-08-09 | Benjamin Firooz Ghassabian | Screen stabilizer |
US11009698B2 (en) * | 2019-03-13 | 2021-05-18 | Nick Cherukuri | Gaze-based user interface for augmented and mixed reality device |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070136696A1 (en) * | 2005-04-29 | 2007-06-14 | Turnstyle Website Architecture | System and Method for Enabling at Least One Independent Data Navigation and Interaction Activity Within a Document |
CN101213537A (zh) * | 2005-07-01 | 2008-07-02 | 微软公司 | 在交互式媒体环境中管理应用程序状态 |
US20120079405A1 (en) * | 2010-09-29 | 2012-03-29 | Hon Hai Precision Industry Co., Ltd. | Widget displaying system and method |
US20130139053A1 (en) * | 2011-11-28 | 2013-05-30 | Chegg, Inc. | Data Visualization Based on Visual Object Elements |
CN104137044A (zh) * | 2012-01-20 | 2014-11-05 | 微软公司 | 用触摸上下文用户界面来进行显示和交互 |
CN104485052A (zh) * | 2014-12-10 | 2015-04-01 | 福建省纳金网信息技术有限公司 | 一种基于移动终端的产品演示方法及系统 |
CN104641340A (zh) * | 2012-09-20 | 2015-05-20 | 谷歌公司 | 用以防止非故意输入的交互式覆盖图 |
CN104767874A (zh) * | 2014-01-06 | 2015-07-08 | Lg电子株式会社 | 移动终端及其控制方法 |
CN104995582A (zh) * | 2012-12-14 | 2015-10-21 | 奥马科耐特沃克解决方案有限公司 | 关于文档交互和反馈的改进 |
US20160011763A1 (en) * | 2007-12-20 | 2016-01-14 | Paypal Inc. | Non-linear slider systems and methods |
CN105283837A (zh) * | 2013-05-21 | 2016-01-27 | 微软技术许可有限责任公司 | 适于在语音用户界面中使用的用于找出web页面中的元素的方法(消歧) |
CN105378623A (zh) * | 2013-06-13 | 2016-03-02 | 微软技术许可有限责任公司 | 插入式动态内容预览窗格 |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TW528981B (en) * | 2001-10-25 | 2003-04-21 | Compal Electronics Inc | Portable computer and related method for preventing input interruption by write-tracking input region |
US6690387B2 (en) * | 2001-12-28 | 2004-02-10 | Koninklijke Philips Electronics N.V. | Touch-screen image scrolling system and method |
CN100437448C (zh) * | 2003-08-08 | 2008-11-26 | 皇家飞利浦电子股份有限公司 | 滚动文档的方法 |
US20050216856A1 (en) | 2004-03-23 | 2005-09-29 | Matti Michael C | System and method for displaying information on an interface device |
US7434173B2 (en) | 2004-08-30 | 2008-10-07 | Microsoft Corporation | Scrolling web pages using direct interaction |
US8706169B2 (en) | 2006-12-28 | 2014-04-22 | Yahoo! Inc. | Interface overlay |
US7934166B1 (en) * | 2007-11-12 | 2011-04-26 | Google Inc. | Snap to content in display |
US8850353B2 (en) * | 2009-08-18 | 2014-09-30 | Siemens Aktiengesellschaft | Method and system for overlaying space-constrained display with a reference pattern during document scrolling operations |
TWI438675B (zh) * | 2010-04-30 | 2014-05-21 | Ibm | 提供情境感知援助說明之方法、裝置及電腦程式產品 |
US8665212B2 (en) * | 2011-07-08 | 2014-03-04 | Blackberry Limited | Systems and methods for locking an electronic device |
US20130212465A1 (en) | 2012-02-09 | 2013-08-15 | Alexander Kovatch | Postponed rendering of select web page elements |
DE112013002409T5 (de) * | 2012-05-09 | 2015-02-26 | Apple Inc. | Vorrichtung, Verfahren und grafische Benutzeroberfläche für die Anzeige zusätzlicher Informationen in Reaktion auf einen Benutzerkontakt |
US20140059478A1 (en) * | 2012-08-21 | 2014-02-27 | Nokia Corporation | Apparatus and method for providing a digital bezel without occluding interactive content |
US20140189579A1 (en) * | 2013-01-02 | 2014-07-03 | Zrro Technologies (2009) Ltd. | System and method for controlling zooming and/or scrolling |
US20150362959A1 (en) * | 2013-01-31 | 2015-12-17 | Hewlett-Packard Development Company, L.P. | Touch Screen with Unintended Input Prevention |
WO2014125403A2 (en) * | 2013-02-12 | 2014-08-21 | Amit Kumar Jain Amit | Method of video interaction using poster view |
US20140258029A1 (en) | 2013-03-07 | 2014-09-11 | Nabzem LLC | Embedded multimedia interaction platform |
US20150227288A1 (en) | 2014-02-11 | 2015-08-13 | Google Inc. | Selection of Third-Party Content Layers for a Digital Map |
US9678656B2 (en) * | 2014-12-19 | 2017-06-13 | International Business Machines Corporation | Preventing accidental selection events on a touch screen |
GB201501079D0 (en) * | 2015-01-22 | 2015-03-11 | Microsoft Technology Licensing Llc | Controlling access to content |
CN104731498B (zh) * | 2015-01-30 | 2016-07-13 | 努比亚技术有限公司 | 移动终端防误触控方法及装置 |
-
2016
- 2016-07-28 US US15/222,895 patent/US10572137B2/en active Active
-
2017
- 2017-03-22 EP EP17715005.9A patent/EP3436903B1/en active Active
- 2017-03-22 WO PCT/US2017/023497 patent/WO2017172424A1/en active Application Filing
- 2017-03-22 CN CN201780020879.8A patent/CN108885505B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070136696A1 (en) * | 2005-04-29 | 2007-06-14 | Turnstyle Website Architecture | System and Method for Enabling at Least One Independent Data Navigation and Interaction Activity Within a Document |
CN101213537A (zh) * | 2005-07-01 | 2008-07-02 | 微软公司 | 在交互式媒体环境中管理应用程序状态 |
US20160011763A1 (en) * | 2007-12-20 | 2016-01-14 | Paypal Inc. | Non-linear slider systems and methods |
US20120079405A1 (en) * | 2010-09-29 | 2012-03-29 | Hon Hai Precision Industry Co., Ltd. | Widget displaying system and method |
US20130139053A1 (en) * | 2011-11-28 | 2013-05-30 | Chegg, Inc. | Data Visualization Based on Visual Object Elements |
CN104137044A (zh) * | 2012-01-20 | 2014-11-05 | 微软公司 | 用触摸上下文用户界面来进行显示和交互 |
CN104641340A (zh) * | 2012-09-20 | 2015-05-20 | 谷歌公司 | 用以防止非故意输入的交互式覆盖图 |
CN104995582A (zh) * | 2012-12-14 | 2015-10-21 | 奥马科耐特沃克解决方案有限公司 | 关于文档交互和反馈的改进 |
CN105283837A (zh) * | 2013-05-21 | 2016-01-27 | 微软技术许可有限责任公司 | 适于在语音用户界面中使用的用于找出web页面中的元素的方法(消歧) |
CN105378623A (zh) * | 2013-06-13 | 2016-03-02 | 微软技术许可有限责任公司 | 插入式动态内容预览窗格 |
CN104767874A (zh) * | 2014-01-06 | 2015-07-08 | Lg电子株式会社 | 移动终端及其控制方法 |
CN104485052A (zh) * | 2014-12-10 | 2015-04-01 | 福建省纳金网信息技术有限公司 | 一种基于移动终端的产品演示方法及系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111338517A (zh) * | 2018-12-19 | 2020-06-26 | 翰硕电子股份有限公司 | 输入设备与用户接口的互动 |
CN113366442A (zh) * | 2019-01-30 | 2021-09-07 | 微软技术许可有限责任公司 | 视频会议中的显示冲突消除 |
CN113366442B (zh) * | 2019-01-30 | 2024-03-08 | 微软技术许可有限责任公司 | 视频会议中的显示冲突消除 |
CN111026860A (zh) * | 2019-11-20 | 2020-04-17 | 中车青岛四方机车车辆股份有限公司 | 一种用于电子文档展现的方法及浏览器插件 |
Also Published As
Publication number | Publication date |
---|---|
EP3436903B1 (en) | 2022-08-24 |
US10572137B2 (en) | 2020-02-25 |
CN108885505B (zh) | 2021-09-28 |
EP3436903A1 (en) | 2019-02-06 |
WO2017172424A1 (en) | 2017-10-05 |
US20170277378A1 (en) | 2017-09-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6763899B2 (ja) | ウェブ・アプリケーションにおける連携通信 | |
US11797606B2 (en) | User interfaces for a podcast browsing and playback application | |
US20210263702A1 (en) | Audio media user interface | |
US11863837B2 (en) | Notification of augmented reality content on an electronic device | |
US11829720B2 (en) | Analysis and validation of language models | |
US11714597B2 (en) | Methods and user interfaces for sharing audio | |
US11323559B2 (en) | Displaying and updating a set of application views | |
CN108885505A (zh) | 具有交互式内容元素的直观文档导航 | |
CN105474163B (zh) | 自然快速功能手势 | |
US9430041B2 (en) | Method of controlling at least one function of device by using eye action and device for performing the method | |
CN104737112A (zh) | 文档中基于缩略图和文档图的导航 | |
CN105144069A (zh) | 对于显示内容的基于语义缩放的导航 | |
US11822943B2 (en) | User interfaces for presenting information about and facilitating application functions | |
CN106415446A (zh) | 通过触觉交互对内容属性的可访问性检测 | |
CN105359133A (zh) | web内容与电子应用文档的交互 | |
US20200341610A1 (en) | Presenting user interfaces that update in response to detection of a hovering object | |
US20220391603A1 (en) | Content translation user interfaces | |
US9582133B2 (en) | File position shortcut and window arrangement | |
CN108292324A (zh) | 内容创作内联命令 | |
US20170285930A1 (en) | Document content replay | |
CN108780443A (zh) | 对数字笔划群组的直观选择 | |
AU2020313970B2 (en) | Health event logging and coaching user interfaces | |
US20180173377A1 (en) | Condensed communication chain control surfacing | |
CN109804343A (zh) | 选择和移动提示 | |
US20230396854A1 (en) | Multilingual captions |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |