CN109074375B - web文档中的内容选择 - Google Patents

Abstract

本文描述了用于在web文档内选择内容的技术。在实现方式中，用于浏览器或其他客户端应用程序的选择工具被配置为分析web文档以识别文档的内容排列中的不同区域。选择工具可以解析网页的底层结构(例如，标记代码和DOM结构)以识别网页中的不同的离散区域。附加地或替代地，选择工具可以使用光学识别技术来视觉地分析在网页当被渲染而显现时的网页，并基于视觉分析检测不同的离散区域。识别的区域被配置为可单独选择的内容的部分。可以以各种方式暴露这些可选区域并使其可访问，以使用户能够快速且容易地切换对区域的选择。

Description

web文档中的内容选择

背景技术

个人可以与各种计算资源交互，诸如桌面应用程序或可从服务提供者获得的web应用程序，以创建内容(例如，文档、图像、图表、图形等) 并与其他人协作。在一些情况下，个人可以与web内容进行交互并且选择内容以复制/粘贴、保存、共享或以其他方式使用内容的选定部分。浏览器和其他应用程序支持的用于web内容选择的现有技术是粗略的，并且经常导致不期望和不正确的选择。例如，可能难以使用点击和拖动技术来在内容结构具有不同框架、内容类型(例如，文本、图像、链接)、项目对齐等的网页内精确地选择项目。

发明内容

本发明内容以简化的形式介绍了一些概念，这些概念将在下面的具体实施方式中进一步描述。因此，本发明内容不旨在确定所要求保护的主题的必要特征，也不旨在用于帮助确定所要求保护的主题的范围。

本文描述了用于在web文档内选择内容的技术。在实现方式中，用于浏览器或其他客户端应用程序的选择工具被配置为分析web文档以识别文档的内容排列中的不同区域。选择工具可以解析网页的底层结构(例如，标记代码和DOM)以识别网页中的不同的离散区域。附加地或替代地，选择工具可以使用光学识别技术来在网页被渲染而显现时视觉地分析网页，并基于视觉分析检测不同的离散区域。识别的区域被配置为可单独选择的内容的部分。可以以各种方式暴露这些可选区域并使其可访问，以使用户能够快速且容易地切换区域的选择。

例如，可以响应于用户交互来指定文档内的选择，使得可操作以细化选择的控件和其他功能可用。细化控件/功能可以使用户能够选择或取消选择内容的各个区域，例如通过使用复选框或其他切换。细化控件/功能还可以使用户能够扩展/收缩选择以包含不同的内容部分，例如通过连续的与细化控件(例如可选图标、按键、可选按钮和其他UI工具)的交互，从所选短语顺序向外扩展到句子，到段落，到多个区域和所有项目。还可以以可比较的方式收缩选择，使得用户能够使用一个或多个细化控件来增加和减少选择中包括的内容量和区域的数量。以这种方式，用户可以快速循环通过对应于经由浏览器或其他应用程序呈现的web文档中包含的识别区域和内容项的不同组合的不同选择部分。

附图说明

参考附图描述了具体实施方式。在附图中，附图标记的最左边的数字标识首次出现附图标记的图。在说明书和附图中的不同实例中使用相同的附图标记可以指示相似或相同的项目。图中表示的实体可以指示一个或多个实体，因此可以在讨论中将单个或多个形式的实体互换地引用。

图1是可用于采用本文描述的技术的示例实现方式中的环境的图示。

图2示出了根据一个或多个实现方式的选择模块的示例配置。

图3是描绘根据一个或多个实现方式的用于选择细化的示例过程的流程图。

图4示出了根据一个或多个实现方式的场景的示例选择。

图5是描绘根据一个或多个实现方式的通过将选择改变为包括可选区域的不同组合来细化选择的示例过程的流程图。

图6示出了根据一个或多个实现方式的示例选择场景，其中全选操作引起可选区域的显示。

图7示出了根据一个或多个实现方式的使用通过切换可选区域来进行选择细化的示例场景。

图8是描绘根据一个或多个实现方式的用于使用细化控件来细化选择的示例过程的流程图。

图9示出了根据一个或多个实现方式提供细化工具的示例选择场景。

图10示出了根据一个或多个实现方式的涉及与细化工具的交互的示例选择场景。

图11示出了根据一个或多个实现方式的示例选择细化。

图12示出了根据一个或多个实现方式的示例选择循环场景。

图13示出了根据一个或多个实现方式的示例选择循环场景。

图14示出了包括示例设备的各种组件的示例系统，该示例设备可以用于本文描述的一个或多个实现方式。

具体实施方式

概述

由浏览器和其他应用程序支持的用于选择web内容的现有技术是粗略的并且经常导致非预期和不正确的选择。例如，可能难以使用点击和拖动技术来在内容结构具有不同框架、内容类型(例如，文本、图像、链接)、项目对齐等的网页内精确地选择项目。

本文描述了用于在web文档内选择内容的技术。在实现方式中，用于浏览器或其他客户端应用程序的选择工具被配置为分析web文档以识别文档的内容排列中的不同区域。选择工具可以解析网页的底层结构(例如，标记代码和DOM)以识别网页中的不同的离散区域。附加地或替代地，选择工具可以使用光学识别技术来在当网页被渲染而显现时视觉地分析网页，并基于视觉分析来检测不同的离散区域。已识别区域被定义为可单独选择的内容部分。可以以各种方式暴露这些可选区域并使其可访问，以使用户能够快速且容易地切换区域的选择。

例如，响应于用户交互以指定文档内的选择，可以使得可操作以细化选择的控件和其他功能可用。细化控件/功能可以使用户能够选择或取消选择内容的各个区域，例如通过使用复选框或其他切换。细化控件/功能还可以使用户能够扩展/收缩选择以包含不同的内容部分，例如通过连续的与细化控件(例如可选图标、按键、可选按钮和其他UI工具)的交互，从所选短语顺序向外扩展到句子，到段落，到多个区域和所有项目。还可以以可比较的方式收缩选择，使得用户能够使用一个或多个细化控件来增加和减少包括在选择中的内容的量和区域的数量。以这种方式，用户可以快速循环通过对应于经由浏览器或其他应用程序呈现的web文档中包含的识别区域和内容项的不同组合的不同选择部分。

在以下讨论中，首先描述可以采用本文描述的技术的示例环境。然后描述可以在示例环境以及其他环境中执行的示例实现方式的细节和过程。因此，示例过程的执行不限于该示例环境，并且该示例环境不限于示例过程的执行。

示例环境

图1示出了根据一个或多个实现方式的操作环境，通常以100示出。环境100包括计算设备102，计算设备102具有：处理系统104，处理系统 104具有一个或多个处理器和设备(例如，CPU、GPU、微控制器、硬件元件、固定逻辑设备等)；一个或多个计算机可读介质106；操作系统108；以及驻留在计算机可读介质上并且能够由处理系统执行的一个或多个应用程序110。处理系统104可以从应用程序110取回和执行计算机程序指令，以向计算设备102提供广泛的功能，包括但不限于游戏、办公室生产力、电子邮件、媒体管理、打印、联网、web浏览等等。还可以包括与应用程序110相关的各种数据和程序文件，其示例包括游戏文件、办公文档、多媒体文件、电子邮件、数据文件、网页、用户简档和/或偏好数据等。

计算设备102可以体现为任何合适的计算系统和/或设备，例如，作为示例而非限制，游戏系统、台式计算机、便携式计算机、平板计算机或板式计算机、手持计算机(诸如个人数字助理(PDA))、手机、机顶盒、可穿戴设备(例如，手表、带、眼镜等)等。另外，尽管示出了单个计算设备102，但是计算设备102可以代表“在云上”执行操作的多个不同的设备，如关于图14进一步描述的。

图1中表示的示例应用程序110包括通信模块112和选择模块114。在至少一些实施例中，通信模块112表示可操作以访问各种基于web的资源 (例如，内容和服务)的计算设备的浏览器。通信模块112还可以表示客户端侧组件或“支持web的”应用程序，其集成了可操作以访问基于web 的资源(例如，支持网络的应用程序)、浏览因特网、与在线提供商交互等的功能。

选择模块114表示可操作以实现用于上文和下文所述的web文档中的内容选择的技术的功能。例如，选择模块114可操作以处理经由通信模块访问的web内容(例如，网页、站点、web文档)以识别web内容中包含的不同的内容区域。然后，在页面或文档的渲染视图中暴露识别的区域，以便于使用区域选择内容和细化选择。在一个或多个实现方式中，识别不同的内容区域的处理包括(1)分析内容的底层结构(例如，标记代码和 DOM结构)以识别网页中的不同的离散区域，以及(2)光学识别技术，用于在网页被渲染而显现时视觉地分析网页以基于视觉分析来检测不同的离散区域。在整个下面的讨论中可以找到关于通过选择模块114实现的技术的细节。

环境100还描绘了一个或多个服务提供者116，其被配置为通过诸如因特网的网络118与计算设备102进行通信，以提供“基于云的”计算环境。一般而言，服务提供者116被配置为通过网络118使得各种资源120对于客户端可用。例如，通信模块110可以在客户端处执行以导航和访问来自服务提供者116的各种资源120并输出相应的用户界面122以暴露用户可以通过其与资源交互的渲染的视图。

在一些场景中，用户可以注册用于访问来自提供者的相应资源的帐户。提供者可以在准许对账户和相应资源120的访问之前认证用户的凭证(例如，用户名和密码)。可以使其他资源120免费可用(例如，没有认证或基于账户的访问)。资源120可以包括通常由一个或多个提供商通过网络使其可用的服务和/或web内容的任何合适组合。服务的一些示例包括但不限于照片编辑服务、web开发和管理服务、协作服务、社交网络服务、消息传递服务、广告服务等。web内容可以包括文本、视频、广告、音频、多媒体流、动画、图像、web文档、网页、应用程序、设备应用程序等的各种组合。

已经考虑了示例环境，现在考虑根据一个或多个实现方式的技术的一些示例细节的讨论。

实现方式细节

本部分描述了根据一个或多个实现方式的用于web文档中的内容选择的一些示例细节和过程。特别地，图2总体上以200描绘了根据一个或多个实现方式的选择模块的示例配置。特别地，选择模块114被表示为通信模块112的组件，例如浏览器。通常，选择模块114可以实现为软件模块、硬件设备或者使用软件、硬件、固件、固定逻辑电路等的组合。选择模块 114可以实现为如图1所示的计算设备102的独立组件。另外或替代地，选择114可以被配置为通信模块112的组件(如图2所示)、操作系统或其他设备应用程序。此外，选择模块114可以被提供为用于浏览器或其他应用程序110的插件和/或可下载脚本。选择模块114还可以表示包含在网页、 web应用程序、基于web的服务或由服务提供者116提供的其他资源中或者可以以其他方式通过它们访问的脚本。

根据上文和下文描述的技术，选择模块114包括用于促进内容选择的内容结构解析器204和视觉区域检测器206。如上所述，选择模块114提供便于与经由通信模块112访问和渲染的web内容相关的选择内容和细化选择的功能。渲染包括经由通信模块112获得的页面和文档的web内容，并且在由通信模块112的用户界面122暴露的视图中呈现。在图2的示例中，由通信模块112形成的代表性用户界面122被描绘为经由计算设备102的显示设备202呈现。这里，用户界面122示出了在特定URL处通过浏览器访问的关于哈巴狗的文章的网页。

注意，网页包括各种不同的区域和内容项，例如侧栏、标题、图像、介绍性文本、描述等。选择模块114被设计为识别页面/内容中的多个不同区域，将不同区域配置为可选择部分，并且经由用户界面112将区域暴露为可单独选择的部分。在该上下文中，内容结构解析器204和视觉区域检测器206表示用于处理以分析web内容以识别不同区域的功能。具体地，内容结构解析器204实现对内容的底层结构(例如，标记代码和DOM结构) 的分析，以识别网页中的不同的离散区域。内容结构解析器204检查页面的代码以通过代码中定义的不同元素、标签、部分、内容类型、小节、链接、页面层次等来理解页面结构。内容结构解析器204基于该分析来检测和/或定义不同区域。内容结构解析器204可独立操作或与如下所述的视觉区域检测器206组合操作。

视觉区域检测器206提供基于光学识别技术检测和/或定义不同区域的另一机制。视觉区域检测器206实现在web内容当被渲染而显现时的web 内容的视觉分析。基于外观的视觉分析检测不同的离散区域。视觉区域检测器206检查外观的各个方面，例如内容的元素位置、对齐、文本大小、间隔和填充、框架、窗格、边框和其他视觉特征。视觉区域检测器206基于该分析来检测和/或定义不同区域。视觉区域检测器206可以与内容结构解析器204结合使用以识别区域。视觉区域检测器206也可以独立地用于执行区域检测。作为示例而非限制，可以调用视觉区域检测器206来处理图像、扫描的文档和包含很少或不包含将通过内容结构解析器204可检测的相关联结构的其他内容项。

通常，选择模块114响应于以各种方式与web内容的交互208，而检测，处理，细化和表示web内容的视图内的内容选择。可以结合本文描述的选择技术采用各种类型的交互208和输入机制。作为示例而非限制，在图2的示例中表示来自用户手指的触摸输入形式的交互208。可以通过与显示设备202集成的数字转换器来识别触摸输入。还构想了表示用于向计算设备102提供相应输入的不同功能的各种其他种类的输入机制。输入机制的示例包括但不限于手势敏感传感器和设备(例如，诸如基于触摸的传感器和运动跟踪传感器(例如，基于相机))以识别手势、单个或多个手指触摸、用于光标输入的鼠标、用于提供键命令的键盘、击键和快捷键、与触控笔或笔相关联的输入、触摸板、加速度计、具有用于语音命令的伴随语音识别软件的麦克风等等。可以通过不同的输入机制形成这些和其他不同类型的输入，从而以本文所述的方式定义选择并细化选择。

在此上下文中，考虑关于以下示例过程、用户界面和场景讨论的进一步细节。本文档中描述的过程可以利用本文描述的环境、系统、设备和组件并结合任何合适的硬件、软件、固件或其组合来实现。这些过程可以表示为一组块，其指定由一个或多个实体执行的操作，并且不必限于所示的用于执行各个块的操作的顺序。

通常，可以在下面描述的示例过程的上下文中采用关于以上和以下示例描述的功能、特征和概念。此外，关于本文档中的不同附图和示例描述的功能、特征和概念可以彼此互换，并且不限于在特定附图或过程的上下文中的实现方式。此外，与本文中的不同代表性过程和对应附图相关联的块可以一起应用和/或以不同方式组合。因此，关于本文中的不同示例环境、设备、组件、附图和过程描述的各个功能、特征和概念可以以任何合适的组合使用，并且不限于本说明书中列举的示例所表示的特定组合。

图3是描绘根据一个或多个实现方式的用于选择细化的示例过程300 的流程图。处理经由应用程序访问的web文档以识别文档内的不同的内容区域(框302)并响应于经由应用程序获得的输入以在web文档内选择内容项，通过可操作以通过切换识别的不同区域的选择来细化选择的应用程序暴露功能(框304)。例如，如前所述的选择模块114可以经由诸如浏览器的通信模块112来实现。选择模块114用于处理包括经由通信模块112 访问的页面和文档的web内容，以识别web内容中包括的不同的内容区域。如上所述，这可以包括与内容相关联的代码的分析和/或使用光学识别技术对页面的视觉分析。识别的内容区域被配置为经由通信模块112呈现的内容的视图内的可选区域。注意，可以以各种方式发起查找内容区域的处理。在一种方法中，在加载页面时执行用于区域识别的处理，并且因此针对呈现的视图预先建立区域。在另一种方法中，诸如击键的选择命令或“全选”命令或使用鼠标或触控笔选择内容的一部分的选择命令启动处理以检测相应内容内的区域。此外，可以在服务提供者提供的资源上经由服务提供者执行区域分析。在这种情况下，可以在从服务提供者访问的页面和文档中预定义区域，并且关于区域的指示可以嵌入在页面和文档的相应代码中。

一旦建立了区域，就可以以各种方式使用这些区域以促进内容选择和细化。通过应用程序暴露各种功能以表示区域并与做出和细化内容选择相结合来实现与区域的交互。例如，可以经由在通信模块112的用户界面122 中渲染的上下文的视图来呈现不同区域的表示。可以以各种方式配置表示，其示例包括显示边界，使用阴影，突出显示区域，或以其他方式在视觉上表示视图中的不同区域。另外，可以在用户界面中暴露区域以及可操作以细化选择的控件和其他功能。细化控件/功能可以使用户能够选择或取消选择内容的各个区域，例如通过使用复选框或其他切换控件来扩展/收缩选择以使用控件、击键或其他输入来包含不同的内容部分。可以设想可操作以通过切换对所识别的不同区域的选择来细化选择的各种类型的功能和控件，包括可选按钮，切换控件，复选框，滑块控件，区域到鼠标的不同硬件键的分配，键盘或其他输入设备，显示图标，分配用于切换控制的手势，等等。在实现方式中，响应于提供的输入来暴露区域和相应的控件以进行内容项的选择。输入可以是全选命令(例如，Ctrl+a)，使用鼠标或触控笔的选择，基于触摸的选择，或适合于指定所选内容项的其他输入。

为了进一步说明，考虑图4，图4总体上以400描绘了根据一个或多个实现方式的示例选择场景。如在视图“A”中所表示的，在选择网页内的内容之前，渲染经由用户界面122输出的网页而不划分不同区域。然后获得选择输入402。选择输入402表示可以以各种方式发生的交互(例如，交互 208)以选择页面内的至少一些内容项。在特定示例中，选择输入402被表示为全选命令，其使得选择所有页面内容。当然，选择输入402可以替代地使用鼠标或触控笔、基于触摸的选择或其他合适的输入来指定所选择的内容项，并且该选择可以包含所有内容或仅包含页面内容的一部分。

响应于选择输入402，经由用户界面122输出的网页被更新，如视图“B”中所示，以示出页面内的不同区域以及可操作以细化选择的控件。预期区域和控件的各种不同表示。特别地，图4的示例描绘了用边界404示出的每个区域以限定不同区域。这些区域对应于不同的内容部分，例如示例文章的标题、文本部分、菜单、图像。所表示的区域可以响应于选择输入402 “按需”检测，或者在加载页面时预先检测，或者如前所述在服务器侧检测。在此示例中，边框配置为虚线。还构想了表示不同区域的其他技术，例如通过使用不同类型的边界、着色、突出显示和/或其他效果。

另外，每个区域被示出为与细化控件404相关联。细化控件404表示与区域相关联的可选元素，提供关于哪个区域被选择的指示并且能够相对于区域切换选择。在该示例中，细化控件404被配置为复选框，其表示在框元素内具有“x”的所选区域。复选框可以单独选择，以切换打开和关闭相应区域的选择。还可以设想可操作以便于区域的选择/取消选择的其他类型的细化控件404，包括图标、按钮、箭头、边框404作为细化控件的使用等。

在全选命令形式的选择输入402的情况下，最初选择所有或区域，如图4所示。另一方面，如果选择输入402指向区域的子集或特定内容项，则所选择的子集和项被表示为已选择而其他内容被表示为取消选择。在任一情况下，提供细化控件404以通过切换各个区域的选择和取消选择来实现选择的细化。

图5是描绘根据一个或多个实现方式的用于通过将选择改变为包括可选区域的不同组合来细化选择的示例过程500的流程图。检测到输入，该输入指示经由应用程序的用户界面渲染的web文档中包括的内容项的选择 (框502)。设想了用于定义选择的各种类型的交互和输入，其一些示例在上文和下文中描述。处理web文档以识别文档中包含的多个不同的内容区域(框504)。在实现方式中，响应于选择输入而发生处理。如前所述，也可以预先进行识别区域的处理。在这种情况下，通过引用文档中包含的“预先建立的”区域的指示来识别要与选择输入相关地表示的多个不同的内容区域。

然后，通过用户界面表示包括不同区域的指示的内容项的选择(框506)，并且经由用户界面暴露功能，该用户界面可操作以通过改变选择以包括识别的区域的不同组合来实现选择的细化(框508)。

例如，所选项目可以使用边框、阴影和颜色和/或视觉效果来表示，如图3 和图4的讨论中所提到的。另外，可以提供指示和细化内容项的选择的各种功能。该功能可以包括与如上所述的不同检测区域相关联的细化控件。功能还可以包括在界面中暴露的可选图标或元素、键命令、弹出控制条、可选链接或菜单项，其使得能够通过不同区域循环选择以将选择扩展到更多区域和/或将选择减少到更少的区域。

响应于用户与通过用户界面暴露的功能的交互来改变选择以选择和取消选择不同区域(框510)。具体地，根据经由用户界面获得的用户输入来选择和取消选择不同的区域。可以通过与诸如复选框、图标和其他UI工具之类的细化控件404的交互来提供输入。还可以通过诸如手势、定义的击键、语音命令等不同的输入机制来提供输入。然后，对所选内容项执行指定操作(框512)。可以将宽范围的操作应用于使用本文描述的技术选择的内容。例如，用户可以复制/粘贴，保存，共享，应用格式化或以其他方式利用内容的选定部分。根据本文描述的技术，指定的操作被应用于以本文描述的方式选择的区域和对应的内容。

结合图6至图13讨论了示出用于web文档中的内容选择的技术的各方面的其他示例、细节和场景。图6总体上以600示出了根据一个或多个实现方式的全选操作使得可选区域的显示的示例选择场景。在该示例中，视图“C”描绘了在选择网页内的内容之前经由用户界面122渲染的网页，而没有划分不同区域。使用先前讨论过示例的各种技术获得用于引起全选604 操作的输入。视图“D”响应于全选604操作而被暴露。这里，划分了通过本文描述的技术在网页中识别的不同区域606。在这种情况下，区域使用边框或边界框表示。另外，区域被突出显示或加阴影以表示响应于全选604 操作的所有区域的选择。这些区域另外与可操作以细化选择的细化控件608 相关联。在该示例中，细化控件608被配置为复选框，其使得能够单独地选择和取消选择区域。

在图6的示例的上下文中，图7总体上在700处示出了根据一个或多个实现方式的通过切换可选区域来进行选择细化的示例场景。特别地，图7 中表示的场景示出了在关于图6所讨论的全选604操作之后的视图“D”。现在，假设通过用户界面提供的细化控件获得修改选择的输入。特别地，可以获得细化输入702以切换在视图“D”中呈现的可选区域的选择。这里，用户可以使用与每个区域相关联的复选框来选择区域。用于进行单独区域选择的细化输入702的结果在视图“E”中表示。这里，视图包括取消选择 704的一些区域和使用复选框选择706的一些区域。一旦设置了选择，就可以指定对选择710的各种操作，例如复制/粘贴，保存，共享，应用格式化或以其他方式利用内容的选定部分。

图8是描绘根据一个或多个实现方式的用于使用细化控件来细化选择的示例过程800的流程图。检测到输入，输入指示通过应用程序的用户界面渲染的web文档中包括的内容项的选择(框802)。设想了用于启动选择的各种类型的输入，包括但不限于经由鼠标、触控笔(例如，点击和拖动) 或其他输入设备的输入；触摸输入；手势，等等。输入可以定义特定内容项的选择，诸如文本的一部分、图像帧、特定区域等。这里，选择可以指向一个或多个单独的内容项，或者可替代地可以是如前所述的全选命令。

响应于选择，通过用户界面暴露细化控件，细化控件包括发起修改选择的选项(框804)。然后，响应于用户与细化控件的交互来改变选择，以选择和取消选择文档中包含的不同的内容区域(框806)。如上所述，可以以各种方式配置细化控件。例如，细化控件可以包括在界面中暴露的图标或元素、键命令、弹出控制条、可选链接或菜单项，其使得能够通过不同区域循环选择以将选择扩展到更多区域和/或将选择减少到较少的地区。细化控件使得能够以各种方式修改选择。例如，控件可以使得能够单独地选择区域，循环通过不同的项目组合以进行选择，初始选择的扩展/收缩等。根据使用为便于修改而提供的一个或多个细化控件获得的输入来修改初始选择。

现在考虑通过单独地选择区域来进行选择细化的说明性示例，如关于图9至11所描述的。图9总体上在900处示出了根据一个或多个实现方式提供细化工具的示例选择场景。图9中的视图“F”描绘了经由用户界面122 渲染的网页，其示出了网页内的内容的初始选择902。在这种情况下，初始选择902是对网页中所示的文章的一个特定段落的选择。如所讨论的，初始选择902可以触发操作以响应于如在904处表示的选择而暴露细化控件。在所描绘的示例中，视图“G”示出了响应于初始选择902而渲染的细化控件906。细化控件906被配置为弹出菜单元素，其提供与所选内容相关的选项。特别地，细化控件906被表示为弹出条，其具有复制、共享或扩展(例如，修改)选择以及访问帮助的选项。

关于图10表示细化控件的操作。特别地，图10总体上在1000处示出了根据一个或多个实现方式的涉及与细化工具的交互的示例选择场景。视图“H”表示与细化控件906的交互1002以选择扩展选择选项。可以通过触摸输入、触控笔、击键、语音命令等获得交互。响应于交互，发起操作以响应于在1004处表示的交互来暴露可选区域。在所描绘的示例中，视图“I”示出了示例网页，其中通过在此描述的技术在网页中识别的不同区域 1006被划分。在这种情况下，区域再次使用边框或边界框以及复选框来表示，这些允许单独地选择和取消选择区域。在这种情况下，与初始选择902 相关联的内容被表示为已选择，而其他区域被表示为取消选择。

继续进行中的示例，关于图11表示了选择细化。特别地，图11总体上在1100处示出了根据一个或多个实现方式的选择的示例细化。这里，图 11中表示的场景示出了如关于图10所讨论的交互1002之后的视图“I”。再次，假设通过用户界面提供可选区域的细化控件(例如，复选框)获得修改选择的输入。特别地，可以获得细化输入1102以切换在视图“I”中呈现的一个或多个可选区域的选择。在所描绘的示例中，除了与初始选择902 相关联的内容之外，用户还选择与哈巴狗图像相关联的区域。细化输入1102 的结果在视图“J”中表示。一旦设置了选择，就可以指定对选择1104的各种操作，例如复制/粘贴，保存，共享，应用格式化，或以其他方式利用内容的所选部分。

如所指出的，细化控件还可以被配置为通过循环通过项目的不同组合以使用适当的控件来选择和/或扩展/收缩初始选择来促进区域的选择。关于图12至13描述说明性示例。特别地，图12总体上在1200处示出了根据一个或多个实现方式的示例性选择循环场景。网页的一部分1201以一系列视图表示，其表示使用细化控件的初始选择1202的循环。特别地，图12 表示并扩展图标1204，图标1204可以响应于初始选择1202而被暴露为细化控件。扩展图标1204向用户提供可通过图标扩展选择的视觉指示。选择扩展图标使得初始选择1202扩展并包含附加内容。扩展可以根据定义的级别层次结构而发生，例如，对于单词、行、段落、句子、区域、框架等具有不同级别的层次结构。扩展也可以基于使用元素标识符的页面布局，z阶元素或其他特征来控制选择的修改。

如表示的，重复选择示例扩展图标1204使得短语的初始选择1202扩展到句子1206，扩展到区域1208，并扩展到全部1210。此时，继续循环可以使得选择收缩(因为当前所有内容都已选中)。因此，选择所示的图标的功能切换以实现收缩。可选地，扩展图标1204可以在视觉上转换到收缩图标1212，如图12中所示。收缩图标1212可操作以将选择收缩回原始状态，如1214所示，或者返回到较少项目的选择。

在这种情况下，细化控件使得能够循环通过区域和内容项的不同组合。尽管描绘了在一个方向上循环，但是应注意，细化控件可以配置成使得能够在两个方向上循环(例如，扩展或收缩)。例如，可以在适当的阶段暴露扩展图标1204和收缩图标1212，或者可以定义不同类型的交互(例如，1 次点击扩展和2次点击收缩)以使得能够双向地修改选择。也可以使用其他控件，例如显示箭头图标元素，定义特定键盘快捷键，或指定鼠标按钮或键(例如，向上/向下箭头)以驱动对选择的修改。

图13总体上在1300处示出了根据一个或多个实现方式的另一示例选择循环场景。该示例类似于图12的示例，除了在这种情况下，该过程以全选1302命令开始以选择所有内容并且循环通过循环命令1304、1306、1308、 1310，而不是使用在用户界面中暴露的图标或其他控件发生。如所表示的，循环命令通过循环通过网页中识别的区域的不同组合来实现初始选择的扩展和收缩。循环可以在两个方向上发生。循环命令的示例是诸如“ctrl+a”的键盘快捷键，用于最初选择所有内容，然后在重复快捷方式时循环通过选项，如图13所示。不同的键或快捷键可以与在不同方向上循环相关联。例如，向上箭头键可用于在一个方向上循环，而向下箭头键可用于在相反方向上循环。循环命令还可以包括指定的手势或语音命令。本文描述的用于内容选择的各种不同技术、控件和命令可以单独使用或以不同组合使用。例如，除了其他细化控件(例如复选框、弹出菜单、语音命令等)之外，还可以使用关于图13描述的循环命令。

在考虑了根据一个或多个实现方式的前述示例细节和过程之后，现在考虑可以用于实现本文描述的各种技术的示例系统和设备的讨论。

示例系统和设备

图14示出了通常在1400的示例系统，其包括示例计算设备1402，表示可以实现本文描述的各种技术的一个或多个计算系统和/或设备。这通过包括选择模块114来说明，选择模块114如上所述进行操作。计算设备1402 可以是例如服务提供者的服务器、与客户端相关联的设备(例如，客户端设备)、片上系统和/或任何其他合适的计算设备或计算系统。

示出了示例计算设备1402包括处理系统1404、一个或多个计算机可读介质1406，以及一个或多个I/O接口1408，它们彼此通信地耦合。虽然未示出，但是计算设备1402还可以包括系统总线或其他数据和命令传输系统，其将各种组件彼此耦合。系统总线可以包括任何一个或不同总线结构的组合，例如存储器总线或存储器控制器、外围总线、通用串行总线和/或利用各种总线体系结构中的任何总线体系结构的处理器或本地总线。还构想了各种其他示例，例如控制线和数据线。

处理系统1404表示使用硬件执行一个或多个操作的功能。因此，处理系统1404被示为包括可以被配置为处理器、功能块等的硬件元件1410。这可以包括在硬件中实现为专用集成电路或使用一个或多个半导体形成的其他逻辑器件。硬件元件1410不受形成它们的材料或其中采用的处理机制的限制。例如，处理器可以包括半导体和/或晶体管(例如，电子集成电路(IC))。在这样的上下文中，处理器可执行指令可以是电子可执行指令。

计算机可读存储介质1406被示为包括存储器/存储设备1412。存储器/ 存储设备1412表示与一个或多个计算机可读介质相关联的存储器/存储设备容量。存储器/存储组件1412可以包括易失性介质(诸如随机存取存储器 (RAM))和/或非易失性介质(诸如只读存储器(ROM)、闪存、光盘、磁盘等)。存储器/存储组件1412可以包括固定介质(例如，RAM、ROM、固定硬盘驱动器等)以及可移动介质(例如，闪存、可移动硬盘驱动器、光盘等)。计算机可读介质1406可以以各种其他方式配置，如下面进一步描述的。

输入/输出接口1408表示允许用户向计算设备1402输入命令和信息并且还允许使用各种输入/输出设备将信息呈现给用户和/或其他组件或设备的功能。输入设备的示例包括键盘、光标控制设备(例如，鼠标)、麦克风、扫描仪、触摸功能(例如，配置为检测物理触摸的电容或其他传感器)、相机(例如，其可以采用诸如红外频率的可见或不可见波长来识别移动作为不涉及触摸的手势)，等等。输出设备的示例包括显示设备(例如，监视器或投影仪)、扬声器、打印机、网卡、触觉响应设备等。因此，计算设备1402 可以以下面进一步描述的各种方式配置以支持用户交互。

这里可以在软件、硬件元件或程序模块的一般上下文中描述各种技术。通常，这样的模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、元素、组件、数据结构等。这里使用的术语“模块”、“功能”和“组件”通常表示软件、固件、硬件或其组合。这里描述的技术的特征是与平台无关的，意味着可以在具有各种处理器的各种商业计算平台上实现这些技术。

所描述的模块和技术的实现方式可以存储在某种形式的计算机可读介质上或在其上传输。计算机可读介质可以包括可以由计算设备1402访问的各种介质。作为示例而非限制，计算机可读介质可以包括“计算机可读存储介质”和“计算机可读信号介质”。

“计算机可读存储介质”指的是与仅仅信号传输、载波或信号本身相比使得能够实现信息的持久和/或非暂时存储的介质和/或设备。因此，计算机可读存储介质不包括信号本身或信号承载介质。计算机可读存储介质包括诸如以适于存储诸如计算机可读指令、数据结构、程序模块、逻辑元件/ 电路或其他数据之类的信息的方法或技术实现的易失性和非易失性、可移动和不可移动介质和/或存储设备的硬件。计算机可读存储介质的示例可包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字通用盘(DVD)或其他光学存储设备、硬盘、磁带盒、磁带、磁盘存储或其他磁存储设备，或适于存储所需信息并且可由计算机访问的其他存储设备、有形介质或制品。

“计算机可读信号介质”可以指信号承载介质，其被配置为例如经由网络将指令发送到计算设备1402的硬件。信号介质通常可以体现计算机可读指令、数据结构、程序模块或调制数据信号中的其他数据，例如载波、数据信号或其他传输机制。信号介质还包括任何信息传递介质。术语“已调制数据信号”表示以对信号中的信息进行编码的方式设置或改变其一个或多个特性的信号。作为示例而非限制，通信介质包括诸如有线网络或直接有线连接的有线介质，以及诸如声学、RF、红外和其他无线介质的无线介质。

如先前所描述，硬件元件1410和计算机可读介质1406表示以硬件形式实施的模块、可编程器件逻辑和/或固定器件逻辑，其可在一些实施例中用以实施本文描述的技术的至少一些方面，诸如执行一个或多个指令。硬件可以包括集成电路或片上系统的组件、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)以及硅或其他硬件中的其他实现方式。在此上下文中，硬件可以作为执行由硬件实现的指令和/或逻辑定义的程序任务的处理设备以及用于存储用于执行的指令的硬件(例如前面描述的计算机可读存储介质)进行操作。

还可以采用前述的组合来实现本文描述的各种技术。因此，软件、硬件或可执行模块可以实现为在某种形式的计算机可读存储介质上实现和/或由一个或多个硬件元件1410实现的一个或多个指令和/或逻辑。计算设备 1402可以被配置为实现与软件和/或硬件模块相对应的特定指令和/或功能。因此，可以由计算设备1402作为软件执行的模块的实现方式可以至少部分地以硬件实现，例如，通过使用处理系统1404的计算机可读存储介质和/或硬件元件1410。指令和/或功能可以由一个或多个制品(例如，一个或多个计算设备1402和/或处理系统1404)执行/操作，以实现本文描述的技术、模块和示例。

本文描述的技术可以由计算设备1402的各种配置支持，并且不限于本文描述的技术的特定示例。该功能还可以全部或部分地通过使用分布式系统来实现，例如通过如下所述的平台1416在“云”1414上实现。

云1414包括和/或代表用于资源1418的平台1416。平台1416抽象云 1414的硬件资源(例如，服务器)和软件资源的底层功能。资源1418可以包括在远离计算设备1402的服务器上执行计算机处理时可以使用的应用程序和/或数据。资源1418还可以包括通过因特网和/或通过订户网络(例如蜂窝或Wi-Fi网络)提供的服务。

平台1416可以抽象资源和功能以将计算设备1402与其他计算设备连接。平台1416还可以用于抽象资源缩放以提供相应的规模级别以满足对经由平台1416实现的资源1418的需求。因此，在互连设备实施例中，本文描述的功能的实现可以分布在整个系统1400中。例如，功能可以部分地在计算设备1402上实现以及经由抽象云1414的功能的平台1416来实现。示例实现方式：

本文描述的技术的示例实现方式包括但不限于以下示例中的一个或多个的一个或任何组合：

示例1.一种由计算设备实现的方法，该方法包括：检测指示对经由应用程序的用户界面渲染的web文档中包括的内容项的选择的输入；处理所述web 文档以识别所述文档中包含的多个不同的内容区域；经由所述用户界面表示对包括不同的内容区域的指示的内容项的选择；以及经由所述用户界面暴露可操作的功能，以通过改变所述选择以包括识别的区域的不同组合来实现选择的细化。

示例2.示例1的方法，还包括响应于用户与经由所述用户界面暴露的功能的交互以选择和取消选择不同的区域来改变选择。

示例3.示例1的方法，还包括对选择的内容项执行指定操作。

示例4.示例1的方法，其中，应用程序包括web浏览器。

示例5.示例1的方法，其中，指示内容项的选择的输入包括全选命令。

示例6.示例1的方法，其中，所述不同的内容区域的指示包括围绕区域中的每个区域放置的边框。

示例7.示例1的方法，其中，经由所述用户界面的实现所述选择的细化的可操作的功能包括与内容区域中的每个所述内容区域相关联的切换控件。示例8.示例1的方法，其中，经由所述用户界面的实现所述选择的细化的可操作的所述功能包括控制元件，所述控制元件可操作以实现循环通过内容区域的不同组合以便包含在所述选择中。

示例9.示例1的方法，其中，处理所述web文档以识别多个不同的内容区域包括解析所述web文档的底层结构以识别所述web文档中的不同的离散区域。

示例10.如示例1所述的方法，其中，处理所述web文档以识别多个不同的内容区域包括视觉地分析在所述web文档当被渲染而显现时的所述web文档以基于所述视觉分析来检测不同的离散区域。

示例11.如示例1所述的方法，其中，识别的内容区域被配置为能够单独选择的内容的部分。

示例12.示例1的方法，其中，通过与计算设备相关联的输入机制来检测指示内容项的选择的输入，所述输入机制包括用于手势检测的手势敏感传感器和设备、触摸输入、键盘输入和命令、鼠标输入、触控笔输入或用于语音命令的麦克风中的一个或多个。

示例13.一种或多种计算机可读存储介质，包括存储在其上的指令，响应于计算设备的执行，使得计算设备实现选择模块，该选择模块被配置为执行包括以下操作的操作：检测指示对包括在通过应用程序的用户界面渲染的 web文档内的内容项的选择的输入；响应于选择，通过用户界面暴露细化控件，该细化控件包括发起修改选择的选项；并且响应于用户与细化控件的交互以选择和取消选择文档中包含的不同的内容区域来改变选择。

示例14.如示例13中所述的一个或多个计算机可读存储介质，还包括响应于检测到输入来处理web文档以识别内容区域并将识别的区域配置为可单独选择的内容的部分。

示例15.如示例13中所述的一个或多个计算机可读存储介质，其中，所述细化控件包括弹出菜单元素，所述弹出菜单元素包括可用于所选内容项的选项。

示例16.如示例13中所述的一个或多个计算机可读存储介质，其中，细化控件包括可选择以通过循环通过对应于不同区域的不同组合的选择的不同选项来扩展和收缩选择的图标。

示例17.一种计算设备，包括：处理系统；一个或多个计算机可读介质，存储能通过所述处理系统执行的指令以执行操作，所述操作包括：处理通过应用程序访问的web文档以识别所述文档中的不同的内容区域；以及响应于通过应用程序获得的输入以在所述web文档内选择内容项，通过应用程序暴露可操作以通过切换对所识别的不同区域的选择来细化选择的功能。示例18.如示例17所述的计算设备，其中，响应于经由所述应用程序获得的输入以进行所述选择，按需发生对所述web文档的处理。

示例19.示例17的计算设备，其中，当由所述应用程序加载所述web文档时，发生对所述web文档的处理。

示例20.如示例17所述的计算设备，其中，对所述web文档的处理包括：解析所述web文档的底层结构以识别所述web文档中的不同的离散区域；以及视觉地分析在web文档当被渲染而显现时的web文档以基于视觉分析检测不同的离散区域。

结论

尽管已经用结构特征和/或方法动作专用的语言描述了技术，但应理解，所附权利要求书中定义的主题不必限于所描述的具体特征或动作。而是，公开了特定特征和动作作为实现所要求保护的主题的示例形式。

Claims (14)

1.一种由计算设备实现的方法，所述方法包括：

检测指示对经由应用程序的用户界面渲染的web文档中包括的内容项的选择的输入；

处理所述web文档以识别所述文档中包含的多个不同的内容区域；

经由所述用户界面表示对包括所述不同的内容区域的指示的所述内容项的选择；以及

经由所述用户界面暴露可操作的功能，以实现对所述选择的细化，其中，所述功能包括控制元件，其中所述控制元件包括扩展图标，所述扩展图标响应于所述选择被暴露为细化控件，以及选择所述扩展图标使得所述选择根据定义的级别层次结构来扩展并包含附加内容，其中重复选择所述扩展图标使得所述选择扩展至全部，在此时继续循环使得所述选择收缩。

2.如权利要求1所述的方法，还包括响应于用户与经由所述用户界面暴露的所述功能的交互以选择和取消选择不同的区域来改变所述选择。

3.如权利要求1所述的方法，还包括对选择的内容项执行指定操作。

4.如权利要求1所述的方法，其中，所述应用程序包括web浏览器。

5.如权利要求1所述的方法，其中，指示对内容项的选择的所述输入包括全选命令。

6.如权利要求1所述的方法，其中，所述不同的内容区域的指示包括围绕所述区域中的每个区域放置的边框。

7.如权利要求1所述的方法，其中，经由所述用户界面可操作以实现对所述选择的细化的所述功能包括与所述内容区域中的每个相关联的切换控件。

8.如权利要求1所述的方法，其中，处理所述web文档以识别多个不同的内容区域包括解析所述web文档的底层结构以识别所述web文档中的不同的离散区域。

9.如权利要求1所述的方法，其中，处理所述web文档以识别多个不同的内容区域包括当所述web文档在被渲染而显现时视觉地分析所述web文档以基于视觉分析来检测不同的离散区域。

10.如权利要求1所述的方法，其中，识别的内容区域被配置作为能够单独地选择的内容的部分。

11.一种计算设备，包括：

处理系统；

一个或多个计算机可读介质，存储能够经由所述处理系统执行的指令以执行包括以下的操作：

处理经由应用程序访问的web文档以识别所述文档中的不同的内容区域；以及

响应于经由所述应用程序获得的输入以在所述web文档内选择内容项，经由所述应用程序暴露功能，所述功能可操作以细化所述选择，其中，所述功能包括控制元件，其中所述控制元件包括扩展图标，所述扩展图标响应于所述选择被暴露为细化控件，以及选择所述扩展图标使得所述选择根据定义的级别层次结构来扩展并包含附加内容，其中重复选择所述扩展图标使得所述选择扩展至全部，在此时继续循环使得所述选择收缩。

12.如权利要求11所述的计算设备，其中，响应于经由所述应用程序获得的所述输入以进行所述选择，按需发生对所述web文档的处理。

13.如权利要求11所述的计算设备，其中，当由所述应用程序加载所述web文档时，发生对所述web文档的处理。

14.如权利要求11所述的计算设备，其中，对所述web文档的处理包括：

解析所述web文档的底层结构以识别所述web文档中的不同的离散区域；以及

当所述web文档在被渲染而显现时视觉地分析所述web文档以基于视觉分析检测不同的离散区域。

Images