CN105518604A - 对套索选择的反馈 - Google Patents

Abstract

提供了在选择提交之前指示出图形元素被包括在选择边界内的视觉反馈。视觉反馈可被显示为指示出一旦套索选择操作完成哪个(些)图形元素可被选择。也就是说，视觉反馈在选择正被作出的同时被提供。因此，用户可能够在选择提交之前看到哪些图形元素可被选择。视觉反馈可包括各种视觉指示，诸如提供围绕所选图形元素的边界或突出显示、对所选图形元素加阴影或着色、将所选图形元素动画化、提供所选图形元素的数量的指示、提供对图形元素的选择的渐进展开的指示、或提供图形元素的边界框的指示。

Description

对套索选择的反馈

背景

现代用户使用各种软件应用来执行各种各样的任务，例如写、计算、绘制、组织、准备演示、发送和接收电子邮件、制作音乐等等。通常，用户可能希望选择文档中一个或多个所显示出的图形元素。许多应用提供用于使用户能够围绕他/她希望选择的(一个或多个)图形元素绘制选择边界的功能。有时被称为套索选择功能，用户可点击/触摸用户界面(UI)，并围绕该(一个或多个)图形元素拖动套索或选择边界。当用户释放点击/触摸时，已被选择的所选图形元素的可视化可被显示。

尽管通过点击/触摸以及拖动操作进行的当前图形元素选择(在此被称为套索选择)具有许多优点，但是就哪些图形元素可能落在选择范围内而言，用户可能并不清楚。也就是说，在选择操作完成之前，用户可能并不确切地知道他/她选择了哪些图形元素。例如，用户认为他/她可能已经选择了的图形元素可被未被选择，而直到用户完成该选择为止，用户可能没有意识到该未被选择的图形元素。此外，通常在允许对图形元素进行部分选择的情况下，用户可能没有意识到他/她正在选择他/她可能不希望选择的图形元素；直到他/她完成该选择为止，他/她可能没有意识到该无意选择的图形元素。

本发明正是关于这些以及其他考虑因素而被作出的。

概述

提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。

本发明的实施例通过在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈来解决上述和其他问题。所述视觉反馈可包括各种视觉指示。例如，所述视觉反馈可包括提供围绕所选图形元素的边界或突出显示、对所选图形元素加阴影或着色、将所选图形元素动画化、提供所选图形元素的数量的指示、提供对图形元素的选择的渐进展开(progressivedisclosure)的指示、提供图形元素的边界框的指示等。

一个或多个实施例的细节在附图和以下描述中阐述。根据对以下详细描述的阅读和对相关联附图的审阅，其他特征和优点将是显而易见的。应当理解，以下详细描述只是解释性的并且不限制如要求保护的本发明。

附图简述

合并在本公开中且构成本公开的一部分的附图解说了本发明的各个实施例。在附图中：

图1是用于在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈的系统的一个实施例的框图；

图2A、2B和2C是在选择提交之前不提供选择边界的指示的情况下对图形元素的选择的示例图示；

图3是在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈的示例图示；

图4A和4B是在选择提交之前不提供选择边界的指示的情况下对图形元素的选择的示例图示；

图4C是根据一实施例通过动画以及对所选图形元素的数量的指示来在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈的示例图示；

图4D是在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈以及指示出哪些图形元素属于一组的组指示的示例图示；

图5A是根据一实施例通过选择的渐进展开来在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈的示例图示；

图5B是根据一实施例在选择提交之前提供指示出图形元素被包括在选择边界内且包括图形元素的边界框的指示的视觉反馈的示例图示；

图6是在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈的方法的流程图；

图7是例示出通过其可实践本发明的实施例的计算设备的示例物理组件的框图；

图8A和8B是通过其可实践本发明的实施例的移动计算设备的简化框图；以及

图9是其中可实践本发明的实施例的分布式计算系统的简化框图。

详细描述

如上简要描述的，本发明的实施例针对在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈。以下详细描述参考附图。在任何可能的地方，相同的附图标记在附图和以下描述中用于指代相同或相似的元素。尽管描述了本发明的实施例，但是修改、改编、以及其他实现是可能的。例如，可对附图中所例示出的元素进行替换、添加或修改，并且可通过对所公开的方法替换、重排或添加阶段来修改本文中所描述的方法。因此，以下详细描述不限制本发明，而是相反，本发明的适当范围由所附权利要求定义。

现在参考其中相同的附图标记表示相同的元素的附图，将描述各个实施例。图1是例示出根据各种实施例用于在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈的系统架构100的框图。该系统架构100包括计算设备110。计算设备110可以是用于执行应用120以执行各种各样的任务的各种类型的计算设备(例如，平板计算设备、台式计算机、移动通信设备、膝上型计算机、膝上型/平板混合计算设备、大屏幕多点触摸显示器、游戏设备、智能电视、或者其他类型的计算设备)之一。

用户102可利用计算设备110上的应用120用于各种各样的任务，可包括例如写、计算、绘制、组织、准备演示，发送和接收电子邮件、记录和组织笔记、制作音乐等。应用120可包括胖客户机应用120A或者可包括瘦客户机应用120B(即，web应用)，胖客户机应用120A可被本地地存储在计算设备110上，瘦客户机应用可驻留在远程服务器130上并可通过网络140(诸如因特网或内联网)来访问。瘦客户机应用可被托管在浏览器控制的环境中或者以浏览器支持的语言编码，并且依赖于通用web浏览器来渲染可在计算设备110上执行的应用。

计算设备110可被配置成接收内容122供在显示器126(其可包括触摸屏显示器)上呈现。例如，内容122可包括文档，文档包括一个或多个所显示出的图形元素。

应用120可被配置成使用户102能够在计算设备110上使用定点设备(例如，鼠标、笔/指示笔等)和/或利用传感器124(例如，触摸传感器、加速度计、悬停、面部识别、语音识别、光传感器、邻近传感器、陀螺仪、倾斜传感器、GPS等)以经由多个输入模式与内容122交互。为了辅助用户定位和利用给定应用120的功能，可提供包含多个可选功能控件的用户界面(UI)。

现在参考图2A，包括多个图形元素204的文档202的示例图示被示为显示在应用120的UI中。在该示例中，应用120是幻灯片演示应用。用户102可能希望选择文档202中的一个或多个图形元素204。为了发起选择操作，用户102可通过利用定点设备(在该示例中是鼠标)来移动光标206并在UI中的某一位置上点击，从该位置处要开始套索选择。

根据一些实施例以及如本文所使用的，术语套索选择可被用于描述区域选择以及自由形式选择。例如，利用区域选择，在用户102在UI中从其要开始套索选择的某一位置上点击之后，用户102可执行拖动手势，将光标206移动到他/她希望选择的图形元素204之上。相应地且如图2B中所例示，指示出选择范围的选择边界208可被显示为在初始套索选择位置处开始并随着拖动手势移动得更远离该初始套索选择位置而变得放大。利用自由形式选择，在用户102在UI中从其要开始套索选择的某一位置上点击之后，他/她可绕他/她希望选择的(一个或多个)图形元素204画曲线。

图2B中所例示出的示例是可在本发明的一些实施例之前被显示的示例。如可看到的那样，没有关于当用户102完成套索选择之后什么图形元素204可被选择的视觉反馈可被提供。例如，用户102可能认为他/她正在选择图形元素204A、204B、204C、204G、204H、204I、204J和204M；然而，如图2C中的选择指示器210所例示的那样，选择范围(选择边界208)内所包括的图形元素204可能不包括图形元素204G。用户102可能在他/她已完成该选择操作之后意识到这一点。因此，他/她可能不得不放弃该选择并重新尝试套索选择以包括他/她正试图选择的全部图形元素204。

现在参考图3，例示出根据一些实施例在选择提交之前对图形元素204的选择的视觉反馈310。如上简要描述的那样，一些实施例提供显示指示出哪个(些)图形元素204被包括在选择范围(选择边界208)内且将在选择提交之际被选择的视觉反馈310。图3中所例示的示例示出在用户102正在作出对图形元素204的套索选择时显示出的选择边界208。尽管替代选择选项可被提供，但是在该示例中，选择边界208可能需要完全包围图形元素204以使其被选择。如所例示且根据一些实施例，在套索选择操作期间，视觉反馈310可被提供以指示出在选择提交之际图形元素204A、204B、204H、204I和204M将被选择。因此，用户102可能不会对什么将被包括在选择内以及什么将不被包括在选择内不清楚或混淆。

现在参考图4A，计算设备110(在该图示中是平板计算设备)被示为具有包括应用120的UI中所显示的多个图形元素204的文档202。在该示例中，应用120是绘图应用。计算设备110的显示表面126可以是触摸屏402，触摸屏402可操作以使得用户102能够经触摸输入与内容122交互。用户102可能希望选择文档202中的一个或多个图形元素204。为了发起选择操作，用户102可触摸406UI中从其要开始套索选择的某一位置，并拖动他的手指(或其他触摸设备)穿过显示表面126以执行对图形元素204的套索选择。

尽管替代选择选项可被提供，但是在该示例中，如果图形元素204部分地位于选择边界208内则该图形元素可被选择。也就是说，选择边界208可能不需要完全包围图形元素204以使其被选择。例如，考虑用户102可能希望选择图形元素204N和204O；然而，在他/她正在执行套索选择操作时，选择边界2308可能部分地覆盖其他图形元素(如图形元素204P、204Q和204R)。

图4A中所例示出的示例是可在本发明的一些实施例之前被显示的示例。如可看到的那样，没有关于当用户102完成套索选择之后什么图形元素204可被选择的视觉反馈可被提供。用户102可能没有意识到可通过部分选择来选择图形元素204，或者可能没有意识到其他图形元素204P、204Q和204R被部分选择。因此，当用户102释放触摸并因此完成套索选择时，他/她可能接着发觉哪些图形元素204N-204R已被选择，如图4B中所例示。考虑他/她仅仅意图选择图形元素204N和204O，该用户可能不得不放弃该选择并重新尝试套索选择以仅包括他/她希望选择的图形元素204。

现在参考图4C，例示出根据一些实施例在选择提交之前对图形元素204N-R的选择的视觉反馈310。在图4C中所例示的示例中，视觉反馈310可包括选择范围(选择边界208)内所包括的将在选择提交之际被选择的图形元素204N-R的动画。例如，图形元素204N-R可被显示为摆动、闪烁等。因此，在完成选择之前，用户102可能不会对什么将被包括在选择内以及什么将不被包括在选择内不清楚或混淆，且用户可能够对选择区域作出任何必要的调整使得他/她能仅选择他/她希望选择的图形元素204N、204O。

根据一些实施例，其他类型的视觉反馈310可被提供。例如且如图4C中所例示，指示出在套索选择提交之际将被选择的图形元素204的数量的文本通知410可被显示。知道他/她仅意图选择两个图形元素204N、204O的用户102可看到指示出在套索选择提交之际将有5个图形元素204N-R将被选择的文本通知410，并可被告警关于他/她正在无意地选择其他图形元素204P、204Q、204R的事实。

有时多个图形元素204可被组合成组412。当图形元素被组合成组412时，组412可被当作单个元素。当用户试图在属于组412的一图形元素204周围执行套索选择时，如果他/她没有捕捉组412中的所有图形元素204，则该图形元素204可不被选择。替代地，在允许部分选择的情况下，他/她可围绕一图形元素204执行套索选择，且在没有意识到它属于组412的情况下，整个组412可能被无意地选择。

图4D示出一示例，用户102试图通过套索选择来选择两个图形元素204N和204O，但是图形元素之一204N属于由图形元素204N和204P组成的组412。在该示例中，用户102可能没有意识到哪些图形元素204属于该组412。如果选择设置被设置为使得图形元素204必须被完全包围以使其被选择，则用户102可能没有意识到图形元素204N是组412的一部分，试图选择组412的图形元素204N，且可能不理解为什么它未被选择。替代地，他/她可能意识到组412；然而他/她可能不确切地知道组412由哪些图形元素204N、P组成。例如，用户102可能试图执行对多个图形元素204的选择，认为他/她已经选择了组412中的所有图形元素204；然而，如果他/她还未捕捉组412中的所有图形元素204，则选择边界208内的图形元素204可能未被选择。

在选择提交之前提供对图形元素204的选择的视觉反馈310可帮助用户102确定哪些图形元素204属于组412，和/或组中的所有图形元素204何时位于选择边界208内。根据一实施例以及如图4D中所例示，关于组412由哪些图形元素204组成的指示(在此被称为组指示414)可被显示。例如，图形元素204N和204P可被组合成组412。用户102可执行对图形元素204N和204O的套索选择；然而，如所例示，可仅对图形元素204O显示视觉反馈310(例如动画)，因为图形元素204N是组412的一部分，而组412中的所有图形元素204都不被包括在选择边界208内。

如所述，组指示414可被提供。在图4D中所例示的示例中，组指示414可被显示为属于组412的图形元素204N、204P的突出显示或加阴影。如应理解的，可用各种各样的方式来显示组的指示(即组指示414)。通过提供组指示414，用户102可更好地能够选择他/她希望选择的图形元素204。

根据一些实施例，渐进视觉反馈展开可被提供。在用户102正在执行对图形元素204S的套索选择时，例如且如图5A中被例示为触摸406和在图形元素204S上的拖动手势，渐进反馈510可被提供。渐进反馈510可包括对用户102的关于图形元素204S的什么部分当前被包括在选择范围(选择边界208)内的视觉反馈。当选择设置被设置成使得图形元素204必须被完全包围以使其被选择时，渐进反馈510可帮助用户102看到图形元素204中还有多少他/她需要包围以使其被选择。当选择设置被设置成使得图形元素204可被部分地选择以使其被选择时，渐进反馈510可帮助用户102看到选择边界208可在哪里触及他/她不意图选择的图形元素204。

根据一些实施例，在选择提交之前提供对图形元素的选择的视觉反馈可包括在用户102正在执行对图形元素204T的套索选择时显示图形元素204的边界框512，如图5B中所例示。当用户102正在围绕图形元素204T拖动选择边界208时，他/她可更好地能够确保他/她正在选择他/她正试图选择的图形元素204T，因为当选择设置被设置成使得图形元素204必须被完全包围以使其被选择时，用户能够看到并验证图形元素204T的边界框512被包围在选择边界208内。当选择设置被设置成使得图形元素204可被部分选择以使其被选择时，通过能够看到选择边界208不与他/她不想要选择的图形元素204的任何边界框512相重叠，用户102可更好地能够确保他/她不在选择他/她不意图选择的图形元素204。

图6是示出用于在选择提交之前提供指示出图形元素204被包括在选择边界208内的视觉反馈的方法600的一个实施例的流程图。方法600在操作602开始，并继续至操作604，在操作604接收套索选择的指示。如上所述，套索选择可包括围绕他/她希望选择的图形元素204或多个图形元素绘制选择边界208。可通过各种各样的方法来绘制选择边界208。例如，如果用户102正在使用诸如鼠标之类的定点设备，他/她可将指针206放在他/她想要选择的(一个或多个)图形元素204左上方，然后拖动以创建围绕该(一个或多个)图形元素204的选择边界208。

方法600可任选地进行到操作606，在操作606图形元素204的边界框512可被显示出。如上文在与图5B相关联的描述中所述，显示图形元素204的边界框512可帮助用户102看到他/她可能需要将什么区域包括在他的套索选择内以选择图形元素204，或者看到他/她可能需要避开什么区域以避免选择他/她不希望选择的图形元素204。

方法600可继续至判决操作608，在操作608作出关于是否有图形元素204在选择边界208内的判断。确定图形元素204是否在选择边界208内可包括：在选择设置被设置成图形元素204必须被完全包围以使其被选择的情况下确定图形元素204是否完全在选择边界208内，或者在选择设置被设置成图形元素204可部分地在选择边界208内以使其被选择的情况下确定图形元素204的一部分是否在选择边界208内。

如果作出没有图形元素204在选择边界208内的判断，则方法600可任选地继续至操作610，在操作610渐进反馈510可被显示。如上关于图5A所描述的那样，渐进反馈510可包括对用户102的关于图形元素204S的什么部分当前被包括在选择范围(选择边界208)内的视觉反馈。方法600然后可返回至操作604，其中用户102继续执行套索选择。

如果在判决操作608处作出图形元素204在选择范围(选择边界208)内的判断，则方法600可进行至操作612，在操作612与哪个(些)图形元素204在选择范围(选择边界208)内且将在套索选择提交之际被选择相关联的视觉反馈310可被显示。如所述，视觉反馈310可包括各种类型的反馈，包括但不限于：提供围绕所选图形元素204的边界或突出显示、对所选图形元素204加阴影或着色、将所选图形元素204动画化、或提供指示出在选择提交之际将被选择的图形元素204的数量的文本通知410。

方法600可返回至操作604，其中用户102继续作出套索选择，或者方法可进行至操作614，在操作614可接收到套索选择的提交的指示。例如，套索选择的提交可在拖动手势之后用户102释放鼠标点击时，或者在用户将他的手指或其他触摸输入设备提离显示表面126时发生。

在套索选择完成时，方法600可进行至操作616，在操作616关于所选图形元素204的视觉指示210可被显示。所选图形元素204应与操作612处与视觉反馈310一起示出的图形元素204相同。用户102然后可对所选图形元素204执行各种功能之一，诸如修改、删除、复制、或裁剪。方法600可在操作698处结束。

尽管已经在结合在计算机上的操作系统上运行的应用程序执行的程序模块的一般上下文中描述了本发明，但是本领域技术人员将认识到本发明还可结合其他程序模块实现。一般而言，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、组件、数据结构及其他类型的结构。

本文描述的实施例和功能可通过多种计算系统来操作，包括但不限于台式计算机系统、有线和无线计算系统、移动计算系统(如移动电话、上网本、图形输入板或平板型计算机、笔记本计算机、和膝上型计算机)、手持设备、多处理器系统、基于微处理器或可编程消费电子产品、小型计算机、以及大型计算机。

另外，本文中所描述的实施例和功能可在分布式系统(例如，基于云的计算系统)上操作，其中应用功能、存储器、数据存储和检索、以及各种处理功能可在分布式计算网络(诸如因特网或内联网)上彼此远程地操作。用户界面以及各种类型的信息可经由机载计算设备显示器或者经由与一个或多个计算设备相关联的远程显示单元显示。例如，用户界面以及各种类型的信息可显示并且在用户界面以及各种类型的信息在其上投影的墙面上交互。与通过其可实践本发明的实施例的多个计算系统的交互包括按键输入、触摸屏输入、语音或其他音频输入、其中相关联的计算设备配备有用于捕捉和解释用户手势以控制计算设备的功能的检测(例如，相机)功能的手势输入等。

图7-9以及相关联的描述提供了对其中可实践本发明的实施例的各种操作环境的讨论。然而，参考图7-9所例示和讨论的设备和系统是为了示例和举例说明的目的，并且不限制本文中所描述的可用于实践本发明的实施例的巨大数量的计算设备配置。

图7是例示出通过其可实践本发明的实施例的计算设备700的物理组件(即，硬件)的框图。以下所述的计算设备组件可适合于以上所述的计算设备。在基本配置中，计算设备700可包括至少一个处理单元702以及系统存储器704。取决于计算设备的配置和类型，系统存储器704可包括但不限于易失性存储(例如，随机存取存储器)、非易失性存储(例如，只读存储器)、闪存、或者此类存储器的任何组合。系统存储器704可包括操作系统705和适合于运行软件应用120的一个或多个程序模块706。例如，操作系统705可适合于控制计算设备700的操作。此外，可结合图形库、其他操作系统、或者任何其他应用程序来实践本发明的实施例，并且这些实施例不限于任何特定的应用或系统。该基本配置在图7中由虚线708内的那些组件例示出。计算设备700可具有附加特征或功能。例如，计算设备700也可以包括附加的数据存储设备(可移动和/或不可移动)，诸如磁盘、光盘或带。此类附加存储在图7中由可移动存储设备709和不可移动存储设备710例示。

如上所声明的，大量程序模块和数据文件可被存储在系统存储器704中。尽管在处理单元702上执行，但是程序模块706可执行包括但不限于图6中所例示的方法600的各阶段中的一个或多个阶段的过程。根据本发明的实施例可使用的其他程序模块可包括应用120，诸如电子邮件和联系人应用、文字处理应用、电子表格应用、数据库应用、幻灯片演示应用、绘图或计算机辅助应用等。

此外，可在电气电路中实践本发明的实施例，该电气电路包括离散电子元件、包含逻辑门的封装或集成电子芯片、利用微处理器或者在包含电子元件或微处理器的单个芯片上的电路。例如，可经由片上系统(SOC)实践本发明的实施例，其中图7中所例示的组件中的每一或许多组件可被集成到单个集成电路上。此类SOC设备可包括一个或多个处理单元、图形单元、通信单元、系统虚拟化单元、以及各种应用功能，所有这些单元被集成(或“烧录”)到芯片基板上，作为单个集成电路。在经由SOC操作时，在此描述的与在选择提交之前提供指示出图形元素被包括在选择边界内的视觉反馈有关的功能可以经由在单个集成电路(芯片)上与计算设备700的其他组件集成在一起的专用逻辑来操作。还可使用能够执行逻辑操作(诸如举例而言，与、或、以及非)的其他技术来实践本发明的实施例，这些技术包括但不限于机械、光学、流体和量子技术。另外，可在通用计算机内或者在任何其他电路或系统中实践本发明的实施例。

计算设备700还可具有一个或多个输入设备712，诸如键盘、鼠标、笔、声音输入设备、触摸输入设备等。还可包括(一个或多个)输出设备714，诸如显示器、扬声器、打印机等。前述设备是示例，并且可使用其他设备。计算设备700可包括允许与其他计算设备718通信的一个或多个通信连接716。合适的通信连接716的示例包括但不限于RF发射机、接收机、和/或收发机电路系统、通用串行总线(USB)、并行和/或串行端口。

如本文中所使用的术语计算机可读介质可包括计算机存储介质。计算机存储介质可包括以用于存储信息(诸如计算机可读指令、数据结构、或者程序模块)的任何方法和技术实现的易失性和非易失性、可移除和不可移除介质。系统存储器704、可移动存储设备709、以及不可移动存储设备710都是计算机存储介质示例(即，存储器存储)。计算机存储介质可包括RAM、ROM、电可擦除只读存储器(EEPROM)、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光学存储、磁带盒、磁带、磁盘存储或其他磁存储设备、或者可用于存储信息且可由计算设备700访问的任何其他制品。任何此类计算机存储介质可以是计算设备700的一部分。计算机存储介质不包括载波或其他传播或已调数据信号。

通信介质由诸如载波或其他传输机制等已调制数据信号中的计算机可读指令、数据结构、程序模块或其他数据来体现，并包括任何信息传递介质。术语“已调制数据信号”可以描述以对该信号中的信息进行编码的方式设定或者改变其一个或多个特征的信号。作为示例而非限制，通信介质包括诸如有线网络或直接线连接等有线介质，以及诸如声学、射频(RF)、红外线和其他无线介质等无线介质。

图8A和8B例示出通过其可实践本发明的实施例的移动计算设备800，例如，移动电话、智能电话、平板个人计算机、膝上型计算机等。参考图8A，例示出了用于实现各实施例的移动计算设备800的一个实施例。在一基本配置中，移动计算设备800是具有输入元件和输出元件两者的手持式计算机。移动计算设备800通常包括显示器805以及允许用户将信息输入到移动计算设备800中的一个或多个输入按钮810。移动计算设备805的显示器800也可充当输入设备(如触摸屏显示器)。如果包括在内，则可选的侧输入元件815允许进一步的用户输入。侧输入元件815可以是旋转开关、按钮、或任何其他类型的手动输入元件。在替代实施例中，移动计算设备800可结合更多或更少的输入元件。例如，在某些实施例中，显示器805可以不是触摸屏。在又一替代实施例中，移动计算设备800是诸如蜂窝电话之类的便携式电话系统。移动计算设备800还可包括可选的小键盘835。可选的小键盘835可以是物理小键盘或者在触摸屏显示器上生成的“软”小键盘。在各个实施例中，输出元件包括用于示出图形用户界面(GUI)的显示器805、视觉指示器820(如发光二极管)、和/或音频换能器825(如扬声器)。在某些实施例中，移动计算设备800结合振动换能器来向用户提供触觉反馈。在又一实施例中，移动计算设备800结合诸如音频输入(如话筒插孔)、音频输出(如耳机插孔)、以及视频输出(如HDMI端口)之类的输入和/或输出端口，用于将信号发送到外部设备或从外部设备接收信号。

图8B是例示出移动计算设备的一个实施例的架构的框图。即，移动计算设备800可结合一系统(即架构)802以实现某些实施例。在一个实施例中，系统802被实现为能够运行一个或多个应用(如浏览器、电子邮件、日历、联系人管理器、消息收发客户端、比赛、以及媒体客户端/播放器)的“智能电话”。在某些实施例中，系统802被集成为计算设备，诸如集成的个人数字助理(PDA)和无线电话。

一个或多个应用程序120可被加载到存储器862中并在操作系统864上或与操作系统864相关联地运行。应用程序的示例包括电话拨号程序、电子邮件程序、个人信息管理(PIM)程序、文字处理程序、电子表格程序、因特网浏览器程序、消息通信程序等等。系统802还包括存储器862内的非易失性存储区868。非易失性存储区868可被用于存储在系统802断电的情况下不会丢失的持久信息。应用程序120可使用信息并将信息存储在非易失性存储区868中，如电子邮件应用使用的电子邮件或其他消息等。同步应用(未示出)也驻留于系统802上且被编程为与驻留在主机计算机上的对应的同步应用交互，以保持非易失性存储区868中存储的信息与主机计算机处存储的相应信息同步。如应当理解的，其他应用也可被加载到存储器862并在移动计算设备800上运行。

系统802具有可被实现为一个或多个电池的电源870。电源870还可包括外部功率源，如补充电池或对电池充电的AC适配器或加电对接托架。

系统802还可包括执行发射和接收无线电频率通信的功能的无线电872。无线电872便于经由通信载波或服务提供者在系统802和“外部世界”之间的无线连接。来往无线电872的传输是在操作系统864的控制下进行的。换言之，无线电872接收的通信可通过操作系统864传播到应用程序120，反之亦然。

可以使用视觉指示器820来提供视觉通知和/或可以使用音频接口874来通过音频换能器825产生可听通知。在所示实施例中，视觉指示器820是发光二极管(LED)，而音频换能器825是扬声器。这些设备可直接耦合到电源870，使得当被激活时，即使为了节省电池功率而可能关闭处理器860和其它组件，它们也保留一段由通知机制指示的保持通电时间。LED可被编程为无限地保持通电，直到用户采取动作指示该设备的通电状态。音频接口874用于向用户提供听觉信号并从用户接收听觉信号。例如，除了被耦合到音频换能器825之外，音频接口874还可被耦合到话筒来接收可听输入，例如便于电话通话。根据各本发明的各实施例，话筒也可充当音频传感器来便于对通知的控制，如下文将描述的。系统802可进一步包括允许机载相机830的操作来记录静止图像、视频流等的视频接口876。

实现系统802的移动计算设备800可具有附加特征或功能。例如，移动计算设备800还可包括附加数据存储设备(可移动和/或不可移动)，例如磁盘、光盘或磁带。这种附加存储在图8B中用非易失性存储区868例示出。

由移动计算设备800生成或捕捉的且经系统802存储的数据/信息可如上所述被本地存储在移动计算设备800上，或数据可被存储在可由设备通过无线电872或通过移动计算设备800和与移动计算设备800相关联的一分开的计算设备之间的有线连接访问的任何数量的存储介质上，该计算设备如例如因特网之类的分布式计算网络中的服务器计算机。如应理解的，此类数据/信息可经移动计算设备800、经无线电872或经分布式计算网络来被访问。类似地，可以在根据熟知的数据/信息转移和存储装置(包括电子邮件和协同数据/信息共享系统)的用于存储和使用的计算设备之间容易地转移此类数据/信息。

图9例示出如上所述的一种用于提供经改进的动态用户界面的系统的架构的一个实施例。与应用120相关联地进行开发、交互或编辑的内容可被存储在不同的通信信道或其他存储类型中。例如，可使用目录服务922、web门户924、邮箱服务926、即时消息收发存储928、或者社交联网站点930来存储各种文档。应用120可使用用于允许数据利用的这些类型的系统等中的任一种系统，如此处所描述的。服务器130可向客户机提供应用120。作为一个示例，服务器130可以是通过web提供应用120的web服务器。服务器130可在web上通过网络140向客户机提供应用120。作为示例，客户机计算设备可被实现并被具体化在个人计算机905A、平板计算设备905B和/或移动计算设备(例如智能电话)905C、或其他计算设备110中。客户机计算设备905A、905B、905C、110的这些实施例中的任何实施例可从存储916获得内容。

例如，以上参考根据本发明的实施例的方法、系统和计算机程序产品的框图和/或操作解说来描述本发明的实施例。框中所注明的各功能/动作可以按不同于任何流程图所示的次序出现。例如，取决于所涉及的功能/动作，连续示出的两个框实际上可以基本上同时执行，或者这些框有时可以按相反的次序来执行。

本申请中提供的一个或多个实施例的描述和说明不旨在以任何方式限制或约束如权利要求所要求保护的发明范围。本申请中提供的实施例、示例和细节被认为是足以传达所有权，且使得他人能够制作并使用所要求保护的发明的最佳模式。所要求保护的发明不应被理解为限制于本申请中所提供的任何实施例、示例或细节。不管是以组合的方式还是分开的方式示出和描述，各种特征(结构上的和方法逻辑上的)旨在被选择性地包括或忽略，以产生具有特定的特征集的实施例。在被提供本申请的描述和说明的情况下，本领域的技术人员能够想象到落在所要求保护的发明的更宽泛方面以及本申请中所具体化的一般发明概念的精神内的替代实施例并不背离该更宽泛的范围。

Claims (10)

1.一种用于在选择提交之前提供图形元素被包括在选择边界内的指示的方法，所述方法包括：

在显示表面上的图形用户界面中显示一个或多个图形元素；

在显示表面上的第一点处接收一选择的指示；

接收在所述显示表面上在所显示出的图形元素中的一个或多个图形元素的至少一部分上或围绕所述至少一部分的拖动手势的指示；

响应于在所述第一点处的所述选择以及在所述显示表面上在所显示出的图形元素中的一个或多个图形元素的至少一部分上或围绕所述至少一部分的拖动手势，显示围绕由所述选择和拖动手势所界定的区域的选择边界；

确定一图形元素在所述选择边界内；以及

响应于所述确定，显示与该图形元素相关联的指示出该图形元素被包括在所述选择边界内的视觉反馈。

2.如权利要求1所述的方法，其特征在于，在显示表面上的图形用户界面中显示一个或多个图形元素包括显示被组合成组的多个图形元素。

3.如权利要求2所述的方法，其特征在于，进一步包括：

在显示表面上的第一点处接收一选择的指示；

接收在所述显示表面上在被组合成组的图形元素的至少一部分上或围绕所述至少一部分的拖动手势的指示；

响应于在所述第一点处的所述选择以及在所述显示表面上在被组合成组的图形元素中的至少一部分或围绕所述至少一部分的拖动手势，显示围绕由所述选择和拖动手势所界定的区域的选择边界；

确定所述组在所述选择边界内；以及

响应于所述确定，显示与被组合成组的图形元素相关联的指示出被组合成组的图形元素被包括在所述选择边界内的视觉反馈。

4.如权利要求3所述的方法，其特征在于，进一步包括：

确定被组合成组的图形元素中的至少一个图形元素不被包括在所述选择边界内；以及

显示所述组由哪些图形元素组成的指示。

5.一种用于在选择提交之前提供图形元素被包括在选择边界内的指示的系统，所述系统包括：

一个或多个处理器；以及

耦合到所述一个或多个处理器的存储器，所述一个或多个处理器能操作用于：

在显示表面上的图形用户界面中显示一个或多个图形元素；

在显示表面上的第一点处接收一选择的指示；

接收在所述显示表面上在所显示出的图形元素中的一个或多个图形元素的至少一部分上或围绕所述至少一部分的拖动手势的指示；

响应于在所述第一点处的所述选择以及在所述显示表面上在所显示出的图形元素中的一个或多个图形元素的至少一部分上或围绕所述至少一部分的拖动手势，显示围绕由所述选择和所述拖动手势所界定的区域的选择边界；

确定一图形元素在所述选择边界内；以及

响应于所述确定，显示与该图形元素相关联的指示出该图形元素被包括在所述选择边界内的视觉反馈。

6.如权利要求5所述的系统，其特征在于，所述一个或多个处理器在确定一图形元素在所述选择边界内时进一步能操作用于确定该图形元素的边界框在所述选择边界内部。

7.如权利要求5所述的系统，其特征在于，所述一个或多个处理器在确定一图形元素在所述选择边界内时进一步能操作用于确定该图形元素的边界框的一部分在所述选择边界内部。

8.如权利要求5所述的系统，其特征在于，所述一个或多个处理器能进一步操作用于：响应于在所述第一点处的所述选择以及在所述显示表面上在所显示出的图形元素中的一个或多个图形元素上或围绕该一个或多个图形元素的拖动手势，显示该图形元素的边界框。

9.如权利要求5所述的系统，其特征在于，所述一个或多个处理器在在显示表面上的图形用户界面中显示一个或多个图形元素时能进一步操作用于：

显示被组合成组的多个图形元素；

在显示表面上的第一点处接收一选择的指示；

接收在所述显示表面上在被组合成组的图形元素的至少一部分上或围绕所述至少一部分的拖动手势的指示；

响应于在所述第一点处的所述选择以及在所述显示表面上在被组合成组的图形元素中的至少一部分图形元素上或围绕所述至少一部分图形元素的拖动手势，显示围绕由所述选择和所述拖动手势所界定的区域的选择边界；

确定所述组是否在所述选择边界内；以及

如果作出所述组在所述选择边界内的确定，则显示与被组合成组的图形元素相关联的指示出被组合成组的图形元素被包括在所述选择边界内的视觉反馈；以及

如果作出被组合成组的图形元素中的至少一个图形元素不被包括在所述选择边界内的确定，则显示所述组由哪些图形元素组成的指示。

10.一种包含计算机可执行指令的计算机可读介质，所述计算机可执行指令在由计算机执行时执行一种用于在选择提交之前提供图形元素被包括在选择边界内的指示的方法，所述方法包括：

在显示表面上的图形用户界面中显示一个或多个图形元素；

在显示表面上的第一点处接收一选择的指示；

接收在所述显示表面上在所显示出的图形元素中的一个或多个图形元素的至少一部分上或围绕所述至少一部分的拖动手势的指示；

响应于在所述第一点处的所述选择以及在所述显示表面上在所显示出的图形元素中的一个或多个图形元素的至少一部分上或围绕所述至少一部分的拖动手势，显示围绕由所述选择和拖动手势所界定的区域的选择边界；

确定一图形元素在所述选择边界内；以及

响应于所述确定，显示与该图形元素相关联的指示出该图形元素被包括在所述选择边界内的视觉反馈。