CN112738408B - 图像修改器的选择性识别和排序 - Google Patents

Abstract

提供了用于在视频流内呈现修改的对象的系统、装置、介质和方法。系统和方法在计算装置的用户界面处接收选择，并且至少部分地基于选择和用户界面内的位置来确定修改器上下文。该系统和方法基于修改器上下文识别至少一组修改器。该系统和方法基于修改器上下文确定该组修改器的排序，并且在用户界面内呈现该组修改器的修改器图标。

Description

图像修改器的选择性识别和排序

本申请是申请日为2017年11月7日、申请号为201780068818.9、发明名称为“图像修改器的选择性识别和排序”的专利申请的分案申请。

相关申请

本申请要求2016年11月7日提交的题为“图像修改器的选择性识别和排序”的美国临时申请No.62/418,586的优先权，该申请通过引用整体并入在此。

技术领域

本公开的实施例一般涉及图像采集修改器(modifier)的自动识别和呈现。更具体地，但不作为限制，本公开提出了用于基于图像采集装置的视场内的图像的图像分析和用户界面内的选择的交互分析来识别图像修改器的系统和方法。

背景技术

电信应用和装置可以使用各种媒体(诸如文本、图像、声音记录或视频记录)来提供多个用户之间的通信。例如，视频会议允许两个或更多个人使用软件应用、电信装置和电信网络的组合彼此通信。电信装置还可以记录视频流以在电信网络中作为消息进行发送。

虽然存在用于在两个装置之间提供双向视频通信的电信应用和装置，但是视频流可能存在问题，诸如在通信会话未决期间修改视频流内的图像。电信装置使用装置的物理操纵以便执行操作。例如，通常通过改变装置的取向或操纵输入装置(诸如触摸屏)来操作装置。因此，本领域仍然需要改进装置之间的视频通信并在采集视频流的同时实时修改视频流。

附图说明

附图中的各个附图仅示出了本公开的示例实施例，并且不应被视为限制其范围。

图1是示出根据一些示例实施例的联网系统的框图。

图2是示出根据一些示例实施例的图像采集系统的图。

图3是示出根据一些示例实施例的用于对一组图像修改器进行识别和排序的示例方法的流程图。

图4是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图5是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图6是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图7是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图8是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图9是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图10是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图11是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图12是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图13是描绘根据一些示例实施例的操作中的图像采集系统的用户界面图。

图14是示出根据一些示例实施例的用于对一组图像修改器进行识别和排序的示例方法的流程图。

图15是示出根据一些示例实施例的用于对一组图像修改器进行识别和排序的示例方法的流程图。

图16是示出根据一些示例实施例的用于对一组图像修改器进行识别和排序的示例方法的流程图。

图17是描绘根据一些示例实施例的示例移动装置和移动操作系统界面的用户界面图。

图18是示出根据一些示例实施例的可以安装在机器上的软件架构的示例的框图。

图19是呈现根据示例实施例的计算机系统形式的机器的图形表示的框图，在该计算机系统内可执行一组指令以使机器执行在此所讨论的任何方法。

在此提供的标题仅仅是为了方便，并不必须影响所用术语的范围或含义。

具体实施方式

本公开的实施例一般涉及图像采集修改器的自动识别和呈现。更具体地，但不作为限制，本公开提出了用于基于图像采集装置的视场内的图像的图像分析和用户界面内的选择的交互分析来识别图像修改器的系统和方法。以下描述包括说明本公开的实施例的系统、方法、技术、指令序列和计算机器程序产品。在以下描述中，阐述了许多具体细节以便提供对本发明主题的各种实施例的理解。对于本领域技术人员显而易见的是，也可以在没有这些具体细节的情况下实践本发明主题的实施例。通常，公知的指令实例、协议、结构和技术未详细示出。

在一些实施例中，当用户点击用户界面内的相机视图(例如，图像采集装置的实时或现场视场)以激活图像修改器(例如，图像滤镜(filter)、数字镜头(lens)、一组附加图形元素)时，分组或排序由最初激活的修改器中的修改器类别(category)确定。在此类实施例中，这是对用户意图的解释。例如，点击前置相机的视场中的面部可以返回“自拍”的修改器类别(例如，滤镜类别)。在一些此类实施例中，基于所识别的点击目标是面部来确定返回指定的修改器类别。

在一些实施例中，当添加新的修改器类别(例如，滤镜类别、镜头类别、图形元素类别)时，用户定义应与主要(primary)修改器类别一起在图像修改器的呈现内出现的其它类别。用户选择用户界面元素以添加图像修改器或修改器类别。用户可以输入与该类别有关的细节并选择一个或多个次要(secondary)显示类别。次要显示类别可被输入作为有序列表。在将类别添加到列表中之后，用户可以更改或移动类别以改变类别在呈现图像修改器(例如，滤镜、镜头或一组附加图形元素)中出现的顺序。

在一些示例实施例中，为了激活修改器，用户输入显示用户界面的应用。一旦显示用户界面，基于以下中的一个或多个来确定用户意图：点击、敲击或其它选择，图像参数，图像采集装置的视场的内容，指示计算装置的位置、取向或定位的传感器数据，以及任何其它合适的数据。所选修改器类别的修改器首先在修改器(例如，滤镜、透镜或一组图形元素)的有序列表内排序。在一些实施例中，主要或主修改器类别定义应显示哪些其它类别以及以何种顺序显示。

本公开的各种实施例涉及装置和装置的一个或多个处理器的指令，以在采集视频流时修改由装置发送到另一装置的图像或视频流(例如，实时修改视频流)。描述了图像采集系统，该图像采集系统识别并跟踪图像内或视频流间以及通过包括视频流的一组图像的关注对象和关注区域。在各种示例实施例中，图像采集系统识别适合于估计的或识别的用户意图与图像采集装置的视场内描绘的对象、场景或特性的组合的修改器。在一些情况下，图像采集系统(例如，下面描述的图像采集系统160)基于从真实世界环境采集的数据生成并修改视频流内的视觉元素。

图1是描绘根据一个实施例的网络系统100的网络图，网络系统100具有被配置用于通过网络交换数据的客户端-服务器架构。例如，网络系统100可以是消息传递系统，其中客户端在网络系统100内传送并交换数据。数据可涉及各种功能(例如，发送和接收文本和媒体通信，确定地理位置等)和与网络系统100及其用户相关联的方面(例如，传送通信数据，接收和发送通信会话的指示等)。虽然在此示出为客户端-服务器架构，但是其它实施例可以包括其它网络架构，诸如对等或分布式网络环境。

如图1中所示，网络系统100包括社交消息传递系统130。社交消息传递系统130通常基于三层架构，其包括接口层124、应用逻辑层126和数据层128。如相关计算机和因特网相关领域的技术人员所理解的，图1中所示的每个组件或引擎表示一组可执行软件指令和用于执行指令的相应硬件(例如，存储器和处理器)，形成硬件实现的组件或引擎，并在执行指令时用作配置为执行一组特定功能的专用机器。为了避免不必要的细节模糊本发明的主题，从图1中省略了与传达对本发明主题的理解没有密切关系的各种功能组件和引擎。当然，附加的功能组件和引擎可以与社交消息传递系统(诸如图1中所示的社交消息传递系统)一起使用，以便于实现在此未具体描述的附加功能。此外，图1中描绘的各种功能组件和引擎可以驻留在单个服务器计算机或客户端装置上，或者可以以各种布置横跨若干服务器计算机或客户端装置分布。此外，尽管图1中描绘了社交消息传递系统130为三层架构，但是本发明的主题决不限于这种架构。

如图1中所示，接口层124包括接口组件(例如，web服务器)140，其接收来自各种客户端计算装置和服务器(诸如执行客户端应用112的客户端装置110，和执行第三方应用122的第三方服务器120)的请求。响应于所接收的请求，接口组件140经由网络104向请求装置传送适当的响应。例如，接口组件140可以接收请求，诸如超文本传输协议(HTTP)请求或其它基于Web的应用编程接口(API)请求。

客户端装置110可以执行传统web浏览器应用或已经为特定平台开发以包括各种移动计算装置和移动专用操作系统(例如，IOS^TM、ANDROID^TM、

)中的任何一个的应用(也称为“app”)。此外，在一些示例实施例中，客户端装置110形成图像采集系统160的全部或一部分，使得图像采集系统160的组件配置客户端装置110以执行关于图像采集系统160的操作的一组特定功能。

在示例中，客户端装置110执行客户端应用112。客户端应用112可以提供向用户106呈现信息以及经由网络104进行通信以与社交消息传递系统130交换信息的功能。此外，在一些示例中，客户端装置110执行图像采集系统160的功能以在采集视频流期间分割视频流的图像并发送视频流(例如，采用基于视频流的分割的图像而修改的图像数据)。

客户端装置110中的每一个可以包括计算装置，计算装置至少包括显示和与网络104的通信的能力以访问社交消息传递系统130、其它客户端装置和第三方服务器120。客户端装置110包括但不限于远程装置、工作站、计算机、通用计算机、因特网装置、手持装置、无线装置、便携式装置、可穿戴计算机、蜂窝或移动电话、个人数字助理(PDA)、智能电话、平板计算机、超极本、上网本、膝上型计算机、台式机、多处理器系统、基于微处理器或可编程的消费电子产品、游戏机、机顶盒、网络PC、小型计算机等。用户106可以是人、机器或与客户端装置110交互的其它部件。在一些实施例中，用户106经由客户端装置110与社交消息传递系统130交互。用户106可以不是联网环境的一部分，但是可以与客户端装置110相关联。

如图1中所示，数据层128具有便于访问信息存储库或数据库134的数据库服务器132。数据库134是存储数据(诸如成员简档数据、社交图数据(例如，社交消息传递系统130的成员之间的关系)、图像修改偏好数据、可访问性数据和其它用户数据)的存储装置。

个人可以用社交消息传递系统130注册以成为社交消息传递系统130的成员。在注册后，成员可以在社交消息传递系统130上形成社交网络关系(例如，朋友、关注者或联系人)，并且与社交消息传递系统130提供的广泛的应用交互。

应用逻辑层126包括各种应用逻辑组件150，应用逻辑组件150结合接口组件140而采用从数据层128中的各种数据源或数据服务取得的数据生成各种用户界面。各个应用逻辑组件150可用于实现与社交消息传递系统130的各种应用、服务和特征相关联的功能。例如，社交消息传递应用可以与应用逻辑组件150一起实现。社交消息传递应用为客户端装置110的用户提供消息传递机制，以发送和接收包括诸如图片和视频的文本和媒体内容的消息。客户端装置110可以在指定的时间段内(例如，有限的或无限制的)访问和查看来自社交消息传递应用的消息。在示例中，消息接收者可以在预定义的持续时间内(例如，由消息发送者指定)访问特定消息，该预定义的持续时间在特定消息被首次访问时开始。在预定义的持续时间过去之后，消息将被删除，并且消息接收者将无法再访问该消息。当然，其它应用和服务可以分别体现在它们各自的应用逻辑组件150中。

如图1中所示，社交消息传递系统130可以包括图像采集系统160的至少一部分，该图像采集系统160能够识别用于识别和选择修改器以便修改视频流的用户意图。图像采集系统160可另外在客户端装置110采集视频数据期间识别、跟踪以及修改视频数据。类似地，如上所述，客户端装置110包括图像采集系统160的一部分。在其它示例中，客户端装置110可以包括整个图像采集系统160。在客户端装置110包括图像采集系统160的一部分(或全部)的情况下，客户端装置110可以单独工作或与社交消息传递系统130协作工作，以提供在此描述的图像采集系统160的功能。

在一些实施例中，社交消息传递系统130可以是短时消息系统，短时消息系统允许短时通信，其中在诸如查看时间或查看完成的删除触发事件之后删除内容(例如，视频剪辑或图像)。在这种实施例中，装置在生成、发送、接收或显示短时消息的方面中的任何方面的环境下使用在此描述的各种组件。例如，实现图像采集系统160的装置可以识别、跟踪和修改关注对象，诸如表示面部皮肤的像素、悬浮在空中的增强现实对象、叠加在对象上的设计或图案，或对视频剪辑中描绘的对象进行任何其它适当修改。装置可以在采集视频剪辑期间修改关注对象作为生成短时消息的内容的一部分，而无需在采集视频剪辑之后进行图像处理。

在图2中，在各种实施例中，图像采集系统160可被实现为独立系统或者结合客户端装置110实现，并且不必须包括在社交消息传递系统130中。图像采集系统160被示出为包括接收器组件210、上下文(context)组件220、识别组件230、排序组件240、传感器组件250、交互组件260和呈现组件270。组件210-270中的全部或一些例如经由网络耦合、共享存储器等彼此通信。组件210-270中的每个组件可被实现为单个组件、组合到其它组件中、或者进一步细分为多个组件。与示例实施例无关的其它组件也可被包括，但未被示出。

图3描绘了示出用于确定修改器上下文并在用户界面内提供有序的一组修改器的示例方法300的流程图。在一些实施例中，连同根据选择的各种特性、图像采集装置的视场以及与计算装置相关联的属性、特性或物理参数来确定用户意图，确定修改器上下文。图像采集系统160可以使用从用户与计算装置的交互所收集的信息，独立于用户交互由计算装置所感测或接收的信息，在计算装置处呈现的视场内的方面或描绘，以及尝试确定向计算装置的用户呈现的图像采集装置、用户界面和修改器的预期用途的任何其它合适的信息。在这些实施例中，图像采集系统160尝试为用户的预期目的而对适当的修改器进行显现和排序。方法300的操作可以由图像采集系统160的组件执行，并且为了说明的目的而如此描述。

在操作310中，接收器组件210在计算装置的用户界面处接收选择。该选择指示用户界面内的位置。用户界面包括与计算装置通信的图像采集装置的视场。该选择可以指示图像采集装置的视场之外的用户界面的区域。在一些情况下，用户界面处的选择可以指示图像采集装置的视场的区、区域或部分。在一些实施例中，该选择指示在图像采集装置的视场内描绘的关注对象(例如，人的面部)。选择的位置可以对应于在计算装置上显示的用户界面内呈现的图像采集装置的图像、视频流或实时视场内描绘的真实世界中的关注对象、元素、视觉特征、物理对象、风景方面或环境方面。

在一些实施例中，用户界面另外包括一组用户界面元素。一组界面元素可以包括与分立的用户功能相关联的一组图标、按钮、徽标或其它图形表示。例如，用户界面可以包括用户界面元素，该用户界面元素包括闪光指示符、主页图标、相机选择图标、图像采集图标、历史图标、聊天图标、故事图标以及任何其它合适的图标或图形表示。用户界面元素是可选择的，以使图像采集装置和计算装置中的一个或多个执行一个或多个功能。例如，闪光指示符可以是可选择的，以启用接近采集图像的闪光放电或阻止闪光放电。主页图标可以是可选择的，以使计算装置显示菜单、帐户方面或用户界面显示和用户界面元素(例如，可选图标)的任何其它合适组合。

在一些情况下，如图4-9中所示，在操作310中接收的选择指示在用户界面内描绘的图像采集装置的视场内的位置。如图4中所示，最初呈现图像采集装置的图像400、视频流或实时视场。在图4中，在图像采集装置的图像400、视频流或实时视场内描绘面部402。在操作的一些阶段，包括实时视场的图形用户界面可以描绘覆盖在关注对象上的网格404，与适用于视场的至少一部分的修改或滤镜效果相关联的修改器图标406，以及可选择以启动图像或视频采集操作的图像采集元素。在图5中，选择500是面部402，其中选择500点击或以其它方式指示描绘在移动计算装置上显示的用户界面内的面部的像素的部分。如图6中所示，最初呈现图像采集装置的图像600、视频流或实时视场，其描绘环境风景602的一部分(例如，空气、环境或在用户视线水平处或之上的风景的部分)。在操作的一些阶段中，描绘实时视场的图形用户界面可以包括与在选择时适用于视场的至少一部分的修改或滤镜效果相关联的一个或多个修改器图标604，以及可选择以启动图像或视频采集操作的图像采集元素606。在图7中，选择700是环境风景602。如图8中所示，最初呈现图像采集装置的图像800、视频流或实时视场，其描绘地面802的部分。在图9中，选择900是在视场内描绘的地面802，其由选择900、点击、或描绘在移动计算装置(例如，客户端装置110)上显示的用户界面内的地面802的像素的部分的其它指示来指示。在操作的一些阶段，在接收选择900后，描绘地面802的图形用户界面可以描绘一个或多个修改器图标902和图像采集元素904。在这些实施例中，图像采集系统160生成用于所选关注对象的网格404，如图5、7和9中所示，将网格404显示为在关注对象上的覆盖物。尽管关于网格404进行了描述，但是应该理解，图像采集系统160可以通过任何合适的方法来识别、突出显示或指示关注对象，诸如，轮廓，发光的轮廓，突出显示的区域，靠近、重叠或覆盖关注对象或其它可检测视觉特征的发光的粒子或子画面的集合，图形元素(例如，表情符号或贴纸)的集合，或表示表面、对象或其它视觉特征是有效的或可以变为有效的任何其它合适的指示。

在这些情况下，图像采集系统160的组件可以识别选择是在图像采集装置的视场内，并且基于视场内的选择的位置进行一个或多个确定。确定可以包括在视场内描绘的一个或多个对象的特性、在视场内描绘的对象或人的识别、在视场内描绘的对象的类型、在视场内描绘的风景类型、天气事件、徽标或与视场内的对象、实体或方面有关的任何其它合适的信息。下面更详细地描述此类确定的示例和实施例，然而，所描述的确定不是穷举的，并且图像采集系统160可以进行其它合适或类似的确定。

尽管关于在用户界面内描绘的关注对象或关注区域的选择进行了描述，但是应当理解，图像采集系统160能够自动识别或以其它方式选择关注对象，而无需来自用户的输入。如图10-12中所示，图像采集系统160接收、采集或呈现包括一个或多个潜在关注对象1002的图像采集装置的图像1000、视频流或实时视场。例如，如图10中所示，在图像采集装置的实时视场内呈现容器1004和徽标1006。如下面将更详细描述的，如图11中所示，图像采集系统160识别徽标1006作为关注对象1002。图像采集系统160可以基于图像采集系统160可用的修改器中的相关联的图像修改器的存在来识别徽标1006。如图11中所示，图像采集系统160生成覆盖在徽标1006上的网格1100。如下面将更详细地描述的，响应于将徽标1006识别为关注对象1002，图像采集系统160显现或识别一组修改器并且进行与徽标相关联的一组修改器的至少一个修改器图标的呈现。

在一些示例实施例中，识别组件230在接收选择时启动的一组操作中执行确定。识别组件230可以确定在图像采集装置的视场内描绘的一个或多个关注对象的一个或多个特性。关注对象的特性可以通过形状识别操作、边缘检测、面部识别、边缘匹配、图像分割、blob分析、梯度匹配、灰度匹配或任何其它合适的对象检测方法来确定。

在确定关注对象的一个或多个特性之后或同时，识别组件230确定关注对象的标识，或在视场内描绘了多个关注对象的情况下确定每个关注对象的标识。标识可以基于关注对象的一个或多个特性的确定。在关注对象是个人并且通过面部识别操作确定特性的情况下，识别组件230确定关注对象的身份，作为识别面部和识别视场内描绘的个人中的一个或多个。

在一些示例实施例中，响应于在操作310中接收选择，呈现组件270生成表示图形，该表示图形指示用户界面内的选择的位置以及基于选择在该视场内识别的关注对象中的一个或多个。在一些情况下，表示图形包括覆盖在关注对象上的网格。例如，在关注对象是面部的情况下，呈现组件270可以在一段时间内将网格覆盖到面部上。在关注对象是天空的情况下，呈现组件270可以将网格覆盖到图像采集装置的视场内可见的天空的至少一部分上。此外，在关注对象是地板的情况下，呈现组件270可以将网格覆盖到地板的至少一部分上。在一些实施例中，交互组件260使用网格覆盖来指示对关注对象的选择。在其它实施例中，交互组件260和呈现组件270采用特定对象选择的其它指示(例如，与特定对象选择相关联的颜色改变或图像交替以突出显示特定对象选择)。在其它实施例中，呈现组件270生成并显示指示符，该指示符示出哪些对象在视场内是可选择的。

在选择时，每个所选目标、区域或像素位置可在激活时显示特定于上下文的网格。下面将更详细描述的，在激活之后，呈现组件270加载至少一组修改器。在一些情况下，修改器以被称为修改器轮播的格式化呈现来呈现。在一些情况下，当修改器轮播用户界面元素出现时，针对目标对象显示网格。在一些实施例中，不显示网格，其中网格将是从前置相机切换到后置相机的后续网格。在一些情况下，当修改器(例如，镜头、滤镜或一组附加图形元素)是有效的时候，在同一激活器目标上点击第二次时，不显示后续网格。在一些实施例中，在屏幕的至少一部分中的选择使得显示启用选择聚焦或手动聚焦的聚焦图标(例如，聚焦标线)。在一些情况下，在用户选择或以其它方式点击在用户界面上以指示具有与激活和呈现先前网格相关联的类别不同于修改器类别或类的修改器(例如，镜头、滤镜或一组附加图形元素)时，显示后续网格。例如，如果环境修改器是有效的并且接收到对面部的选择，则网格(例如，后续网格)被呈现为面部的覆盖。作为另一示例，相应地，图5示出了覆盖在图5中选择的面部上的网格的生成和呈现，图7示出了覆盖在图7中选择的环境风景上的网格的生成和呈现，图9示出了覆盖在图8中选择的地面上的网格的生成和呈现，以及图11-12示出了覆盖在图10中识别的徽标上的网格的生成和呈现。图4-7、9和12还示出了修改器轮播的初始呈现。在一些实施例中，用于识别修改器(例如，镜头、滤镜或一组附加图形元素)并填充修改器轮播的操作在显示修改器轮播之前执行，并且可以在显示网格之前执行。

在一些情况下，选择引起或触发呈现组件270呈现网格或其它指示符，作为所识别的目标上的动画的覆盖，以及呈现聚焦动画。聚焦动画可以表示图像采集装置的聚焦操作，其使图像采集装置聚焦在由选择指示的目标或目标区域上。

在一些示例实施例中，修改器轮播包括搜索功能以使用户能够识别或选择指定的或期望的修改器。在一些情况下，使用放置在修改器轮播内和修改器图标中的搜索图标来实现搜索功能。搜索图标描绘了搜索功能的指示，诸如问号或搜索功能的其它图形表示。在一些情况下，下面将更详细描述的，根据针对修改器图标指定的顺序将搜索图标定位在修改器轮播内。搜索图标被呈现在修改器轮播中包括的一组修改器图标的最后，并根据指定的顺序呈现。在一些情况下，搜索图标被放置在有序的一组修改器图标的前面或起始处。

在示例实施例中，搜索图标呈现在修改器轮播之外。例如，在一些情况下，修改器轮播呈现在图像采集元素的右手侧上，并且在修改器图标被选择后而被放置在图像采集元素内。在这种情况下，搜索图标可以呈现在图像采集元素的左手侧上。在一些示例实施例中，搜索图标被呈现在图像采集元素附近。在一些情况下，搜索图标被呈现与图像采集元素隔开一定距离，使得在有序的一组图标中的所选的修改器图标之前出现的至少一个修改器图标被呈现在与有序的一组修改器图标中的所选的修改器图标之后出现的修改器图标相对的图像采集元素的一侧上的图像采集元素附近。在一些情况下，搜索图标呈现在与修改器轮播中呈现的修改器图标分隔开的平面中。例如，当修改器轮播中的修改器图标呈现在包括图像采集元素的平面的水平线中时，搜索图标可以呈现在图像采集元素的上方或下方。

再次参考图3，在操作320中，响应于在用户界面处接收选择，上下文组件220至少部分地基于选择和用户界面内的位置来确定修改器上下文。在一些情况下，修改器上下文可以被理解为基于选择的目标来确定用户的意图。在可以通过选择指示多个目标的情况下，上下文组件220可以通过选择的一个或多个特性来确定修改器上下文。选择的特性可以是选择本身的方面。在一些情况下，选择的特性是在选择时确定的信息。特性还可以是与接收选择同时采集、确定或感测的计算装置或图像采集装置相关联的信息。

如下面更详细描述的，在选择的目标是清楚的(例如，靠近潜在关注对象的选择)的情况下，识别组件230识别修改器类别(例如，滤镜类别、镜头类别，或一组附加图形元素的类别)或目标的激活器类型(activator type)。例如，在选择指示面部的情况下，图像采集系统160的组件可以将“面部”识别为修改器类别或激活器类型。激活器类型可包括针对指定修改器输入的代码、自然特征跟踪(NFT)、面部、表面、空气或任何其它合适的激活器类型。在一些实施例中，为了确定用户意图，图像采集系统的组件首先使用与目标匹配的修改器类别，并且然后以降序使用其它规则、特性或类别。

在一些情况下，为了确定修改器上下文，上下文组件220执行一个或多个子操作。在一些实施例中，图像采集系统160的组件识别一个或多个上下文指示符。上下文指示符可以被理解为围绕初始选择的信号、方面、属性或特性，其提供关于选择的信息。在一些实施例中，上下文指示符可涉及客户端装置110的上下文。客户端装置110的上下文可以指示在选择时客户端装置110的位置或使用。在一些情况下，这些与装置相关的上下文指示符可以包括以下中的任何一个或多个：计算装置(例如，客户端装置110)的地理位置，一天中的时间，一组天气数据，或者与使用客户端装置110的时间、地点或其它上下文有关的任何其它合适的信息。上下文指示符可涉及客户端装置110的使用的类型。在一些实施例中，使用类型上下文指示符可以包括：在视场内描绘的面部，在视场内描绘的多个面部，在视场内描绘的一组预定的人中的指定的人，自然特征跟踪标识，识别实体、事件或产品的代表性符号，赞助(sponsorship)，计算装置的取向，计算装置的运动，在视场内描绘的对象类型，应用于指定修改器的解锁(unlock)代码，相对于计算装置的图像采集装置位置，修改器流行度分数，及其组合。上下文指示符还可以包括客户端装置110上下文和使用上下文的组合。

在确定上下文指示符之后，上下文组件220基于选择、选择的位置和一个或多个上下文指示符中的一个或多个来确定修改器上下文。如上所述，上下文指示符可以是用户界面信息、装置信息或指示修改器使用的建议上下文的其它信息。上下文组件220可以使用选择、选择的位置和上下文指示符，来通过识别与选择、位置和上下文指示符中的每一个相关联的关键字，并将关键字与和一组修改器上下文相关联的一组关键字进行比较，来确定修改器上下文。修改器上下文可以是分配给滤镜或其它修改器的一组类别，以应用于由图像采集装置采集并呈现在客户端装置110的显示器上的图像、视频流或实时视场。

在图像采集系统160的组件确定并识别视场内的关注对象的实施例中，上下文组件220基于选择(例如，在操作310中接收的选择)、用户界面内选择的位置、以及关注对象的标识来确定修改器上下文。在上下文组件220确定并识别多个关注对象的情况下，上下文组件220基于选择、选择的位置以及多个关注对象中的至少一个关注对象的标识来确定修改器上下文。例如，上下文组件220可以确定修改器上下文为适用于多个关注对象中的所有关注对象或部分关注对象的修改器上下文。上下文组件220可以选择面部的修改器上下文，其中多个关注对象是在图像采集装置的视场内描绘的人或面部。在识别出不同类型的关注对象的情况下，上下文组件220可以选择与多个关注对象中的大多数关注对象相关联的修改器上下文。上下文组件220还可以选择与多个关注对象中包括的多个不同类型的关注对象共有的主题或属性相关联的修改器上下文。

在操作330中，识别组件230基于修改器上下文识别至少一组修改器。在一些实施例中，修改器是图像滤镜、数字镜头、一组附加图形元素，或可以应用于图像采集装置的图像、视频流或实时或现场视场的至少一部分的任何其它合适的视觉效果或修改。图像采集装置的图像、视频流或视场呈现在由图像采集系统160呈现的用户界面内。在一些实施例中，在选择至少一组修改器中的修改器之后，如下面更详细描述的，可以修改图像采集装置的图像、视频流或视场，以在呈现和采集图像、视频流或视场之前或同时，将修改器或修改器的视觉或音频效果包括在图像、视频流或视场内。一组修改器包括用于图像采集装置的一个或多个修改器以及用于该组修改器的每个修改器的修改器图标。表1和表2示出了可供选择的修改器类型的示例。每个修改器类型或一组修改器可包括多个不同的修改器。表1和表2还提供类别信息(例如，镜头模式、镜头类型、内容)和上下文指示符(例如，相机类型、激活类型、启动类型、初始化类型和相机交换)。

表1

表2

在一些情况下，识别组件230通过将修改器上下文(例如，识别的镜头、修改器或滤镜类别或激活器类型)与和一组修改器中的一个或多个修改器相关联的修改器类别进行比较或匹配来识别一组修改器(例如，单组修改器或多组修改器)。在一些情况下，识别组件230将一组修改器识别为具有共同修改器类别或一组相关修改器类别的一组修改器。在一些实施例中，识别组件230对一组修改器进行单独地识别，根据基于修改器上下文单独识别一个或多个修改器来组成一组修改器。

在一些实施例中，每个修改器与至少一个修改器类别相关联。滤镜或修改器类别可以是修改器上下文，或者可以是与至少一个修改器上下文相关联的类别标签。在一些情况下，修改器类别是包括在指定组中的修改器共有的描述性标识符。例如，修改器类别可以包括面部修改器、环境修改器、地面修改器、面部交换修改器、情绪修改器、服装修改器或者任何其它合适的修改器的分类组织和描述。在将新修改器添加到图像采集系统160以合并到一组修改器中的情况下，修改器由接收器组件210接收。修改器与至少一个修改器类别相关联，该修改器类别指示触发修改器的标识的至少一个上下文指示符。该至少一个上下文指示符可以是关注对象和传感器数据中的一个或多个。在一些情况下，上下文指示符可以是修改器上下文。在上下文指示符不是修改器上下文的实施例中，可以至少部分地使用上下文指示符来确定或导出修改器上下文。

在一些实施例中，指定修改器的修改器类别可包括第一修改器类别和第二修改器类别。第一修改器类别指示与修改器相关联的主要上下文指示符。第二修改器类别指示与修改器相关联的次要上下文指示符。在检测到第一修改器类别和第二修改器类别中的一个或多个时，可以识别和显示修改器。

在操作340中，响应于识别一组修改器(例如，单组修改器或多组修改器)，排序组件240基于修改器上下文确定该组修改器的顺序。在一些实施例中，修改器(例如，滤镜、镜头或一组附加图形元素)具有主要修改器类别和一个或多个次要修改器类别。主要修改器类别是修改器的修改器类别。一个或多个次要修改器类别指示修改器可与之兼容的修改器类别。主要修改器类别可以与次要修改器类别相关，使得主要修改器类别指示与第一修改器类别兼容的一个或多个次要修改器类别。在这些情况下，一组修改器中的具有与修改器上下文匹配的主要类别的修改器首先被显示在修改器轮播中。例如，在包括自拍、空气、地面、徽标和壁画的修改器类别方面，每个类别可以限定与指定类别兼容的一个或多个其它类别。此外，类别的相互关系可用于显现修改器的顺序。如表3中所示，各个类别可以包括用于生成顺序的次要类别的有序列表。

{

徽标：[空气，地面，自拍]，

壁画：[空气，地面，自拍]，

空气：[地面，自拍]，

地面：[空气，自拍]，

自拍照：[地面，空气]

}

表3

如表3的示例中所示，当选择指示面部的修改器上下文(例如，自拍的修改器类别)时，识别组件230或排序组件240可以选择与自拍、地面和空气类别相关联的修改器。在选择修改器之后，排序组件240可以生成一组修改器中的修改器的顺序，使得首先放置与自拍的主要修改器类别相关联的修改器，并且可以之后放置具有地面或空气的主要修改器类别的修改器。此外，可以基于地理区域中的公共可用性来包括与次要类别的有序列表相关联的顺序中包括的修改器(例如，在表3中示出)。

在一些情况下，如表3中所示的次要类别及其相应的顺序可以针对每个修改器类别来修改，如表4中所示。

表4

在一些实施例中，在一组或多组修改器中包括的修改器的标识和排序使用用户意图作为主要排序机制，并且包括附加到该组修改器的末尾的附加修改器。例如，用户的意图可能是主要排序特性。在该示例中，在图像采集装置的视场中接收对天空的选择使得图像采集系统160首先在修改器轮播中选择并排序针对天空的修改器。根据主要排序特性显现的滤镜可以是主要意图修改器X₁–X_n。图像采集系统160将附加修改器附加到主要意图修改器X₁–X_n的有序列表的末尾。例如，选择徽标可以使图像采集系统160显现与徽标相关联的修改器以及世界修改器。可以显现世界修改器以增加图像采集系统160中的其它修改器的可发现性并提供一致的用户界面体验。

在这些实施例中，可以首先使用如上所述的用户意图的指示、显现并优先化主要意图修改器来确定一组修改器以及修改器的顺序。在一些情况下，主要意图修改器可以以与针对操作330和340描述的方式类似或相同的方式被显现和排序。图像采集系统160在排序修改器时可以确定一组修改器是否包括与特定地理位置相关联的修改器，并将地理位置修改器放在第一位置中。在一组修改器还包括赞助修改器的情况下，赞助修改器可以放置在第二位置。一组修改器的其它修改器可以定位在赞助修改器之后。可以使用诸如最新第一的排名算法、基于流行度的排序算法、基于特性的排序算法或任何其它合适的排名或排序机制来排序其它的修改器。在一组修改器中的最终修改器之后，图像采集系统160可以附加一个或多个世界修改器。如上所述，可以使用相同或类似的用于排序修改器的规则来对世界修改器进行排序。在一些情况下，通过对徽标或其它明确识别的标记或表示的选择而触发的NFT修改器可以包括在附加的世界修改器的集合中，其中NFT修改器满足地理位置元素。

在操作350中，响应于作为集合或单独地对一组修改器的识别，并且确定修改器的顺序，呈现组件270使得在用户界面内呈现一组修改器的修改器图标。修改器图标被呈现为用户界面内的可选用户界面元素。在一些实施例中，修改器图标被放置在用户界面内包括的图像采集装置的视场之外的用户界面的部分中。在一些情况下，修改器图标被放置在图像采集装置的视场的部分内。如图4-7、9和12中所示，修改器图标可被呈现在图像采集元素附近。例如，图4和图5示出了呈现在被确定为关注对象的面部下方的图像采集元素408附近的一组修改器图标406。图6和图7示出了呈现在视场内的环境景观下方的图像采集元素606附近的一组修改器图标604。图9示出了在视场内描绘的图像采集元素904和地面802附近的一组修改器图标902。图12示出了呈现在被确定为视场中的关注对象的徽标下方的图像采集元素1204附近的修改器图标1202。

如图13中所示，在一些实施例中，修改器图标1300的选择或操纵使得修改器图标1300从第一位置1302移位并移动到第二位置1304。例如，修改器图标1300的选择(例如，点击)可以将修改器图标1300从第一位置1302(位于相距图像采集元素一定距离处)移动到第二位置1304。第二位置1304可以靠近图像采集元素1306或者可以放置在图像采集元素1306内。在一些情况下，修改器图标被设定大小使得修改器图标1300可以放置在图像采集元素1306的内部部分内。尽管修改器图标被示出为在包含图像采集元素1306的平面中对齐并且在一个或多个方向中从图像采集元素1306延伸，但是应该理解，也可以使用不同的呈现。例如，修改器图标可以定位在图像采集元素1306周围，从其中径向向外延伸。作为另一示例，修改器图标可以呈现在图像采集元素上方或下方的可移动线中。

在一些实施例中，根据一组规则对修改器类别集合内的修改器或修改器图标进行排序。一组规则可以包括优先级确定、赞助确定和解锁确定。优先级确定可以使用分配给每个修改器的优先级值来确定。例如，赞助确定可以向修改器分配优先级值0，指示最高的优先级，使得赞助修改器首先出现在排序中。解锁确定可以接收第二优先级值，使得在扫描或输入代码以解锁修改器之后，其中解锁的修改器被显现以包括在一组修改器中，解锁的修改器被呈现在赞助修改器之后的位置，但在未被赞助或未被解锁的其它修改器之前。在一些情况下，地理位置用于解锁修改器。在这些情况下，地理位置修改器可以被视为被解锁的修改器。尽管关于一组示例规则进行了描述，但是应该理解，也可以使用任何数量或关系的规则，诸如用于徽标、地理位置、天气、多个对象的规则和其它合适规则。

图14描绘了示出根据本公开的实施例的用于确定修改器上下文并在用户界面内提供有序的一组修改器的示例方法1400的流程图。方法1400的操作可以由图像采集系统160的组件执行，并且为了说明的目的而进行描述。在一些实施例中，方法1400的操作合并方法300的一个或多个操作、作为方法300内的操作执行、或者作为方法300的一个或多个操作的子操作执行。例如，方法300可以识别多组修改器。在此类实施例中，由操作330识别的一组修改器可以包括第一组修改器和第二组修改器，并且方法1400可以对多组修改器进行识别和排序，如下所述。

在操作1410中，识别组件230确定在图像采集装置的视场内描绘的一组关注对象的一组标识。在一些实施例中，每个标识对应于一组关注对象中的关注对象。识别组件230可以以与上面关于操作310描述的方式类似或相同的方式确定一组标识。例如，识别组件230可以确定视场内的关注对象的特性。基于每个关注对象的特性，识别组件230可以确定标识。每个关注对象的标识可被组合在一起作为一组关注对象的一组标识。

在操作1420中，识别组件230基于修改器上下文和一组标识中的至少一个标识来识别第一组修改器。在一些实施例中，第一组修改器具有第一兼容性值。第一兼容性值指示第一组修改器与一组关注对象中的至少一个关注对象的兼容性。可以以与上面关于操作330描述的方式类似或相同的方式识别第一组修改器。

在操作1430中，识别组件230基于修改器上下文和一组标识中的至少一个标识来识别第二组修改器。在一些实施例中，第二组标识符具有第二兼容性值。第二兼容性值可指示第二组修改器与一组关注对象中的至少一个关注对象的兼容性。可以以与上面关于操作330描述的方式类似或相同的方式识别第二组修改器。

在一些情况下，第二组修改器具有第三兼容性值。第三兼容性值可以指示第二组修改器与被确定为与第一组修改器兼容的至少一个关注对象的兼容性。第三兼容性值可小于第一兼容性值。

在操作1440中，排序组件240确定第一组修改器和第二组修改器的顺序。在一些实施例中，基于修改器上下文和一组关注对象的标识的至少一部分来确定顺序。排序组件240可以以与上面关于操作340描述的方式类似或相同的方式确定第一组修改器和第二组修改器的顺序。在一些实施例中，排序组件240确定用于每一组修改器(例如，第一组修改器和第二组修改器)的呈现顺序。然后，排序组件240可以基于与每组修改器相关联的兼容性值来选择要被首先呈现的一组修改器。排序组件240还可以基于与每组修改器相关联的修改器的类别或类型与要被修改的关注对象的关系来选择要被首先呈现的一组修改器。在一些实施例中，排序组件240通过对各个修改器进行排序来确定第一组修改器和第二组修改器的顺序，而不管修改器的状态是否与第一组修改器或第二组修改器相关联。

在识别组件230识别第一组修改器和第二组修改器的实施例中，排序组件240确定第一组修改器和第二组修改器的顺序。该顺序可以基于修改器上下文和一组关注对象的标识的至少一部分来确定。在一些情况下，顺序确定第一组修改器中的修改器相对于第二组修改器中的修改器的放置。在一些实施例中，顺序确定每组内的修改器的顺序。在这些情况下，一组修改器内的修改器可以基于修改器上下文和关注对象的标识来重新排序或重新定位。

如上所述，在一些情况下，识别组件230显现多组修改器并且排序组件240对多组修改器(例如，与不同修改器类别相关联的每个修改器组)进行排序。排序组件240可以显现至多每组修改器中预定数量的修改器。例如，在显现三组修改器的情况下，每组修改器与不同的修改器类别相关联，第一组修改器可以包括X个修改器，第二组修改器可以包括Y个修改器，并且第三组修改器可以包括Z个修改器。在一些情况下，X、Y和Z是相同的数字。在修改器类别包括较少数量的修改器的情况下，两组或更多组修改器可以包括相同数量的修改器，而第三组修改器包括较少数量的修改器。

在一些情况下，修改器可以与多于一个的修改器类别相关联。在由于两个或更多个修改器类别而使得单个修改器被包括在由识别组件230或排序组件240显现的两组或更多组修改器中的情况下，图像采集系统160的组件可以基于修改器上下文从一组或多组修改器中消除该修改器。在一些情况下，修改器的消除可以是临时的并且应用于指定的一组修改器(例如，第一组修改器或第二组修改器)以排除修改器或修改器图标的重复。在一些实施例中，对于具有两个类别的修改器，修改器图标可被放置在第一组修改器和第二组修改器之间的连接处。然后，具有两个类别的修改器图标可以用作两组修改器的联合点，或者排除修改器的重复呈现。

在操作1450中，呈现组件270进行第一组修改器图标的至少一部分的呈现。呈现组件270还可以进行第二组修改器图标的至少一部分的呈现。第一组修改器图标中的每个修改器图标可以对应于第一组修改器中的修改器。第二组修改器图标中的每个修改器图标可以对应于第二组修改器中的修改器。呈现组件270可以以与上面关于操作350描述的方式类似或相同的方式进行修改器图标的部分的呈现。

在一些实施例中，在图像采集系统160识别第一组修改器和第二组修改器的情况下，呈现组件270呈现第一组修改器图标和第二组修改器图标的至少一部分。第一组修改器图标中的每个修改器图标对应于第一组修改器中的修改器。第二组修改器图标中的每个修改器图标对应于第二组修改器中的修改器。在一些实施例中，根据如上所述确定的顺序呈现第一组修改器图标和第二组修改器图标的组合。在一些情况下，顺序限定用于将修改器定位在每组修改器内的组织和呈现机制。

图15描绘了示出根据本公开的实施例的用于确定修改器上下文并在用户界面内提供有序的一组修改器的示例方法1500的流程图。方法1500的操作可以由图像采集系统160的组件执行，并且为了说明的目的而进行描述。在一些实施例中，方法1500的操作包含方法300或1400的一个或多个操作、作为方法300或1400内的操作来执行、或者作为方法300或1400的一个或多个操作的子操作来执行。例如，方法300可以识别多组修改器。在此类实施例中，操作310的选择是图形用户界面内的第一选择。

在操作1510中，交互组件260接收第二选择。第二选择包括在用户界面内呈现的修改器图标的选择。如上面关于操作350或1450所描述的，可以在显示修改器或修改器图标之后接收第二选择。交互组件260可以接收第二选择作为用户界面交互。例如，交互组件260可以识别触摸屏交互(诸如点击)或装置交互(诸如鼠标敲击)，该交互选择图形用户界面的部分、像素位置、坐标或在图形用户界面上显示的修改器图标之一的部分的其它表示。

在操作1520中，识别组件230确定与由修改器图标表示的修改器相关联的修改器类别。识别组件230可以以与上面关于操作320或330描述的方式类似或相同的方式确定修改器类别。修改器类别可以包含在表、元数据文件或与修改器图标相关联的其它数据结构中。在选择修改器图标时，在一些实施例中，识别组件230执行一个或多个查找操作以识别修改器类别、类型或与修改器图标相关联的其它信息。

在操作1530中，识别组件230确定与关注对象相关联的对象类别。可以至少部分地使用对象类别来确定修改器上下文。识别组件230可以通过将关注对象的特性或关注对象的标识符与已知对象类别进行比较来确定对象类别。例如，识别组件230可以使用特性或标识符作为与关注对象相关联的关键字。然后，识别组件230可以将关注对象的关键字与在与图像采集系统160相关联的数据库中与已知对象类别相关联的关键字进行比较。标识组件230可以选择包含或关联与关注对象的关键字匹配的一个或多个关键字的对象类别。在一些实施例中，识别组件230基于在操作310中接收的选择来确定对象类别。在此类实施例中，选择的位置可以指示对象类别。例如，在选择接近面部、风景或表面的情况下，识别组件230可以分别选择面部、空气(例如，风景)或地面(例如，表面)的对象类别。

在操作1540中，识别组件230确定修改器类别对应于对象类别。在一些实施例中，识别组件230通过比较与每个修改器类别相关联的关键字和与对象类别相关联的关键字来确定修改器类别对应于对象类别。识别组件230还可以查询将修改器与对象类别相关联的查找表或其它数据结构。在将对象类别分配给数据结构内的修改器或修改器类别的情况下，识别组件230可以确定修改器类别和对象类别之间的对应关系。尽管关于指定的示例实施例进行了描述，但是应该理解，识别组件230可以以任何合适的方式确定对应关系。

在操作1550中，呈现组件270应用与由第二选择指示的修改器图标相关联的修改器。呈现组件270可以响应于识别组件230确定修改器类别对应于对象类别而应用修改器。在一些实施例中，呈现组件270通过改变、编辑、校正、移除组件、添加组件或以其它方式修改与关注对象相关联的图像或视频流的至少一个方面来应用修改器。例如，在关注对象是面部的情况下，当图像采集系统160采集视频流时，呈现组件270可以修改图像或实时视频流中的面部的描绘(例如，应用猫耳朵和猫鼻子)。

图16描绘了示出根据本公开的实施例的用于确定修改器上下文并在用户界面内提供有序的一组修改器的示例方法1600的流程图。方法1600的操作可以由图像采集系统160的组件执行，并且为了说明的目的而进行描述。在一些实施例中，方法1600的操作包含方法300、1400或1500的一个或多个操作、作为方法300、1400或1500内的操作来执行、或者作为方法300、1400或1500的一个或多个操作的子操作来执行。例如，方法300可以识别多组修改器。在此类实施例中，操作310的选择是图形用户界面内的第一选择。

在操作1610中，交互组件260接收在用户界面内呈现的修改器图标的第二选择。交互组件260可以以与上面关于操作1510描述的方式类似或相同的方式接收对修改器图标的第二选择。可以以与图形用户界面、客户端设备110的输入组件、视觉提示、音频提示或任何其它合适的选择方法中的一个或多个的用户交互的形式接收选择。

在操作1620中，识别组件230确定与由修改器图标表示的修改器相关联的修改器类别。在一些实施例中，识别组件230以与上面关于操作1520描述的方式类似或相同的方式确定修改器类别。例如，识别组件230可以基于交互组件260在接收第二选择时将修改器类别传递给识别组件230来确定修改器类别。识别组件230还可以访问与修改图标相关联的一个或多个数据结构，以查询、搜索或以其它方式查找修改器图标的修改器类别。

在操作1630中，识别组件230确定与第一关注对象相关联的第一对象类别。识别组件230还确定与第二关注对象相关联的第二对象类别。可以至少部分地使用第一关注对象来确定修改器上下文。对于第一关注对象，可以以与上面关于操作1530描述的方式类似或相同的方式确定第一对象类别。

在操作1640中，识别组件230确定修改器类别对应于第二对象类别。在该情况下，识别组件230确定所选修改器对应于在视场中描绘的关注对象，该关注对象与用于识别与修改器图标相关联的修改器的关注对象不同。在一些实施例中，识别组件230确定修改器类别的关键字不能匹配与第一对象类别相关联的关键字。识别组件230还可以通过查询与修改器图标或修改器类别相关联的数据结构来确定修改器类别对应于第二对象类别。识别组件230可以在数据结构内识别第二对象类别与修改器类别相关联或第二对象类别被分配给修改器类别。在此类实施例中，第一对象类别可能与该修改器类别不相关联。

在操作1650中，呈现组件270生成表示图形。在一些实施例中，表示图形指示通过选择在图像采集装置的视场内识别的第二关注对象。表示图形可以包括覆盖在第二关注对象上的网格。例如，在第一关注对象是面部的情况下，具有先前为面部生成并显示的网格，第二关注对象可以是在面部附近描绘的区域(例如，空气或天空)。在确定区域的修改器类别不同于面部的修改器类别时，呈现组件270可以以类似于图7中所示的方式生成并呈现网格。网格可以以与上面关于操作310或图5、7和9描述的方式类似或相同的方式生成。

在一些情况下，用户界面被分为不同的显示区域。显示区域可以对应于适合于显示区域的指定交互操作。例如，在已经显示一组修改器或一组修改器的一部分之后，用户界面的一部分可被限制于与镜头、修改器或滤镜的交互。用户界面的一部分可以被配置为在图像采集、显示、回放和其它合适的操作模式之间改变操作模式。在一些情况下，可以在用户界面的任何区域中允许指定的用户交互。例如，在一些情况下，在用户界面内的双击可以使计算装置切换图像采集输入(例如，在图像采集装置向前和向后之间切换)。作为进一步的示例，单击可以采集静止图像，而持续触控可以采集视频。进一步的示例包括点击，使得图像采集装置将视场聚焦在被点击的位置上。

在修改器的选择、第二选择之后，后续选择可以执行一个或多个操作。在一些实施例中，后续选择使得从面向前的图像采集装置改变为面向后的图像采集装置可以保留在修改器轮播内呈现的修改器，如在方法300、1400、1500或1600中确定的。在改变的图像采集模式中，修改器可以正常操作或如先前操作而进行。

修改器上下文可以使后续选择以不同的方式操作，其中后续选择使修改器上下文改变或指示组合的上下文。例如，如表1-4中所示，面部和空气镜头(例如，改变面部和空气两者或面部周围的环境)正在操作并且后续选择导致从前置图像采集装置到后置图像采集装置的改变的情况下，可以修改视场以表示先前选择的修改器的有效视图(例如，镜头、滤镜或一组附加图形元素)。例如，如果用户已选择生成其中修改在视场内描绘的面部的老人吸烟的覆盖的修改器，则后续选择可以将相机视图从前置图像采集装置改变为后置图像采集装置。在相机视图改变时，当前可操作的图像采集装置的视场被呈现在作为第一人视角的老人吸烟的上下文中。在这些情况下，在后续选择之前，修改器轮播可以保持不变的状态。

以下编号的示例是实施例。

1.一种方法，包括：在计算装置的用户界面处接收选择，该用户界面包括与计算装置通信的图像采集装置的视场，该选择指示用户界面内的位置；至少部分地基于选择和用户界面内的位置来确定修改器上下文；基于修改器上下文识别至少一组图像修改器，该组图像修改器包括用于图像采集装置的一个或多个图像修改器，以及用于该组图像修改器中的每个图像修改器的修改器图标；基于修改器上下文确定该组图像修改器的顺序；以及在用户界面内呈现用于该组图像修改器的修改器图标。

2.根据示例1所述的方法，进一步包括：响应于接收选择，生成指示用户界面内的选择的位置和由选择在图像采集装置的视场内识别的关注对象中的一个或多个的表示图形，该表示图形包括覆盖在关注对象上的网格；以及基于选择、选择的位置和由选择识别的关注对象来确定修改器上下文。

3.根据示例1或2所述的方法，其中，该选择指示在用户界面内描绘的图像采集装置的视场内的位置，并且方法进一步包括：确定在图像采集装置的视场内描绘的一个或多个关注对象的一个或多个特性；确定在视场内描绘的一个或多个关注对象中的每个关注对象的标识，该标识基于一个或多个特性；以及基于选择、用户界面内的选择的位置以及一个或多个关注对象的标识来确定修改器上下文。

4.根据示例1至3中任一项或多项所述的方法，进一步包括：识别一个或多个上下文指示符；以及基于选择、选择的位置以及一个或多个上下文指示符来确定修改器上下文。

5.根据示例1至4中任一项或多项所述的方法，其中，一个或多个上下文指示符从包括以下的集合中选择：计算装置的地理位置；一天中的时间；一组天气数据；在视场内描绘的面部；在视场内描绘的多个面部；在视场内描绘的一组预定的人中的指定的人；自然特征跟踪标识；识别实体、事件或产品的代表符号；赞助；计算装置的取向；计算装置的运动；在视场内描绘的对象类型；应用于指定修改器的解锁代码；相对于计算装置的图像采集装置位置；修改器流行度分数；及其组合。

6.根据示例1至5中任一项或多项所述的方法，其中，该组修改器是第一组修改器，并且方法进一步包括：确定在图像采集装置的视场内描绘的用于一组关注对象的一组标识，每个标识对应于该组关注对象中的关注对象；基于修改器上下文和该组标识中的至少一个标识来识别第一组修改器，第一组修改器具有指示第一组修改器与该组关注对象中的至少一个关注对象的兼容性的第一兼容性值；基于修改器上下文和该组标识中的至少一个标识来识别第二组修改器，第二组修改器具有指示第二组修改器与该组关注对象中的至少一个关注对象的兼容性的第二兼容性值；确定第一组修改器和第二组修改器的顺序，该顺序基于修改器上下文和该组关注对象的标识的至少一部分来确定；以及呈现第一组修改器图标的至少一部分和第二组修改器图标的至少一部分，第一组修改器图标中的每个修改器图标对应于第一组修改器中的修改器，并且第二组修改器图标中的每个修改器图标对应于第二组修改器中的修改器。

7.根据示例1至6中任一项或多项所述的方法，其中，第二组修改器具有指示第二组修改器与被确定为与第一组修改器兼容的至少一个关注对象的兼容性的第三兼容性值，第三兼容性值小于第一兼容性值。

8.根据示例1至7中任一项或多项所述的方法，其中，至少一组修改器中的每个修改器与至少一个修改器类别相关联，该方法进一步包括：接收用于合并到至少一组修改器中的修改器，该修改器与至少一个修改器类别相关联，该至少一个修改器类别指示触发修改器的标识的至少一个上下文指示符，该至少一个上下文指示符是传感器数据和关注对象中的一个或多个。

9.根据示例1至8中任一项或多项所述的方法，其中，至少一个修改器类别包括第一修改器类别和第二修改器类别，第一修改器类别指示与修改器相关联的主要上下文指示符，第二修改器类别指示与修改器相关联的次要上下文指示符，在检测到第一修改器类别和第二修改器类别中的一个或多个时，识别并显示该修改器。

10.根据示例1至9中任一项或多项所述的方法，其中，在用户界面处的选择是第一选择，该方法进一步包括：接收对在用户界面内呈现的修改器图标的第二选择；确定与由修改器图标表示的修改器相关联的修改器类别；确定与至少部分地用于确定修改器上下文的关注对象相关联的对象类别；确定修改器类别对应于对象类别；以及应用与由第二选择指示的修改器图标相关联的修改器。

11.根据示例1至10中任一项或多项所述的方法，其中，在用户界面处的选择是第一选择，该方法进一步包括：接收对在用户界面内呈现的修改器图标的第二选择；确定与由修改器图标表示的修改器相关联的修改器类别；确定与第一关注对象相关联的第一对象类别和与第二关注对象相关联的第二对象类别，第一关注对象至少部分地被用于确定修改器上下文；确定修改器类别对应于第二对象类别；以及生成指示由选择在图像采集装置的视场内识别的第二关注对象的表示图形，该表示图形包括覆盖在第二关注对象上的网格。

12.一种装置，包括：一个或多个处理器；以及处理器可读存储装置，其被耦接到一个或多个处理器，该处理器可读存储装置存储处理器可执行指令，该处理器可执行指令在由一个或多个处理器执行时使一个或多个处理器执行包括以下操作的操作：在计算装置的用户界面处接收选择，该用户界面包括与计算装置通信的图像采集装置的视场，该选择指示用户界面内的位置；至少部分地基于选择和用户界面内的位置来确定修改器上下文；基于修改器上下文识别至少一组修改器，该组修改器包括用于图像采集装置的一个或多个修改器以及用于该组修改器中的每个修改器的修改器图标；基于修改器上下文确定该组修改器的顺序；以及在用户界面内呈现用于该组修改器的修改器图标。

13.根据示例12所述的装置，其中，操作进一步包括：响应于接收选择，生成指示用户界面内的选择的位置和由选择在图像采集装置的视场内识别的关注对象中的一个或多个的表示图形，该表示图形包括覆盖在关注对象上的网格；以及基于选择、选择的位置和由选择识别的关注对象来确定修改器上下文。

14.根据示例12或13所述的装置，其中，选择指示在用户界面内描绘的图像采集装置的视场内的位置，并且操作进一步包括：确定在图像采集装置的视场内描绘的一个或多个关注对象的一个或多个特性；确定在视场内描绘的一个或多个关注对象中的每个关注对象的标识，该标识基于一个或多个特性；以及基于选择、用户界面内的选择的位置以及一个或多个关注对象的标识来确定修改器上下文。

15.根据示例12至14中任一项或多项所述的装置，其中，该组修改器是第一组修改器，并且操作进一步包括：确定在图像采集装置的视场内描绘的一组关注对象的一组标识，每个标识对应于该组关注对象中的关注对象；基于修改器上下文和该组标识中的至少一个标识来识别第一组修改器，第一组修改器具有指示第一组修改器与该组关注对象中的至少一个关注对象的兼容性的第一兼容性值；基于修改器上下文和该组标识中的至少一个标识来识别第二组修改器，第二组修改器具有指示第二组修改器与该组关注对象中的至少一个关注对象的兼容性的第二兼容性值；确定第一组修改器和第二组修改器的顺序，该顺序基于修改器上下文和该组关注对象的标识的至少一部分来确定；以及呈现第一组修改器图标的至少一部分和第二组修改器图标的至少一部分，第一组修改器图标中的每个修改器图标对应于第一组修改器中的修改器，并且第二组修改器图标中的每个修改器图标对应于第二组修改器中的修改器。

16.一种存储处理器可执行指令的处理器可读存储装置，该处理器可执行指令当由机器的一个或多个处理器执行时，使机器执行包括以下操作的操作：在计算装置的用户界面处接收选择，该用户界面包括与计算装置通信的图像采集装置的视场，该选择指示用户界面内的位置；至少部分地基于选择和用户界面内的位置来确定修改器上下文；基于修改器上下文识别至少一组修改器，该组修改器包括用于图像采集装置的一个或多个修改器以及用于该组修改器中的每个修改器的修改器图标；基于修改器上下文确定该组修改器的顺序；以及在用户界面内呈现用于该组修改器的修改器图标。

17.根据示例16所述的处理器可读存储装置，其中，操作进一步包括：响应于接收到选择，生成指示用户界面内的选择的位置和由该选择在图像采集装置的视场内识别的关注对象中的一个或多个的表示图形，该表示图形包括覆盖在关注对象上的网格；以及基于选择、选择的位置和由选择识别的关注对象来确定修改器上下文。

18.根据示例16或17所述的处理器可读存储装置，其中，该选择指示在用户界面内描绘的图像采集装置的视场内的位置，并且操作进一步包括：确定在图像采集装置的视场内描绘的一个或多个关注对象的一个或多个特性；确定在视场内描绘的一个或多个关注对象中的每个关注对象的标识，该标识基于一个或多个特性；以及基于选择、用户界面内的选择的位置以及一个或多个关注对象的标识来确定修改器上下文。

19.根据示例16至18中任一项或多项所述的处理器可读存储装置，其中，该组修改器是第一组修改器，并且操作进一步包括：确定在图像采集装置的视场内描绘的用于一组关注对象的一组标识，每个标识对应于该组关注对象中的关注对象；基于修改器上下文和该组标识中的至少一个标识来识别第一组修改器，第一组修改器具有指示第一组修改器与该组关注对象中的至少一个关注对象的兼容性的第一兼容性值；基于修改器上下文和该组标识中的至少一个标识来识别第二组修改器，第二组修改器具有指示第二组修改器与该组关注对象中的至少一个关注对象的兼容性的第二兼容性值；确定第一组修改器和第二组修改器的顺序，该顺序基于修改器上下文和该组关注对象的标识的至少一部分来确定；以及呈现第一组修改器图标的至少一部分和第二组修改器图标的至少一部分，第一组修改器图标中的每个修改器图标对应于第一组修改器中的修改器，并且第二组修改器图标中的每个修改器图标对应于第二组修改器中的修改器。

20.根据示例16至19中任一项或多项所述的处理器可读存储装置，其中，在用户界面处的选择是第一选择，该操作进一步包括：接收对在用户界面内呈现的修改器图标的第二选择；确定与由修改器图标表示的修改器相关联的修改器类别；确定与至少部分地用于确定修改器上下文的关注对象相关联的对象类别；确定修改器类别对应于对象类别；以及应用与由第二选择指示的修改器图标相关联的修改器。

21.一种承载指令的机器可读介质，该指令在由机器的一个或多个处理器执行时使机器执行示例1至11中任一项的方法。

模块、组件和逻辑

在此将某些实施例描述为包括逻辑或多个组件、模块或机制。组件可以构成硬件组件。“硬件组件”是能够执行某些操作的有形单元，并且可以以某种物理方式配置或布置。在各种示例实施例中，计算机系统(例如，独立计算机系统、客户端计算机系统或服务器计算机系统)或计算机系统的硬件组件(例如，至少一个硬件处理器、处理器或一组处理器)由软件(例如，应用或应用部分)配置为用于执行如在此所述的某些操作的硬件组件。

在一些实施例中，硬件组件以机械、电子或其任何合适的组合实现。例如，硬件组件可以包括永久配置为执行某些操作的专用电路或逻辑。例如，硬件组件可以是专用处理器，诸如现场可编程门阵列(FPGA)或专用集成电路(ASIC)。硬件组件还可以包括由软件临时配置以执行某些操作的可编程逻辑或电路。例如，硬件组件可以包括包含在通用处理器或其它可编程处理器内的软件。可以理解，可以通过成本和时间考虑来驱动机械地在专用和永久配置的电路中或在临时配置的电路(例如，由软件配置)中实现硬件组件的决定。

因此，短语“硬件组件”应该被理解为包含有形实体，是物理构造、永久配置(例如，硬连线)或临时配置(例如，编程)从而以某个方式操作或执行在此所述的某些操作的实体。如在此所使用的，“硬件实现的组件”指的是硬件组件。考虑其中临时配置(例如，编程)硬件组件的实施例，不需要在任何一个时刻配置或实例化硬件组件中的每一个硬件组件。例如，在硬件组件包括由软件配置成为专用处理器的通用处理器的情况下，通用处理器可以在不同时间被配置为相应不同的专用处理器(例如，包括不同的硬件组件)。因此，软件可以配置特定的一个或多个处理器，例如，在一个时刻构成特定的硬件组件，并在不同的时刻构成不同的硬件组件。

硬件组件可以向其它硬件组件提供信息并从其接收信息。因此，所描述的硬件组件可以被视为通信地耦接。在同时存在多个硬件组件的情况下，可以通过在两个或更多个硬件组件之间或之中的信号传输(例如，通过适当的电路和总线)来实现通信。在其中在不同时间配置或实例化多个硬件组件的实施例中，可以例如通过存储和取得多个硬件组件可访问的存储器结构中的信息来实现这些硬件组件之间的通信。例如，一个硬件组件执行操作并将该操作的输出存储在与其通信耦接的存储器装置中。然后，另一硬件组件可以稍后访问存储器装置以取得和处理存储的输出。硬件组件还可以发起与输入或输出装置的通信，并且可以在资源(例如，信息集合)上操作。

在此描述的示例方法的各种操作可以至少部分地由临时配置(例如，通过软件)或永久配置为执行相关操作的处理器来执行。无论是临时配置还是永久配置，这种处理器构成处理器实现的组件，该组件操作以执行在此所述的操作或功能。如在此所使用的，“处理器实现的组件”指的是使用处理器实现的硬件组件。

类似地，在此描述的方法可以至少部分地由处理器实现，其中特定的一个处理器或多个处理器是硬件的示例。例如，方法的操作中的至少一些操作可以由处理器或处理器实现的组件执行。此外，处理器还可以操作以支持“云计算”环境中的相关操作的性能或作为“软件即服务”(SaaS)。例如，操作中的至少一些操作可以由一组计算机(作为包括处理器的机器的示例)执行，这些操作可以经由网络(例如，因特网)和经由适当的接口(例如，应用程序接口(API))来访问。

某些操作的性能可在处理器之间分配，不仅驻留在单个机器内，还横跨多个机器部署。在一些示例实施例中，处理器或处理器实现的组件位于单个地理位置中(例如，在家庭环境、办公室环境或服务器群内)。在其它示例实施例中，处理器或处理器实现的组件横跨多个地理位置分布。

应用

图17示出与一些实施例一致的执行移动操作系统(例如，IOS、ANDROID^TM、

或其它移动操作系统)的示例移动装置1700。在一个实施例中，移动装置1700包括可操作来从用户1702接收触知数据的触摸屏。例如，用户1702可物理地触摸1704移动装置1700，并且响应于触摸1704，移动装置1700可以确定触知数据，诸如触摸位置、触摸力或手势动作。在各种示例实施例中，移动装置1700显示主屏幕1706(例如，IOS^TM上的Springboard)，其可操作以启动应用或以其它方式管理移动装置1700的各个方面。在一些示例实施例中，主屏幕1706提供诸如电池寿命、连接性或其它硬件状态的状态信息。用户1702可以通过触摸由相应的用户界面元素占据的区域来激活用户界面元素。以该方式，用户1702与移动装置1700的应用交互。例如，触摸主屏幕1706中包括的特定图标占据的区域导致启动与特定图标对应的应用。

如图17中所示，移动装置1700可以包括成像装置1708。成像装置可以是相机或耦接到能够采集视频流或一个或多个连续图像的移动装置1700的任何其它装置。成像装置1708可以由图像采集系统160或可选择的用户界面元素来触发，以启动对视频流或帧的连续体的采集，并将视频流或图像的连续体传递给图像采集系统160以根据在本公开中描述的一个或多个方法来处理。

可以在移动装置1700上执行许多种类的应用(也称为“应用软件”)，诸如本机应用(例如，在IOS^TM上运行的以Objective-C、Swift或另一适当语言编程的应用，或在ANDROID^TM上运行的以Java编程的应用)、移动web应用(例如，以超文本标记语言-5(HTML5)编写的应用)或混合应用(例如启动HTML5会话的本机壳应用)。例如，移动装置1700包括消息传递应用软件、音频录制应用软件、相机应用软件、书籍阅读器应用软件、媒体应用软件、健身应用软件、文件管理应用软件、位置应用软件、浏览器应用软件、设置应用软件、联系人应用软件、电话呼叫应用软件或其它应用软件(例如，游戏应用软件、社交网络应用软件、生物度量监视应用软件)。在另一示例中，移动装置1700包括诸如

的社交消息传送应用软件1710，其与一些实施例一致，允许用户交换包括媒体内容的短时消息。在该示例中，社交消息传送应用软件1710可以合并在此描述的实施例的各方面。例如，在一些实施例中，社交消息传递应用包括由用户社交消息传递应用创建的短时的媒体图库。这些图库可以包括用户张贴并且可由用户的联系人(例如，“朋友”)查看的视频或图片。可替代地，公共图库可由社交消息传递应用的管理员创建，该应用包括来自应用的任何用户(并且可由所有用户访问)的媒体。在又一个实施例中，社交消息传递应用可以包括“杂志”特征，其包括发布者在社交消息传递应用的平台上生成并可由任何用户访问的文章和其它内容。这些环境或平台中的任何一个都可以用来实现本发明的概念。

在一些实施例中，短时消息传送系统可以包括具有短时视频剪辑或图像的消息，该短时视频剪辑或图像在诸如观看时间或观看完成的删除触发事件之后被删除。在这种实施例中，当短时视频剪辑被实现图像采集系统160的装置采集并且该装置使用短时消息系统将短时视频剪辑发送到另一装置时，装置可以在短时视频剪辑内识别、跟踪、提取并生成面部表示，。

软件架构

图18是示出可以安装在上述装置上的软件1802的架构的框图1800。图18仅仅是软件架构的非限制性示例，并且将理解可以实现许多其它架构来促进在此所述的功能。在各种实施例中，软件1802由诸如图19的机器1900的硬件来实现，机器1900包括处理器1910、存储器1930和I/O组件1950。在该示例架构中，软件1802可以被概念化为层的堆栈，其中每一个层可以提供特定的功能。例如，软件1802包括诸如操作系统1804、库1806、框架1808和应用1810的层。操作上，与一些实施例一致，应用1810通过软件堆栈调用应用程序编程接口(API)调用1812，并响应于API调用1812接收消息1814。

在各种实施方式中，操作系统1804管理硬件资源并提供公共服务。操作系统1804包括例如内核1820、服务1822和驱动器1824。与一些实施例一致，内核1820作为硬件与其它软件层之间的抽象层。例如，内核1820提供了存储器管理、处理器管理(例如调度)、组件管理、网络连接和安全设置等功能。服务1822可以为其它软件层提供其它公共服务。根据一些实施例，驱动器1824负责控制底层硬件或与底层硬件接口连接。例如，驱动器1824可以包括显示器驱动器、相机驱动器、

驱动器、闪存驱动器、串行通信驱动器(例如通用串行总线(USB)驱动器)、

驱动器、音频驱动器、电源管理驱动器等。

在一些实施例中，库1806提供由应用1810利用的低级通用基础设施。库1806可以包括系统库1830(例如，C标准库)，其可以提供诸如存储器分配函数、字符串操作函数、数学函数等的函数。此外，库1806可以包括API库1832，诸如媒体库(例如，支持各种媒体格式(诸如运动图像专家组-4(MPEG4)、高级视频编码(H.264或AVC)、运动图像专家组层-3(MP3)、高级音频编码(AAC)、自适应多速率(AMR)音频编解码器、联合图像专家组(JPEG或JPG)或便携式网络图形(PNG))的呈现和操纵的库)、图形库(例如，用于在显示器上的图形内容中呈现二维(2D)和三维(3D)的OpenGL框架)、数据库库(例如，提供各种关系数据库功能的SQLite)、web库(例如，提供网页浏览功能的WebKit)等。库1806同样可以包括各种各样的其它库1834，以向应用1810提供许多其它API。

根据一些实施例，框架1808提供可由应用1810利用的高级公共架构。例如，框架1808提供各种图形用户界面(GUI)功能、高级别资源管理、高级位置服务等。框架1808可以提供可由应用1810利用的广泛范围的其它API，其中的一些可以特定于特定操作系统或平台。

在示例实施例中，应用1810包括主页应用1850、联系人应用1852、浏览器应用1854、书籍阅读器应用1856、位置应用1858、媒体应用1860、消息传递应用1862、游戏应用1864以及诸如第三方应用1866的广泛分类的其它应用。根据一些实施例，应用1810是执行程序中定义的功能的程序。可以利用各种编程语言来创建以各种方式构造的应用1810，诸如面向对象的编程语言(例如，Objective-C、Java或C++)或过程编程语言(例如，C或汇编语言)。在具体示例中，第三方应用1866(例如，由特定平台的供应商之外的实体使用ANDROID^TM或IOS^TM软件开发工具包(SDK)开发的应用)可以是在移动操作系统(诸如IOS^TM、ANDROID^TM、

或其它移动操作系统)上运行的移动软件。在该示例中，第三方应用1866可以调用由操作系统1804提供的API调用1812以便于执行在此描述的功能。

示例机器架构和机器可读介质

图19是示出根据一些实施例能够从机器可读存储介质(例如，处理器可读存储介质或处理器可读存储装置)读取指令(例如处理器可执行指令)并执行在此讨论的任何方法的机器1900的组件的框图。具体地，图19示出了以计算机系统的示例形式的机器1900的示意图，在该计算机系统内可以执行用于使机器1900执行在此讨论的任何方法的指令1916(例如，软件、程序、应用、小程序、应用程序或其它可执行代码)。在替代实施例中，机器1900作为独立装置操作或者可以耦接(例如，网络连接)到其它机器。在联网部署中，机器1900可以以服务器-客户端网络环境中的服务器机器或客户端机器的能力操作，或者作为对等(或分布式)网络环境中的对等机器操作。机器1900可以包括但不限于服务器计算机、客户端计算机、个人计算机(PC)、平板计算机、膝上型计算机、上网本、机顶盒(STB)、个人数字助理(PDA)、娱乐媒体系统、蜂窝电话、智能手机、移动装置、可穿戴装置(例如，智能手表)、智能家居装置(例如，智能家电)、其它智能装置、网络装置、网络路由器、网络交换机、网络桥接器、或者能够连续或以其它方式执行指定机器1900将采取的动作的指令1916的任何机器。此外，虽然只示出单个机器1900，但是术语“机器”同样可被认为包括单独或联合执行指令1916以执行在此所讨论的任何方法的机器1900的集合。

在各种实施例中，机器1900包括处理器1910、存储器1930以及I/O组件1950，其可被配置成经由总线1902彼此通信。在示例实施例中，处理器1910(例如，中央处理单元(CPU)、简化指令集计算(RISC)处理器、复合指令集计算(CISC)处理器、图形处理单元(GPU)、数字信号处理器(DSP)、专用集成电路(ASIC)、射频集成电路(RFIC)、另一个处理器或其任何合适的组合)包括例如可以执行指令1916的处理器1912和处理器1914。术语“处理器”旨在包括多核处理器，该多核处理器可以包括可以同时执行指令的两个以上独立处理器(同样称为“核”)。尽管图19示出了多个处理器1910，但是机器1900可以包括单个具有单核的处理器、单个具有多核的处理器(例如，多核处理器)、多个具有单核的处理器、多个具有多核的处理器或其任何组合。

根据一些实施例，存储器1930包括主存储器1932、静态存储器1934和经由总线1902可被处理器1910访问的存储单元1936。存储单元1936可以包括机器可读存储介质1938，在该机器可读存储介质1938上存储了体现在此所述的任何方法或功能的指令1916。指令1916同样可以在由机器1900对其的执行期间完全或至少部分地驻留在主存储器1932内、静态存储器1934内、处理器1910中的至少一个内(例如，在处理器的高速缓冲存储器内)或它们的任何合适的组合内。因此，在各种实施例中，主存储器1932、静态存储器1934和处理器1910被认为是机器可读介质1938。

如在此所使用的，术语“存储器”是指能够临时或永久地存储数据的机器可读存储介质1938，并且可以认为包括但不限于随机存取存储器(RAM)、只读存储器(ROM)、缓存、闪存和高速缓存。虽然机器可读存储介质1938在示例实施例中被示出为单个存储介质，但术语“机器可读存储介质”应当被认为包括能够存储指令1916的单个存储介质或多个介质(例如，集中式或分布式数据库，或相关联的高速缓存和服务器)。术语“机器可读存储介质”同样可被视为包括能够存储指令(例如，指令1916)用于由机器(例如，机器1900)执行的任何存储介质或多个介质的组合，使得指令在由机器1900的处理器(例如，处理器1910)执行时使机器1900执行在此描述的任何方法。因此，“机器可读存储介质”是指单个存储设备或装置，以及包括多个存储设备或装置的“基于云”的存储系统或存储网络。因此，术语“机器可读存储介质”可被视为包括但不限于以固态存储器(例如，闪存)、光学介质、磁性介质、其它非易失性存储器(例如，可擦除可编程只读存储器(EPROM))或其任何合适的组合的形式的数据存储库。术语“机器可读存储介质”可以包括机器可读存储信号。

I/O组件1950包括用于接收输入、提供输出、产生输出、发送信息、交换信息、采集测量等的各种各样的组件。通常，可理解的是I/O组件1950可以包括图17中未示出的许多其它组件。I/O组件1950根据功能被分组，仅用于简化以下讨论，并且分组决不是限制性的。在各种示例实施例中，I/O组件1950包括输出组件1952和输入组件1954。输出组件1952包括视觉组件(例如，显示器，诸如等离子体显示面板(PDP)、发光二极管(LED)显示器、液晶显示器(LCD)、投影仪或阴极射线管(CRT))、听觉组件(例如扬声器)、触觉组件(例如振动电动机)、其它信号发生器等。输入组件1954包括字母数字输入组件(例如，键盘、配置为接收字母数字输入的触摸屏、光电键盘或其它字母数字输入组件)、基于点的输入组件(例如，鼠标、触摸板、轨迹球、操纵杆、运动传感器或其它指向仪器)、触知输入组件(例如，物理按钮、提供触摸或触摸手势的位置和力的触摸屏、或其它触知输入组件)、音频输入组件(例如，麦克风)等。

在一些另外的示例实施例中，I/O组件1950包括各种其它组件中的生物度量组件1956、运动组件1958、环境组件1960或位置组件1962。例如，生物度量组件1956包括检测表达(例如手部表达、面部表情、声音表达、身体姿势或嘴部姿势)、测量生物信号(例如，血压、心率、体温、汗水或脑波)、识别人(例如，语音识别、视网膜识别、面部识别、指纹识别或基于脑电图的识别)等的组件。运动组件1958包括加速度传感器组件(例如，加速度计)、重力传感器组件、旋转传感器组件(例如陀螺仪)等。环境组件1960包括例如照明传感器组件(例如，光度计)、温度传感器组件(例如，检测环境温度的温度计)、湿度传感器组件、压力传感器组件(例如气压计)、声学传感器组件(例如，检测背景噪声的麦克风)、接近度传感器组件(例如，检测附近物体的红外传感器)、气体传感器组件(例如，机器嗅觉检测传感器、用于为了安全而检测危险气体浓度或测量大气中的污染物的气体检测传感器)或可能提供与周围物理环境相对应的指示、测量或信号的其它组件。位置组件1962包括定位传感器组件(例如，全球定位系统(GPS)接收器组件)、高度传感器组件(例如，高度计或气压计，其可以检测可以从哪个高度导出的空气压力)、取向传感器组件(例如，磁力计)等。

通信可以使用各种各样的技术来实现。I/O组件1950可以包括通信组件1964，其可操作以分别经由耦接器1982和耦接器1972将机器1900耦接到网络1980或装置1970。例如，通信组件1964包括网络接口组件或与网络1980接口连接的另一合适装置。在另外的示例中，通信组件1964包括有线通信组件、无线通信组件、蜂窝通信组件、近场通信(NFC)组件、

组件(例如，低功耗

)、

组件和经由其它模式提供通信的其它通信组件。装置1970可以是另一机器或各种各样的外围装置(例如，经由通用串行总线(USB)耦接的外围装置)中的任何一个。

此外，在一些实施例中，通信组件1964检测标识符或包括可操作以检测标识符的组件。例如，通信组件1964包括射频识别(RFID)标签读取器组件、NFC智能标签检测组件、光学读取器组件(例如，光学传感器，其用于检测诸如通用产品代码(UPC)条形码的一维条形码、诸如快速响应(QR)码、Aztec码、数据矩阵、数字图形、最大码、PDF417、超码、统一商业代码缩减空格符号(UCC RSS)-2D条形码的多维条形、以及其它光学代码)、声学检测组件(例如，用于识别标记的音频信号的麦克风)或其任何合适的组合。此外，可以经由可以指示特定位置的通信组件1964来得出各种信息，诸如经由因特网协议(IP)地理位置的位置、经由

信号三角测量的位置、经由检测

或NFC信标信号的位置等。

传输介质

在各种示例实施例中，网络1980的部分可以是自组织网络、内联网、外部网、虚拟专用网络(VPN)、局域网(LAN)、无线LAN(WLAN)、广域网(WAN)、无线WAN(WWAN)、城域网(MAN)、因特网、因特网的一部分、公共交换电话网(PSTN)的一部分、普通老式电话服务(POTS)网络、蜂窝电话网络、无线网络、

网络、另一种类型的网络，或两个以上此类网络的组合。例如，网络1980或网络1980的一部分可以包括无线或蜂窝网络，并且耦接1982可以是码分多址(CDMA)连接、全球移动通信系统(GSM)连接或另一种类型的蜂窝或无线耦接。在该示例中，耦接1982可以实现各种类型的数据传输技术中的任何一种，诸如单载波无线电传输技术(1xRTT)、演进数据优化(EVDO)技术、通用分组无线业务(GPRS)技术、GSM演进增强型数据速率(EDGE)技术、包括3G的第三代合作伙伴计划(3GPP)、第四代无线(4G)网络、通用移动通信系统(UMTS)、高速分组接入(HSPA)、全球微波接入互操作性(WiMAX)、长期演进(LTE)标准、由各种标准制定组织定义的其它标准、其它远程协议或其它数据传输技术。

在示例实施例中，经由网络接口装置(例如，在通信组件1964中包括的网络接口组件)使用传输介质通过网络1980发送或接收指令1916，并且利用多个公知的传输协议(例如，超文本传输协议(HTTP))中的任何一个。类似地，在其它示例实施例中，使用传输介质经由耦接1972(例如，对等耦接)向装置1970发送或接收指令1916。术语“传输介质”可被视为包括能够存储、编码或携带由机器1900执行的指令1916的任何无形介质，并且包括数字或模拟通信信号或其它无形介质以便于这种软件的通信实现。传输介质可以是机器可读介质的实施例。

此外，机器可读存储介质1938可以体现传播信号。然而，将机器可读存储介质1938标记为“非暂态”不应被解释为意味着存储介质不能移动；存储介质应该被认为是可从一个物理位置传送到另一物理位置。另外，由于机器可读存储介质1938是有形的，因此存储介质可以被认为是机器可读装置。

语言

在整个说明书中，多个实例可以实现被描述为单个实例的组件、操作或结构。虽然将方法的单独操作示出和描述为单独的操作，但可以并行地执行单独的操作，并且不需要以所示顺序执行操作。作为示例配置中的单独组件呈现的结构和功能可以被实现为组合的结构或组件。类似地，作为单个组件呈现的结构和功能可以被实现为分离的多个组件。这些和其它变化、修改、添加和改进落入本文主题的范围内。

虽然已经参考具体示例实施例描述了本发明主题的概述，但是在不脱离本公开的实施例的更广泛范围的情况下，可以对这些实施例进行各种修改和改变。本发明主题的此类实施例在此可以单独地或集体地由术语“发明”指代，这仅仅为了方便，如果事实上公开了多于一个公开内容或发明构思，则不旨在将本申请的范围限制于任何单个公开内容或发明构思。

在此示出的实施例足够详细地描述，以使本领域技术人员能够实践所公开的教导。可以使用其它实施例以及从中导出其它实施例，使得可以在不脱离本公开的范围的情况下进行结构和逻辑替换和改变。因此，具体实施方式不应被认为是限制性的，并且各种实施例的范围仅由所附权利要求以及这些权利要求所赋予的等同物的全部范围来限定。

如在此所使用的，术语“或”可以以包含或排除的方式来解释。此外，多个实例可以作为单个实例为在此所述的资源、操作或结构提供。此外，各种资源、操作、组件、引擎和数据存储之间的边界是一定程度上任意的，并且在特定说明性配置的上下文中示出了特定的操作。可以设想功能的其它分配，并且这些其它分配可以落入本公开的各种实施例的范围内。通常，作为示例配置中的分离的资源呈现的结构和功能可以被实现为组合的结构或资源。类似地，作为单个资源呈现的结构和功能可以被实现为分离的资源。这些和其它变化、修改、添加和改进落入由所附权利要求所表示的本公开的实施例的范围内。因此，说明书和附图被认为是说明性的而不是限制性的。

Claims (20)

1.一种用于图像修改器的选择性识别和排序的方法，包括：

识别在计算装置的用户界面内描绘的关注对象，所述识别基于现有的相关联的图像修改器；

至少部分地基于所识别的关注对象的一个或多个特征来确定修改器上下文；

基于所述修改器上下文识别一组图像修改器，所述一组图像修改器包括用于所述一组图像修改器中的每个图像修改器的修改器图标；

基于主要排序特征对所识别的一组图像修改器中的与主要修改器类别相关联的图像修改器进行排序；

基于次要排序特征对所识别的一组图像修改器中的与次要修改器类别相关联的图像修改器进行排序；以及

导致在所述用户界面内呈现用于被排序的一组图像修改器的修改器图标。

2.根据权利要求1所述的方法，其中，所述主要排序特征是基于用户意图的。

3.根据权利要求1所述的方法，其中，所述次要排序特征是基于流行度的算法。

4.根据权利要求1所述的方法，其中，所述排序的一组修改器图标是可选择的用户界面元素。

5.根据权利要求1所述的方法，其中，所述关注对象是自动选择的，而无需用户的输入。

6.根据权利要求1所述的方法，还包括：

接收在所述用户界面内呈现的修改器图标的第二选择；

确定与由所述修改器图标表示的接收的图像修改器相关联的修改器类别；

确定与至少部分地用于确定所述修改器上下文的关注对象相关联的对象类别；

确定所述修改器类别对应于所述对象类别；以及

应用与由所述第二选择指示的所述修改器图标相关联的所述修改器。

7.根据权利要求6所述的方法，其中，在所述用户界面内的所述选择是第一选择，所述方法进一步包括：

接收在所述用户界面内呈现的修改器图标的第二选择；

确定与由所述修改器图标表示的所述修改器相关联的修改器类别；

确定与第一关注对象相关联的第一对象类别和与第二关注对象相关联的第二对象类别，所述第一关注对象至少部分地被用于确定所述修改器上下文；

确定所述修改器类别对应于所述第二对象类别；以及

生成指示由所述选择在图像采集装置的视场内识别的所述第二关注对象的表示图形，所述表示图形包括覆盖在所述第二关注对象上的网格。

8.一种用于图像修改器的选择性识别和排序的装置，包括：

一个或多个处理器；以及

处理器可读存储装置，其被耦接到所述一个或多个处理器，所述处理器可读存储装置存储处理器可执行指令，所述处理器可执行指令在由所述一个或多个处理器执行时使所述一个或多个处理器执行包括以下操作的操作：

基于相关联的图像修改器识别在计算装置的用户界面内描绘的关注对象；

至少部分地基于所识别的关注对象的一个或多个特征来确定修改器上下文；

基于所述修改器上下文识别一组图像修改器，所述一组图像修改器包括用于所述一组图像修改器中的每个图像修改器的修改器图标；

基于主要排序特征对所识别的一组图像修改器中的与主要修改器类别相关联的图像修改器进行排序；

基于次要排序特征对所识别的一组图像修改器中的与次要修改器类别相关联的图像修改器进行排序；以及

导致在所述用户界面内呈现用于被排序的一组图像修改器的修改器图标。

9.根据权利要求8所述的装置，其中，所述主要排序特征是基于用户意图的。

10.根据权利要求8所述的装置，其中，所述次要排序特性是基于流行度的算法。

11.根据权利要求8所述的装置，其中，所述排序的一组修改器图标是可选择的用户界面元素。

12.根据权利要求8所述的装置，其中，所述关注对象是自动选择的，而无需用户的输入。

13.根据权利要求8所述的装置，其中，所述操作还包括：

接收在所述用户界面内呈现的修改器图标的第二选择；

确定与由所述修改器图标表示的接收的图像修改器相关联的修改器类别；

确定与至少部分地用于确定所述修改器上下文的关注对象相关联的对象类别；

确定所述修改器类别对应于所述对象类别；以及

应用与由所述第二选择指示的所述修改器图标相关联的所述修改器。

14.根据权利要求13所述的装置，其中，在所述用户界面内的所述选择是第一选择，所述操作进一步包括：

接收在所述用户界面内呈现的修改器图标的第二选择；

确定与由所述修改器图标表示的所述修改器相关联的修改器类别；

确定与第一关注对象相关联的第一对象类别和与第二关注对象相关联的第二对象类别，所述第一关注对象至少部分地被用于确定所述修改器上下文；

确定所述修改器类别对应于所述第二对象类别；以及

生成指示由所述选择在图像采集装置的视场内识别的所述第二关注对象的表示图形，所述表示图形包括覆盖在所述第二关注对象上的网格。

15.一种用于图像修改器的选择性识别和排序的非暂时性处理器可读存储介质，其存储处理器可执行指令，所述处理器可执行指令在由机器的一个或多个处理器执行时，使所述机器执行包括以下操作的操作：

基于相关联的图像修改器识别在计算装置的用户界面内描绘的关注对象；

至少部分地基于所识别的关注对象的一个或多个特征来确定修改器上下文；

基于所述修改器上下文识别一组图像修改器，所述一组图像修改器包括用于所述一组图像修改器中的每个图像修改器的修改器图标；

基于主要排序特征对所识别的一组图像修改器中的与主要修改器类别相关联的图像修改器进行排序；

基于次要排序特征对所识别的一组图像修改器中的与次要修改器类别相关联的图像修改器进行排序；以及

导致在所述用户界面内呈现用于被排序的一组图像修改器的修改器图标。

16.根据权利要求15所述的非暂时性处理器可读存储介质，其中，所述主要排序特征是基于用户意图的。

17.根据权利要求15所述的非暂时性处理器可读存储介质，其中，所述次要排序特性是基于流行度的算法。

18.根据权利要求15所述的非暂时性处理器可读存储介质，其中，所述排序的一组修改器图标是可选择的用户界面元素。

19.根据权利要求15所述的非暂时性处理器可读存储介质，其中，所述关注对象是自动选择的，而无需用户的输入。

20.根据权利要求15所述的非暂时性处理器可读存储介质，其中，所述操作还包括：

接收在所述用户界面内呈现的修改器图标的第二选择；

确定与由所述修改器图标表示的接收的图像修改器相关联的修改器类别；

确定与至少部分地用于确定所述修改器上下文的关注对象相关联的对象类别；

确定所述修改器类别对应于所述对象类别；以及

应用与由所述第二选择指示的所述修改器图标相关联的所述修改器。

Images