CN102132244B - 图像标记用户界面 - Google Patents

Abstract

接收图像的全局标记，该全局标记标识该图像中的一个或多个对象，并且该图像的区域专用标记标识该图像的区域中的一个或多个对象。全局标记和区域专用标记与图像一起存储。连同图像一起被显示的是全局标记中所标识的一个或多个对象中的每一个的标识符，以及区域专用标记中所标识的一个或多个对象中的每一个的标识符。不同的用户可以维护用于同一人的不同名字，这允许图像的相同标记被用作对不同用户将图像与不同名字一起显示的基础。另外，标记可以被用作生成图像的汇编中所包括的人的片尾字幕列表的基础。

Description

图像标记用户界面

背景

随着计算和数字成像技术的进步，计算机成了用于管理、查看和共享照片、视频和其它图像的日益受欢迎的平台。尽管其受欢迎，但当前系统仍存在问题。这些问题例如包括，用于标识照片中示出人物的区域的烦琐过程、用于在这些区域中用人名标记区域的烦琐过程、为标记同一人所使用的不同名字等。这些问题贬低了这类系统的可用性，并使用户体验降级。

概述

提供本概述是为了以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于限定所要求保护的主题的范围。

根据图像标记用户界面的一个或多个方面，接收图像的全局标记，该全局标记标识该图像中的一个或多个对象。还接收该图像的区域专用标记，该区域专用标记标识该图像的区域中的一个或多个对象。全局标记和区域专用标记与图像一起存储。连同图像一起显示的是全局标记中所标识的一个或多个对象中的每一个的标识符，以及区域专用标记中所标识的一个或多个对象中的每一个的标识符。

根据图像标记用户界面的一个或多个方面，获取具有由第一用户标记的区域的图像，标记包括区域中的个人的第一标签，第一标签由第一用户用来标识区域中的个人。确定该人的第二标签，第二标签由第二用户用来标识区域中的个人，且当为第二用户显示图像时将图像与第二标签一起显示。

根据图像标记用户界面的一个或多个方面，标识与图像汇编相关联的一个或多个标记。对于每一被标识的标记，标识标记中所标识的个人。生成图像汇编中的人的列表，该列表包括每一被标识的人。

附图简述

在全部附图中，使用相同的标号来指示相同的特征。

图1示出根据一个或多个实施例的实现图像标记用户界面的示例系统。

图2是示出根据一个或多个实施例的用于标记图像的示例过程的流程图。

图3A和3B示出了根据一个或多个实施例的全局和区域专用标记的示例。

图4示出根据一个或多个实施例的用于标记图像状态的示例状态图。

图5示出了便于标识全局或区域专用标记的名字的示例列表。

图6是示出根据一个或多个实施例的用于提供关于所发布图像的信息的示例过程的流程图。

图7是示出根据一个或多个实施例的用于合并标记的示例过程的流程图。

图8是示出根据一个或多个实施例的用于在图像编辑之后保存图像标记的示例过程的流程图。

图9是示出根据一个或多个实施例的用于生成片尾字幕(credit list)的示例过程的流程图。

图10示出根据一个或多个实施例的用于存储标记的示例模式。

图11示出根据一个或多个实施例的可被配置成实现图像标记用户界面的示例计算设备。

详细描述

在此描述图像标记用户界面。图像被显示给用户，允许用户向图像添加与整个图像相关联的全局标记以及与图像的指定区域相关联的区域专用标记。这些标记通常包括图像和/或区域中所标识的人的名字。不同的用户可以维护用于同一人的不同名字，这允许图像的相同标记被用作为不同用户将图像与不同名字一起显示的基础。另外，标记可以被用作生成图像的汇编中所包括的人的片尾字幕列表的基础。

图1示出根据一个或多个实施例的实现图像标记用户界面的示例系统100。系统100包括可经由网络106与服务器104通信的一个或多个(x个)计算设备102。网络106可以是各种不同的网络，包括因特网、局域网、公共电话网、蜂窝或其他无线电话网、内联网、其他公共和/或专用网络及其组合等。

每一计算设备102可以是各种不同类型的设备。例如，计算设备102可以是台式计算机、移动站、娱乐装置、通信耦合到显示设备的机顶盒、蜂窝或其他无线电话、个人数字助理(PDA)、游戏控制台、汽车计算机等等。因而，计算设备102的范围可以是从具有充足存储器和处理器资源的全资源设备(如个人计算机、游戏控制台)到具有有限存储器和/或处理资源的低资源设备(如传统机顶盒、手持式游戏控制台)。不同计算设备102可以是相同类型的或者是不同类型的设备。

服务器104也可以是各种不同类型的计算设备。类似于对计算设备102的讨论，服务器104的范围可以是从具有充足存储器和处理器资源的全资源设备到具有有限存储器和/或处理资源的低资源设备。尽管在系统100中仅示出一个服务器104，但可在系统100中替换地包括多个服务器104。

每一计算设备102包括图像管理模块112和标记模块114。图像管理模块112管理计算设备102上的图像，包括图像的存储、检索、显示、通信等。图像可由计算设备102本地存储，或者存储在远程存储设备上。如下更详细描述地，标记模块114协助用户标记图像，允许名字或标签与特定图像和/或图像区域相关联。

服务器104包括图像共享模块116。图像共享模块116管理服务器104进行的图像存储和共享。如下更详细描述地，各个计算设备102的用户可访问和查看模块116管理的图像。

在一个或多个实施例中，图像共享模块116支持社交联网，允许多个用户彼此通信并彼此共享其图像。也被成为在线地址簿的地址簿118可由服务器104和/或计算设备102使用来允许用户维护联系人列表。地址簿118可由服务器(例如，服务器104或其他服务器)维护，或者可由计算设备102维护。这些联系人指的是用户期望与之共享其图像的其他用户。此处所述的图像标记用户界面的各个方面可用于促进此图像共享。另外，应注意可使用图像标记用户界面的各个方面来促进计算设备102上的图像管理而无需与其他用户共享图像。

此处所述的图像标记用户界面支持图像的标记。标记图像指的是将特定标签与图像或图像部分(被成为区域)相关联。这些标签在此处主要指的是图像中人物的名字。从而，这种标记也可被称为用人或人名来标记图像。或者，可支持类似于此处所述的名字的其他对象的标签(例如，我的房子、自由女神像、太平洋等)。如下更详细讨论地，除了标签以外，这种标记也可将人(或对象)的一个或多个其他标识符与图像或图像部分相关联。

标记可以是全局标记或区域专用标记。全局标记与整个图像相关联。例如，具有名字“Bob”的全局标记可与图像相关联，指示名为“Bob”的人被包括在图像中。也被称为区域标记的区域专用标记与图像的一部分或区域相关联。例如，具有名字“John”的区域标记可与图像的特定区域相关联，指示名为“John”的人被包括在该图像区域中。

图像一般由计算设备102的用户经由标记模块114来标记。图像可由计算设备102的用户查看。另外，图像然后可被传输到服务器104和图像共享模块116以允许其他用户查看图像(及相关联的标记)。这种对其他用户查看图像的允许也被称为发布图像。在一个或多个实施例中，关于谁可查看图像的各种约束由图像共享模块116施加。通常，仅作为将图像上传到服务器104的用户(也被称为进行共享的用户)的联系人的那些用户才被允许查看图像和相关联标记，但可施加其他约束。

一旦由图像共享模块116发布，其他用户也可经由他们正在使用的计算设备102上的标记模块114来标记图像。这些附加的标记被添加到图像，使得它们可被包括发布图像的用户在内的其他用户查看。

图像也可从服务器104下载到计算设备102。在这种情形中，也下载这些图像的标记。在一个或多个实施例中，在图像被下载到计算设备102之后添加到图像的标记不对其他用户可用，除非所下载的图像被重新发布。在其他实施例中，即使在图像曾在计算设备102本地标记的情况下，在该图像被下载之后添加到图像的标记被传输到服务器104，允许其他用户查看该标记。

标记模块114向计算设备102的用户呈现允许全局和区域专用标记两者的用户界面。标记包括标签或图像中所包括的人名，且也可包括人物的一个或多个其他标识符。在一个或多个实施例中，图像共享模块116是用户参与的在线服务的一部分。作为该服务的一部分，用户被分派标识符(ID)，该标识符通常在该服务内唯一地标识该用户。该ID可被存储为标记的一部分。另外，在一个或多个实施例中，用户的电子邮件地址(或基于邮件地址的其他值，诸如通过对电子邮件地址应用散列函数而生成的散列值)被存储为标记的一部分。如下更详细讨论地，这些一个或多个额外的标识符可被用于在标记中命名的不同用户之间进行区分。这些ID和电子邮件地址可由地址簿118存储，或可由其他服务、组件和/或模块存储。

ID和/或电子邮件地址(或其散列)通常在创建标记时被添加到标记。这种信息可按照各种不同方式获取，诸如通过访问地址簿118、由用户手动输入等。在一个或多个实施例中，且如下更详细描述地，可向用户显示要用来标记图像的可能的人物列表。该列表可例如从地址簿118获取。该列表中包括的人物被称为用户的联系人，且ID和/或电子邮件地址通常已经由用户(或他人)输入，且可从该联系人信息复制到标记。

另外，在一个或多个实施例中，可为具有名字但没有其他ID或电子邮件地址的人用全局或区域专用标记来标记图像。如果稍后这样的ID或电子邮件地址变为可用，则这样的ID或电子邮件地址可被添加到标记。例如，用户可一开始用名字“妈妈”而没有任何ID或电子邮件地址来标记图像。用户随后可添加ID和/或电子邮件地址，并请求具有名字“妈妈”的标记被更新以包括该新ID和/或电子邮件地址。可搜索用户的各个图像的标记来标识具有标签“妈妈”的任何图像标记，且可将该ID和/或电子邮件地址(或其散列)添加到从此搜索中找到的标记。

尽管此处主要描述为标记个别图像，但可以理解，此处所述的技术也可用于图像的集合或序列。作为示例，可使用此处所述的技术来标记视频或图像的其他序列。在一个或多个实施例中，视频或图像的其他序列上的标记是全局标记，但是区域专用标记可替换地用于视频或图像的其他序列。

图2是示出根据一个或多个实施例的用于标记图像的示例过程200的流程图。过程200由诸如图1的计算设备102等设备来执行，并可以用软件、固件、硬件、或其组合来实现。过程200例如可由图1的标记模块114来实现。过程200是用于标记图像的示例过程；参考不同附图，此处包括了标记图像的附加讨论。

在过程200中，显示图像(动作202)。在动作202可显示全部图像，或者在动作202可显示图像的缩略图或其他标识符。

接收图像的全局标记(动作204)并与图像一起存储(动作206)。动作204和206可任选地被重复，允许多个全局标记随图像存储。

此外或替换地，接收图像的区域专用标记(动作208)，标识要与标记相关联的图像区域(动作210)。区域专用标记也随图像一起存储(动作212)。作为区域专用标记的一部分，区域的标识被包括为标记的一部分。动作208、210和212可任选地被重复，允许多个区域专用标记随图像存储。

该图像可与来自一个或多个标记的数据一起显示(动作214)。该数据可以是存储在标记中的名字或其他数据(例如，标记的其他部分、基于标记获取的数据(例如，电话号或从图1的地址簿118获取的、标记中所标识的人物的其他名字)等)。与图像一起显示的标记数据可按照各种不同方式显示，诸如覆盖图像、显示在图像周围的边界中、作为当光标移动到图像上或图像指定区域上时的弹出框等。

可按照各种方式在动作204接收图像的全局标记。在一个或多个实施例中，通过实现过程200的设备自动标识所接收的标记是全局标记还是区域专用标记。如果选择了图像的特定区域，则过程200认为标记是与所选区域相关联的区域专用标记。然而，如果没有选择图像的任何区域，则过程200认为标记是图像的全局标记。

或者，可按照不同方式接收全局标记(和/或区域专用标记)。例如，可从菜单、图标、语音命令等选择“添加全局标记”选项，并由用户输入标记数据。用户然后可选择要对其添加标记的一个或多个图像，或者当选择“添加全局标记”选择时所显示的任何图像或其标识符可自动使全局标记对其添加。

按照各种不同方式在动作210中标识区域专用标记的区域。在一个或多个实施例中，用户可诸如通过使用光标在所需区域周围画出矩形或其他形状、将矩形或其他形状拖放到所需区域上等来选择特定区域。

或者，可为用户自动标识区域。例如，可使用各种不同的常规面部检测算法或过程中的一个或多个来标识图像中包括面部的区域。一个这样的算法是由PaulViola和Michael Jones在2001年7月13日第二界视觉统计和计算理论国际讨论会——建模、学习、计算和采样中所著的“Robust Real-time Object Detection(鲁棒的实时对象检测)”所述的对象检测。然而，可以理解，这仅是示例面部检测算法，可替换使用其他算法。

这些自动标识的区域中的每一个可以是在动作210中标识的区域。作为示例，用户可从列表中选择特定名字，或可按照其他方式输入特定名字，然后选择包括具有该特定名字的人的面部的区域之一。包括该特定名字和该所选区域的标记被存储为图像的一部分。

可按照各种不同方式使用区域的这种自动检测。在一个或多个实施例中，当向用户显示图像时，向用户标识尚未关联任何标记的区域。这种标识可采取各种不同的形式，诸如用特定线条颜色勾勒区域、灰晕(gray out)图像的其他部分或使其他部分变暗等。用户然后能够容易地在其图像中看到尚未关联任何标记的区域，并快速且容易地标记这些区域。

另外，在一个或多个实施例中，不考虑标识区域的方式，可移动区域和/或调节其大小。这种大小调节按照各种不同方式进行，诸如通过使用光标或光标控制设备来拖曳特定的一条或多条边、拖曳特定角落、移动整个矩形或定义区域的其他形状等。

此外，全局标记可被转换成区域专用标记，且区域专用标记可被转换成全局标记。可通过用户标识要与全局标记相关联的特定区域来将全局标记转换成区域专用标记。例如，用户可选择或定义图像中的区域，然后选择全局标记的标识符(例如，正显示为全局标记的数据)，响应于此，该全局标记变为与用户所选或所定义的区域相关联的区域专用标记。可通过用户诸如从菜单、工具栏、口头输入等选择“变为全局”选项来将区域专用标记转换为全局标记。响应于对此选项的选择，标记与特定区域的关联被移除，导致标记成为全局标记。

图3A和3B示出了根据一个或多个实施例的全局和区域专用标记的示例。可以理解，图3A和3B中的区域和/或标记数据的显示仅是示例，且它们可按照其他方式被替换显示。

在图3A中，图像300包括全局标记“John”，指示名为John的人被包括在图像中。在图3B中，示出了包括区域专用标记“Jane Doe”的图像300，指示名为Jane Doe的人被包括在所示区域中。图3B中所示区域被示为由矩形302勾勒。该矩形302可响应于各种不同动作显示，诸如用户请求显示图像区域、用户将光标置于区域上等。

图4示出根据一个或多个实施例的用于标记图像状态的示例状态图400。状态图400示出了状态402、404、406、408和410，它们是五个不同的人物标记状态。在状态402中，没有任何标记与图像相关联，且在图像中没有标识任何区域。在状态404中，一标记与图像相关联，但在图像中没有标识任何区域。在状态404中，该标记是全局标记。在状态406中，已在图像中标识一区域，但没有任何标记与图像相关联。在状态408中，一标记已被分派给图像，且在图像中标识了一区域，但该标记和区域彼此不匹配或关联。在状态408中，该标记是全局标记。在状态410中，一标记被分派给图像，且标识了与该标记相关联的区域(图像和区域匹配)。在状态410中，该标记是区域专用标记。

在状态402中，用户可向图像分派全局标记，导致对状态404的转移412。或者，在状态402中，用户可向图像分派区域专用标记，导致对状态410的转移414。在状态402中，用户也可向图像分派全局标记，且面部可被自动检测为图像中的区域，导致对状态408的转移416。

在状态404，用户可定位对应于全局标记的图像中的人，且将包括该人的区域与标记相关联，导致对状态410的转移418。

在状态406，用户可标识检测到的区域(例如自动检测为包括面部)并将其与一标记匹配，导致对状态410的转移420。或者，在状态406中，用户可向图像分派全局标记，导致对状态408的转移416。

在状态408中，用户匹配标记和区域，导致对状态410的转移422。

另外，此处所述的图像标记用户界面可促进对全局或区域专用标记的名字的标识。在一个或多个实施例中，使用特定图标、菜单选项、口头输入等来标识特定用户。例如，具有用户名字或某种其他标识符(例如“那是我”)的图标可向用户显示，允许用户快速且容易地将他们自己标识为要包括在全局或区域专用标记中的人名。

此外，在一个或多个实施例中，显示或以其他方式向用户呈现常用名字的列表。用户可从该列表中选择一名字作为要包括在全局或区域专用标记中的人名。这允许用户快速且容易地标识要包括在全局或区域专用标记中的常用人名。

图5示出了便于标识全局或区域专用标记的名字的示例列表。在图5的示例中，显示图像500，并标识图像500中的区域502。也显示列表504，包括“那是我”的选项以及四个其他常用名字：在此示例中为Karthik Anbalagan、Scott Ramsby、Jacky Chan和Michael Kim。列表504也包括允许用户滚动通过并在列表504中显示额外名字的滚动条。也可向用户显示工具提示(例如，只要指针移动到列表504中的特定名字上时)，显示所命名人物的电子邮件地址(例如从图1的地址簿118中获取)。另外，如果出现其中列表504中的两个名字相同的情况(例如，两个名字“John”)，则也可显示在这两者之间区分的额外信息，诸如所命名人物的电子邮件地址(例如，如从地址簿118获取)。

也显示允许用户输入字母或其他字符以便搜索当前未在列表504中显示的特定人物的附加的搜索框506。在一个或多个实施例中，搜索是前缀匹配搜索，搜索人名或身份的多个部分(例如，名字、姓、中间名、昵称、别名等)。可以理解，也可替换地使用各种其他搜索技术或算法中的任何一个。

列表504允许用户容易且快速地标识区域502中所包括的人物。例如，用户可使用光标和光标控制设备在区域502上点击，然后点击“那是我”来将区域502中包括的人标识为该用户，并使标记中包括的用户名与区域502相关联。诸如用户ID和来自图1的地址簿118的电子邮件地址的散列等额外信息也可被包括在标记中。作为另一示例，用户可点击区域502，然后点击“Scott Ramsby”将区域502中包括的人标识为Scott Ramsby，并使标记中包括的名字“Scott Ramsby”与区域502相关联。诸如ID和来自图1的地址簿118的Scott Ramsby的电子邮件地址的散列等额外信息也可被包括在标记中。

列表504中显示的名字是来自对应于用户的联系人列表的名字。联系人列表例如可被存储在图1的地址簿118中。诸如图1的标记模块114的标记模块维护联系人列表中的每一名字被用户用在全局和/或区域专用标记中的频率和/或新近程度。该记录可按照各种方式使用来标识列表504中名字的排序。例如，在列表504中，较常被选为包括在图像中的人物可被显示在较不频繁被选为包括在图像中的人物之前(例如，较高)。作为另一示例，较新近被标识为被包括在图像中的人物可被显示在较不新近标识为被包括在图像中的人物之前(例如，较高)。

也可在列表504中确定名字和/或名字排序时使用其他因素。例如，在图像的全局标记中标识但未在图像的区域专用标记中标识的人物可在列表504中被包括在其他人之前(例如，较高)。作为又一示例，如果一人已被包括在图像的区域专用标记中，则该人的名字不在列表504中显示。作为另一示例，用户的名字(或“那是我”)在列表504中可被包括在其他人之前(例如，较高)。作为又一示例，已被包括在图像的区域专用标记中的人在列表504中可被包括在其他人之后(例如，较低)。此外，可以理解，这些因素以及用户使用联系人列表中的每一名字的频率和/或新近程度的不同组合可用于标识包括在列表504中的名字和/或名字的排序。

在一个或多个实施例中，该记录以以下方式用来标识列表504中名字的排序。可以理解，以下仅是标识列表504中名字的排序的示例，且可替换地使用其他技术。联系人列表首先按照使用频率从最常使用到最不常使用排序。在最新近添加的标记中标识的五个联系人被放入MRU列表，按照频率从最常使用到最不常使用排序。然后按照以下方式用名字填充列表504：

1)如果图像用标识该用户的全局标记来标记，但没有用标识该用户的区域专用标记来标记，则该用户被添加到列表504的顶端(作为“那是我”条目)。

2)如果图像用标识联系人列表中的其他联系人的任何其他全局标记来标记，则这些联系人被添加到列表504的顶端(如果该用户在1中添加，则在该用户的名字之后)。

3)在1)和2)之后，如果列表504中填充的槽小于五个，则来自MRU列表中的最新近使用联系人被紧接着添加到列表504，直到填充了所有五个槽。

4)MRU列表和/或联系人列表中任何其余联系人按照字母顺序添加到列表504。

返回图1，当图像由图像共享模块116发布时，可向请求发布图像的用户以及其他用户提供各种附加信息。图6是示出根据一个或多个实施例的用于提供关于所发布图像的信息的示例过程600的流程图。过程600由诸如图1的服务器104等设备来实现，并可以用软件、固件、硬件、或其组合来实现。过程600例如可由图1的图像共享模块116来实现。过程600是用于提供关于所发布的图像的信息的示例过程；参考不同服务在此包括提供关于所发布的图像的信息的其他讨论。

在过程600中，从第一用户接收要与其他用户共享的图像。该图像通常从第一用户经由第一用户所使用的计算设备(例如图1的设备102)的图像管理模块接收。要共享的图像是由第一用户发布的图像。

从包括在所接收的图像中的标记中标识第二用户(动作604)。该标记可以是全局标记或区域专用标记。如上所述，标记可包括标记中所标识的人的ID和/或电子邮件地址(或其散列)。在动作604中，检索该ID和/或电子邮件地址。

然后基于标记，向第一用户和第二用户之一或两者提供信息(动作606)。所提供的该信息可采取各种不同形式。另外，如果所接收的图像包括多个标记，则可对这些多个标记中的每一个重复动作604和606，得到在图像发布时提供的多个信息。

在一个或多个实施例中，在动作606中提供的信息是对第二用户指示发布了包括第二用户的图像的通知。该信息可任选地包括第一用户的标识(请求该图像发布的用户)。该通知可采取各种形式，诸如电子邮件通知、即时消息通知、显示在对话框中的警告或以其他方式向第二用户呈现等。

另外，在一个或多个实施例中，在动作606中提供的信息是对第一用户指示第二用户发布了其他图像的通知。该通知可采取各种形式，诸如电子邮件通知、即时消息通知、显示在对话框中的警告或以其他方式向第二用户呈现等。该通知允许第一用户访问并查看第二用户共享的其他图像。

另外，不同用户可按照不同方式命名或以其他方式标识同一人。例如，一个用户可称呼特定的人为“妈妈”，而另一用户可称呼该特定的人为“姐妹”，而又一用户可称呼该特定的人为“Barb”。即使这些不同用户创建的不同标记包括该特定的人的不同名字，也可在这些不同标记中包括同一标识符和/或电子邮件地址。这例如允许，为第一用户称呼该人为“妈妈”的图像创建的标记在当显示该图像时向第二用户显示“姐妹”的标签。这种为不同用户显示同一人的不同名字或标签被称为合并标记或链接标记。

图7是示出根据一个或多个实施例的用于合并标记的示例过程700的流程图。过程700由诸如图1的服务器104或图1的计算设备102等设备来执行，并可以用软件、固件、硬件、或其组合来实现。过程700例如可由图1的图像共享模块116或图像管理模块112来实现。过程700是用于合并图像的示例过程；参考不同附图，此处包括了合并图像的附加讨论。

在过程700中，获取第一用户标记为包括特定人物的图像(动作702)。该图像例如作为第一用户发布图像的结果获取。该标记可以是全局标记或区域专用标记。

确定第二用户所使用的该特定人物的标签(动作704)。可按照各种不同模式确定该标签。在一个或多个实施例中，标记包括该特定人物的ID和/或电子邮件地址(或其散列)。访问ID和/或电子邮件地址的记录，诸如图1的地址簿118。该ID和/或电子邮件地址的记录包括不同人物的条目，具有第二用户用来指示这些人物的名字或其他标签。作为为每一用户维护的单独记录，与特定ID和/或电子邮件地址相关联的名字和/或标签可有所变化。

另外，如此所述，在一个或多个实施例中，标记包括特定人的电子邮件地址的散列值而非该特定人的实际电子邮件地址。在这样的实施例中，将电子邮件地址的记录中的一个或多个条目的散列值与标记中电子邮件地址的散列值比较，以确定标记中的值是否与电子邮件地址的记录中的值相同。

用第二用户所使用的该特定人的标签向第二用户显示图像(动作706)。该标签是动作704中标识的标签。

这种合并也可包括对人重命名。例如，如果用户要改变特定人的名字并在地址簿118中记录该改变，则基于图像标记对该特定人的标签的任何后续显示将包括该新的名字。

如上所述，标记可包括名字或标签、ID和/或电子邮件地址(或其散列)。在一个或多个实施例中，合并过程使用ID和/或电子邮件地址(或散列)来确定第二用户所使用的标签或名字。例如，如果标记包括ID和电子邮件地址散列值两者，则如果ID和电子邮件地址散列值两者均匹配用户地址簿记录中的一条目(与之相同)，则来自该条目的标签被显示为标记中所标识的人的标签或名字。如果标记仅包括ID和/或电子邮件地址散列值之一，则如果ID和/或电子邮件地址散列值之一匹配(与之相同)，则来自该条目的标签被显示为该标记中标识的人的标签或名字。如果标记包括ID和电子邮件地址散列值两者，且如果仅ID和电子邮件地址散列值之一匹配用户地址簿记录中的一条目(与之相同)，则在一个或多个实施例中，来自该条目的标签被显示为标记中所标识的人的标签或名字。在替换实施例中，来自该条目的标签不被显示为标记中所标识的人的标签或名字；相反，显示标记中的名字或标签。在其中ID和/或电子邮件地址散列值不被包括在标记中或不匹配用户地址簿记录中的条目(不与之相同)的其他情况中，显示来自标记的名字或标签。

表1示出了用于合并或链接标记的可能情形的示例。访问诸如图1的地址簿118的ID和/或电子邮件地址的记录，且将该记录中的条目与标记进行比较。这种比较包括评估各个准则来确定标记指向的人是否与记录中的条目所指向的人相同，且因此确定标记和条目是否可被合并或链接。表1指示可作为比较的一部分评估的三个准则：名字、电子邮件地址(或电子邮件地址散列值)以及ID。标记和记录条目中的名字或者匹配或者不匹配。标记和记录条目中的电子邮件地址(或电子邮件地址散列值)或者匹配或者不匹配，或者标记和记录条目之一或两者中可能缺失电子邮件地址(或电子邮件地址散列值)。标记和记录条目中的ID或者匹配或者不匹配，或者标记和记录条目之一或两者中可能缺失ID。

表1基于这些各种准则还示出标记和条目是否可被合并或链接；或者标记和条目是否不能被合并或链接。另外，也在表1中包括如何会发生不同匹配、不匹配和/或缺失情况的示例。可以理解，表1仅是示例，或者可使用不同准则来确定标记和记录条目是否可被或不可被合并或链接。

表I

返回图1，应注意到，当在图像已被标记之后再被更改时，这种情况可能发生。这种更改可采取各种不同形式，诸如更改图像的尺寸、更改图像的内容(例如，裁剪图像)等。根据一个或多个实施例中，标记模块114标识这些更改，并适当地调节该图像的标记，使得标记继续与图像的适当部分相关联。

图8是示出根据一个或多个实施例的用于在图像编辑之后保存图像标记的示例过程800的流程图。过程800由诸如图1的计算设备102等设备来执行，并可以用软件、固件、硬件、或其组合来实现。过程800例如可由图1的标记模块114来实现。过程800是用于在图像编辑之后保存图像标记的示例过程；参考不同附图在此包括对在图像编辑之后保存图像标记的附加讨论。

在过程800中，访问曾编辑的图像(动作802)。对具有相关联标记的区域是否受到编辑的影响进行检查(动作804)。可按照各种不同方式作出具有相关联标记的区域是否受到编辑的影响的判断。在一个或多个实施例中，执行图像编辑的模块或组件向实现过程800的模块通知对图像进行的特定的一个或多个改变。在这种情形中，这种通知可用于确定哪一个或哪一些区域受到编辑的影响(如果有区域受到影响)。

在其他实施例中，作为动作804的一部分，分析图像以确定对图像作出了何种改变。可标识的这类改变的示例例如包括对图像尺寸的改变、对图像长宽比的改变、对图像数据的改变等。对图像尺寸或长宽比的改变可通过将编辑之前的图像尺寸与编辑之后的图像尺寸进行比较来标识。可按照不同方式来标识对图像数据的改变，诸如通过生成图像的“指纹”。这样的指纹可以按各种不同的方式来生成。例如，可生成图像的直方图来作为指纹，可生成图像的不同部分的散列值(例如，为图像的每一64像素正方形部分或其他大小的各部分)作为指纹等。可将编辑之前的该指纹与编辑之后的指纹进行比较，来确定指纹是否改变，且因此确定图像数据是否改变。

如果图像中没有区域具有受到编辑影响的相关联标记，则不对图像标记作出改变(806)。然而，如果有具有相关联标记的图像区域受到编辑影响，则适当地更改与受到影响的区域相关联的标记(动作808)。其中更改与受到影响的区域相关联的标记的方式至少部分基于所进行的编辑的类型。例如，如果改变的是图像的尺寸或长宽比，则在动作808中，可修改对应于标记的区域的描述。作为另一示例，如果要编辑图像数据使得图像中包括该区域的一部分被裁剪到图像之外，则与该区域相关联的标记将被删除。

表II示出了因编辑图像而得到的解释的示例。基于表II，所检查的图像(例如，作为动作804的一部分)的特征包括：图像的尺寸、图像的长宽比、图像的修改日期(图像最近修改的日期和/时间)以及图像的指纹。这些改变的示例解释也被包括在表II中。可以理解，表II仅是示例，且可替换地使用图像编辑的任何其他解释。

表II

然后可基于来自表II的解释作出对与图像相关联的标记的改变。例如，如果图像被裁剪，则可对与标记相关联的区域是否被裁剪到图像之外进行检查，如果相关联的区域被裁剪到图像之外，则标记被删除。作为另一示例，如果图像大小被调整，则图像中各区域的定义可根据此大小调整被更新。作为又一示例，如果图像数据被编辑，则可对与图像相关联的区域是否仍包括面部进行检查，且不再包括面部的区域可被删除(例如，与区域相关联的标记可被删除，区域专用标记可被转换成全局标记等)。

另外，图像标记可按照其他方式使用来向用户提供附加特征。一个这样的附加使用是创建图像汇编的片尾字幕。图像汇编指的是归组在一起以便显示的两个或多个图像的集合。例如，图像汇编可以是幻灯片展示、视频(可被认为是图像序列)、包括视频以及图像的电影等。这样的图像汇编可以按各种不同的常规方式来生成。

图9是示出根据一个或多个实施例的用于生成片尾字幕的示例过程900的流程图。过程900由诸如图1的计算设备102或服务器104等设备来执行，并可以用软件、固件、硬件、或其组合来实现。过程900是用于生成片尾字幕的示例过程；参考不同附图，此处包括了生成片尾字幕的附加讨论。

在过程900中，选择来自图像汇编的图像(动作902)。图像可按照各种不同方式来选择，诸如按照出现在图像汇编中的次序、随机等。标识与所选图像相关联的每一标记(动作904)。对汇编中是否存在还未选择的其他图像进行检查(动作906)。如果存在还未被选择的图像，则过程900返回到动作902来选择这些图像之一。

然而，如果已选择了汇编中的所有图像，则过程900继而标识标记中所标识的每一人(动作908)。动作908中的标记是在动作904中标识的那些。

基于所标识的人为在汇编中出现的人物生成列表(动作910)。在一个或多个实施例中，在动作910中生成的列表标识在图像汇编中的一个或多个图像的一个或多个标记中标识的每一人。每一人通常仅在列表中被包括一次，而不考虑其在标记中出现的次数，但是替换地，个体可被列出多次。人物列表可按照各种不同方式组织，诸如对应于人物在图像汇编中出现的次序、根据人物在图像中标识的频率、按字母顺序、随机等。

该列表例如然后可被显示为显示图像汇编之后的片尾字幕。或者，该列表可在其他时间显示，诸如在显示图像汇编之前、响应于用户对该列表的请求等。

如上所述，在一个或多个实施例中，图像汇编可以是具有标记的视频。标记可与视频和/或视频的各个图像相关联。在其中一个或多个标记与视频而非个别图像相关联的情况中，在动作904中标识的标记包括与视频相关联的一个或多个标记。

图10示出根据一个或多个实施例的用于存储标记的示例模式1000。模式1000随图像数据一起存储标记数据，允许在传送图像时容易地传送标记数据。在一个或多个实施例中，模式1000被用于将标记数据存储为图像的元数据。可以理解，模式1000示出了在数据结构中随图像数据一起存储标记的示例方式，且替换地，可按照其他方式存储标记。

模式1000包括将其余部分标记为标记数据的标记部分1002。标记部分1002包括存储何时标记特定区域(例如，使标记数据与特定区域相关联)的数据的日期区域有效部分1004。标记部分1002还包括一个或多个区域部分1006。在图10中仅示出一个区域部分1006，但是替换地，可在标记部分1002中包括多个区域部分1006。

区域部分1006包括为图像定义区域的区域定义部分1008。该区域由以下部分定义：存储标识区域的矩形的左侧的数据的区域左部分1010、存储标识区域的矩形的顶部的数据的区域顶部部分1012、存储标识区域的矩形的高度的数据的区域高度部分1014、以及存储标识区域的矩形的宽度的数据的区域宽度部分1016。在一个或多个实施例中，存储在部分1010-1016中的数据被正则化成0到1之间的值。因此，代替存储标识区域的固定位置的数据，这些部分存储标识区域的相对位置的数据。从而，如果图像尺寸和/或长宽比改变，则不必更新定义该区域的这些值。

区域定义部分1008还包括人定义部分1018。人定义部分1018标识包括在该区域中的人，且包括显示名字部分1020、标记部分1022以及标记部分1024。显示名字部分1020标识生成标记的用户称呼该人的名字(例如，“妈妈”、“姐妹”等)。标记部分1022包括将标记部分1022标识为包括表示该人的ID的数据的ID标记部分1026以及包括ID值的ID值部分1028。标记部分1024包括将标记部分1024标识为包括表示该人的电子邮件地址的数据的电子邮件标记部分1030以及包括电子邮件地址的散列的电子邮件值部分1032。

如上所述，在电子邮件值部分1032中包括人的电子邮件地址的散列而非实际电子邮件地址。这向用户提供了某一水平的私密性，保护用户免于使其电子邮件地址被发布给其他用户。可使用各种不同的单向散列算法来生成存储在部分1032中的电子邮件地址的散列值。单向散列算法指的是其中在单独给定散列值的情况下在计算上重新创建电子邮件地址不可行(即使不是不可能)的生成散列值的散列算法。或者，可采用除散列算法以外的保护技术来保护电子邮件地址，诸如使电子邮件地址加密。

在一个或多个实施例中，对全局标记以及区域专用标记使用模式1000。对全局标记，标识特定区域的数据(例如，部分1010-1016中)被置为0(或某一其他已知值)。如果该全局标记随后被改为区域专用标记，则这些部分1010-1016可用标识该标记的特定区域的数据来填充。

图11示出根据一个或多个实施例的可被配置成实现图像标记用户界面的示例计算设备1100。计算设备1100可以是例如图1的计算设备102或服务器104。

计算设备1100包括一个或多个处理器或处理单元1102、可包括一个或多个存储器和/或存储组件1106的一个或多个计算机可读介质1104、一个或多个输入/输出(I/O)设备1108、以及允许各组件和设备彼此通信的总线1110。计算机可读介质1104和/或一个或多个I/O设备1108可作为计算设备1100的一部分来包括，或另选地可耦合到计算设备1100。总线1110表示若干类型的总线结构中的一个或多个，包括存储器总线或存储器控制器、外围总线、加速图形端口、使用各种不同总线体系结构的处理器或局部总线等。总线1110可包括有线和/或无线总线。

存储器/存储组件1106表示一个或多个计算机存储介质。组件1106可包括易失性介质(如随机存取存储器(RAM))和/或非易失性介质(如只读存储器(ROM)、闪存、光盘、磁盘等等)。组件1106可包括固定介质(例如，RAM、ROM、固定硬盘驱动器等)以及可移动介质(例如闪存驱动器、可移动硬盘驱动器、光盘等等)。

此处所讨论的技术可以用软件来实现，且各指令由一个或多个处理单元1102来执行。可以明白，不同的指令可以存储在计算设备1100的不同组件中，如存储在处理单元1102中、存储在处理单元1102的各种高速缓存存储器中、存储在设备1100的其他高速缓存存储器中(未示出)、存储在其他计算机可读介质上，等等。另外，可以明白，指令被存储在计算设备1100中的位置可以随时间改变。

一个或多个输入/输出设备1108允许用户向计算设备1100输入命令和信息，并还允许向用户和/或其它组件或设备呈现信息。输入设备的示例包括键盘、光标控制设备(例如鼠标)、话筒、扫描仪等。输出设备的示例包括显示设备(例如监视器或投影仪)、扬声器、打印机、网卡等。

各种技术在此可以在软件或程序模块的一般上下文中描述。一般而言，软件包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。这些模块和技术的实现可以存储在某种形式的计算机可读介质上或通过某种形式的计算机可读介质传输。计算机可读介质可以是可由计算机访问的任何一个或多个可用介质。作为示例而非限制，计算机可读介质可以包括“计算机存储介质”和“通信介质”。

“计算机存储介质”包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括但不限于，RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、盒式磁带、磁带、磁盘存储或其他磁存储设备，或者可用于存储所需信息并可由计算机访问的任何其他介质。

“通信介质”通常用诸如载波或其他传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其他数据。通信介质还包括任意信息传递介质。术语“已调制数据信号”是指以在信号中对信息进行编码的方式来设置或改变其一个或多个特征的信号。作为示例而非限制，通信介质包括有线介质，诸如有线网络或直接线连接，以及无线介质，诸如声学、RF、红外线和其他无线介质。以上的任一种的组合也包括在计算机可读介质的范围之内。

一般而言，本文描述的任何功能或技术可使用软件、固件、硬件(例如，固定逻辑电路)、手动处理或这些实现的组合来实现。如此处所使用的术语“模块”通常表示软件、固件、硬件、或其组合。在软件实现的情况下，模块表示当在处理器(例如，一个或多个CPU)上执行时执行指定任务的程序代码。该程序代码可被存储在一个或多个计算机可读介质中，对其的进一步描述可参考图11找到。本文描述的图像标记用户界面的技术的各个特征是平台无关的，从而意味着该技术可在具有各种处理器的各种商用计算平台上实现。

尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。相反，上文所描述的具体特征和动作是作为实现权利要求的示例形式来公开的。

Claims (13)

1.一个用于图像标记的计算设备(102)，包括：

标记模块(114)，其：

接收(204)图像的全局标记，所述全局标记标识所述图像中的一个或多个对象；

接收(208)所述图像的区域专用标记，所述区域专用标记标识所述图像的区域中的一个或多个对象并具有与所述图像的所述区域的关联，所述区域专用标记包括所述区域中的人的第一标签，所述第一标签被第一用户用来标识所述区域中的所述人；以及

将所述全局标记和所述区域专用标记与所述图像一起存储(206,212)；以及

图像管理模块(112)，其：

确定所述人的第二标签，所述第二标签被第二用户用来标识所述区域中的所述人，

连同所述图像一起显示(214)所述全局标记中所标识的所述一个或多个对象中的每一个的标识符，以及所述区域专用标记中所标识的所述一个或多个对象中的每一个的标识符，

当为所述第一用户显示所述图像时，将所述图像与所述第一标签一起显示，

当为所述第二用户显示所述图像时，将所述图像与所述第二标签一起显示，并且

允许将所述全局标记转换成附加的区域专用标记，并允许将所述区域专用标记转换成与所述图像整体相关联的附加的全局标记，所述区域专用标记对所述附加的全局标记的转换包括从所述区域专用标记中移除与所述图像的所述区域的关联，以使得所述区域专用标记成为与所述图像整体相关联的所述附加的全局标记。

2.如权利要求1所述的计算设备，其特征在于，所述标记模块还：

基于检测所述图像内的面部，自动地标识所述图像的一个或多个区域；

显示人的列表；以及

其中，接收所述区域专用标记是接收对所述一个或多个区域的其中之一和来自所述人的列表的人的用户选择。

3.如权利要求1所述的计算设备，其特征在于，所述标记模块还：

显示人的列表；以及

其中，接收所述区域专用标记是接收对来自所述人的列表中的所述区域中所包括的人的用户选择。

4.如权利要求3所述的计算设备，其特征在于，显示所述列表是显示所述列表以使得被较为频繁地选择为被包括在图像中的人被显示在被较不频繁地选择为被包括在图像中的人之前。

5.如权利要求3所述的计算设备，其特征在于，显示所述列表是显示所述列表以使得较新近被标识为被包括图像中的人被显示在较不新近被标识为被包括图像中的人之前。

6.如权利要求1所述的计算设备，其特征在于，所述标记模块还显示可由用户选择以便将所述用户标识为被包括在所述区域中的选项。

7.如权利要求1所述的计算设备，其特征在于，所述标记模块还：

接收所述图像的多个附加的区域专用标记，所述多个附加的区域专用标记中的每一个标识所述图像的不同区域中的一个或多个对象；以及

将所述多个附加的区域专用标记与所述图像一起存储。

8.如权利要求1所述的计算设备，其特征在于，所述标记模块还：

对于图像汇编中所包括的多个图像中的每一个，标识与每一图像相关联的一个或多个标记；

对于每一个所标识的标记，标识所述标记中所标识的人；以及

生成所述图像汇编中的人员的列表，所述列表包括每一个所标识的人。

9.一种用于图像标记的方法，包括：

接收图像的全局标记，所述全局标记标识所述图像中的对象并具有与所述图像整体的关联；

将所述全局标记与所述图像一起存储；

连同所述图像一起显示所述全局标记中所标识的所述对象的标识符，以及

接收对所述图像中的区域的用户选择和对所述图像中、由所述全局标记标识的对象的标识符的用户选择；且

通过向所述全局标记添加标识所述区域的数据以使得所述全局标记变为区域专用标记来将所述全局标记转换成区域专用标记，所述区域专用标记标识所述图像的所述区域中的对象，并基于所添加的数据与所述图像的所选区域具有关联，其中所述方法还包括：

接收所述图像的附加的区域专用标记，所述附加的区域专用标记具有与所述图像的附加区域的关联，通过从所述附加的区域专用标记中移除与所述图像的所述附加区域的关联，以使得所述区域专用标记成为与所述图像整体相关联的附加的全局标记来将所述区域专用标记转换成与所述图像整体相关联的所述附加的全局标记，其中允许由与发布所述图像的用户不同的其他用户将所述全局标记转换成附加的区域专用标记以及将所述区域专用标记转换成与所述图像整体相关联的附加的全局标记，

且其中所述区域专用标记包括所述区域中的人的第一标签，所述第一标签由第一用户用来标识所述区域中的所述人，其中所述方法还包括：

确定(704)所述人的第二标签，所述第二标签由第二用户用来标识所述区域中的所述人；以及

当为所述第二用户显示所述图像时，将所述图像与所述第二标签一起显示(706)。

10.如权利要求9所述的方法，其特征在于，确定所述第二标签包括访问地址簿以便标识所述第二用户称呼所述第一用户的名字。

11.如权利要求9所述的方法，其特征在于，所述第二标签不同于所述第一标签。

12.如权利要求9所述的方法，其特征在于，还包括当为所述第一用户显示所述图像时将所述图像与所述第一标签一起显示。

13.如权利要求9所述的方法，其特征在于，确定所述第二标签包括：

将所述标记中的电子邮件地址的散列值与所述第二用户的电子邮件地址记录中的一个或多个电子邮件地址的散列值进行比较；

标识对应于与所述标记中的所述电子邮件地址的所述散列值相同的所述电子邮件地址记录中的所述电子邮件地址的散列值的名字；以及

将所述名字用作所述第二标签。