CN102016882A - 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序 - Google Patents

利用脸部签名来标识和共享数字图像的方法、系统和计算机程序 Download PDF

Info

Publication number
CN102016882A
CN102016882A CN2008801265430A CN200880126543A CN102016882A CN 102016882 A CN102016882 A CN 102016882A CN 2008801265430 A CN2008801265430 A CN 2008801265430A CN 200880126543 A CN200880126543 A CN 200880126543A CN 102016882 A CN102016882 A CN 102016882A
Authority
CN
China
Prior art keywords
face
image
digital picture
linked
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2008801265430A
Other languages
English (en)
Other versions
CN102016882B (zh
Inventor
R·加农
D·C·沃
鲁勇满
K·普拉塔尼奥蒂斯
C·斯图德霍尔梅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
11967134 Canada Ltd
Application Identification Ltd
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201510243178.3A priority Critical patent/CN104866553A/zh
Publication of CN102016882A publication Critical patent/CN102016882A/zh
Application granted granted Critical
Publication of CN102016882B publication Critical patent/CN102016882B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F15/00—Digital computers in general; Data processing equipment in general
    • G06F15/16—Combinations of two or more digital computers each having at least an arithmetic unit, a program unit and a register, e.g. for a simultaneous processing of several programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/955—Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0269—Targeted advertisements based on user profile or attribute
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/32—Normalisation of the pattern dimensions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/30—Scenes; Scene-specific elements in albums, collections or shared content, e.g. social network photos or video
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Strategic Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Human Computer Interaction (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Hardware Design (AREA)
  • Human Resources & Organizations (AREA)
  • Computing Systems (AREA)
  • Primary Health Care (AREA)
  • Tourism & Hospitality (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Processing Or Creating Images (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明解决了在本地计算机存储设备(家庭计算机)上自动识别照片或视频中多个已知脸部的问题。其进一步允许基于已知脸部的图形化选择(通过选择人们的缩略图像)，对照片或视频进行复杂组织和呈现。其还解决了用于以自动方式在“好友”之间共享或分发照片或视频的问题，该好友也使用支持本发明的相同软件。其进一步解决了允许本发明的用户查看自动脸部检测、眼部检测和脸部识别方法的结果，并且修正自动过程产生的任何错误。

Description

利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
技术领域
本发明涉及将向目标个体分发图像。更具体地，本发明涉及数字图像中的脸部检测和脸部识别，并且利用社交网络服务和对等网络将图像分发至出现在该图像中的个体。
背景技术
目前存在的社交网络是利用网站连接多个个体的工具。以下是PCMAG.COMTM百科对“社交网络”的定义：
由家庭、工作或爱好联系在一起的人的社团。该术语由J.A.Barnes教授于20世纪50年代首次创造，并将社交网络的大小定义为大约100到150人的团体。
以下是PCMAG.COMTM百科对“社交网站”的定义：
向对特定对象感兴趣或只是一起“闲逛”的人们提供虚拟社区的Web站点。成员通过语音、聊天、即时消息、视频会议和博客进行通信，并且该服务通常向成员提供了联系其他成员的好友的方法。这种站点还可以用作亲自会面的媒介。“社交网站”是针对“虚拟社区”(一群人使用因特网彼此之间就任何事乃至所有事进行通信)的21世纪术语。
Friendster(www.friendster.com)是首个社交网站，其在2002年引入，而MySpace(www.myspace.com)在一年后出现。从两个好友开始，MySpace变得非常流行，并且其母公司(Intermix)在MySpace投放市场两年后被News Corporation以58亿美元收购。
Facebook(www.facebook.com)出现在2004年，最初定位于在校学生，但随后欢迎所有人。在Facebook之后是TagWorld(www.tagworld.com)和Tagged(www.tagged.com)。TagWorld引入了用于创建更加个性化Web页面的工具，而Tagged引入了为具有相同兴趣的青少年建立职业摔角(tag team)的概念。
社交网站对关注度的竞争与90年代中期因特网出现时的第一Web门户网站之争的场面非常相似。期望出现许多变化。
许多社交网站允许用户上传和共享照片。某些社交网站还包含用于给照片加标签以标识照片中人(脸部)的姓名的特征(例如，FACEBOOKTM提供了这一特征)。基于用户调查，大多数回答者都表示加标签的工作是手动的并且非常耗时。此外，由于隐私的原因，许多用户不会将他们所有的数字照片都上传到共享网站。而且，上传上千张的照片是非常耗时和带宽敏感的。所以，尽管社交网站的用户在其本地计算机上可能有10,000张数字照片时，但他们只会上传一两百张照片来与他们的好友共享。这基于2007年9月AppliedRecognition Inc.执行的用户调查。
还有某些网站允许注册的用户上传数字照片和数字视频，并且将它们存储到以共享为目的的网站上。这些网站是专用于此目的的。这些网站的示例包括FLICKRTM和PHOTOBUCKETTM。这些网站的缺点在于：为了标识好友而给所有照片加标签的过程是手动的并且非常耗时；PHOTOBUCKETTM不允许人们给照片加标签。对于FLICKRTM，如果平均每张照片包含两个人，那么针对每张照片可能要花费10-15秒来给照片中的人加标签。当该时间乘以100或1000时，这会变得非常耗时，一般人也就不再执行加标签了。
如今，照相设备飞速发展，并且绝大部分现代蜂窝电话包含数字照相机。事实上，如今经由蜂窝电话销售的照相机比所有专用数字照相机的总和还要多。这正在使上传到和存储到家庭计算机的数字图像的数量激增。因为基于我们的调查数字图像的平均数量超过了1000张，因此对于大多数人而言，手动给照片加标签并对其正确地进行组织的工作量是非常巨大的。
一家公司(RIYATM(www.riya.com))创建了一种基于web的、用于标识数字照片中脸部的产品。此产品涉及：在将这些照片上传到远程RIYATM基于web的服务器(在那里将脸部与其他脸部进行比较以找到匹配)之前，下载用于标识用户本地计算机上照片中脸部的软件模块。此产品是原型，因此不具有基于识别的自动照片共享特征。该产品也不具有用于使用户能够修正发生在任何自动脸部检测和识别方法中不可避免的错误的特征。
发明内容
在本发明的一个方面中，提供了一种用于在数字图像中识别一个或多个脸部的方法，该方法的特征在于：(a)生成与一个或多个脸部的一个或多个候选区域相对应的一个或多个脸部坐标；(b)基于脸部坐标来生成眼部坐标；(c)利用由脸部坐标和眼部坐标定义的一个或多个投影图像来检测每个脸部；以及(d)将每个投影图像与一个或多个已知的投影图像进行比较，其中提供用于定义投影图像与已知投影图像之间的最佳匹配的相似度阈值。
在本发明的另一方面中，提供了一种用于共享描绘一个或多个脸部的数字图像的方法，该方法的特征在于：(a)将多个计算机终端链接到计算机网络，每个计算机终端与个体相关联；(b)将数字图像链接到至少一个计算机终端；(c)允许至少一个计算机终端在数字图像上启动脸部识别例程，该脸部识别例程产生其脸部被描绘在数字图像中的一个或多个人的列表，至少一个人是个体之一；以及(d)允许至少一个计算机终端启动用于将数字图像传播到与一个或多个人相关联的计算机终端的共享例程。
在本发明的另一方面中，提供了一种用于提供安全目标广告的方法，该方法的特征在于：(a)追踪与注册到计算机程序的个体相关联的一个或多个人口统计属性；(b)基于该一个或多个人口统计属性，从第一源获取与一个或多个目标广告相关联的广告指针列表；(c)从第二源获取一个或多个广告；(d)从第一源删除该一个或多个人口统计属性；以及(e)将广告呈现给个体。
在本发明的另一方面中，提供了一种用于在数字图像中识别一个或多个脸部的系统，该系统的特征在于：(a)与一个或多个脸部的一个或多个候选区域相对应的一个或多个脸部坐标；(b)基于脸部坐标而生成的眼部坐标；(c)由脸部坐标和眼部坐标定义的一个或多个投影图像；以及(d)用于定义每个投影图像与一个或多个已知投影图像之间的最佳匹配的相似度阈值，该最佳匹配确定了对应于一个或多个脸部中每个脸部的身份。
在本发明的另一方面中，提供了一种用于共享描绘一个或多个脸部的数字图像的系统，该系统的特征在于：(a)链接到计算机网络的多个计算机终端，每个计算机终端与个体相关联；(b)可操作以链接到至少一个计算机终端的数字图像；(c)可操作以由至少一个计算机终端启动的脸部识别例程，该脸部识别例程产生其脸部被描绘在数字图像中的一个或多个人的列表，至少一个人是个体之一；以及(d)可操作以由至少一个计算机终端启动的共享例程，该共享例程将数字图像传播到与一个或多个人相关联的计算机终端。
在本发明的另一方面中，提供了一种用于提供安全目标广告的系统，该系统的特征在于：(a)与注册到计算机程序的个体相关联的一个或多个人口统计属性；(b)可操作以基于该一个或多个人口统计属性来提供与一个或多个目标广告相关联的广告指针列表的第一源；(c)可操作以提供一个或多个广告的第二源；(d)用于从第一源删除该一个或多个人口统计属性的装置；以及(e)用于将广告呈现给个体的装置。
在本发明的另一方面中，提供了一种用于在数字图像中识别一个或多个脸部的计算机程序产品，该计算机程序产品的特征在于：(a)包括软件指令的计算机可读介质；以及(b)允许使计算机执行预定操作的软件指令，该预定操作包括步骤：(i)生成与一个或多个脸部的一个或多个候选区域相对应的一个或多个脸部坐标；(ii)基于脸部坐标来生成眼部坐标；(iii)利用由脸部坐标和眼部坐标定义的一个或多个投影图像来检测每个脸部；以及(iv)将每个投影图像与一个或多个已知投影图像进行比较，其中提供用于定义投影图像与已知投影图像之间的最佳匹配的相似度阈值。
在本发明的另一方面中，提供了一种用于共享描绘一个或多个脸部的数字图像的计算机程序产品，该计算机程序产品的特征在于：(a)包括软件指令的计算机可读介质；以及(b)用于允许计算机执行预定操作的软件指令，该预定操作包括步骤：(i)将多个计算机终端链接到计算机网络，每个计算机终端与个体相关联；(ii)将数字图像链接到至少一个计算机终端；(iii)允许至少一个计算机终端在数字图像上启动脸部识别例程，该脸部识别例程产生其脸部被描绘在数字图像中的一个或多个人的列表，至少一个人是个体中的一个；以及(iv)允许至少一个计算机终端启动用于将数字图像传播到与一个或多个人相关联的计算机终端的共享例程。
在本发明的另一方面中，提供了一种用于提供安全目标广告的计算机程序产品，该计算机程序产品的特征在于：(a)包括软件指令的计算机可读介质；以及(b)用于使计算机能够执行预定操作的软件指令，该预定操作包括如下步骤：(i)追踪与注册到计算机程序的个体相关联的一个或多个人口统计属性；(ii)基于一个或多个人口统计属性，从第一源获取与一个或多个目标广告相关联的广告指针列表；(iii)从第二源获取一个或多个广告；(iv)从第一源删除一个或多个人口统计属性；以及(v)将广告呈现给个体。
就这一点，在详细阐述本发明的至少一个实施方式之前，应当理解，本发明不将其应用限制于如下描述中阐明或附图中示出的构建细节以及组件安排。本发明能够通过其他实施方式以各种方式来实践并完成。此外，应当理解，这里所采用的措辞和术语是为了描述的目的，因此不应理解为限制本发明。
附图说明
图1示出了并入用于执行照片目标分发的社交网络服务的本发明系统的特定实施方式。
图2进一步示出了图1中所示的系统，其中用户添加随时间来自各种设备的新数字图像。
图3示出了本发明的脸部识别方法，在其中一方面，其用于生成可与已知人的签名相比较的脸部“签名”。
图4示出了在本地计算机系统存储设备上的脸部数据库中链接脸部检测、眼部检测和脸部识别技术的结果。
图5示出了对等(peer)分组如何随着已知人的列表的增长而随时间增长和演进。
图6示出了用于修正可能由自动脸部检测、眼部检测和脸部识别步骤产生的错误的潜在方法。
图7示出了用于在相同端分组中本发明用户之间提供照片的自动选择性传播的系统和方法。
图8示出了可以支持照片浏览以及由计算机程序管理的脸部数据库的图形化用户接口的示例实施方式。
图9给出了已知人的脸部图像加上用于缩小照片的范围的布尔运算符。
图10示出了由GUI提供的可选广告显示能力。
图11示出了根据本发明其中一方面的基于纹理的脸部检测方法。
图12示出了根据本发明一方面的用于眼部检测的方法。
图13示出了根据本发明一方面的脸部识别方法。
图14示出了用于在照片中隔离眼部的方法。
图15示出了本发明系统的示例配置。
图16示出了用于允许用户确认出现在图像中的脸部身份的接口。
图17示出了用户可以用来删除图像中假阳(false positive)脸部检测的方式。
图18示出了用户可以为了提高检测算法的精确度的目的、重新调整对应于图像中脸部的检测到的眼部坐标的装置。
图19示出了在图像中手动给脸部加标签的过程。
图20示出了视频扫描方法，由此视频中的帧被抽取出来并且在这些帧上执行脸部检测。
图21示出了本发明的一个方面，其中远程web浏览器或移动设备能够支持访问代理服务器，从而提供了到本发明功能的连接。
图22示出了假阳脸部检测错误的删除。
具体实施方式
概述
本发明其中一个方面提供了支持图像自动分发的网络化计算机架构，该图像与在网络上操作计算机系统的多个个体有关。
本发明其中另一方面提供了可操作以支持每个个体与在此提供的用于共享包括图像的信息的网络化计算机架构对接的计算机程序。该计算机程序使得个体能够上传图像，包括具有一个或多个人的脸部描绘的图像。该计算机程序可以执行脸部检测技术，用于检测图像中的一个或多个脸部，其可能会导致生成一个或多个脸部签名，每个脸部签名对应于多个脸部中的一个。该计算机程序继而可以访问数据库，其中数据库将已知人的列表与脸部签名链接，从而使每个已知人与一个或多个脸部签名相关联。可以将每个检测到的脸部签名提供给与对应的已知人相关联的个体，或者在脸部签名不与任何已知人相关联的情况下，信息可以由个体来提供。还可以向个体提供用于确认脸部签名与已知人之间关联的装置。
本发明其中又一方面提供了用于基于图像中描绘的脸部来生成脸部签名的新方法。还提供了用于减少在将识别的脸部签名与链接到数据库的一个或多个脸部签名相关联过程中的错误率的装置。
本发明其中另一方面支持描绘脸部的图像的自动选择性分发。如果图像中检测到的脸部和与这里提供的网络化计算机架构对接的人相关联，则这里提供的计算机程序可以自动地将图像传输至那个人的计算机来向其呈现。应当注意，术语“照片”和“图像”这里可以互换使用。
本发明其中又一方面提供了可以利用这里提供的网络化计算机架构操作的新的广告方法。
网络化计算机架构
本发明其中一个方面提供了支持图像自动分发的网络化计算机架构，该图像与在网络上操作计算机系统的多个个体有关。图1示出了本发明的网络化计算机架构的示例实现。多个个体中的每一个可以通过可操作访问因特网(11)的计算机终端连接到因特网(11)。因特网(11)连接支持从连接到因特网的设备传输和接收数字数据，每个所述设备可以如下面所提供的进行操作。
本发明其中另一个方面提供了可操作以允许每个个体与这里提供的网络化计算机架构对接的计算机程序。图15示出了本发明系统的示例配置。本发明的用户(13)可以注册、下载和安装该计算机程序到其计算机系统(15)。
计算机程序可以在其一个方面允许用户(13)邀请本发明的其他用户并且与其建立关系。该计算机程序可以在其另一方面从将广告递送给计算机程序的广告web服务器(23)集合请求广告，以用于在图形用户接口(“GUI”)的各个部分显示给用户(13)。计算机程序可以在其另一方面将照片和关于那些照片的元数据传输至其他用户或者第三方网站(25)，诸如FLICKRTM和FACEBOOKTM。这些第三方网站(25)可以通过公开应用编程接口(API)来支持从客户端软件或者其他基于web的应用连接到它们的服务，从而鼓励使用它们的网站。
支持本发明实现的计算机程序的组件可以包括：
处理引擎，其可以在操作系统上作为后台进程来运行。该处理引擎可以扫描用户向本地和/或远程计算机上的特定文件夹上传或拷贝的新数字照片，该特定文件夹针对照片而被监测；或者当可移动介质(诸如，存储卡)插入计算机时，该处理引擎可以自动地检测新照片。当检测到新的照片时，可以执行下文详述的脸部检测、眼部检测和脸部识别步骤。其结果可以被存储到数据库中，诸如下文详述的数据库。应当注意，该处理引擎可以在远程计算机上执行，诸如可以使用软件即服务模型将本发明的计算机程序作为服务提供的计算机。
GUI，其可以向用户提供以下能力：导航照片、通过标识已知人来训练应用、编辑和修正引擎的自动结果、基于搜索标准创建和修改相册、添加对等分组成员以及将相册发送到第三方网站，每个此类动作将在下文详述。
数据库(例如，SQL数据库)，其可以位于用户的计算机上，并且可以包含下面描述的脸部检测、眼部检测和脸部识别步骤的结果。数据库还可以包含针对已知人与相关联的脸部图像之间的关系以及照片和人的元数据。
GUI、处理引擎和数据库可以在一个或多个设备上提供。图21示出了本发明的一个方面，其中远程web浏览器或移动设备(83)能够访问代理服务器(81)，从而提供到本发明功能的连接。GUI可以被提供在诸如PDA或蜂窝电话的移动设备(83)上，并且与运行在网站、服务器或者用户的桌上或膝上计算机上的远程引擎来回传输信息。在这种实现中，PDA或蜂窝电话可以配有用于浏览图像的装置，和用于上传利用并入该设备的照相机捕获的图像的装置。上传可以根据下面更加完整描述的一般性上传过程执行。
由利用计算机程序的用户执行的步骤可以包括：
指定文件夹以监测新的数字照片。
通过标识与数字照片中找到的脸部相关联的名称和元数据来训练应用。
修正由应用产生的错误；假阳和假阴(false negative)。
通过指定包括数据范围、已知人(经由脸部选择)的布尔组合、EXIF标签和通用标签的搜索标准来创建相册(照片的集合)。可选地，用户可以将单个照片或照片分组拖放到该相册。
一旦创建了相册，用户继而可以指定各种输出选项包括：
第三方网站，诸如FlickrTM和FacebookTM。
幻灯片格式，诸如MicrosoftTM PowerpointTM文件。
文档格式，诸如AdobeTM PDFTM文件。
邀请其他应用用户加入到对等分组；指定关于对等分组中那些关系的选项；以及接收加入另一用户的对等分组的邀请。
网络化计算机架构还可以包括一个或多个服务器用于支持这里所述的技术。例如，这里提供的广告方法可以由服务器支持。可以在一个或多个服务器系统上提供的服务器可以包括支持服务器功能的服务器程序，包括：
注册服务器，其具有数据库，该数据库支持电子邮件地址列表、相关联日期和其他管理数据的关联。注册服务器可以向用户呈现诸如网页的接口，用于收集注册数据继而将此数据写入到数据库。继而可以向用户给出用于安装上述计算机程序的装置，诸如提供用于下载客户端软件的URL。
广告匹配服务器可以接受包含用户人口统计信息的加密请求。这种服务器也可以通过多种格式(诸如.JPG、.GIF、.SWF等)从广告者接收广告。对于提交到应用的每个广告，还可以记录广告的目标人群。广告请求可以基于目标人群数据来与广告的库存进行匹配。可以返回指针(唯一ID号的指针)，用于将广告匹配于请求客户端软件。
广告递送服务器可以接受包含广告指针的加密请求。应用可以找到该指针所引用的广告，并且将该广告返回给请求客户端软件。
对等分组
再次参考图1，本发明的第一用户(13)可以从网站下载计算机程序，或者配有用于安装该计算机程序的任何其他安装手段。第一用户(13)可以安装计算机程序，该计算机程序可以在他们运行操作系统(诸如，MICROSOFTTM WINDOWSTM、APPLETM、或LINUXTM操作系统)的膝上或桌上计算机系统(15)上支持本发明的系统。
第一用户(13)可以定义对等分组中的好友(17)，这通过向本发明指定他们的电子邮件地址来实现。计算机程序随后可以发送电子邮件邀请，请求好友(17)也下载或以其他方式支持该计算机程序安装。在安装之后，好友(17)的对应计算机程序可以向该好友(17)呈现用于加入由第一用户(13)发起的对等分组的未决请求。可以要求现在可能是第二用户(17)的好友(17)批准到对等分组的连接。一旦批准，第一用户(13)和第二用户(17)运行的计算机程序现在可以根据这里所述的图像共享方法来交换照片以及关于那些照片和关于已知人的元数据。
对等分组可以通过第一用户(13)或第二用户(17)邀请更多的人(19、21)加入到对等分组得到扩充。第二用户(17)也可以创建没有第一用户(13)参与的新对等分组，并且单独地对对等分组进行扩充。人与对等分组之间可能存在“多对多”的关系。因此，第一用户(13)可以是多个对等分组的成员，第二用户(17)可以是多个对等分组的成员。这使得与基于对等分组成员关系的其他用户共享照片变得容易。
如下面更加完整地描述，本发明其中一个方面支持已知人的列表。如上所述，可以将已知人有选择地添加到一个或多个对等分组。
对等分组可以支持共享照片、关于照片的元数据和已知人。GUI可以支持用户创建、修改和删除对等分组。GUI还可以支持将脸部图像或已知人的缩略图关联至现有对等分组，例如，通过使用户能够将脸部图像或缩略图拖拽到接口的表示对等分组的区域上，诸如区域或图标。
计算机程序每次可以生成一个邀请，用于将好友添加至对等分组。备选地，如果被邀请者没在已知人的列表中，那么用户可以手动地将被邀请者的元数据添加至对等分组。可以将对个体的邀请经由电子邮件发送至被邀请者。对于在他们的计算机系统上已经安装了本发明的计算机程序的个体，一旦该电子邮件被接收，便提示被邀请者接受邀请。可选地，要求个体将代码键入计算机程序来接受邀请。
如果好友还没有在他们的计算机上安装本发明的计算机程序，那么一旦该电子邮件被接收，便可以包括下载链接或以其他方式允许该计算机程序的安装，并且可以提供用于将其安装到计算机系统上的向导。在成功安装了计算机程序之后，可以向新用户呈现邀请，并且新用户可以根据上所述步骤接受加入对等分组的邀请。
一旦被邀请者接受了邀请，便可以将被邀请者添加到对等分组。更新可以通过网络化计算机架构进行传播，以使对应的对等分组信息能够在与该对等分组相关联的每个人的计算机程序中得到更新。
根据如下所述的脸部检测技术，对等分组可以支持信息在网络化计算机架构之间的自动选择性传播。该传播技术在下面还进行了更加完整描述。
脸部检测
本发明其中一个方面提供了用于基于图像中描绘的脸部来生成脸部签名的新方法。图3示出了根据本发明其中的一个方面的脸部识别方法。用户(13)可以将图像提供给可操作来支持计算机程序执行的计算机系统(15)。计算机程序可以经由操作系统通知来监测与计算机系统(15)相关联的文件夹，该操作系统通知可以在添加新文件或修改现有文件时生成。当发现(28)新图像时，可以将这些图像排队(29)用于处理。
照片中的脸部可以通过使用多个技术中的任意一种技术进行定位(31)，这些技术可以包括：生成脸部坐标，其可以定义脸部周围的包围盒；基于脸部坐标确定眼部坐标；以及基于脸部和眼部坐标并且通过使用脸部签名技术来创建脸部的脸部签名(33)。脸部签名技术可以是主元分析(PCA)，这对于本领域技术人员是已知的。可以将脸部签名与已知的脸部签名进行比较(34)，并且可以将照片自动地且选择性地传播至其他用户(36)。下面提供了本发明这些方面的进一步细节。
图4示出了在本地计算机系统存储设备上的脸部数据库中链接脸部检测、眼部检测和脸部识别技术的结果。该结果可以是相关联对象的坐标。在脸部检测的情况下，坐标可以利用左上、右上、左下和右下像素位置来在原始照片上定义脸部(37)的轮廓。在眼部检测的情况下，坐标可以表示左眼和右眼的瞳孔位置(35)。在脸部识别的情况下，其结果可以是脸部签名(42)。
本发明的图形用户接口(GUI)可以显示每张图像(35)上的脸部(37)和眼部(39)的位置。如下面更加完整的描述，本发明在其中一个方面提供了已知人的列表。如果与检测的脸部相对应的脸部签名(42)与已知人的列表中列出的人相关联，那么GUI可以使用在图像上或周围的图形符号来向用户指出这种关联。否则，GUI可以使用在图像上或周围的另一图形符号来向用户指出不存在这种关联。在图4描绘的示例中，已知的脸部可以利用复选标记(41)标识，而未知脸部利用记号“X”(43)标识。
最初，所有的脸部对于系统可能都是未知的，直到用户“训练”本发明来识别脸部。训练方法可以涉及用户。经由本发明的GUI，用户可以使用鼠标或其他输入设备、通过点击脸部周围可视包围盒上的任何位置并且将脸部拖拽到人名(或代表该人的图标)上，来标识属于指定人的脸部。备选地，用户可以将代表该人的图标拖拽到目标脸部上。在另一备选中，用户可以点击可视包围盒上的任何位置并且选择用于标识先前未知的脸部的功能，该功能可以使用户能够键入与该人有关的数据，诸如姓名、电子邮件地址和其他细节，这可以统称为对应于该人的元数据。这种训练步骤可以为每个已知人执行一次。为脸部创建的签名继而可以支持脸部数据库中所有未知的脸部签名与经标识的人进行比较。下面更加完整地描述了用于比较的方法和用于脸部检测、眼部检测和脸部识别的方法。
本发明其中又一方面通过对未知的脸部进行整理，使得用户可以标识最有可能与单个个体相关联的经检测脸部的分组，而促进了最佳训练阶段。例如，可以使用算法来基于脸部签名将相似的脸部聚集在一起。即便在脸部不与脸部数据库中的个体相关联时，相似度仍可以基于他们脸部签名的某些方面。因此，用户可以标识属于特定已知人的脸部簇，从而最佳地执行上文所述的训练方法。
脸部与已知人的关联
图16示出了用于允许用户确认出现在图像中的脸部身份的接口。图像中的脸部签名针对与已知人相关联的脸部签名可以在相似度阈值中。在这种情况下，可以在检测的脸部与已知人之间进行关联。下面更加完整地描述了一种用于比较脸部签名的方法。
如果脸部与已知人之间存在关联，那么可以在数据库中创建该脸部签名与已知人之间进一步的关联。可以将针对每个已知人的每个先前标识的脸部与由系统处理的每个新的脸部进行比较。当查看与特定的已知人有关的脸部时，可以显示由本发明生成的任何猜测到的匹配，并且可以要求用户确认哪些匹配是正确的。
随着标识的脸部的数量随时间而增多，将新的脸部与正确的人相匹配的整体精确度可以提高，因为通常将会存在具有每个新脸部的人的许多不同视图。根据这里提供的用于比较脸部签名的方法，假阳的数量通常会随时间减少。
图5示出了对等分组如何随着已知人的列表增长而随时间增长和演进。由于用户可以不断地将未知的脸部与已知人相关联，所以已知人的列表(101)随着用户使用本发明而增长。
传播
本发明其中另一方面提供了一种可操作以允许每个个体与这里提供的、用于共享图像的网络化计算机架构对接的计算机程序。图2进一步示出了本发明的系统。用户(13)可以捕获数字图像并且周期地将它们从一个或多个图像设备存储系统(27)拷贝至计算机系统(15)。用户(13)可以通过使用如上所述GUI将文件夹的名称输入到计算机程序，来配置该计算机程序以针对新图像而监测计算机系统(15)上的特定文件夹。
根据本发明提供的用于脸部识别的新方法，本发明其中一个方面支持在对等分组之间到其脸部在图像中描绘的用户的自动选择性传播。这在下面更加完整地进行描述。
检测优化
本发明其中一个方面提供了用于根据本发明的其他方面优化脸部检测的新技术。图6示出了用于修正可能从自动脸部检测、眼部检测和脸部识别步骤产生的错误的潜在方法。本发明使用使用户通过GUI来修正这些不可避免的错误的新方法。
图17示出了用户可以用来删除图像中假阳脸部检测的方式。在脸部检测和眼部检测阶段期间，可能存在假阳错误。在原始照片图像实际上没有脸部，而检测技术却确定存在脸部时，可能出现这些错误。为了修正这些错误，GUI可以使用户能够通过使用鼠标或其他输入设备将脸部(103)(该脸部由图像上的包围盒标识)移动到删除区域(其可以由回收站或其他代表性图标表示)上、通过当该脸部高亮时按下键盘上的删除键、或者通过选择与该脸部删除相对应的菜单选项(105)来删除假阳错误。
图18示出了用户可以为了提高检测算法的精确度的目的、重新调整对应于图像中脸部的检测到的眼部坐标的装置。在脸部检测和眼部检测阶段期间，可能就眼部位置坐标(107)存在错误。本发明的方法可以确定眼睛瞳孔位置，并且将眼部坐标(107)可视地显示在图像上，但是生成的坐标可能不是最理想的，这是因为在某些情况下(例如，有太阳眼镜的脸部)其可能是近似值。GUI可以允许用户手动地重新调整眼部坐标(107)的位置，例如通过利用鼠标或其他输入设备来移动代表眼部位置的图标(109)。以这种方式，可以提高本发明的精确度和性能，因为眼部坐标(107)通常用于生成针对脸部的脸部签名。因此，眼部坐标(107)的改变可以带来脸部签名的改变，其可能对将签名与其他已知的脸部相关联造成显著影响。
图22示出了假阳脸部检测错误的删除。在脸部识别阶段期间，可能存在关于脸部与已知人的不正确关联的假阳错误。如果本发明将脸部签名匹配到已知人并且这不是正确的关系，那么可能产生假阳错误。GUI可以允许用户将脸部图像(111)(缩略图)拖拽到正确已知人(113)的脸部图像(缩略图)上。本发明继而可以修改数据库中的链接，以给出脸部与已知人之间新的关系。还可以将旧的关系删除。
另一类错误是假阴。可能存在两种分类为假阴错误的情形，其在图6中示出：
1)在确实存在脸部(47)但系统没有在图像中检测到脸部的情况下，GUI可以允许用户使用鼠标或其他输入装置在该脸部周围画出包围盒，继而通过利用代表眼部位置的图标给出两只眼的位置。系统继而可以使用手动键入的信息来生成脸部签名，并且执行这里所提供的脸部识别方法。备选地，系统可以允许用户手动地将标签与脸部相关联，而不涉及脸部检测或识别过程。
2)在如下情况下也可能存在假阴错误，即，系统检测到脸部，但该脸部签名与任何已知的脸部签名都不匹配，即便该脸部是已知人的脸部。如果脸部的签名与该特定人的任何其他脸部签名之间的区别非常不同，那么可能会发生这种情况。在这种情况下，系统可能不会自动地检测到该关系，并且脸部可能依然未知。在这种情况下，GUI可以允许用户将脸部图像拖拽(49)到已知人的脸部图像上。通过这样做，系统可以将脸部图像链接到数据库中已知人。通过来自用户的这种协助，系统现在具有了另一脸部签名，其用于将来与新的或未知的脸部签名进行比较。这可以改进本发明的准确度。图19进一步示出了在图像中手动给脸部加标签的过程。
图像的自动选择性传播
图7示出了用于在本发明的用户之间提供照片的自动选择性传播的系统和方法。当作为对等分组成员的已知人的脸部在照片(53)中被识别出来时，可以对照片(53)进行排队，以用安全的方式通过因特网(11)传输到该对等分组成员。例如，第一用户(13)可以将包含了作为第二用户(17)(其也是对等分组成员)的已知人的脸部的照片上传到其计算机系统(15)。在这种情况下，当系统确定脸部匹配时，可以将照片(53)排队以便传输。在传输之前，可以将照片(53)缩小至较小版本，并且可以将元数据包括到数字照片文件中。在大小上的相应减小可以优化带宽的使用。
第二用户(17)下次访问其计算机系统(51)上的计算机程序时，他可以接收示出了原始照片的缩小图像和相关联的元数据的确认请求。可以向第二用户(17)提示其是否愿意将照片(55)拷贝到其计算机系统(51)上。如果第二用户(17)的回答是肯定的，那么系统可以将完全图像连同照片(55)的元数据以及来自该照片的已知的脸部和签名、通过因特网从第一用户的计算机系统(15)拷贝到第二用户的计算机系统(55)。
本发明的另一新方面使用现有的社交网络服务和基于web的照片存储站点来与对等分组成员共享照片。本发明可以将单个照片或照片分组传输到基于目标web的服务。所传输的照片可能已经包含了来自本发明的、关于出现在照片中的人的元数据。例如，社交网络站点FACEBOOKTM提供了用于上传照片、共享照片以及手动给照片加标签来指示哪些好友出现在照片中的工具。加标签过程是手动的并且十分耗时。本发明可以使这种上传过程自动化，并且消除手动给照片加标签的需求，从而向社交网络用户提供了显著的益处。可以将本发明等同地适用于其他社交网络服务和基于web的照片存储站点。如上所述，用户还可以通过因特网、直接从并入了照相机的移动设备上传照片。
本发明的另一新方面在于：已知人的初始列表可以从该用户的社交网络账户加载，从而进一步节省了配置本发明提供的系统所需的时间。
图8示出了可以支持照片浏览以及由计算机程序管理的脸部数据库的GUI的示例实施方式。在此示例中，示出了具有可以出售给广告者的可选横幅广告(57)的用户接口。用户可以从相册(125)中选择照片(123)，并且GUI可以显示与照片(123)中找到的已知人(117)相对应的缩略图(121)。还可以使用复选框(119)来指示已知人(117)在照片(123)中的存在。
图9中描绘的示例示出了已知人的脸部图像，以及用于应用如下布尔搜索的复选框，诸如与已知人的名称或关于图像的元数据相关联的“与”、“或”和“非”选择。本发明的新特征在于：通过允许用户点击已知人(59)的脸部的缩略图，以及将布尔运算(61)应用于由复选框支持的每个脸部，以可视的方式选择照片的能力。GUI的这个方面通过组合针对全体照片和脸部数据库应用的各种搜索标准和过滤器来支持相册的创建。
计算机程序提供的搜索标准可以包括：
文件夹选择(65)，指示照片图像在计算机存储设备上的文件夹位置或文件名称；
已知人(67)，提供了与已知人的脸部相关联的布尔运算(“与”、“或”或“非”)的选择；
日期范围(69)，提供了与要被包括到特定相册中的照片图像相对应的日期范围的选择；
EXIF数据，提供了基于标准照片相关信息的选择装置，该相关信息通常在照片拍摄过程期间由照相机附加到该照片。
为相册选择照片的备选方法可以向用户提供使用GUI将单个照片或照片分组拖放到相册(63)的名称上，或者以其他方式使照片与相册(63)相关联的能力。
相册(63)可以是保存为该相册名称下的逻辑实体的照片集合。用户可以经由GUI指定其想将相册发送到的各种目标文件类型或位置(71)，包括：幻灯片，MICROSOFTTM POWERPOINTTM或者其他呈现计算机程序；ADOBETM PDFTM或其他文档文件；基于web的共享站点，诸如FLICKRTM或FACEBOOKTM或者第三方印刷服务。广告方法
本发明其中又一方面提供了可以与这里提供的网络化计算机架构一起操作的新广告方法。
图10示出了由GUI提供的可选广告显示能力。这是本发明的新特征，其提供了用于基于用户人口统计定位广告同时维护用户隐私的安全方法。GUI可以向新用户(13)提示：人口统计信息最少可以包括性别、年龄和位置数据。可以将此信息本地存储在运行计算机程序的计算机系统(15)上。可以将请求周期地发送到基于web的服务器(73)，以返回广告指针列表。请求可以包含针对用户的人口统计数据的加密传输。请求也可以使用由注册服务器(77)发布的证书进行签名。后一步骤可以验证请求的可靠性。基于web的服务器(73)可以引导用于基于请求用户(13)特定的人口统计信息、将与目标人口统计信息相关联的广告匹配给请求用户(13)的过程。可以将指针列表(即，针对存在于不同广告服务器上的广告的引用)返回给请求用户的计算机系统(15)，并且传递至计算机程序。计算机程序继而可以将另一请求发布到不同的基于web的服务器(75)，以下载由指针引用的广告。基于web的服务器(73)继而可以丢弃人口统计数据，以保护个体用户的隐私。
通过将用于执行广告匹配过程的基于web的服务器(73、77)与实际递送广告的服务器(75)分离，以及通过不把用户的个人人口统计数据存储在基于web的服务器(73，77)上，能使个人信息与其他方式相比变得更加安全。广告递送服务器(75)可以存储关于广告的信息以用于计费目的，但是该数据中不包括个人信息。这是使用人口统计数据、以安全方式将广告提供给任何web浏览器或软件程序的新实现。
其他实现
本发明的另一能力可以允许计算机程序从中央注册服务器接收数字脸部图像或签名。例如，试图寻找个体(诸如丢失的儿童或通缉的罪犯)的组织可以张贴个体的脸部数据。已经选择共享其脸部数据库的那些用户可以下载支持将该脸部数据与他们的脸部数据库进行自动比较的数据。如果在目标个体与特定用户已知人之间找到匹配，那么可以向该组织发出警报。这可以使该组织能够确定该个体的最近或当前位置。还可以使该组织能够确定个体的姓名，这是因为个体的名称可能列在用户已知的一个或多个人的列表中。
本发明提供的又一实施方式允许个体找到与他们自身有相似面部特征的其他人。这种应用例如对于寻找其双胞胎之一的人很有用。在这个实施方式中，用户可以提交包括其脸部的图像的照片，本发明可以从中生成脸部签名。继而可以将该脸部签名与先前已经上传的其他个体的脸部签名进行比较。基于预定的相似度阈值，可以将一个或多个相似脸部报告给其脸部匹配的一个或所有个体。根据此实施方式的系统可以提供供用户批准与其他人联系的装置。如果匹配的个体批准了这种联系，那么其可以选择彼此之间发送消息。可以部署相似的实施方式，作为约会服务的一部分，以基于相貌来匹配人。
脸部检测、眼部检测和脸部识别
本发明其中另一方面提供了用于基于图像中描绘的脸部来生成脸部签名的新方法。脸部签名可以通过使用包括了脸部检测、眼部检测和脸部识别的步骤的技术来生成。
脸部检测
本发明其中一个方面提供了用于将基于纹理的脸部检测算法用作脸部检测基本方法的方法。基于纹理的脸部检测算法的一个示例是已知为OPENCVTM的例程的开源库。
基于纹理的脸部检测算法针对特定面部姿势(例如扭转(rolled)的正面脸部)可能具有低真阳(true positive)比率。这可能是由于训练纹理模式的正面脸部图像有别于普通数字照片中找到的变化的面部姿势。事实上，在用于训练脸部检测算法的纹理模式与在其上应用该算法的目标照片中的姿势类型之间存在不匹配会导致较高的错误率。脸部检测正面临两个众所周知挑战，包括：降低在扭转的正面脸部的情况下的假阴错误，以及在不提高假阴错误的同时降低假阳错误。
本发明通过应用包括用以提高脸部检测过程的准确度的三个步骤的新技术而增强了基于纹理的脸部检测。在第一步骤中，提供已知肤色比率测试在基于纹理的脸部检测器上的新颖应用，用于改进该检测器的精度。在第二步骤中，通过将经检测的脸部对象区域的大小缩小至预定大小来提供用于减小假阳脸部对象的新方法。在第三步骤中，提供了新的脸部定向补偿方法。
图11示出了根据本发明其中一方面的基于纹理的脸部检测方法。
在基于纹理的脸部检测方法的一个特定实现中，在第一步骤中，基于纹理的脸部检测器(131)最初可以设置有高目标真阳比率，该高目标真阳比率具有相应的高假阳比率。基于纹理的脸部检测器将整个照片图像作为输入来运行。这种运行的结果可以给出照片中潜在脸部对象的列表。对于彩色照片，可以在潜在脸部对象上执行肤色检测测试(133)以降低假阳比率。这种肤色测试可以比较包含肤色的脸部对象区域与对象的全部区域的比率。如果该比率没有超过预定阈值，那么可以跳过(135)该潜在脸部对象。
在第二步骤中，可以将从第一步骤产生的经检测的脸部对象区域缩小至预定大小(诸如，44×44像素)。在这些经缩小的区域上，可以再次运行(137)基于纹理的脸部检测器。这个步骤的目的是减少假阳脸部对象。通过在小尺寸(诸如44×44像素)输入区域上运行，可以减少来自非脸部的不正确纹理模式的假阳错误同时可以保留真阳纹理模式。这可以使得脸部检测的假阳比率减少，同时保留了真阳比率。在第二步骤中被认为是脸部的脸部对象可以作为真脸部被接受(143)。那些没有通过第二步骤的脸部对象可以被传递到第三步骤。
在第三步骤，提供脸部定向补偿方法。在上述第二步骤中，脸部检测在该图像的较小区域上执行，可以降低在扭转脸部情况下的真阳比率。扭转的脸部中的纹理模式可能由于第二步骤中应用的大小缩小而被脸部检测器认为是非脸部。为了保留在扭转的脸部情况下的真阳比率，脸部定向补偿(139)可以与脸部检测一起执行。在这种方法中，将本地图像区域以递增的角度进行旋转，并且每个角度实例可以通过脸部检测器来运行。一个示例实现可以将从距纵轴-20度开始将图像旋转2度，并且重复旋转直到距纵轴+20度。如果经旋转的脸部区域被识别并且存在于具有连续递增角度的实例中，那么可以将该本地图像区域确定(141)为真脸部。
对基于纹理的脸部检测算法的这些修改可以显著地降低假阳错误比率。
眼部检测
图12示出了根据本发明的一个方面用于眼部检测的方法。该眼部检测方法应用了新技术来提高在经检测脸部区域中检测瞳孔位置的准确度。第一步骤可以是将整个脸部区域缩小至可能包含真实瞳孔/眼部位置的较小区域(“眼部图”)(145)。可以使用公式来从眼部区域中裁剪出眼部图区域。例如，用于裁剪眼部图区域的公式可以是左边移除.23w、右边移除.23w、底部移除.55h和顶部移除.30h；其中w是脸部区域的宽度，h是脸部区域的高度。图14A示出了用于从脸部区域裁剪眼部图区域的方法的特定实施方式。
此外，如果在特定角度实例上于脸部检测方法的第三步骤中检测到脸部，那么可以将角度旋转应用(147)到眼部图区域来支持眼部位置的更加精确的选择。
图14B示出了可以改变用于裁剪眼部图区域的公式，以确保眼部图区域足够大，从而确保良好的瞳孔检测结果。
一旦眼部图区域进行了裁剪，眼部图区域的大小继而可以重新调整至固定大小(诸如80×80像素)，使得可以应用固定的模板色差方法来确定候选眼部位置。这种方法可以是基于瞳孔较之于眼部图区域周围的区域的较深浓度。
可以将色彩浓度图像的中间设置成浓度图中的零/黑(151)，以移除通常由于眼镜的镜片和镜框反光所产生的潜在瞳孔候选。图14C示出了这种过程。
色差图像可以从色彩浓度图像中获得，继而可以通过阈值过滤器，使得只有小部分眼部区域是白色的(例如，可以应用2％的阈值)(153)。接下来，可以应用“最适合”方法来选择具有最高色差(左侧和右侧)浓度的眼部位置。可以将该最佳候选瞳孔位置坐标传递(155)到本发明的脸部识别方法。
脸部识别
图13示出了本发明一个方面的脸部识别方法。脸部识别通常可以通过预处理(157)、投影(159)、距离计算(163)和聚集(167)来执行。脸部识别方法可以采用主元分析(PCA)。PCA是已知的方法，因为其是从混乱的数据集中抽取相关信息的简单、非参数化方法，因此大量地用于各种形式的分析。
鉴于个人照片会因大多数主体可能倾向于直接看照相机而可能具有姿势上的略微改变，本发明可以通过新的方式来采用PCA，该方式克服了其与对主体照明和姿势高度敏感有关的传统问题。本发明可以利用描绘特定人的照片集可能以各种姿势和照明条件进行拍摄这样的事实。本发明提供了用于聚集目标未知脸部和与每个已知的人相关联的此多个脸部之间的比较的方法。
可以首先将预处理(157)应用于图像。可以将作为输入提供给脸部识别阶段的脸部区域和眼部坐标用于正则化脸部区域。正则化过程可以包括转译、旋转和缩放脸部区域至预定模板大小。正则化过程可以使用眼部坐标作为参考点，使得可调节脸部区域图像以将眼部坐标置于特定的图像像素上。继而可以将标准固定的蒙板(mask)处理应用到图像以过滤掉非脸部部分，该标准固定的蒙板处理潜在地将脸部区域限制到椭圆内的区域。可以使用单调化(flattening)处理来确保像素浓度在图像上是空间均匀的，该单调化处理涉及在脸部区域中的像素浓度上运行二维线性回归。最后，可以在灰度级域中执行直方图图像均衡化(图像处理方法对于本领域技术人员是已知的，由此图像的对比度可以利用图像的直方图进行调节)。
继而可以将投影(159)应用于图像。正则化脸部区域的结果像素可以通过基于PCA的公式，以创建由本发明用作脸部签名的PCA向量。PCA向量可以包括由从大量一般图像中抽取的主元产生的投影图像。
根据这种方法创建的脸部签名可以是给定维数的实数的数组(来自PCA向量)。虽然向量空间的精确维数可以适应性确定，其最大值设置为捕获例如输入图像能量的95％的值，但是使用的默认值可以为50-100范围内的维数。
最后，可以应用循环(161)来将已知人与未知脸部进行匹配。可以将每个脸部签名(表示为数组)利用线性或非线性分类逻辑与任何其他脸部签名进行算术地比较，以确定距离值(163)。例如，可以通过计算正则化内积距离来比较两个签名。
为了将脸部同与已知人相关联的所有脸部进行比较，可能会进行所有个体的一对一比较，继而可以将所有结果用于接下来的步骤，或者可以使用通过与某些阈值比较确定为最佳匹配的集合。选择的阈值可以被这样选择，以使得平均可以保留在将脸部与不匹配的人进行比较时所获得距离的一半。
可以将某些形式的聚集用于结合在先前步骤中获得的距离值的集合来确定脸部与已知人之间的距离。这种聚集可以是距离值(169)的几何平均的计算。几何平均可以是类似于算术平均的求平均技术，但是几何平均可以通过将要平均的N个数相乘继而将乘积的Nth方根作为期望的平均而计算。在脸部与每个已知人之间的最接近匹配可以通过计算在该脸部与数据库中每个已知人之间的这种聚集距离(167)并且选择最小距离来找到。
最后，可以将最接近的匹配距离与静态或动态确定的阈值相比较(171)，以降低假阳匹配的比率。如果使用动态选择的阈值，那么此阈值可以这样确定：首先，假设在将脸部与具有N个相关联的脸部的不匹配的人相比较时获得的聚集距离值是正态分布的(对于N的每个可能值)，继而使用逆累积正态分布函数来计算确保在平均上、未知脸部的固定最大数目或固定比率错误地匹配到已知人的阈值。随着与每个人相关联的脸部数目N的改变，此阈值因人而异。这种动态阈值计算的优势包括：可以将固定的最大数量(或比率)保持尽可能小，以在为用户保留可接受的真阳匹配级时限制假阳匹配。
随着链接到本地脸部数据库中已知人的脸部签名数量的增长，可以提高本发明在要处理的未来照片中自动检测已知人的准确性。这是本发明新的特征。
本发明可以通过确定针对来自已知人的分组中的先前标识的脸部的最接近匹配来认识脸部。本发明的优势是：随着链接到本地脸部数据库中已知人的脸部签名数量的增长，可以提高本发明在要处理的未来照片中自动检测认识的人的准确性。
视频扫描
图20示出了视频扫描方法，由此对视频中的帧进行抽取，并且在这些帧上执行脸部检测。可以设置数量N(其中N是可调的)，使得可以针对视频中作为个体照片图像(183)的每N个帧(181)来扫描视频，其中可以应用先前提到的技术(185)来检测和识别脸部和已知人。视频继而可以根据这里提供的技术进行传播。

Claims (14)

1.一种用于在数字图像中识别一个或多个脸部的方法，所述方法包括：
a.生成与一个或多个脸部的一个或多个候选区域相对应的一个或多个脸部坐标；
b.基于所述脸部坐标来生成眼部坐标；
c.利用由所述脸部坐标和所述眼部坐标定义的一个或多个投影图像来检测每个脸部；以及
d.将每个投影图像与一个或多个已知投影图像进行比较，其中提供用于定义所述投影图像与所述已知投影图像之间的最佳匹配的相似度阈值。
2.根据权利要求1所述的方法，其特征进一步在于，生成所述脸部坐标是通过：
a.启动第一基于纹理的检测例程，以检测一个或多个候选脸部，每个候选脸部具有脸部坐标；
b.向所述一个或多个候选脸部应用肤色检测测试，以定义所述一个或多个候选脸部的子集；
c.将所述子集的脸部坐标所定义的大小缩小至预定大小，以定义脸部对象；
d.对所述脸部对象启动第二基于纹理的检测例程，以定义真阳的脸部对象的集合和不确定的脸部对象的集合；以及
e.旋转所述不确定的脸部对象，以定义其他真阳的脸部对象。
3.根据权利要求2所述的方法，其特征进一步在于，如果所述数字图像是彩色图像，则：
a.在所述数字图像中检测肤色与非肤色的比率；以及
b.如果所述比率超出了阈值，则确定所述数字图像不包括脸部。
4.根据权利要求2所述的方法，其特征进一步在于，旋转由所述眼部坐标划界的每个图像，以对应于所述不确定的脸部对象的旋转。
5.根据权利要求1所述的方法，其特征进一步在于：
a.裁剪与由每个眼部坐标划界的数字图像的部分相对应的眼部图像；
b.可选地将所述眼部图像调整大小至预定大小；
c.减小所述眼部图像中的反射光；以及
d.隔离所述眼部图像中对应于所述眼部图像的深色位置的多个瞳孔。
6.根据权利要求1所述的方法，其特征进一步在于，生成所述投影图像是通过：
a.将所述候选区域转译、旋转和缩放至具有预定大小的正则化图像，其中将所述眼部坐标链接至预定位置；
b.对所述经正则化的图像进行蒙板，以定义经蒙板的图像，其中所述脸部被隔离；
c.将直方图均衡应用于所述经蒙板的图像的灰度级描绘；以及
d.利用主元分析来生成所述投影图像。
7.一种用于共享描绘一个或多个脸部的数字图像的方法，所述方法的特征在于：
a.将多个计算机终端链接到计算机网络，每个计算机终端与个体相关联；
b.将所述数字图像链接到至少一个所述计算机终端；
c.允许至少一个所述计算机终端在所述数字图像上启动脸部识别例程，所述脸部识别例程产生其脸部被描绘在所述数字图像中的一个或多个人的列表，至少一个人是所述个体中的一个个体；以及
d.允许至少一个所述计算机终端启动共享例程，以将所述数字图像传播到与所述一个或多个人相关联的计算机终端。
8.根据权利要求7所述的方法，其特征在于，每个计算机终端链接到处理引擎，其中所述处理引擎：
a.扫描一个或多个文件夹，使得所述处理引擎确定所述个体何时将所述数字图像链接到所述文件夹中的一个文件夹；
b.在所述数字图像上启动所述脸部识别例程；以及
c.将所述脸部识别例程的结果链接到数据库。
9.根据权利要求8所述的方法，其特征在于，所述计算机终端还链接到用户接口，所述用户接口允许所述个体将所述数字图像链接到所述文件夹中的一个文件夹。
10.根据权利要求9所述的方法，其特征在于，所述用户接口从移动设备可访问。
11.根据权利要求8所述的方法，其特征在于：所述用户接口使用户能够创建链接到多个数字图像的一个或多个相册。
12.根据权利要求7所述的方法，其特征进一步在于：
a.将所述个体链接到一个或多个对等分组；以及
b.仅将所述数字图像传播到这样的人，其链接到所述对等分组中的一个对等分组，还链接到与链接到所述数字图像的计算机终端相关联的个体。
13.一种用于提供安全目标广告的方法，其特征在于：
a.追踪与注册到计算机程序的个体相关联的一个或多个人口统计属性；
b.基于所述一个或多个人口统计属性，从第一源获取与一个或多个目标广告相关联的广告指针列表；
c.从第二源获取所述一个或多个广告；
d.从所述第一源删除所述一个或多个人口统计属性；以及
e.将所述广告呈现给所述个体。
14.一种用于共享描绘一个或多个脸部的数字图像的系统，所述系统的特征在于：
a.链接到计算机网络的多个计算机终端，每个计算机终端与个体相关联；
b.可操作以链接到至少一个所述计算机终端的数字图像；
c.可操作以由至少一个所述计算机终端启动的脸部识别例程，所述脸部识别例程产生其脸部被描绘在所述数字图像中的一个或多个人的列表，至少一个人是所述个体中的一个个体；以及
d.可操作以由至少一个所述计算机终端启动的共享例程，所述共享例程将所述数字图像传播到与所述一个或多个人相关联计算机终端。
CN200880126543.0A 2007-12-31 2008-12-30 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序 Active CN102016882B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510243178.3A CN104866553A (zh) 2007-12-31 2008-12-30 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US1789507P 2007-12-31 2007-12-31
US61/017,895 2007-12-31
PCT/CA2008/002276 WO2009082814A1 (en) 2007-12-31 2008-12-30 Method, system, and computer program for identification and sharing of digital images with face signatures

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201510243178.3A Division CN104866553A (zh) 2007-12-31 2008-12-30 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序

Publications (2)

Publication Number Publication Date
CN102016882A true CN102016882A (zh) 2011-04-13
CN102016882B CN102016882B (zh) 2015-05-27

Family

ID=40823725

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200880126543.0A Active CN102016882B (zh) 2007-12-31 2008-12-30 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
CN201510243178.3A Pending CN104866553A (zh) 2007-12-31 2008-12-30 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510243178.3A Pending CN104866553A (zh) 2007-12-31 2008-12-30 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序

Country Status (4)

Country Link
US (5) US8750574B2 (zh)
CN (2) CN102016882B (zh)
CA (2) CA2711143C (zh)
WO (1) WO2009082814A1 (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102281140A (zh) * 2011-06-24 2011-12-14 上海合合信息科技发展有限公司 指定信息获取方法及系统
CN103365869A (zh) * 2012-03-29 2013-10-23 宏碁股份有限公司 照片管理方法与电子装置
CN103491067A (zh) * 2012-06-11 2014-01-01 广达电脑股份有限公司 多媒体互动系统及方法
CN103688273A (zh) * 2011-06-24 2014-03-26 苹果公司 辅助弱视用户进行图像拍摄和图像回顾
CN104025557A (zh) * 2011-12-27 2014-09-03 高通股份有限公司 人群确定的文件上载方法、装置和系统
CN105611344A (zh) * 2014-11-20 2016-05-25 乐金电子(中国)研究开发中心有限公司 一种智能电视机及其锁屏方法
CN105659286A (zh) * 2013-09-18 2016-06-08 英特尔公司 自动化图像裁剪和分享
CN105917360A (zh) * 2013-11-12 2016-08-31 应用识别公司 面部检测和识别
CN110084153A (zh) * 2011-08-18 2019-08-02 高通股份有限公司 用于自动共享图片的智能相机
CN112529231A (zh) * 2021-02-08 2021-03-19 北京翔东智能科技有限公司 一种社保卡信息采集系统及其采集方法
CN113826110A (zh) * 2019-03-12 2021-12-21 埃利蒙特公司 利用移动设备检测面部识别的欺骗

Families Citing this family (197)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8701022B2 (en) * 2000-09-26 2014-04-15 6S Limited Method and system for archiving and retrieving items based on episodic memory of groups of people
JP5009577B2 (ja) * 2005-09-30 2012-08-22 富士フイルム株式会社 画像検索装置および方法並びにプログラム
US8106856B2 (en) 2006-09-06 2012-01-31 Apple Inc. Portable electronic device for photo management
US9721148B2 (en) 2007-12-31 2017-08-01 Applied Recognition Inc. Face detection and recognition
CN102016882B (zh) 2007-12-31 2015-05-27 应用识别公司 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
US9639740B2 (en) 2007-12-31 2017-05-02 Applied Recognition Inc. Face detection and recognition
US8166034B2 (en) * 2008-03-26 2012-04-24 Fujifilm Corporation Saving device for image sharing, image sharing system, and image sharing method
CN103475837B (zh) 2008-05-19 2017-06-23 日立麦克赛尔株式会社 记录再现装置及方法
CN102112989A (zh) 2008-06-17 2011-06-29 乔斯滕斯股份有限公司 用于年鉴创建的系统和方法
US9495583B2 (en) * 2009-01-05 2016-11-15 Apple Inc. Organizing images by correlating faces
US9514355B2 (en) 2009-01-05 2016-12-06 Apple Inc. Organizing images by correlating faces
US8532346B2 (en) * 2009-03-11 2013-09-10 Sony Corporation Device, method and computer program product
US20110044512A1 (en) * 2009-03-31 2011-02-24 Myspace Inc. Automatic Image Tagging
TW201037613A (en) * 2009-04-02 2010-10-16 Htc Corp Contact management systems and methods, and computer program products thereof
US8689293B2 (en) 2009-07-16 2014-04-01 Panasonic Corporation Access control device, access control method, program, storage medium, and integrated circuit
US20110047384A1 (en) 2009-08-21 2011-02-24 Qualcomm Incorporated Establishing an ad hoc network using face recognition
US8589516B2 (en) 2009-09-10 2013-11-19 Motorola Mobility Llc Method and system for intermediating content provider website and mobile device
US8990338B2 (en) * 2009-09-10 2015-03-24 Google Technology Holdings LLC Method of exchanging photos with interface content provider website
US20110078097A1 (en) * 2009-09-25 2011-03-31 Microsoft Corporation Shared face training data
JP5385752B2 (ja) * 2009-10-20 2014-01-08 キヤノン株式会社 画像認識装置、その処理方法及びプログラム
US8698762B2 (en) 2010-01-06 2014-04-15 Apple Inc. Device, method, and graphical user interface for navigating and displaying content in context
US8983210B2 (en) 2010-03-01 2015-03-17 Microsoft Corporation Social network system and method for identifying cluster image matches
US9465993B2 (en) 2010-03-01 2016-10-11 Microsoft Technology Licensing, Llc Ranking clusters based on facial image analysis
US8875034B2 (en) * 2010-03-31 2014-10-28 Orange Method of image processing with dynamic anonymization
US20120082401A1 (en) * 2010-05-13 2012-04-05 Kelly Berger System and method for automatic discovering and creating photo stories
KR101687613B1 (ko) * 2010-06-21 2016-12-20 엘지전자 주식회사 이동 단말기 및 이것의 그룹 생성 방법
US9111255B2 (en) * 2010-08-31 2015-08-18 Nokia Technologies Oy Methods, apparatuses and computer program products for determining shared friends of individuals
EP2453383A1 (en) * 2010-11-12 2012-05-16 ST-Ericsson SA Facial features detection
US8341145B2 (en) * 2010-12-20 2012-12-25 Microsoft Corporation Face recognition using social data
US9037656B2 (en) 2010-12-20 2015-05-19 Google Technology Holdings LLC Method and system for facilitating interaction with multiple content provider websites
US9626725B2 (en) * 2010-12-23 2017-04-18 Facebook, Inc. Using social graph for account recovery
US9727886B2 (en) * 2010-12-23 2017-08-08 Facebook, Inc. Predicting real-world connections based on interactions in social networking system
US9268996B1 (en) * 2011-01-20 2016-02-23 Verint Systems Inc. Evaluation of models generated from objects in video
CN102637255A (zh) * 2011-02-12 2012-08-15 北京千橡网景科技发展有限公司 用于处理图像中包含的面部的方法和设备
US20120213404A1 (en) 2011-02-18 2012-08-23 Google Inc. Automatic event recognition and cross-user photo clustering
US8914483B1 (en) 2011-03-17 2014-12-16 Google Inc. System and method for event management and information sharing
US8392526B2 (en) 2011-03-23 2013-03-05 Color Labs, Inc. Sharing content among multiple devices
JP5751898B2 (ja) * 2011-04-05 2015-07-22 キヤノン株式会社 情報処理装置、情報処理方法、プログラム及び記憶媒体
US9552376B2 (en) 2011-06-09 2017-01-24 MemoryWeb, LLC Method and apparatus for managing digital files
JP5995520B2 (ja) * 2011-06-14 2016-09-21 キヤノン株式会社 画像に関する処理支援システム、情報処理装置、及び画像に関する処理影支援方法
US8582828B2 (en) * 2011-06-24 2013-11-12 Google Inc. Using photographs to manage groups
US8548207B2 (en) 2011-08-15 2013-10-01 Daon Holdings Limited Method of host-directed illumination and system for conducting host-directed illumination
US20130201344A1 (en) * 2011-08-18 2013-08-08 Qualcomm Incorporated Smart camera for taking pictures automatically
US8689255B1 (en) * 2011-09-07 2014-04-01 Imdb.Com, Inc. Synchronizing video content with extrinsic data
US8473550B2 (en) 2011-09-21 2013-06-25 Color Labs, Inc. Content sharing using notification within a social networking environment
US8917913B2 (en) * 2011-09-22 2014-12-23 International Business Machines Corporation Searching with face recognition and social networking profiles
JP5418565B2 (ja) * 2011-09-30 2014-02-19 カシオ計算機株式会社 画像表示システム、画像表示装置、サーバ、画像表示方法及びプログラム
AU2011253977B2 (en) 2011-12-12 2015-04-09 Canon Kabushiki Kaisha Method, system and apparatus for selecting an image captured on an image capture device
US9202105B1 (en) 2012-01-13 2015-12-01 Amazon Technologies, Inc. Image analysis for user authentication
US8789120B2 (en) * 2012-03-21 2014-07-22 Sony Corporation Temporal video tagging and distribution
US8925106B1 (en) 2012-04-20 2014-12-30 Google Inc. System and method of ownership of an online collection
TWI590098B (zh) * 2012-05-09 2017-07-01 劉鴻達 以臉部表情為輸入的控制系統
US9251395B1 (en) 2012-06-05 2016-02-02 Google Inc. Providing resources to users in a social network system
US8861804B1 (en) * 2012-06-15 2014-10-14 Shutterfly, Inc. Assisted photo-tagging with facial recognition models
US9391792B2 (en) 2012-06-27 2016-07-12 Google Inc. System and method for event content stream
US9020212B2 (en) * 2012-07-31 2015-04-28 Hewlett-Packard Development Company, L.P. Automatically determining a name of a person appearing in an image
US9113128B1 (en) 2012-08-31 2015-08-18 Amazon Technologies, Inc. Timeline interface for video content
US20140079319A1 (en) * 2012-09-20 2014-03-20 Htc Corporation Methods for enhancing images and apparatuses using the same
JP5175404B1 (ja) * 2012-09-20 2013-04-03 株式会社 ディー・エヌ・エー サーバ装置、方法、および、システム
US9418370B2 (en) 2012-10-23 2016-08-16 Google Inc. Obtaining event reviews
EP2915132A4 (en) * 2012-10-31 2016-06-29 Google Inc COMPARISON OF IMAGES PROCESS
US9996743B2 (en) * 2012-11-28 2018-06-12 The Trustees Of Columbia University In The City Of New York Methods, systems, and media for detecting gaze locking
US9389745B1 (en) 2012-12-10 2016-07-12 Amazon Technologies, Inc. Providing content via multiple display devices
US9703786B2 (en) * 2012-12-21 2017-07-11 Macpaw Inc. Systems and methods of reclaiming storage space
US9258597B1 (en) 2013-03-13 2016-02-09 Google Inc. System and method for obtaining information relating to video images
US9247309B2 (en) 2013-03-14 2016-01-26 Google Inc. Methods, systems, and media for presenting mobile content corresponding to media content
US9705728B2 (en) * 2013-03-15 2017-07-11 Google Inc. Methods, systems, and media for media transmission and management
JP2014206856A (ja) * 2013-04-12 2014-10-30 富士ゼロックス株式会社 情報処理装置及びプログラム
WO2014204463A1 (en) * 2013-06-20 2014-12-24 Hewlett-Packard Development Company, L.P. Photo based user recommendations
US11019300B1 (en) 2013-06-26 2021-05-25 Amazon Technologies, Inc. Providing soundtrack information during playback of video content
EP2824913A1 (en) * 2013-07-09 2015-01-14 Alcatel Lucent A method for generating an immersive video of a plurality of persons
GB2533504A (en) 2013-08-02 2016-06-22 Shoto Inc Discovery and sharing of photos between devices
US20150074206A1 (en) * 2013-09-12 2015-03-12 At&T Intellectual Property I, L.P. Method and apparatus for providing participant based image and video sharing
CN104090879A (zh) * 2013-09-30 2014-10-08 腾讯科技（深圳）有限公司 一种图片分享方法、装置和系统
EP3074924A4 (en) 2013-10-08 2017-11-22 Princeton Identity, Inc. Iris biometric recognition module and access control assembly
US10025982B2 (en) * 2013-10-08 2018-07-17 Princeton Identity, Inc. Collecting and targeting marketing data and information based upon iris identification
US10038691B2 (en) 2013-10-08 2018-07-31 Princeton Identity, Inc. Authorization of a financial transaction
US10042994B2 (en) 2013-10-08 2018-08-07 Princeton Identity, Inc. Validation of the right to access an object
US9489119B1 (en) 2013-10-25 2016-11-08 Theodore Root Smith, Jr. Associative data management system utilizing metadata
US9628986B2 (en) 2013-11-11 2017-04-18 At&T Intellectual Property I, L.P. Method and apparatus for providing directional participant based image and video sharing
US10114532B2 (en) * 2013-12-06 2018-10-30 Google Llc Editing options for image regions
US9773162B2 (en) * 2013-12-12 2017-09-26 Evernote Corporation User discovery via digital ID and face recognition
KR102183856B1 (ko) * 2013-12-20 2020-11-30 삼성전자주식회사 단말 및 콘텐츠 공유 방법
US9189682B2 (en) 2014-02-13 2015-11-17 Apple Inc. Systems and methods for sending digital images
US9614724B2 (en) 2014-04-21 2017-04-04 Microsoft Technology Licensing, Llc Session-based device configuration
US9639742B2 (en) 2014-04-28 2017-05-02 Microsoft Technology Licensing, Llc Creation of representative content based on facial analysis
US9773156B2 (en) * 2014-04-29 2017-09-26 Microsoft Technology Licensing, Llc Grouping and ranking images based on facial recognition data
US9384334B2 (en) 2014-05-12 2016-07-05 Microsoft Technology Licensing, Llc Content discovery in managed wireless distribution networks
US10111099B2 (en) 2014-05-12 2018-10-23 Microsoft Technology Licensing, Llc Distributing content in managed wireless distribution networks
US9430667B2 (en) 2014-05-12 2016-08-30 Microsoft Technology Licensing, Llc Managed wireless distribution network
US9384335B2 (en) 2014-05-12 2016-07-05 Microsoft Technology Licensing, Llc Content delivery prioritization in managed wireless distribution networks
US9874914B2 (en) 2014-05-19 2018-01-23 Microsoft Technology Licensing, Llc Power management contracts for accessory devices
US10540541B2 (en) * 2014-05-27 2020-01-21 International Business Machines Corporation Cognitive image detection and recognition
US10037202B2 (en) 2014-06-03 2018-07-31 Microsoft Technology Licensing, Llc Techniques to isolating a portion of an online computing service
JP6277570B2 (ja) * 2014-06-12 2018-02-14 本田技研工業株式会社 撮像画像交換システム、撮像装置、および撮像画像交換方法
US9367490B2 (en) 2014-06-13 2016-06-14 Microsoft Technology Licensing, Llc Reversible connector for accessory devices
US9460493B2 (en) 2014-06-14 2016-10-04 Microsoft Technology Licensing, Llc Automatic video quality enhancement with temporal smoothing and user override
US9717006B2 (en) 2014-06-23 2017-07-25 Microsoft Technology Licensing, Llc Device quarantine in a wireless network
US9373179B2 (en) 2014-06-23 2016-06-21 Microsoft Technology Licensing, Llc Saliency-preserving distinctive low-footprint photograph aging effect
US9864900B2 (en) 2014-06-26 2018-01-09 Cisco Technology, Inc. Entropy-reducing low pass filter for face-detection
US10698995B2 (en) 2014-08-28 2020-06-30 Facetec, Inc. Method to verify identity using a previously collected biometric image/data
CA3186147A1 (en) 2014-08-28 2016-02-28 Kevin Alan Tussy Facial recognition authentication system including path parameters
US11256792B2 (en) 2014-08-28 2022-02-22 Facetec, Inc. Method and apparatus for creation and use of digital identification
US10803160B2 (en) 2014-08-28 2020-10-13 Facetec, Inc. Method to verify and identify blockchain with user question data
US10614204B2 (en) 2014-08-28 2020-04-07 Facetec, Inc. Facial recognition authentication system including path parameters
US10915618B2 (en) 2014-08-28 2021-02-09 Facetec, Inc. Method to add remotely collected biometric images / templates to a database record of personal information
KR102230267B1 (ko) 2014-09-04 2021-03-19 삼성전자주식회사 영상 표시 장치 및 방법
WO2016049273A1 (en) 2014-09-24 2016-03-31 Sri International Control of wireless communication device capability in a mobile device with a biometric key
US20160092082A1 (en) * 2014-09-29 2016-03-31 Apple Inc. Visualizing Relationships Between Entities in Content Items
WO2016089592A1 (en) 2014-12-03 2016-06-09 Sri Internaitonal System and method for mobile device biometric add-on
US9767305B2 (en) * 2015-03-13 2017-09-19 Facebook, Inc. Systems and methods for sharing media content with recognized social connections
US10445391B2 (en) 2015-03-27 2019-10-15 Jostens, Inc. Yearbook publishing system
US9619696B2 (en) 2015-04-15 2017-04-11 Cisco Technology, Inc. Duplicate reduction for face detection
US10554602B2 (en) 2015-05-15 2020-02-04 Samsung Electronics Co., Ltd. User terminal apparatus, server, and control method thereof
CN105100193B (zh) * 2015-05-26 2018-12-11 小米科技有限责任公司 云名片推荐方法及装置
US9300737B1 (en) 2015-06-02 2016-03-29 Mylio, LLC Object replication using object device links and flags
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US9286657B1 (en) 2015-06-25 2016-03-15 Mylio, LLC Efficient image processing using dynamically sized tiles
CN105069083B (zh) 2015-07-31 2019-03-08 小米科技有限责任公司 关联用户的确定方法及装置
CN105095873B (zh) * 2015-07-31 2018-12-18 小米科技有限责任公司 照片共享方法、装置
US9811761B2 (en) 2015-08-28 2017-11-07 International Business Machines Corporation System, method, and recording medium for detecting video face clustering with inherent and weak supervision
WO2017043132A1 (ja) * 2015-09-08 2017-03-16 日本電気株式会社 顔認識システム、顔認識方法、表示制御装置、表示制御方法および表示制御プログラム
JP6685682B2 (ja) * 2015-09-24 2020-04-22 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
US10127435B2 (en) * 2015-09-25 2018-11-13 American Express Travel Related Services Company, Inc. Systems and methods for authenticating facial biometric data against secondary sources
WO2017058826A1 (en) 2015-09-28 2017-04-06 Google Inc. Sharing images and image albums over a communication network
US9934424B2 (en) * 2015-10-05 2018-04-03 International Business Machines Corporation Automated relationship categorizer and visualizer
CN105260994A (zh) * 2015-11-26 2016-01-20 南京工程学院 一种航拍绝缘子图像的去噪方法
WO2017100929A1 (en) * 2015-12-15 2017-06-22 Applied Recognition Inc. Systems and methods for authentication using digital signature with biometrics
US9934397B2 (en) 2015-12-15 2018-04-03 International Business Machines Corporation Controlling privacy in a face recognition application
US10339690B2 (en) * 2015-12-18 2019-07-02 Ricoh Co., Ltd. Image recognition scoring visualization
US10209976B2 (en) * 2015-12-30 2019-02-19 Dropbox, Inc. Automated application installation
US9971847B2 (en) * 2016-01-07 2018-05-15 International Business Machines Corporation Automating browser tab groupings based on the similarity of facial features in images
EP3403217A4 (en) 2016-01-12 2019-08-21 Princeton Identity, Inc. SYSTEMS AND METHODS FOR BIOMETRIC ANALYSIS
US9977950B2 (en) * 2016-01-27 2018-05-22 Intel Corporation Decoy-based matching system for facial recognition
WO2019246576A1 (en) * 2018-06-21 2019-12-26 Dthera Sciences Operations, Inc. Reminiscence therapy and media sharing platform
US10127945B2 (en) 2016-03-15 2018-11-13 Google Llc Visualization of image themes based on image content
TWI636403B (zh) * 2016-03-24 2018-09-21 晶睿通訊股份有限公司 人流計數之驗證方法、系統及電腦可讀取儲存媒體
US10373008B2 (en) 2016-03-31 2019-08-06 Princeton Identity, Inc. Systems and methods of biometric analysis with adaptive trigger
WO2017173228A1 (en) 2016-03-31 2017-10-05 Princeton Identity, Inc. Biometric enrollment systems and methods
EP3229174A1 (en) * 2016-04-06 2017-10-11 L-1 Identity Solutions AG Method for video investigation
USD987653S1 (en) 2016-04-26 2023-05-30 Facetec, Inc. Display screen or portion thereof with graphical user interface
CN105979141A (zh) * 2016-06-03 2016-09-28 北京奇虎科技有限公司 一种图像拍摄方法、装置和移动终端
DK201670595A1 (en) 2016-06-11 2018-01-22 Apple Inc Configuring context-specific user interfaces
AU2017100670C4 (en) * 2016-06-12 2019-11-21 Apple Inc. User interfaces for retrieving contextually relevant media content
US10324973B2 (en) 2016-06-12 2019-06-18 Apple Inc. Knowledge graph metadata network based on notable moments
DK201670608A1 (en) 2016-06-12 2018-01-02 Apple Inc User interfaces for retrieving contextually relevant media content
US10318812B2 (en) 2016-06-21 2019-06-11 International Business Machines Corporation Automatic digital image correlation and distribution
US10083369B2 (en) 2016-07-01 2018-09-25 Ricoh Company, Ltd. Active view planning by deep learning
US10347218B2 (en) * 2016-07-12 2019-07-09 Qualcomm Incorporated Multiple orientation detection
KR101810190B1 (ko) * 2016-07-14 2017-12-18 김용상 얼굴 인식을 이용한 사용자 인증 방법 및 그 장치
US10642893B2 (en) 2016-09-05 2020-05-05 Google Llc Generating theme-based videos
KR102210150B1 (ko) 2016-09-23 2021-02-02 애플 인크. 아바타 생성 및 편집
US10740388B2 (en) 2017-01-24 2020-08-11 Microsoft Technology Licensing, Llc Linked capture session for automatic image sharing
US10095915B2 (en) 2017-01-25 2018-10-09 Chaim Mintz Photo subscription system and method using biometric identification
US11222227B2 (en) 2017-01-25 2022-01-11 Chaim Mintz Photo subscription system and method using biometric identification
US10607096B2 (en) 2017-04-04 2020-03-31 Princeton Identity, Inc. Z-dimension user feedback biometric system
EP3568787B1 (en) 2017-05-17 2024-04-10 Google LLC Automatic image sharing with designated users over a communication network
US11169661B2 (en) 2017-05-31 2021-11-09 International Business Machines Corporation Thumbnail generation for digital images
US10403016B2 (en) * 2017-06-02 2019-09-03 Apple Inc. Face syncing in distributed computing environment
TWI633499B (zh) * 2017-06-22 2018-08-21 宏碁股份有限公司 全景影像的顯示方法及其電子裝置
WO2019023032A1 (en) 2017-07-26 2019-01-31 Princeton Identity, Inc. METHODS AND SYSTEMS FOR BIOMETRIC SECURITY
AU2018324122B2 (en) * 2017-09-01 2021-09-09 Percipient.ai Inc. Identification of individuals in a digital file using media analysis techniques
US20220207947A1 (en) * 2017-09-18 2022-06-30 Legic Identsystems Ag Personal identity verification system and method for verifying the identity of an individual
TWI670653B (zh) * 2017-10-18 2019-09-01 大猩猩科技股份有限公司 一種基於線上學習的人臉辨識方法與系統
US20190138795A1 (en) 2017-11-07 2019-05-09 Ooma, Inc. Automatic Object Detection and Recognition via a Camera System
US10592074B2 (en) * 2018-05-03 2020-03-17 Adhark, Inc. Systems and methods for analyzing visual content items
US11086935B2 (en) 2018-05-07 2021-08-10 Apple Inc. Smart updates from historical database changes
US11243996B2 (en) 2018-05-07 2022-02-08 Apple Inc. Digital asset search user interface
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US20190340529A1 (en) * 2018-05-07 2019-11-07 Apple Inc. Automatic Digital Asset Sharing Suggestions
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US10511763B1 (en) * 2018-06-19 2019-12-17 Microsoft Technology Licensing, Llc Starting electronic communication based on captured image
US11336968B2 (en) 2018-08-17 2022-05-17 Samsung Electronics Co., Ltd. Method and device for generating content
CN109344732B (zh) * 2018-09-10 2020-01-21 阿里巴巴集团控股有限公司 一种鉴权以及确定鉴权方式的方法、装置及电子设备
US10846343B2 (en) 2018-09-11 2020-11-24 Apple Inc. Techniques for disambiguating clustered location identifiers
US10803135B2 (en) 2018-09-11 2020-10-13 Apple Inc. Techniques for disambiguating clustered occurrence identifiers
KR20200039365A (ko) 2018-10-05 2020-04-16 삼성전자주식회사 전자 장치 및 이의 제어 방법
USD904425S1 (en) 2018-10-08 2020-12-08 Facebook, Inc. Display screen with a graphical user interface
US10617949B1 (en) 2018-10-08 2020-04-14 Facebook, Inc. Digital feedback prompt
US10924446B1 (en) 2018-10-08 2021-02-16 Facebook, Inc. Digital story reply container
US10623917B1 (en) * 2018-10-08 2020-04-14 Facebook, Inc. Collaborative digital story system
USD904426S1 (en) 2018-10-08 2020-12-08 Facebook, Inc. Display screen with a graphical user interface
CN109544754B (zh) * 2018-11-27 2021-09-28 湖南视觉伟业智能科技有限公司 一种基于人脸识别的门禁方法及系统、计算机设备
US10936178B2 (en) 2019-01-07 2021-03-02 MemoryWeb, LLC Systems and methods for analyzing and organizing digital photos and videos
US11494884B2 (en) 2019-02-21 2022-11-08 Canon U.S.A., Inc. Method and system for evaluating image sharpness
DK201970535A1 (en) 2019-05-06 2020-12-21 Apple Inc Media browsing user interface with intelligently selected representative media items
CN110136236B (zh) * 2019-05-17 2022-11-29 腾讯科技（深圳）有限公司 三维角色的个性化脸部显示方法、装置、设备及存储介质
CN110245612A (zh) * 2019-06-14 2019-09-17 百度在线网络技术（北京）有限公司 人脸图像的检测方法和装置
US11138344B2 (en) 2019-07-03 2021-10-05 Ooma, Inc. Securing access to user data stored in a cloud computing environment
CN110516083B (zh) * 2019-08-30 2022-07-12 京东方科技集团股份有限公司 相册管理方法、存储介质及电子设备
US10990807B2 (en) * 2019-09-06 2021-04-27 Adobe, Inc. Selecting representative recent digital portraits as cover images
US11438466B2 (en) * 2019-12-19 2022-09-06 HCL Technologies Italy S.p.A. Generating an automatic virtual photo album
CN114930324A (zh) * 2020-01-06 2022-08-19 谷歌有限责任公司 用于对媒体内容进行搜索和编索引的共享嵌入的隐私控制
US11657607B2 (en) * 2020-11-13 2023-05-23 International Business Machines Corporation Non-intrusive image identification
US11972639B2 (en) * 2020-11-17 2024-04-30 Corsight.Ai Unsupervised signature-based person of interest database population
US11593520B2 (en) 2021-04-19 2023-02-28 Western Digital Technologies, Inc. Privacy enforcing memory system
US11881049B1 (en) * 2022-06-30 2024-01-23 Mark Soltz Notification systems and methods for notifying users based on face match

Family Cites Families (115)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5031228A (en) * 1988-09-14 1991-07-09 A. C. Nielsen Company Image recognition system and method
US5835616A (en) * 1994-02-18 1998-11-10 University Of Central Florida Face detection using templates
US5699449A (en) * 1994-11-14 1997-12-16 The University Of Connecticut Method and apparatus for implementation of neural networks for face recognition
US5842194A (en) * 1995-07-28 1998-11-24 Mitsubishi Denki Kabushiki Kaisha Method of recognizing images of faces or general images using fuzzy combination of multiple resolutions
US5850470A (en) * 1995-08-30 1998-12-15 Siemens Corporate Research, Inc. Neural network for locating and recognizing a deformable object
JP3279913B2 (ja) * 1996-03-18 2002-04-30 株式会社東芝 人物認証装置、特徴点抽出装置及び特徴点抽出方法
US6173068B1 (en) * 1996-07-29 2001-01-09 Mikos, Ltd. Method and apparatus for recognizing and classifying individuals based on minutiae
US5760917A (en) 1996-09-16 1998-06-02 Eastman Kodak Company Image distribution method and system
AU9582498A (en) * 1997-09-26 1999-04-12 Trident Systems Inc System, method and medium for increasing compression of an image while minimizing image degradation
JP3361980B2 (ja) * 1997-12-12 2003-01-07 株式会社東芝 視線検出装置及びその方法
US6301370B1 (en) * 1998-04-13 2001-10-09 Eyematic Interfaces, Inc. Face recognition from video images
US6310601B1 (en) * 1998-05-12 2001-10-30 International Business Machines Corporation Resizing images to improve network throughput
US6134339A (en) * 1998-09-17 2000-10-17 Eastman Kodak Company Method and apparatus for determining the position of eyes and for correcting eye-defects in a captured frame
US6606398B2 (en) 1998-09-30 2003-08-12 Intel Corporation Automatic cataloging of people in digital photographs
AU2001238354A1 (en) * 2000-02-18 2001-08-27 The University Of Maryland Methods for the electronic annotation, retrieval, and use of electronic images
AUPQ717700A0 (en) * 2000-04-28 2000-05-18 Canon Kabushiki Kaisha A method of annotating an image
US6810149B1 (en) * 2000-08-17 2004-10-26 Eastman Kodak Company Method and system for cataloging images
US6728401B1 (en) * 2000-08-17 2004-04-27 Viewahead Technology Red-eye removal using color image processing
US8954432B2 (en) * 2000-11-15 2015-02-10 Mark Frigon Users tagging users in photos online
US6697502B2 (en) * 2000-12-14 2004-02-24 Eastman Kodak Company Image processing method for detecting human figures in a digital image
US7197531B2 (en) * 2000-12-29 2007-03-27 Fotomedia Technologies, Llc Meta-application architecture for integrating photo-service websites for browser-enabled devices
EP1260935B1 (en) * 2001-05-22 2006-07-12 Matsushita Electric Industrial Co., Ltd. Face detection device, face pose detection device, partial image extraction device, and methods for said devices
TW505892B (en) * 2001-05-25 2002-10-11 Ind Tech Res Inst System and method for promptly tracking multiple faces
US6999111B2 (en) * 2001-06-26 2006-02-14 Eastman Kodak Company Electronic camera and system for transmitting digital over a communication network
US20040243671A9 (en) 2001-07-26 2004-12-02 Needham Bradford H. Method and system for image sharing based on faces in an image
TWI299471B (en) * 2001-08-24 2008-08-01 Toshiba Kk Person recognition apparatus
US7058209B2 (en) * 2001-09-20 2006-06-06 Eastman Kodak Company Method and computer program product for locating facial features
KR100443678B1 (ko) * 2001-09-29 2004-08-09 엘지전자 주식회사 영상내의 오브젝트 영역 추출방법
US6757684B2 (en) * 2001-10-01 2004-06-29 Ipac Acquisition Subsidiary I, Llc Network-based photosharing architecture
US7068309B2 (en) * 2001-10-09 2006-06-27 Microsoft Corp. Image exchange with image annotation
KR100456619B1 (ko) * 2001-12-05 2004-11-10 한국전자통신연구원 에스.브이.엠(ｓｖｍ)을 이용한 얼굴 등록/인증 시스템 및방법
US6879709B2 (en) * 2002-01-17 2005-04-12 International Business Machines Corporation System and method for automatically detecting neutral expressionless faces in digital images
KR100438841B1 (ko) * 2002-04-23 2004-07-05 삼성전자주식회사 이용자 검증 및 데이터 베이스 자동 갱신 방법, 및 이를이용한 얼굴 인식 시스템
US20030210808A1 (en) * 2002-05-10 2003-11-13 Eastman Kodak Company Method and apparatus for organizing and retrieving images containing human faces
US7392296B2 (en) * 2002-06-19 2008-06-24 Eastman Kodak Company Method and computer software program for sharing images over a communication network among a plurality of users in accordance with a criteria
JP4036051B2 (ja) * 2002-07-30 2008-01-23 オムロン株式会社 顔照合装置および顔照合方法
AU2002951473A0 (en) * 2002-09-18 2002-10-03 Canon Kabushiki Kaisha Method for tracking facial features in video sequence
WO2004049242A2 (en) * 2002-11-26 2004-06-10 Digimarc Id Systems Systems and methods for managing and detecting fraud in image databases used with identification documents
KR100455294B1 (ko) * 2002-12-06 2004-11-06 삼성전자주식회사 감시 시스템에서의 사용자 검출 방법, 움직임 검출 방법및 사용자 검출 장치
US6800167B1 (en) 2002-12-17 2004-10-05 Funeral Management Solutions Llc Printing system for generating personalized memorial items, and method for generating such items
JP2004201191A (ja) * 2002-12-20 2004-07-15 Nec Corp 画像処理送信システム、携帯電話、画像処理送信方法、および、画像処理送信プログラム
JP2004213087A (ja) * 2002-12-26 2004-07-29 Toshiba Corp 個人認証装置および個人認証方法
US7117453B2 (en) * 2003-01-21 2006-10-03 Microsoft Corporation Media frame object visualization system
US7359529B2 (en) 2003-03-06 2008-04-15 Samsung Electronics Co., Ltd. Image-detectable monitoring system and method for using the same
JP2004297518A (ja) * 2003-03-27 2004-10-21 Matsushita Electric Ind Co Ltd 認証対象画像撮像装置及びその方法
US20050031173A1 (en) * 2003-06-20 2005-02-10 Kyungtae Hwang Systems and methods for detecting skin, eye region, and pupils
US8896725B2 (en) * 2007-06-21 2014-11-25 Fotonation Limited Image capture device with contemporaneous reference image capture mechanism
US7274822B2 (en) * 2003-06-30 2007-09-25 Microsoft Corporation Face annotation for photo management
US20050117802A1 (en) * 2003-09-09 2005-06-02 Fuji Photo Film Co., Ltd. Image processing method, apparatus, and program
US7920725B2 (en) * 2003-09-09 2011-04-05 Fujifilm Corporation Apparatus, method, and program for discriminating subjects
JP2005122351A (ja) * 2003-10-15 2005-05-12 Seiko Epson Corp 顔画像候補領域検索方法及び検索システム並びに検索プログラム
CN1627317A (zh) * 2003-12-12 2005-06-15 北京阳光奥森科技有限公司 利用主动光源获取人脸图像的方法
US7430315B2 (en) * 2004-02-13 2008-09-30 Honda Motor Co. Face recognition system
JP4320272B2 (ja) * 2004-03-31 2009-08-26 富士フイルム株式会社 特定領域検出方法、特定領域検出装置、およびプログラム
JP4352980B2 (ja) * 2004-04-23 2009-10-28 オムロン株式会社 拡大表示装置及び拡大画像制御装置
GB2414614A (en) * 2004-05-28 2005-11-30 Sony Uk Ltd Image processing to determine most dissimilar images
ATE476715T1 (de) * 2004-06-21 2010-08-15 Google Inc Einzelbildbasiertes multi-biometrisches system und verfahren
DE102004032514A1 (de) * 2004-07-06 2006-02-16 Saurer Gmbh & Co. Kg Spulenrahmen Be- und Entlastungsvorrichtung für eine Spuleinrichtung einer Kreuzspulen herstellenden Textilmaschine
US7702599B2 (en) * 2004-10-07 2010-04-20 Bernard Widrow System and method for cognitive memory and auto-associative neural network based pattern recognition
US7599549B2 (en) * 2004-12-22 2009-10-06 Fujifilm Corporation Image processing method, image processing apparatus, and computer readable medium, in which an image processing program is recorded
US20060218225A1 (en) * 2005-03-28 2006-09-28 Hee Voon George H Device for sharing social network information among users over a network
US7403642B2 (en) * 2005-04-21 2008-07-22 Microsoft Corporation Efficient propagation for face annotation
US7809722B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for enabling search and retrieval from image files based on recognized information
US7809192B2 (en) * 2005-05-09 2010-10-05 Like.Com System and method for recognizing objects from images and identifying relevancy amongst images and information
US7760917B2 (en) * 2005-05-09 2010-07-20 Like.Com Computer-implemented method for performing similarity searches
US7542610B2 (en) * 2005-05-09 2009-06-02 Like.Com System and method for use of images with recognition analysis
US7519200B2 (en) * 2005-05-09 2009-04-14 Like.Com System and method for enabling the use of captured images through recognition
US7783135B2 (en) * 2005-05-09 2010-08-24 Like.Com System and method for providing objectified image renderings using recognition information from images
US20060274949A1 (en) 2005-06-02 2006-12-07 Eastman Kodak Company Using photographer identity to classify images
JP2007041987A (ja) * 2005-08-05 2007-02-15 Sony Corp 画像処理装置および方法、並びにプログラム
US20070098303A1 (en) 2005-10-31 2007-05-03 Eastman Kodak Company Determining a particular person from a collection
US9141825B2 (en) * 2005-11-18 2015-09-22 Qurio Holdings, Inc. System and method for controlling access to assets in a network-based media sharing system using tagging
KR100651753B1 (ko) * 2005-11-19 2006-12-01 한국전자통신연구원 객체의 대칭 특성과 모멘트 특성을 이용한 눈 검출 방법 및그 장치
US7945653B2 (en) * 2006-10-11 2011-05-17 Facebook, Inc. Tagging digital media
US7636450B1 (en) * 2006-01-26 2009-12-22 Adobe Systems Incorporated Displaying detected objects to indicate grouping
US7711145B2 (en) * 2006-01-27 2010-05-04 Eastman Kodak Company Finding images with multiple people or objects
KR100641791B1 (ko) * 2006-02-14 2006-11-02 (주)올라웍스 디지털 데이터에 대한 태깅 방법 및 시스템
JP2007241377A (ja) * 2006-03-06 2007-09-20 Sony Corp 検索システム、撮像装置、データ保存装置、情報処理装置、撮像画像処理方法、情報処理方法、プログラム
JP2007241500A (ja) * 2006-03-07 2007-09-20 Toshiba Corp 顔認証装置および顔認証方法
US7529797B2 (en) * 2006-08-16 2009-05-05 Tagged, Inc. User created tags for online social networking
US20080077595A1 (en) * 2006-09-14 2008-03-27 Eric Leebow System and method for facilitating online social networking
US7881505B2 (en) * 2006-09-29 2011-02-01 Pittsburgh Pattern Recognition, Inc. Video retrieval system for human face content
US8085995B2 (en) * 2006-12-01 2011-12-27 Google Inc. Identifying images using face recognition
US7788247B2 (en) * 2007-01-12 2010-08-31 Microsoft Corporation Characteristic tagging
KR101247147B1 (ko) 2007-03-05 2013-03-29 디지털옵틱스 코포레이션 유럽 리미티드 디지털 영상 획득 장치에서의 얼굴 탐색 및 검출
EP2132680B1 (en) * 2007-03-05 2013-01-02 Seeing Machines Pty Ltd Efficient and accurate 3d object tracking
KR100831093B1 (ko) * 2007-04-09 2008-05-22 한국과학기술연구원 이온성 액체를 이용한 ｉｓ 싸이클 공정의 혼합가스로부터순수 이산화황의 분리 회수 방법
US8165352B1 (en) * 2007-08-06 2012-04-24 University Of South Florida Reconstruction of biometric image templates using match scores
CN102016882B (zh) 2007-12-31 2015-05-27 应用识别公司 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
US9639740B2 (en) * 2007-12-31 2017-05-02 Applied Recognition Inc. Face detection and recognition
US9721148B2 (en) * 2007-12-31 2017-08-01 Applied Recognition Inc. Face detection and recognition
JP5213105B2 (ja) * 2008-01-17 2013-06-19 株式会社日立製作所 映像ネットワークシステム及び映像データ管理方法
US8048654B2 (en) * 2010-06-09 2011-11-01 Joule Unlimited Technologies, Inc. Methods and compositions for the recombinant biosynthesis of fatty acids and esters
EP2618289A3 (en) * 2008-04-02 2014-07-30 Google, Inc. Method and apparatus to incorporate automatic face recognition in digital image collections
US20090324022A1 (en) * 2008-06-25 2009-12-31 Sony Ericsson Mobile Communications Ab Method and Apparatus for Tagging Images and Providing Notifications When Images are Tagged
US8788493B2 (en) * 2008-06-30 2014-07-22 Verizon Patent And Licensing Inc. Digital image tagging apparatuses, systems, and methods
US9147045B2 (en) * 2008-07-09 2015-09-29 Baxter International Inc. Peritoneal equilibration test and dialysis system using same
US8145334B2 (en) * 2008-07-10 2012-03-27 Palo Alto Research Center Incorporated Methods and systems for active diagnosis through logic-based planning
US8396246B2 (en) * 2008-08-28 2013-03-12 Microsoft Corporation Tagging images with labels
US8867779B2 (en) * 2008-08-28 2014-10-21 Microsoft Corporation Image tagging user interface
JP4912374B2 (ja) * 2008-09-10 2012-04-11 富士フイルム株式会社 顔イラスト画生成方法及び顔イラスト画生成装置
KR101179497B1 (ko) * 2008-12-22 2012-09-07 한국전자통신연구원 얼굴 검출 방법 및 장치
WO2010116478A1 (ja) * 2009-03-30 2010-10-14 富士通株式会社 画像処理装置および画像処理方法、画像処理プログラム
JP4748244B2 (ja) * 2009-03-31 2011-08-17 カシオ計算機株式会社 画像選択装置、画像選択方法及びプログラム
US20110021109A1 (en) * 2009-07-21 2011-01-27 Borei Corporation Toy and companion avatar on portable electronic device
US20110031787A1 (en) * 2009-08-10 2011-02-10 Bounds Steven R Get a grip grab handle
CA2774353C (en) * 2009-09-16 2016-01-26 Image Holdings Method and system of displaying, managing and selling images in an event photography environment
US20110063108A1 (en) * 2009-09-16 2011-03-17 Seiko Epson Corporation Store Surveillance System, Alarm Device, Control Method for a Store Surveillance System, and a Program
US8810684B2 (en) * 2010-04-09 2014-08-19 Apple Inc. Tagging images in a mobile communications device using a contacts list
TWI396566B (zh) * 2010-07-16 2013-05-21 Apex Medical Corp 陽壓呼吸面罩的可置換額墊
TWI452850B (zh) * 2010-09-29 2014-09-11 Asustek Comp Inc 天線匹配電路控制裝置
JP5946227B2 (ja) * 2011-01-04 2016-07-05 アドバンスト・エナジー・インダストリーズ・インコーポレイテッドＡｄｖａｎｃｅｄ Ｅｎｅｒｇｙ Ｉｎｄｕｓｔｒｉｅｓ， Ｉｎｃ． 電力送達システム、電力制御システム、および、電力を送達するまたは電力制御する方法
US20130057693A1 (en) 2011-09-02 2013-03-07 John Baranek Intruder imaging and identification system
US8917913B2 (en) 2011-09-22 2014-12-23 International Business Machines Corporation Searching with face recognition and social networking profiles
EP3011504A4 (en) * 2013-06-19 2017-02-22 Conversant LLC Automatic face discovery and recognition for video content analysis

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103688273A (zh) * 2011-06-24 2014-03-26 苹果公司 辅助弱视用户进行图像拍摄和图像回顾
CN102281140B (zh) * 2011-06-24 2014-04-16 上海合合信息科技发展有限公司 指定信息获取方法及系统
CN102281140A (zh) * 2011-06-24 2011-12-14 上海合合信息科技发展有限公司 指定信息获取方法及系统
CN110084153B (zh) * 2011-08-18 2023-04-18 高通股份有限公司 用于自动共享图片的智能相机
CN110084153A (zh) * 2011-08-18 2019-08-02 高通股份有限公司 用于自动共享图片的智能相机
CN104025557A (zh) * 2011-12-27 2014-09-03 高通股份有限公司 人群确定的文件上载方法、装置和系统
CN104025557B (zh) * 2011-12-27 2017-09-22 高通股份有限公司 人群确定的文件上载方法、装置和系统
CN103365869A (zh) * 2012-03-29 2013-10-23 宏碁股份有限公司 照片管理方法与电子装置
CN103491067A (zh) * 2012-06-11 2014-01-01 广达电脑股份有限公司 多媒体互动系统及方法
CN105659286B (zh) * 2013-09-18 2021-09-28 英特尔公司 自动化图像裁剪和分享
CN105659286A (zh) * 2013-09-18 2016-06-08 英特尔公司 自动化图像裁剪和分享
CN105917360A (zh) * 2013-11-12 2016-08-31 应用识别公司 面部检测和识别
CN105611344B (zh) * 2014-11-20 2019-11-05 乐金电子(中国)研究开发中心有限公司 一种智能电视机及其锁屏方法
CN105611344A (zh) * 2014-11-20 2016-05-25 乐金电子(中国)研究开发中心有限公司 一种智能电视机及其锁屏方法
CN113826110A (zh) * 2019-03-12 2021-12-21 埃利蒙特公司 利用移动设备检测面部识别的欺骗
CN112529231A (zh) * 2021-02-08 2021-03-19 北京翔东智能科技有限公司 一种社保卡信息采集系统及其采集方法

Also Published As

Publication number Publication date
US20100287053A1 (en) 2010-11-11
US20180046855A1 (en) 2018-02-15
US9152849B2 (en) 2015-10-06
WO2009082814A1 (en) 2009-07-09
US9928407B2 (en) 2018-03-27
CA2897227C (en) 2017-01-10
US8750574B2 (en) 2014-06-10
CA2711143A1 (en) 2009-07-09
CA2711143C (en) 2015-12-08
US20180157900A1 (en) 2018-06-07
CN102016882B (zh) 2015-05-27
CA2897227A1 (en) 2009-07-09
WO2009082814A8 (en) 2011-02-24
US20140161326A1 (en) 2014-06-12
US20160086019A1 (en) 2016-03-24
CN104866553A (zh) 2015-08-26

Similar Documents

Publication Publication Date Title
CN102016882B (zh) 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
CN108009871B (zh) 基于增强现实视点的产品推荐
US8676810B2 (en) Multiple index mixed media reality recognition using unequal priority indexes
US9063952B2 (en) Mixed media reality recognition with image tracking
US9721148B2 (en) Face detection and recognition
JP5829662B2 (ja) 処理方法、コンピュータプログラム及び処理装置
US8369655B2 (en) Mixed media reality recognition using multiple specialized indexes
US9639740B2 (en) Face detection and recognition
KR100980748B1 (ko) 혼합 미디어 환경을 생성 및 사용하는 시스템 및 방법
US8965145B2 (en) Mixed media reality recognition using multiple specialized indexes
WO2020012220A1 (en) In the event of selection of message, invoking camera to enabling to capture media and relating, attaching, integrating, overlay message with/on/in captured media and send to message sender
US20130346431A1 (en) Monitoring and Analyzing Creation and Usage of Visual Content
US20150139540A1 (en) Mixed Media Reality Recognition Using Multiple Specialized Indexes
EP2482210A2 (en) System and methods for creation and use of a mixed media environment
US10963687B1 (en) Automatic correlation of items and adaptation of item attributes using object recognition
US12008623B2 (en) Systems and methods for user platform based recommendations
KR20220015873A (ko) 사용자 주소록 연계를 통한 사진 콘텐츠 공유 서비스 제공장치
KR20220015880A (ko) 사진 공유 서비스 프로그램 기록매체
KR20220015884A (ko) 사진 콘텐츠 공유 서비스를 제공하는 프로그램 기록매체
KR20220015879A (ko) 사진 공유 서비스 제공 프로그램
KR20220015878A (ko) 사진 콘텐츠 클라우드 기반의 사진 공유 서비스 제공 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: Ontario, Canada

Patentee after: Application identification Ltd.

Address before: Ontario, Canada

Patentee before: 11967134 Canada Ltd.

CP01 Change in the name or title of a patent holder
TR01 Transfer of patent right

Effective date of registration: 20210129

Address after: Ontario, Canada

Patentee after: 11967134 Canada Ltd.

Address before: Ontario, Canada

Patentee before: APPLIED RECOGNITION Inc.

TR01 Transfer of patent right