CN110770717A - 通过通信网络与指定用户的自动图像共享 - Google Patents

通过通信网络与指定用户的自动图像共享 Download PDF

Info

Publication number
CN110770717A
CN110770717A CN201880012338.5A CN201880012338A CN110770717A CN 110770717 A CN110770717 A CN 110770717A CN 201880012338 A CN201880012338 A CN 201880012338A CN 110770717 A CN110770717 A CN 110770717A
Authority
CN
China
Prior art keywords
image
user
images
person
criteria
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880012338.5A
Other languages
English (en)
Other versions
CN110770717B (zh
Inventor
富兰克·达基利
阿尼尔·萨巴瓦尔
基达·卡尼特卡
詹姆斯·加拉格尔
蒂莫西·诺维可夫
大卫·利布
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN110770717A publication Critical patent/CN110770717A/zh
Application granted granted Critical
Publication of CN110770717B publication Critical patent/CN110770717B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01Social networking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • General Health & Medical Sciences (AREA)
  • Business, Economics & Management (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Bioethics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Computing Systems (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Data Mining & Analysis (AREA)
  • Medical Informatics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Processing Or Creating Images (AREA)

Abstract

实施方式涉及通过通信网络与指定用户的自动图像共享。在一些实施方式中,一种方法包括使得在第一设备上的用户界面中显示图像,图像中的每个描绘不同的人员。从与第一用户相关联的图像库获得图像。基于用户输入接收对图像中的特定图像的选择,并且确定指示在所选图像中描绘的特定人员的人员标识符。人员标识符被指定为人员共享标准。获得未包括在图像中的第一图像并且以编程方式分析以确定第一图像描绘了与人员共享标准相匹配的人员,并且更新访问许可以将对第一图像的访问权限通过通信网络授予第二设备的第二用户。

Description

通过通信网络与指定用户的自动图像共享
相关申请的交叉引用
本申请要求2017年5月17日提交的题为“与指定用户的自动图像共享(AUTOMATICIMAGE SHARING WITH DESIGNATED USERS)”的美国临时专利申请No.62/507,756的优先权,其全部内容通过引用并入本文。
背景技术
数码相机的普及和便利以及因特网通信的广泛使用已经导致诸如照片的用户生成图像(user-produced images)变得无处不在。例如,互联网平台和服务的用户发布图像用于他们自己和其他人查看,互联网平台和服务诸如电子邮件、论坛、照片存储库和网络服务。用户可以将图像发布到网络服务用于私人查看(例如,用户的朋友或其他小的组)和/或许多用户的公共查看。
本文提供的背景描述是为了总体上呈现本公开的背景。在本背景技术部分中描述其范围的目前被指名的发明人的工作,以及在提交时可能不具有现有技术资格的描述的方面,既不明确也不暗示地被认为是针对本公开的现有技术。
发明内容
本申请的实施方式涉及通过通信网络与指定用户的自动图像共享。在一些实施方式中,一种计算机实施的方法包括使得向第一用户显示第一设备上的用户界面中的多个图像,其中多个图像中的每一个图像描绘不同的人员,其中多个图像是从与第一用户相关联的图像库中获得的。基于由第一设备接收的用户输入接收对多个图像中的特定图像的选择,并且确定指示在选择的特定图像中描绘的特定人员的人员标识符,其中人员标识符被指定为人员共享标准。从与第一用户相关联的图像库获得与第一用户相关联的第一图像,其中第一图像不包括在多个图像中。该方法以编程方式分析第一图像以确定第一图像(例如,在第一图像的像素中)描绘了与人员共享标准匹配的人员。基于确定第一图像描绘了与人员共享标准匹配的人员,更新对与第一用户相关联的图像库的第一图像的访问许可,以通过通信网络将对第一图像的访问权限授予第二设备的第二用户。
描述了该方法的各种实施方式和示例。例如,在一些实施方式中,人员共享标准包括指定特定面部标识的面部标准,并且以编程方式分析第一图像包括:应用图像分类器以确定第一图像描绘特定面部标识的面部,其中应用图像分类器是基于第一图像的像素的像素值。在一些实施方式中,更新对第一图像的访问许可是基于确定第一图像描绘与人员共享标准匹配的人员的置信水平,其中置信水平满足第一阈值。在一些示例中,该方法包括检查置信水平是否不满足第一阈值并且满足第二阈值,该第二阈值指示第一图像描绘与人员共享标准匹配的人员的较小的置信度,并且响应于确定置信水平满足第二阈值,使得第一图像被显示以供从第一用户向第一设备的用户输入选择,以更新对第一图像的访问许可,从而将访问权限授予第二用户。
在一些实施方式中,更新第一图像的访问许可包括自动将第一图像添加到第二用户的图像库。在一些实施方式中,将第一图像添加到第二用户的图像库包含将第一图像添加到第二用户的图像库中的图像相册,其中图像相册被指定存储与人员共享标准匹配的图像。在一些实施方式中,第一图像的图像数据存储在通过通信网络与第一设备通信的服务器设备上,并且涉及第一图像的图像数据的第一数据指针存储在第一设备上,其中更新第一图像的访问许可包括通过通信网络将涉及第一图像的图像数据的第二数据指针发送到第二设备。
在一些实施方式中,以编程方式分析第一图像包括确定第一图像是否满足一个或多个另外的共享标准。在一些示例中,一个或多个另外的共享标准包括指定图像内容特征的图像特征标准,并且以编程方式分析第一图像包括应用图像分类器以确定包括第一图像的多个内容特征的特征向量,其中特征向量基于第一图像的像素值,并将特征向量与图像特征标准进行比较,以确定第一图像是否与图像特征标准匹配。在进一步的示例中,一个或多个另外的共享标准包括时间标准,并且以编程方式分析第一图像包括基于与第一图像相关联的时间戳元数据确定第一图像的创建时间,以及将创建时间与时间标准进行比较以确定第一图像是否与时间标准匹配。在进一步的示例中,一个或多个另外的共享标准包括位置标准,并且位置标准指定特定位置,并且以编程方式分析第一图像包括基于以下中的一个或多个确定与第一图像相关联的位置:与第一图像相关联的位置元数据和检测的如第一图像的一个或多个像素中所描绘的内容特征,并将与第一图像相关联的位置与位置标准进行比较,以确定第一图像是否与特定位置匹配。
在一些实施方式中,该方法进一步包括:响应于确定第一图像描绘了与人员共享标准匹配的人员,启动与第一用户相关联的用于第一图像的延迟时段,将状态指示符分配给第一图像,其中状态指示符指示第一图像将与第二用户共享的第一状态,确定在延迟时段期间是否在第一设备处接收到来自第一用户的用户输入,其指示第一图像不与第二用户共享,并且如果确定接收到用户输入,则将状态指示符更新为指示第一图像将不与第二用户共享的第二状态,其中更新第一图像的访问许可是响应于延迟时段的期满和指示第一状态的状态指示符。
在一些实施方式中,计算机实施的方法包括从与用户相关联的图像库中选择多个图像,并使得多个图像在用户的用户设备上的用户界面中显示。该方法包括基于通过用户设备接收的用户输入,接收对多个图像中的特定图像的选择,以及确定指示在所选择的特定图像中描绘的特定人员的人员标识符。人员标识符被指定为人员保存标准并包括在存储的与用户相关联的自动保存标准中,其中自动保存标准包括一个或多个人员标识符,每个人员标识符标识不同的人员。该方法包括通过通信网络接收用户已被授予对第一图像的访问权限的指示,第一图像与不同的用户相关联并且被提供在存储的与不同的用户相关联的不同的图像库中,其中第一图像不包括在与用户相关联的图像库中。指示包括对第一图像的访问许可,其中指示是基于在不同的用户的不同的用户设备处接收的共享输入。响应于接收到用户已被授予对第一图像的访问权限的指示,该方法获得第一图像和存储的与用户相关联的自动保存标准。该方法以编程方式分析第一图像以确定第一图像是否(例如,在第一图像的像素中)描绘了与自动保存标准的一个或多个人员标识符中的一个人员标识符匹配的人员。响应于确定第一图像描绘了与一个或多个人员标识符中的一个人员标识符匹配的人员,将第一图像添加到与用户相关联的图像库。例如,第一图像可用于在用户的用户设备上显示。
描述了该方法的各种实施方式和示例。例如,在一些实施方式中,多个图像中的每一个描绘了未在多个图像中的其他图像中描绘的独特人员,其中多个图像中的每个图像与不同的人员标识符相关联。在一些示例中,多个图像中的每一个图像是从来自多个图像聚类的不同图像聚类中选择的,其中每个图像聚类包括描绘该独特的人员的一个或多个图像。
在一些实施方式中,将第一图像自动添加到图像库包括将数据指针存储在用户设备上,其中数据指针涉及存储在服务器设备上的第一图像数据,并且第一图像数据与第一图像相关联。在一些实施方式中,自动保存标准包括一个或多个另外的保存标准,其中另外的保存标准包括指定由在用户设备处接收的用户输入指示的位置的位置保存标准,和/或指定由在用户设备处接收的用户输入指示的时间段的基于时间的保存标准,并且该方法进一步包括确定第一图像的元数据是否满足一个或多个另外的保存标准,其中,响应于确定第一图像的元数据满足一个或多个另外的保存标准,自动将第一图像添加到图像库。
在一些实施方式中,人员保存标准包括指定特定面部标识的面部保存标准,并且以编程方式分析第一图像包括应用图像分类器以确定第一图像描绘特定面部标识的面部。应用图像分类器是基于第一图像的像素的像素值。在一些实施方式中,该方法进一步包括使得通过用户设备显示第一用户界面元素,其中第一用户界面包括可选择的选项以接受对与不同的用户相关联的一个或多个图像的访问权限,并且该方法进一步包括接收来自用户的指示接受对一个或多个图像的访问权限的用户输入,其中响应于接收到指示接受的用户输入,从图像库中选择多个图像并且使多个图像被显示。在一些示例中,该方法进一步包括:响应于接收到指示接受的用户输入,使得第二用户界面被显示,该第二用户界面使得用户能够更新与用户相关联的图像库中的一个或多个图像的访问许可,以授予不同的用户对一个或多个图像的访问权限。
在一些实施方式中,一种计算机程序产品包括程序代码的部分,当程序代码的部分被计算设备运行时,使得计算设备执行操作。该操作包括使得向第一用户显示第一设备上的用户界面中的多个图像,其中多个图像中的每个图像描绘不同的人员,并且其中多个图像是从与第一用户相关联的图像库中获得的。基于由第一设备接收的用户输入接收对多个图像中的特定图像的选择。操作包括确定指示在所选的特定图像中描绘的特定人员的人员标识符,其中人员标识符被指定为人员共享标准。操作包括获得与第一用户相关联的第一图像,其中第一图像在与第一用户相关联的图像库中提供,并且第一图像不包括在图像库中。操作包括以编程方式分析第一图像以确定第一图像例如在第一图像的像素中描绘与人员共享标准匹配的人员,并且基于定第一图像描绘与人员共享标准相匹配的人员,更新对与第一用户相关联的图像库中的第一图像的访问许可,以通过通信网络将对第一图像的访问权限授予第二设备的第二用户。
在一些实施方式中,一种计算机程序产品包括程序代码的部分,当包括程序代码的部分被计算设备运行时,使得计算设备执行操作。操作包括从与用户相关联的图像库中选择多个图像。操作包括使多个图像显示在用户的用户设备上的用户界面中。操作包括基于通过用户设备接收的用户输入接收对多个图像中的特定图像的选择。操作包括确定指示在选择的特定图像中描绘的特定人员的人员标识符,其中,人员标识符被指定为人员保存标准并包括在存储的与用户相关联的自动保存标准中,其中自动保存标准包括一个或多个人员标识符,每个人员标识符识别不同的人员。所述操作包括通过通信网络接收用户已被授予对第一图像的访问权限的指示,第一图像与不同的用户相关联并且被提供在存储的与不同的用户相关联的不同的图像库中,其中第一图像不包括在与用户相关联的所述图像库中,其中指示包括对第一图像的访问许可。该操作包括响应于接收到用户已被授予对第一图像的访问权限的指示,获得第一图像和存储的与用户相关联的自动保存标准。操作包括以编程方式分析第一图像以确定第一图像是否描绘了与自动保存标准的一个或多个人员标识符中的一个人员标识符匹配的人员,并且响应于确定第一图像描绘了与一个或多个人员标识符中的一个人员标识符相匹配的人员,将第一图像添加到与用户相关联的图像库。
在一些实施方式中,一种系统包括存储设备和至少一个处理器,所述至少一个处理器被配置为访问存储设备并被配置为执行操作。该操作包括使得向第一用户显示第一设备上的用户界面中的多个图像,其中多个图像中的每个图像描绘不同的人员,并且其中多个图像是从与第一用户相关联的图像库中获得的。基于由第一设备接收的用户输入接收对多个图像中的特定图像的选择。操作包括确定指示所选特定图像中描绘的特定人员的人员标识符,其中人员标识符被指定为人员共享标准。操作包括获得与第一用户相关联的第一图像,其中第一图像在与第一用户相关联的图像库中提供,并且第一图像不包括在图像库中。操作包括以编程方式分析第一图像以确定第一图像例如在第一图像的像素中描绘了与人员共享标准相匹配的人员,并且基于确定第一图像描绘了与人员共享标准相匹配的人员,更新对与第一用户相关联的图像库中的第一图像的访问许可,以通过通信网络将对第一图像的访问权限授予第二设备的第二用户。例如,操作包括使第一图像被添加到第二用户的图像库中的图像相册,其中图像相册被指定为存储与人员共享标准匹配的图像。
在一些实施方式中,一种系统包括存储设备和至少一个处理器,所述至少一个处理器被配置为访问存储设备并被配置为执行操作。操作包括从与用户相关联的图像库中选择多个图像。操作包括使多个图像显示在用户的用户设备上的用户界面中。操作包括基于通过用户设备接收的用户输入接收对多个图像中的特定图像的选择。操作包括确定指示所选特定图像中描绘的特定人员的人员标识符,其中人员标识符被指定为人员保存标准并包括在存储的与用户相关联的自动保存标准中,其中自动保存标准包括一个或多个人员标识符,每个人员标识符识别不同的人员。操作包括通过通信网络接收用户已被授予对第一图像的访问权限的指示,第一图像与不同的用户相关联并且被提供在存储的与不同的用户相关联的不同的图像库中,其中第一图像不包括在与用户相关联的图像库中,其中指示包括对所述第一图像的访问许可。该操作包括响应于接收到用户已被授予对第一图像的访问权限的指示,获得第一图像和存储的与用户相关联的自动保存标准。操作包括以编程方式分析第一图像以确定第一图像是否描绘了与自动保存标准的一个或多个人员标识符中的一个人员标识符匹配的人员,并且响应于确定第一图像描绘了与一个或多个人员标识符中的一个人员标识符相匹配的人员,将第一图像添加到与用户相关联的图像库。
附图说明
图1是可以用于本文描述的一个或多个实施方式的示例网络环境的框图;
图2是示出根据一些实施方式的提供共享来自发送用户的图像的特征的方法的示例的流程图;
图3是示出根据一些实施方式的提供为接收用户共享图像的特征的方法的示例的流程图;
图4是根据一些实施方式的示例用户界面的示意图;
图5是根据一些实施方式的另一示例用户界面的示意图;
图6是根据一些实施方式的另一示例用户界面的示意图;
图7A是根据一些实施方式的另一示例用户界面的示意图;
图7B是根据一些实施方式的另一示例用户界面的示意图;
图7C是根据一些实施方式的另一示例用户界面的示意图;和
图8是可用于本文描述的一个或多个实施方式的示例设备的框图。
具体实施方式
本申请的实施方式涉及使用通过网络通信的设备与指定用户的自动图像共享。在一些实施方式中,如果发送用户(sending user)允许,则以编程方式分析存储在发送用户的图像库中并添加到发送用户的图像库的图像。如果确定图像与发送用户指定的一个或多个共享标准匹配,则对发送用户指定的接收用户(recipient user)自动授予对图像的访问权。在一些实施方式中,接收用户可以指示偏好,以在他们已被授予访问权限的共享图像中的某些图像满足自动保存标准时自动保存这些图像。在这些实施方式中,满足自动保存标准的图像在没有用户输入的情况下自动添加到接收者的图像库中。
所描述的特征包括接收共享标准图像的选择以基于来自发送(共享)用户的用户输入来指定共享标准。可以从发送用户的图像库获得并处理共享标准图像。例如,可以在所选的标准图像中确定人员标识符并将其用作人员共享标准。基于共享标准分析用户图像库中的图像,并基于与共享标准的匹配将其指定为共享图像。共享标准可以包括各种图像特性,该图像特性包括图像内容特征、捕获时间、捕获位置等。
在接收用户设备处,可以显示保存标准图像,并且基于用户输入,从这些保存标准图像中的选择可以指定自动保存标准。保存标准图像可以从接收用户的图像库中获得和/或处理。可以将来自发送用户的共享图像与诸如人员保存标准的自动保存标准进行比较,以确定哪些共享图像将自动存储在接收用户的图像库中。自动保存标准可以包括一个或多个图像特性,该图像特性包括图像内容特征、捕获时间、捕获位置等。
本文描述的技术可以自动地授予接收者对来自发送用户的图像的访问权限,并且可以自动保存满足用户标准的图像。因此,该技术减少或消除了用户对设备采取特定动作以共享图像的需要,并提供了自动构建与用户相关的图像库的便利性。在一个示例中,所描述的共享技术减轻了用户持续与家庭成员手动共享大量照片的负担,并且减少了用户不能持续访问家庭成员捕获的他们家庭的所有照片的挫折感。
持续地与一个或多个指定人员自动共享图像提供了技术优势。例如,捕获的图像可以立即与指定人员共享,而无需在设备上进行额外的操作和动作并且也不需要处理、存储和显示其他的应用程序(例如,单独的共享用户界面、收发消息、电子邮件、发布到社交网络等)。相比于需要使用用于共享的单独的界面或者应用程序的界面,通过消除提供单独的界面或应用程序以共享图像所需的时间,这种共享的图像可以以更低的延迟被显示。进一步的技术优势是减少了使用单独的界面或应用程序用于共享图像所需的处理成本和设备资源。例如,将预定义的共享标准和保存标准应用于图像的自动共享节省了系统处理资源,该系统处理资源通常用于显示界面和数据,这些显示界面和数据用于手动浏览和选择将要共享和保存到特定存储的图像。各种共享标准和保存标准的使用允许共享相关图像和/或在图像库中保存相关图像,而将要共享和/或存储的图像的手动浏览、选择、删除和确认不需要额外的处理和存储资源。例如,这对于希望共享照片但是具有大量照片要进行分类的用户或者拍摄大量照片的用户来说是有用的。可以向共享图像的接收用户提供保存标准选项,该保存标准选项允许相关图像自动存储在他们的图像库中(并且可以在接收者设备上定期提供通知以指示新共享的图像可供查看)。因此可以使用户在具有持续的强烈用户兴趣的基础上能够彼此共享更多图像,从而在用户之间建立更强的共享和协作网络。
通过减少用于用户使用大量设备选项查看、选择和发送图像的显示界面和用户输入,可以减少设备内存使用和处理资源使用。此外,所描述的特征可以通过减少用于查看、策划和选择要存储的共享图像的显示界面和用户输入,来减少接收用户的设备所使用的处理和通信资源。因此,一个或多个所描述的实施方式的技术效果是设备的操作在为获得结果而花费的计算时间和资源方面减少了,从而为生成、传输和查看通过通信网络在多个设备和用户之间共享的图像需要大量设备资源的技术问题提供了技术解决方案。
在本文中,描述了与图像有关的特征。其他类型的内容也可以与本文描述的特征一起使用。例如,具有多个图像帧的视频(例如,电影)可以包括在术语“图像”中,并且例如,如本文所述被分析用于共享和/或存储。类似地,诸如文档、音频片段和文件、游戏和其他媒体类型的内容类型可以类似地与所描述的特征一起使用。
在本文中讨论的某些实施方式可以收集或使用关于用户的个人信息(例如,用户数据、关于用户的社交网络的信息、用户的位置和在该位置的时间、用户的生物计量信息、用户的活动和人口统计信息)的情况下,向用户提供一个或多个机会来控制是否收集信息、是否存储个人信息、是否使用个人信息、以及如何收集、存储和使用关于用户的信息。也就是说,特别是在接收到来自相关用户的明确授权时,本文中讨论的系统和方法才会收集、存储和/或使用用户个人信息。例如,向用户提供对程序或特征是否收集关于与该程序或特征相关的该特定用户或其他用户的用户信息的控制。其个人信息要被收集的每个用户被呈现一个或多个选项以允许控制与该用户相关的信息收集,以提供关于是否收集信息以及关于信息的哪些部分要被收集的许可或授权。例如,可以通过通信网络向用户提供一个或多个这样的控制选项。另外,某些数据可以在存储或使用之前以一种或多种方式处理,以便移除个人可识别信息。作为一个示例,可以处理用户的标识,以便不能确定个人可识别信息。作为另一示例,用户的地理位置可以被泛化到更大的地区,以便不能确定用户的特定位置。
图1示出了示例网络环境100的框图,其可以在本文描述的一些实施方式中使用。在一些实施方式中,网络环境100包括一个或多个服务器系统,例如图1的示例中的服务器系统102。服务器系统102可以例如与网络130通信。服务器系统102可以包括服务器设备104和数据库106或其他存储设备。在一些实施方式中,服务器设备104可以提供图像分类器156b和/或共享应用158b。
网络环境100还可以包括一个或多个客户端设备,例如,客户端设备120、122、124和126,它们可以经由网络130彼此通信和/或与服务器系统102通信。网络130可以是任何类型的通信网络,包括因特网、局域网(Local Area Networks,LAN)、无线网络、交换机或集线器连接等中的一个或多个。在一些实施方式中,网络130可以包括设备之间的例如使用对等无线协议(例如,
Figure BDA0002169124680000091
Wi-Fi直连等)等的对等通信。箭头132示出了两个客户端设备120和122之间的对等通信的一个示例。
为了便于说明,图1示出了服务器系统102、服务器设备104、数据库106的一个框,并且示出了用于客户端设备120、122、124和126的四个框。服务器框102、104和106可以表示多个系统、服务器设备和网络数据库,并且可以以不同于所示出的配置来提供框。例如,服务器系统102可以表示可以经由网络130与其他服务器系统通信的多个服务器系统。在一些实施方式中,例如,服务器系统102可以包括云托管服务器。在一些示例中,数据库106和/或其他存储设备可以设置在与服务器设备104分离的服务器系统框中,并且可以经由网络130与服务器设备104和其他服务器系统通信。此外,可以具有任何数量的客户端设备。每个客户端设备可以是任何类型的电子设备,例如台式计算机、膝上型计算机、便携式或移动设备、手机、智能手机、平板电脑、电视、电视机顶盒或娱乐设备、可穿戴设备(例如,显示器眼镜或者护目镜、手表、耳机、臂章、珠宝等)、个人数字助理(Personal Digital Assistant,PDA)、媒体播放器、游戏设备等。一些客户端设备还可以具有类似于数据库106或其他存储的本地数据库。在一些实施方式中,网络环境100可以不具有所示出的所有组件和/或可以具有包括其他类型的元件的其他元件来代替或补充本文描述的那些元件。
在各种实施方式中,终端用户U1、U2、U3和U4可以使用相应的客户端设备120、122、124和126与服务器系统102和/或彼此通信。在一些示例中,用户U1、U2、U3和U4可以经由在相应的客户端设备和/或服务器系统102上运行的应用、和/或经由在服务器系统102上实施的例如社交网络服务或其他类型的网络服务的网络服务而彼此交互。例如,各个客户端设备120、122、124和126可以将数据传送到例如服务器系统102的一个或多个服务器系统,并且可以传送来自例如服务器系统102的一个或多个服务器系统的数据。在一些实施方式中,服务器系统102可以向客户端设备提供适当的数据,使得每个客户端设备可以接收上传到服务器系统102和/或网络服务的传送内容或共享内容。
在一些示例中,用户U1-U4可以经由音频或视频会议、音频、视频或文本聊天或其他通信模式或应用进行交互。通过服务器系统102实施的网络服务可以包括允许用户进行各种通信、形成链接和关联、上传和发布诸如图像、文本、视频、音频和其他类型的内容的共享内容、和/或执行其他功能的系统。例如,客户端设备可以显示所接收的数据,例如经由服务器和/或网络服务(或直接从不同的客户端设备)被发送或流式传输到客户端设备并且源自不同的客户端设备的、或源自不同的服务器系统和/或网络服务的内容帖子(contentposts)。在一些实施方式中,客户端设备可以例如使用如上所述的客户端设备之间的对等通信来彼此直接通信。在一些实施方式中,“用户”可以包括一个或多个程序或虚拟实体,以及与系统或网络接合的人。
在一些实施方式中,客户端设备120、122、124和/或126中的任何一个可以提供一个或多个应用。例如,如图1所示,客户端设备120可以提供相机应用152、图像分类器156a、共享应用158a、以及一个或多个其他应用154。客户端设备122-126还可以提供类似的应用。例如,相机应用152可以向相应客户端设备的用户(例如,用户U1-U4)提供激活和利用客户端设备122的相机(未示出)以捕获图像和/或视频的能力。例如,相机应用152可以是在客户端设备120上运行的软件应用。
在一些实施方式中,相机应用152可以提供相机用户界面。在一些实施方式中,例如,如果客户端设备120具有多个相机,例如前置摄像头和后置摄像头,相机应用152的相机用户界面可以向用户UI提供选择客户端设备120上的特定相机的选项。此外,相机应用152的相机用户界面可以向用户UI提供控制所选择的相机的一个或多个设置的能力,该设置例如光圈、快门速度、缩放级别等。相机应用152的相机用户界面还可以向用户UI提供控制操作模式的能力,该操作模式例如是慢动作模式、单图像捕获模式、视频捕获模式等。在一些实施方式中,相机应用152可以向用户提供与图像设置(例如,图像分辨率、图像尺寸、图像取向、诸如raw、JPEG等的图像格式)和/或图像效果(例如,镜头模糊效果、全景效果等)相关的选项。在一些实施方式中,相机应用152可以经由例如在客户端设备120上显示的用户界面,提供对设置、操作模式、图像处理效果等的访问。由客户端设备120的相机捕获的图像和/或视频可以存储在例如客户端设备120的本地存储中,和/或由服务器系统102提供的存储中。
在一些实施方式中,客户端设备120可以包括图像分类器156a。图像分类器156a可以使用客户端设备120的硬件和/或软件来实施,如参考图8所描述的。在不同的实施方式中,图像分类器156a可以是例如在客户端设备120-124中的任何一个客户端设备上运行的独立的图像分类器,也可以与服务器系统102上提供的图像分类器156b一起工作。图像分类器156a和图像分类器156b可以基于用户许可提供图像分析功能,例如,基于分析图像以识别图像中描绘的一个或多个面部,来将图像分配给一个或多个聚类。在一些示例中,可以使用各种技术(包括如下所述的机器学习技术)中的任何技术来进行图像分析和图像特征识别。
在一些实施方式中,可以使用客户端设备120上的图像分类器156a代替服务器上的图像分类器156b。在一些实施方式中,可以省略U1的面部识别数据(例如,如本文所述的面部模型)的服务器存储,并且在客户端设备的用户的监护和控制下,面部识别数据被本地存储在客户端的设备120上。在一些实施方式中,客户端设备120可以与服务器102通信以将所选择的共享图像(例如,经由接收用户服务器帐户和/或接收客户端设备)直接发送给接收用户。相应地,在一些实施方式中,可以在接收者的客户端设备上提供图像分类器156a和面部识别数据,以确定自动保存标准并选择共享图像,用于存储在接收用户的图像库中,而不使用在服务器上的图像分类器156b和面部识别数据。
在一些实施方式中,客户端设备120还可以包括共享应用158a。共享应用158b可以使用客户端设备120的硬件和/或软件来实施。在不同的实施方式中,共享应用158a可以是例如在客户端设备120-124中的任何一个客户端设备上运行的独立的应用,或者可以与设置在服务器系统102上的共享应用158b一起工作。共享应用158a和共享应用158b可以使用户(例如,发送用户)能够将对用户图像库中的图像的访问权限授予一个或多个其他人。共享应用158a和共享应用158b可以进一步使用户(例如,接收者)能够设置自动保存功能,以将其他用户已经授予访问权限的一个或多个图像保存在接收者的图像库。被授予访问权限的图像可以包括例如由客户端设备120捕获的图像,存储在客户端设备120上的图像,由客户端设备120例如通过网络130等访问的图像。
在一些实施方式中,客户端设备120可以包括一个或多个其他应用154。例如,其他应用154可以是提供各种类型的功能的应用,例如,日历、地址簿、电子邮件、web浏览器、购物、交通(例如,出租车、火车、航空公司预订等)、娱乐(例如,音乐播放器、视频播放器、游戏应用等)、社交网络(例如,收发消息或聊天、音频/视频呼叫、共享图像/视频等)等。在一些实施方式中,其他应用154中的一个或多个可以是运行在客户端设备120上的独立的应用。在一些实施方式中,其他应用154中的一个或多个可以访问提供其他应用154的数据和/或功能的服务器系统。
客户端设备120、122、124和/或126上的用户界面能够显示用户内容和其他内容,包括图像、视频、数据和其他内容以及通信、隐私设置、通知、和其他数据。可以使用客户端设备上的软件、服务器设备上的软件和/或在服务器设备104上运行的服务器软件和客户端软件的组合(例如,与服务器系统102通信的应用软件或客户端软件)来显示这样的用户界面。用户界面可以由客户端设备或服务器设备的显示设备(例如,触摸屏或其他显示屏、投影仪等)显示。在一些实施方式中,在服务器系统上运行的应用程序可以与客户端设备通信,以接收在客户端设备处的用户输入以及在客户端设备处的诸如视觉数据、音频数据等的输出数据。在一些实施方式中,服务器系统102和/或一个或多个客户端设备120-126中的任何一个可以提供通信应用程序。通信程序可以允许系统(例如,客户端设备或服务器系统)提供用于与其他设备通信的选项。通信程序可以提供显示在与服务器系统或客户端设备相关联的显示设备上的一个或多个相关联的用户界面。用户界面可以向用户提供各种选项以选择通信模式、与之通信的用户或设备等。在一些示例中,通信程序可以提供将内容帖子广播到广播区域的选项,和/或可以输出通知,该通知指示设备已接收到内容帖子并且设备处于所定义的用于发布的广播区域。通信程序可以例如以各种格式中的任何格式显示或者以其他方式输出传输的内容帖子和接收的内容帖子。
本文描述的特征的其他实施方式可以使用任何类型的系统和/或服务。例如,可以使用(例如,连接到因特网的)其他网络服务来代替社交网络服务,或者除了社交网络服务之外还可以使用(例如,连接到因特网的)其他网络服务。任何类型的电子设备都可以利用本文中描述的特征。一些实施方式可以在与计算机网络断开连接或间歇连接的一个或多个客户端或服务器设备上提供本文描述的一个或多个特征。在一些示例中,包括或连接到显示设备的客户端设备可以显示存储在客户端设备本地的存储设备上的内容帖子,例如,先前通过通信网络接收的内容帖子。
图2是示出根据一些实施方式的共享来自发送用户的图像的方法200的示例的流程图。在一些实施方式中,方法200可以例如在如图1所示的服务器系统102上实施。在一些实施方式中,方法200中的一些或全部可以在如图1所示的一个或多个客户端设备120、122、124或者126上、一个或多个服务器设备上、和/或服务器设备和客户端设备两者上实施。在所描述的示例中,实施系统包括一个或多个数字处理器或处理电路(“处理器”),以及一个或多个存储设备(例如,数据库106或其他存储)。在一些实施方式中,一个或多个服务器和/或客户端的不同组件可以执行方法200的不同框或其他部分。在一些示例中,第一设备被描述为执行方法200的框。一些实施方式可以具有由可以将结果或数据发送到第一设备的一个或多个其他设备(例如,其他客户端设备或服务器设备)执行的方法200的一个或多个框。针对方法200描述的各种示例和实施方式可以以各种排列或组合来组合。
在一些实施方式中,方法200或方法的部分可以由系统自动启动。在一些实施方式中,实施系统是第一设备。例如,可以周期性地执行或者基于一个或多个特定事件或条件来执行该方法(或其部分),特定事件或条件例如是由用户启动应用、接收已经新上传到系统或可由系统访问的一个或多个图像、从方法200的最后一次执行起已经过了预定时间段、和/或可以在由该方法读取的设置中指定的一个或多个其他条件发生。在一些实施方式中,这样的条件可以由用户在存储的用户的自定义偏好中指定。
在一个示例中,第一设备可以是相机、手机、智能手机、平板电脑、可穿戴设备或可以接收用户向客户端设备的内容输入(例如,图像捕获)并且可以执行方法200的其他客户端设备。在另一示例中,客户端设备或服务器设备可以接收从一个或多个用户上传的或通过网络连接接收的一个或多个图像,并且可以针对一个或多个图像执行方法200。在另一示例中,客户端设备可以通过网络将图像发送到服务器,并且服务器可以使用方法200来处理内容。一些实施方式可以基于用户输入来启动方法200。例如,用户(例如,操作员或终端用户)可以已经从所显示的用户界面(例如,应用用户界面或其他用户界面)选择方法200的启动。
本文中提到的图像可以包括具有带有一个或多个像素值(例如,颜色值、亮度值等)的像素的数字图像。图像可以是静止图像(例如,静止照片、具有单个帧的图像等)、动态图像(例如,动画、动画GIF、电影图像,在电影图像中,图像的一部分包括运动而其他部分是静止的,等等)和视频(例如,可包括音频的图像或图像帧序列)。虽然本文档的其余部分将图像称为静态图像,但是可以理解,本文描述的技术适用于动态图像、视频等。例如,本文描述的实施方式可以与静止图像(例如,照片、表情符号或其他图像)、视频或动态图像一起使用。如本文所提到的,文本可包括字母数字字符、表情符号、符号或其他字符。
在框202中,检查是否已获得用户同意(例如,用户许可)以在方法200的实施方式中使用用户数据。例如,用户数据可包括用户发送或接收的消息、用户偏好、用户生物计量信息、用户特性(标识、姓名、年龄、性别、职业等)、关于用户的社交网络和联系人的信息、社交和其他类型的行动和活动、内容、评级以及由用户创建或提交的意见、用户的当前位置、历史用户数据、用户生成、接收和/或访问的图像、用户查看或共享的视频等。一些实施方式中,本文描述的方法的一个或多个框可以使用这样的用户数据。
如果已经从在方法200中可以使用其用户数据的相关用户获得用户同意,则在框204中,确定本文方法的框可以在可能使用为那些框描述的用户数据的情况下实施,并且该方法继续到框208。如果尚未获得用户同意,则在框206中确定将在不使用用户数据的情况下实施框,并且该方法继续到框208。在一些实施方式中,如果未获得用户同意,在不使用用户数据和/或通用或可公开访问的和可公开使用的数据的情况下实施框。
在框208中,在第一设备处从第一用户(例如,发送用户)接收用户输入,以与特定用户(也称为第二用户、接收者或接收用户)建立图像(和/或其他内容项或媒体项)的共享。例如,特定用户可以是第一用户的伙伴、配偶、指定朋友等。例如,可以经由第一设备上显示的用户界面接收用户输入,和/或可以经由第一设备的输入设备输入用户输入,该输入设备例如是触摸屏、物理控制(例如,指点设备、操纵杆、触摸板等)、由第一设备的麦克风接收的语音命令等。在一些实施方式中,响应于用户输入显示共享设置界面。在一些实施方式中,响应于获得的图像,例如基于用户偏好等,共享设置界面可以由第一设备自动显示。
在框210中,从第一用户接收作为共享图像的接收用户(或接收者)的第二用户(例如,不同于第一用户的第二用户)的标识的选择。在一些实施方式中,如果已经从第一用户获得用户同意以访问第一用户的社交图(例如,社交网络、消息网络、电子邮件网络等),则可以呈现与第一用户社交连接的各种用户,用于选择为接收用户。例如,可以呈现存储在第一用户的地址簿中的联系人菜单,第一用户可以从中输入选择。在另一示例中,可以呈现来自第一用户的被组织并存储在社交网络服务上的一个或多个用户组的用户、如存储的呼叫日志中指示的经由第一设备联系的用户等等以供选择。在一些实施方式中,选择单个用户作为共享图像的接收者。在一些实施方式中,可以选择多个用户作为共享图像的接收者。在一些实施方式中,可以不选择多个用户作为如本文所述的自动共享图像的接收者,并且可以仅选择单个用户作为接收者。
在框212中,从第一用户接收用于共享图像的设置的选择,包括共享标准。例如,共享标准可以指定与所存储图像的图像特性相比较的一个或多个标准特性,例如,诸如所描绘的图像特征的图像特性。如果标准特性与图像的图像特性相匹配,则该图像被确定为匹配共享。基于指定的共享标准,来自第一用户的图像库的图像被识别为要向第二用户(接收用户)提供访问的图像。共享标准可以包括时间标准、图像内容特征标准(例如,基于诸如面部等的图像内容或图像特征的标准)、位置标准等。共享标准可以由第一用户指定,例如,经由向第一个设备的用户输入、经由存储的用户偏好等。
在一些实施方式中,时间标准可以包括一个或多个指定时间、日期或时间/日期范围,为使图像有资格作为第一用户的共享图像,图像的时间戳将匹配该一个或多个指定时间、日期或时间/日期范围(其中“时间”可以包括日期)。例如,图像时间戳可以指示相机或其他设备捕获图像的时间(或者生成的图像的创建时间)。在一些实施方式中,图像时间戳可以指示第一用户(或任何用户)对图像的最后修改的时间、经由从客户端设备通过网络向服务器的上传而接收图像的上传时间、第一用户首次访问图像的时间等等。
时间标准可以指定各种时间段(例如,时间或时间范围)。时间标准可以指定一个或多个特定时间、或时间或日期的时间范围。例如,时间标准可以指定特定时间(例如,开始时间或开始日期)、并指定具有在该特定时间之后的时间戳的图像有资格作为共享图像。特定时间可以被指定为一天中的时间、特定的一天或日期、事件(例如,标准假日、体育游戏、庆祝活动、发送用户首次遇到接收者的日期等)。在进一步的示例中,时间标准可以指定(例如,在开始时间/日期和结束时间/日期之间的)时间范围,例如,其可以与特定事件(休假、会议等)一致。在一些示例中,当发送用户(第一用户)允许访问用户数据时,可以基于例如指示过去事件和将来的计划事件的第一用户的存储日历的这样的数据来确定发送用户首次遇到接收者的日期。在另一示例中,发送用户可以输入与接收者的第一次会面的日期。在各种示例中,时间标准可以指定具有在特定时间(例如,结束时间或结束日期)之前的时间戳的图像有资格作为共享图像,或者具有在指定时间段内的时间戳的图像有资格作为共享图像。
在一些实施方式中,可以基于第一用户、其他用户、图像等的特定条件来确定特定时间。例如,如果已经获得用户同意,则例如,使用第一设备(例如,如果已获得用户同意,如联系人列表、呼叫日志、消息日志或指示第一设备的先前通信的历史的其他数据库中所指示的),时间标准可以指定发送用户第一次联系接收用户之后直到现在的时间段。具有在该时间段内的时间戳的图像有资格作为共享图像。
图像内容特征标准可以指定视觉上描绘在图像的像素中的特定图像内容特征或图像内容特征的类型。图像内容特征可以包括面部、人(例如,人的整个身体或身体的一部分)、动物(例如,如果已经获得用户同意,诸如宠物之类的可识别动物)、历史遗迹(例如,艾菲尔铁塔、金门大桥等)、景观特征(例如,树木、湖泊、桥梁、山脉、建筑物、天空、日落等)、物理对象(例如,车辆、物品等)、徽标、指示实用图像的对象等。可以通过标识符(例如,人名、艾菲尔铁塔、特定位置名称、宠物名称等)在图像内容特征标准中指定特定图像内容特征,并且可以按类别或分类(例如,狗、婴儿,卡车、球等)在标准中指定图像内容特征的类型。可以使用一种或多种图像检测和/或图像识别技术在图像中检测图像内容特征。
在一些实施方式中,机器学习技术可用于实施图像分类器,以基于图像的像素值对诸如图像中的地区和对象的特征进行分类。例如,可以确定包括多个内容特征的特征向量,并且可以将特征向量与图像内容特征标准进行比较,以确定图像是否与图像内容特征标准匹配。特征向量可以是图像的视觉像素内容的浓缩数值表示。例如,特征向量可以是具有特定数量的维度的向量,每个维度具有值。在一些实施方式中,可以使用128个或其他数量的维度。在一些实施方式中,特征向量可以由神经网络基于图像像素值(例如,颜色值)生成。在一些实施方式中,可以从图像的特定部分确定一个或多个特征向量,图像的特定部分例如是,基于图像检测或对象识别技术(例如,模式匹配、机器学习等)检测的“局部”图像内容特征。
例如,可以检测包括面部(没有标识)、动物、对象、景观特征(树叶、建筑物、天空、日落等)的图像内容特征。在一些实施方式中,可以检测“实用图像”的图像特征,诸如指示图像中的收据的描绘的文本,指示视频屏幕的屏幕捕获图像的形状(例如,以捕获状态显示的用户界面)等。在一些实施方式中,可以将描绘这些特征的实用图像排除在共享之外。在进一步的示例中,如果图像的主体(例如,图像中检测到的最大特征、在图像帧中心或其他特定位置处检测到的特征等)被确定,可以从描绘该主体的图像的部分创建特征向量。在一些实施方式中,图像的主体的特征向量可被视为代表整个图像。
在一些实施方式中,可以将共享标准指定为一个或多个对象模型,诸如面部模型或其他对象的模型。面部模型指示面部的特性,诸如与特定的人相关联的面部和面部特征的尺寸、颜色等。这允许该方法检测不同图像、姿势、角度等的各种面部,并且如果这些面部模型包含在共享标准中,则将这些面部与共享标准面部模型匹配,以指示所描绘的面部属于与面部模型相关联的特定人(例如,人员标识符)并且因此将要被共享。如果将面部模型指定为共享标准,则系统可以确定图像中与面部模型匹配的面部。方法200可以访问许多面部模型,例如,本地存储在第一用户的第一设备上的面部模型。
在一些实施方式中,第一设备可以存储基于存储在第一用户的图像库中的图像而生成的面部模型。在一些实施方式中,面部模型可以另外地或替代地存储在网络存储和/或第一设备可通过网络访问的服务器上,并且这样的面部模型也可以用作图像标准。在一些实施方式中,面部模型仅保留在用户设备的本地存储中,并且不通过网络传输到服务器。在一些实施方式中,提供面部模型聚类,其中每个聚类表示特定人(例如,每个聚类具有相关联的人员标识符)并且包括已被确定或确认为表示与该聚类相关联的特定人的多个面部模型。在一些实施方式中,包括向量分析(例如,捕获暗到亮像素值的变化,比较图像的特征向量以找到相似的图像特征)和/或皮肤纹理分析(例如,面部皮肤特征的表面纹理分析)的技术可用于检测图像中的图像内容特征,包括面部。
图像内容特征标准的一些实施方式可以包括指定的人,如果检测到在图像中描绘了这些人中的任何人,则使得该图像有资格作为共享图像。在一些实施方式中,对于有资格作为共享图像的图像,在图像中专门描绘那些指定的人,而不描绘未指定的人。在一些示例中,第一用户可以输入这些人的特定姓名和/或可以指定人员的类别(例如,我的孩子、家庭、工作同事、我的运动队的人员等)。
在一些示例中,来自第一用户的图像库(图像集)的图像(例如,“共享标准图像”)可以显示在设备(例如,第一设备)上。可以选择共享标准图像以指示共享标准,如下所述。例如,可以通过来自第一用户的输入来选择保存标准图像。可以以其他方式选择共享标准图像,例如,由系统基于存储的用户偏好和/或基于与其他共享标准图像类似的特征来选择(例如,具有在与一个或多个其他共享标准图像相关联的时间和位置的特定时间段或者地理距离内的捕获时间或捕获位置,具有与其他共享标准图像相同类型的图像内容特征等)。例如,共享标准图像的特性可以用作共享标准。这种共享标准可以包括图像内容特征标准。
例如,共享标准图像可以描绘来自不同的、独特的人(或面部模型)的样本面部,这些不同的、独特的人(或面部模型)在第一用户的库图像中描绘,并且示出重复面部的图像不显示在菜单中(例如,不显示示出同一个人的面部的多个图像)。第一用户可以选择一个或多个共享标准图像,以指示在所选择的共享标准图像中描绘的一个或多个面部作为面部标准,例如,以识别如果在图像中描绘则使图像有资格作为共享图像的人。例如,在一些实施方式中,基于检测到的面部,从所选择的共享标准图像确定一个或多个人员标识符,并且将人员标识符指定为人员共享标准。在一些示例中,人员共享标准可以包括指定特定面部标识的面部标准。在一些实施方式中,面部模型(或面部模型聚类)可以具有相关联的面部标识以识别相关联的人。
类似地,可以显示描绘除面部之外的图像特征的共享标准图像,例如描绘日落、景观、建筑物、动物等的共享标准图像,用户可以选择该共享标准图像来基于一个或多个所描绘的图像特征指示共享标准。例如,选择描绘日落的共享标准图像使得具有日落的库图像有资格作为共享图像。
在一些实施方式中,共享标准是从共享标准图像中的具有预定的或指定的特性的特定图像特征确定的,并且共享标准不从共享标准图像中描绘的不具有这些特性的其他图像特征确定。在一些实施方式中,可以通过用户输入、用户偏好、设备设置等来指定或指示用于共享标准的指定特性。例如,特定类型的图像特征可以用作或指示共享标准,诸如面部、动物类型、风景特征等。在一些示例中,具有阈值尺寸或更大尺寸(例如,总图像区域的阈值面积百分比,总的像素数量的阈值像素数量百分比、图像总宽度和/或总高度的阈值像素宽度和/或高度等)的图像特征可以用作共享标准,而小于阈值大小的图像特征不用作共享标准。在一些示例中,覆盖和/或具有位于离图像中心(或图像区域或帧内的其他特定位置)特定阈值距离内(或图像中心)的像素的图像特征被用作共享标准,而这种阈值位置之外的其他特征不用作共享标准。在进一步的示例中,具有指定颜色、亮度或其他图像特性的图像特征可以用于共享标准。
位置标准可以指定特定的位置,为使图像有资格作为第一用户的共享图像,与该图像相关联的位置要匹配该特定的位置。例如,图像可以与包括捕获图像的地理位置的元数据相关联。例如,可以通过地址(例如,邮政地址)或以其他方式将地理位置指定为坐标(例如,纬度和经度)。如果与图像关联的位置与由位置标准指定的位置相匹配,则该图像有资格作为共享图像。位置标准可以由第一用户指定为有区别的地名(例如,洋基球场、金门公园),通过地址(例如,邮政地址、邮政编码、电话区号等)指定,或以其他方式指定。例如,可以例如通过第一设备显示地图,并且第一用户可以选择作为位置标准被输入的特定位置或区域/地区。在一些实施方式中,位置标准可以由第一用户指定为标签(例如,类别或分类),例如“家”、“工作”、“学校”等,并且如果已经获得第一用户的同意,例如,通过检查第一用户的其他用户数据,诸如(指定这些位置的)联系信息、第一用户的行程历史(例如,由在特定位置出现的时间和长度指示的工作或家庭)、第一用户的通信(例如,公司电子邮件地址等)等,系统可以确定这些标签对应的特定地理位置。
在一些实施方式中可以使用其他或另外的共享标准。例如,共享标准可以基于视觉图像特性、用户评级等。其他共享标准示例在本公开的各个部分中描述,并且可以包括视觉图像特性,包括图像的质量特性(例如,模糊、对比度、亮度、颜色噪声等,其中这些特性的阈值水平可以使得图像有资格作为共享图像)等。
在其他示例中,共享标准可以包括共享图像的源存储位置。例如,共享标准可以指定特定的存储位置,诸如文件夹、组或要从中选择共享图像的其他存储集合。在一些示例中,可以将与特定应用程序相关联的存储位置指定为共享标准,使得从那些存储位置选择共享图像。例如,特定应用程序可以是可用于捕获图像的相机应用、在聊天对话和文本消息中从其他用户接收图像的聊天应用、从电子邮件接收图像的通信应用、可用于编辑捕获图像的图像编辑应用(例如,向图像添加效果、从在诸如半秒的小的时间间隔内捕获的一组图像中选择特定图像、向图像添加文本或图形元素等)等。
在进一步的示例中,共享标准可以包括已经提供图像的特定用户和/或设备。例如,可以指定特定用户,使得从特定用户接收的图像有资格作为共享图像。在一些示例中,指定特定用户设备(例如,相机设备),使得由那些设备捕获或创建的图像、或从那些设备接收的图像有资格作为共享图像。
在进一步的示例中,共享标准可以包括第一用户的与图像相关的先前动作,例如,来自可以指示图像有资格作为共享图像的这些动作的历史。例如,先前的显示和查看、共享给其他用户、选择以及第一用户使用第一设备和/或其他设备对特定图像执行的其他动作可以使特定图像有资格作为图2中的共享图像。在一些实施方式中,被认为使图像有资格共享的先前动作的类型可以由第一用户指定(例如,在框212中或在存储的用户偏好中)。在一些实施方式中,可以由第一用户指定一个或多个相关时间段(例如,在框212中或在存储的用户偏好中),在该时间段期间,来进行先前动作(例如,一天中的时间、特定月份或年份等等)。
在一些实施方式中,可以从共享给第二用户的图像中将具有与特定标准特性相匹配的特性的图像排除在外。例如,这样的标准可以是过滤标准,其基于与过滤标准相匹配的图像的特性,使得从一组共享图像中过滤特定的图像。
在一些实施方式中,可以将一个或多个共享标准图像显示为建议的共享标准,并且其允许来自第一用户的用户输入选择共享标准图像中的至少一个以指定共享标准。在一些示例中,如果通过第一用户输入选择共享标准图像,则这种共享标准图像可以显示可用作如上所述的图像标准的图像内容特征。在进一步的示例中,一些共享标准图像可以建议与共享标准图像相关联的其他共享标准,诸如时间或日期(捕获标准图像的时间或日期)、位置(标准图像的捕获位置)等,其中如果标准图像被选择,则该相关的共享标准被选择。
在一些实施方式中,共享标准图像可以是系统从第一用户的图像库中选择的具有特定特性的图像,该图像例如与其他用户(不是接收用户)共享、在第一用户的设备上被查看、在过去(例如,在当前时间之前的特定时间段内)通过第一用户输入被最频繁地共享/查看。在一些示例中,共享标准图像可以描绘先前由第一用户选择或查看和/或匹配存储的由第一用户设置的偏好或设置的内容类型。在一些示例中,这样的共享标准图像可以从列表中获得,该列表存储多个用户从多个用户访问的网络站点查看或下载最多的图像。可以从显示中省略重复的共享标准图像,例如描绘与其他共享标准图像重复的内容的图像。例如,如果确定描绘同一人的面部的两个图像是共享标准图像,则可以从显示中省略这些图像中的一个作为共享标准图像。
在一些实施方式中,可以从来自第一用户的图像库的其他图像生成或修改共享标准图像,例如,通过编辑其他图像和/或修改其他图像的像素值。例如,可以(例如,通过系统或其他系统)裁剪来自库的图像,使得裁剪之后的图像(例如,裁剪之后的图像的保留部分)被用作共享标准图像。在一些示例中,系统可以裁剪(例如,移除)图像的除了描绘面部的部分之外的区域以形成共享标准图像。共享标准图像是图像的描绘面部的部分,使得该面部是共享标准图像中描绘的唯一面部。在一些实施方式中,可以为图像中的每个面部(例如,每个面部在像素大小的阈值大小上)类似地生成共享标准图像。在另一个示例中,可以将文本或符号添加到图像以形成共享标准图像,例如,可以添加所描绘的人、位置、历史遗迹等的名称或其他标识符。
在共享设置的进一步示例中,可以由第一用户指定延迟时段(例如,宽限期)。延迟时段是在系统确定共享图像之后并且在接收用户实际上被授予对第一用户的图像的访问权限之前发生的时间段,在该延迟时段期间,第一用户可以指定那些图像中的特定图像不被共享,例如,不被供应或提供给第二用户访问。例如,响应于确定特定图像与指定的共享标准匹配,可以提供延迟时段,在该延迟时段期间,为该特定图像分配指示第一状态的状态指示符,其中第一状态指示图像将与接收用户共享。第一设备可以显示通知,该通知指示共享图像被确定。在一些示例中,通知提供显示的选项(例如,可选按钮或其他显示的控件),其使得确定的共享图像被显示以供用户查看。
在一些实施方式中,指示第一状态的状态指示符是可修改的,并且可以通过在延迟时段期间接收的第一用户输入被更新为指示第二状态的状态指示符,其中第二状态指示图像将不与接收用户共享。如果延迟时段期满并且图像仍然具有第一状态(例如,第一用户没有指定不被供应或提供用于共享给接收者的特定图像),则向第二用户提供对图像的访问权限(如下面针对框220所述)。如果图像基于第一用户输入被分配第二状态,则从共享资格中移除该图像,例如,从指示要与接收用户共享的图像的标识的存储列表中移除图像。在一些示例中,共享图像可以以队列被存储或分类,并且第一用户可以在延迟时段期间从队列中移除一个或多个共享图像(例如,通过提供选择显示在用户界面中的一个或多个图像的用户输入),使得当延迟时段期满时,向第二用户提供对队列中的(剩余)图像的访问权限。
在延迟时段的另一示例中,图像的延迟时段可以在自图像被备份以后经过特定时间量(例如,N分钟)之后再开始,图像被备份例如是图像从诸如客户端设备的设备被保存到服务器帐户以后。在该延迟时段期间,第一用户可以通过方法200的共享处理将图像标记为不被共享。在一些实施方式中,可以通过来自第一用户的用户输入来调整延迟时段。
在另外的示例中,延迟时段可以应用于由第一用户或第一设备获得的被确定为共享图像的新图像,如下面针对框222-230所描述的。
在框214中,基于共享标准确定第一用户的共享图像。例如,基于共享标准,由第一设备和/或与第一设备通信的其他设备以编程方式分析图像,以确定哪些图像有资格作为共享图像。可以将被分析的图像与多个共享标准或一个共享标准进行比较,以确定它们是否有资格作为共享图像。在一些实施方式中,例如,基于图像的一个或多个特性(图像内容特征、视觉(像素)特征、捕获时间、捕获位置等),可以将不同的图像与不同的共享标准进行比较。
被分析的图像可以存储在例如一个或多个服务器上的与第一用户相关联的一个或多个存储的集合或相册中(例如,在第一用户的图像库中),和/或存储在第一设备的本地存储或者可由第一用户访问的其他客户端设备中,等等。在一些实施方式中,其他处理可以影响图像库中的哪些图像可用于框214中的处理。在一些实施方式中,归档标准(archivingcriteria)使得一个或多个图像被归档(不被显示在图像库中,和/或省略被发送到服务器进行存储等)。这种归档可以使得使用共享标准而不将图像库的一个或多个图像考虑作为共享图像。
在一些实施方式中,共享标准存储在第一设备的本地存储中,和/或共享图像由第一设备确定。在一些实施方式中,一个或多个共享标准可以存储在远离第一设备(例如,可通过网络连接到第一设备)的服务器(或其他设备)处,和/或服务器(或其他设备)可以确定共享图像。在一些实施方式中,第一设备和一个或多个远程设备都存储共享标准和/或确定共享图像。
在第一用户的图像库的图像中检测到面部的一些实施方式中,确定面部的人员并且将这些人员与在框212中确定的人员共享标准(例如,指定特定面部标识的面部标准)进行比较。共享图像包括被确定为以图像的像素描绘与一个或多个人员共享标准匹配的人员的那些图像。类似地,可以将其他图像内容特征与其他类型的共享标准进行比较,并且可以将诸如时间和/或位置的其他图像特性与时间和位置共享标准进行比较,以确定第一用户的图像库的共享图像。被确定为有资格作为共享图像的图像可以被指定为要与接收者(第二用户)共享的共享图像,例如,相应的共享指定可以与每个共享图像相关联并存储在设备存储中。
在一些实施方式中,确定图像与一个或多个共享标准之间的匹配可以与图像与一个或多个共享标准之间的匹配的置信水平相关联,其中置信水平可以指示匹配的置信度和/或匹配准确的可能性。在一个示例中,确定匹配越接近,分配给匹配的置信水平越高。在一些实施方式中,可以采用不同的置信水平阈值,其中不同的阈值指示不同层级或类别的置信度。
在一些实施方式中,可以在不同时间和/或响应于第一设备的一个或多个特定条件(例如,在一些实施方式中可以由第一用户指定),如上所述将图像与共享标准进行比较和/或确定共享图像。例如,在一些实施方式中,在第一设备捕获时和/或在第一设备获得对图像的访问或接收图像时,或者在第一设备的一个或多个操作条件下(例如,在特定时间段期间或不在特定时间段期间,其中,在该特定时间段内第一设备正在执行特定的设备操作,例如,诸如运行特定应用程序、在特定的应用程序中发送或接收数据等的设备操作),图像可以被比较并被确定用于共享。
在一些实施方式中,可以显示有资格作为共享图像的图像的预览,其中(例如,在第一设备上)基于指定的共享标准(例如,通过系统或设备)从第一用户的图像库中选择预览图像,例如,在第一用户输入了一个或多个共享标准之后(或者基于在用户偏好中指定的共享标准等)。预览可以包括预览来自第一用户的库的图像,例如,与第一用户当前指定的一个或多个共享标准匹配并且有资格共享给接收用户的图像。
在一些实施方式中,显示预览的用户界面可以提供显示的界面元素或控件,其允许第一用户在与第二用户共享图像之前从共享状态中移除一个或多个图像(例如,通过利用用户输入选择预览中的图像,或通过取消选择图像)。在一些实施方式中,可以在预览中显示有资格作为共享图像的所有图像(例如,作为具有图像顺序的可滚动列表或图像网格)。在一些实施方式中,可以在预览中显示有资格作为共享图像的代表性图像的子集,例如,如通过一个或多个基于图像像素的相似性测量技术所确定的具有低于阈值的与其他图像的视觉相似性的图像、具有相对于(例如,用于清晰度、噪声、曝光等的)特定阈值的视觉特性的图像。在一些实施方式中,在按顺序显示其他图像(例如,通过像素相似性测量的阈值相似性,可以例如与代表性图像重复或具有类似内容)之前,可以首先以图像的预览顺序显示这样的代表性图像子集。
在一些实施方式中,可以针对特定类型的共享标准,显示当前有资格作为共享图像的图像的预览,例如,与第一用户通过从图像列表中选择图像来选择另外的共享标准相关联(例如,可以多次迭代地执行框212和214)。例如,可以在每次选择指定一个或多个共享标准的图像之后更新预览,使得仅在预览中显示与所选择的一个或多个共享标准匹配的图像。
在框216中,向第二用户发送邀请。该邀请请求第二用户接受对第一用户已共享的图像的访问权限。可以通过网络将邀请发送到与第二用户相关联的第二设备。
在框218中,通过网络从第二用户和第二设备接收指示共享邀请的接受的数据。例如,服务器系统和/或第一设备可以接收该接受。如果第二用户拒绝共享邀请(例如,在框218中接收到拒绝的指示),则可以省略框220-230的执行。
在框220中,向第二用户提供对第一用户的共享图像的访问权限。例如,可以授予第二用户访问第一用户的图像库的共享图像的许可,例如,与第一用户相关联并可由第一用户访问的一个或多个存储的集合或相册。存储的集合可以存储在一个或多个服务器上,和/或一个或多个客户端设备上(包括与第一用户相关联的一个或多个客户端设备)等等。
在一些实施方式中,与共享图像相关联的访问许可(例如,许可状态数据)被自动更新(没有用户输入),以允许第二用户访问共享图像,例如,检索与共享图像相关联的数据用于在第二用户的用户设备上存储和/或显示。例如,在一些实施方式中,为每个共享图像更新访问许可,并且基于与共享图像匹配一个或多个共享标准的确定相关联的置信水平。例如,如果共享图像描绘人员,则置信水平指示所描绘的人员匹配人员共享标准的估计置信度或概率。
在一些实施方式中,如果共享标准匹配的置信水平满足阈值置信水平,则更新访问许可以允许第二用户对特定图像的访问。在一些实施方式中,可以使用多个置信水平阈值来确定不同形式的访问级别更新。在一些示例中,如果共享图像与共享标准的匹配的置信水平满足第一阈值,则在没有用户输入的情况下自动更新访问许可,以允许第二用户访问共享图像。如果匹配的置信水平满足指示在匹配上的置信度低于第一阈值的第二阈值,则第一设备显示共享图像,其可供从第一用户向第一设备的用户输入选择,以更新第一个图像的访问许可,以授予第二用户访问权限。如果第一用户手动指示要共享这些图像,则这允许与另一用户共享具有较低的与共享标准的匹配的置信度的图像。
在一些实施方式中,服务器系统102可以为一个或多个用户存储相应的图像库。例如,图像库可以存储与用户相关联的(例如,使用与用户的账户相关联的设备捕获的,被用户上传到服务器等的)图像,与用户共享的图像以及与库中的图像相关联的许可,例如,该许可指定被授予对图像的访问权限的一个或多个其他用户。在一些实施方式中,用户的图像库可以被组织为多个相册,每个相册包括一个或多个图像。图像可以包括在多个相册中。
在一些实施方式中,当第二用户被授予对第一用户的共享图像的访问权限时,共享图像被自动添加到第二用户的图像库(例如,自动保存特征,例如,如参考图3所描述的)。在一些实施方式中,当第二用户被授予对第一用户的共享图像的访问权限时,共享图像被自动添加到第二用户的图像库中包括第一用户共享的图像的单独的相册中。在一些实施方式中,用户的图像库的一部分可以被同步到例如与用户的用户帐户相关联的一个或多个设备,使得存储在一个或多个设备上的图像也被存储在图像库的该部分中,并且在一些实施方式中,反之亦然。
在一些示例中,图像库的图像数据存储在第二设备的存储中,使得共享图像的图像数据存储在第二设备中。在一些实施方式中,图像库的图像数据存储在服务器上。在一些实施方式中,图像库的图像数据存储在服务器和一个或多个客户端设备上,和/或部分地存储在服务器上且部分地存储在一个或多个客户端设备上。图像数据包括库的图像的像素的像素值(例如,颜色值或诸如亮度值的其他值等)。例如,用户设备可以存储指向存储在服务器上的库的相关图像的数据指针。因此,用户设备可以通过遵循这样的数据指针来访问服务器上的用户的图像库。
在一些实施方式中,第一用户的第一设备可以使用数据指针访问存储在服务器上的图像数据。如果第二用户被授予对第一用户的图像库的共享图像的访问权限,则更新第一用户的共享图像的访问许可,以允许第二用户(例如,第二用户使用的设备)访问共享图像。在示例中,一个或多个第二数据指针通过网络从服务器发送到第二用户的第二设备,其中第二数据指针指向共享图像并允许第二用户设备访问存储在服务器上的用于共享图像的图像数据。在一些实施方式中,第一用户的第一数据指针和第二用户的第二数据指针可以是统一资源定位符(Uniform Resource Locators,URL)。在一些实施方式中,第一用户的数据指针和第二数据指针可以是相同的URL。在一些实施方式中,第一用户的数据指针和第二数据指针可以是指向相同图像的不同URL。这允许(例如,在服务器或其他设备上)存储单个副本的图像数据以节省图像数据的存储需求,其中不同的用户设备可以检索单个副本的图像数据以存储或查看图像数据。
在框222中,由第一设备获得新图像。这可以发生在上面针对框208-220描述的共享设置之后的时间。例如,第一设备可以从第一设备的相机组件捕获新图像、可以通过网络从设备接收新图像、可以在编辑应用中生成新图像等。
在框224中,以编程方式分析新图像以确定是否存在与共享标准的任何匹配。例如,可以检查新图像的元数据并将其与适当的共享标准进行比较。在一些示例中,可以将指示图像捕获日期、图像创建、图像修改等的时间戳与上述时间标准进行比较,以确定新图像是否有资格作为共享图像。可以分析新图像的位置元数据以确定新图像是否有资格作为共享图像。可以针对满足图像特征标准的图像特征分析图像内容。
在框226中,检查在框224中是否为新图像确定了一个或多个匹配。如果不是,则该方法继续到框228,其中不向第二用户提供对新图像的访问权限(例如,如为方法200所确定的;可以以其他方式授予第二用户对新图像的访问权限,诸如通过来自第一用户的特定输入)。如果为新图像确定了与共享标准的一个或多个匹配,则该方法继续到框230,其中向第二用户提供对新图像的访问权限,类似于框220中提供的访问权限。如果满足共享标准,则通过第一用户或第一设备获得的多个新图像可以被类似地处理。
在一些实施方式中,类似于本文描述的图像,可以根据本文描述的方法和实施方式来共享除图像之外的内容项(例如,内容数据)。例如,内容项可以包括音频数据或音频数据段(例如,语音、音乐等)而没有伴随的或相应的图像。在一些实施方式中,如果已经获得用户同意,则可以使用语音识别技术来检测或识别其语音被捕获在语音音频数据中的说话者用户,并基于检测到的用户应用共享标准。在另一个示例中,可以检测声音效果的类型(例如,水流动、铃声、鸟类或其他动物的声音等),并且可以基于检测到的类型应用共享标准,以确定声音数据是否有资格共享。在另一示例中,内容项可以包括文档,诸如文本文档或包括文本和图像的文档,其中可以针对关键字或关键短语或者基于机器学习技术,以编程方式分析文档的题目或主题,来确定文档是否匹配文本的共享标准,并且因此确定文档是否有资格作为共享内容项。
在一些实施方式中,第一用户可以与单个其他用户(接收用户)建立并实现方法200中描述的图像的共享,并且在实现该共享时,第一用户不能另外使用方法200向其他用户提供对共享图像的访问权限。在一些示例中,第一用户可以取消与第二用户的图像共享并且与不同的用户建立图像共享。在一些实施方式中,可以使用方法200,同时向多个接收用户提供对第一用户的共享图像的访问权限。例如,可以如上所述应用共享标准,并且多个用户各自被提供对共享图像的访问权限。
在一些实施方式中,不同且独立的共享标准集可以与多个接收用户中的每一个相关联。对于与特定接收用户的图像共享,将与该特定接收用户相关联的一组共享标准应用于发送用户的图像,并且对于多个指定接收用户中的每一个重复这一过程。例如,对于每个这样的接收用户,共享标准可以不同(例如,对于每个接收用户包括至少一个不同的共享标准的选项,如果由第一用户选择)。例如,第一用户可以指定一组共享标准以与祖父母接收用户仅共享描绘婴儿的图像,一组不同的共享标准以与朋友接收用户仅共享在2013年或之后捕获的描绘该朋友的面部的图像,和第三组共享标准以与配偶接收用户共享在家庭位置捕获的所有图像。
在一些实施方式中,可以例如基于一个或多个特定条件是否适用,临时地能够进行和/或不能进行如针对图2所描述的向其他设备(例如,用户设备)发送共享请求和/或共享图像。例如,可以使第一设备能够在特定时间向其他用户设备(诸如第二设备)发送用于共享的邀请和/或共享的图像,并且可以使第一设备在其他时间不能够发送这样的邀请和/或共享图像。在一些实施方式中,可以在存储的第一用户偏好中指定特定条件。在一些实施方式中,特定条件可以包括检测到已经发生的一个或多个事件。例如,第一设备可以不允许共享,然后第一设备被携带或移动到特定地理位置(例如,如存储的偏好中所指定的),诸如指定的地理区域,这允许向其他用户设备发送邀请和共享图像。在一些示例中,在第一设备位于该位置时继续允许共享,或者可以具有在偏好或设置中指定的从第一设备首次进入该位置的时间开始的持续时间,使得在持续时间到期后不能进行共享。
在一些实施方式中,控件(例如,按钮或网络链接)显示在第一设备上,并且如果通过第一用户输入选择控件,则如图2所示第一设备能够将图像共享给其他设备(例如,特定的持续时间和/或在特定位置时)。例如,可以在网络链接中指定特定的统一资源链接(Uniform Resource Link,URL),第一设备可以通过网络连接到该链接以发送共享邀请和共享图像。在一些实施方式中,可以使第二设备临时可用于将邀请和/或共享图像发送到其他设备,例如,类似于如上所述的第一设备。
在一些实施方式中,如果没有可用的到中间共享设备(例如,服务器)的连接(例如,在特定位置或在特定环境条件下没有可用的无线服务),则可以在第一设备和第二设备之间建立替代的通信信道用于共享图像。例如,可以建立对等网络连接(例如,
Figure BDA0002169124680000301
Wi-Fi直连等)并用于在第一设备和第二设备之间传输共享邀请和图像。在一些实施方式中,不同的网络链接可以是可用的并且可以被使用。
在一些实施方式中,对于使用图2的方法的共享图像,第一用户和/或第一设备可以将一个或多个用户和/或用户设备(例如,图2的示例中的第二用户或第二用户设备)指定为临时的共享用户或者伙伴(和/或临时的共享用户设备)。例如,如果由第一设备确定一个或多个特定条件被满足,例如,如果当前时间在特定时间段内,则可以将共享邀请和共享图像发送给临时的共享伙伴(例如,第二设备和/或第二用户服务器帐户)。可以在存储的用户偏好或第一设备设置中指定特定条件。例如,特定条件可以包括指定的时间段、第一设备和/或第二设备的指定的地理位置、用户对第一设备和/或第二设备上的特定应用的当前使用等。
在一些实施方式中,可以允许共享用户最初访问第一用户的共享图像,如图2中所描述的,然后在特定时间段到期和/或其他情况发生之后,阻止共享用户访问第一用户的共享图像。在一些实施方式中,当用户共同位于特定地理位置时,例如,当用户设备在彼此的特定阈值距离内时,可以允许用户设备彼此共享图像(例如,彼此给予对另一用户的共享图像的访问权限)。在一些实施方式中,例如,在所有用户设备上运行的消息应用中,当这些设备的用户正参与共享的对话组或聊天时,可以允许用户设备彼此共享图像。
在一些实施方式中,可以将一个或多个用户和/或用户设备指定为正在进行共享的用户或伙伴,例如,对于其没有对第一用户的共享邀请和共享图像施加临时共享访问权限的条件。
图3是示出根据一些实施方式的提供特征以为接收用户共享图像的方法300的示例的流程图。在一些实施方式中,方法300可以例如在如图1所示的服务器系统102上实施。在一些实施方式中,方法300中的一些或全部可以在如图1所示的一个或多个客户端设备120、122、124、或者126、一个或多个服务器设备、和/或在服务器设备和客户端设备两者上实施。在一些实施方式中,实施系统包括一个或多个数字处理器或处理电路(“处理器”),以及一个或多个存储设备(例如,数据库106或其他存储)。在一些实施方式中,一个或多个服务器和/或客户端的不同组件可以执行方法300的不同框或其他部分。在一些实施方式中,第二设备被描述为执行方法300的框。一些实施方式可以具有由可以将结果或数据发送到第二设备的一个或多个其他设备(例如,其他客户端设备或服务器设备)执行的方法300的一个或多个框。针对方法300描述的各种示例和实施方式可以以各种排列或组合来组合。
在一些实施方式中,方法300或方法的部分可以由系统自动启动。在一些实施方式中,实施系统是第二设备。在一些实施方式中,可以周期性地执行或者基于一个或多个特定事件或条件来执行该方法(或其部分),特定事件或条件例如由用户启动应用程序、接收已经新上传或可由系统访问的一个或多个图像、从方法300的最后一次执行起已经过了预定时间段、和/或可以在由该方法读取的设置中指定的一个或多个其他条件发生。在一些实施方式中,这样的条件可以由用户在存储的用户的自定义偏好中指定。
在一些实施方式中,第二设备可以是相机、手机、智能手机、平板电脑、可穿戴设备或可以接收用户向客户端设备的内容输入(例如,图像捕获)并且可以执行方法300的其他客户端设备。在一些实施方式中,客户端设备或服务器设备可以接收从一个或多个用户上传的或通过网络连接接收的一个或多个图像,并且可以针对一个或多个图像执行方法300。在一些实施方式中,客户端设备可以通过网络将图像发送到服务器,并且服务器可以使用方法300来处理内容。一些实施方式可以基于用户输入来启动方法300。例如,用户(例如,操作员或终端用户)可以从所显示的例如应用程序用户界面或其他用户界面的用户界面选择方法300的启动。
在框302中,检查是否已获得用户同意(例如,用户许可)以在方法300的实施中使用用户数据。用户数据可包括用户发送或接收的消息、用户偏好、用户生物计量信息、用户特性(标识、姓名、年龄、性别、职业等)、关于用户的社交网络和联系人的信息、社交和其他类型的行动和活动、内容、评级以及由用户创建或提交的意见、用户的当前位置、历史用户数据、用户生成、接收和/或访问的图像、用户查看或共享的视频等。一些实施方式中,本文描述的方法的一个或多个框可以使用这样的用户数据。
如果已经从在方法300中可以使用其用户数据的相关用户获得用户同意,则在框304中,确定本文方法的框可以在可能使用为那些框描述的用户数据的情况下实施,并且该方法继续到框308。如果尚未获得用户同意,则在框306中确定将在不使用用户数据的情况下实施框,并且该方法继续到框308。在一些实施方式中,如果未获得用户同意,在不使用用户数据和/或通用或可公开访问的和可公开使用的数据的情况下实施框。
在框308中,在第二设备处接收对共享图像的邀请,并且由第二设备输出邀请。在一些实施方式中,如图2的框216中所描述的,邀请可以来自第一设备(和第一用户),以获得对第一用户的共享图像的访问权限。在一些实施方式中,邀请可以在用户界面中显示、作为来自扬声器的音频输出等。
如果第二用户和/或第二设备先前未接受与第一用户和/或第一设备的共享连接,例如,如图2所述,如果第二用户和/或第二设备先前未被授予对共享图像的访问权限,则可以接收和输出对共享图像的邀请。如果第二用户和/或第二设备先前已接受到第一用户的共享图像的共享连接,并且第二用户和/或第二设备先前已接收授予对第一用户的共享图像的访问权限的指示,那么省略邀请的显示,并且可以基于如本文,例如,在下面的框314-317中所述的自动保存标准将共享图像自动保存到第二用户图像库。在一些实施方式中,如果存在这样的现有共享连接,那么第二设备不接收邀请。
在框310中,对邀请的接受作为第二用户的输入被第二设备接收,并且该接受被发送给第一用户,例如,发送该接受,以使得该接受通过网络被第一设备接收。在一些示例中,该接受可以包括提供给由第二设备显示的用户界面的用户输入,例如,选择显示的接受按钮等。
在框312中,为第二用户获得对第一用户的共享图像的访问权限。例如,第二用户(例如,第二设备和/或第二用户的账户)可以接收对第一用户的共享图像的访问许可已被授予第二用户的指示。在一些实施方式中,可以向第二用户和/或第二设备提供访问与第一用户相关联的共享图像所需的访问许可数据(如关于图2的方法200所确定的)。许可(例如,许可数据)可以存储在一个或多个服务器设备、客户端设备上等等。因此,第二设备能够接收共享图像的图像数据和/或在其显示器上显示第一用户的共享图像。如关于图2的方法200所描述的,可以响应于第一用户共享这些图像来提供访问权限。
在框314中,自动保存选项可以由第二设备显示,其中自动保存选项提供设置以允许第二用户指定自动保存标准,该标准定义第一用户的共享图像中的哪些要自动保存在与第二个用户相关联的存储中。第二用户的存储可以是在一个或多个服务器上提供的、在一个或多个客户端设备(例如,第二设备)上提供的、部分地在服务器上提供并且部分地在一个或多个客户端设备上提供的存储等等。例如,如果第二用户的存储包括一个或多个客户端设备,则存储在服务器上的共享图像可以通过网络下载到那些客户端设备。第二用户的存储可以包括与第二用户相关联的图像库。
响应于第二用户提供对在框308中接收的共享邀请的接受,可以显示自动保存选项。在一些实施方式中,可以由第二设备基于用户输入在任何时间显示自动保存选项,该用户输入例如添加或改变自动保存标准作为用户偏好或设备设置。
可以以各种方式指定自动保存标准,以指示哪些共享图像将被自动保存到第二用户的存储。在一些实施方式中,自动保存标准中的一个或多个可以与本文描述的共享标准类似,并且可以与本文描述的共享标准类似地被指定,本文描述的共享标准例如对于图2的框212描述的共享标准。
在一些实施方式中,第二用户可以指定用于自动保存的图像特征标准,其中指定的视觉图像内容(例如,图像特征)将匹配特定图像中的视觉内容以使得该特定图像有资格自动保存到第二个用户的图像库。在一些实施方式中,第二用户可以通过识别人员、特征类型等来指定图像特征标准。在一些实施方式中,来自第二用户的图像库的图像可以在(例如,在第二设备上的)用户界面中显示,并且第二用户可以选择显示的图像以将该图像中的一个或多个图像特征识别为自动保存标准。例如,这允许第二用户通过第二用户的图像库选择第二用户已知的人员作为自动保存标准。
在一些实施方式中,来自第二用户的库的图像可以描绘不同的、独特的人员的面部。在该用户界面中可以省略显示具有与库中的其他图像重复或类似的视觉内容的重复图像,使得用户界面显示描绘独特的人员的图像,该独特的人员在用户界面中显示的所有图像中不重复。当第二用户选择那些图像中的特定一个时,该选择指定自动保存标准(例如,人员保存标准),使得(例如,如果已经获得用户同意,则如基于面部识别技术确定的)描绘该人员的共享图像有资格自动保存到第二个用户的库。可以确定指示所选图像中描绘的特定人员的人员标识符,并且该人员标识符可以被指定为人员保存标准,类似于对于图2所描述的。在一些实施方式中,人员保存标准可以是面部保存标准,其例如基于如本文所述的面部模型或面部模型聚类,来指定特定的面部标识。
在一些实施方式中,用于指定自动保存标准的用户界面可以显示第二用户先前已被授予访问权限的第一用户的共享图像,作为显示来自第二用户的库的图像的补充或替代,并且用户可以选择一个或多个这样的共享图像作为自动保存标准。
在一些实施方式中,诸如面部的面部模型的对象的模型可由第二用户设备访问,并且可被指定为自动保存标准。在一些实施方式中,可以在框314中使用与上面对于图2的框212描述的那些类似的面部模型。这允许系统检测不同图像中的各种面部,并且将这些面部与保存标准面部模型进行匹配,以确定所描绘的面部属于与面部模型相关联的特定人员,并因此将被保存在第二用户图像库中。在一些实施方式中,这样的面部模型可以本地存储到第二用户设备,并且可以基于检测到的存储在第二用户图像库中的图像中描绘的面部来生成。在一些实施方式中,面部模型可以另外地或替代地存储在网络存储和/或第二设备可通过网络访问的服务器上,并且这样的面部模型也可以用作图像标准。在一些实施方式中,面部模型仅在用户设备的本地存储中维护,并且不通过网络传输到服务器。在一些实施方式中,提供面部模型聚类,其中每个聚类表示特定人员并且包括多个面部模型,该面部模型已经基于图像中描绘的面部被确定为表示特定人员,和/或已经通过用户输入被确认为表示特定人员。
在一些实施方式中,一个或多个图像可以例如由第二设备显示为具有可以被指示为自动保存标准的特性的“保存标准图像”。例如,来自第二用户的用户输入可以选择至少一个保存标准图像以指定自动保存标准。保存标准图像可以以其他方式选择,例如,由系统基于存储的用户偏好和/或基于与其他保存标准图像类似的特性(例如,具有在与一个或多个其他保存标准图像相关联的时间和位置的特定时间段或地理距离内的捕获时间或捕获位置、具有与其他保存标准图像相同的图像内容特征的类型等)等来选择。在一些实施方式中,如果通过第一用户输入选择保存标准图像,则如上所述这样的保存标准图像可以显示用作自动保存标准的图像内容。例如,这种保存标准图像可以是由系统从第二用户图像库提供的图像。
这种自动保存标准可以包括图像内容特征标准。例如,保存标准图像可以描绘来自第二用户的库图像中描绘的不同人员(或面部/对象模型)的样本面部。在一些示例中,可以显示特定人员的保存标准图像,如果其被用户选择,则其选择相应的人员标识符作为自动保存标准。在一些实施方式中,人员标识符(例如,从面部模型或面部模型聚类确定)存储在第二设备上并且基于第二用户的图像库而创建。
在一些实施方式中,第二设备可以显示一个或多个保存标准图像,其与来自第一用户和/或第一用户设备的一个或多个对应的特定标识(例如,人员标识符)相对应,该一个或多个对应的特定标识例如是基于第一用户的图像库创建的(例如,基于从第一用户的图像确定的面部模型)或另外由第一设备识别的。这种标识可以由第二设备例如从第一用户和/或第一设备接收。例如,第二设备可能尚未存储与共享图像中描绘的人员相对应的任何人员标识符,并且来自第一用户的对应的人员标识符可用于表示用于保存标准图像的人员。这可以允许第二用户选择已由第一用户和/或第一设备识别的内容特征作为自动保存标准。
在一些实施方式中,保存标准图像可以描绘先前由第二用户选择或查看和/或匹配存储的由第二用户设置的偏好或设置的内容类型。在一些实施方式中,这样的保存标准图像可以从列表中获得,该列表存储多个用户从多个用户访问的网络站点查看或下载最多的图像。
类似于如上所述,可以从显示器省略显示重复的保存标准图像,例如描绘与其他保存标准图像重复的内容的图像。在一些实施方式中,对于描绘人员的保存标准图像,可以选择保存标准图像中的每个保存标准图像用于系统显示以描绘不同的、独特的人员并且与不同的人员标识符相关联。在另一个示例中,保存标准图像中的每个保存标准图像可以从不同的图像聚类中选择,其中每个图像聚类与不同的独特的人员相关联,并且每个图像聚类包括描绘相关的独特人员的一个或多个图像。在一些实施方式中,聚类可以与如本文所述的面部模型聚类相对应。
类似地,可以显示保存标准图像,其描绘除面部之外的图像特征,例如,日落、风景、建筑物、动物等,用户可以选择该保存标准图像来基于描绘的图像特征中的一个或多个图像特征来指示保存标准。保存标准图像可以是来自第二用户的图像库的图像的裁剪部分,和/或可以是这种图像的修改版本,类似于上述对于图2的共享标准图像描述的那样。
在一些实施方式中,自动保存标准是从保存标准图像中的特定图像特征确定的,其中那些图像特征具有预定或指定的特性,并且自动保存标准不从保存标准图像中描绘的不具有这样的特性的其他图像特征确定。在一些实施方式中,可以通过用户输入、用户偏好、设备设置等来指定或指示用于自动保存标准的指定特性。诸如面部、动物类型、景观特征等的特定类型的图像特征可以指定保存标准。在一些实施方式中,具有诸如阈值尺寸或更大尺寸的特性、覆盖和/或具有位于离图像中心(或图像区域或帧内的其他特定位置)特定阈值距离内(或图像中心)的像素、指定的颜色、亮度或其他特性的图像特征可以用作自动保存标准,而不具有这种特性的其他特征不用作自动保存标准,例如,类似于上面对于共享标准所描述的。
在一些实施方式中,已经被共享到第二用户设备并且存储在第二用户图像库中的图像可以被提供作为保存标准图像,以允许其特性被指定为自动保存标准。在一些实施方式中,可以从接收的图像中描绘的面部、和作为自动保存标准呈现的面部生成面部模型,其将允许描绘与面部模型匹配的面部的进一步接收的共享图像被自动保存在第二用户图像库中。
第二用户可以指定其他自动保存标准以使共享图像有资格用于保存,自动保存标准例如是时间标准、位置标准和类似于如本文所述的共享标准的其他标准。
在框315中,可以从第二用户接收所显示的自动保存选项的选择,包括由第二用户设备接收的指定自动保存标准的用户输入。自动保存标准指示共享图像中的哪些将存储在与第二用户相关联的存储中。在一些实施方式中,可以在其他类型的界面或用户输入中从第二用户接收自动保存标准。
在框316中,基于自动保存标准,从第一用户的共享图像确定所选择的共享图像。这些是已被选择保存在第二用户图像库中的第一用户的共享图像,例如,在不是所有共享图像都被选择的情况下的共享图像的子集。在一些实施方式中,可以基于自动保存标准来过滤第一用户的共享图像。在一些实施方式中,可以处理共享图像和/或与共享图像相关联的信息以确定哪些共享图像与第二用户的自动保存标准相匹配。
在一些实施方式中,框316的过滤和/或选择由第二用户设备执行。在一些实施方式中,框316的过滤和/或选择可以由与第二用户设备通信的服务器设备部分地或完全地执行。自动保存标准可以存储在第二设备的本地存储中,和/或所选择的共享图像可以由第二设备确定。在一些实施方式中,一个或多个自动保存标准可以存储在远离第二设备(例如,可以通过网络连接到第二设备)的服务器(或其他设备)上,和/或服务器(或其他设备)可以确定所选的共享图像。在一些实施方式中,第二设备和一个或多个远程设备都存储自动保存标准和/或确定所选择的共享图像。
在一些实施方式中,可以以编程方式分析共享图像,以确定哪些共享图像描绘了与第二用户的自动保存标准的人员标识符相匹配的人员(如果已经获得用户同意)。在一些实施方式中,编程分析可以包括如本文所述的检测图像内容特征。在一些实施方式中,编程分析可以包括获得共享图像的元数据,诸如指示共享图像的捕获时间的时间戳和/或指示共享图像的捕获位置的位置信息。
在一些实施方式中,接收设备(例如,第二设备)可以确定共享图像中的一个或多个内容特征的标识。在一些实施方式中,标识可以是基于与类似于如上所述的从第二用户的图像库中的图像导出的面部模型(例如,局部面部模型和/或服务器存储的面部模型)的匹配而确定的人员标识符。在一些实施方式中,服务器可以用于确定共享图像的内容标识(例如,人员标识符)。在一些实施方式中,第二设备(和/或第二用户服务器帐户)接收共享图像的关联信息,例如,指示在关联的共享图像中描绘的一个或多个图像内容特征的一个或多个标识的标识信息。在一些实施方式中,标识可以包括由第二设备接收的人员标识符。在一些实施方式中,标识(例如,人员标识符)被确定用于由第一用户和/或第一设备共享的共享图像(例如,如对于图2所描述的,以编程方式分析图像以识别图像内容特征,从而确定人员标识符,和/或人员标识符由第一用户手动输入,等等)。在一些实施方式中,可以将这种(与共享图像相关联的)接收的人员标识符与第二用户的自动保存标准相关联的人员标识符进行比较,以确定是否存在匹配。
在一些实施方式中,可以对于共享图像与自动保存标准之间的(例如,每个共享图像与每个自动保存标准之间的)匹配确定置信水平。如果置信水平满足第一置信水平阈值,则共享图像可以被自动地视为选择的共享图像。在一些实施方式中,如果匹配的置信水平满足指示比第一置信水平阈值更小的置信度的第二置信水平阈值,则可以在第二设备的用户界面中显示共享图像,其允许来自第二用户的用户输入选择是否将共享图像保存在第二用户的图像库中。
在一些实施方式中,第二用户还可以或替代地手动浏览如在用户界面中所显示的第一用户的共享图像,或者第一用户的共享图像的子集,以选择这些图像中的哪些保存到第二用户的图像库。在一些实施方式中,这种显示的共享图像可以是如上所述满足较低置信度阈值的图像,和/或具有其他预定特性(例如,特定图像内容类型、捕获时间、捕获位置等)的共享图像。在一些实施方式中,可以在第二用户设备上显示共享图像的预览,并且可以通过第二用户设备从第二用户接收的用户输入来选择共享图像中的特定图像。在一些实施方式中,在共享图像被第一用户共享之后,基于由第一用户设备接收的来自第一用户的用户输入,共享图像的预览可以如上所述省略已经“不被共享”(例如,共享已被撤销)的图像的显示。
在框317中,在框316中确定的所选的共享图像(例如,满足第二用户的自动保存标准的共享图像)存储在第二用户的图像库中。在一些实施方式中,所选共享图像的图像数据存储在第二设备或第二用户可访问的存储中,例如本地存储和/或网络存储。在一些实施方式中,数据指针存储在第二用户的图像库中,数据指针指向存储在不同设备上的所选共享图像的图像数据。在一些实施方式中,数据指针可以存储在第二设备处,这允许第二设备检索和显示所选的共享图像的图像数据。
在一些实施方式中,所选择的共享图像可以由执行存储的系统自动改变。在一些实施方式中,所选择的共享图像可以降级到特定分辨率和/或质量并以改变的形式存储。例如,在一些实施方式中,系统可以检查存储的由用户在方法300之前和/或在框314和/或框316之前指定的用户偏好,并且可以基于用户指定的偏好改变共享图像的分辨率(例如,创建具有该分辨率的共享图像副本)。在一些实施方式中,第二用户的图像库可以与指示图像的存储设置的设置(例如,将图像降采样为由相关设置指定的分辨率的设置)相关联。
在框318中,在一些实施方式中,第二设备显示提示,该提示请求第二用户是否想要与第一用户共享第二用户的图像。在一些实施方式中,提示可以询问第二用户是否想要向第一用户(例如,第一设备)提供对第二用户的图像中的任何一个图像的访问权限。在一些实施方式中,提供仅向(发送图3中接收的邀请和共享图像的)第一用户共享第二用户的图像的提示,例如,“回应”(“reciprocate”)类型的选项,并且不提供与其他用户共享图像的提示。如果已经获得用户同意,则其他实施方式可以提供与一个或多个其他用户共享图像的提示,该其他用户例如,如本文所述确定的社交连接到第二用户和/或第一用户的用户。
在框320中,确定第二用户是否已指示与第一用户共享第二用户的一个或多个图像。在一些实施方式中,这可以基于第二用户对于框318的提示的选择来确定,或者通过来自第二用户的用以共享图像的其他用户输入来确定。如果未指示共享,则该方法继续到框326,如下所述。如果第二用户已指示共享图像,则该方法继续到框322,其中从第二用户接收选择以指定用于共享的设置。在一些实施方式中,类似于由第一用户指定并在图2的框212中获得的共享设置,第二用户可以指定各种共享标准、延迟时段和/或其他共享设置。该方法继续到框324。
在框324中,基于例如在框322中由第二用户指定的共享标准来确定第二用户的共享图像。在一些实施方式中,由第二设备和/或与第二设备通信的其他设备基于共享标准以编程方式分析图像,以确定哪些图像有资格作为共享图像。分析的图像可以存储在图像库中,该图像库例如,包括与第二用户相关联的一个或多个存储集合或相册的图像库,该图像库例如存储在一个或多个服务器上、存储在可由第二用户访问的第二设备或其他客户端设备的本地存储中。可以将被确定为有资格作为共享图像的图像指定为要与第一用户(发送用户)共享的图像,例如,与每个共享图像相关联并存储在设备存储中的相应的指定。
在框326中,向第一用户提供对第二用户的共享图像的访问权限。在一些实施方式中,可以向第一用户授予访问与第二用户相关联并且可由第二用户访问的图像库(例如,一个或多个存储的图像集合或相册)的共享图像的许可。在一些实施方式中,可以更新与第二用户的每个共享图像相关联的访问许可以允许第一用户和/或第一设备访问该共享图像。在一些实施方式中,这可以类似于如上面对于图2的框220所描述的向第二用户授予对第一用户的共享图像的访问权限。存储的集合可以存储在一个或多个服务器上、与第二用户相关联的一个或多个客户端设备上等。方法继续到框328。
另外,由第二用户(例如,第二设备)获得的新图像可以针对与第二用户的共享标准的匹配而被分析,并且如果适当的话与第一用户共享,类似于如图2的框222-230所述的由第一用户共享获得的新图像与第二用户共享。
在一些实施方式中,可以在第二用户已经接收到对第一用户的共享图像的访问权限之后的任何时间,在第二设备上执行框328。例如,响应于第二用户向第二设备提供用户输入以显示视图,可以提供共享图像视图。共享图像视图显示第一用户的共享图像,而不显示第二用户的图像。在一些实施方式中,共享图像视图可以在用户界面中,该用户界面在视觉上与用于显示第二用户的图像的视觉界面区分开(例如,以不同的窗口、颜色、形状、视觉纹理、不同的标题显示等等)。在一些实施方式中,共享图像视图可以是与第二用户图像视图分开的视图,第二用户可以访问第二用户图像视图以显示第二用户的图像,而不显示第一用户的共享图像。在一些实施方式中,可以在第二设备的显示屏上切换共享图像视图和第二用户图像视图的显示。
在一些示例中,可以通过图像的捕获时间/日期来按时间顺序呈现第一用户的共享图像,和/或可以通过与第二用户共享图像的时间/日期,例如,第二用户获得对图像的访问权限的时间/日期,来排序第一用户的共享图像。
在一些实施方式中,存在相互的共享,其中除了具有对第一用户的共享图像的访问权限之外,第二用户还与第一用户共享第二用户的图像。在存在相互的共享的一些实施方式中,第二用户的共享图像视图不显示第一用户通过来自第二用户的共享而接收对其的访问权限的图像。
类似地,如果第二用户已经向第一用户提供了对第二用户的共享图像的访问,则可以在第一设备上提供类似的共享图像视图以供第一用户查看第二用户的共享图像。
在一些实施方式中,可以在接收设备(例如,第二设备)上周期性地提供通知,以指示一个或多个图像已被新共享并自动存储在第二用户的图像库中,并且可供查看(例如,通知可以提供链接或按钮以显示新共享的图像)。在一些实施方式中,可以周期性地或响应于第二设备的设备状态(例如,通电、打开屏幕、运行或访问特定应用等)来显示通知。在一些实施方式中,可以在存储的用户偏好中指定通知条件。在一些实施方式中,在用户选择查看共享图像之后,不再为那些图像提供通知。
在一些实施方式中,例如,基于一个或多个特定条件是否适用,如对于图3所描述的由第二设备接收共享请求和/或共享图像的能力可以临时可用和/或不可用。在一些实施方式中,可以使第二设备在特定时间可用于接收共享邀请和/或共享图像,并且可以使第二设备在其他时间不可用于这样的邀请和/或共享图像。在一些实施方式中,第一设备可以查询第二设备以确定其是否可用于从第一设备接收共享邀请和共享图像。在一些实施方式中,可以在关联的存储的用户偏好中指定特定条件。在一些实施方式中,特定条件可以包括检测到已经发生的一个或多个事件。在一些实施方式中,第二设备可以不允许共享,然后被移动到特定地理位置(例如,如存储的偏好中所指定的),诸如指定的地理区域,这允许接收如图3中的共享图像。在一些实施方式中,在第二设备位于该位置时允许连续地共享,或者共享可以具有在偏好或设置中指定的从第二设备首次进入该位置的时间开始的持续时间,使得在持续时间到期之后不允许共享。在一些实施方式中,控件或网络链接显示在第二设备上,并且如果通过第二用户输入选择控件,则使第二设备可用于如图3中的图像共享(例如,特定的持续时间和/或在特定位置处时)。在一些实施方式中,可以在网络链接中指定特定URL,第二设备可以连接到该网络链接以接收共享邀请和共享图像(例如,自上次第二设备接收共享图像以来对于第二设备的新的共享图像)。在一些实施方式中,可以类似地或相应地使得第一设备临时可用于从第二设备接收邀请和/或共享图像。
在一些实施方式中,如果没有可用的到共享服务器的连接(例如,在特定位置或在特定环境条件下没有可用的无线服务),则可以在第一设备和第二设备之间建立用于共享图像的替代的通信信道。在一些实施方式中,对等网络连接(例如,
Figure BDA0002169124680000421
Wi-Fi直连等)可以被建立并用于在第一设备和第二设备之间传输共享邀请和图像。在一些实施方式中,不同的网络链接是可用的并且可以被使用。
在一些实施方式中,对于图3描述的共享图像,第二用户和/或第二设备可以将一个或多个用户和/或用户设备(例如,图3的示例中的第一用户或第一用户设备)指定为临时的共享用户或者伙伴(和/或临时的共享用户设备)。在一些实施方式中,如果由第二设备确定一个或多个特定条件被满足,例如,如果图像在特定时间段内被接收,则来自临时的共享伙伴的共享图像可以被第二设备(和/或第二用户服务器帐户)接收,并且存储在第二用户图像库中。可以在存储的用户偏好或第二设备设置中指定特定条件。在一些实施方式中,可以将一个或多个用户和/或用户设备指定为正在进行共享的用户或伙伴,例如,对于其没有施加那些用户和设备对第二用户图像库的临时访问权限的条件。
图4是根据一些实施方式的示例用户界面400的示意图。在一些实施方式中,用户界面400(以及本文描述的其他用户界面)可以显示在诸如本文描述的第一设备或第二设备的用户设备的显示器(例如,显示屏)上。如图4所示,用户界面400允许发送用户(例如,第一用户)选择共享设置,包括指定一个或多个共享标准。用户界面元素402指示发送用户正与被标识为“John Doe”的第二用户(接收用户)共享。在一些实施方式中,与第二用户的共享可以利用与John Doe相关联的一个或多个标识符,诸如电子邮件地址、社交媒体用户名、图像共享应用的标识符、电话号码等。
用户界面元素404向发送用户提供选项以向第二用户授予对发送用户的全部或一些图像(例如,照片)的访问权限。在一些实施方式中,如果发送用户选择“所有照片”,则可以与第二用户共享发送用户的图像库的全部内容。在另一示例中,如果发送用户选择“一些照片”,则发送用户可以指定一个或多个共享标准。
在一些实施方式中,一个或多个共享标准可以包括作为人员标准的图像特征标准,该标准例如是基于发送用户的图像库中的图像中描绘的人员。如图4中所示,用户界面400可以包括用户界面元素406,其使得发送用户能够指示选择在图像库中的图像中描绘的一个或多个人员与第二用户共享。响应于发送用户激活用户界面元素406,可以在发送用户的设备上向发送用户呈现为用户指示这种选择的另一用户界面。图5中示出了这种用户界面的示例。
在一些实施方式中,一个或多个共享标准可以包括图像的时间标准。在一些实施方式中,发送用户可以指定任何时间段,例如,特定的一天、开始日和/或结束日等。在一些实施方式中,用户界面400包括使发送用户能够指示时间标准的用户界面元素408。如图4所示,发送用户可以指示开始日期(“2017年5月10日开始”)、特定时间段(“上个月”、“去年”,“永远”)、或指定自定义时间标准(“自定义”),例如,特定的即将到来/未来的一天、一周等;第二天或其他指定的时间段(从当前时间开始度量);其他的用户指定的时间范围等。在一些实施方式中,例如,如果已经获得用户同意,则可以基于用户数据(例如,用户的日历、用户的任务列表等)将一个或多个时间标准选项显示为事件。在一些实施方式中,“春假”的标准选项可以指定时间标准,该时间标准是由用户数据或其他参考数据(标准日历等)指示的该事件的时间段。在一些实施方式中,可以将与发送用户的图像库中的图像相关联的一个或多个时间戳(例如,创建日期、最后修改日期、上传日期等)与时间标准进行比较,以识别将要共享给第二用户的图像。
在一些实施方式中,一个或多个共享标准可以包括图像的位置标准。在一些实施方式中,发送用户可以指定特定位置、地理区域(例如,城市、州)等。在一些实施方式中,用户界面400包括用户界面元素410,其使得发送用户能够指示位置标准。如图4所示,发送用户可以将一个或多个特定位置指示为标签或类别(“家”,“远处”)或指定自定义的位置标准(“自定义”)。在一些实施方式中,当用户提供许可时,可以将与发送用户的图像库中的图像相关联的位置数据与位置标准进行比较,以识别将要与第二用户共享的图像。在一些实施方式中,位置数据可以包括图像的位置元数据,例如,由包括位置特征(例如,GPS)的捕获设备包括的位置元数据。在一些实施方式中,可以例如基于在图像中识别的一个或多个地标来确定位置数据。
在一些实施方式中,人员标准、时间标准和位置标准的任何组合可以用作共享标准。例如,用户界面400可以使发送用户能够指定特定时间段(例如,“上个月”)、位置(例如,“旧金山”)、以及选择人员(例如,“John”、“Tim”、“Jane”等)。响应于发送用户指示该选择,发送用户的图像库中匹配所有共享标准的图像与第二用户共享。在一些实施方式中,共享标准中的一个或多个可以是可选的,例如,用户可以指定人员标准,但是不指定任何时间标准或位置标准。在这些实施方式中,发送用户的图像库中匹配人员标准的图像与用户共享。
虽然图4示出了人员标准、时间标准和位置标准,但是发送用户可以指定用于共享的一个或多个其他标准。在一些实施方式中,发送用户可以指定共享图像的图像质量标准(例如,视觉质量标准)。例如,在一些实施方式中,图像库可以存储用户分配的图像质量评级(用户评级),例如1星、2星、5星等。在这些实施方式中,发送用户可以指定诸如“分享4星及以上的图像”的共享标准。
在一些实施方式中,例如,基于以编程方式分析图像,实施参考图2描述的方法的共享应用可自动检测图像库中图像的视觉特性,以分配质量评级。图像的质量评级可以是基于一个或多个视觉图像特征的视觉质量评级。例如,基于用户对执行这种分析的许可,以编程方式分析图像可以基于确定一个或多个因素/特性,诸如照明、焦点、颜色噪声、位置(相对于图像区域)和/或图像中的面部或其他特征的方位、面部表情、模糊性等。可以基于这些因素将质量评级确定为综合评级。在一些实施方式中,以编程方式分析图像可以包括使用机器学习应用分析图像,该机器学习应用包括推理引擎,该推理引擎基于应用训练模型来提供图像的质量评级(例如,“高”、“中”和“低”)。
在一些实施方式中,发送用户可以指定复本或近似复本,例如,描绘类似主题的图像将被排除在共享之外(例如,可以基于图像像素相似性技术确定相似性)。在这些实施方式中,可以基于以编程方式分析图像库中的图像来识别这样的图像,并且可以从与第二用户共享的图像中排除这些图像。在一些实施方式中,例如,即使当发送用户已经在用户界面400中选择了“所有照片”时,共享标准还可以指定某些类型的图像将被排除在共享之外。在一些实施方式中,发送用户可以指定没有描绘任何人员的图像(例如,描绘文件、收据、动物、树木、食物等的图像)将被排除在共享之外。在这些实施方式中,例如,基于以编程方式分析图像以确定图像不描绘一个或多个人员,来排除这样的图像。在一些实施方式中,一个或多个其他共享标准可以包括发送用户是否已将图像发布到网络服务以供其他用户显示,该其他用户例如具有与发送用户的社交连接的用户(例如,社交网络服务、图像收集服务等)。在一些实施方式中,如果发送用户已将图像发布到这样的服务,则该图像可以有资格作为对于接收用户的共享图像。
图5是根据一些实施方式的示例用户界面500的图解说明。如图5所示,图像502-518例如作为图像网格显示在用户界面500中。图像网格中的每个图像与在发送用户的图像库中的一个或多个图像中描绘的特定人员相对应。在一些实施方式中,当发送用户同意分析图像库中的图像时,可以将面部匹配技术应用于发送用户的图像库中的图像以识别描绘特定面部的图像。基于面部匹配技术、被检测为描绘特定人员的每个图像可以被分组到与特定人员对应的人员聚类(或面部聚类)中。在一些实施方式中,这样的分组可以包括向图像添加识别图像的一个或多个人员聚类的元数据。
如图5的示例中所示,图像502-518每个对应于不同的人员,并且在图像中的两个或更多个图像中没有描绘人员。在一些实施方式中,在用户界面500中显示的每个图像可以显示不同的、独特的人员组,例如,每个显示的图像描绘与其他显示的图像不同的多个人员和/或至少一个人员。发送用户的图像库可以包括图像502-518中所示的每个不同人员的一个或多个图像。例如,通过从图像502-518中选择相应的图像,用户界面500使发送用户能够指示一个或多个人员的选择。在图5所示的示例中,发送用户已经选择了与图像514和516相对应的人员,如图5中所示的复选标记所示。响应于发送用户指示人员的选择,发送用户的图像库中被检测为包括与图像514和516相对应的所选人员的图像可以与第二用户共享。在图5所示的示例中,可以与第二用户共享发送用户的图像库中与图像514和516中的人员相对应的图像。在一些实施方式中,向发送用户提供将与第二用户共享的图像的预览,如图6所示。
图6是根据一些实施方式的示例用户界面600的示意图。如图6所示,当发送用户选择图像514和516中描绘的人员时,提供来自发送用户的图像库的图像的预览。在预览中,示出了与图像516中描绘的人员对应的图像602和604,以及与图像514中描绘的人员对应的图像606、608和610,从而指示来自发送用户的库的哪些图像将被分享。在一些实施方式中,用户界面600使得发送用户能够在与第二用户共享有资格的图像之前(例如,通过选择预览中的图像)指定要从共享中排除的一个或多个有资格的图像。
图7A是根据一些实施方式的示例用户界面700的示意图。在一些实施方式中,用户界面700可以显示在接收用户的设备上,例如,上述第二用户的第二设备上。如图7A所示,用户界面700包括发送用户(“Jane”)已授予第二用户(接收用户)对她的图像库中的图像的访问权限的指示。在图7A中,用户界面元素702描绘了发送用户(“Jane”)的代表性图像,其提供了第二用户的标识的视觉指示。在一些实施方式中,用户界面元素702可以另外地或替代地包括其他信息,诸如用户的姓名、电子邮件地址、社交媒体用户名、电话号码等。用户界面700还包括指示第二用户已被发送用户授予访问权限的消息704。在图7A所示的示例中,向接收用户提供接受或拒绝发送用户授予的访问权限的选项,例如,通过选择用户界面元素706(“接受”)或用户界面元素708(“拒绝”)。例如,在一些实施方式中,接收用户可能限于接收对来自有限数量的发送用户的图像的访问权限,例如,单个发送用户(伙伴)、三个发送用户等。通过提供接受或拒绝的选项,用户界面700使得接收用户能够选择他们想要访问其图像的用户(例如,配偶或伴侣、父母或其他重要人员等),并拒绝来自其他用户的图像的访问权限。在一些实施方式中,可以自动地向接收用户授予对发送用户的图像的访问权限。
图7B是根据一些实施方式的示例用户界面720的图解说明。如图7B中所示,用户界面720包括描绘代表性图像722、724、726和728的图像网格。例如,图像722-728可以与其图像在接收用户的图像库中的人员对应。例如,图像724与其图像在发送用户已授权访问的图像中的人员对应,例如,由发送用户共享的图像602和604描绘与接收者的库中的图像724相同的人员。在该示例中,接收用户可以例如通过选择一个或多个图像722-728来选择一个或多个人员,以指示共享图像的自动保存标准。在图7B所示的示例中,接收者已选择对应于特定人员的图像724。然后,通过选择用户界面元素730(“保存”),接收者可以指示所选择的人员的图像将被保存到接收者的图像库中,所选择的人员例如是图像724中描绘的人员,其是由发送用户共享的图像602和604中描绘的同一人员。
在接收到用户选择时,发送用户共享的描绘该人员的图像被自动添加到接收者的图像库中。此外,例如,在接收用户选择保存用户界面元素730之后的稍后时间,从发送用户共享的该人员的任何另外的图像被自动添加到接收者的图像库,而无需来自接收者的任何进一步的用户输入。对图像库的这种自动添加可以提供减少用户交互(例如接收用户确认将图像保存到图像库)的优势。
尽管图7B示出了接收者选择其图像将被自动保存的一个或多个人员的示例,但是在各种实施方式中,接收者可以指定一个或多个其他的自动保存标准。自动保存标准可以包括位置标准(例如,“自动保存我已被授予访问权限的不是在家拍摄的图像”、“自动保存我已被授予访问权限的在巴黎拍摄的图像”等)、时间标准(例如,“自动保存我已被授予访问权限的在假日拍摄的图像”、“自动保存我已被授予访问权限的在上个月内拍摄的图像”等)。在一些实施方式中,自动保存标准可以使接收者能够指定不自动保存某些图像,例如,已经在接收者的图像库中的图像的复本或近似复本、不满足质量标准的图像等。
图7C是根据一些实施方式的示例用户界面740的图解说明。如图7C所示,用户界面740向接收者提供提示或消息742,以通过与发送用户共享她的照片来回应(“共享你的照片回报Jane!”)。此外,用户界面740包括用户界面元素744,其使得接收者能够指定共享标准以与发送用户共享照片。在一些实施方式中,可以类似于参考图4描述的共享标准来指定共享标准。在一些实施方式中,授予对“一些照片”的访问权限允许接收用户在另外显示的用户界面屏幕上更详细地指定共享标准。在一些实施方式中,接收用户可以发起与发送用户而不是与其他用户的相互自动共享。
图8是可用于实施本文描述的一个或多个特征的示例设备800的框图。在一些实施方式中,设备800可以用于实施客户端设备,例如,图1中所示的客户端设备120-126中的任何一个。替代地,设备800可以实施服务器设备,例如服务器系统102。在一些实施方式中,设备800可用于实施客户端设备、服务器设备或客户端和服务器设备两者。设备800可以是如上所述的任何合适的计算机系统、服务器或其他电子或硬件设备。
本文描述的一个或多个方法可以在独立程序中运行,该独立程序可以在任何类型的计算设备上运行,本文描述的一个或多个方法可以是在网络浏览器上运行的程序、在移动计算设备(例如,手机、智能手机、平板电脑、可穿戴设备(手表、臂章、珠宝、头饰、虚拟现实护目镜或眼镜、增强现实护目镜或眼镜、头戴式显示器等)、笔记本电脑等)上运行的移动应用(“app”)。在一些实施方式中,可以使用客户端/服务器架构,例如,移动计算设备(作为客户端设备)将用户输入数据发送到服务器设备并且从服务器接收用于输出(例如,用于显示)的最终输出数据。在一些实施方式中,可以在移动计算设备上的移动app(和/或其他app)内执行所有计算。在一些实施方式中,可以在移动计算设备和一个或多个服务器设备之间分割计算。
在一些实施方式中,设备800包括处理器802、内存804和输入/输出(I/O)接口806。处理器802可以是运行程序代码和控制设备800的基本操作的一个或多个处理器和/或处理电路。“处理器”包括处理数据、信号或其他信息的任何合适的硬件系统、机构或组件。处理器可以包括系统,该系统具有包括一个或多个核(例如,在单核、双核或多核配置中)的通用中央处理单元(Central Processing Unit,CPU)、多个处理单元(例如,在多处理器配置中)、图形处理单元(Graphics Processing Unit,GPU)、现场可编程门阵列(Field-programmable Gate Array,FPGA)、专用集成电路(Application-specific IntegratedCircuit,ASIC)、复杂可编程逻辑设备(Complex Programmable Logic Device,CPLD)、实现功能的专用电路、实施基于神经网络模型的处理的特殊目的处理器、神经电路、针对矩阵计算(例如,矩阵乘法)优化的处理器、或其他系统。在一些实施方式中,处理器802可以包括实施神经网络处理的一个或多个协处理器。在一些实施方式中,处理器802可以是处理数据以产生概率输出的处理器,例如,由处理器802产生的输出可能是不精确的或者可能在预期输出的范围内是准确的。处理不必限于特定的地理位置,或具有时间限制。例如,处理器可以“实时”、“离线”、以“批处理模式”等执行其功能。处理中的部分可以在不同的时间并且在不同的位置,通过不同的(或相同的)处理系统执行。计算机可以是与内存通信的任何处理器。
内存804通常被设置在设备800中以供处理器802访问,并且可以是任何合适的处理器可读存储介质,诸如适用于存储用于由处理器运行的指令、并且与处理器802分开设置和/或与处理器802集成的随机存取内存(Random Access Memory,RAM)、只读内存(Read-only Memory,ROM)、电可擦除只读内存(Electrical Erasable Read-only Memory,EEPROM)、闪存等。内存804可以存储由处理器802在服务器设备800上运行的软件,包括操作系统808、机器学习应用830、其他应用812和应用数据814。其他应用812可以包括诸如数据显示引擎、网络托管引擎(web hosting engine)、图像显示引擎、通知引擎、社交网络引擎等的应用。在一些实施方式中,机器学习应用830和其他应用812每个可以包括使得处理器802能够执行本文描述的例如图2和图3的方法的一些或全部的功能的指令。
其他应用程序812可以包括例如图像编辑应用、媒体显示应用、通信应用、网络托管引擎或应用、绘图应用、媒体共享应用等。本文公开的一种或多种方法可以例如作为可以在任何类型的计算设备上运行的独立计算机程序、作为具有网页的网络应用、作为在移动计算设备上运行的移动应用(“app”)等在若干环境和平台中操作。
在各种实施方式中,机器学习应用830可以利用贝叶斯(Bayesian)分类器、支持向量机、神经网络或其他学习技术。在一些实施方式中,机器学习应用830可以包括训练模型834、推理引擎836和数据832。在一些实施方式中,数据832可以包括训练数据,例如,用于生成训练模型834的数据。在一些实施方式中,训练数据可以包括任何类型的数据,诸如文本、图像、音频、视频等。训练数据可以从任何来源获得,例如,专门标记用于训练的数据存储库、提供许可以用作训练数据的数据等。在一个或多个用户允许使用他们各自的用户数据来训练机器学习模型(例如训练模型834)的实施方式中,训练数据可以包括这样的用户数据。在用户允许使用他们各自的用户数据的实施方式中,数据832可以包括允许的数据,诸如图像(例如,照片或其他用户生成的图像)、通信(例如,电子邮件;诸如文本消息的聊天数据、语音、视频等)、文档(例如电子表格、文本文档、演示文稿等)。
在一些实施方式中,数据832可以包括所收集的数据,诸如地图数据、图像数据(例如,卫星图像、俯视图像等)、游戏数据等。在一些实施方式中,训练数据可以包括为训练的目的生成的综合数据,诸如不是基于正在训练的上下文中的用户输入或活动的数据,例如,从模拟对话生成的数据、计算机生成的图像等。在一些实施方式中,机器学习应用830不包括数据832。例如,在这些实施方式中,训练模型834可以例如在不同设备上生成,并且作为机器学习应用830的一部分提供。在各种实施方式中,训练模型834可以被提供为包含模型结构或形式以及关联权重的数据文件。推理引擎836可以读取训练模型834的数据文件,并基于训练模型834中指定的模型结构或形式实施具有节点连接、层和权重的神经网络。
机器学习应用830还包括训练模型834。在一些实施方式中,训练模型可包括一个或多个模型形式或结构。在一些实施方式中,模型形式或结构可以包括任何类型的神经网络,例如线性网络、实施多个层(例如,输入层和输出层之间的“隐藏层”,每个层是线性网络)的深度神经网络、卷积神经网络(例如,将输入数据分割或划分成多个部分或图块(tiles)的网络,使用一个或多个神经网络层分别处理每个图块,并聚合来自每个图块的处理的结果)、序列到序列的神经网络(例如,将序列数据作为输入的网络,诸如句子中的单词、视频中的帧等,并产生结果序列作为输出),等等。模型形式或结构可以指定各个节点之间的连接以及节点到层的组织。在一些实施方式中,第一层(例如,输入层)的节点可以接收数据作为输入数据832或应用数据814。例如,当使用训练模型用于图像分析时,这样的数据可以包括例如每个节点一个或多个像素。后续中间层可以按照模型形式或结构中指定的连接性接收先前层的节点的输出作为输入。这些层也可以称为隐藏层。最后一层(例如,输出层)产生机器学习应用的输出。例如,取决于特定的训练模型,输出可以是图像的一组标签、允许将图像与其他图像进行比较的图像的表示(例如,图像的特征向量)、响应于输入句子的输出句子、输入数据的一个或多个类别等。在一些实施方式中,模型形式或结构还指定每层中的节点的数量和/或类型。
在不同的实施方式中,训练模型834可包括多个节点,按照模型结构或形式被布置成层。在一些实施方式中,节点可以是没有内存的计算节点,例如,被配置为处理一个单元的输入以产生一个单元的输出。由节点执行的计算可以包括,例如,将多个节点输入中的每一个节点输入乘以权重,获得加权和,以及利用偏置或截距值(intercept value)调整加权和以产生节点输出。在一些实施方式中,由节点执行的计算还可以包括将阶梯/激活函数应用于调整后的加权和。在一些实施方式中,阶梯/激活函数可为非线性函数。在各种实施方式中,这种计算可以包括诸如矩阵乘法之类的操作。在一些实施方式中,例如,使用多核处理器的多个处理器核、使用GPU的单独的处理单元、或专用神经电路,多个节点的计算可以并行执行。在一些实施方式中,节点可以包括内存,例如,可以能够在处理后续输入时存储和使用一个或多个较早的输入。在一些实施方式中,具有内存的节点可以包括长短期内存(Long Short-term Memory,LSTM)节点。LSTM节点可以使用内存来维持允许节点像有限状态机(Finite State Machine,FSM)那样工作的“状态”。具有这种节点的模型可用于处理序列数据,例如句子或段落中的单词、视频中的帧、语音或其他音频等。
在一些实施方式中,训练模型834可以包括用于单独的节点的嵌入或权重。在一些实施方式中,模型可以被初始化为被组织成由模型形式或结构指定的层的多个节点。在初始化时,可以将相应的权重应用于按照模型形式连接的每对节点之间的连接,例如,神经网络的连续层中的节点。在一些实施方式中,可以随机分配相应的权重,或者将其初始化为默认值。然后可以例如使用数据832训练模型以产生结果。
在一些实施方式中,训练可以包括应用监督学习技术。在监督学习中,训练数据可以包括多个输入(例如,一组图像)和每个输入的相应预期输出(例如,每个图像的一个或多个标签)。基于模型的输出与预期输出的比较,例如,以提高在提供类似输入时模型产生预期输出的概率的方式,自动调整权重的值。
在一些实施方式中,训练可以包括应用无监督学习技术。在无监督学习中,可以仅提供输入数据,并且可以训练模型以区分数据,例如,将输入数据聚类成多个组,其中每个组包括以某种方式相似的输入数据。在一些实施方式中,可以训练模型以区分图像,使得模型将抽象图像(例如,合成图像、人工图像等)与自然图像(例如,照片)区分开。
在一些实施方式中,使用无监督学习训练的模型可以基于输入句子中的单词的使用来对单词进行聚类。在一些实施方式中,可以使用无监督学习来产生知识表示,例如,该知识表示可以由机器学习应用830使用。在各种实施方式中,训练模型包括与模型结构相对应的一组权重或嵌入。在省略数据832的实施方式中,机器学习应用830可以包括基于例如通过机器学习应用830的开发者、通过第三方等的先前训练的训练模型834。在一些实施方式中,训练模型834可以包括例如从提供权重的服务器下载的一组固定的权重。
机器学习应用程序830还包括推理引擎836。推理引擎836被配置为将训练模型834应用于数据(诸如应用数据814),以提供推理。在一些实施方式中,推理引擎836可以包括将由处理器802运行的软件代码。在一些实施方式中,推理引擎836可以指定使处理器802能够应用训练模型的(例如,用于可编程处理器、用于现场可编程门阵列(FPGA)等的)电路配置。在一些实施方式中,推理引擎836可以包括软件指令、硬件指令或组合。在一些实施方式中,推理引擎836可以提供应用编程接口(Application Programming Interface,API),其可以由操作系统808和/或其他应用812用来调用推理引擎836,例如,以将训练模型834应用于应用数据814,从而生成推理。
机器学习应用830可以提供若干技术优势。例如,当基于无监督学习生成训练模型834时,训练模型834可以由推理引擎836应用以从例如应用数据814的输入数据产生知识表示(例如,数字表示)。例如,用于图像分析的训练模型可以产生具有比输入图像(例如,10MB)小的数据大小(例如,1KB)的图像的表示。在一些实施方式中,这样的表示可以有助于降低生成输出(例如,标签、分类、描述图像的句子等)的处理成本(例如,计算成本、内存使用等)。在一些实施方式中,可以提供这样的表示作为不同的机器学习应用的输入,该机器学习应用从推理引擎836的输出产生输出。在一些实施方式中,机器学习应用830生成的知识表示可以例如通过网络被提供给进行进一步处理的不同的设备。在这样的实施方式中,提供知识表示而不是图像可以提供技术优势,例如,以降低的成本实现更快的数据传输。在另一示例中,被训练用于聚类文档的模型可以从输入文档产生文档聚类。文档聚类可以适合于进一步处理(例如,确定文档是否与主题相关、确定文档的分类类别等)而无需访问原始文档,因此节省了计算成本。
在一些实施方式中,机器学习应用830可以以离线方式实施。在这些实施方式中,训练模型834可以在第一阶段生成,并且作为机器学习应用830的一部分提供。在一些实施方式中,机器学习应用830可以以在线方式实施。在这些实施方式中的一些实施方式中,调用机器学习应用830的应用(例如,操作系统808、一个或多个其他应用812)可以利用机器学习应用830产生的推理,例如,向用户提供推理,并且可以生成系统日志(例如,如果用户允许,则该日志为用户基于推理采取的动作;或者如果用作进一步处理的输入,则该日志为进一步处理的结果)。系统日志可以周期性地产生,例如,每小时、每月、每季度等,并且可以在用户许可的情况下用于更新训练模型834,例如,更新训练模型834的嵌入。
在一些实施方式中,机器学习应用830可以以能够适应其上运行机器学习应用830的设备800的特定配置的方式来实施。在一些实施方式中,机器学习应用830可以确定利用例如处理器802的可用计算资源的计算图。在一些实施方式中,如果机器学习应用830被实施为多个设备上的分布式应用,则机器学习应用830可以以优化计算的方式确定要在单独的设备上执行的计算。在一些实施方式中,机器学习应用830可以确定处理器802包括具有特定数量(例如,1000)的GPU核的GPU,并相应地实施推理引擎(例如,作为1000个单独的进程或线程)。
在一些实施方式中,机器学习应用830可实施训练模型的全体。在一些实施方式中,训练模型834可以包括多个训练模型,每个训练模型适用于相同的输入数据。在这些实施方式中,机器学习应用830可以例如基于可用计算资源、先前推理的成功率等来选择特定的训练模型。在一些实施方式中,机器学习应用830可以运行推理引擎836,使得多个训练模型被应用。在这些实施方式中,机器学习应用830可以例如使用对应用的每个训练模型的各个输出进行评分的投票技术、或者通过选择一个或多个特定的输出,组合来自应用的各个模型的输出。进一步,在这些实施方式中,机器学习应用可以将时间阈值(例如,0.5ms)应用于应用的各个训练模型,并且仅利用在时间阈值内可用的那些单独的输出。可以不利用(例如丢弃)在时间阈值内未接收的输出。在一些实施方式中,在例如通过操作系统808或一个或多个其他应用812调用机器学习应用时,当时间限制被指定,这样的方法可能是合适的。
在不同的实施方式中,机器学习应用830可以产生不同类型的输出。在一些实施方式中,机器学习应用830可以提供表示或聚类(例如,输入数据的数字表示)、标签(例如,用于包括图像、文档等的输入数据)、短语或句子(例如,描述图像或视频,适合用作对输入句子的响应等)、图像(例如,由机器学习应用响应于输入而生成)、音频或视频(例如,响应于输入视频,机器学习应用830可以产生具有特定应用效果的输出视频,例如,当使用来自漫画书或特定艺术家等的训练数据训练训练模型834时,以漫画书或特定艺术家的风格呈现输出视频)。在一些实施方式中,机器学习应用830可以基于由例如操作系统808或一个或多个其他应用812的调用应用指定的格式产生输出。在一些实施方式中,调用应用可以是另一个机器学习应用。在一些实施方式中,这样的配置可以用于生成的对抗网络,其中使用来自机器学习应用830的输出训练调用机器学习应用,反之亦然。
内存804中的任何软件可替代地存储在任何其他合适的存储位置或计算机可读介质上。此外,内存804(和/或其他连接的存储设备)可以存储一个或多个消息、一个或多个分类标准、电子百科全书、词典、辞典、知识库、消息数据、语法、用户偏好和/或在本文描述的特征中使用的其他指令和数据。内存804和任何其他类型的存储(磁盘、光盘、磁带或其他有形介质)可以被认为是“存储”或“存储设备”。
I/O接口806可以提供使服务器设备800与其他系统和设备接合的功能。接口设备可以作为设备800的一部分被包括,或者可以与设备800分开并通信。在一些实施方式中,网络通信设备、存储设备(例如,内存和/或数据库106)和输入/输出设备可以通过I/O接口806通信。在一些实施方式中,I/O接口可以连接到诸如输入设备(键盘、指点设备、触摸屏、麦克风、相机、扫描仪、传感器等)和/或输出设备(显示设备、扬声器设备、打印机、电机等)的接口设备。
可以连接到I/O接口806的接口设备的一些示例可以包括可用于显示例如图像、视频的一个或多个显示设备820,和/或如本文描述的输出应用的用户接口。显示设备820可以经由本地连接(例如,显示总线)和/或经由网络连接而连接到设备800,并且可以是任何合适的显示设备。显示设备820可以包括任何合适的显示设备,诸如LCD、LED或等离子显示屏、CRT、电视、监视器、触摸屏、3D显示屏或其他视觉显示设备。在一些实施方式中,显示设备820可以是在移动设备上提供的平面显示屏、在护目镜或耳机设备中提供的多个显示屏、或者用于计算机设备的监视屏。
I/O接口806可以接合至其他输入和输出设备。一些示例包括可以捕获图像的一个或多个相机。一些实施方式可以提供用于捕获声音的麦克风(例如,作为捕获图像的一部分,语音命令等)、用于输出声音的音频扬声器设备、或其他输入和输出设备。
为了便于说明,图8示出了处理器802、内存804、I/O接口806中的每一个的一个框,并示出了软件框808、812和830。这些框可以表示一个或多个处理器或处理电路、操作系统、内存、I/O接口、应用和/或软件模块。在其他实施方式中,设备800可以不具有所示的所有组件和/或可以具有包括其他类型的元件的其他元件来代替或补充本文所示的那些元件。虽然一些组件被描述为执行如本文的一些实施方式中所描述的框和操作,但是网络环境100、设备800、类似系统或与这种系统相关联的任何合适的处理器的任何合适的组件或组件的组合可以执行描述的框和操作。
本文描述的方法可以通过可在计算机上运行的计算机程序指令或代码来实施。在一些实施方式中,代码可以由一个或多个数字处理器(例如,微处理器或其他处理电路)实施,并且可以存储在包括非暂时性计算机可读介质(例如,存储介质)的计算机程序产品上,非暂时性计算机可读介质诸如磁、光、电磁或包括半导体或固态内存的半导体存储介质、磁带、可移动计算机磁盘、随机存取内存(RAM)、只读内存(ROM)、闪存,刚性磁盘、光盘、固态内存驱动等。程序指令也可以包含在或提供为电子信号,例如以从服务器(例如,分布式系统和/或云计算系统)传送的软件即服务(Software as a Service,SaaS)的形式提供。可替代地,一个或多个方法可以用硬件(逻辑门等)或硬件和软件的组合来实施。示例硬件可以是可编程处理器(例如,现场可编程门阵列(FPGA)、复杂可编程逻辑设备)、通用处理器、图形处理器、专用集成电路(ASIC)等。一个或多个方法可以作为在系统上运行的应用的一部分或组件来执行,或者作为与其他应用和操作系统一起运行的应用或软件来执行。
尽管已经关于其特定实施方式进行了描述,但是这些特定实施方式仅是说明性的而非限制性的。示例中示出的概念可以应用于其他示例和实施方式。
在本文中讨论的某些实施方式可以收集或使用关于用户的个人信息(例如,用户数据、关于用户的社交网络的信息、用户的位置和在该位置的时间、用户的生物计量信息、用户的活动和人口统计信息)的情况下,向用户提供一个或多个机会来控制是否收集信息、是否存储个人信息、是否使用个人信息、以及如何收集、存储和使用关于用户的信息。也就是说,特别是在接收到来自相关用户的明确授权时,本文中讨论的系统和方法才会收集、存储和/或使用用户个人信息。在一些实施方式中,向用户提供对程序或特征是否收集关于与该程序或特征相关的该特定用户或其他用户的用户信息的控制。其个人信息要被收集的每个用户被呈现一个或多个选项以允许控制与该用户相关的信息收集,以提供关于是否收集信息以及关于信息的哪些部分要被收集的许可或授权。在一些实施方式中,可以通过通信网络向用户提供一个或多个这样的控制选项。另外,某些数据可以在存储或使用之前以一种或多种方式处理,以便移除个人可识别信息。在一些实施方式中,可以处理用户的标识,以便不能确定个人可识别信息。在一些实施方式中,用户的地理位置可以被泛化到更大的地区,以便不能确定用户的特定位置。
注意,本公开中描述的功能框、操作、特征、方法、设备和系统可以被集成或分成系统、设备和功能框的不同组合,如本领域技术人员所知。可以使用任何合适的编程语言和编程技术来实施特定实施方式的例程。可以采用不同的编程技术,例如,程序或面向对象。例程可以在单个处理设备或多个处理器上运行。虽然步骤、操作或计算可以以特定顺序呈现,但是可以在不同的特定实施方式中改变顺序。在一些实施方式中,可以同时执行在本说明书中按顺序示出的多个步骤或操作。

Claims (24)

1.一种计算机实施的方法,其特征在于,包含:
使得向第一用户显示第一设备上的用户界面中的多个图像,其中所述多个图像中的每一个图像描绘不同的人员,其中所述多个图像是从与所述第一用户相关联的图像库中获得的;
基于由所述第一设备接收的用户输入,接收对所述多个图像中的特定图像的选择;
确定指示在所选择的所述特定图像中描绘的特定人员的人员标识符,其中所述人员标识符被指定为人员共享标准;
获得与所述第一用户相关联的第一图像,其中所述第一图像是从与所述第一用户相关联的所述图像库中获得的,其中所述第一图像不包括在所述多个图像中;
以编程方式分析所述第一图像,以确定所述第一图像描绘了与所述人员共享标准相匹配的人员;和
基于确定所述第一图像描绘了与所述人员共享标准相匹配的所述人员,更新对与所述第一用户相关联的所述图像库中的所述第一图像的访问许可,以通过通信网络将对所述第一图像的访问权限授予第二设备的第二用户。
2.根据权利要求1所述的计算机实施的方法,其特征在于,所述人员共享标准包括指定特定面部标识的面部标准,并且其中以编程方式分析所述第一图像包含:
应用图像分类器以确定所述第一图像描绘了所述特定面部标识的面部,其中应用所述图像分类器是基于所述第一图像的像素的像素值。
3.根据权利要求1所述的计算机实施的方法,其特征在于,更新所述第一图像的所述访问许可是基于确定所述第一图像描绘与所述人员共享标准相匹配的所述人员的置信水平,其中所述置信水平满足第一阈值。
4.如权利要求3所述的计算机实施的方法,其特征在于,进一步包括:
检查所述置信水平是否不满足所述第一阈值并且满足第二阈值,所述第二阈值指示所述第一图像描绘与所述人员共享标准相匹配的所述人员的较小置信度;和
响应于确定所述置信水平满所述足第二阈值,使得所述第一图像被显示以供从所述第一用户向所述第一设备的用户输入选择,以更新对所述第一图像的所述访问许可,从而将访问权限授予所述第二用户。
5.如权利要求1所述的计算机实施的方法,其特征在于,更新所述第一图像的所述访问许可包含自动将所述第一图像添加到所述第二用户的图像库。
6.如权利要求5所述的计算机实施的方法,其特征在于,将所述第一图像添加到所述第二用户的所述图像库包含将所述第一图像添加到所述第二用户的所述图像库中的图像相册,其中所述图像相册被指定为存储与所述人员共享标准相匹配的图像。
7.如权利要求1所述的计算机实施的方法,其特征在于,所述第一图像的图像数据存储在通过所述通信网络与所述第一设备通信的服务器设备上,并且其中涉及所述第一图像的所述图像数据的第一数据指针存储在所述第一设备上,其中更新所述第一图像的所述访问许可包括通过所述通信网络将涉及所述第一图像的所述图像数据的第二数据指针发送到所述第二设备。
8.如权利要求1所述的计算机实施的方法,其特征在于,以编程方式分析所述第一图像包括确定所述第一图像是否满足一个或多个另外的共享标准。
9.如权利要求8所述的计算机实施方式的方法,其特征在于,所述一个或多个另外的共享标准包括指定图像内容特征的图像特征标准,并且其中,以编程方式分析所述第一图像包含:
应用图像分类器来确定包括所述第一图像的多个内容特征的特征向量,其中所述特征向量基于所述第一图像的像素值;和
将所述特征向量与所述图像特征标准进行比较,以确定所述第一图像是否与所述图像特征标准相匹配。
10.如权利要求8所述的计算机实施的方法,其特征在于,所述一个或多个另外的共享标准包括时间标准,并且其中以编程方式分析所述第一图像包含:
基于与所述第一图像相关联的时间戳元数据来确定所述第一图像的创建时间;和
将所述创建时间与所述时间标准进行比较,以确定所述第一图像是否与所述时间标准相匹配。
11.如权利要求8所述的计算机实施的方法,其特征在于,所述一个或多个另外的共享标准包括位置标准,其中,所述位置标准指定特定位置,并且其中,以编程方式分析所述第一图像包含:
基于以下中的一个或多个来确定与所述第一图像相关联的位置:与所述第一图像相关联的位置元数据和检测的如所述第一图像的一个或多个像素中所描绘的内容特征;和
将与所述第一图像相关联的所述位置与所述位置标准进行比较,以确定所述第一图像是否与所述特定位置相匹配。
12.如权利要求1所述的计算机实施的方法,其特征在于,进一步包含:
响应于确定所述第一图像描绘了与所述人员共享标准相匹配的所述人员,
启动与所述第一用户相关联的用于所述第一图像的延迟时段;
将状态指示符分配给所述第一图像,其中所述状态指示符指示所述第一图像将与所述第二用户共享的第一状态;
确定在所述延迟时段期间是否在所述第一设备处接收到来自所述第一用户的用户输入,所述用户输入指示所述第一图像将不与所述第二用户共享;和
如果确定接收到所述用户输入,则将所述状态指示符更新为指示所述第一图像将不与所述第二用户共享的第二状态,
其中,更新所述第一图像的所述访问许可是响应于所述延迟时段的期满和指示所述第一状态的所述状态指示符。
13.一种计算机实施的方法,其特征在于,包括:
从与用户相关联的图像库中选择多个图像;
使所述多个图像显示在所述用户的用户设备上的用户界面中;
基于由所述用户设备接收的用户输入,接收对所述多个图像中的特定图像的选择;
确定指示在所选择的所述特定图像中描绘的特定人员的人员标识符,其中,所述人员标识符被指定为人员保存标准,并包括在存储的与所述用户相关联的自动保存标准中,其中所述自动保存标准包括一个或多个人员标识符,每个所述人员标识符识别不同的人员;
通过通信网络接收所述用户已被授予对第一图像的访问权限的指示,所述第一图像与不同的用户相关联并且被提供在存储的与所述不同的用户相关联的不同的图像库中,其中所述第一图像不包括在与所述用户相关联的所述图像库中,其中所述指示包括对所述第一图像的访问许可;
响应于接收到所述用户已被授予对所述第一图像的访问权限的所述指示,获得所述第一图像和存储的与所述用户相关联的所述自动保存标准;
以编程方式分析所述第一图像,以确定所述第一图像是否描绘了与所述自动保存标准中的所述一个或多个人员标识符中的一个人员标识符相匹配的人员;和
响应于确定所述第一图像描绘了与所述一个或多个人员标识符中的一个人员标识符相匹配的所述人员,将所述第一图像添加到与所述用户相关联的所述图像库。
14.根据权利要求13所述的方法,其特征在于,所述多个图像中的每一个图像描绘未在所述多个图像中的其他图像中描绘的独特的人员,其中所述多个图像中的每一个图像与不同的人员标识符相关联。
15.如权利要求14所述的计算机实施的方法,其特征在于,所述多个图像中的每一个图像是从来自多个图像聚类的不同图像聚类中选择的,其中每个图像聚类包括描绘独特的人员的一个或多个图像。
16.如权利要求13所述的计算机实施的方法,其特征在于,自动将所述第一图像添加到所述图像库包括将数据指针存储在所述用户设备上,其中所述数据指针指向存储在服务器设备上的第一图像数据,其中所述第一图像数据与所述第一图像相关联。
17.如权利要求13所述的计算机实施的方法,其特征在于,所述自动保存标准包括一个或多个另外的保存标准,其中所述另外的保存标准包括以下中的一个或多个:位置保存标准,所述置保存标准指定由在所述用户设备处接收的用户输入所指示的位置;或基于时间的保存标准,所述基于时间的保存标准指定由在所述用户设备处接收的用户输入所指示的时间段,并且进一步包含:
确定所述第一图像的元数据是否满足所述一个或多个另外的保存标准,
其中,自动将所述第一图像添加到所述图像库是另外响应于确定所述第一图像的所述元数据满足所述一个或多个另外的保存标准。
18.如权利要求13所述的计算机实施的方法,其特征在于,所述人员保存标准包括指定特定面部标识的面部保存标准,并且其中以编程方式分析所述第一图像包含:
应用图像分类器以确定所述第一图像描绘所述特定面部标识的面部,其中应用所述图像分类器是基于所述第一图像的所述像素的像素值。
19.如权利要求13所述的计算机实施方式的方法,其特征在于,进一步包含:
使得通过所述用户设备显示第一用户界面元素,其中所述第一用户界面包括可选择的选项,以接受对与所述不同的用户相关联的一个或多个图像的访问权限;和
接收来自所述用户的用户输入,所述用户输入指示接受对所述一个或多个图像的访问权限,其中,从所述图像库中选择所述多个图像并且使所述多个图像被显示是响应于接收到指示所述接受的所述用户输入。
20.如权利要求19所述的计算机实施的方法,其特征在于,进一步包含:
响应于接收到指示所述接受的所述用户输入,使得第二用户界面被显示,所述第二用户界面使得所述用户能够更新与所述用户相关联的所述图像库中的一个或多个图像的访问许可,以授予所述不同的用户对所述一个或多个图像的访问权限。
21.一种包含程序代码的部分的计算机程序产品,其特征在于,当所述程序代码的部分被计算设备运行时,使得所述计算设备执行包含以下的操作:
使得向第一用户显示第一设备上的用户界面中的多个图像,其中所述多个图像中的每一个图像描绘不同的人员,其中所述多个图像是从与所述第一用户相关联的图像库中获得的;
基于由所述第一设备接收的用户输入,接收对所述多个图像中的特定图像的选择;
确定指示在所选择的所述特定图像中描绘的特定人员的人员标识符,其中所述人员标识符被指定为人员共享标准;
获得与所述第一用户相关联的第一图像,其中所述第一图像是从与所述第一用户相关联的所述图像库中获得的,其中所述第一图像不包括在所述多个图像中;
以编程方式分析所述第一图像,以确定所述第一图像描绘了与所述人员共享标准相匹配的人员;和
基于确定所述第一图像描绘了与所述人员共享标准相匹配的所述人员,更新对与所述第一用户相关联的所述图像库中的所述第一图像的访问许可,以通过通信网络将对所述第一图像的访问权限授予第二设备的第二用户。
22.一种包含程序代码的部分的计算机程序产品,其特征在于,当所述程序代码的部分由计算设备运行时,使得所述计算设备执行包含以下的操作:
从与用户相关联的图像库中选择多个图像;
使所述多个图像显示在所述用户的用户设备上的用户界面中;
基于由所述用户设备接收的用户输入,接收对所述多个图像中的特定图像的选择;
确定指示在所选择的所述特定图像中描绘的特定人员的人员标识符,其中,所述人员标识符被指定为人员保存标准,并包括在存储的与所述用户相关联的自动保存标准中,其中所述自动保存标准包括一个或多个人员标识符,每个所述人员标识符识别不同的人员;
通过通信网络接收所述用户已被授予对第一图像的访问权限的指示,所述第一图像与不同的用户相关联并且被提供在存储的与所述不同的用户相关联的不同的图像库中,其中所述第一图像不包括在与所述用户相关联的所述图像库中,其中所述指示包括对所述第一图像的访问许可;
响应于接收到所述用户已被授予对所述第一图像的访问权限的所述指示,获得所述第一图像和存储的与所述用户相关联的所述自动保存标准;
以编程方式分析所述第一图像,以确定所述第一图像是否描绘了与所述自动保存标准中的所述一个或多个人员标识符中的一个人员标识符相匹配的人员;和
响应于确定所述第一图像描绘了与所述一个或多个人员标识符中的一个人员标识符相匹配的所述人员,将所述第一图像添加到与所述用户相关联的所述图像库。
23.一种系统,其特征在于,包含:
存储设备;和
至少一个处理器,所述至少一个处理器被配置为访问所述存储设备,并且被配置为执行包含以下的操作:
使得向第一用户显示第一设备上的用户界面中的多个图像,其中所述多个图像中的每一个图像描绘不同的人员,其中所述多个图像是从与所述第一用户相关联的图像库中获得的;
基于由所述第一设备接收的用户输入,接收对所述多个图像中的特定图像的选择;
确定指示在所选择的所述特定图像中描绘的特定人员的人员标识符,其中所述人员标识符被指定为人员共享标准;
获得与所述第一用户相关联的第一图像,其中所述第一图像被提供在与所述第一用户相关联的所述图像库中,其中所述第一图像不包括在所述图像库中;
以编程方式分析所述第一图像,以确定所述第一图像描绘了与所述人员共享标准相匹配的人员;和
基于确定所述第一图像描绘了与所述人员共享标准相匹配的所述人员,更新对与所述第一用户相关联的所述图像库中的所述第一图像的访问许可,以通过通信网络将对所述第一图像的访问权限授予第二设备的第二用户。
24.一种系统,其特征在于,包含:
存储设备;和
至少一个处理器,所述至少一个处理器被配置为访问所述存储设备,并且被配置为执行包含以下的操作:
从与用户相关联的图像库中选择多个图像;
使所述多个图像显示在所述用户的用户设备上的用户界面中;
基于由所述用户设备接收的用户输入,接收对所述多个图像中的特定图像的选择;
确定指示在所选择的所述特定图像中描绘的特定人员的人员标识符,其中,所述人员标识符被指定为人员保存标准,并包括在存储的与所述用户相关联的自动保存标准中,其中所述自动保存标准包括一个或多个人员标识符,每个所述人员标识符识别不同的人员;
通过通信网络接收所述用户已被授予对第一图像的访问权限的指示,所述第一图像与不同的用户相关联并且被提供在存储的与所述不同的用户相关联的不同的图像库中,其中所述第一图像不包括在与所述用户相关联的所述图像库中,其中所述指示包括对所述第一图像的访问许可;
响应于接收到所述用户已被授予对所述第一图像的访问权限的所述指示,获得所述第一图像和存储的与所述用户相关联的所述自动保存标准;
以编程方式分析所述第一图像,以确定所述第一图像是否描绘了与所述自动保存标准中的所述一个或多个人员标识符中的一个人员标识符相匹配的人员;和
响应于确定所述第一图像描绘了与所述一个或多个人员标识符中的一个人员标识符相匹配的所述人员,将所述第一图像添加到与所述用户相关联的所述图像库。
CN201880012338.5A 2017-05-17 2018-02-15 通过通信网络与指定用户的自动图像共享 Active CN110770717B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201762507756P 2017-05-17 2017-05-17
US62/507,756 2017-05-17
PCT/US2018/018447 WO2018212815A1 (en) 2017-05-17 2018-02-15 Automatic image sharing with designated users over a communication network

Publications (2)

Publication Number Publication Date
CN110770717A true CN110770717A (zh) 2020-02-07
CN110770717B CN110770717B (zh) 2024-04-16

Family

ID=61599583

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880012338.5A Active CN110770717B (zh) 2017-05-17 2018-02-15 通过通信网络与指定用户的自动图像共享

Country Status (4)

Country Link
US (4) US10432728B2 (zh)
EP (1) EP3568787B1 (zh)
CN (1) CN110770717B (zh)
WO (1) WO2018212815A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111857498A (zh) * 2020-06-30 2020-10-30 维沃移动通信有限公司 数据交互方法和装置、及电子设备
CN113592731A (zh) * 2021-07-19 2021-11-02 维沃移动通信(杭州)有限公司 图像处理方法、装置、电子设备和存储介质
CN113626626A (zh) * 2021-07-08 2021-11-09 支付宝(杭州)信息技术有限公司 一种多人共享的照片存储方法、装置以及设备

Families Citing this family (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103338256B (zh) * 2013-06-28 2015-09-23 腾讯科技(深圳)有限公司 图片共享方法、装置、服务器及系统
EP3322149B1 (en) * 2016-11-10 2023-09-13 Tata Consultancy Services Limited Customized map generation with real time messages and locations from concurrent users
WO2018212599A1 (en) * 2017-05-17 2018-11-22 Samsung Electronics Co., Ltd. Super-resolution processing method for moving image and image processing apparatus therefor
US10922354B2 (en) * 2017-06-04 2021-02-16 Apple Inc. Reduction of unverified entity identities in a media library
US10728343B2 (en) * 2018-02-06 2020-07-28 Citrix Systems, Inc. Computing system providing cloud-based user profile management for virtual sessions and related methods
US10217029B1 (en) * 2018-02-26 2019-02-26 Ringcentral, Inc. Systems and methods for automatically generating headshots from a plurality of still images
KR102185369B1 (ko) * 2018-03-28 2020-12-01 삼성전자주식회사 사용자와의 대화를 위한 정보를 생성하는 시스템 및 방법
US10957110B2 (en) * 2018-04-17 2021-03-23 Edx Technologies, Inc. Systems, devices, and methods for tracing paths in augmented reality
US10375432B1 (en) 2018-06-05 2019-08-06 Rovi Guides, Inc. Systems and methods for seamlessly connecting devices based on relationships between the users of the respective devices
US11068705B2 (en) * 2018-06-11 2021-07-20 Cisco Technology, Inc. Vector based object recognition in hybrid cloud
CN109101801B (zh) * 2018-07-12 2021-04-27 北京百度网讯科技有限公司 用于身份认证的方法、装置、设备和计算机可读存储介质
US20200074217A1 (en) * 2018-08-28 2020-03-05 Sony Corporation Techniques for providing user notice and selection of duplicate image pruning
JP7171349B2 (ja) * 2018-09-28 2022-11-15 富士フイルム株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
US11029741B2 (en) * 2018-12-28 2021-06-08 Baidu Usa Llc Deactivating a display of a smart display device based on a vision-based mechanism
US10839514B2 (en) * 2019-04-16 2020-11-17 International Medical Solutions, Inc. Methods and systems for dynamically training and applying neural network analyses to medical images
CN111753078B (zh) * 2019-07-12 2024-02-02 北京京东尚科信息技术有限公司 图像段落描述生成方法、装置、介质及电子设备
US11283937B1 (en) * 2019-08-15 2022-03-22 Ikorongo Technology, LLC Sharing images based on face matching in a network
US11557208B2 (en) * 2019-10-02 2023-01-17 Samsara Networks Inc. Facial recognition technology for improving motor carrier regulatory compliance
US11036456B1 (en) * 2019-10-18 2021-06-15 Splunk Inc. Control of a display device included in a display grid
TWI817014B (zh) * 2019-11-25 2023-10-01 仁寶電腦工業股份有限公司 基於時間軸的圖形使用者介面提供方法、系統與紀錄媒體
KR20210067442A (ko) * 2019-11-29 2021-06-08 엘지전자 주식회사 객체 인식을 위한 자동 레이블링 장치 및 방법
CN111159587B (zh) * 2019-12-13 2023-08-29 深圳市思为软件技术有限公司 用户访问信息处理方法、装置及终端设备
US11687778B2 (en) 2020-01-06 2023-06-27 The Research Foundation For The State University Of New York Fakecatcher: detection of synthetic portrait videos using biological signals
CN114930324A (zh) * 2020-01-06 2022-08-19 谷歌有限责任公司 用于对媒体内容进行搜索和编索引的共享嵌入的隐私控制
US11496897B2 (en) * 2020-02-24 2022-11-08 Citrix Systems, Inc. Biometric identification of information recipients
US11750542B2 (en) 2020-04-27 2023-09-05 Snap Inc. Invitation media overlays for shared collections of media content items
US11665116B2 (en) 2020-04-27 2023-05-30 Snap Inc. Invitation media overlays for private collections of media content items
US11775689B2 (en) * 2020-05-29 2023-10-03 Docusign, Inc. Integration of pictorial content into secure signature documents
US11539647B1 (en) 2020-06-17 2022-12-27 Meta Platforms, Inc. Message thread media gallery
US11157723B1 (en) 2021-02-12 2021-10-26 Samsara Networks lac. Facial recognition for drivers
US11875016B2 (en) 2021-05-17 2024-01-16 Apple Inc. Devices, methods, and graphical user interfaces for displaying media items shared from distinct applications
US11941237B2 (en) 2021-05-17 2024-03-26 Apple Inc. Devices, methods, and graphical user interfaces for automatically providing shared content to applications
JP2024522058A (ja) 2021-05-17 2024-06-11 アップル インコーポレイテッド アプリケーションに共有コンテンツを自動的に提供するためのデバイス、方法、及びグラフィカルユーザインタフェース
US12111885B2 (en) 2021-06-28 2024-10-08 International Business Machines Corporation Image dispositioning using machine learning
JP2023028746A (ja) * 2021-08-20 2023-03-03 キヤノン株式会社 情報処理装置およびその制御方法、プログラム
US11538578B1 (en) 2021-09-23 2022-12-27 International Medical Solutions, Inc. Methods and systems for the efficient acquisition, conversion, and display of pathology images
CN113900754B (zh) * 2021-10-09 2023-10-31 深圳技德智能科技研究院有限公司 共享桌面方法、装置、计算机设备和存储介质
US20230198989A1 (en) * 2021-12-16 2023-06-22 Lenovo (United States) Inc. Context based data sharing
US20230376168A1 (en) * 2022-05-10 2023-11-23 Apple Inc. User interfaces for managing media libraries
US12081607B2 (en) 2022-12-23 2024-09-03 Dropbox, Inc. Shared capture session

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102025654A (zh) * 2009-09-15 2011-04-20 联发科技股份有限公司 便携设备及图片共享方法
US20110208822A1 (en) * 2010-02-22 2011-08-25 Yogesh Chunilal Rathod Method and system for customized, contextual, dynamic and unified communication, zero click advertisement and prospective customers search engine
US20130156275A1 (en) * 2011-12-20 2013-06-20 Matthew W. Amacker Techniques for grouping images
CN103635892A (zh) * 2011-07-07 2014-03-12 索尼电脑娱乐美国公司 自动创建用于分享照片的群体
US8798401B1 (en) * 2012-06-15 2014-08-05 Shutterfly, Inc. Image sharing with facial recognition models
WO2014178853A1 (en) * 2013-04-30 2014-11-06 Hewlett-Packard Development Company, L.P. Ad-hoc, face-recognition-driven content sharing
CN104317932A (zh) * 2014-10-31 2015-01-28 小米科技有限责任公司 照片分享方法及装置
US20150036000A1 (en) * 2013-07-31 2015-02-05 Lg Electronics Inc. Mobile device and method of controlling therefor
CN104834665A (zh) * 2015-02-28 2015-08-12 小米科技有限责任公司 目标图片获取方法及装置
CN105531701A (zh) * 2014-07-04 2016-04-27 微软技术许可有限责任公司 个性化趋势图像搜索建议
US9338242B1 (en) * 2013-09-09 2016-05-10 Amazon Technologies, Inc. Processes for generating content sharing recommendations

Family Cites Families (250)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6222939B1 (en) 1996-06-25 2001-04-24 Eyematic Interfaces, Inc. Labeled bunch graphs for image analysis
US6513014B1 (en) 1996-07-24 2003-01-28 Walker Digital, Llc Method and apparatus for administering a survey via a television transmission network
JP4214568B2 (ja) 1998-08-18 2009-01-28 コニカミノルタビジネステクノロジーズ株式会社 画像データ逐次表示装置、画像データ逐次表示方法及び記録媒体
US6697869B1 (en) 1998-08-24 2004-02-24 Koninklijke Philips Electronics N.V. Emulation of streaming over the internet in a broadcast application
US6940998B2 (en) 2000-02-04 2005-09-06 Cernium, Inc. System for automated screening of security cameras
US6963848B1 (en) 2000-03-02 2005-11-08 Amazon.Com, Inc. Methods and system of obtaining consumer reviews
USD451536S1 (en) 2000-04-28 2001-12-04 Honeywell International Inc. Symbol set for fireplace control unit
US6947976B1 (en) 2000-07-31 2005-09-20 Vindigo, Inc. System and method for providing location-based and time-based information to a user of a handheld device
US6421358B1 (en) 2000-09-15 2002-07-16 Mediaone Group, Inc. Method and system for delivering a synchronized stream of broadcast event data, live event data, and static event data over a hybrid fiber coax network
US7099510B2 (en) 2000-11-29 2006-08-29 Hewlett-Packard Development Company, L.P. Method and system for object detection in digital images
US6917703B1 (en) 2001-02-28 2005-07-12 Nevengineering, Inc. Method and apparatus for image analysis of a gabor-wavelet transformed image using a neural network
US7539747B2 (en) 2001-03-14 2009-05-26 Microsoft Corporation Schema-based context service
US20030171930A1 (en) * 2002-03-07 2003-09-11 Junqua Jean-Claude Computer telephony system to access secure resources
US7298960B1 (en) 2002-05-10 2007-11-20 Microsoft Corporation Playback diagnostics
AU2003234588A1 (en) 2002-05-17 2003-12-02 Flipp Sports Ergonomic multimedia flipbook
US8359540B2 (en) 2002-10-09 2013-01-22 Goldman, Sachs & Co. Apparatus, methods, and articles of manufacture for constructing and maintaining a calendaring interface
US20040174434A1 (en) * 2002-12-18 2004-09-09 Walker Jay S. Systems and methods for suggesting meta-information to a camera user
JP3908171B2 (ja) 2003-01-16 2007-04-25 富士フイルム株式会社 画像保管方法および装置並びにプログラム
US20040199514A1 (en) 2003-04-02 2004-10-07 Ira Rosenblatt Techniques for facilitating item sharing
WO2004104759A2 (en) 2003-05-16 2004-12-02 Picasa, Inc. Methods and systems for image sharing over a network
US7310681B2 (en) 2003-06-23 2007-12-18 Hewlett-Packard Development Company, L.P. System and method for modeling the memory state of a streaming media server
US20050010470A1 (en) 2003-07-09 2005-01-13 Annette Marino Collaborative marketing mangement systems
US7109848B2 (en) 2003-11-17 2006-09-19 Nokia Corporation Applications and methods for providing a reminder or an alert to a digital media capture device
US7685134B2 (en) 2003-12-31 2010-03-23 Nokia Corporation Media file sharing, correlation of metadata related to shared media files and assembling shared media file collections
US20050187943A1 (en) 2004-02-09 2005-08-25 Nokia Corporation Representation of media items in a media file management application for use with a digital device
US8099407B2 (en) 2004-03-31 2012-01-17 Google Inc. Methods and systems for processing media files
US7457823B2 (en) * 2004-05-02 2008-11-25 Markmonitor Inc. Methods and systems for analyzing data related to possible online fraud
US20080201299A1 (en) 2004-06-30 2008-08-21 Nokia Corporation Method and System for Managing Metadata
US7890871B2 (en) 2004-08-26 2011-02-15 Redlands Technology, Llc System and method for dynamically generating, maintaining, and growing an online social network
JP4557658B2 (ja) 2004-09-29 2010-10-06 富士フイルム株式会社 イベント画像公開方法及びそのシステム
US20060112080A1 (en) 2004-11-23 2006-05-25 Flipclips, Inc. Converting digital video into a printed format
US7671902B2 (en) 2004-12-10 2010-03-02 Making Everlasting Memories, Llc Image capture and distribution system and method
US8055743B2 (en) 2005-01-19 2011-11-08 Siemens Industry, Inc. System and method for configuring a network after replacing a node
US20070043583A1 (en) 2005-03-11 2007-02-22 The Arizona Board Of Regents On Behalf Of Arizona State University Reward driven online system utilizing user-generated tags as a bridge to suggested links
US20060252435A1 (en) 2005-03-18 2006-11-09 Yahoo! Inc. Enabling application wakeup on a mobile device with a hybrid client
US7489946B2 (en) 2005-04-14 2009-02-10 Sudharshan Srinivasan Cellular phone in form factor of a conventional audio cassette
US7620902B2 (en) 2005-04-20 2009-11-17 Microsoft Corporation Collaboration spaces
CA2608691C (en) 2005-05-17 2016-01-05 Adscape Media Inc. Method and system for enhancing video games and video game systems
US7512829B2 (en) 2005-06-09 2009-03-31 Microsoft Corporation Real time event stream processor to ensure up-to-date and accurate result
US8370639B2 (en) * 2005-06-16 2013-02-05 Sensible Vision, Inc. System and method for providing secure access to an electronic device using continuous facial biometrics
EP1978480A3 (en) 2005-07-22 2011-09-07 Kangaroo Media, Inc. System and methods for enhancing the experience of spectators atttending a live sporting event
CN100568235C (zh) 2005-09-09 2009-12-09 国际商业机器公司 用于进行项目共享的即时通信客户机和方法
US8402094B2 (en) 2006-08-11 2013-03-19 Facebook, Inc. Providing a newsfeed based on user affinity for entities and monitored actions in a social network environment
WO2007071003A1 (en) 2005-12-20 2007-06-28 Bce Inc. Method, system and apparatus for conveying personalized content to a viewer
EP1977332A2 (en) 2006-01-11 2008-10-08 Freecarmen.Com Electronic media download and distribution using real-time message matching and concatenation
UA98932C2 (ru) 2006-02-02 2012-07-10 Сейфкар Сефт Прівеншен Сістемс Лтд. Противоугонное устройство для транспортных средств и способ предотвращения похищения благодаря использованию устройства
KR100641791B1 (ko) 2006-02-14 2006-11-02 (주)올라웍스 디지털 데이터에 대한 태깅 방법 및 시스템
US7844482B1 (en) 2006-02-28 2010-11-30 Intuit Inc. Mechanism for collecting feedback from users
JP2007249821A (ja) 2006-03-17 2007-09-27 Nec Corp コンテンツ共有システム
EP2011017A4 (en) 2006-03-30 2010-07-07 Stanford Res Inst Int METHOD AND APPARATUS FOR ANNOTATING MULTIMEDIA STREAMS
WO2007113462A1 (en) 2006-03-30 2007-10-11 British Telecommunications Public Limited Company Content processing
US7668405B2 (en) 2006-04-07 2010-02-23 Eastman Kodak Company Forming connections between image collections
JP4616335B2 (ja) 2006-04-21 2011-01-19 三菱電機株式会社 認証サーバ装置及び端末装置及び認証システム及び認証方法
US7804426B2 (en) 2006-05-08 2010-09-28 Drivecam, Inc. System and method for selective review of event data
US8015237B2 (en) 2006-05-15 2011-09-06 Apple Inc. Processing of metadata content and media content received by a media distribution system
US7962634B2 (en) 2006-05-15 2011-06-14 Apple Inc. Submission of metadata content and media content to a media distribution system
JP4482941B2 (ja) 2006-05-18 2010-06-16 ブラザー工業株式会社 無線タグ通信システムの質問器、無線タグ回路素子、及び無線タグ通信システム
JPWO2007135871A1 (ja) 2006-05-23 2009-10-01 コニカミノルタホールディングス株式会社 情報管理システム
US8571580B2 (en) 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
US20070294177A1 (en) 2006-06-15 2007-12-20 William Volk Mobile content publishing system and method
US8065699B2 (en) 2006-06-20 2011-11-22 Symantec Corporation Providing rating information for an event based on user feedback
US8412773B1 (en) 2006-06-28 2013-04-02 Insors Integrated Communications Methods, systems and program products for initiating a process on data network
JP2008077445A (ja) 2006-09-22 2008-04-03 Fujifilm Corp 画像再生装置ならびにその制御方法およびその制御プログラム
US20080086368A1 (en) 2006-10-05 2008-04-10 Google Inc. Location Based, Content Targeted Online Advertising
US7916976B1 (en) 2006-10-05 2011-03-29 Kedikian Roland H Facial based image organization and retrieval method
JP4829762B2 (ja) 2006-12-06 2011-12-07 キヤノン株式会社 情報処理装置及びその制御方法、並びにプログラム
US8190634B2 (en) 2006-10-10 2012-05-29 Canon Kabushiki Kaisha Image display controlling apparatus, method of controlling image display, and storage medium
US7812998B2 (en) 2006-11-01 2010-10-12 Jason Miers Method of making an animated flipbook
US7698660B2 (en) 2006-11-13 2010-04-13 Microsoft Corporation Shared space for communicating information
US20080133697A1 (en) 2006-12-05 2008-06-05 Palm, Inc. Auto-blog from a mobile device
US9665597B2 (en) 2006-12-05 2017-05-30 Qualcomm Incorporated Method and system for processing images using time and location filters
JP5074752B2 (ja) 2006-12-07 2012-11-14 キヤノン株式会社 画像要求方法
US9122645B1 (en) 2006-12-20 2015-09-01 Qurio Holdings, Inc. Method and system for tagging within virtual groups
US20080184139A1 (en) 2007-01-29 2008-07-31 Brian Robert Stewart System and method for generating graphical user interfaces and graphical user interface models
US8599801B2 (en) 2007-02-01 2013-12-03 Yahoo! Inc. Collecting implicit information for determining context of event actions
US20080189175A1 (en) 2007-02-01 2008-08-07 Ic.Com, Inc. Method and System for In-Depth Advertising for Interactive Gaming
US7903904B1 (en) 2007-02-16 2011-03-08 Loeb Enterprises LLC. System and method for linking data related to a set of similar images
US8788529B2 (en) 2007-02-26 2014-07-22 Microsoft Corp. Information sharing between images
JP5164398B2 (ja) 2007-03-08 2013-03-21 キヤノン株式会社 情報処理装置、及びその制御方法
US7849481B2 (en) 2007-03-29 2010-12-07 Verizon Patent And Licensing Inc. Notification for interactive content
US8732161B2 (en) 2007-04-27 2014-05-20 The Regents Of The University Of California Event based organization and access of digital photos
EP2156384A4 (en) 2007-06-12 2011-08-03 Facebook Inc PERSONALIZED CONTENT OF A SOCIAL NETWORK APPLICATION
US7930420B2 (en) 2007-06-25 2011-04-19 University Of Southern California Source-based alert when streaming media of live event on computer network is of current interest and related feedback
JP4931707B2 (ja) 2007-06-26 2012-05-16 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 コンテンツ管理システム、及びコンテンツ管理方法
US20090199093A1 (en) 2007-09-04 2009-08-06 Tridib Chakravarty Image Capture And Sharing System and Method
US7917859B1 (en) 2007-09-21 2011-03-29 Adobe Systems Incorporated Dynamic user interface elements
US8700636B2 (en) 2010-09-16 2014-04-15 Facebook, Inc. Action clustering for news feeds
US8385950B1 (en) 2007-11-09 2013-02-26 Google Inc. Capturing and automatically uploading media content
CN101911693A (zh) 2007-12-03 2010-12-08 诺基亚公司 用于以iso基本媒体文件格式存储通知消息的系统和方法
KR20100120282A (ko) 2007-12-12 2010-11-15 구글 인코포레이티드 사용자-제작 컨텐츠 집합 및 공유
JP5045413B2 (ja) 2007-12-13 2012-10-10 日本電気株式会社 写真出力システム
US20090171873A1 (en) 2007-12-31 2009-07-02 Microsoft Corporation Determining the interestingness of content update notifications
WO2009082814A1 (en) 2007-12-31 2009-07-09 Ray Ganong Method, system, and computer program for identification and sharing of digital images with face signatures
US20090191902A1 (en) 2008-01-25 2009-07-30 John Osborne Text Scripting
US20090234876A1 (en) 2008-03-14 2009-09-17 Timothy Schigel Systems and methods for content sharing
JP5080524B2 (ja) 2008-03-26 2012-11-21 富士フイルム株式会社 画像シェアリング用保存装置、画像シェアリングおよび方法
JP2009259238A (ja) 2008-03-26 2009-11-05 Fujifilm Corp 画像シェアリング用保存装置、画像シェアリングシステムおよび方法
CN101990667B (zh) 2008-04-02 2013-08-28 谷歌公司 将自动人脸识别合并入数字图像集中的方法和装置
US8676001B2 (en) 2008-05-12 2014-03-18 Google Inc. Automatic discovery of popular landmarks
US8352493B2 (en) 2008-06-04 2013-01-08 Hw Llc Searchable health events directory
US8085982B1 (en) 2008-06-20 2011-12-27 Google Inc. Object tracking in video with visual constraints
EP2291995A1 (en) 2008-06-24 2011-03-09 Koninklijke Philips Electronics N.V. Image processing
US20100063961A1 (en) 2008-09-05 2010-03-11 Fotonauts, Inc. Reverse Tagging of Images in System for Managing and Sharing Digital Images
US8611677B2 (en) 2008-11-19 2013-12-17 Intellectual Ventures Fund 83 Llc Method for event-based semantic classification
US8442922B2 (en) 2008-12-24 2013-05-14 Strands, Inc. Sporting event image capture, processing and publication
US20100169153A1 (en) 2008-12-26 2010-07-01 Microsoft Corporation User-Adaptive Recommended Mobile Content
US8495074B2 (en) 2008-12-30 2013-07-23 Apple Inc. Effects application based on object clustering
RU2481720C2 (ru) 2008-12-31 2013-05-10 Эпл Инк. Потоковая передача данных в режиме реального времени или в режиме, близком к реальному времени
US8194136B1 (en) * 2009-01-26 2012-06-05 Amazon Technologies, Inc. Systems and methods for lens characterization
US8265658B2 (en) 2009-02-02 2012-09-11 Waldeck Technology, Llc System and method for automated location-based widgets
US8363888B2 (en) 2009-03-18 2013-01-29 Shutterfly, Inc. Proactive creation of photobooks
AU2010226395B2 (en) 2009-03-20 2016-10-13 Ad-Vantage Networks, Llc Methods and systems for searching, selecting, and displaying content
US20130124311A1 (en) 2009-03-23 2013-05-16 Sujai Sivanandan System and Method for Dynamic Integration of Advertisements in a Virtual Environment
JP5374209B2 (ja) 2009-03-30 2013-12-25 Necパーソナルコンピュータ株式会社 コンテンツ共有システム、コンテンツ共有サーバー及びプログラム
US9424549B2 (en) 2009-04-09 2016-08-23 New Jersey Institute Of Technology System and method for facilitating user-generated content relating to social networks
WO2010126412A1 (en) 2009-04-28 2010-11-04 Telefonaktiebolaget Lm Ericsson (Publ) Predicting presence of a mobile user equipment
CA2763148C (en) * 2009-05-20 2016-11-22 Redcliff Investments, L.L.C. Secure workflow and data management facility
US8868662B2 (en) 2009-06-10 2014-10-21 Silverpop Systems, Inc. Methods and systems for tracking shared content
RU2012101280A (ru) 2009-06-15 2013-07-27 Конинклейке Филипс Электроникс Н.В. Способ и устройство для выбора типичного изображения
WO2011001587A1 (ja) 2009-07-01 2011-01-06 日本電気株式会社 コンテンツ分類装置、コンテンツ分類方法及びコンテンツ分類プログラム
US8730397B1 (en) 2009-08-31 2014-05-20 Hewlett-Packard Development Company, L.P. Providing a photobook of video frame images
US8510383B2 (en) 2009-09-14 2013-08-13 Clixtr, Inc. Method for providing event based media streams
US8359285B1 (en) 2009-09-18 2013-01-22 Amazon Technologies, Inc. Generating item recommendations
US8396813B2 (en) 2009-09-22 2013-03-12 Xerox Corporation Knowledge-based method for using social networking site content in variable data applications
US20110099199A1 (en) 2009-10-27 2011-04-28 Thijs Stalenhoef Method and System of Detecting Events in Image Collections
JP5473551B2 (ja) * 2009-11-17 2014-04-16 富士フイルム株式会社 オートフォーカスシステム
US8571331B2 (en) 2009-11-30 2013-10-29 Xerox Corporation Content based image selection for automatic photo album generation
US20110137808A1 (en) 2009-12-04 2011-06-09 3Pd Analyzing survey results
US20110138003A1 (en) 2009-12-07 2011-06-09 Electronics And Telecommunications Research Institute System and method for providing offline based simple social network service
US8180146B2 (en) 2009-12-22 2012-05-15 The Chinese University Of Hong Kong Method and apparatus for recognizing and localizing landmarks from an image onto a map
US8862663B2 (en) 2009-12-27 2014-10-14 At&T Intellectual Property I, L.P. Method and system for providing a collaborative event-share service
US20110197200A1 (en) 2010-02-11 2011-08-11 Garmin Ltd. Decoding location information in content for use by a native mapping application
US20110211737A1 (en) 2010-03-01 2011-09-01 Microsoft Corporation Event Matching in Social Networks
US9189143B2 (en) 2010-04-30 2015-11-17 American Teleconferencing Services, Ltd. Sharing social networking content in a conference user interface
US20110276513A1 (en) 2010-05-10 2011-11-10 Avaya Inc. Method of automatic customer satisfaction monitoring through social media
US20120123867A1 (en) 2010-05-11 2012-05-17 Scott Hannan Location Event Advertising
US9152734B2 (en) 2010-05-24 2015-10-06 Iii Holdings 2, Llc Systems and methods for identifying intersections using content metadata
US20110295667A1 (en) 2010-06-01 2011-12-01 David Butler Interactive advertising System
US20120007995A1 (en) 2010-07-10 2012-01-12 Meredith Goldia Barrett Electronic flipbook systems and methods
US20120016948A1 (en) 2010-07-15 2012-01-19 Avaya Inc. Social network activity monitoring and automated reaction
US8478717B2 (en) 2010-07-26 2013-07-02 Oracle International Corporation Enterprise collaboration with reusable content
US8655854B2 (en) * 2010-07-27 2014-02-18 Avid Technology, Inc. Hierarchical multimedia program composition
US8270684B2 (en) 2010-07-27 2012-09-18 Google Inc. Automatic media sharing via shutter click
US20120030194A1 (en) 2010-07-29 2012-02-02 Research In Motion Limited Identification and scheduling of events on a communication device
US20120038665A1 (en) 2010-08-14 2012-02-16 H8it Inc. Systems and methods for graphing user interactions through user generated content
US8832093B2 (en) 2010-08-18 2014-09-09 Facebook, Inc. Dynamic place visibility in geo-social networking system
US8630494B1 (en) 2010-09-01 2014-01-14 Ikorongo Technology, LLC Method and system for sharing image content based on collection proximity
US20120214568A1 (en) 2010-09-13 2012-08-23 Herrmann Mark E Apparatus and method for supporting applications in a distributed network
KR101700365B1 (ko) 2010-09-17 2017-02-14 삼성전자주식회사 미디어 컨텐츠 관련 정보 제공 방법, 이 방법을 수행할 수 있는 디바이스와 서버 및 저장 매체
US9319227B2 (en) 2010-09-28 2016-04-19 T-Mobile Usa, Inc. Automatic content creation based on group collaboration spaces
US20120092685A1 (en) 2010-10-13 2012-04-19 Meredith Goldia Barrett Printed flipbook systems and methods
US20140108547A1 (en) 2010-10-21 2014-04-17 Bindu Rama Rao Automated blogging, skills portfolio management and syndication system
US8958822B2 (en) 2010-10-25 2015-02-17 Alohar Mobile Inc. Determining points of interest of a mobile user
US9143881B2 (en) 2010-10-25 2015-09-22 At&T Intellectual Property I, L.P. Providing interactive services to enhance information presentation experiences using wireless technologies
US8380039B2 (en) 2010-11-09 2013-02-19 Eastman Kodak Company Method for aligning different photo streams
US9009770B2 (en) 2010-11-11 2015-04-14 Turner Broadcasting System, Inc. Methods and systems for media consumption
US20120122554A1 (en) 2010-11-12 2012-05-17 Disney Enterprises, Inc. System and method for in-game interactive advertising
US9253615B2 (en) 2010-11-30 2016-02-02 Microsoft Technology Licensing, Llc Event planning within social networks
US8397982B2 (en) 2010-12-17 2013-03-19 Motorola Mobility Llc Method and device for recognition of docking stations
JP5713340B2 (ja) 2010-12-21 2015-05-07 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation イベントの通知を送信する方法、並びにそのコンピュータ及びコンピュータ・プログラム
US20120213404A1 (en) 2011-02-18 2012-08-23 Google Inc. Automatic event recognition and cross-user photo clustering
US20120221687A1 (en) 2011-02-27 2012-08-30 Broadcastr, Inc. Systems, Methods and Apparatus for Providing a Geotagged Media Experience
US8914483B1 (en) 2011-03-17 2014-12-16 Google Inc. System and method for event management and information sharing
US20120246003A1 (en) 2011-03-21 2012-09-27 Hart Gregory M Advertisement Service
US8831352B2 (en) 2011-04-04 2014-09-09 Microsoft Corporation Event determination from photos
CN102737062B (zh) 2011-04-15 2016-08-17 腾讯科技(深圳)有限公司 一种好友通知方法及装置
US8918463B2 (en) 2011-04-29 2014-12-23 Facebook, Inc. Automated event tagging
US10509466B1 (en) * 2011-05-11 2019-12-17 Snap Inc. Headwear with computer and optical element for use therewith and systems utilizing same
WO2012176069A1 (en) 2011-06-20 2012-12-27 Giulio Galliani Promotion via social currency
US9130763B2 (en) 2011-06-20 2015-09-08 Microsoft Technology Licensing, Llc Automatic sharing of event content by linking devices
US8627096B2 (en) * 2011-07-14 2014-01-07 Sensible Vision, Inc. System and method for providing secure access to an electronic device using both a screen gesture and facial biometrics
US20130030875A1 (en) * 2011-07-29 2013-01-31 Panasonic Corporation System and method for site abnormality recording and notification
US20130027561A1 (en) * 2011-07-29 2013-01-31 Panasonic Corporation System and method for improving site operations by detecting abnormalities
CN103907363A (zh) 2011-08-30 2014-07-02 诺基亚公司 用于管理基于位置的事件的呈现的方法和设备
US8725858B1 (en) 2011-08-31 2014-05-13 Google Inc. Method and system for selecting content based on a user's viral score
US8732255B2 (en) 2011-09-09 2014-05-20 Facebook, Inc. Dynamically created shared spaces
US8437500B1 (en) 2011-10-19 2013-05-07 Facebook Inc. Preferred images from captured video sequence
US9143601B2 (en) 2011-11-09 2015-09-22 Microsoft Technology Licensing, Llc Event-based media grouping, playback, and sharing
US9280545B2 (en) 2011-11-09 2016-03-08 Microsoft Technology Licensing, Llc Generating and updating event-based playback experiences
US8761523B2 (en) 2011-11-21 2014-06-24 Intellectual Ventures Fund 83 Llc Group method for making event-related media collection
US9552373B2 (en) * 2011-12-01 2017-01-24 Telefonaktiebolaget Lm Ericsson (Publ) Method for performing face recognition in a radio access network
US9942533B2 (en) 2011-12-02 2018-04-10 Provenance Asset Group Llc Method and apparatus for generating multi-channel video
US9111317B2 (en) 2011-12-21 2015-08-18 Facebook, Inc. Tagging posted content in a social networking system with media information
WO2013100898A1 (en) * 2011-12-27 2013-07-04 Intel Corporation Turing test based user authentication and user presence verification system, device, and method
US9519769B2 (en) * 2012-01-09 2016-12-13 Sensible Vision, Inc. System and method for disabling secure access to an electronic device using detection of a predetermined device orientation
CN103593594A (zh) * 2012-01-09 2014-02-19 明智视觉有限公司 用于使用脸部生物特征识别和屏幕手势来提供对电子设备的安全访问的系统和方法
USD696266S1 (en) 2012-01-19 2013-12-24 Pepsico, Inc. Display screen with graphical user interface
US8676814B2 (en) * 2012-02-16 2014-03-18 Yahoo! Inc. Automatic face annotation of images contained in media content
US8832264B2 (en) 2012-03-01 2014-09-09 Justin Pauley Network appliance for monitoring network requests for multimedia content
US9363220B2 (en) 2012-03-06 2016-06-07 Apple Inc. Context-sensitive help for image viewing and editing application
US20130339180A1 (en) 2012-03-16 2013-12-19 Ronald Aaron LaPierre Collection creator and organizer for social media
US20130305324A1 (en) * 2012-05-09 2013-11-14 International Business Machines Corporation Incremental Password Barriers to Prevent Malevolent Intrusions
US8713606B2 (en) 2012-05-14 2014-04-29 United Video Properties, Inc. Systems and methods for generating a user profile based customized media guide with user-generated content and non-user-generated content
US9116596B2 (en) 2012-06-10 2015-08-25 Apple Inc. Sharing images and comments across different devices
USD687461S1 (en) 2012-06-20 2013-08-06 Microsoft Corporation Display screen with icon
US9792585B2 (en) 2012-06-21 2017-10-17 Google Inc. Mobile application management
US8542879B1 (en) * 2012-06-26 2013-09-24 Google Inc. Facial recognition
US9391792B2 (en) 2012-06-27 2016-07-12 Google Inc. System and method for event content stream
US8873851B2 (en) 2012-06-29 2014-10-28 Intellectual Ventures Fund 83 Llc System for presenting high-interest-level images
US20140002644A1 (en) 2012-06-29 2014-01-02 Elena A. Fedorovskaya System for modifying images to increase interestingness
CN104737197B (zh) 2012-06-29 2019-12-06 高通股份有限公司 经由共享空间共享用户接口对象
US10567376B2 (en) * 2012-08-24 2020-02-18 Sensible Vision, Inc. System and method for providing secure access to an electronic device using multifactor authentication
US8799756B2 (en) 2012-09-28 2014-08-05 Interactive Memories, Inc. Systems and methods for generating autoflow of content based on image and user analysis as well as use case data for a media-based printable product
US8782158B2 (en) 2012-10-02 2014-07-15 Tanner Cropper System for sharing and tracking review of rich content, and methods associated therewith
US20150262208A1 (en) * 2012-10-04 2015-09-17 Bernt Erik Bjontegard Contextually intelligent communication systems and processes
US9418370B2 (en) 2012-10-23 2016-08-16 Google Inc. Obtaining event reviews
CN103780652B (zh) 2012-10-23 2017-12-01 腾讯科技(深圳)有限公司 一种微博资源分享的方法及系统
US9311310B2 (en) 2012-10-26 2016-04-12 Google Inc. System and method for grouping related photographs
US20140189010A1 (en) 2012-11-27 2014-07-03 ThymeVine LLC Scrapbooking
US10051103B1 (en) 2013-01-10 2018-08-14 Majen Tech, LLC Screen interface for a mobile device apparatus
US9087389B2 (en) 2013-02-15 2015-07-21 Bank Of America Corporation Reducing image size at point of capture
USD729846S1 (en) 2013-02-23 2015-05-19 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
US20140310351A1 (en) 2013-04-12 2014-10-16 Damon Danielson System and method for social networking based on family relationships
CN105122935B (zh) 2013-05-13 2019-01-22 英特尔公司 改进的媒体共享技术
USD730381S1 (en) 2013-06-24 2015-05-26 Tencent Technology (Shenzhen) Company Limited Portion of a display screen with animated graphical user interface
CN103338256B (zh) 2013-06-28 2015-09-23 腾讯科技(深圳)有限公司 图片共享方法、装置、服务器及系统
US9704137B2 (en) 2013-09-13 2017-07-11 Box, Inc. Simultaneous editing/accessing of content by collaborator invitation through a web-based or mobile application to a cloud-based collaboration platform
US10430986B2 (en) 2013-10-10 2019-10-01 Pushd, Inc. Clustering photographs for display on a digital picture frame
USD750131S1 (en) 2013-10-11 2016-02-23 Microsoft Corporation Display screen with transitional graphical user interface
US9690910B2 (en) 2013-11-11 2017-06-27 Dropbox, Inc. Systems and methods for monitoring and applying statistical data related to shareable links associated with content items stored in an online content management service
US9692840B2 (en) 2013-11-11 2017-06-27 Dropbox, Inc. Systems and methods for monitoring and applying statistical data related to shareable links associated with content items stored in an online content management service
US20150143256A1 (en) 2013-11-20 2015-05-21 Memoreze LLC Interface for Interaction with a Compendium by Members of a Group
US9288283B2 (en) 2013-12-04 2016-03-15 Dropbox, Inc. Systems and methods for managing shared content based on sharing profiles
US20170116498A1 (en) * 2013-12-04 2017-04-27 J Tech Solutions, Inc. Computer device and method executed by the computer device
US10290062B2 (en) 2013-12-04 2019-05-14 Michael Stewart Shunock System and method for utilizing annotated images to facilitate interactions between commercial and social users
US9292756B2 (en) * 2013-12-10 2016-03-22 Dropbox, Inc. Systems and methods for automated image cropping
US9423922B2 (en) 2013-12-24 2016-08-23 Dropbox, Inc. Systems and methods for creating shared virtual spaces
CA2863124A1 (en) 2014-01-03 2015-07-03 Investel Capital Corporation User content sharing system and method with automated external content integration
WO2015103615A1 (en) * 2014-01-06 2015-07-09 Yyesit, Llc Method and apparatus of surveillance system
US9420017B2 (en) 2014-01-10 2016-08-16 Kuhoo Edson Information organization, management, and processing system and methods
US10885104B2 (en) 2014-02-27 2021-01-05 Dropbox, Inc. Systems and methods for selecting content items to store and present locally on a user device
US8943140B1 (en) 2014-03-26 2015-01-27 Ankit Dilip Kothari Assign photographers on an event invite and automate requesting, uploading, and sharing of photos and videos for an event
USD756377S1 (en) 2014-04-17 2016-05-17 Google Inc. Portion of a display panel with an animated computer icon
US9600069B2 (en) 2014-05-09 2017-03-21 Google Inc. Systems and methods for discerning eye signals and continuous biometric identification
USD757749S1 (en) 2014-05-30 2016-05-31 Microsoft Corporation Display screen with animated graphical user interface
USD757790S1 (en) 2014-05-30 2016-05-31 Microsoft Corporation Display screen with animated graphical user interface
US9584874B1 (en) * 2014-06-16 2017-02-28 Juan José Farías Portal for collection and distribution of web-based audiovisual content blocks and creation of audience statistics
US9195912B1 (en) * 2014-07-24 2015-11-24 National Taipei University Of Technology Face annotation method and a face annotation system
WO2016012859A1 (en) * 2014-07-25 2016-01-28 Snapfile Ltd. System and method for securely managing integrity-verifiable and authenticable information
US10127662B1 (en) * 2014-08-11 2018-11-13 D.R. Systems, Inc. Systems and user interfaces for automated generation of matching 2D series of medical images and efficient annotation of matching 2D medical images
US10423495B1 (en) * 2014-09-08 2019-09-24 Veritas Technologies Llc Deduplication grouping
US20160149956A1 (en) * 2014-11-21 2016-05-26 Whip Networks, Inc. Media management and sharing system
CN104484342B (zh) 2014-11-24 2018-09-21 广州华多网络科技有限公司 一种联系人数据共享系统及方法、相关设备
CN108604383A (zh) * 2015-12-04 2018-09-28 奇跃公司 重新定位系统和方法
US10204116B2 (en) * 2016-02-08 2019-02-12 Corelogic Solutions, Llc Image metadata enrichment generator
US10298663B2 (en) * 2016-04-27 2019-05-21 International Business Machines Corporation Method for associating previously created social media data with an individual or entity
US20170344900A1 (en) * 2016-05-24 2017-11-30 Sultan Saad ALZAHRANI Method and apparatus for automated organization of visual-content media files according to preferences of a user
US10313470B2 (en) * 2016-09-06 2019-06-04 Integrated Device Technology, Inc. Hierarchical caching and analytics
US10325372B2 (en) * 2016-12-20 2019-06-18 Amazon Technologies, Inc. Intelligent auto-cropping of images
US20180190024A1 (en) * 2016-12-30 2018-07-05 Therese E. Dugan Space based correlation to augment user experience

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102025654A (zh) * 2009-09-15 2011-04-20 联发科技股份有限公司 便携设备及图片共享方法
US20110208822A1 (en) * 2010-02-22 2011-08-25 Yogesh Chunilal Rathod Method and system for customized, contextual, dynamic and unified communication, zero click advertisement and prospective customers search engine
CN103635892A (zh) * 2011-07-07 2014-03-12 索尼电脑娱乐美国公司 自动创建用于分享照片的群体
US20130156275A1 (en) * 2011-12-20 2013-06-20 Matthew W. Amacker Techniques for grouping images
US8798401B1 (en) * 2012-06-15 2014-08-05 Shutterfly, Inc. Image sharing with facial recognition models
WO2014178853A1 (en) * 2013-04-30 2014-11-06 Hewlett-Packard Development Company, L.P. Ad-hoc, face-recognition-driven content sharing
US20150036000A1 (en) * 2013-07-31 2015-02-05 Lg Electronics Inc. Mobile device and method of controlling therefor
US9338242B1 (en) * 2013-09-09 2016-05-10 Amazon Technologies, Inc. Processes for generating content sharing recommendations
CN105531701A (zh) * 2014-07-04 2016-04-27 微软技术许可有限责任公司 个性化趋势图像搜索建议
CN104317932A (zh) * 2014-10-31 2015-01-28 小米科技有限责任公司 照片分享方法及装置
CN104834665A (zh) * 2015-02-28 2015-08-12 小米科技有限责任公司 目标图片获取方法及装置

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111857498A (zh) * 2020-06-30 2020-10-30 维沃移动通信有限公司 数据交互方法和装置、及电子设备
CN111857498B (zh) * 2020-06-30 2022-05-20 维沃移动通信有限公司 数据交互方法和装置、及电子设备
CN113626626A (zh) * 2021-07-08 2021-11-09 支付宝(杭州)信息技术有限公司 一种多人共享的照片存储方法、装置以及设备
CN113626626B (zh) * 2021-07-08 2023-12-12 支付宝(中国)网络技术有限公司 一种多人共享的照片存储方法、装置以及设备
CN113592731A (zh) * 2021-07-19 2021-11-02 维沃移动通信(杭州)有限公司 图像处理方法、装置、电子设备和存储介质

Also Published As

Publication number Publication date
US20190394276A1 (en) 2019-12-26
US20240007528A1 (en) 2024-01-04
US11212348B2 (en) 2021-12-28
US20180337994A1 (en) 2018-11-22
WO2018212815A1 (en) 2018-11-22
EP3568787B1 (en) 2024-04-10
US20220094745A1 (en) 2022-03-24
EP3568787A1 (en) 2019-11-20
US11778028B2 (en) 2023-10-03
CN110770717B (zh) 2024-04-16
US10432728B2 (en) 2019-10-01

Similar Documents

Publication Publication Date Title
US11778028B2 (en) Automatic image sharing with designated users over a communication network
US11146520B2 (en) Sharing images and image albums over a communication network
US11829404B2 (en) Functional image archiving
US11209442B2 (en) Image selection suggestions
CN110678861B (zh) 图像选择建议
CN114080615A (zh) 反映用户偏好的基于机器学习的图像压缩设置
US11783521B2 (en) Automatic generation of people groups and image-based creations
US11539647B1 (en) Message thread media gallery
CN116636190A (zh) 用于重新展示内容项的消息收发系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant