CN110710232A - 在相机取景器显示内容中用增强现实元素来促使网络系统通信的创建 - Google Patents
在相机取景器显示内容中用增强现实元素来促使网络系统通信的创建 Download PDFInfo
- Publication number
- CN110710232A CN110710232A CN201780091724.3A CN201780091724A CN110710232A CN 110710232 A CN110710232 A CN 110710232A CN 201780091724 A CN201780091724 A CN 201780091724A CN 110710232 A CN110710232 A CN 110710232A
- Authority
- CN
- China
- Prior art keywords
- augmented reality
- user
- mobile computing
- computing device
- network system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
- H04L51/10—Multimedia information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
- H04W4/02—Services making use of location information
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
- H04L51/52—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail for supporting social networking services
Abstract
本公开针对用于结合移动计算设备的相机取景器显示内容来利用增强现实元素的系统和方法。例如,本文描述的系统和方法检测移动计算设备的特征,并直接在相机取景器显示内容中提供对应于检测到的特征的增强现实元素。因此,用户可以与相机取景器显示内容中的所提供的增强现实元素进行交互,以编写网络系统帖子、查看朋友的位置、订购并支付商品等。
Description
背景
网络系统越来越依赖于视觉媒体。例如,网络系统用户经常在网络系统帖子中包含数字照片和视频,以使他们的帖子更加引人注目和有吸引力。例如,网络系统用户可以上传网络系统帖子,该帖子包括来自新餐馆的一道菜的图片以及详细描述用户如何地享受这道菜的文本。在另一示例中,网络系统用户可以向他的社交网络“朋友”发送他的当前位置的图片。在另一示例中,第三方(例如,新闻媒体、体育广播公司、企业或供应商)可以将与事件相关的媒体上传到网络系统,使得网络系统用户可以读取附加信息、被引导到网站以订购事件商品、听事件评论等。
依赖于网络系统帖子内的图片和视频来传递信息不可避免地导致了可在网络系统内访问的信息与网络系统用户在现实生活中的体验之间的脱节。例如,如果网络系统用户正在观看棒球比赛,则他必须访问网络系统,以便阅读与棒球比赛相关的其他网络系统用户的帖子。因此,用户必须在棒球比赛和他的计算设备(例如,移动电话、平板电脑、智能手表等)之间分散他的注意力。在另一示例中,当一群朋友在拥挤的俱乐部处利用社交网络系统彼此互动时,他们必须不断地查看和发送网络系统消息,从而将他们的注意力从他们当前的环境或同伴上移开。
因此,需要一种使网络系统用户能够以不将用户从现实生活事件中分散注意力的方式体验网络系统信息和功能的系统。
概述
本文描述的一个或更多个实施例利用用于在用户的移动计算设备的相机取景器显示内容(display)中显示的增强现实元素内提供网络系统内容的系统和方法,提供了益处和/或解决了本领域中的前述或其他问题中的一个或更多个。例如,本文描述的系统和方法生成表示网络系统内容的增强现实元素,该网络系统内容与用户通过他的移动计算设备的相机取景器显示内容正在观看的内容相关。因此,在一个或更多个实施例中,用户可以通过他的相机取景器显示内容来观看与现实生活场景相关的网络系统内容。
此外,本文描述的一个或更多个实施例利用用于使网络系统用户能够通过用户的移动计算设备的相机取景器显示内容来创建网络系统增强现实元素的系统和方法,提供了益处和/或解决了本领域中的前述或其他问题中的一个或更多个。例如,本文描述的系统和方法使网络系统用户能够创建与位置相关的增强现实元素,而不是简单地写与该位置相关的网络系统帖子。因此,本文描述的系统和方法可以将用户的增强现实元素提供给在相同位置处利用他们的移动计算设备相机的其他网络系统用户。
本申请的附加特征和优点将在随后的描述中阐述,并且在某种程度上根据描述将是明显的,或者可以通过这些示例性实施例的实践而被获知。这些实施例的特征和优点可以通过在所附权利要求中特别指出的手段和组合来实现和获得。根据随后的描述和所附权利要求,这些和其他特征将变得更充分明显,或者可以通过下文阐述的这些示例性实施例的实践来被获知。
根据本发明的实施例在涉及方法、存储介质、系统和计算机程序产品的所附权利要求中被具体公开,其中,在一个权利要求类别(例如方法)中提到的任何特征也可以在另一个权利要求类别(例如系统)中被要求保护。在所附权利要求中的从属关系或往回引用仅为了形式原因而被选择。然而,也可以要求保护由对任何前面权利要求的有意往回引用(特别是多项从属关系)而产生的任何主题,使得权利要求及其特征的任何组合被公开并可被要求保护,而不考虑在所附权利要求中选择的从属关系。可以被要求保护的主题不仅包括如在所附权利要求中阐述的特征的组合,而且还包括在权利要求中的特征的任何其他组合,其中,在权利要求中提到的每个特征可以与在权利要求中的任何其他特征或其他特征的组合相结合。此外,本文描述或描绘的实施例和特征中的任一个可以在单独的权利要求中和/或以与本文描述或描绘的任何实施例或特征的任何组合或以与所附权利要求的任何特征的任何组合被要求保护。
在根据本发明的实施例中,一种方法可以包括:
确定网络系统用户的移动计算设备的多个特征;
基于移动计算设备的多个特征,在移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素;以及
响应于接收到的与一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。
确定移动计算设备的多个特征可以包括确定与移动计算设备相关联的位置信息。
确定移动计算设备的多个特征可以包括识别与移动计算设备的用户相关联的网络系统唯一标识符。
在根据本发明的实施例中,一种方法可以包括:
向网络系统提供移动计算设备的多个特征;以及
从网络系统接收对应于移动计算设备的多个特征中的一个或更多个特征的增强现实元素的集合。
在根据本发明的实施例中,一种方法可以包括识别所述增强现实元素的集合的子集,其中,识别子集可以包括:
为所述增强现实元素的集合中的每一个计算分数;以及
其中,增强现实元素的子集包括阈值数量的得分最高的增强现实元素。
为所述增强现实元素的集合中的每一个计算分数可以包括,对于所述增强现实元素的集合中的每个增强现实元素,将加权值添加到该增强现实元素的分数,其中,加权值表示与该增强现实元素相关联的元数据和与移动计算设备相关联的多个显示因素之间的相关性。
多个显示因素可以包括移动计算设备的显示器的分辨率、从相机取景器显示内容获取的图像帧是否是拥挤的、以及移动计算设备的用户是否可能与增强现实元素交互。
在相机取景器显示内容内呈现一个或更多个增强现实元素可以包括呈现增强现实元素的子集。
在移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素可以包括呈现与移动计算设备的位置对应的第三方增强现实元素。
在根据本发明的实施例中,一种方法可以包括接收与一个或更多个增强现实元素中的至少一个的交互,其中,接收交互可以包括接收与移动计算设备的相机取景器显示内容的触摸交互。
在根据本发明的实施例中,一种方法可以包括响应于接收到与一个或更多个增强现实元素中的至少一个的交互,在相机取景器显示内容内提供一个或更多个支付工具。
在根据本发明的实施例中,一种方法可以包括:
检测与相机取景器显示内容相关的滑动触摸手势;以及
响应于检测到的滑动触摸手势,发送编写的网络系统帖子。
在根据本发明的实施例中,一种系统可以包括:
至少一个处理器;以及
至少一个非暂时性计算机可读存储介质,在其上存储指令,该指令当由至少一个处理器执行时使系统执行以下项:
确定网络系统用户的移动计算设备的多个特征;
基于移动计算设备的多个特征,在移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素;以及
响应于接收到的与一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。
在根据本发明的实施例中,一种系统可以包括指令,这些指令使得系统执行以下项:
向网络系统提供移动计算设备的多个特征;以及
从网络系统接收对应于移动计算设备的多个特征中的一个或更多个特征的增强现实元素的集合。
在根据本发明的实施例中,一种系统可以包括指令,这些指令使得系统执行以下项:
识别所述增强现实元素的集合的子集,其中,识别子集包括:
为所述增强现实元素的集合中的每一个计算分数;以及
其中,增强现实元素的子集包括阈值数量的得分最高的增强现实元素。
为所述增强现实元素的集合中的每一个计算分数可以包括,对于所述增强现实元素的集合中的每个增强现实元素,将加权值添加到该增强现实元素的分数,其中,加权值表示与该增强现实元素相关联的元数据和与移动计算设备相关联的多个显示因素之间的相关性。
在相机取景器显示内容内呈现一个或更多个增强现实元素可以包括呈现增强现实元素的子集。
在根据本发明的实施例中,一种系统可以包括指令,这些指令使得系统执行以下项:
接收与一个或更多个增强现实元素中的至少一个的交互,其中,接收交互包括接收与移动计算设备的相机取景器显示内容的触摸交互;以及
响应于接收到与一个或更多个增强现实元素中的至少一个的交互,在相机取景器显示内容内提供一个或更多个支付工具。
在根据本发明的实施例中,一种系统可以包括指令,这些指令使得系统执行以下项:
检测与相机取景器显示内容相关的滑动触摸手势;以及
响应于检测到的滑动触摸手势,发送编写的网络系统帖子。
在根据本发明的实施例中,非暂时性计算机可读介质可以在其上存储指令,这些指令当由至少一个处理器执行时,可以使得计算机系统执行以下项:
确定网络系统用户的移动计算设备的多个特征;
基于移动计算设备的多个特征,在移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素;以及
响应于接收到的与一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。
在根据本发明的实施例中,一种方法可以包括:
由一个或更多个服务器设备维护多个增强现实元素;
从移动计算设备接收特征数据,其中,特征数据包括与移动计算设备相关联的特征数据和与移动计算设备的用户相关联的特征数据;
从所维护的多个增强现实元素中识别对应于接收到的特征数据的一个或更多个增强现实元素;以及
向移动计算设备提供所识别的一个或更多个增强现实元素,并且用于在移动计算设备的相机取景器显示内容内显示。
维护多个增强现实元素还可以包括维护多个增强现实元素中的每一个的元数据,其中,多个增强现实元素中的每一个的元数据包括针对每个增强现实元素的映射要求以及特定于每个增强现实元素的网络系统信息。
与移动计算设备相关联的特征数据可以包括与移动计算设备相关联的位置信息。
与移动计算设备的用户相关联的特征数据可以包括与移动计算设备的用户相关联的网络系统唯一标识符、与移动计算设备的用户相关联的应用程序使用历史、或与移动计算设备的用户相关联的联系信息中的一项或更多项。
识别对应于接收到的特征数据的一个或更多个增强现实元素可以包括:
分析接收到的特征数据以确定移动计算设备的位置;以及
识别对应于移动计算设备的位置的一个或更多个增强现实元素。
分析接收到的特征数据以确定移动计算设备的位置可以包括分析GPS信息、WiFi信息、网络系统信息或因特网搜索中的一项或更多项,以确定移动计算设备的位置。
识别对应于接收到的特征数据的一个或更多个增强现实元素还可以包括:
分析接收到的特征数据以确定用户特征,该用户特征包括与移动计算设备的用户相关联的人口统计信息、与移动计算设备的用户相关联的网络系统简档信息、与移动计算设备的用户相关联的网络系统活动历史、以及与移动计算设备的用户的一个或更多个共同用户相关联的网络系统活动历史;以及
识别对应于所确定的用户特征的一个或更多个增强现实元素。
识别对应于接收到的特征数据的一个或更多个增强现实元素还可以包括为一个或更多个增强现实元素中的每一个计算分数,该分数表示增强现实元素和接收到的特征数据之间的相关强度。
在根据本发明的实施例中,一种方法可以包括:
接收表示遗留增强现实元素的数据,其中,该数据包括遗留增强现实元素的内容以及与遗留增强现实元素相关联的锚定位置;
生成包括接收到的数据的遗留增强现实元素;
检测与移动计算设备的用户相关联的网络系统用户何时进入锚定位置;以及
向网络系统用户提供遗留增强现实元素。
在根据本发明的实施例中,一种方法可以包括:
从移动计算设备向网络系统提供特征数据,其中,特征数据包括与移动计算设备相关联的特征数据和与移动计算设备的用户相关联的特征数据;
从网络系统接收对应于所提供的特征数据的一个或更多个增强现实元素;
基于对多个显示因素的分析,确定接收到的一个或更多个增强现实元素的子集;以及
在移动计算设备的相机取景器显示内容上显示接收到的一个或更多个增强现实元素的子集。
与移动计算设备相关联的特征数据可以包括与移动计算设备相关联的位置信息。
与移动计算设备的用户相关联的特征数据可以包括与移动计算设备的用户相关联的网络系统唯一标识符、与移动计算设备的用户相关联的应用程序使用历史、或与移动计算设备的用户相关联的联系信息中的一项或更多项。
对应于所提供的特征数据的一个或更多个增强现实元素可以包括与移动计算设备相关联的位置信息关联的增强现实元素、与移动计算设备的用户相关联的人口统计信息关联的增强现实元素、或者与移动计算设备的用户相关联的网络系统信息关联的增强现实元素中的一个或更多个。
在根据本发明的实施例中,一种方法可以包括识别多个显示因素,其中,多个显示因素包括以下中的一个或更多个:相机取景器显示内容的分辨率、从显示在相机取景器显示内容内的图像馈源中获取的图像帧中的拥挤程度、对与移动计算设备的用户相关联的网络系统信息的分析、或者对与一个或更多个接收到的增强现实元素中的每一个相关联的元数据的分析。
在根据本发明的实施例中,一种方法可以包括将接收到的一个或更多个增强现实元素的子集中的每一个映射到相机取景器显示内容内的点。
在根据本发明的实施例中,一种方法可以包括:
检测移动计算设备的移动;以及
更新相机取景器显示内容,使得接收到的一个或更多个增强现实元素的子集中的每一个保持被锚定到与该增强现实元素相关联的映射点。
在根据本发明的实施例中,一种方法可以包括:
检测与接收到的一个或更多个增强现实元素的显示子集中的特定增强现实元素的交互;以及
将移动计算设备的显示内容重定向到包括与特定增强现实元素相关联的信息的网络系统应用GUI。
在根据本发明的实施例中,一种方法可以包括:
基于与子集中的每个增强现实元素相关联的元数据,将增强现实元素的子集组织成一个或更多个类别;以及
其中,显示接收到的一个或更多个增强现实元素的子集包括一次仅在相机取景器显示内容内显示增强现实元素的一个或更多个类别中的一个类别。
在根据本发明的实施例中,一种系统可以包括:
至少一个处理器;以及
至少一个非暂时性计算机可读存储介质,在其上存储指令,该指令当由至少一个处理器执行时使系统执行以下项:
维护多个增强现实元素;
从移动计算设备接收多个特征数据,其中,特征数据包括与移动计算设备相关联的特征数据和与移动计算设备的用户相关联的特征数据;
从所维护的多个增强现实元素中识别对应于接收到的特征数据的一个或更多个增强现实元素;以及
向移动计算设备提供所识别的一个或更多个增强现实元素,并且用于在移动计算设备的相机取景器显示内容内显示。
当由至少一个处理器执行时使系统识别对应于接收到的特征数据的一个或更多个增强现实元素的指令可以包括使系统执行以下项的指令:
分析接收到的特征数据以确定移动计算设备的位置;以及
识别对应于移动计算设备的位置的一个或更多个增强现实元素。
在根据本发明的实施例中,一个或更多个计算机可读非暂时性存储介质可以体现软件,该软件在被执行时可操作来执行根据本发明或任何上面提到的实施例的方法。
在根据本发明的实施例中,一种系统可以包括:一个或更多个处理器;以及耦合到处理器并包括由处理器可执行的指令的至少一个存储器,处理器当执行指令时可操作来执行根据本发明或任何上面提到的实施例的方法。
在根据本发明的实施例中,计算机程序产品优选地包括计算机可读非暂时性存储介质,计算机程序产品当在数据处理系统上被执行时可以可操作来执行根据本发明或任何上面提到的实施例的方法。
附图简述
如下面简要描述的,本公开通过附图的使用而描述了具有附加的特异性和细节的一个或更多个实施例。
图1示出了根据一个或更多个实施例的增强现实系统的示意图。
图2示出了根据一个或更多个实施例的增强现实系统的详细示意图。
图3A-3C示出了示出增强现实系统的一个实施例的各种特征的一系列图形用户界面。
图4A-4D示出了示出增强现实系统的一个实施例的各种特征的一系列图形用户界面。
图5示出了示出增强现实系统的一个实施例的各种特征的图形用户界面。
图6A-6D示出了示出增强现实系统的一个实施例的各种特征的一系列图形用户界面。
图7A-7B示出了示出增强现实系统的一个实施例的各种特征的一系列图形用户界面。
图8示出了根据一个或更多个实施例的在利用增强现实元素编写网络系统帖子的方法中的一系列动作的流程图。
图9示出了根据一个或更多个实施例的在提供表示网络系统内容的增强现实元素的方法中的一系列动作的流程图。
图10示出了根据一个或更多个实施例的在显示表示网络系统内容的增强现实元素的方法中的一系列动作的流程图。
图11示出了根据一个或更多个实施例的示例性计算设备的框图。
图12是根据一个或更多个实施例的社交网络系统的示例网络环境。
图13示出了根据一个或更多个实施例的社交图。
详细描述
本文描述的一个或更多个实施例利用用于结合移动计算设备的相机取景器显示内容来利用增强现实元素以表示和/或创建网络系统内容(例如,社交网络帖子或消息)的系统和方法,提供了益处和/或解决了本领域中的前述或其他问题中的一个或更多个。例如,通过利用增强现实系统,网络系统用户可以直接通过他的或她的移动计算设备的相机取景器显示内容来观看与网络系统相关联的增强现实元素并与之交互。通过利用在相机取景器显示内容内的这些增强现实元素,用户可以生成网络系统帖子、与其他网络系统用户互动、查看网络系统内容、创建附加的增强现实元素等等。
如本文所使用的,“增强现实”是指为用户创建复合视图的系统,该复合视图包括与用户的现实生活视图相关联的计算机生成的元素。例如,在一个或更多个实施例中,增强现实系统将计算机生成的元素覆盖在由用户的计算设备(例如,移动设备)的相机捕获的用户的现实生活环境的显示内容上。同样,如本文所使用的,“增强现实元素”是指本文描述的增强现实系统所利用的计算机生成的元素。在一个或更多个实施例中,增强现实元素可以是数字照片、数字视频、计算机生成的(例如,二维或三维形式的)图像、录制的声音、文本滚动条、语音气泡、交互元素(例如,文本输入框)、动画、标签等。在至少一个实施例中,增强现实系统将增强现实元素“锚定”或映射到在相机取景器显示内容内的与位置、人或对象相关联的点,使得如果所述位置、人或对象在显示内容内移动,则增强现实元素也移动。
在一个示例中,本文描述的增强现实系统检测与网络系统用户和网络系统用户的移动计算设备相关联的各种特征。响应于检测到这些各种特征,增强现实系统识别增强现实元素,并将识别出的增强现实元素作为相机取景器显示内容覆盖图提供给用户的移动计算设备。如本文所使用的,“相机取景器显示内容”是指由用户的移动计算设备呈现的显示内容,其包括由移动计算设备的相机提供的图像帧的图像流。例如,相机取景器显示内容实时示出移动计算设备相机正在“看什么”。
在一个或更多个实施例中,增强现实系统可以检测网络系统用户的特征,包括用户的性别、职业、爱好、网络系统活动历史、网络系统简档信息等。此外,增强现实系统可以检测用户的移动计算设备的特征,包括(例如,基于GPS数据、Wi-Fi数据等的)移动计算设备的位置、(例如,基于移动计算设备的陀螺仪或相机的)移动计算设备的方位等。另外,如果移动计算设备的相机被激活,则增强现实系统还可以利用计算机视觉技术来分析和确定被相机捕获的图像的特征(例如,以检测对象、人等)。
响应于检测到这些用户特征和移动计算设备特征,增强现实系统可以识别对应于所检测到的特征的增强现实元素。例如,响应于检测到网络系统用户是近三十岁的男性棒球爱好者且他的移动计算设备位于棒球馆,增强现实系统可以识别促使用户编写关于他正在参加的棒球比赛的网络系统帖子的增强现实元素。增强现实系统然后可以在用户的移动计算设备的相机取景器显示内容内呈现所识别的增强现实元素。因此,用户可以与所提供的增强现实元素进行交互,以编写并提交关于棒球比赛的网络系统帖子。
除了向网络系统用户提供增强现实元素之外,增强现实系统还使得网络系统用户能够创建增强现实元素。例如,增强现实系统可以通过用户的相机取景器显示内容来提供一系列可选元素,这些可选元素帮助用户创建其他网络系统用户可以与之交互并看到的增强现实元素。例如,在说明性实施例中,网络系统用户可能希望经由网络系统来推荐特定的餐馆。增强现实系统可以在用户的相机取景器显示内容内向用户提供交互式的元素,该交互式的元素使得用户能够创建体现用户对该餐馆的推荐的增强现实元素。过后,当另一网络系统用户(例如,用户的网络系统“朋友”之一)来到餐馆时,增强现实系统可以向该网络系统用户提供所创建的增强现实元素。
在另一示例中,增强现实系统使得网络系统用户可以在拥挤的位置中容易地找到彼此。例如,增强现实系统可以生成作为用户化身(例如,用户的计算机生成的表示)出现的增强现实元素。在一个或更多个实施例中,增强现实系统可以在网络系统用户的相机取景器显示内容内显示化身,使得化身出现在相关联的用户位于拥挤空间中的位置。因此,当用户的网络系统朋友之一在拥挤的空间中全方位移动他的或她的相机取景器显示内容时,该朋友可以容易地看到化身并定位相关联的用户。
除了经由覆盖在用户的相机取景器显示内容上的增强现实元素来提供网络系统内容之外,增强现实系统还提供合作的第三方内容。例如,增强现实系统可以生成相机取景器显示内容覆盖图,该覆盖图包括来自应用于用户的位置的第三方的增强现实元素。为了说明,响应于确定网络系统用户正在观看棒球比赛,增强现实系统可以识别来自体育广播公司的第三方内容。增强现实系统然后可以生成包括该第三方内容的增强现实元素,并创建包括所生成的元素的相机取景器显示内容,使得增强现实元素通过用户的相机取景器显示内容增强他对棒球比赛的观看。
在另一实施例中,增强现实系统可以响应于用户动作而自动地生成增强现实元素。例如,在一个或更多个实施例中,增强现实系统可以检测通过移动计算设备的相机捕获的由网络系统用户做出的手势。响应于检测到的手势,增强现实系统可以生成增强现实元素,且然后可以在预定的时间量内将生成的元素锚定到用户。因此,在预定时间量的剩余时间内,每当用户被显示在相机取景器显示内容上或被显示在照片或视频中时,增强现实系统将把生成的增强现实元素添加到显示内容或捕获的媒体中。
图1示出了用于实现增强现实系统100的环境的示例框图。如图1所示,增强现实系统100包括移动计算设备102a、102b,服务器设备106,以及第三方服务器112,它们通过网络110被通信地耦合。如图1所示,移动计算设备102a、102b分别包括网络系统应用程序104a、104b。另外如图1所示,服务器设备106包括网络系统108。
移动计算设备102a、102b,服务器设备106,以及第三方服务器112经由网络110进行通信,网络110可以包括一个或更多个网络,并且可以使用适于传输数据和/或通信信号的一个或更多个通信平台或技术。在一个或更多个实施例中,网络110包括因特网或万维网。然而,网络110可以包括使用各种通信技术和协议的各种其他类型的网络,例如公司内联网、虚拟专用网(“VPN”)、局域网(“LAN”)、无线局域网(“WLAN”)、蜂窝网络、广域网(“WAN”)、城域网(“MAN”)或两个或更多个这样的网络的组合。尽管图1示出了移动计算设备102a、102b,服务器设备106,第三方服务器112,以及网络110的特定布置,但是各种另外的布置是可能的。例如,移动计算设备102a、102b可以绕过网络110,直接与网络系统108通信。与网络110相关的另外的细节在下面参考图12进行解释。
在一个或更多个实施例中,移动计算设备102a、102b是各种类型的计算设备中的一种或更多种。例如,在一个或更多个实施例中,移动计算设备102a、102b包括诸如移动电话、智能手机、PDA、平板计算机或膝上型计算机的移动设备。在替代实施例中,移动计算设备102a、102b可以包括其他计算设备,例如台式计算机、服务器或另一类型的计算设备。关于移动计算设备102a、102b的另外的细节在下面参照图11进行讨论。
在至少一个实施例中,移动计算设备102a、102b的用户经由网络系统108是共同用户(co-user)。例如,在至少一个实施例中,移动计算设备102a、102b的用户经由网络系统108是“朋友”,使得网络系统108将由移动计算设备102a的用户提交的帖子添加到移动计算设备102b的用户的消息动态(newsfeed),反之亦然。在一个或更多个实施例中,移动计算设备102a、102b的用户分别经由安装在移动计算设备102a、102b上的网络系统应用程序104a、104b与网络系统108交互。
如上面所讨论的,参考图1阐述的系统和方法便利经由网络系统108使用增强现实元素。图2示出了示出增强现实系统100的示例实施例的详细示意图。如图2所示,增强现实系统100包括但不限于移动计算设备102a、102b,服务器设备106,以及第三方服务器112。在一个或更多个实施例中,移动计算设备102a、102b分别包括网络系统应用程序104a、104b。如图2所示,网络系统应用程序104a、104b包括增强现实管理器202a、202b,显示管理器204a、204b,用户输入检测器206a、206b,以及包括网络系统数据210a、210b的数据储存器208a、208a。
另外,服务器设备106承载(host)网络系统108。在一个或更多个实施例中,网络系统108包括通信管理器212、增强现实元素识别器214、增强现实元素生成器216和包括增强现实元素数据220的数据储存器218。
在至少一个实施例中,增强现实系统100访问网络系统108,以便识别和分析网络系统用户数据。因此,网络系统108包括用于表示多个用户、动作和概念的社交图222。在一个或更多个实施例中,社交图222包括节点信息224和边信息226。社交图222的节点信息224存储包括例如用户的节点和储存库的节点的信息。社交图222的边信息226存储包括存在于网络系统108内的节点和/或动作之间的关系的信息。关于网络系统108、社交图222、边和节点的进一步细节在下面参照图12和图13给出。
网络系统108的组件212-226中的每一个以及网络系统应用程序104a的组件202a至210a、网络系统应用程序104b的组件202b至210b可以使用包括至少一个处理器的计算设备来实现,该处理器执行使得增强现实系统100执行本文描述的过程的指令。在一些实施例中,本文描述的网络系统组件可以由服务器设备106实现,或者在多个服务器设备上实现。另外或替代地,一个或更多个服务器设备和一个或更多个移动计算设备的组合可以实现网络系统108和/或网络系统应用程序104a、104b的组件。另外或替代地,本文描述的组件可以包括计算机可执行指令和硬件的组合。
在一个或更多个实施例中,网络系统应用程序104a、104b是安装在移动计算设备102a、102b上的本机应用程序。例如,网络系统应用程序104a、104b可以是安装在移动设备(例如智能电话或平板计算机)上并在移动设备(例如智能电话或平板计算机)上运行的移动应用程序。替代地,网络系统应用程序104a、104b可以是桌面应用程序、微件(widget)或其他形式的本机计算机程序。此外,网络系统应用程序104a、104b可以是分别由移动计算设备102a、102b访问的远程应用程序。例如,网络系统应用程序104a、104b可以是分别在移动计算设备102a、102b的web浏览器内执行的web应用程序。
如上面提到的,且如图2所示,网络系统应用程序104a、104b包括增强现实管理器202a、202b。在一个或更多个实施例中,增强现实管理器202a、202b与网络系统108进行交互,以便经由移动计算设备102a、102b的相机取景器显示内容来提供增强现实元素。例如,在至少一个实施例中,且如下面将更详细描述的,网络系统108维护和/或生成增强现实元素的储存库。因此,响应于从增强现实管理器202a、202b接收到与移动计算设备102a、102b的特征相关的数据,网络系统108向增强现实管理器202a、202b提供增强现实元素的集合。出于各种原因,增强现实管理器202a、202b可能(例如,由于显示限制等)不能够显示由网络系统108提供的每个增强现实元素。因此,在至少一个实施例中,增强现实管理器202a、202b然后执行分析,以确定要经由移动计算设备102a、102b的相机取景器显示内容呈现给用户的所提供的增强现实元素的集合的子集。
因此,在一个或更多个实施例中,增强现实管理器202a、202b分别收集与移动计算设备102a、102b相关联的特征数据。例如,增强现实管理器202a、202b收集详细描述移动计算设备102a、102b的位置的信息。在至少一个实施例中,增强现实管理器202a、202b收集包括GPS信息和/或WiFi信息的位置信息。
另外,增强现实管理器202a、202b收集与移动计算设备102a、102b的用户相关的特征数据。例如,在至少一个实施例中,移动计算设备102a、102b的用户经由网络系统应用程序104a、104b登录到网络系统108,以便利用增强现实系统100的任何特征。因此,在至少一个实施例中,增强现实管理器202a、202b识别用户的唯一网络系统用户标识符。另外,增强现实管理器202a、202b可以收集附加的用户信息,包括但不限于应用程序使用历史、移动计算设备使用日志、联系信息等。在至少一个实施例中,增强现实管理器202a、202b仅响应于用户专门选择了增强现实系统100的那些特性而收集用户信息,以便保护用户的隐私。
此外,增强现实管理器202a、202b收集与移动计算设备102a、102b的相机相关联的特征数据。例如,在一个或更多个实施例中,增强现实管理器202a、202b收集关于相机的方位的信息(例如,基于移动计算设备102a、102b的陀螺仪的纵向或横向)。另外,增强现实管理器202a、202b可以定期地(例如,以预定的时间间隔)从相机取景器图像馈源中收集图像帧。
在收集上述特征信息之后,增强现实管理器202a、202b将收集的特征信息提供给网络系统108。如下面将更详细描述的,网络系统108利用提供的特征信息来识别增强现实元素的集合,以发送回移动计算设备102a、102b。因此,在一个或更多个实施例中,增强现实管理器202a、202b从网络系统108接收该增强现实元素的集合。在至少一个实施例中,且如下面将更详细描述的,网络系统108提供元数据以及每个增强现实元素,元数据包括但不限于,关于经常与每个增强现实元素交互的用户的人口统计信息、关于每个增强现实元素最常被使用的位置的地理信息、对于每个增强现实元素关于作为移动计算设备102a、102b的用户的“朋友”的任何网络系统用户的网络系统信息、以及每个增强现实元素的映射规则(即,规定增强现实应该被显示在相机取景器显示内容内的哪个位置的规则)。
由于移动计算设备102a、102b的各种限制(例如,相机取景器显示内容的大小和分辨率、相机取景器显示内容是否过于拥挤等),增强现实管理器202a、202b可能不能够呈现由网络系统108提供的所有增强现实元素。因此,在至少一个实施例中,增强现实管理器202a、202b确定要经由移动计算设备102a、102b的相机取景器显示内容来呈现的所提供的增强现实元素的子集。在一个或更多个实施例中,增强现实管理器202a、202b基于对各种显示因素的分析来确定所提供的增强现实元素的子集。
例如,在一个或更多个实施例中,增强现实管理器202a、202b基于对在增强现实元素的子集中的每个增强现实元素相对于相机取景器显示内容的大小的分析来确定增强现实元素的子集。例如,增强现实管理器202a、202b可以不选择与相机取景器显示内容的大小相比过大或过小的增强现实元素。在至少一个实施例中,增强现实管理器202a、202b利用启发式方法(heuristic),该启发式方法要求单个增强现实元素必须是可见的但不能在相机取景器显示内容中占据多于预定量的可见空间。
另外,增强现实管理器202a、202b基于对从呈现在移动计算设备102a、102b的相机取景器显示内容上的图像馈源中获取的一个或更多个图像帧的分析来确定增强现实元素的子集。例如,在至少一个实施例中,增强现实管理器202a、202b分析图像帧,以确定图像帧是“拥挤的”还是“不拥挤的”。例如,如果图像帧包括为“集体自拍”而聚集在一起的若干人(即,这些人紧密挤在一起,在图像帧中基本没有留下不被脸部所占据的空间),则它可能是拥挤的。相反,如果图像帧包括一幅蓝天下绿草如茵的小山的风景图片,则它可能是不拥挤的。在一个或更多个实施例中,增强现实管理器202a、202b利用启发式方法(heuristic),该启发式方法要求在相机取景器显示内容中包括的增强现实元素的数量和/或大小与从显示在相机取景器显示内容上的图像馈源中获取的图像帧中的拥挤程度成反比(例如,图像帧越不拥挤,可以包括越多的增强现实元素)。
此外,增强现实管理器202a、202b基于对与移动计算设备102a、102b的用户相关联的网络系统信息的分析来确定增强现实元素的子集。例如,如上面所提到的,网络系统108为所提供的增强现实元素的集合中的每个增强现实元素提供元数据。因此,增强现实管理器202a、202b可以确定在该集合中由在人口统计上类似于移动计算设备102a、102b的用户的其他网络系统用户所使用的增强现实元素。此外,增强现实管理器202a、202b可以从该集合确定正在移动计算设备102a、102b的位置处或附近被使用的增强现实元素。
增强现实管理器202a、202b还可以确定由移动计算设备102a、102b的用户的社交网络朋友正在使用或已经使用过的增强现实元素。例如,增强现实管理器202a、202b可以识别由与用户具有高的关系系数的用户的社交网络朋友使用的增强现实元素。换句话说,在一个或更多个实施例中,增强现实管理器202a、202b在如下启发式方法下操作:移动计算设备102a、102b的用户更有可能与由与用户相对亲密的社交网络朋友(例如,与高中老朋友相比,用户可能更亲近配偶)使用过的增强现实元素进行交互。
另外,当确定要提供给用户的增强现实元素时,增强现实管理器202a、202b还可以考虑用户过去的增强现实元素交互。例如,如果用户先前已经与特定类型的增强现实元素交互了若干次,则增强现实管理器202a、202b将可能再次提供该类型的增强现实元素,而不是不同类型的增强现实元素。因此,在一个或更多个实施例中,增强现实管理器202a、202b在如下总体启发式方法下操作:移动计算设备102a、102b的用户将可能想要被提供他可能与之交互的增强现实元素。
在至少一个实施例中,增强现实管理器202a、202b通过对由网络系统108提供的每个增强现实元素计算分数来确定要向用户提供哪些增强现实元素。例如,增强现实管理器202a、202b可以通过给上述各种显示因素中的每一个分配加权值来计算分数。因此,某些显示因素可能携带比其他显示因素更大的权重。例如,与移动计算设备102a、102b的用户先前是否使用过特定增强现实元素相比,该特定增强现实元素相对于相机取景器显示内容的大小可能携带更大的权重。因此,在一个或更多个实施例中,增强现实管理器202a、202b通过识别阈值数量的得分最高的增强现实元素来确定要经由相机取景器显示内容提供的增强现实元素的子集。
除了确定要经由移动计算设备102a、102b的相机取景器显示内容提供的增强现实元素的子集之外,增强现实管理器202a、202b还将增强现实元素的该子集中的每一个映射到相机取景器显示内容内的点或区域。例如,在一个或更多个实施例中,映射规则可以要求某些增强现实元素与显示的人(例如,“标记这个人”类型的增强现实元素)、对象(例如,“评价这道菜”类型的增强现实元素)相关联,或者要求在其上必须被覆盖的某种类型的背景(例如,“虚拟记分牌”要求在其上可以被覆盖的某个量的纯色背景)。如上面所提到的,网络系统108可以为每个增强现实元素提供映射规则,作为每个增强现实元素的元数据的一部分。
因此,为了将增强现实元素映射到相机取景器显示内容内正确的点或区域,增强现实管理器202a、202b可以分析从相机取景器显示内容中获取的图像帧,以找到增强现实元素的最优位置。例如,如果增强现实元素的映射规则指定增强现实元素应该被映射到特定大小的空白(例如,纯色的)空间,则增强现实管理器202a、202b可以分析图像帧以识别对应于该要求的区域。增强现实管理器202a、202b然后可以将图像帧内的所识别的区域映射到相应的增强现实元素。一旦增强现实元素的正确映射被建立,增强现实管理器202a、202b就将增强现实元素锚定到相机取景器显示内容中的相应位置。
如上面提到的,且如图2所示,网络系统应用程序104a、104b包括显示管理器204a、204b。显示管理器204a、204b提供、管理和/或控制允许移动计算设备102a、102b的用户与增强现实系统100的特征进行交互的图形用户界面。例如,响应于增强现实管理器202a、202b将增强现实元素锚定到移动计算设备102a、102b的相机取景器显示内容内的位置,显示管理器204a、204b保持增强现实元素相对于在相机取景器显示内容内显示的其他对象的位置。
为了说明,增强现实系统100的一些实施例的特征是,即使当移动计算设备102a、102b的用户移动相机时,所显示的增强现实元素仍相对于相机取景器显示内容中的显示对象保持在单一位置。因此,当用户在场景中全方位移动移动计算设备102a、102b的相机时,增强现实元素看起来锚定在相机取景器显示内容中的静止对象上。在一个或更多个实施例中,显示管理器204a、204b利用同时定位和映射(“SLAM”)技术来构建和/或更新在相机取景器显示内容中显示的环境的虚拟地图,同时追踪移动计算设备102a、102b在该环境内的位置。在至少一个实施例中,SLAM使得显示管理器204a、204b能够确定对象之间的距离、旋转度、移动速率等。因此,在一个示例中,显示管理器204a、204b更新移动计算设备102a、102b的相机取景器显示内容,使在用户将相机对着现实生活中的对象时,即使当用户全方位移动移动计算设备102a、102b的相机时,锚定到该对象的增强现实元素相对于该对象保持在适当位置上。
除了使得能够在相机取景器显示内容中显示一个或更多个增强现实元素之外,显示管理器204a、204b还便利图形用户界面的显示,这些图形用户界面使得移动计算设备102a、102b的用户能够与网络系统108进行交互。例如,显示管理器204a、204b可以用允许用户参与网络系统活动的多个图形组件、对象和/或元素构成图形用户界面。更具体地,显示管理器204a、204b可以指示移动计算设备102a、102b显示使用户能够与网络系统108的各种特征进行交互的图形组件、对象和/或元素的集合。
此外,显示管理器204a、204b指示移动计算设备102a、102b显示便利用户输入以与网络系统108的各种特征进行交互的一个或更多个图形对象、控件或元素。为了说明,显示管理器204a、204b提供一种允许移动计算设备102a、102b的用户将一种或更多种类型的内容输入到网络系统帖子或电子消息中的图形用户界面。
为了与网络系统108的一个或更多个特征进行交互的目的,显示管理器204a、204b还便利文本或其他数据的输入。例如,显示管理器204a、204b提供包括触摸显示键盘的用户界面。用户可以使用一个或更多个触摸手势来与触摸显示键盘交互,以输入要包括在社交网络系统帖子或电子消息中的文本。例如,用户可以使用触摸显示键盘来编写消息。除了文本之外,包括触摸显示键盘的图形用户界面可以便利各种其他字符、符号、图标或其他信息的输入。在至少一个实施例中,显示管理器204a、204b结合移动计算设备102a、102b的相机取景器显示内容来提供触摸显示键盘。
此外,显示管理器204a、204b能够在两个或更多个图形用户界面之转换。例如,在一个实施例中,移动计算设备102a、102b的用户可以与相机取景器显示内容中的一个或更多个增强现实元素交互。然后,响应于来自用户的触摸手势(例如,向左滑动的触摸手势),显示管理器204a、204b可以转换到包括用户的消息动态的图形用户界面。
如图2中另外示出的,网络系统应用程序104a、104b包括用户输入检测器206a、206b。在一个或更多个实施例中,用户输入检测器206a、206b以任何合适的方式检测、接收和/或便利用户输入。在一些示例中,用户输入检测器206a、206b检测关于相机取景器显示内容的一个或更多个用户交互(例如,用户与相机取景器显示内容内的增强现实元素的交互)。如本文所述,“用户交互”意指通过一个或更多个输入设备从用户接收的单个交互或交互的组合。
例如,用户输入检测器206a、206b检测来自键盘、鼠标、触摸页面、触摸屏和/或任何其他输入设备的用户交互。在移动计算设备102a、102b包括触摸屏的情况下,用户输入检测器206a、206b检测来自用户的形成用户交互的一个或更多个触摸手势(例如,滑动手势、点击手势、按压手势、反向按压手势)。在一些示例中,用户可以提供与用户界面的一个或更多个图形对象或图形元素(例如,增强现实元素)相关和/或针对用户界面的一个或更多个图形对象或图形元素的触摸手势。
用户输入检测器206a、206b可以另外或替代地接收表示用户交互的数据。例如,用户输入检测器206a、206b可以接收来自用户的一个或更多个用户可配置参数、来自用户的一个或更多个命令、和/或任何其他合适的用户输入。用户输入检测器206a、206b可以从网络系统108的一个或更多个组件或者从一个或更多个远程位置接收输入数据。
网络系统应用程序104a、104b响应于用户输入检测器206a、206b检测到用户输入和/或接收到其他数据而执行一个或更多个功能。通常,用户可以通过提供用户输入检测器206a、206b可以检测到的一个或更多个用户输入来控制网络系统应用程序104a、104b、在网络系统应用程序104a、104b内导航、以及以其他方式使用网络系统应用程序104a、104b。例如,响应于用户输入检测器206a、206b检测到用户输入,网络系统应用程序104a、104b的一个或更多个组件允许移动计算设备102a、102b的用户选择增强现实元素、滚动浏览消息动态、将文本输入到网络系统帖子编写器中,等等。
如图2所示,且如上面提到的,网络系统应用程序104a、104b还包括数据储存器208a、208b。数据储存器208a、208b包括网络系统数据210a、210b。在一个或更多个实施例中,网络系统数据210a、210b表示网络系统信息(例如,增强现实元素信息、网络系统活动信息等),例如本文描述的网络系统信息。
同样如图2所示,且如上面提到的,服务器设备106承载网络系统108。网络系统108(例如,通过相机取景器显示内容、消息动态、通信线程、消息收件箱、时间线、“墙”或任何其他类型的图形用户界面)向网络系统108的一个或更多个用户提供增强现实元素、网络系统帖子、电子消息等。例如,一个或更多个实施例向用户提供包含来自与该用户相关联的一个或更多个共同用户的帖子的网络系统消息动态。
在一个或更多个实施例中,网络系统用户滚动浏览网络系统消息动态,以便查看最近的由与该用户相关联的一个或更多个共同用户经由网络系统应用程序104a、104b提交的网络系统帖子。在一个实施例中,网络系统108在用户的网络系统消息动态中按时间顺序组织网络系统帖子。在替代实施例中,网络系统108按地理位置、按兴趣组、根据用户和共同用户之间的关系系数等组织网络系统帖子。
网络系统108还使用户能够参与所有其他类型的网络系统活动。例如,网络系统108使得网络系统用户能够滚动浏览消息动态、点击帖子和超链接、编写并提交电子消息和帖子,等等。如本文所使用的,“结构化对象”是包括结构化数据的被显示的通信(例如,要约、帖子等)。在至少一个实施例中,网络系统108将增强现实元素视为结构化对象。
同样如图2所示,网络系统108包括通信管理器212。在一个或更多个实施例中,通信管理器212向网络系统应用程序104a、104b和第三方服务器112发送通信,并从它们接收通信。例如,通信管理器212从网络系统应用程序104a、104b接收特征信息,并将该特征信息提供给增强现实元素识别器214和/或增强现实元素生成器216。响应于接收到增强现实元素的集合,通信管理器212将该增强现实元素的集合发送回网络系统应用程序104a、104b。
除了增强现实元素数据之外,通信管理器212发送并接收与网络系统活动相关的信息。例如,通信管理器212接收与一个或更多个网络系统用户参与的网络系统活动相关联的信息。为了说明,通信管理器212从网络系统应用程序104a、104b接收信息,该信息详细说明移动计算设备102a、102b的用户参与的与网络系统108和/或增强现实系统100的特征相关联的点击、滚动、键盘输入、悬停等。在至少一个实施例中,网络系统108利用该信息来确定移动计算设备102a、102b的用户的各种特征。
此外,通信管理器212还接收与用户与一个或更多个增强现实元素的交互相关联的信息。例如,一些增强现实元素是交互式的,并且允许用户直接通过相机取景器显示内容来执行各种网络系统活动。因此,当用户与增强现实元素交互时,网络系统应用程序104a、104b向通信管理器212提供与交互相关的信息。
此外,在一些实施例中,网络系统108与一个或更多个第三方合作,以便向网络系统用户提供附加的第三方增强现实元素和功能。因此,通信管理器212向第三方服务器112发送信息并从第三方服务器112接收信息,以便利这些交互。例如,增强现实系统100可以确定用户在棒球馆,在棒球馆,热狗供应商已经与网络系统108合作,以便让增强现实系统100提供允许用户让定制热狗直接递送到其座位的增强现实元素。因此,当用户与增强现实元素交互时,通信管理器212接收关于交互的信息,并将该信息转发给第三方服务器112。然后,当第三方服务器112以订单确认和递送状态更新来响应时,通信管理器212可以将该信息发送回网络系统应用程序104a、104b。在至少一个实施例中,通信管理器212还可以将支付信息转发到第三方服务器112,使得用户可以通过增强现实系统100为他的热狗付费。
如上面提到的,且如图2所示,网络系统108包括增强现实元素识别器214。如上面提到的,网络系统应用程序104a、104b收集与移动计算设备102a、102b以及移动计算设备102a、102b的用户相关的特征信息,并将该特征信息发送到网络系统108。响应于接收到该特征信息,增强现实元素识别器214基于所提供的特征信息来识别一组增强现实元素和/或相应的内容。
为了识别与所提供的特征信息相对应的增强现实元素的集合,增强现实元素识别器214从分析所提供的特征信息开始。在一个或更多个实施例中,增强现实元素识别器214通过分析所提供的特征信息开始,以确定移动计算设备102a、102b的位置。例如,增强现实元素识别器214可以分析所提供的GPS信息、WiFi信息、网络系统信息和因特网搜索,以便确定移动计算设备102a、102b位于何处以及当前在移动计算设备102a、102b的位置处发生了什么。例如,根据所提供的移动计算设备102a、102b的GPS坐标,增强现实元素识别器214可以确定移动计算设备102a、102b的用户当前正在中央公园(Central Park)参加摇滚音乐会。在另一示例中,根据所提供的移动计算设备102a、102b的GPS坐标,增强现实元素识别器214可以确定移动计算设备102a、102b的用户正在下着雨的斯莫基山脉(Smokey Mountain)露营。
另外,增强现实元素识别器214分析所提供的特征信息以确定用户信息。例如,增强现实元素识别器214可以确定用户的人口统计信息、用户的简档信息、用户的网络系统活动历史、用户的网络系统朋友的网络系统活动历史、用户的网络系统朋友的人口统计信息等等。在至少一个实施例中,为了保护用户的隐私,增强现实元素识别器214要求用户专门选择该级别的分析。
此外,增强现实元素识别器214还可以分析从移动计算设备102a、102b的相机取景器显示内容中获取的图像帧,以便确定移动计算设备102a、102b的附加特征。例如,增强现实元素识别器214可以利用计算机视觉技术来识别图像帧内的对象、背景、文本和人。此外,响应于在图像帧中识别出人,增强现实元素识别器214可以结合网络系统信息利用面部识别技术来识别图像帧内的网络系统用户。
在分析所提供的特征信息以确定移动计算设备102a、102b当前所处的确切位置、条件和环境之后,增强现实元素识别器214可以识别与移动计算设备102a、102b对应的增强现实元素的集合。在至少一个实施例中,增强现实元素识别器214通过识别与移动计算设备102a、102b的位置对应的增强现实元素开始。在一些实施例中,这是增强现实元素识别器214所要求的最低级别的分析。因此,增强现实元素识别器214可以简单地提供对应于移动计算设备102a、102b的位置的增强现实元素的集合。
在附加实施例中,增强现实元素识别器214可以基于附加的特征信息来扩大或缩小对应于移动计算设备102a、102b的位置的增强现实元素的集合。例如,增强现实元素识别器214可以基于增强现实元素是否与用户的人口统计信息对应、用户先前是否使用过该增强现实元素、用户的朋友是否使用过该增强现实元素等,从收集的集合中添加或移除增强现实元素。另外,增强现实元素识别器214可以基于对图像帧的分析来从收集的集合中添加或移除增强现实元素。例如,增强现实元素识别器214可以基于增强现实元素是否与图像帧中的对象或人对应、增强现实元素是否与图像帧中显示的照明条件对应、增强现实元素是否与图像帧中描绘的环境对应等来添加或移除增强现实元素。在一个或更多个实施例中,增强现实元素识别器214在做出上述确定时利用机器学习,以便收集产生的增强现实元素的集合。
在一个或更多个实施例中,增强现实元素识别器214可以利用评分方案,以识别要包括在集合中的增强现实元素。例如,增强现实元素识别器214可以利用机器学习来计算反映增强现实元素与特征信息的对应程度的分数。在这种情况下,增强现实元素识别器214可以包括得分高于阈值计算值的增强现实元素。另外或替代地,增强现实元素识别器214可以仅包括要提供在集合中的阈值数量的增强现实元素,以防止移动计算设备102a、102b难以应付。
在一个或更多个实施例中,增强现实系统100实现了增强现实元素的生成。例如,增强现实系统100可以使用户能够生成增强现实系统100锚定到特定位置的“遗留(leave-behind)”增强现实元素。因此,当其他网络系统用户过后在该特定位置处访问增强现实时,他们可以发现该遗留增强现实元素。在另一示例中,增强现实系统100可以出于各种目的生成定制的增强现实元素。
因此,如图2所示,网络系统108包括增强现实元素生成器216。在一个或更多个实施例中,增强现实元素生成器216从网络系统应用程序104a、104b或者从网络系统108接收信息,并且生成体现所接收信息的增强现实元素。为了说明,增强现实元素生成器216可以从网络系统应用程序104a、104b接收包括用户的数字视频的信息,该数字视频描述了用户在他当前所在的主题公园玩得有多开心。在至少一个实施例中,增强现实元素生成器216可以生成包括用户的数字视频的增强现实元素,并将生成的增强现实元素锚定到主题公园的位置。然后,当其他网络系统用户过后访问主题公园时,增强现实元素识别器214可以识别该生成的增强现实元素并向那些网络系统用户提供该生成的增强现实元素。
在一个或更多个实施例中,增强现实元素生成器216可以将各种规则与遗留增强现实元素关联起来。例如,创建遗留增强现实元素的用户可以指定增强现实元素只可以被他的或她的网络系统朋友、被他的或她的网络系统朋友的群组或者被单个网络系统朋查看。替代地,遗留增强现实元素的创建者可以指定增强现实系统的任何用户都可以查看该增强现实元素。在至少一个实施例中,创建者还可以指定附加规则,例如遗留增强现实元素的到期日期和时间(之后不能再查看该元素)、一天中可以查看该元素的时间、元素必须根据其进行显示的背景要求等。因此,增强现实元素生成器216可以将这些规则中的一个或更多个作为元数据与生成的增强现实元素关联起来。
在另一示例中,增强现实元素生成器216可以从网络系统108接收信息,该信息包括在由网络系统应用程序104a、104b提供的(例如,在相机取景器内的)图像帧中识别的网络系统用户的网络系统用户标识符。在至少一个实施例中,增强现实元素生成器216可以生成特定于每个识别的网络系统用户的定制的增强现实元素。例如,定制的增强现实元素可以包括网络系统用户的姓名、网络系统用户的简档图片、网络系统用户的化身等等。
如图2所示,且如上提到的,网络系统108还包括数据储存器218。数据储存器218包括增强现实元素数据220。在一个或更多个实施例中,增强现实元素数据220表示增强现实元素信息(例如,增强现实元素的显示特征、与每个增强现实元素相关联的元数据等),例如本文所述的增强现实元素信息。
如下文将更详细描述的,增强现实系统100的组件可以提供一个或更多个图形用户界面(“GUI”)和/或GUI元素。特别地,如上所述,增强现实系统100提供一个或更多个增强现实元素作为移动计算设备102a、102b的相机取景器显示内容中的覆盖图。图3A-7B和随后的描述示出了,按照如上所述的一般原理的增强现实系统100的特征的各种示例实施例。
如上所述,增强现实系统100提供移动计算设备的相机取景器显示内容内的增强现实元素。因此,图3A示出了移动计算设备300,在移动计算设备300中,相机取景器显示内容304在移动计算设备300的触摸屏302上是活跃的。此外,如图3A所示,相机取景器显示内容304包括快门按钮306(即,用于捕获数字照片或视频)、数字照片控制件308和数字视频控制件310(即,用于选择要捕获的多媒体的类型)。尽管本文描述的实施例包括智能手机移动计算设备,但是在另外的实施例中,移动计算设备300可以是平板计算机、膝上型计算机、增强现实或虚拟现实头戴式装置、或者适于与增强现实系统100的特征进行交互的任何其他类型的计算设备。
在一个或更多个实施例中,在检测到相机取景器显示内容304的激活时,增强现实系统100通过本文描述的方法和过程收集特征数据并识别增强现实元素。响应于接收到所识别的增强现实元素,增强现实系统100经由相机取景器显示内容304来提供增强现实元素。例如,如图3B所示,响应于收集到和确定与移动计算设备相关联的特征信息,增强现实系统100提供增强现实元素312a-312e。
在图3A-3C所示的实施例中,移动计算设备300的用户正与两个朋友在太浩湖(Lake Tahoe)度过一天。因此,增强现实系统100收集并分析包括移动计算设备300的GPS位置、从相机取景器显示内容304获取的图像帧、与移动计算设备300的用户相关联的网络系统唯一标识符以及上述其他特征信息的特征信息。根据该分析,在一个或更多个实施例中,增强现实系统100识别与特征信息对应的增强现实元素312a-312e。
例如,如图3B所示,响应于确定移动计算设备300位于对应于商业活动(例如,“太浩湖探险(Tahoe Adventures)”)的GPS位置处,增强现实系统100提供增强现实元素312a。因此,增强现实系统100(例如,从针对该商业活动的web搜索中、从与该商业活动相关联的网络系统页面中等)识别与该商业活动相关联的标识,并生成包括所识别的标识的增强现实元素312a。在一个或更多个实施例中,响应于检测到对增强现实元素312a的选择,增强现实系统100可以在移动计算设备300的触摸屏302上打开浏览器窗口,并将浏览器定向到与“太浩湖探险”相关联的网站。另外,在一个或更多个实施例中,增强现实系统100可以将动画(例如,旋转、颜色变化等)添加到增强现实元素312a。在又一些实施例中,用户与增强现实元素312a的交互触发了在商业活动处的“签到”或与商业活动相关联的另一帖子的创建。因此,用户可以通过与一个或更多个增强现实元素交互来创建网络系统帖子。
此外,如图3B所示,增强现实系统100结合从相机取景器显示内容304获取的图像帧来执行面部识别,以便识别相机取景器显示内容304中描绘的网络系统用户(即,“DaveS.”)。因此,响应于访问与所识别的网络系统用户相关联的网络系统账户,增强现实系统100可以生成和/或提供表示所识别的用户的增强现实元素312b。如图3B所示,增强现实元素312b可以包括屏幕姓名(例如,“Dave S.”)以及与所识别的网络系统用户相关联的化身或简档图片。在一个或更多个实施例中,增强现实系统100从与所识别的网络系统用户相关联的网络系统简档中识别增强现实元素312b的组件。在替代实施例中,增强现实系统100可以从因特网搜索或其他数据源中识别增强现实元素312b的组件。
在一个或更多个实施例中,响应于检测到对增强现实元素312b的选择,增强现实系统100可以将触摸屏302重定向为显示由安装在移动计算设备300上的网络系统应用程序提供的图形用户界面。网络系统应用程序然后可以提供与网络系统用户相关联的网络系统主页的显示,该网络系统用户与增强现实元素312b相关联。替代地,响应于检测到对增强现实元素312b的选择,增强现实系统100可以将触摸屏302重定向为显示消息编写器图形用户界面,在消息编写器图形用户界面中,移动计算设备300的用户可以向与增强现实元素312a相关联的网络系统用户编写网络系统消息。在又一些实施例中,响应于对增强现实元素312b的选择,增强现实系统可以在由移动计算设备300的用户正在创建的帖子中标记所识别的用户。这样,用户可以与增强现实元素312b和一个或更多个其他增强现实元素进行交互,以创建标记了所识别的用户的帖子。
另外,如图3B所示,增强现实系统100分析网络系统活动信息(例如,以确定移动计算设备300的用户经常游览太浩湖并在那里享受时间,等等)以识别与从相机取景器显示内容304获取的图像帧相关联的整体情绪。响应于识别出可能的整体情绪,增强现实系统100生成并提供增强现实元素312c。如图3B所示,增强现实元素312c包括允许移动计算设备300的用户表达情感的可选表情元素。例如,响应于检测到对第一表情元素的选择,增强现实系统100可以确定移动计算设备300的用户正感到“寒冷”。在一个或更多个实施例中,增强现实系统100在生成的网络系统帖子或消息中利用该选择。
同样如图3B所示,响应于分析网络系统活动信息(例如,以确定移动计算设备300的用户正在庆祝生日),增强现实系统100可以生成并提供增强现实元素312d。在一个或更多个实施例中,增强现实元素312d与滤镜(filter)相关联,该滤镜与由增强现实系统100分析的特征对应。例如,响应于检测到对增强现实元素312d的选择,增强现实系统100可以将滤镜元素(例如,动画、标签、边框、颜色变化等)添加到相机取景器显示内容304。例如,对增强现实元素312d的选择使得彩带和派对气球看起来覆盖在相机取景器显示内容304和从相机取景器显示内容304捕获的任何产生的数字图片或视频上。
另外,如图3B所示,增强现实系统100可以向相机取景器显示内容304提供标准的增强现实元素。例如,增强现实系统100可以理所当然地向选择了增强现实系统100的特性和功能的所有网络系统用户提供增强现实元素312e。响应于检测到对增强现实元素312e的选择,增强现实系统100可以将触摸屏键盘覆盖在相机取景器显示内容304上,并且可以将增强现实元素312e转换成文本框,在文本框中,移动计算设备300的用户可以输入消息。在一个或更多个实施例中,增强现实系统100在网络系统帖子或消息中利用了由移动计算设备300的用户提供的消息。
在一个或更多个实施例中,移动计算设备300的用户可以从相机取景器显示内容304中移除增强现实元素312a-312e中的任何一个。例如,如果增强现实系统100错误地识别了移动计算设备300的位置,则移动计算设备300的用户可以通过按压增强现实元素312a并将其向上滑出相机取景器显示内容304、或者通过按压并保持按住增强现实元素312a来从相机取景器显示内容304中移除增强现实元素312a。以这种方式,用户可以对在生成的网络系统帖子或消息中包含的内容进行控制。
在一个或更多个实施例中,如上面所讨论的,移动计算设备300的用户可以直接从相机取景器显示内容304中编写网络系统帖子或消息。例如,如图3B和3C所示,响应于来自用户的单个交互,增强现实系统100可以编写帖子或消息并将其发送到网络系统108,以分发给一个或更多个附加的网络系统用户。在一个实施例中,响应于检测到与增强现实元素312a-312e中的一个或更多个的交互以及在相机取景器显示内容304上的滑动触摸手势,增强现实系统100可以从相机取景器显示内容304中捕获数字图片,并且编写包括数字图片和对应于用户与之交互的一个或更多个增强现实元素312a-312e的元素/内容的网络系统帖子。替代地或另外,增强现实系统100可以响应于检测到与快门按钮306的交互来执行这些相同步骤。在另外的实施例中,增强现实系统100可以响应于检测到与移动计算设备300的其他类型的交互(例如,倾斜、摇动、口头命令等)来执行这些步骤。
例如,如图3C所示,响应于检测到与相机取景器显示内容304相关的滑动手势,增强现实系统100可以编写帖子318并将其发送到网络系统108。图3C示出了包括与网络系统用户(例如,移动计算设备300的用户,或者经由网络系统108与移动计算设备300的用户是朋友的另一网络系统用户)相关联的消息动态316的网络系统GUI 314。如图所示,帖子318包括覆盖有与增强现实元素312d相关联的滤镜的数字照片320。另外,帖子318包括附加的元素,这些附加的元素对应于提供给移动计算设备300的用户的其他增强现实元素(例如,“Dave Smith”对应于增强现实元素312b,“太浩湖探险”对应于增强现实元素312a,“湖边生日!”对应于结合增强现实元素312e而输入的输入内容)。
在替代实施例中,响应于检测到与图3B中的相机取景器显示内容304相关的滑动手势,增强现实系统100可以提供编写器GUI,在编写器GUI中,用户可以在增强现实系统100将帖子发送给网络系统108之前查看所编写的帖子。例如,从编写器GUI,用户可以编辑将被包含在帖子中的被标记的用户、签到地点、数字图片或视频等。移动计算设备300的用户还可以指定隐私设置,该隐私设置指示将收到生成的帖子的一个或更多个网络系统朋友。如果用户只选择了一个网络系统朋友,则网络系统108将把生成的帖子作为电子消息直接发送给该人。如果用户选择了他的网络系统朋友的子群组,则网络系统108可以将生成的帖子作为群电子消息进行发送。
增强现实系统100的另一实施例在图4A-4D中示出。例如,如上面所讨论的,增强现实系统100使得用户能够创建“遗留”增强现实元素。为了说明创建遗留增强现实元素的过程,图4A示出了在移动计算设备300的触摸屏302上的相机取景器显示内容304。如图所示,移动计算设备300的用户正将移动计算设备300的相机对着餐馆菜单。在一个或更多个实施例中,响应于确定从相机取景器显示内容304获取的图像帧包括了菜单,增强现实系统100提供增强现实元素312f,增强现实元素312f使得用户能够留下与餐馆相关的推荐。
响应于检测到对增强现实元素312f的选择,增强现实系统100可以利用光学字符识别和其他计算机视觉技术来生成增强现实元素312g(例如,围绕着每个菜单项的可选框)。响应于检测到对增强现实元素312g之一的选择,增强现实系统100可以提供附加的增强现实元素,该附加的增强现实元素使得用户能够留下对所选择的菜单项的推荐,该推荐体现在遗留增强现实元素中。在一个或更多个实施例中,在生成与所选择的菜单项相关联的遗留增强现实元素之后,增强现实系统100将遗留增强现实元素锚定到生成该元素的位置(例如,餐馆的位置)。
通过利用由增强现实系统100提供的各种工具,移动计算设备300的用户可以创建各种类型的遗留增强现实元素。例如,在检测到对“Pad Thai”的选择之后,增强现实系统100可以提供Pad Thai的图像的显示,用户可以从Pad Thai的这些图像中选择特定图像。在另一示例中,增强现实系统100可以使用户能够拍摄他的Pad Thai订单或他自己对他的PadThai订单的反应的视频或照片。在又一示例中,增强现实系统100可以利用上面描述的SLAM技术,以基于对用户的Pad Thai订单的扫描来创建3D模型。
过后,当另一网络系统用户在增强现实系统100已经将遗留增强现实元素锚定在此的位置处观看他的相机取景器显示内容时,增强现实系统100可以在该相机取景器显示内容上提供增强现实元素。例如,如图4C所示,移动计算设备300’的用户是移动计算设备300的用户的网络系统朋友。当移动计算设备300’的用户打开相机取景器显示内容304’时,增强现实系统100确定移动计算设备300’的位置是上面讨论的与移动计算设备300的用户创建了遗留增强现实元素的地方相同的餐馆。因此,增强现实系统100在相机取景器显示内容304’上提供了遗留增强现实元素。在一个或更多个实施例中,增强现实系统100响应于对与遗留增强现实元素相关联的特征的分析(例如,遗留增强现实元素的创建者是否指定了它通常应该对网络系统用户可用、或者仅对网络系统朋友可用,等等)以及对与移动计算设备300’及其用户相关联的特征的分析(例如,在移动计算设备300’的用户和移动计算设备300的用户之间是否存在阈值关系系数等)来提供遗留增强现实元素。
如图4C所示,增强现实系统100可以在相机取景器显示内容304’上提供多个遗留增强现实元素(例如,增强现实元素312h和312i)。例如,移动计算设备300’的用户可能有若干个网络系统朋友,他们已经去过同一家餐馆并且留下了增强现实元素。因此,当移动计算设备300’的用户打开相机取景器显示内容304’并将它对着同一餐馆菜单时,增强现实系统100提供增强现实元素312h和312i。在一个或更多个实施例中,在确定移动计算设备300’的用户和与增强现实元素312h和312i相关联的网络系统用户之间的关系系数高于阈值数之后,增强现实系统100可以提供增强现实元素312h和312i。此外,在一个或更多个实施例中,可以另外提供由于显示限制、关系系数不够等而不由增强现实系统100显示的增强现实元素。
同样如图4C所示,增强现实系统100使网络系统用户能够创建各种类型的遗留增强现实元素。例如,增强现实元素312h是一碗带筷子的面条的3D模型。另外,增强现实元素312h包括5星评级和详细描述为“Adam推荐PAD THAI!”的文本。在一个或更多个实施例中,增强现实系统100响应于移动计算设备300的用户选择与“Pad Thai”菜单项相关联的增强现实元素312g而生成增强现实元素312h,并提供描述和评级,如上面所讨论的。此外,增强现实元素312h被锚定到菜单中对应于增强现实元素312h的部分。特别地,在检测到图像内的菜单的锚定部分正被显示时,移动计算设备300’在对应于菜单的锚定部分的位置处和/或用指示增强现实元素312h与菜单的锚定部分的连接的视觉元素来显示增强现实元素312h。
另外,如图4C所示,增强现实元素312i包括播放先前记录的数字视频的数字视频窗口,以及网络系统用户化身和文本(例如,“喜爱这个Massaman!”)。在一个或更多个实施例中,当用户(例如,“Tom N.”)选择了与“Massaman Curry”菜单项相关联的增强现实元素,并向增强现实系统100提供他自己的数字视频以及描述时。因此,在至少一个实施例中,增强现实元素312i中包括的数字视频窗口可以自动播放数字视频。此外,如图4C所示,在一个或更多个实施例中,增强现实系统100提供了将增强现实元素312h和312i连接到它们的相关联的菜单项的指向线。
在一个或更多个实施例中,增强现实系统100可以提供个人遗留增强现实元素、非个人遗留增强现实元素、通用增强现实元素和第三方增强现实元素的组合。例如,如图4D所示,移动计算设备300的用户在走进酒吧后已经访问了相机取景器显示内容304。因此,增强现实系统100已经确定了移动计算设备300的位置以及与移动计算设备300和移动计算设备300的用户相关联的其他特征信息,并且已经识别并提供了增强现实元素312j、312k、312l、312m和312n。
在一个或更多个实施例中,增强现实元素312j是个人遗留增强现实元素,其是由在酒吧会见移动计算设备300的用户的另一网络系统用户专门为移动计算设备300的用户生成的。如图4D所示,增强现实元素312j通知移动计算设备300的用户他的团体所位于的位置。在至少一个实施例中,创建增强现实元素312j的网络系统用户指定增强现实元素312j的外观和内容、增强现实元素312j的映射位置(例如,在门上)、以及增强现实系统100应该向其提供增强现实元素312j的网络系统用户的身份。因此,在至少一个实施例中,增强现实系统100仅向移动计算设备300的用户提供增强现实元素312j,而不向其他任何人提供。
在一个或更多个实施例中,增强现实元素312l是非个人遗留增强现实元素,其是为与增强现实元素312l的创建者是朋友的任何网络系统用户生成的。例如,如图4D所示,增强现实元素312l是由移动计算设备300的用户的朋友在移动计算设备300当前所在的酒吧拍摄的两个人的数字照片。因此,响应于确定移动计算设备300的用户和创建了增强现实元素312l的网络系统用户之间的关系系数足够高,增强现实系统100在相机取景器显示内容304上提供增强现实元素312l。在另外的实施例中,增强现实系统100可能响应于还确定在相机取景器显示内容304中所示的图像内有足够的显示空间而提供了增强现实元素312l。
在一个或更多个实施例中,增强现实元素312k是由增强现实系统100生成并被锚定到酒吧的位置的通用增强现实元素。例如,在一个实施例中,增强现实系统100响应于确定酒吧位于许多人观看大学体育运动的大学校园附近而生成增强现实元素312k。因此,当比赛正在进行时,增强现实系统100可以生成并持续更新增强现实元素312k,以反映大学队的比赛的分数。此外,在至少一个实施例中,增强现实系统100可以仅向具有反映出对大学体育运动的兴趣的网络系统活动历史的网络系统用户提供增强现实元素312k。因此,如图4D所示,增强现实系统100可能已经提供了增强现实元素312k,因为移动计算设备300的用户已经频繁地向网络系统108发送了关于大学体育运动的帖子。
在一个或更多个实施例中,增强现实元素312m和312n是第三方增强现实元素。例如,为了收集更多数据并更充分地与用户互动,与增强现实元素312m相关联的第三方可能已经与增强现实系统100合作,以向访问各种位置的网络系统用户提供增强现实元素312m。因此,当增强现实系统100检测到移动计算设备300位于该第三方感兴趣的位置之一时,增强现实系统100提供增强现实元素312m。如图4D所示,增强现实元素312m是交互式的,并且允许移动计算设备300的用户看到酒吧的(例如,由第三方提供的)平均评价,以及留下他对酒吧的个人评价。
此外,在一个或更多个实施例中,增强现实系统100可以在不与第三方合作的情况下提供第三方内容。例如,增强现实元素312n包括天气警告,并且由增强现实系统100响应于确定移动计算设备300不在“家”里(例如,移动计算设备300度过晚上所在的位置)而提供。换句话说,在一个或更多个实施例中,增强现实系统100监控各种第三方信息服务(例如,国家气象局、各种新闻源、安珀警戒(Amber Alert)系统等),以便提醒增强现实系统用户可能影响他们的事件(event)和事故(occurrence)。
在另一实施例中,增强现实系统100可以使用户能够生成锚定到用户的移动计算设备的位置而不是锚定到固定位置的增强现实元素。例如,如图5所示,移动计算设备300的用户可能正试图在拥挤的棒球馆会见几个朋友。因此,增强现实系统100可以使用户能够创建包括个人化身的增强现实元素。例如,如图5所示,增强现实元素312o和312p包括个人化身以及用户的姓名。在一个或更多个实施例中,增强现实系统100将每个增强现实元素312o、312p锚定到与每个相应用户相关联的移动计算设备的位置。因此,如果与增强现实元素312o相关联的用户离开看台去从小卖部买食物,则增强现实系统100将使她的增强现实元素312o与她一起移动(例如,假设她随身携带她的移动计算设备)。因此,当移动计算设备300的用户访问相机取景器显示内容304时,增强现实系统100提供增强现实元素312o、312p,这有助于移动计算设备300的用户快速且容易地定位他的朋友。在一个或更多个实施例中,与增强现实元素312o、312p相关联的用户可以指定谁可以看到他们的化身和位置、可以呈现他们的化身的持续时间等,从而保护用户的隐私和/或向用户提供各种级别的隐私设置。
如上面所提到的,增强现实系统100可以在同一相机取景器上提供各种类别的增强现实元素。例如,如图6A-6D所示,增强现实系统100可以提供各种类别的增强现实元素,移动计算设备300的用户可以滑动通过这些增强现实元素。例如,如图6A所示,增强现实系统100可以在移动计算设备300的相机取景器显示内容304内提供类别指示器322。在一个或更多个实施例中,增强现实系统100在类别指示器322中提供多个气泡,这些气泡对应于增强现实系统100可以在相机取景器显示内容304内提供的增强现实元素的可用类别的数量。如图6A所示,由增强现实系统100提供的(例如,如由类别指示器322中变暗的第一气泡所指示的)第一类别只包括类别指示器322。如图6A所示,移动计算设备300的用户正通过相机取景器显示内容304观看棒球馆。在该设置中,用户可以在标准模式下利用相机取景器显示内容304(例如,以捕获标准图像)。
在一个或更多个实施例中,移动计算设备300的用户可以通过在相机取景器显示内容304上滑动来转换到另一类别的增强现实元素。在其他实施例中,移动计算设备300的用户可以通过轻点相机取景器显示内容304、通过说出语音命令或者通过以某种其他方式与相机取景器显示内容304交互来转换到另一类别的增强现实元素。例如,响应于在相机取景器显示内容304上检测到滑动触摸手势,增强现实系统100可以提供包括网络系统信息的新类别的增强现实元素312q、312r、312s,如图6B所示。
为了进一步说明,增强现实元素312q包括来自与移动计算设备300的位置相关的网络系统帖子的简档图片和文本。如上面所提到的,移动计算设备300当前位于棒球馆。因此,增强现实系统100响应于确定帖子与棒球比赛相对应、和/或与帖子相关联的网络系统用户与移动计算设备300的用户具有高于阈值数的关系系数,识别并提供增强现实元素312q的组件。在一个或更多个实施例中,提供了增强现实元素312q中所示的帖子的用户正在从某个其他位置观看棒球比赛。
此外,增强现实元素312r和312s包括与棒球馆相关的网络系统帖子的内容。在至少一个实施例中,与312r、312s中描绘的帖子相关联的网络系统用户与移动计算设备300的用户没有关系系数。因此,在一些实施例中,增强现实系统100提供增强现实元素312r、312s仅仅是因为,它们的相关联的网络系统帖子与棒球馆相关且正由当前与移动计算设备300的用户在同一位置处的其他网络系统用户发布。
响应于在相机取景器显示内容304上检测到另一滑动触摸手势,增强现实系统100可以提供与合作的第三方内容相关联的一种类别的增强现实元素。例如,如图6C所示,增强现实元素312t、312u、312v包括来自合作的第三方的与移动计算设备300的位置相关的内容。在该示例中,合作的第三方是一家体育广播公司,为体育比赛提供评论和统计数据。例如,增强现实元素312t包括记分牌,该记分牌显示在当前棒球比赛的每一局中得分的跑垒(runs)。此外,增强现实元素312u和312v包括球员统计数据,并且被锚定到相应的球员。
响应于在相机取景器显示内容304上检测到又一个滑动触摸手势,增强现实系统100可以提供与(例如,来自合作的或非合作的第三方的)第三方内容相关联的一种类别的增强现实元素,该第三方内容与移动计算设备300的位置相关。例如,响应于确定移动计算设备300位于棒球馆,增强现实系统100可以生成并提供增强现实元素312w。在一个或更多个实施例中,增强现实元素312w与位于棒球馆的供应商相关联。因此,响应于用户选择增强现实元素312w中的一个,增强现实系统100将移动计算设备300重定向到供应商网站,或者可以提供与供应商相关联的进一步的增强现实元素(例如,包括来自小卖部的产品菜单的增强现实元素、使用户能够提供支付信息的增强现实元素、指示相应供应商的位置的增强现实元素等)。在至少一个实施例中,增强现实系统100可以为用户提供直接从移动计算设备300订购并支付食物、饮料和商品的功能。另外,在至少一个实施例中,且根据用户的隐私设置,增强现实系统100可以将移动计算设备300的位置提供给用户已经向其进行了购买的供应商,以使供应商能够将购买的物品直接递送到用户的座位。
在又一实施例中,增强现实系统100可以将增强现实元素直接锚定到网络系统用户。例如,如图7A所示,增强现实系统100可以(例如,通过图像帧分析、面部识别等)检测由网络系统用户执行的预定义手势(例如,“摇滚起来(Rock On)”手部手势)。响应于检测到该手势,增强现实系统100可以生成增强现实元素312x(如图7B所示),然后可以将增强现实元素312x锚定到执行该手势的网络系统用户。
例如,如图7A所示,在相机取景器显示内容304内执行“摇滚起来”手势的用户是移动计算设备300的用户(例如,移动计算设备300的相机处于“自拍”模式)。因此,在检测到手势、生成增强现实元素312x并将增强现实元素312x锚定到移动计算设备300的用户之后,即使当用户被显示在不同的移动计算设备300’上的不同相机取景器304’中时,如图7B所示,增强现实系统100也将显示与移动计算设备300的用户相关的增强现实元素312x。在一个或更多个实施例中,增强现实系统100可以将增强现实元素312x锚定到移动计算设备300的用户达预定的时间量,可以仅当用户在特定地理区域内时将增强现实元素312x锚定到用户,或者可以将增强现实元素312x锚定到移动计算设备300的用户,直到用户执行可以被增强现实系统100识别的另一手势。
图1-7B、相应的文本和示例提供了用于结合相机取景器显示内容来利用增强现实元素的许多不同的方法、系统和设备。除了前述内容之外,还可以根据流程图来描述实施例,该流程图包括在用于完成特定的结果的方法中的动作和步骤。例如,图8-10可以用更少或更多的步骤/动作来执行,或者这些步骤/动作可以以不同的顺序来执行。另外,本文描述的步骤/动作可以重复,或者彼此并行地或者与相同或相似步骤/动作的不同实例并行地执行。
图8示出了利用增强现实元素直接根据相机取景器显示内容来编写网络系统帖子的一个示例方法800的流程图。方法800包括确定移动计算设备的特征的动作810。特别地,动作810可以涉及确定网络系统用户的移动计算设备的多个特征。在一个或更多个实施例中,确定移动计算设备的多个特征包括确定与移动计算设备相关联的位置信息。另外,在至少一个实施例中,确定移动计算设备的多个特征还包括识别与移动计算设备的用户相关联的网络系统唯一标识符。此外,在至少一个实施例中,方法800包括向网络系统提供移动计算设备的多个特征,并且从网络系统接收对应于移动计算设备的多个特征中的一个或更多个的增强现实元素的集合。
此外,方法800包括在移动计算设备上呈现一个或更多个增强现实元素的动作820。特别地,动作820可以涉及基于移动计算设备的多个特征而在移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素。例如,在一个实施例中,方法800还包括识别增强现实元素的所述集合的子集,其中,识别子集包括:为增强现实元素的所述集合中的每一个计算分数,并且其中,增强现实元素的子集包括阈值数量的得分最高的增强现实元素。
此外,在一个或更多个实施例中,为增强现实元素的所述集合中的每一个计算分数包括,对于增强现实元素的所述集合中的每个增强现实元素,将加权值添加到增强现实元素的分数,其中,加权值表示与增强现实元素相关联的元数据和与移动计算设备相关联的多个显示因素之间的相关性。在至少一个实施例中,多个显示因素包括移动计算设备的显示器的分辨率、从相机取景器显示内容获取的图像帧是否是拥挤的、以及移动计算设备的用户是否可能与增强现实元素交互。因此,在至少一个实施例中,在相机取景器显示内容内呈现一个或更多个增强现实元素包括呈现增强现实元素的子集。另外,在至少一个实施例中,在移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素可以包括呈现与移动计算设备的位置对应的第三方增强现实元素。
另外,方法800包括基于与一个或更多个增强现实元素的交互来编写网络系统帖子的动作830。特别地,动作830可以涉及响应于接收到的与一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。另外,在一个实施例中,方法800包括检测与相机取景器显示内容相关的滑动触摸手势,并且响应于检测到的滑动触摸手势,发送编写的网络系统帖子。
此外,在一个或更多个实施例中,方法800包括接收与一个或更多个增强现实元素中的至少一个的交互的动作,其中,接收交互包括接收与移动计算设备的相机取景器显示内容的触摸交互。在至少一个实施例中,方法800还包括,响应于接收到与一个或更多个增强现实元素中的至少一个的交互,在相机取景器显示内容内提供一个或更多个支付工具。
图9示出了向移动计算设备提供增强现实元素的一个示例方法900的流程图。方法900包括维护增强现实元素的储存库的动作910。特别地,动作910可以涉及由一个或更多个服务器设备维护多个增强现实元素。例如,在一个实施例中,维护多个增强现实元素还包括维护多个增强现实元素中的每一个的元数据,其中,多个增强现实元素中的每一个的元数据包括针对每个增强现实元素的映射要求以及特定于每个增强现实元素的网络系统信息。
此外,方法900包括从移动计算设备接收特征数据的动作920。特别地,动作920可以涉及从移动计算设备接收多个特征数据,其中,特征数据包括与移动计算设备相关联的特征数据和与移动计算设备的用户相关联的特征数据。例如,与移动计算设备相关联的特征数据可以包括与移动计算设备相关联的位置信息。另外,与移动计算设备的用户相关联的特征数据可以包括与移动计算设备的用户相关联的网络系统唯一标识符、与移动计算设备的用户相关联的应用程序使用历史、或与移动计算设备的用户相关联的联系信息中的一项或更多项。
另外,方法900包括识别对应于接收到的特征数据的增强现实元素的动作930。特别地,动作930可以涉及从所维护的多个增强现实元素中识别对应于接收到的特征数据的一个或更多个增强现实元素。在一个或更多个实施例中,识别对应于接收到的特征数据的一个或更多个增强现实元素包括分析接收到的特征数据以确定移动计算设备的位置、以及识别对应于移动计算设备的位置的一个或更多个增强现实元素。
例如,分析接收到的特征数据以确定移动计算设备的位置可以包括分析GPS信息、WiFi信息、网络系统信息或因特网搜索中的一项或更多项,以确定移动计算设备的位置。此外,识别对应于接收到的特征数据的一个或更多个增强现实元素还可以包括:分析接收到的特征数据以确定用户特征,该用户特征包括与移动计算设备的用户相关联的人口统计信息、与移动计算设备的用户相关联的网络系统简档信息、与移动计算设备的用户相关联的网络系统活动历史、以及与移动计算设备的用户的一个或更多个共同用户相关联的网络系统活动历史;以及识别对应于所确定的用户特征的一个或更多个增强现实元素。另外,在至少一个实施例中,识别对应于接收到的特征数据的一个或更多个增强现实元素还包括为一个或更多个增强现实元素中的每一个计算分数,该分数表示增强现实元素和接收到的特征数据之间的相关强度。
方法900还包括提供所识别的增强现实元素940的动作940。特别地,动作940可以涉及向移动计算设备提供所识别的一个或更多个增强现实元素,并且用于在移动计算设备的相机取景器显示内容内显示。在一个或更多个实施例中,方法900包括以下动作:接收表示遗留增强现实元素的数据,其中,该数据包括遗留增强现实元素的内容以及与遗留增强现实元素相关联的锚定位置;生成包括接收到的数据的遗留增强现实元素;检测与移动计算设备的用户相关联的网络系统用户何时进入锚定位置;以及向网络系统用户提供遗留增强现实元素。
图10示出了在移动计算设备的相机取景器显示内容上显示增强现实元素的一个示例方法1000的流程图。方法1000包括提供特征数据的动作1010。特别地,动作1010涉及从移动计算设备向网络系统提供多个特征数据,其中,特征数据包括与移动计算设备相关联的特征数据和与移动计算设备的用户相关联的特征数据。例如,在一个实施例中,与移动计算设备相关联的特征数据包括与移动计算设备相关联的位置信息。另外,在一个实施例中,与移动计算设备的用户相关联的特征数据包括与移动计算设备的用户相关联的网络系统唯一标识符、与移动计算设备的用户相关联的应用程序使用历史、或与移动计算设备的用户相关联的联系信息中的一项或更多项。
此外,方法1000包括接收对应于特征数据的增强现实元素的动作1020。特别地,动作1020涉及从网络系统接收对应于所提供的特征数据的一个或更多个增强现实元素。在一个或更多个实施例中,对应于所提供的特征数据的一个或更多个增强现实元素包括与移动计算设备相关联的位置信息关联的增强现实元素、与移动计算设备的用户相关联的人口统计信息关联的增强现实元素、或者与移动计算设备的用户相关联的网络系统信息关联的增强现实元素中的一个或更多个。
另外,方法1000包括确定接收到的增强现实元素的子集的动作1030。特别地,动作1030涉及基于对多个显示因素的分析来确定接收到的一个或更多个增强现实元素的子集。在一个或更多个实施例中,方法1000还包括识别多个显示因素的动作,其中,多个显示因素包括以下中的一个或更多个:相机取景器显示内容的分辨率、从显示在相机取景器显示内容内的图像馈源获取的图像帧中的拥挤程度、对与移动计算设备的用户相关联的网络系统信息的分析、或者对与一个或更多个接收到的增强现实元素中的每一个相关联的元数据的分析。
方法1000还包括显示增强现实元素的子集的动作1040。特别地,动作1040涉及在移动计算设备的相机取景器显示内容上显示接收到的一个或更多个增强现实元素的子集。另外,在一个实施例中,方法1000包括将接收到的一个或更多个增强现实元素的子集中的每一个映射到相机取景器显示内容内的点的动作。在一些实施例中,方法1000包括以下动作:检测移动计算设备的移动;以及更新相机取景器显示内容,使得接收到的一个或更多个增强现实元素的子集中的每一个保持被锚定到与该增强现实元素相关联的映射点。
此外,在一些实施例中,方法1000包括以下动作:检测与在接收到的一个或更多个增强现实元素的显示子集中的特定增强现实元素的交互;以及将移动计算设备的显示内容重定向到包括与特定增强现实元素相关联的信息的网络系统应用GUI。在至少一个实施例中,方法1000还包括基于与子集中的每个增强现实元素相关联的元数据,将增强现实元素的子集组织成一个或更多个类别;其中,显示接收到的一个或更多个增强现实元素的子集包括一次仅在相机取景器显示内容内显示一个或更多个增强现实元素类别中的一个类别。
本公开的实施例可以包括或利用包括计算机硬件(诸如,例如一个或更多个处理器和系统存储器)的专用或通用计算机,如下面更详细讨论的。本公开的范围内的实施例还包括用于承载或存储计算机可执行指令和/或数据结构的物理和其他计算机可读介质。特别地,本文描述的一个或更多个过程可以至少部分地被实现为包含在非暂时性计算机可读介质中并可由一个或更多个计算设备(例如,本文描述的任何媒体内容访问设备)执行的指令。通常,处理器(例如,微处理器)从非暂时性计算机可读介质(例如,存储器等)接收指令,并执行这些指令,从而执行包括本文描述的一个或更多个过程的一个或更多个过程。
计算机可读介质可以是通用或专用计算机系统可以访问的任何可用介质。存储计算机可执行指令的计算机可读介质是非暂时性计算机可读存储介质(设备)。承载计算机可执行指令的计算机可读介质为传输介质。因此,作为示例而非限制,本公开的实施例可以包括至少两种截然不同的计算机可读介质:非暂时性计算机可读存储介质(设备)和传输介质。
非暂时性计算机可读存储介质(设备)包括RAM、ROM、EEPROM、CD-ROM、(例如,基于RAM的)固态驱动器(SSD)、闪存、相变存储器(“PCM”)、其他类型的存储器、其他光盘存储器、磁盘存储器或其他磁性存储设备、或者可以用于存储期望的以计算机可执行指令或数据结构的形式的程序代码方法且可以由通用或专用计算机进行访问的任何其他介质。
“网络”被定义为一个或更多个数据链路,其实现计算机系统和/或模块和/或其他电子设备之间的电子数据的传输。当经由网络或另一个通信连接(硬接线、无线或者硬接线或无线的组合)将信息转移或提供到计算机时,计算机适当地将连接视为传输介质。传输介质可以包括网络和/或数据链路,该网络和/或数据链路可以用于承载期望的以计算机可执行指令或数据结构的形式的程序代码方法且可以由通用或专用计算机进行访问。上述的组合也应该被包括在计算机可读介质的范围内。
此外,在到达各种计算机系统组件时,以计算机可执行指令或数据结构的形式的程序代码方法可以从传输介质自动被传输到非暂时性计算机可读存储介质(设备)(或反之亦然)。例如,通过网络或数据链路接收的计算机可执行指令或数据结构可以被缓冲在网络接口模块(例如,“NIC”)内的RAM中,然后最终被传输到计算机系统RAM和/或计算机系统处的不太易失的计算机存储介质(设备)。因此,应当理解,非暂时性计算机可读存储介质(设备)可以被包括在同样(或者甚至主要)利用了传输介质的计算机系统组件中。
例如,计算机可执行指令包括指令和数据,其中当在处理器处执行时,该指令和数据使通用计算机、专用计算机或专用处理设备实现某个功能或一组功能。在一些实施例中,在通用计算机上执行计算机可执行指令,以将通用计算机变成实现本公开的元素的专用计算机。例如,计算机可执行指令可以是二进制、中间格式指令(诸如汇编语言)或甚至源代码。尽管已经以特定于结构化特征和/或方法行为的语言描述了主题,应理解的是,随附权利要求中定义的主题不必需局限于所描述的特征或以上所描述的行为。相反,所描述的特征和行为被公开作为实施权利要求的示例形式。
本领域技术人员将理解,本公开可以在具有许多类型的计算机系统配置的网络计算环境中实施,计算机系统配置包括个人计算机、台式计算机、膝上型计算机、消息处理器、手持设备、多处理器系统、基于微处理器的或可编程的消费者电子设备、网络PC、小型计算机、大型计算机、移动电话、PDA、平板计算机、寻呼机、路由器、交换机等。还可在分布式系统环境中实践本公开,在分布式系统环境中经网络链接(通过硬接线数据链路、无线数据链路或通过硬接线和无线数据链路的组合)的本地和远程计算机系统都执行任务。在分布式系统环境中,程序模块可位于本地和远程存储器存储设备中。
本公开的实施例还可以在云计算环境中实现。在本说明书中,“云计算”被定义为一种模型,用于实现对可配置计算资源的共享池的按需网络访问的模型。例如,可以在市场中采用云计算,以提供无处不在的且方便的对可配置计算资源的共享池的按需访问。可配置计算资源的共享池可以经由虚拟化来快速调配,并在管理工作量或服务提供商交互少的情况下进行释放,然后进行相应地扩展。
云计算模型可以由诸如例如按需自助服务、广泛的网络访问、资源池、快速弹性、测量服务等的各种特征组成。云计算模型还可以展示各种服务模型,例如软件即服务(“SaaS”)、平台即服务(“PaaS”)和基础架构即服务(“IaaS”)。云计算模型还可以使用不同的部署模型(例如私有云、社区云、公有云、混合云等等)进行部署。在本说明书中和在权利要求书中,“云计算环境”是部署了云计算的环境。
图11示出了示例性计算设备1100的框图,计算设备1100可以被配置为执行上述过程中的一个或更多个。人们将理解,一个或更多个计算设备(例如计算设备1100)可以实现增强现实系统100。如图11所示,计算设备1100可以包括处理器1102、存储器1104、储存设备1106、I/O接口1108和通信接口1110,它们可以通过通信基础设施1112被通信地耦合。虽然图11中示出了示例性计算设备1100,但是图11中示出的组件不意图为限制性的。在其他实施例中可以使用附加的或替代的组件。此外,在某些实施例中,计算设备1100可以包括比图11所示的组件更少的组件。现在将更加详细地描述图11所示的计算设备1100的组件。
在一个或更多个实施例中,处理器1102包括用于执行指令(例如构成计算机程序的那些指令)的硬件。作为示例而不是作为限制,为了执行指令,处理器1102可以从内部寄存器、内部高速缓存、存储器1104或储存设备1106中检索(或获取)指令,并进行解码,并执行它们。在一个或更多个实施例中,处理器1102可以包括用于数据、指令或地址的一个或更多个内部高速缓存。作为示例而不是作为限制,处理器1102可以包括一个或更多个指令高速缓存、一个或更多个数据高速缓存、以及一个或更多个转译后备缓冲器(TLB)。指令高速缓存中的指令可以是存储器1104或储存设备1106中的指令的副本。
存储器1104可以用于存储数据、元数据和由处理器执行的程序。存储器1104可以包括易失性和非易失性存储器中的一个或更多个,例如随机存取存储器(“RAM”)、只读存储器(“ROM”)、固态盘(“SSD”)、闪存、相变存储器(“PCM”)或其他类型的数据储存器。存储器1104可以是内部的或分布式的存储器。
储存设备1106包括用于存储数据或指令的储存器。作为示例而不是作为限制,储存设备1106可以包括上述非暂时性存储介质。储存设备1106可以包括硬盘驱动器(HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(USB)驱动器、或这些中的两个或更多个的组合。在适当的情况下,储存设备1106可以包括可移动或不可移动(或固定)介质。储存设备1106可以在计算设备1100的内部或外部。在一个或更多个实施例中,储存设备1106是非易失性固态存储器。在其他实施例中,储存设备1106包括只读存储器(ROM)。在适当的情况下,该ROM可以是掩模编程ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)、或闪存、或这些中的两个或更多个的组合。
I/O接口1108允许用户向计算设备1100提供输入、从计算设备1100接收输出、以及以其他方式向计算设备1100传输数据和从计算设备1100接收数据。I/O接口1108可以包括鼠标、小键盘(keypad)或键盘、触摸屏、相机、光学扫描仪、网络接口、调制解调器、其他已知的I/O设备或这些I/O接口的组合。I/O接口1108可以包括用于向用户呈现输出的一个或更多个设备,包括但不限于图形引擎、显示器(例如,显示屏)、一个或更多个输出驱动器(例如,显示驱动器)、一个或更多个音频扬声器以及一个或更多个音频驱动器。在某些实施例中,I/O接口1108被配置为向显示器提供图形数据以呈现给用户。图形数据可以表示一个或更多个图形用户界面和/或可以服务于特定实现的任何其他图形内容。
通信接口1110可以包括硬件、软件或两者。在任何情况下,通信接口1110可以提供一个或更多个接口用于计算设备1100和一个或更多个其他计算设备或网络之间的通信(例如,基于数据包的通信)。作为示例而不是作为限制,通信接口1110可以包括用于与以太网或其他基于有线的网络进行通信的网络接口控制器(NIC)或网络适配器,或用于与无线网络(例如WI-FI)进行通信的无线NIC(WNIC)或无线适配器。
另外或替代地,通信接口1110可以促进与自组织网络、个域网(PAN)、局域网(LAN)、广域网(WAN)、城域网(MAN)或因特网的一个或更多个部分、或这些中的两个或更多个的组合的通信。这些网络中的一个或更多个的一个或更多个部分可以是有线的或无线的。作为示例,通信接口1110可以促进与无线PAN(WPAN)(例如,蓝牙WPAN)、WI-FI网络、WI-MAX网络、蜂窝电话网络(例如,全球移动通信系统(GSM)网络)、或其他合适的无线网络、或它们的组合的通信。
另外,通信接口1110可以促进各种通信协议的通信。可以使用的通信协议的示例包括但不限于数据传输介质、通信设备、传输控制协议(“TCP”)、因特网协议(“IP”)、文件传输协议(“FTP”)、远程登录协议、超文本传输协议(“HTTP”)、安全超文本传输协议(“HTTPS”)、会话发起协议(“SIP”)、简单对象访问协议(“SOAP”)、可扩展标记语言(“XML”)及其变体、简单邮件传输协议(“SMTP”)、实时传输协议(“RTP”)、用户数据报协议(“UDP”)、全球移动通信系统(“GSM”)技术,码分多址(“CDMA”)技术、时分多址(“TDMA”)技术、短消息服务(“SMS”)、多媒体消息服务(“MMS”)、射频(“RF”)信令技术、长期演进(“LTE”)技术、无线通信技术、带内和带外信令技术以及其他合适的通信网络和技术。
通信基础设施1112可以包括将计算设备1100的组件耦合到彼此的硬件、软件或两者。作为示例而不是作为限制,通信基础设施1112可以包括加速图形端口(AGP)或其他图形总线、扩展工业标准体系结构(EISA)总线、前端总线(FSB)、HYPERTRANSPORT(HT)互连件、工业标准体系结构(ISA)总线、INFINIBAND互连件、低引脚数(LPC)总线、存储器总线,微通道体系结构(MCA)总线、外围组件互连(PCI)总线、PCI-Express(扩展)(PCIe)总线、串行高级技术附件(SATA)总线、视频电子标准协会本地(VLB)总线、或任何其他合适的总线、或它们的组合。
如上面所提到的,增强现实系统100可以包括社交网络系统。社交网络系统可以使其用户(例如个人或组织)能够与系统交互以及彼此互动。社交网络系统可以用来自用户的输入来创建与用户相关联的用户简档并将其存储在社交网络系统中。用户简档可以包括人口统计信息、通信渠道信息以及关于用户的个人兴趣的信息。社交网络系统还可以用来自用户的输入来创建并存储用户与社交网络系统的其他用户的关系的记录,以及提供服务(例如,帖子、照片分享、事件组织、消息传送、游戏或广告)以便利在用户之间或当中的社交互动。
社交网络系统可以将用户的记录和用户之间的关系存储在社交图中,该社交图包括多个节点和连接这些节点的多条边。节点可以包括多个用户节点和多个概念节点。社交图的用户节点可以对应于社交网络系统的用户。用户可以是个人(人类用户)、实体(例如,企业、公司或第三方应用)或(例如,个人或实体的)团体。对应于用户的用户节点可以包括由用户提供的信息和由包括社交网络系统在内的各种系统收集的信息。
例如,用户可以提供他的或她的姓名、简档图片、居住城市、联系信息、出生日期、性别、婚姻状况、家庭状况、就业、教育背景、偏好、兴趣和将被包括在用户节点中的其他人口统计信息。社交图的每个用户节点可以具有相应的网页(通常称为简档页面)。响应于包括用户名的请求,社交网络系统可以访问对应于该用户名的用户节点,并构建包括名称、简档图片和与用户相关联的其他信息的简档页面。基于第一用户的一个或更多个隐私设置以及第一用户和第二用户之间的关系,第一用户的简档页面可以向第二用户显示第一用户的全部或部分信息。
概念节点可以对应于社交网络系统的概念。例如,概念可以表示现实世界的实体,例如电影、歌曲、运动队、名人、团体、餐馆、地方或地点。对应于概念的概念节点的管理用户可以通过提供概念的信息(例如,通过填写在线表格)来创建或更新概念节点,使得社交网络系统将信息与概念节点关联起来。例如但不是限制,与概念相关联的信息可以包括名称或标题、一幅或更多幅图像(例如,书籍的封面的图像)、网站(例如,URL地址)或联系信息(例如,电话号码、电子邮件地址)。社交图的每个概念节点可以对应于一个网页。例如,响应于包括名称的请求,社交网络系统可以访问对应于该名称的概念节点,并构建包括该名称和与该概念相关联的其他信息的网页。
在一对节点之间的边可以表示在该对节点之间的关系。例如,在两个用户节点之间的边可以表示两个用户之间的友谊。对于另一示例,社交网络系统可以构建概念节点(例如,餐馆、名人)的网页(或结构化文档),在网页中结合一个或更多个可选选项或可选元素(例如,“喜欢”、“签到”)。用户可以使用由用户的客户端设备承载的web浏览器访问该页面,并选择可选选项或可选元素,使得客户端设备向社交网络系统发送请求,以在用户的用户节点和概念的概念节点之间创建边,该边指示用户和概念之间的关系(例如,用户在餐馆签到,或者用户“喜欢”名人)。
作为示例,用户可以提供(或改变)他的或她的居住城市,使得社交网络系统在对应于用户的用户节点和对应于用户声明作为他的或她的居住城市的城市的概念节点之间创建边。此外,任意两个节点之间的分离度(degree of separation)被定义为从一个节点遍历社交图到另外一个节点所需的最小跳数。两个节点之间的分离度可以被认为是社交图中由两个节点表示的用户之间或概念之间的相关性的度量。例如,具有由边直接连接的用户节点(即,是一级节点)的两个用户可以被描述为“连接的用户”或“朋友”。类似地,具有仅通过另一用户节点连接的用户节点(即,是二级节点)的两个用户可以被描述为“朋友的朋友”。
社交网络系统可以支持多种应用,例如照片共享、在线日历和事件、游戏、即时消息和广告。例如,社交网络系统还可以包括媒体共享能力。此外,社交网络系统可以允许用户将照片和其他多媒体内容项目发布到用户的简档页面(通常称为“墙帖(wall posts)”或“时间线帖(timeline posts)”)或相册中,根据用户配置的隐私设置,这两者对社交网络系统的其他用户可以是可访问的。社交网络系统还可以允许用户配置事件。例如,第一用户可以用包括事件的时间和日期、事件的位置和被邀请参加事件的其他用户的属性来配置事件。被邀请的用户可以接收到事件的邀请并(例如通过接受邀请或拒绝它)做出回应。此外,社交网络系统可以允许用户维护个人日历。类似于事件,日历条目可以包括时间、日期、位置和其他用户的身份。
图12示出了社交网络系统的示例网络环境1200。网络环境1200包括通过网络1204连接到彼此的客户端设备1206、网络系统1202和第三方系统1208。尽管图12示出了客户端设备1206、网络系统1202、第三方系统1208和网络1204的特定布置,但是本公开设想了客户端设备1206、网络系统1202、第三方系统1208和网络1204的任何合适的布置。作为示例而不是作为限制,客户端设备1206、网络系统1202和第三方系统1208中的两个或更多个可以绕过网络1204,直接连接到彼此。作为另一示例,客户端设备1206、网络系统1202和第三方系统1208中的两个或更多个可以全部或部分地在物理上或逻辑上彼此位于同一位置。此外,尽管图12示出了特定数量的客户端设备1206、网络系统1202、第三方系统1208和网络1204,但是本公开设想了任何合适数量的客户端设备1206、网络系统1202、第三方系统1208和网络1204。作为示例而不是作为限制,网络环境1200可以包括多个客户端设备1206、网络系统1202、第三方系统1208和网络1204。
本公开设想了任何合适的网络1204。作为示例而不是作为限制,网络1204的一个或更多个部分可以包括自组织网络、内联网、外联网、虚拟专用网络(VPN)、局域网(LAN)、无线LAN(WLAN)、广域网(WAN)、无线WAN(WWAN)、城域网(MAN)、因特网的一部分、公共交换电话网(PSTN)的一部分、蜂窝电话网、或这些中的两个或更多个的组合。网络1204可以包括一个或更多个网络1204。
链路可以将客户端设备1206、网络系统1202和第三方系统1208连接到通信网络1204或连接到彼此。本公开设想了任何合适的链路。在特定实施例中,一个或更多个链路包括一个或更多个有线(例如数字用户线路(DSL)或基于电缆的数据服务接口规范(DOCSIS))链路、无线(例如Wi-Fi或全球互通微波接入(WiMAX))链路、或光(例如同步光网络(SONET)或同步数字体系(SDH))链路。在特定实施例中,一个或更多个链路各自包括自组织网络、内联网、外联网、VPN、LAN、WLAN、WAN、WWAN、MAN、因特网的一部分、PSTN的一部分、基于蜂窝技术的网络、基于卫星通信技术的网络、另一链路、或两个或更多个这样的链路的组合。链路不需要在整个网络环境1200中是相同的。一个或更多个第一链路可以在一个或更多个方面上不同于一个或更多个第二链路。
在特定实施例中,客户端设备1206可以是包括硬件、软件或嵌入式逻辑组件、或两个或更多个这样的组件的组合并且能够执行由客户端设备1206实现或支持的适当功能的电子设备。作为示例而不是作为限制,客户端设备1206可以包括计算机系统,例如台式计算机、笔记本或膝上型计算机、上网本、平板计算机、电子书阅读器、GPS设备、相机、个人数字助理(PDA)、手持电子设备、蜂窝电话、智能手机、其他合适的电子设备、或它们的任何合适的组合。本公开设想了任何合适的客户端设备1206。客户端设备1206可以使在客户端设备1206处的网络用户能够访问网络1204。客户端设备1206可以使它的用户能够与在其他客户端设备1206处的其他用户进行通信。
在特定实施例中,客户端设备1206可以包括web浏览器,例如MICROSOFT INTERNETEXPLORER、GOOGLE CHROME或MOZILLA FIREFOX,并且可以具有一个或更多个附加件、插件或其他扩展件,例如TOOLBAR或YAHOO TOOLBAR。在客户端设备1206处的用户可以输入统一资源定位符(URL)或将web浏览器引导到特定的服务器(例如服务器或与第三方系统1208相关联的服务器)的其他地址,并且web浏览器可以生成超文本传输协议(HTTP)请求并将HTTP请求传递到服务器。服务器可以接受HTTP请求,并响应于HTTP请求而向客户端设备1206传递一个或更多个超文本标记语言(HTML)文件。客户端设备1206可以基于来自服务器的HTML文件来显现网页用于呈现给用户。本公开设想了任何合适的网页文件。作为示例而不是作为限制,可以根据特定的需要从HTML文件、可扩展超文本标记语言(XHTML)文件或可扩展标记语言(XML)文件来显现网页。这样的页面还可以执行脚本(例如且不限于,用JAVASCRIPT、JAVA、MICROSOFT SILVERLIGHT编写的脚本)、标记语言和脚本的组合(例如AJAX(异步JAVASCRIPT和XML)),等等。在本文,在适当的情况下,对网页的引用包括一个或更多个相应的网页文件(浏览器可以使用这些网页文件来显现网页),反之亦然。
在特定实施例中,网络系统1202可以是可以承载在线社交网络的网络可寻址计算系统。网络系统1202可以生成、存储、接收并发送社交网络数据(例如,用户简档数据、概念简档数据、社交图信息或与在线社交网络相关的其他合适的数据)。网络系统1202可以由网络环境1200的其他组件直接地或经由网络1204来访问。在特定实施例中,网络系统1202可以包括一个或更多个服务器。每个服务器可以是单一服务器(unitary server)或跨越多台计算机或多个数据中心的分布式服务器。服务器可以具有各种类型,例如且不限于,web服务器、新闻服务器、邮件服务器、消息服务器、广告服务器、文件服务器、应用服务器、交换服务器、数据库服务器、代理服务器、适合于执行本文描述的功能或过程的另一服务器、或者其任何组合。在特定实施例中,每个服务器可以包括硬件、软件或嵌入式逻辑组件、或用于执行由服务器实现或支持的适当功能的两个或更多个这样的组件的组合。在特定实施例中,网络系统1202可以包括一个或更多个数据储存器。数据储存器可以用于存储各种类型的信息。在特定实施例中,可以根据特定的数据结构来组织存储在数据储存器中的信息。在特定实施例中,每个数据储存器可以是关系数据库、纵列(columnar)数据库、相关性数据库或其他合适的数据库。尽管本公开描述或示出了特定类型的数据库,但是本公开设想了任何合适类型的数据库。特定实施例可以提供使客户端设备1206、网络系统1202或第三方系统1208能够管理、检索、修改、添加或删除存储在数据储存器中的信息的接口。
在特定实施例中,网络系统1202可以在一个或更多个数据储存器中存储一个或更多个社交图。在特定实施例中,社交图可以包括多个节点——其可以包括多个用户节点(各自对应于特定用户)或多个概念节点(各自对应于特定概念)——以及连接节点的多个边。网络系统1202可以向在线社交网络的用户提供与其他用户通信和互动的能力。在特定实施例中,用户可以经由网络系统1202加入在线社交网络,且然后将关连(例如,关系)添加到网络系统1202中的他们想要关连到的多个其他用户。在本文,术语“朋友”可以指网络系统1202的任何其他用户,用户经由网络系统1202与任何其他用户形成关连(connection)、关联(association)或关系。
在特定实施例中,网络系统1202可以向用户提供对由网络系统1202支持的各种类型的项目或对象采取动作的能力。作为示例而不是作为限制,项目和对象可以包括网络系统1202的用户可能属于的组或社交网络、用户可能感兴趣的事件或日历条目、用户可以使用的基于计算机的应用、允许用户经由服务来购买或销售商品的交易、用户可以执行的与广告的互动、或其他合适的项目或对象。用户可以与能够在网络系统1202中或者由第三方系统1208的外部系统表示的任何事物进行互动,第三方系统1208与网络系统1202分离并且经由网络1204耦合到网络系统1202。
在特定实施例中,网络系统1202能够链接各种实体。作为示例而不是作为限制,网络系统1202可以使用户能够彼此互动以及从第三方系统1208或其他实体接收内容,或者允许用户通过应用编程接口(API)或其他通信渠道与这些实体互动。
在特定实施例中,第三方系统1208可以包括一种或更多种类型的服务器、一个或更多个数据储存器、一个或更多个接口(包括但不限于API)、一个或更多个web服务、一个或更多个内容源、一个或更多个网络或任何其他合适的组件(例如,服务器可以与这些组件通信)。第三方系统1208可以由与操作网络系统1202的实体不同的实体进行操作。然而,在特定实施例中,网络系统1202和第三方系统1208可以结合彼此来操作以向网络系统1202或第三方系统1208的用户提供社交网络服务。在这个意义上,网络系统1202可以提供平台或骨干网,其他系统(例如第三方系统1208)可以使用该平台或骨干网来在整个因特网上向用户提供社交网络服务和功能。
在特定实施例中,第三方系统1208可以包括第三方内容对象提供者。第三方内容对象提供者可以包括可以被传送到客户端设备1206的内容对象的一个或更多个源。作为示例而不是作为限制,诸如,内容对象可以包括关于用户感兴趣的事情或活动的信息,例如电影放映时间、电影评价、餐馆评价、餐馆菜单、产品信息及评价或其他合适的信息。作为另一示例而不是作为限制,内容对象可以包括激励内容对象(例如优惠券、折扣券、礼品券或其他合适的激励对象)。
在特定实施例中,网络系统1202还包括用户生成的内容对象,其可以增强用户与网络系统1202的互动。用户生成的内容可以包括用户可以添加、上传、发送或“发布”到网络系统1202的任何内容。作为示例而不是作为限制,用户将帖子从客户端设备1206传送到网络系统1202。帖子可以包括数据,例如状态更新或其他文本数据、位置信息、照片、视频、链接、音乐或其他类似数据或媒体。内容还可以由第三方通过“通信渠道”(例如消息动态或流)来添加到网络系统1202。
在特定实施例中,网络系统1202可以包括各种服务器、子系统、程序、模块、日志和数据储存器。在特定实施例中,网络系统1202可以包括下列项中的一个或更多个:web服务器、动作记录器、API请求服务器、相关性和排名引擎、内容对象分类器、通知控制器、动作日志、第三方内容对象暴露日志、推理模块、授权/隐私服务器、搜索模块、广告定位模块(advertisement-targeting module)、用户界面模块、用户简档储存器、关连储存器(connection store)、第三方内容储存器或位置储存器。网络系统1202还可以包括合适的组件,例如网络接口、安全机构、负载平衡器、故障转移服务器、管理和网络操作控制台、其他合适的组件、或它们的任何合适的组合。在特定实施例中,网络系统1202可以包括用于存储用户简档的一个或更多个用户简档储存器。用户简档可以包括例如传记信息、人口统计信息、行为信息、社交信息或其他类型的描述性信息(例如工作经验、教育历史、爱好或偏好、兴趣、亲和关系或位置)。兴趣信息可以包括与一个或更多个类别相关的兴趣。类别可以是一般的或特定的。作为示例而不是作为限制,如果用户“赞(like)”关于一种品牌的鞋的文章,该类别可以是品牌,或者“鞋”或“衣服”的一般类别。关连储存器可以用于存储关于用户的关连信息。关连信息可以指示具有相似或共同的工作经历、组成员资格、爱好、教育历史或者以任何方式相关或共享共同属性的用户。关连信息还可以包括在不同用户和内容(内部和外部)之间的用户定义的关连。web服务器可以用于经由网络1204将网络系统1202链接到一个或更多个客户端设备1206或一个或更多个第三方系统1208。web服务器可以包括邮件服务器或用于在网络系统1202和一个或更多个客户端设备1206之间接收并按规定路线发送消息的其他消息传送功能。API请求服务器可以允许第三方系统1208通过调用一个或更多个API来访问来自网络系统1202的信息。动作记录器可以用于从web服务器接收关于用户在网络系统1202上或之外的动作的通信。结合动作日志,可以维护关于用户暴露给第三方内容对象的第三方内容对象日志。通知控制器可以向客户端设备1206提供关于内容对象的信息。信息可以作为通知被推送到客户端设备1206,或者信息可以响应于从客户端设备1206接收的请求而从客户端设备1206中被拉取。授权服务器可以用于实施网络系统1202的用户的一个或更多个隐私设置。用户的隐私设置确定与用户相关联的特定信息可以如何被分享。授权服务器可以例如通过设置适当的隐私设置来允许用户选择加入或选择退出使他们的动作由网络系统1202记录或者与其他系统(例如,第三方系统1208)分享。第三方内容对象储存器可以用于存储从第三方(例如第三方系统1208)接收的内容对象。位置储存器可以用于存储从与用户相关联的客户端设备1206接收的位置信息。广告定价模块可以组合社交信息、当前时间、位置信息或其他合适的信息以用通知的形式向用户提供相关广告。
图13示出了示例社交图1300。在特定实施例中,网络系统1202可以在一个或更多个数据储存器中存储一个或更多个社交图1300。在特定实施例中,社交图1300可以包括多个节点(其可以包括多个用户节点1302或多个概念节点1304)以及连接这些节点的多个边1306。为了教导目的,在二维可视化地图表示中示出了在图13中示出的示例社交图1300。在特定实施例中,网络系统1202、客户端设备1206或第三方系统1208可以访问社交图1300和相关社交图信息以用于合适的应用。社交图1300的节点和边可以作为数据对象被存储在例如数据储存器(例如社交图数据库)中。这种数据储存器可以包括社交图1300的节点或边的一个或更多个可搜索或可查询的索引。
在特定实施例中,用户节点1302可以对应于网络系统1202的用户。作为示例而不是作为限制,用户可以是与网络系统1202或通过网络系统1202互动或通信的个人(人类用户)、实体(例如,企业、公司或第三方应用)或(例如,个人或实体的)团体。在特定实施例中,当用户向网络系统1202注册账户时,网络系统1202可以创建对应于用户的用户节点1302,并将用户节点1302存储在一个或更多个数据储存器中。本文描述的用户和用户节点1302在适当的情况下可以指注册的用户和与注册的用户相关联的用户节点1302。另外或作为备选方案,在适当的情况下,本文描述的用户和用户节点1302可以指没有向网络系统1202注册的用户。在特定实施例中,用户节点1302可以与由用户提供的信息或由各种系统(包括网络系统1202)收集的信息相关联。作为示例而不是作为限制,用户可以提供他或她的姓名、简档图片、联系信息、出生日期、性别、婚姻状况、家庭状况、职业、教育背景、偏好、兴趣或其他人口统计信息。在特定实施例中,用户节点1302可以与对应于与用户相关联的信息的一个或更多个数据对象相关联。在特定实施例中,用户节点1302可以对应于一个或更多个网页。
在特定实施例中,概念节点1304可以对应于概念。作为示例而不是作为限制,概念可以对应于地点(例如,电影院、餐馆、地标或城市);网站(例如,与网络系统1202相关联的网站或与web应用服务器相关联的第三方网站);实体(例如,个人、企业、团体、运动队或名人);资源(例如,音频文件、视频文件、数字照片、文本文件、结构化文档或应用),其可以位于网络系统1202内或外部服务器(例如web应用服务器)上;不动产或知识产权(例如,雕塑、绘画、电影、游戏、歌曲、想法、照片或书面作品);游戏;活动;想法或理论;另一个合适的概念;或者两个或更多个这样的概念。概念节点1304可以与由用户提供的概念的信息或由各种系统(包括网络系统1202)收集的信息相关联。作为示例而不是作为限制,概念的信息可以包括名称或标题;一个或更多个图像(例如,书籍的封面的图像);位置(例如,地址或地理位置);网站(其可以与URL相关联);联系信息(例如,电话号码或电子邮件地址);其他合适的概念信息;或者这样的信息的任何合适的组合。在特定实施例中,概念节点1304可以与对应于与概念节点1304相关联的信息的一个或更多个数据对象相关联。在特定实施例中,概念节点1304可以对应于一个或更多个网页。
在特定实施例中,社交图1300中的节点可以表示网页(其可以被称为“简档页面”)或者由网页表示。简档页面可以由网络系统1202承载或是网络系统1202可访问的。简档页面也可以在与第三方系统1208相关联的第三方网站上被承载。作为示例而不是作为限制,对应于特定外部网页的简档页面可以是特定外部网页,并且简档页面可以对应于特定概念节点1304。简档页面可以由其他用户的全部或选定子集可查看。作为示例而不是作为限制,用户节点1302可以具有相应的用户简档页面,在用户简档页面中相应的用户可以添加内容、做出声明或以其他方式表达他或她自己。作为另一示例而不是作为限制,概念节点1304可以具有相应的概念简档页面,在概念简档页面中一个或更多个用户可以特别是关于对应于概念节点1304的概念来添加内容、做出声明或表达他们自己。
在特定实施例中,概念节点1304可以表示由第三方系统1208承载的第三方网页或资源。第三方网页或资源除了其他元素以外还可以包括表示动作或活动的内容、可选择的图标或其他图标或其他可交互对象(其可以例如用JavaScript、AJAX或PHP代码实现)。作为示例而不是作为限制,第三方网页可以包括可选择的图标(例如“赞”、“签到(check-in)”、“吃”、“推荐”)或其他合适的动作或活动。查看第三方网页的用户可以通过选择图标之一(例如,“吃”)来执行动作,使客户端设备1206向网络系统1202发送指示用户的动作的消息。响应于该消息,网络系统1202可以在对应于用户的用户节点1302和对应于第三方网页或资源的概念节点1304之间创建边(例如,“吃”边),并将边1306存储在一个或更多个数据储存器中。
在特定实施例中,社交图1300中的一对节点可以通过一条或更多条边1306连接到彼此。连接一对节点的边1306可以表示在该对节点之间的关系。在特定实施例中,边1306可以包括或表示对应于在一对节点之间的关系的一个或更多个数据对象或属性。作为示例而不是作为限制,第一用户可以指示第二用户是第一用户的“朋友”。响应于该指示,网络系统1202可以向第二用户发送“朋友请求”。如果第二用户确认“朋友请求”,则网络系统1202可以在社交图1300中创建将第一用户的用户节点1302连接到第二用户的用户节点1302的边1306,并将边1306作为社交图信息存储在一个或更多个数据储存器中。在图13的示例中,社交图1300包括指示在用户“A”和用户“B”的用户节点1302之间的朋友关系的边1306,以及指示在用户“C”和用户“B”的用户节点1302之间的朋友关系的边。尽管本公开描述或示出了连接特定用户节点1302的具有特定属性的特定边1306,但是本公开设想了连接用户节点1302的具有任何适当属性的任何适当边1306。作为示例而不是作为限制,边1306可以表示友谊、家庭关系、商业或雇佣关系、粉丝关系、追随者关系、访问者关系、订购者关系、上级/下级关系、互惠关系、非互惠关系、另一种合适类型的关系、或两种或更多种这样的关系。此外,尽管本公开一般将节点描述为被连接,但是本公开也将用户或概念描述为被连接。在本文,对被连接的用户或概念的引用在适当的情况下可以指对应于在社交图1300中由一条或更多条边1306连接的那些用户或概念的节点。
在特定实施例中,在用户节点1302和概念节点1304之间的边1306可以表示由与用户节点1302相关联的用户朝着与概念节点1304相关联的概念执行的特定动作或活动。作为示例而不是作为限制,如图13所示,用户可以“赞”、“出席”、“播放”、“收听”、“烹饪”、“工作于”或“观看”概念,其中每个可以对应于边类型或子类型。对应于概念节点1304的概念简档页面可以包括例如可选择的“签到”图标(例如,可点击的“签到”图标)或可选择的“添加到收藏夹”图标。类似地,在用户点击这些图标之后,网络系统1202可以响应于对应于相应动作的用户动作来创建“收藏夹”边或“签到”边。作为另一示例而不是作为限制,用户(用户“C”)可以使用特定的应用(声田(SPOTIFY),其为在线音乐应用)来收听特定的歌曲(“继续漫步(Ramble On)”)。在这种情况下,网络系统1202可以在对应于用户的用户节点1302和对应于歌曲和应用的概念节点1304之间创建“收听”边1306和“使用”边(如图13所示),以指示用户收听了歌曲并使用了应用。此外,网络系统1202可以在对应于歌曲和应用的概念节点1304之间创建“播放”边1306(如图13所示),以指示特定的歌曲由特定的应用播放。在这种情况下,“播放”边1306对应于由外部应用(声田)对外部音频文件(歌曲“想象(Imagine)”)执行的动作。尽管本公开描述了连接用户节点1302和概念节点1304的具有特定属性的特定边1306,但是本公开设想了连接用户节点1302和概念节点1304的具有任何适当属性的任何适当边1306。此外,尽管本公开描述了在用户节点1302和概念节点1304之间表示单个关系的边,但是本公开设想了在用户节点1302和概念节点1304之间表示一个或更多个关系的边。作为示例而不是作为限制,边1306可以表示用户喜欢并使用了特定概念。替代地,另一条边1306可以表示在用户节点1302和概念节点1304之间(如图13所示,在用户“E”的用户节点1302和“声田”的概念节点1304之间)的每种类型的关系(或多个单一关系)。
在特定实施例中,网络系统1202可以在社交图1300中的用户节点1302和概念节点1304之间创建边1306。作为示例而不是作为限制,查看概念简档页面的用户(例如,通过使用web浏览器或由用户的客户端设备1206承载的专用应用程序)可以通过点击或选择“赞”图标来指示他或她喜欢由概念节点1304表示的概念,这可以使用户的客户端设备1206向网络系统1202发送指示用户喜欢与概念简档页面相关联的概念的消息。响应于该消息,网络系统1202可以在与用户相关联的用户节点1302和概念节点1304之间创建边1306,如由在用户和概念节点1304之间的“赞”边1306所示的。在特定实施例中,网络系统1202可以将边1306存储在一个或更多个数据储存器中。在特定实施例中,边1306可以由网络系统1202响应于特定用户动作而自动形成。作为示例而不是作为限制,如果第一用户上传图片、观看电影或听歌曲,则可以在对应于第一用户的用户节点1302和对应于那些概念的概念节点1304之间形成边1306。尽管本公开描述了以特定方式形成特定边1306,但是本公开设想了以任何合适的方式形成任何合适的边1306。
在特定实施例中,广告可以是文本(其可以是HTML链接的)、一个或更多个图像(其可以是HTML链接的)、一个或更多个视频、音频、一个或更多个ADOBE FLASH文件、这些的合适组合、或者在一个或更多个网页上、在一个或更多个电子邮件中或者结合由用户请求的搜索结果呈现的以任何合适的数字格式的任何其他合适的广告。另外或作为备选方案,广告可以是一个或更多个赞助动态(sponsored story)(例如,在网络系统1202上的消息动态或即时动态栏(ticker item))。赞助动态可以是用户的社交动作(例如“点赞”页面、“点赞”或评论页面上的帖子、对与页面相关联的事件进行回复(RSVP)、对在页面上发布的问题进行投票、在某个地方签到、使用应用程序或玩游戏、或者“点赞”或分享网站),广告商例如,通过使社交动作呈现在用户的简档页面或其他页面的预定区域内、与和广告商相关联的附加信息一起呈现、在其他用户的消息动态或即时动态内被提升顺序(bump up)或以其他方式突出显示来推广社交动作、或者以其他方式推广社交动作。广告商可以付费来推广社交动作。作为示例而不是作为限制,广告可以被包括在搜索结果页面的搜索结果当中,其中赞助内容优于非赞助内容被推广。
在特定实施例中,广告可以被请求用于在社交网络系统网页、第三方网页或其他页面中显示。广告可以显示在页面的专用部分中,例如在页面的顶部处的标语(banner)区域中、在页面的侧面处的栏中、在页面的GUI中、在弹出窗口中、在下拉菜单中、在页面的输入字段中、在页面的内容的顶部之上或相对于页面的其他地方。另外或作为备选方案,广告可以显示在应用程序内。广告可以显示在专用页面内,在用户可以访问页面或利用应用程序之前要求用户与广告互动或观看广告。用户可以例如通过web浏览器来观看广告。
用户可以以任何合适的方式与广告互动。用户可以点击或以其他方式选择广告。通过选择广告,用户可以被引导到(或由用户正在使用的浏览器或其他应用程序)与广告相关联的页面。在与广告相关联的页面处,用户可以采取另外的动作,例如购买与广告相关联的产品或服务、接收与广告相关联的信息、或者订阅与广告相关联的简讯。可以通过选择广告的组件(如“播放按钮”)来播放具有音频或视频的广告。替代地,通过选择广告,网络系统1202可以执行或修改用户的特定动作。
广告还可以包括社交网络系统功能,用户可以与社交网络系统功能互动。作为示例而不是作为限制,广告可以使用户能够通过选择与赞同(endorsement)相关联的图标或链接来“点赞”或以其他方式来赞同该广告。作为另一示例而不是作为限制,广告可以使用户能够(例如,通过执行查询)搜索与广告商相关的内容。类似地,用户可以与另一用户(例如,通过网络系统1202)分享广告或(例如,通过网络系统1202)回复(RSVP)与广告相关联的事件。另外或作为备选方案,广告可以包括被引导到用户的社交网络系统上下文。作为示例而不是作为限制,广告可以显示关于用户的在网络系统1202内已经采取与广告的主题相关联的动作的朋友的信息。
在特定实施例中,网络系统1202可以确定各种社交图实体对于彼此的社交图亲和度(affinity)(在本文可以称为“亲和度”)。亲和度可以表示与在线社交网络相关联的特定对象(例如用户、概念、内容、动作、广告、与在线社交网络相关联的其他对象、或它们的任何合适的组合)之间的关系强度或兴趣水平。亲和度还可以相对于与第三方系统1208或其他合适的系统相关联的对象来确定。可以为每个用户、主题、或内容的类型建立对社交图实体的总体亲和度。基于对与社交图实体相关联的动作或关系的持续监控,总体亲和度可以改变。尽管本公开描述了以特定方式确定特定亲和度,但是本公开设想了以任何合适的方式确定任何合适的亲和度。
在特定实施例中,网络系统1202可以使用亲和度系数(在本文可以称为“系数”)来度量或量化社交图亲和度。该系数可以表示或量化与在线社交网络相关联的特定对象之间的关系强度。该系数还可以表示基于用户对特定动作的兴趣来度量用户将执行该动作的预测概率的概率或函数。以这种方式,可以基于用户的先前动作来预测用户的未来动作,其中系数可以至少部分地根据用户的动作的历史来计算。系数可以用于预测在线社交网络内或外部的任何数量的动作。作为示例而不是作为限制,这些动作可以包括各种类型的通信,例如发送消息、发布内容或对内容进行评论;各种类型的观察动作,例如访问或查看简档页面、媒体或其他合适的内容;关于两个或更多个社交图实体的各种类型的巧合信息,例如在同一群组中、在同一照片中被标记、在同一位置处签到或参加同一事件;或其他合适的动作。尽管本公开描述了以特定方式度量亲和度,但是本公开设想了以任何合适的方式度量亲和度。
在特定实施例中,网络系统1202可以使用各种因素来计算系数。这些因素可以包括例如用户动作、对象之间的关系类型、位置信息、其他合适的因素、或它们的任意组合。在特定实施例中,当计算系数时,不同的因素可以被不同地加权。每个因素的权重可以是静态的,或者权重可以根据例如用户、关系类型、动作类型、用户的位置等而改变。因素的评级可以根据因素的权重进行组合,以确定用户的总体系数。作为示例而不是限制,特定用户动作可以被分配评级和权重,而与特定用户动作相关联的关系被分配评级和相关权重(例如,因此权重总计为100%)。为了计算用户对特定对象的系数,分配给用户的动作的评级可以包括例如总体系数的60%,而分配给用户和对象之间的关系的评级可以包括总系数的40%。在特定实施例中,当确定用于计算系数的各种因素的权重时,网络系统1202可以考虑各种变量,例如自信息被访问以来的时间、衰减因子、访问的频率、与信息的关系或与信息被访问了的对象的关系、与连接到对象的社交图实体的关系、用户动作的短期或长期平均值、用户反馈、其他合适的变量、或它们的任意组合。作为示例而不是作为限制,系数可以包括衰减因子,该衰减因子导致由特定动作提供的信号的强度随着时间衰减,使得在计算系数时更近的动作是更相关的。评级和权重可以基于对系数所基于的动作的持续跟踪而持续更新。可以采用任何类型的过程或算法来分配、组合、平均等每个因素的评级和分配给这些因素的权重。在特定实施例中,网络系统1202可以使用根据历史动作和过去的用户响应训练的机器学习算法,或者通过将用户暴露于各种选项并测量响应而从用户获得的数据,来确定系数。尽管本公开描述了以特定方式计算系数,但是本公开设想了以任何合适的方式计算系数。
在特定实施例中,网络系统1202可以基于用户的动作来计算系数。网络系统1202可以监控在线社交网络上、第三方系统1208上、其他合适的系统上、或它们的任意组合上的这样的动作。可以跟踪或监控任何合适类型的用户动作。典型的用户动作包括查看简档页面、创建或发布内容、与内容进行互动、加入群组、列出并确认事件的出席情况、在位置处签到、点赞特定页面、创建页面以及执行其他便利社交动作的任务。在特定实施例中,网络系统1202可以基于用户对特定类型的内容的动作来计算系数。内容可以与在线社交网络、第三方系统1208或另一合适的系统相关联。内容可以包括用户、简档页面、帖子、新闻故事、头条新闻、即时消息、聊天室会话、电子邮件、广告、图片、视频、音乐、其他合适的对象、或它们的任意组合。网络系统1202可以分析用户的动作,以确定这些动作中的一个或更多个是否指示对主题、内容、其他用户等的亲和度。作为示例而不是作为限制,如果用户可以频繁发布与“咖啡”或其变体相关的内容,则网络系统1202可以确定用户相对于概念“咖啡”具有高的系数。特定动作或动作类型可以被分配比其他动作更高的权重和/或评级,这会影响总体计算的系数。作为示例而不是作为限制,如果第一用户向第二用户发送电子邮件,则该动作的权重或评级可能高于如果第一用户仅仅查看第二用户的用户简档页面的情况。
在特定实施例中,网络系统1202可以基于特定对象之间的关系的类型来计算系数。参考社交图1300,当计算系数时,网络系统1202可以分析连接特定用户节点1302和概念节点1304的边1306的数量和/或类型。作为示例而不是作为限制,通过配偶型边(表示两个用户结婚了)连接的用户节点1302可以被分配比通过朋友型边连接的用户节点1302更高的系数。换句话说,根据分配给动作的权重和特定用户的关系,可以确定对于关于用户配偶的内容的总体亲和度高于对于关于用户朋友的内容的总体亲和度。在特定实施例中,用户与另一对象具有的关系可以影响用户的动作关于计算该对象的系数的权重和/或评级。作为示例而不是作为限制,如果用户在第一张照片中被标记,但是仅仅喜欢第二张照片,则网络系统1202可以确定用户相对于第一张照片具有比第二张照片更高的系数,因为与内容具有标记型关系可以被分配比与内容具有喜欢型关系更高的权重和/或评级。在特定实施例中,网络系统1202可以基于一个或更多个第二用户与特定对象所具有的关系来计算第一用户的系数。换句话说,其他用户与对象所具有的关连和系数可以影响第一用户对于该对象的系数。作为示例而不是作为限制,如果第一用户连接到一个或更多个第二用户或者对于一个或更多个第二用户具有高的系数,并且那些第二用户连接到特定对象或者对于特定对象具有高的系数,则网络系统1202可以确定第一用户对于该特定对象同样应该具有相对高的系数。在特定实施例中,系数可以基于特定对象之间的分离度。较低的系数可以表示第一用户将对在社交图1300中间接地连接到第一用户的用户的内容对象分享兴趣的降低的可能性。作为示例而不是作为限制,在社交图1300中更接近的社交图实体(即,更少的分离度)可以比在社交图1300中更远离的实体具有更高的系数。
在特定实施例中,网络系统1202可以基于位置信息来计算系数。在地理上彼此更靠近的对象可以被认为比更远的对象彼此更相关或更感兴趣。在特定实施例中,用户对特定对象的系数可以基于对象的位置到与用户相关联的当前位置(或用户的客户端设备1206的位置)的接近度。第一用户可能对更接近于第一用户的其他用户或概念更感兴趣。作为示例而不是作为限制,如果用户距机场一英里且距加油站两英里,则网络系统1202可以基于机场与用户的接近度来确定用户对机场具有比加油站更高的系数。
在特定实施例中,网络系统1202可以基于系数信息来执行关于用户的特定动作。系数可以用于基于用户对特定动作的兴趣来预测用户是否将执行动作。当生成或向用户呈现任何类型的对象(例如广告、搜索结果、新闻故事、媒体、消息、通知或其他合适的对象)时,可以使用系数。在适当的情况下,系数还可以被用来对这些对象进行排列和排序。以这种方式,网络系统1202可以提供与用户的兴趣和当前环境相关的信息,增加了他们将找到这样的感兴趣的信息的可能性。在特定实施例中,网络系统1202可以基于系数信息来生成内容。可以基于特定于用户的系数来提供或选择内容对象。作为示例而不是作为限制,系数可以用于为用户生成媒体,其中可以向用户呈现用户相对于媒体对象具有高的总体系数的媒体。作为另一示例而不是作为限制,系数可以用于为用户生成广告,其中可以向用户呈现用户相对于广告对象具有高的总体系数的广告。在特定实施例中,网络系统1202可以基于系数信息来生成搜索结果。可以基于与针对查询用户的搜索结果相关联的系数来对特定用户的搜索结果进行打分或排名。作为示例而不是作为限制,对应于具有较高系数的对象的搜索结果在搜索结果页面上的排名可以高于对应于具有较低系数的对象的结果。
在特定实施例中,网络系统1202可以响应于来自特定系统或过程的系数请求来计算系数。为了预测用户在给定情况下可能采取的可能动作(或者可能是其主题),任何过程都可以请求针对用户的计算出的系数。请求还可以包括用于计算系数的各种因素使用的权重的集合。该请求可以来自在线社交网络上运行的过程、(例如,经由API或其他通信信道)来自第三方系统1208、或者来自另一合适的系统。响应于请求,网络系统1202可以计算系数(或者如果系数信息先前已经被计算出并存储,则访问系数信息)。在特定实施例中,网络系统1202可以度量关于特定过程的亲和度。(在线社交网络的内部和外部两者的)不同的过程可以请求特定对象或对象的集合的系数。网络系统1202可以提供与请求了亲和度的度量的特定过程相关的亲和度的度量。以这种方式,每个过程都会接收到针对亲和度的度量,该度量是针对过程将在其中使用亲和度的度量的不同上下文而量身定制的。
结合社交图亲和度和亲和度系数,特定实施例可以利用在于2006年8月11日提交的第11/503093号美国专利申请、于2010年12月22日提交的第12/977027号美国专利申请、于2010年12月23日提交的第12/978265号美国专利申请和于2012年10月1日提交的第13/632869号美国专利申请中公开的一个或更多个系统、组件、元素、功能、方法、操作或步骤,这些专利申请中的每一个都通过引用并入。
在特定实施例中,在线社交网络的一个或更多个内容对象可以与隐私设置相关联。例如,对象的隐私设置(或“访问设置”)可以以任何合适的方式被存储,诸如与对象相关联地、在授权服务器上用索引、以另一种合适的方式、或其任何组合被存储。对象的隐私设置可以指定可以如何使用在线社交网络来访问(例如,查看或分享)对象(或与对象相关联的特定信息)。在对象的隐私设置允许特定用户访问该对象的情况下,该对象可以被描述为相对于该用户是“可见的”。作为示例而不是作为限制,在线社交网络的用户可以为用户简档页面指定识别可以访问用户简档页面上的工作经历信息的用户集合的隐私设置,因而排除其他用户访问该信息。在特定实施例中,隐私设置可以指定不应当被允许访问与对象相关联的某些信息的用户的“黑名单”。换句话说,黑名单可以指定一个或更多个用户或实体,对象对于这些用户或实体是不可见的。作为示例而不是作为限制,用户可以指定不可以访问与用户相关联的相册的用户集合,因而排除那些用户访问相册(同时也可能允许不在该用户集合内的某些用户访问相册)。在特定实施例中,隐私设置可以与特定社交图元素相关联。社交图元素(例如节点或边)的隐私设置可以指定可以如何使用在线社交网络来访问社交图元素、与社交图元素相关联的信息、或与社交图元素相关联的内容对象。作为示例而不是作为限制,对应于特定照片的特定概念节点1304可以具有指定照片只能由在照片中标记的用户及他们的朋友访问的隐私设置。在特定实施例中,隐私设置可以允许用户选择加入或选择退出使他们的动作由网络系统1202记录或者与其他系统(例如,第三方系统1208)分享。在特定实施例中,与对象相关联的隐私设置可以指定被允许的访问或访问的拒绝的任何合适的粒度。作为示例而不是作为限制,可以为特定用户(例如,只有我、我的室友和我的老板)、在特定分离度(degrees-of-separation)内的用户(例如,朋友或朋友的朋友)、用户团体(例如,游戏俱乐部、我的家人)、用户网络(例如,特定雇主的雇员、学生或特定大学的校友)、所有用户(“公众”)、无用户(“私人的”)、第三方系统1208的用户、特定应用(例如,第三方应用、外部网站)、其他适当的用户或实体、或其任何组合来指定访问或访问的拒绝。尽管本公开描述了以特定方式使用特定隐私设置,但是本公开设想了以任何合适的方式使用任何合适的隐私设置。
在特定实施例中,一个或更多个服务器可以是用于实施隐私设置的授权/隐私服务器。响应于来自用户(或其他实体)的对存储在数据储存器中的特定对象的请求,网络系统1202可以向数据储存器发送对该对象的请求。该请求可以识别与该请求相关联的用户,并且只有在授权服务器基于与该对象相关联的隐私设置确定该用户被授权访问该对象时才可以被发送给该用户(或者该用户的客户端设备1206)。如果请求用户未被授权访问该对象,则授权服务器可以阻止所请求的对象从数据储存器中被检索,或者可以阻止所请求的对象被发送给用户。在搜索查询上下文中,只有在查询用户被授权访问对象时才可以将对象生成为搜索结果。换句话说,对象必须具有对查询用户可见的可见性。如果对象具有对用户不可见的可见性,则可以从搜索结果中排除该对象。尽管本公开描述了以特定方式实施隐私设置,但是本公开设想了以任何合适的方式实施隐私设置。
前面的说明书是参考其特定的示例性实施例来描述的。参考本文讨论的细节描述了本公开的各种实施例和方面,并且附图示出了各种实施例。上面的描述和附图是说明性的,而不应被解释为限制性的。描述了许多具体细节以提供对各种实施例的透彻理解。
另外的或替代实施例可以以其他具体形式来体现,而不脱离其精神或基本特征。所描述的实施例将在所有方面被认为仅是说明性而非限制性。因此,本发明的范围由所附权利要求书而不是由前面的描述来指示。落在权利要求的等同含义和范围内的所有改变都将包含在其范围内。
Claims (20)
1.一种方法,包括:
确定网络系统用户的移动计算设备的多个特征;
基于所述移动计算设备的所述多个特征,在所述移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素;以及
响应于接收到的与所述一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。
2.如权利要求1所述的方法,其中,确定所述移动计算设备的所述多个特征包括确定与所述移动计算设备相关联的位置信息。
3.如权利要求2所述的方法,其中,确定所述移动计算设备的所述多个特征还包括识别与所述移动计算设备的用户相关联的网络系统唯一标识符。
4.如权利要求1所述的方法,还包括:
向网络系统提供所述移动计算设备的所述多个特征;以及
从所述网络系统接收对应于所述移动计算设备的所述多个特征中的一个或更多个特征的增强现实元素的集合。
5.如权利要求4所述的方法,还包括:
识别所述增强现实元素的集合的子集,其中,识别所述子集包括:
为所述增强现实元素的集合中的每一个计算分数;以及
其中,增强现实元素的所述子集包括阈值数量的得分最高的增强现实元素。
6.如权利要求5所述的方法,其中,为所述增强现实元素的集合中的每一个计算分数包括,对于所述增强现实元素的集合中的每个增强现实元素,将加权值添加到该增强现实元素的分数,其中,所述加权值表示与该增强现实元素相关联的元数据和与所述移动计算设备相关联的多个显示因素之间的相关性。
7.如权利要求6所述的方法,其中,所述多个显示因素包括所述移动计算设备的显示器的分辨率、从所述相机取景器显示内容获取的图像帧是否是拥挤的、以及所述移动计算设备的用户是否可能与所述增强现实元素交互。
8.如权利要求6所述的方法,其中,在所述相机取景器显示内容内呈现所述一个或更多个增强现实元素包括呈现增强现实元素的所述子集。
9.如权利要求1所述的方法,其中,在所述移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素包括呈现与所述移动计算设备的位置对应的第三方增强现实元素。
10.如权利要求1所述的方法,还包括接收与所述一个或更多个增强现实元素中的至少一个的交互,其中,接收所述交互包括接收与所述移动计算设备的所述相机取景器显示内容的触摸交互。
11.如权利要求10所述的方法,还包括,响应于接收到与所述一个或更多个增强现实元素中的所述至少一个的交互,在所述相机取景器显示内容内提供一个或更多个支付工具。
12.如权利要求1所述的方法,还包括:
检测与所述相机取景器显示内容相关的滑动触摸手势;以及
响应于所检测到的滑动触摸手势,发送所编写的网络系统帖子。
13.一种系统,包括:
至少一个处理器;以及
至少一个非暂时性计算机可读存储介质,在其上存储指令,所述指令当由所述至少一个处理器执行时使所述系统执行以下项:
确定网络系统用户的移动计算设备的多个特征;
基于所述移动计算设备的所述多个特征,在所述移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素;以及
响应于接收到的与所述一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。
14.如权利要求13所述的系统,还包括使所述系统执行以下项的指令:
向网络系统提供所述移动计算设备的所述多个特征;以及
从所述网络系统接收对应于所述移动计算设备的所述多个特征中的一个或更多个特征的增强现实元素的集合。
15.如权利要求14所述的系统,还包括使所述系统执行以下项的指令:
识别所述增强现实元素的集合的子集,其中,识别所述子集包括:
为所述增强现实元素的集合中的每一个计算分数;以及
其中,增强现实元素的所述子集包括阈值数量的得分最高的增强现实元素。
16.如权利要求15所述的系统,其中,为所述增强现实元素的集合中的每一个计算分数包括,对于所述增强现实元素的集合中的每个增强现实元素,将加权值添加到该增强现实元素的分数,其中,所述加权值表示与该增强现实元素相关联的元数据和与所述移动计算设备相关联的多个显示因素之间的相关性。
17.如权利要求16所述的系统,其中,在所述相机取景器显示内容内呈现所述一个或更多个增强现实元素包括呈现增强现实元素的所述子集。
18.如权利要求17所述的系统,还包括使所述系统执行以下项的指令:
接收与所述一个或更多个增强现实元素中的至少一个的交互,其中,接收所述交互包括接收与所述移动计算设备的所述相机取景器显示内容的触摸交互;以及
响应于接收到与所述一个或更多个增强现实元素中的所述至少一个的交互,在所述相机取景器显示内容内提供一个或更多个支付工具。
19.如权利要求18所述的系统,还包括使所述系统执行以下项的指令:
检测与所述相机取景器显示内容相关的滑动触摸手势;以及
响应于所检测到的滑动触摸手势,发送所编写的网络系统帖子。
20.一种非暂时性计算机可读介质,在其上存储指令,所述指令当由至少一个处理器执行时,使得计算机系统执行以下项:
确定网络系统用户的移动计算设备的多个特征;
基于所述移动计算设备的所述多个特征,在所述移动计算设备的相机取景器显示内容内呈现一个或更多个增强现实元素;以及
响应于接收到的与所述一个或更多个增强现实元素中的至少一个的交互,编写网络系统帖子。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/487,674 US20180300916A1 (en) | 2017-04-14 | 2017-04-14 | Prompting creation of a networking system communication with augmented reality elements in a camera viewfinder display |
US15/487,674 | 2017-04-14 | ||
PCT/US2017/030458 WO2018190887A1 (en) | 2017-04-14 | 2017-05-01 | Prompting creation of a networking system communication with augmented reality elements in a camera viewfinder display |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110710232A true CN110710232A (zh) | 2020-01-17 |
CN110710232B CN110710232B (zh) | 2022-02-18 |
Family
ID=63790811
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780091724.3A Active CN110710232B (zh) | 2017-04-14 | 2017-05-01 | 在相机取景器显示内容中用增强现实元素来促使网络系统通信的方法、系统以及计算机可读存储介质 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20180300916A1 (zh) |
EP (1) | EP3610664A4 (zh) |
CN (1) | CN110710232B (zh) |
WO (1) | WO2018190887A1 (zh) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9652896B1 (en) | 2015-10-30 | 2017-05-16 | Snap Inc. | Image based tracking in augmented reality systems |
US10074381B1 (en) * | 2017-02-20 | 2018-09-11 | Snap Inc. | Augmented reality speech balloon system |
CN107833264B (zh) * | 2017-11-13 | 2019-02-01 | 百度在线网络技术(北京)有限公司 | 一种图片处理方法、装置、设备和计算机可读存储介质 |
US11126846B2 (en) * | 2018-01-18 | 2021-09-21 | Ebay Inc. | Augmented reality, computer vision, and digital ticketing systems |
US11157762B2 (en) | 2019-06-18 | 2021-10-26 | At&T Intellectual Property I, L.P. | Surrogate metadata aggregation for dynamic content assembly |
US11089439B2 (en) | 2019-07-02 | 2021-08-10 | Charles Hohman | Systems and methods for real-world networking using augmented reality interface |
US11557093B1 (en) * | 2019-09-10 | 2023-01-17 | Meta Platforms Technologies, Llc | Using social connections to define graphical representations of users in an artificial reality setting |
US11544921B1 (en) * | 2019-11-22 | 2023-01-03 | Snap Inc. | Augmented reality items based on scan |
US11620795B2 (en) * | 2020-03-27 | 2023-04-04 | Snap Inc. | Displaying augmented reality content in messaging application |
US11680814B2 (en) * | 2020-06-30 | 2023-06-20 | Snap Inc. | Augmented reality-based translations associated with travel |
US20210409610A1 (en) * | 2020-06-30 | 2021-12-30 | Snap Inc. | Third-party modifications for a camera user interface |
CN116076063A (zh) * | 2020-09-09 | 2023-05-05 | 斯纳普公司 | 增强现实信使系统 |
US11910269B2 (en) | 2020-09-25 | 2024-02-20 | Snap Inc. | Augmented reality content items including user avatar to share location |
EP4272077A1 (en) * | 2020-12-31 | 2023-11-08 | Snap Inc. | Accessing third party resources via client application |
US20220295139A1 (en) * | 2021-03-11 | 2022-09-15 | Quintar, Inc. | Augmented reality system for viewing an event with multiple coordinate systems and automatically generated model |
US20220295040A1 (en) * | 2021-03-11 | 2022-09-15 | Quintar, Inc. | Augmented reality system with remote presentation including 3d graphics extending beyond frame |
US11657578B2 (en) | 2021-03-11 | 2023-05-23 | Quintar, Inc. | Registration for augmented reality system for viewing an event |
US11527047B2 (en) | 2021-03-11 | 2022-12-13 | Quintar, Inc. | Augmented reality system for viewing an event with distributed computing |
US11645819B2 (en) * | 2021-03-11 | 2023-05-09 | Quintar, Inc. | Augmented reality system for viewing an event with mode based on crowd sourced images |
US20230138677A1 (en) * | 2021-10-29 | 2023-05-04 | Snap Inc. | Customized animation from video |
US20230136013A1 (en) * | 2021-10-29 | 2023-05-04 | Snap Inc. | Animated custom sticker creation |
US20230410378A1 (en) * | 2022-06-20 | 2023-12-21 | Qualcomm Incorporated | Systems and methods for user persona management in applications with virtual content |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120038668A1 (en) * | 2010-08-16 | 2012-02-16 | Lg Electronics Inc. | Method for display information and mobile terminal using the same |
US20120256917A1 (en) * | 2010-06-25 | 2012-10-11 | Lieberman Stevan H | Augmented Reality System |
US20130288717A1 (en) * | 2011-01-17 | 2013-10-31 | Lg Electronics Inc | Augmented reality (ar) target updating method, and terminal and server employing same |
US20140120887A1 (en) * | 2011-06-24 | 2014-05-01 | Zte Corporation | Method, system, terminal, and server for implementing mobile augmented reality service |
US20140123015A1 (en) * | 2012-10-31 | 2014-05-01 | Sony Corporation | Information processing system, information processing apparatus, and storage medium |
US20140204119A1 (en) * | 2012-08-27 | 2014-07-24 | Empire Technology Development Llc | Generating augmented reality exemplars |
US20140297617A1 (en) * | 2013-03-29 | 2014-10-02 | Broadcom Corporation | Method and system for supporting geo-augmentation via virtual tagging |
US20150058102A1 (en) * | 2013-08-21 | 2015-02-26 | Jaunt Inc. | Generating content for a virtual reality system |
US20160049013A1 (en) * | 2014-08-18 | 2016-02-18 | Martin Tosas Bautista | Systems and Methods for Managing Augmented Reality Overlay Pollution |
US20160055378A1 (en) * | 2014-08-19 | 2016-02-25 | International Business Machines Corporation | Real-time analytics to identify visual objects of interest |
WO2016209605A1 (en) * | 2015-06-24 | 2016-12-29 | Microsoft Technology Licensing, Llc | Virtual place-located anchor |
US20170053450A1 (en) * | 2015-08-18 | 2017-02-23 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
US20170064207A1 (en) * | 2015-08-28 | 2017-03-02 | Lg Electronics Inc. | Mobile terminal |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8301159B2 (en) * | 2004-12-31 | 2012-10-30 | Nokia Corporation | Displaying network objects in mobile devices based on geolocation |
US9728007B2 (en) * | 2010-05-18 | 2017-08-08 | Teknologian Tutkimuskeskus Vtt Oy | Mobile device, server arrangement and method for augmented reality applications |
US9285871B2 (en) * | 2011-09-30 | 2016-03-15 | Microsoft Technology Licensing, Llc | Personal audio/visual system for providing an adaptable augmented reality environment |
US9240059B2 (en) * | 2011-12-29 | 2016-01-19 | Ebay Inc. | Personal augmented reality |
US20140053099A1 (en) * | 2012-08-14 | 2014-02-20 | Layar Bv | User Initiated Discovery of Content Through an Augmented Reality Service Provisioning System |
US10127724B2 (en) * | 2013-01-04 | 2018-11-13 | Vuezr, Inc. | System and method for providing augmented reality on mobile devices |
-
2017
- 2017-04-14 US US15/487,674 patent/US20180300916A1/en not_active Abandoned
- 2017-05-01 WO PCT/US2017/030458 patent/WO2018190887A1/en active Application Filing
- 2017-05-01 CN CN201780091724.3A patent/CN110710232B/zh active Active
- 2017-05-01 EP EP17905748.4A patent/EP3610664A4/en not_active Withdrawn
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120256917A1 (en) * | 2010-06-25 | 2012-10-11 | Lieberman Stevan H | Augmented Reality System |
US20120038668A1 (en) * | 2010-08-16 | 2012-02-16 | Lg Electronics Inc. | Method for display information and mobile terminal using the same |
US20130288717A1 (en) * | 2011-01-17 | 2013-10-31 | Lg Electronics Inc | Augmented reality (ar) target updating method, and terminal and server employing same |
US20140120887A1 (en) * | 2011-06-24 | 2014-05-01 | Zte Corporation | Method, system, terminal, and server for implementing mobile augmented reality service |
EP2888876A1 (en) * | 2012-08-27 | 2015-07-01 | Empire Technology Development LLC | Generating augmented reality exemplars |
US20140204119A1 (en) * | 2012-08-27 | 2014-07-24 | Empire Technology Development Llc | Generating augmented reality exemplars |
US20140123015A1 (en) * | 2012-10-31 | 2014-05-01 | Sony Corporation | Information processing system, information processing apparatus, and storage medium |
US20140297617A1 (en) * | 2013-03-29 | 2014-10-02 | Broadcom Corporation | Method and system for supporting geo-augmentation via virtual tagging |
US20150058102A1 (en) * | 2013-08-21 | 2015-02-26 | Jaunt Inc. | Generating content for a virtual reality system |
US20160049013A1 (en) * | 2014-08-18 | 2016-02-18 | Martin Tosas Bautista | Systems and Methods for Managing Augmented Reality Overlay Pollution |
US20160055378A1 (en) * | 2014-08-19 | 2016-02-25 | International Business Machines Corporation | Real-time analytics to identify visual objects of interest |
WO2016209605A1 (en) * | 2015-06-24 | 2016-12-29 | Microsoft Technology Licensing, Llc | Virtual place-located anchor |
US20170053450A1 (en) * | 2015-08-18 | 2017-02-23 | Magic Leap, Inc. | Virtual and augmented reality systems and methods |
US20170064207A1 (en) * | 2015-08-28 | 2017-03-02 | Lg Electronics Inc. | Mobile terminal |
Also Published As
Publication number | Publication date |
---|---|
US20180300916A1 (en) | 2018-10-18 |
EP3610664A1 (en) | 2020-02-19 |
EP3610664A4 (en) | 2020-04-29 |
WO2018190887A1 (en) | 2018-10-18 |
CN110710232B (zh) | 2022-02-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110710232B (zh) | 在相机取景器显示内容中用增强现实元素来促使网络系统通信的方法、系统以及计算机可读存储介质 | |
US11233762B2 (en) | Providing augmented message elements in electronic communication threads | |
CN110710192A (zh) | 在相机取景器显示内容中发现增强现实元素 | |
US10425694B2 (en) | Live broadcast on an online social network | |
US10701121B2 (en) | Live broadcast on an online social network | |
US10645460B2 (en) | Real-time script for live broadcast | |
US10771959B2 (en) | Recommending applications using social networking information | |
US20170353603A1 (en) | Recommending applications using social networking information | |
US10506289B2 (en) | Scheduling live videos | |
US20160350953A1 (en) | Facilitating electronic communication with content enhancements | |
US11138255B2 (en) | Providing combinations of pre-generated and dynamic media effects to create customized media communications | |
US20180103004A1 (en) | Reengaging website visitors with social networking system electronic messages | |
US11611714B2 (en) | Generating customized, personalized reactions to social media content | |
US10681169B2 (en) | Social plugin reordering on applications | |
US20180191643A1 (en) | User communications with a third party through a social networking system | |
US20180192141A1 (en) | Live Video Lobbies | |
CN111164653A (zh) | 在社交网络系统上生成动画 | |
EP3388929A1 (en) | Discovering augmented reality elements in a camera viewfinder display | |
US11062362B2 (en) | Generating dynamic communication threads based on user interaction with sponsored digital content | |
US10852945B2 (en) | Generating social media communications based on low-data messages | |
US20170199897A1 (en) | Inferring qualities of a place | |
EP3101845B1 (en) | Providing augmented message elements in electronic communication threads |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: California, USA Applicant after: Yuan platform Co. Address before: California, USA Applicant before: Facebook, Inc. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |