CN116210018A - 跟踪用户活动和兑换促销 - Google Patents

跟踪用户活动和兑换促销 Download PDF

Info

Publication number
CN116210018A
CN116210018A CN202180065997.7A CN202180065997A CN116210018A CN 116210018 A CN116210018 A CN 116210018A CN 202180065997 A CN202180065997 A CN 202180065997A CN 116210018 A CN116210018 A CN 116210018A
Authority
CN
China
Prior art keywords
user
content
user activity
client application
computing devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180065997.7A
Other languages
English (en)
Inventor
弗吉尼亚·德拉蒙德
埃里卡·米凯莱·凯尔瓦尔德
吉恩·罗
阿列克·马西森
希丽亚·妮科尔·穆尔库扬尼斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Snap Inc
Original Assignee
Snap Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Snap Inc filed Critical Snap Inc
Publication of CN116210018A publication Critical patent/CN116210018A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0217Discounts or incentives, e.g. coupons or rebates involving input on products or services in exchange for incentives or rewards
    • G06Q30/0218Discounts or incentives, e.g. coupons or rebates involving input on products or services in exchange for incentives or rewards based on score
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0222During e-commerce, i.e. online transactions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0236Incentive or reward received by requiring registration or ID from user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

可以基于经由客户端应用捕获的用户内容来跟踪与促销有关地执行的用户活动的量。经由客户端应用捕获的用户内容的至少一部分可以被扫描和分析以识别与用户内容有关的用户活动。增强现实内容项可以能够执行成生成如下内容,其与用户内容有关地被显示并且指示与促销有关的用户活动的量。另外,增强现实内容项可以能够执行成与用户内容有关地生成内容,该内容基于由捕获用户内容的客户端应用的用户执行的用户活动的量来指示关于促销的一个或更多个兑换选项。

Description

跟踪用户活动和兑换促销
优先权的要求
本申请要求于2020年9月28日提交的美国临时申请序列号第63/198,086号以及于2021年1月20日提交的美国专利申请序列号第17/248,329号的优先权,这两个申请通过引用整体并入本文中。
背景技术
由客户端装置执行的应用可以用于生成内容。例如,客户端应用可以用于生成消息收发内容、图像内容、视频内容、音频内容、媒体叠加、文档、创造性作品、其组合等。在各种情况下,客户端应用也可以用于跟踪由客户端应用的用户进行的产品的购买。
附图说明
在不必按比例绘制的附图中,相似的附图标记可以在不同的视图中描述类似的组件。为了容易地标识对任何特定元素或动作的讨论,附图标记中的一个或多个最高位数字指代该元素被首次引入的图号。一些实现方式通过示例而非限制的方式示出。
图1是根据一个或更多个示例实现方式的用于通过网络交换数据(例如,消息和相关内容)的架构的图形表示。
图2是根据一些示例的可以具有客户端侧功能和服务器侧功能二者的系统的图形表示。
图3是示出了根据一个或更多个示例实现方式的可以存储在服务器系统的数据库中的数据的示意图。
图4是示出了根据一个或更多个示例实现方式的可以由客户端应用生成的内容的示例框架的示意图。
图5是示出了根据一个或更多个示例实现方式的用于生成增强现实内容的架构的图形表示,该增强现实内容跟踪客户端应用的用户的活动并且可以用于兑换就用户活动提供的促销。
图6是示出了根据一个或更多个示例实现方式的用于生成增强现实内容的过程的示例操作的流程图,该增强现实内容指示客户端应用的用户的关于促销的活动。
图7是示出了根据一个或更多个示例实现方式的用于执行增强现实内容的过程的示例操作的流程图,该增强现实内容指示客户端应用的用户的关于促销的活动。
图8是根据一个或更多个示例实现方式的用户界面的图示,该用户界面包括用于扫描用户内容的至少一部分以识别与用户内容有关的用户活动的用户界面元素。
图9是根据一个或更多个示例实现方式的用户界面的图示,该用户界面包括指示客户端应用的用户的关于促销的活动的增强现实内容。
图10是示出了根据一个或更多个示例实现方式的可以读取和执行来自一个或更多个机器可读介质的指令以执行本文中描述的任何一种或更多种方法的计算机系统形式的机器的组件的框图。
图11是示出了根据一个或更多个示例实现方式的可以与本文中描述的一个或更多个硬件架构结合使用的代表性软件架构的框图。
具体实施方式
增强现实内容项可以用于修改可以使用客户端应用产生的用户内容。例如,用户内容可以包括由客户端装置的一个或更多个输入装置(例如一个或更多个摄像装置或者一个或更多个麦克风中的至少一者)捕获的视频内容、图像内容或音频内容中的至少一者。经修改的用户内容可以例如通过经由客户端应用或经由客户端应用的社交联网功能传送的消息来与客户端应用的其他用户共享。客户端应用的用户也可以经由客户端应用购买项,例如商品或服务。例如,客户端应用可以包括使得客户端应用的用户能够从产品的销售方,例如零售商、批发商、直接分销商、制造商等购买产品的电子商务功能。
在现有系统中,对项的购买通常不是由社交联网客户端应用或消息收发客户端应用来跟踪的。相反,对项的购买是使用用户利用电子商务平台的账户或用户利用一个或更多个项的相应销售方的账户中的至少一者来跟踪的。另外,现有系统通常不实现以下增强现实内容,所述增强现实内容用于指示由客户端应用的用户进行的产品的购买或者用于基于产品的购买次数兑换关于产品的促销。相反,产品的购买经由发送至产品的购买者的消息或经由购买者可访问的账户信息被传送给个人。
此外,现有系统通常不实现以下增强现实内容,所述增强现实内容用于跟踪客户端应用的用户对关于与访问位置相关联的促销的位置的访问。例如,现有系统可以获得指示用户位置的地理位置数据,或者获得指示用户位置的输入(例如,登记)。然而,现有系统不实现以下增强现实内容,所述增强现实内容跟踪对位置的访问并且可以执行成基于相应用户或用户组的访问次数来兑换关于位置的促销。
本文中描述的系统、方法、技术、指令序列和计算机器程序产品涉及可以执行成跟踪与就位置或产品中的至少一者提供的促销有关的用户活动的增强现实内容项。在一个或更多个示例中,识别用户活动的信息可以经由客户端应用进行扫描。例如,客户端装置的摄像装置可以捕获包括对应于用户活动的识别信息的图像内容。该识别信息可以被分析并与相应的用户活动相关联。用户活动可以包括由客户端应用的用户对位置的访问。用户活动还可以包括由客户端应用的用户进行的产品的购买。
对用户活动的跟踪可以包括在一段时期内对用户活动进行聚合。在一个或更多个示例中,跟踪用户活动可以包括对客户端应用的用户在一段时间内对位置的访问次数进行聚合。在一个或更多个附加示例中,跟踪用户活动可以包括聚合客户端应用的用户的产品的购买次数。可以跟踪用户活动以确定一个或更多个促销是否应用于客户端应用的用户。在各种示例中,促销可以包括客户端应用的用户基于用户的活动对应于用户活动的阈值水平来接收一个或更多个免费赠送项。在一个或更多个说明性示例中,客户端应用的用户可以在访问提供购买阈值次数的产品的位置之后获得免费赠送产品。在一个或更多个附加说明性示例中,客户端应用的用户可以在从产品的一个或更多个销售方购买了阈值数目的产品实例之后获得免费赠送产品。
在一个或更多个示例中,可以通过扫描由客户端装置的摄像装置捕获的视图的一部分来确定用户活动。用户内容可以显示在客户端应用的用户界面中。用户界面可以包括可以选择成扫描用户内容的至少一部分的扫描用户界面元素。在各种示例中,对扫描用户界面元素的选择可以使指示要被扫描的用户内容的一部分的附加用户界面元素显示。
可以分析用户内容的扫描部分以确定与用户内容有关的用户活动。也可以使用一种或更多种图像处理技术来识别用户活动以确定包括在用户内容中的可能与要跟踪的用户活动有关的一个或更多个对象。一个或更多个对象可以包括与关于一个或更多个产品的促销对应的一个或更多个产品。另外,该一个或更多个对象可以用于确定与关于位置的促销对应的位置。此外,用户内容的扫描部分可以包括码信息,码信息包括与用户活动对应的标识符。例如,用户内容的扫描部分可以包括条形码或快速响应(QR)码中的至少一个。
在识别与用户内容有关的用户活动之后,可以确定与用户活动有关的一个或更多个促销。在促销与用户活动有关的情况下,通过分析用户内容识别的用户活动可以与促销有关地被跟踪。也可以相对于促销评估用户活动。在一个或更多个示例中,促销可以指示用户活动的阈值量导致客户端应用的用户可以获得一个或更多个奖励。在这些情况下,用户活动的先前实例可以与用户活动的一个或更多个当前实例结合,以产生用户活动的聚合量。可以相对于与和用户活动有关的促销对应的用户活动的阈值量来分析用户活动的聚合量。在用户活动的聚合量对应于针对促销的用户活动的阈值量的情况下,可以使一个或更多个奖励对客户端应用的用户可用。
在一个或更多个示例中,增强现实内容项可以被执行成显示与促销有关的用户活动的聚合量。增强现实内容项可以被执行成生成指示与促销有关的用户活动的聚合量的文本内容、图像内容、视频内容或音频内容中的至少一者。在各种示例中,增强现实内容项可以被执行成生成用户内容的叠加,该叠加指示与促销有关的用户活动的聚合量。在一个或更多个说明性示例中,增强现实内容项可以被执行成使穿孔卡(punch card)被显示,该穿孔卡指示与用户活动的阈值量有关的用户活动的量。为了说明,增强现实内容可以被执行成生成穿孔卡,穿孔卡相对于用户内容显示并且指示与访问位置的阈值次数有关的访问位置的次数,其中访问位置的阈值次数可以触发客户端应用的用户的奖励。
增强现实内容项也可以被执行成生成包括兑换或部分兑换与促销有关的用户活动的一个或更多个实例的选项的文本内容、图像内容、视频内容或音频内容中的至少一者。在一个或更多个示例中,增强现实内容项可以能够执行成生成可选择成兑换或部分兑换与用户活动有关的促销中的至少一者的用户界面元素。在各种示例中,与促销有关的用户活动的至少一部分的兑换可能导致聚合的用户活动的减少。例如,与促销有关的用户活动的兑换可能会重置聚合的用户活动,使得要在促销的附加兑换之前积累附加的用户活动的阈值量。
因此,本文中描述的系统、方法、技术、指令序列和计算机器程序产品可以执行增强现实内容,所述增强现实内容可以能够执行成结合多个操作,所述多个操作与识别关于促销的用户活动和兑换促销有关。例如,本文中描述的增强现实内容项的实现方式可以能够执行成使已经被扫描的用户内容的至少一部分被分析以识别用户活动。执行增强现实内容项还可以使用户活动:关于促销被评估,向用户提供关于促销的兑换的信息,并且使一个或更多个选项可以被用户访问,以兑换或部分兑换关于促销的用户活动中的至少一者。通过结合关于跟踪用户活动和关于与用户活动有关的促销的多个操作,本文中描述的增强现实内容项的实现方式与现有系统相比可以在跟踪用户活动和兑换促销方面提供更大量的效率。特别是现有系统和技术可以实现多个不同的客户端应用以单独识别用户活动、跟踪用户活动并且兑换与用户活动有关的促销。由于生成和执行结合了旨在识别关于促销的用户活动、跟踪用户活动以及与用户活动相关联的促销的兑换的操作的增强现实内容项,因此本文中描述的系统和技术使计算资源和网络资源相对于由现有系统用于执行相同或类似操作的计算资源和网络资源的使用最小化。
图1是用于通过网络交换数据(例如,消息和相关内容)的架构100的图形表示。架构100可以包括多个客户端装置102。客户端装置102可以单独地包括但不限于移动电话、台式计算机、膝上型计算装置、便携式数字助理(PDA)、智能电话、平板计算装置、超级本、上网本、多处理器系统、基于微处理器或可编程的消费者电子系统、游戏控制台、机顶盒、车辆中的计算机、可穿戴装置、其一个或更多个组合、或用户可以使用其来访问架构100中包括的一个或更多个组件的任何其他通信装置。
每个客户端装置102可以托管包括客户端应用104和一个或更多个第三方应用106的多个应用。用户可以使用客户端应用104创建内容,例如视频、图像(例如,照片)、音频和媒体叠加。在一个或更多个说明性示例中,客户端应用104可以包括使得用户能够创建和交换内容的社交联网功能。在各种示例中,客户端应用104可以包括可以用于在由各种客户端装置102执行的客户端应用104的实例之间发送消息的消息收发功能。使用客户端应用104创建的消息可以包括视频、一个或更多个图像、音频、媒体叠加、文本、使用一个或更多个创建工具制作的内容、注释等。在一个或更多个实现方式中,客户端应用104可以用于查看和生成交互式消息、查看客户端应用104的其他用户在地图上的位置、与客户端应用104的其他用户聊天等等。
一个或更多个用户可以是人、机器或与客户端装置(例如,客户端装置102)交互的其他配置(means)。在示例实现方式中,用户可能不是架构100的一部分,但可以经由客户端装置102或其他配置与架构100的一个或更多个组件交互。在各种示例中,用户可以向客户端装置102提供输入(例如,触摸屏输入或字母数字输入),并且该输入可以被传送至架构100中的其他实体。在这种情况下,架构100中的其他实体响应于用户输入,可以将信息传送至客户端装置102以呈现给用户。以这种方式,用户可以使用客户端装置102与架构100中的各种实体交互。
客户端应用104的每个实例能够与客户端应用104的另一实例、一个或更多个第三方应用106或服务器系统108中的至少一者进行通信和交换数据。在客户端应用104的实例之间、在第三方应用106之间以及在客户端应用104的实例与服务器系统108之间交换的数据包括功能(例如,调用功能的命令)和有效载荷数据(例如,文本、音频、图像、视频或其他多媒体数据)。在客户端应用104的实例之间、在第三方应用106之间以及在客户端应用104的至少一个实例与至少一个第三方应用106之间交换的数据可以从由客户端装置102执行的应用的实例和由附加客户端装置102执行的应用的实例直接进行交换。此外,在客户端应用104之间、在第三方应用106之间以及在至少一个客户端应用104与至少一个第三方应用106之间交换的数据可以从由客户端装置102执行的应用的实例间接(例如,经由一个或更多个中间服务器)传送至由附加客户端装置102执行的应用的另一实例。在一个或更多个说明性示例中,在应用之间的间接通信中使用的一个或更多个中间服务器可以被包括在服务器系统108中。
第三方应用106可以与客户端应用104分离并不同。第三方应用106可以由客户端装置102以与客户端应用104分开的方式下载和安装。在各种实现方式中,第三方应用106在客户端应用104被下载和安装之前或之后由客户端装置102下载和安装。第三方应用106可以是由与提供客户端应用104的实体或组织不同的实体或组织提供的应用。第三方应用106可以由客户端装置102使用与客户端应用104不同的登录凭证来访问。也就是,第三方应用106可以维护第一用户帐户,而客户端应用104可以维护第二用户帐户。在一个或更多个实现方式中,可以由客户端装置102访问第三方应用106以执行各种活动和交互,例如听音乐、看视频、跟踪锻炼、查看图形元素(例如,贴纸)、与其他用户通信等。作为示例,第三方应用106可以包括社交联网应用、约会应用、骑乘或汽车共享应用、购物应用、贸易应用、游戏应用、成像应用、音乐应用、视频浏览应用、锻炼跟踪应用、健康监测应用、图形元素或贴纸浏览应用或者任何其他合适的应用。
服务器系统108经由一个或更多个网络110向客户端应用104提供服务器侧功能。根据一些示例实现方式,服务器系统108可以是云计算环境。例如,在一个说明性示例中,服务器系统108以及与服务器系统108相关联的一个或更多个服务器可以与基于云的应用相关联。在一个或更多个实现方式中,客户端装置102和服务器系统108可以经由一个或更多个网络110耦接。
服务器系统108支持被提供给客户端应用104的各种服务和操作。这样的操作包括:向客户端应用104发送数据;从客户端应用104接收数据;以及处理由客户端应用104生成的数据。该数据可以包括消息内容、媒体内容、客户端装置信息、地理位置信息、媒体注释和叠加、消息内容持久性条件、社交网络信息和生活事件信息作为示例。通过经由客户端应用104的用户界面(UI)可用的功能来调用和控制架构100内的数据交换。
虽然架构100的某些功能在本文中被描述为由客户端应用104或由服务器系统108执行,但是将功能定位在客户端应用104内或服务器系统108内是设计选择。例如,以下在技术上可能是优选的:最初在服务器系统108内部署某些技术和功能,但稍后将该技术和功能迁移到其中客户端装置102具有足够处理能力的客户端应用104。
服务器系统108包括应用编程接口(API)服务器112,该服务器112耦接至应用服务器114并向应用服务器114提供编程接口。应用服务器114通信地耦接至数据库服务器116,该数据库服务器116有助于访问一个或更多个数据库118。一个或更多个数据库118可以存储与由应用服务器114处理的信息相关联的数据。一个或更多个数据库118可以是存储诸如以下信息的存储装置:未经处理的媒体内容、来自用户的原始媒体内容(例如,高质量媒体内容)、经处理的媒体内容(例如,格式化以与客户端装置102共享并在客户端装置102上观看的媒体内容)、与媒体内容项有关的上下文数据、与用户装置(例如,计算或客户端装置102)有关的上下文数据、媒体叠加、媒体叠加智能小工具或智能元件、用户数据、用户装置信息、媒体内容(例如,视频和图像)、媒体内容数据(例如,与视频和图像相关联的数据)、计算装置上下文数据、序列化数据、会话数据项、用户装置位置数据、映射信息、交互消息使用数据、交互消息度量数据等。一个或更多个数据库118还可以存储与第三方服务器、客户端装置102、客户端应用104、用户、第三方应用106等有关的信息。
API服务器112在客户端装置102与应用服务器114之间接收和发送数据(例如,命令和消息有效载荷)。具体地,应用程序接口(API)服务器112提供接口集合(例如,例程和协议),该接口集合可以由客户端应用104调用或查询,以便调用应用服务器114的功能。应用程序接口(API)服务器112公开由应用服务器114支持的各种功能,包括帐户注册、登录功能、经由应用服务器114将消息从客户端应用104的一个实例发送至客户端应用104的另一实例、将媒体文件(例如,图像、音频、视频)从客户端应用104发送至应用服务器114以及针对另一客户端应用104的可能访问,设置媒体内容的集合(例如,图库、故事、消息集合或媒体集合)、检索客户端装置102的用户的朋友的列表、检索这样的集合、检索消息和内容、向社交图添加和删除朋友、对朋友在社交图内的位置进行定位、以及打开应用事件(例如,与客户端应用104有关)。
服务器系统108还可以包括web服务器120。web服务器120耦接至应用服务器114,并且向应用服务器114提供基于web的接口。为此,web服务器120通过超文本传输协议(HTTP)和若干其他相关协议来处理传入的网络请求。
应用服务器114托管多个应用和子系统,其包括消息收发应用系统122、媒体内容处理系统124、社交网络系统126、用户活动识别系统128以及用户活动跟踪和兑换系统130。消息收发应用系统122实现了多种消息处理技术和功能,特别是与从客户端应用104的多个实例接收到的消息中包括的内容(例如,文本和多媒体内容)的聚合和其他处理有关的消息处理技术和功能。例如,消息收发应用系统122可以使用电子邮件(email)、即时消息(IM)、短消息服务(SMS)、文本、传真来递送消息或者经由有线网络(例如,因特网)、普通老式电话服务(POTS)或无线网络(例如,移动、蜂窝、WIFI、长期演进(LTE)或蓝牙)来递送语音(例如,基于IP的语音(VoIP))消息。消息收发应用系统122可以将来自多个源的文本和媒体内容聚合成内容集合。然后,由消息收发应用系统122使这些集合对客户端应用104可用。鉴于针对这样的处理的硬件要求,也可以由消息收发应用系统122在服务器侧执行其他处理器和存储器密集型的数据处理。
媒体内容处理系统124专用于通常针对在消息的有效载荷内接收的图像、音频或视频或在消息收发应用系统122处的其他内容项执行各种媒体内容处理操作。媒体内容处理系统124可以访问一个或更多个数据存储装置(例如,数据库118)以检索处理媒体内容中使用的所存储的数据并且存储经处理的媒体内容的结果。
社交网络系统126支持各种社交联网功能和服务,并且使这些功能和服务可用于消息收发应用系统122。为此,社交网络系统126维护并访问数据库118内的实体图。由社交网络系统126支持的功能和服务的示例包括与特定用户有关系或特定用户正在“关注”的客户端应用104的其他用户的标识、以及特定用户的其他实体和兴趣的标识。社交网络系统126可以访问与用户的朋友或其他社交网络连接中的每一个相关联的位置信息,以确定他们在地理上居住或当前位于何处。此外,社交网络系统126可以维护用户的朋友中的每个朋友的位置简档,该位置简档指示用户的朋友居住的地理位置。
用户活动识别系统128可以确定客户端应用104的用户正在执行的一个或更多个活动。用户活动识别系统128可以分析用户内容132以确定由客户端应用104的一个或更多个用户执行的用户活动。用户内容132可以包括由客户端装置102的一个或更多个输入装置(例如,客户端装置102的一个或更多个摄像装置或者一个或更多个麦克风)捕获的图像内容、视频内容或音频内容中的至少一者。在一个或更多个示例中,用户内容132可以包括由客户端装置102的一个或更多个摄像装置捕获的实时摄像装置视图。在一个或更多个附加示例中,用户内容132可以包括由客户端装置102的一个或更多个输入装置先前捕获的内容。例如,用户内容132可以由客户端装置102的一个或更多个输入装置已经先前捕获并且被存储在客户端装置102可以访问的存储器中。存储器可以被包括在客户端装置102的壳体内,或者相对于客户端装置102远程定位。在存储用户内容132的存储器相对于客户端装置102远程定位的情况下,该存储器可以经由一个或更多个网络110被客户端装置102访问。为了说明,用户内容132可以被存储在可以经由一个或更多个网络110被客户端装置102访问的一个或更多个基于云的存储装置中。在一个或更多个说明性示例中,用户内容132可以由一个或更多个数据库118存储。
在一个或更多个实现方式中,用户活动识别系统128可以分析用户内容132以识别包括在用户内容132中的可以对应于用户活动识别信息134的一个或更多个对象。在各种示例中,用户活动识别系统128可以分析用户内容132以确定包括在用户内容132中的用户活动的一个或更多个标识符。例如,用户活动识别系统128可以确定用户内容132包括一个或更多个条形码、一个或更多个QR码或者一个或更多个字母数字标识符中的至少一者。用户活动识别系统128可以相对于存储为用户活动识别信息134的用户活动的一个或更多个标识符,来分析包括在用户内容132中的用户活动的一个或更多个标识符。为了说明,用户活动识别系统128可以确定包括在用户内容132中的标识符相对于包括在用户活动识别信息134中的用户活动的标识符之间的相似性度量。在一个或更多个示例中,用户活动识别系统128可以将包括在用户内容132中的标识符相对于包括在用户活动识别信息134中的用户活动的标识符进行比较,以确定包括在用户内容132中的标识符与包括在用户活动识别信息134中的用户活动的标识符之间的相似性度量。用户活动识别系统128可以响应于相似性量度至少是阈值相似性度量而确定包括在用户内容132中的标识符与包括在用户活动识别信息134中的用户活动的标识符对应。在一个或更多个说明性示例中,用户活动识别系统128可以确定用户内容132包括QR码,并且用户活动识别系统128可以确定包括在用户内容132中的QR码与包括在用户活动识别信息134中的QR码对应,其中QR码与相应的用户活动有关。在各种示例中,与用户活动识别信息134有关地分析的关于用户内容132的数据可以对应于用户内容132的扫描部分。在一个或更多个场景中,扫描工具可以被执行成扫描用户内容132的一部分,并且用户内容132的扫描部分可以由用户活动识别系统128分析以识别与用户内容132对应的用户活动。
用户活动识别系统128可以通过实现一种或更多种图像处理技术来确定包括在用户内容132中的一个或更多个对象。例如,用户活动识别系统128可以通过实现对象识别技术,例如一种或更多种基于特征的对象识别技术或者一种或更多种基于外观的对象识别技术来确定包括在用户内容132中的一个或更多个对象。在一个或更多个说明性示例中,用户活动识别系统128可以实现一种或更多种机器学习技术来识别包括在用户内容132中的一个或更多个对象。在各种示例中,用户活动识别系统128可以实现一种或更多种基于卷积神经网络的技术,以识别包括在用户内容132中的一个或更多个对象。在一个或更多个示例中,用户活动识别系统128可以分析包括在用户内容132中的图像内容、视频内容、音频内容或文本内容中的至少一者,以确定包括在用户内容132中的一个或更多个对象。
响应于识别与包括在用户活动识别信息134中的一个或更多个对象对应的包括在用户内容132中的一个或更多个对象,用户活动识别系统128可以确定与用户内容132对应的一个或更多个用户活动。在一个或更多个示例中,包括在用户内容132中的一个或更多个对象可以由用户活动识别系统128分析以确定与用户内容132对应的位置。在各种示例中,用户活动识别信息134可以包括对应于位置的图像内容或视频内容中的至少一者,并且用户活动识别系统128可以相对于对应于一个或更多个位置的图像内容或视频内容中的至少一者,执行对包括在用户内容132中的一个或更多个对象的分析。基于该分析,用户活动识别系统128可以确定包括在用户内容132中的一个或更多个对象与包括在用户活动识别信息134中的一个或更多个位置的图像内容或视频内容中的至少一者之间的相似性度量。在相似性度量至少是阈值相似性度量的情况下,用户活动识别系统128可以确定用户内容132对应于相应的位置,并且确定对应于用户内容132的用户活动包括对相应位置的访问。在一个或更多个说明性示例中,用户活动识别系统128可以分析用户内容132并且确定用户内容132对应于咖啡店。在这种场景中,用户活动识别系统128可以确定与用户内容132有关的用户活动对应于访问该咖啡店。在一个或更多个附加示例中,用户活动识别系统128可以基于包括在用户内容132中的一个或更多个对象对应于在相应位置处可购买的一个或更多个产品,来确定与用户内容132有关的用户活动对应于由客户端应用104的用户对相应位置的访问。
在一个或更多个附加示例中,用户活动识别系统128可以关于包括在用户活动识别信息134中的提供购买的一个或更多个对象来分析包括在用户内容132中的一个或更多个对象。在各种示例中,用户活动识别系统128可以确定包括在用户内容132中的一个或更多个对象相对于包括在用户活动识别信息134中的提供购买的一个或更多个对象之间的相似性度量。在一个或更多个说明性示例中,用户活动识别系统128可以基于与包括在用户内容132中的对象与包括在用户活动识别信息134中的对象之间的轮廓特性、形状特性或颜色特性中的至少一者有关的相似度,确定包括在用户内容132中的对象与包括在用户活动识别信息134中的对象之间的相似性度量。用户活动识别系统128可以响应于确定相似性量度至少是阈值相似性度量来确定包括在用户内容132中的对象对应于包括在用户活动识别信息134中的对象。在一个或更多个实现方式中,用户活动识别系统128可以基于由用户活动识别系统128识别的包括在用户内容132中的一个或更多个对象来确定与用户内容132有关的用户活动。例如,用户活动识别系统128可以确定,与用户内容132有关的用户活动对应于与一个或更多个对象相关联的产品的购买。在这些场景中,一个或更多个对象可以包括产品的标识符(例如,名称、形状、设计、条形码或QR码)、被定位于相应位置的产品的物理实例中的至少一者。
用户活动跟踪和兑换系统130可以确定与对应于用户内容132的用户活动有关的一个或更多个促销。在一个或更多个示例中,用户活动跟踪和兑换系统130可以解析与由用户活动识别系统128确定的用户活动有关的用户活动促销信息136,以确定与用户活动对应的一个或更多个促销。例如,用户活动促销信息136可以指示一个或更多个产品或者一个或更多个位置中的至少一者,所述一个或更多个产品或者一个或更多个位置对应于多个促销中的单个促销。在这些场景中,用户活动跟踪和兑换系统130可以相对于用户活动促销信息136来分析与用户内容132对应的一个或更多个位置或者一个或更多个产品中的至少一者,以确定与用户内容132有关的促销。在各种示例中,包括在用户活动促销信息136中的单个促销可以与一个或更多个标识符相关联。用户活动跟踪和兑换系统130可以相对于单个促销的标识符分析对应于用户内容132的一个或更多个对象或者一个或更多个位置中的至少一者的标识符,以确定对应于用户内容132的一个或更多个标识符与对应于促销的一个或更多个标识符之间的相似性度量。在包括在用户活动促销信息136中的促销的标识符与对应于用户内容132的用户活动的标识符之间的相似性度量至少是阈值相似性度量的情况下,用户活动跟踪和兑换系统130可以识别与用户内容132相关联的促销。在各种示例中,为确定与用户内容132对应的用户活动的第一标识符与包括在用户活动促销信息136中的促销的第二标识符之间的相似性度量而执行的分析可以包括将第一标识符与第二标识符进行比较以及确定第一标识符与第二标识符之间的匹配量。
在一个或更多个说明性示例中,用户活动识别系统128可以分析用户内容132,并且确定包括在用户内容132中的第一标识符对应于客户端应用104的用户访问位置例如咖啡店。在各种示例中,第一标识符可以包括可得到以在咖啡店内扫描的QR码。然后,用户活动跟踪和兑换系统130可以相对于包括在用户活动促销信息136中的多个附加标识符分析第一标识符,以确定用户活动是否对应于促销。为了说明,用户活动跟踪和兑换系统130可以将从用户内容获得的与咖啡店有关的QR码与与相应促销对应的多个不同QR码进行比较。然后,用户活动跟踪和兑换系统130可以确定与咖啡店有关的QR码和与咖啡店有关的促销的QR码之间的匹配。在一个或更多个场景中,与咖啡店有关的促销可以指示:访问咖啡店阈值次数的客户端应用104的用户接收来自咖啡店的免费赠送项。
在一个或更多个附加说明性示例中,用户活动识别系统128可以分析用户内容132并且确定包括在用户内容132中的标识符对应于可以由客户端应用104的用户购买的产品。在一个或更多个示例中,包括在用户内容132中的标识符可以包括条形码或QR码中的至少一者,该条形码或QR码识别可以由客户端应用104的用户购买的产品的实例。用户活动跟踪和兑换系统130可以相对于包括在用户活动促销信息136中的多个附加标识符来分析包括在用户内容132中的标识符,以确定促销是否与产品相关联。例如,用户活动跟踪和兑换系统130可以将产品的条形码或QR码与包括在用户活动促销信息136中的多个条形码或QR码进行比较。然后,用户活动跟踪和兑换系统130可以确定产品的条形码或QR码和与产品有关的促销的条形码或QR码之间的匹配。在一个或更多个实例中,与产品有关的促销可以指示购买阈值数目的产品实例的客户端应用104的用户可以接收可以从用户购买的产品的同一制造商或销售方获得的产品的免费赠送实例或附加产品的免费赠送实例。
响应于确定包括在用户内容132中的标识符对应于促销,用户活动跟踪和兑换AR内容项138可以被执行。用户活动跟踪和兑换AR内容项138可以能够执行成相对于客户端应用104的各个用户来跟踪与促销有关的用户活动的量。例如,每次在由客户端应用104的各个用户获得的用户内容132中检测到对应于相应促销的标识符时,用户活动跟踪和兑换AR内容项138可以能够执行成相对于客户端应用104的个体用户来增加与促销有关的用户活动的度量。与客户端应用104的个体用户的相应促销对应的用户活动的量可以被存储为用户活动跟踪信息140。用户活动跟踪信息140可以指示与客户端应用104的各个用户的一个或更多个促销有关的先前的用户活动的量。为了说明,用户活动跟踪信息140可以指示客户端应用104的各个用户对与促销对应的位置的访问次数。在一个或更多个附加示例中,用户活动跟踪信息140可以指示客户端应用104的各个用户购买对应于促销的一个或更多个产品的次数。
在各种示例中,在确定客户端应用104的各个用户已经参与了与促销有关的用户活动之后,用户活动跟踪和兑换AR内容项138可以与用户活动跟踪和兑换系统130一起操作,以显示指示与促销有关的用户活动的量的信息。例如,与用户活动跟踪和兑换AR内容项138对应的用户界面元素可以被显示在包括用户内容132的用户界面中。响应于对用户界面元素的选择,用户跟踪和兑换AR内容138可以请求关于与用户活动对应的促销的信息,该促销关于与客户端应用104的用户有关的用户内容132。在这些场景中,用户活动跟踪和兑换系统130可以分析与客户端应用104的用户有关的并且与促销有关的用户活动跟踪信息140,以确定由客户端应用104的用户的与促销相关联的用户活动的量。然后,用户活动跟踪和兑换系统130可以将用户活动信息提供给用户活动跟踪和兑换AR内容项138。因此,用户活动跟踪和兑换AR内容项138可以能够执行成显示增强现实内容,该增强现实内容针对客户端应用104的各个用户指示与促销有关的用户活动的量。在一个或更多个说明性示例中,用户活动跟踪和兑换AR内容项138可以能够执行成显示图形内容,该图形内容包括指示与促销有关的用户活动的量的图像内容或视频内容中的至少一者。在一个或更多个示例中,用户活动跟踪和兑换AR内容项138可以能够执行成生成指示与促销有关的用户活动的量的穿孔卡。
用户活动跟踪和兑换AR内容项138也可以能够被执行成生成图形内容,该图形内容包括指示兑换促销的至少一部分的一个或更多个选项的图像内容或视频内容中的至少一者。为了说明,用户活动跟踪和兑换AR内容项138可以能够执行成生成增强现实内容,该增强现实内容包括可以选择成修改与促销有关的用户活动跟踪信息140的用户界面元素,该用户活动跟踪信息140对应于客户端应用104的用户。例如,选择用户界面元素以兑换促销的至少一部分可能导致用户活动跟踪和兑换系统130减少包括在与促销有关的用户活动跟踪信息140中的用户活动的量,用户活动跟踪信息140与客户端应用104的用户有关。在一个或更多个示例中,与客户端应用104的用户有关的促销的兑换可以重置由用户的与促销有关的用户活动的量。在一个或更多个附加示例中,对促销的至少一部分的兑换可以将与促销有关的用户活动的量减少指定的量。为了说明,由客户端应用104的用户兑换50%的促销可能导致用户在促销方面的用户活动的量减少50%。
在各种示例中,客户端应用104的用户至少部分地兑换促销的资格可以取决于用户在促销方面的用户活动的量。在一个或更多个示例中,客户端应用104的用户可能必须就促销积累至少阈值量的用户活动,以至少部分地兑换促销。用户活动跟踪和兑换系统130可以针对客户端应用104的用户确定关于促销的用户活动的量,并且确定用户活动的量是否对应于有资格至少部分地兑换促销的用户活动的阈值量。在关于促销的用户活动的量对应于用户活动的阈值量的情况下,用户活动跟踪和兑换系统130可以确定客户端应用104的用户有资格至少部分地兑换促销。在一个或更多个实现方式中,用户活动跟踪和兑换AR内容项138可以与用户活动跟踪和兑换系统130一起操作,以确定客户端应用104的用户是否有资格至少部分地兑换促销。在用户有资格至少部分地兑换促销的场景中,用户活动跟踪和兑换AR内容项138可以能够执行成基于由客户端应用104的用户进行的关于促销的用户活动的量来提供用于兑换促销的一个或更多个选项。在一个或更多个说明性示例中,用户活动跟踪和兑换AR内容项138可以能够执行成引起与促销的至少部分兑换有关的信息,该信息指示可以与对应于促销的一个或更多个奖励有关地被兑换的用户活动的量。
在各种示例中,产品的购买可以通过从产品的销售方获得的信息来确认。例如,与产品的销售方对应的标识符、码或其他购买验证信息可以与用户内容132中包括的产品的标识符一起被提供给服务器系统108。另外,可以从一个或更多个金融服务提供者获得与一个或更多个金融交易有关的购买数据,以验证由客户端应用104的用户对与提供给客户端应用104的用户的促销有关的产品的购买。
图2是示出了根据一些示例的关于服务器系统108的进一步细节的框图。具体地,服务器系统108被示出为包括客户端应用104和应用服务器114。服务器系统108包含若干子系统,这些子系统在客户端侧由客户端应用104支持并且在服务器侧由应用服务器114支持。这些子系统包括例如短暂定时器系统202、集合管理系统204、增强系统206、地图系统208、游戏系统210、用户活动识别系统128以及用户活动跟踪和兑换系统130。
短暂定时器系统202负责施行由客户端应用104和消息收发应用系统122对内容进行临时或限时访问。短暂定时器系统202包含多个定时器,这些定时器基于与消息或消息集合(例如,故事)相关联的持续时间和显示参数,选择性地实现经由客户端应用104访问(例如,用于呈现和显示)消息和相关联的内容。下面提供关于短暂定时器系统202的操作的另外的细节。
集合管理系统204负责管理媒体的组或集合(例如,文本、图像、视频和音频数据的集合)。可以将内容(例如,消息,包括图像、视频、文本和音频)的集合组织成“事件图库(gallery)”或“事件故事”。可以使这样的集合在指定时间段(例如,内容所涉及的事件的持续时间)内可用。例如,可以使与音乐会有关的内容在该音乐会的持续时间内作为“故事”可用。集合管理系统204还可以负责发布向客户端应用104的用户界面提供特定集合的存在性的通知的图标。
此外,集合管理系统204包括使得集合管理器能够管理和策展特定的内容集合的策展接口212。例如,策展接口212使得事件组织者能够策展与特定事件有关的内容集合(例如,删除不适当的内容或冗余消息)。此外,集合管理系统204采用机器视觉(或图像识别技术)和内容规则来自动地策展内容集合。在某些示例中,可以向用户支付对将用户生成的内容包括到集合中的补偿。在这样的情况下,集合管理系统204进行操作以自动地向这样的用户支付以使用他们的内容。
增强系统206提供各种功能,这些功能使得用户能够增强(例如,注释或以其他方式修改或编辑)与经由客户端应用104产生的内容相关联的媒体内容,例如消息。例如,增强系统206提供与生成和发布用于由服务器系统108处理的内容的媒体叠加有关的功能。增强系统206基于客户端装置102的地理位置可操作地向客户端应用104供应媒体叠加或增强(例如,图像过滤器)。在另一示例中,增强系统206基于其他信息(例如,客户端装置102的用户的社交网络信息)可操作地向客户端应用104供应媒体叠加。媒体叠加可以包括音频和视觉内容以及视觉效果。音频和视觉内容的示例包括图片、文本、徽标、动画和声音效果。视觉效果的示例包括颜色叠加。音频和视觉内容或视觉效果可以应用于客户端装置102处的媒体内容项(例如,照片)。例如,媒体叠加可以包括可以叠加在由客户端装置102拍摄的照片的顶部上的文本或图像。在另一示例中,媒体叠加包括位置标识叠加(例如,威尼斯海滩)、实时事件的名称或商家名称叠加(例如,海滩咖啡馆)。在另一示例中,增强系统206使用客户端装置102的地理位置来识别媒体叠加,该媒体叠加包括在客户端装置102的地理位置处的商家的名称。媒体叠加可以包括与商家相关联的其他标记。媒体叠加可以被存储在数据库118中并且通过数据库服务器116被访问。
在一些示例中,增强系统206提供基于用户的发布平台,该基于用户的发布平台使得用户能够选择地图上的地理位置并上传与所选择的地理位置相关联的内容。用户还可以指定特定媒体叠加应当被提供给其他用户的情况。增强系统206生成媒体叠加,其包括所上传的内容并将所上传的内容与所选择的地理位置相关联。
在其他示例中,增强系统206提供基于商家的发布平台,该基于商家的发布平台使商家能够经由出价过程选择与地理位置相关联的特定媒体叠加。例如,增强系统206将最高出价商家的媒体叠加与对应地理位置相关联达预定义时间量。
地图系统208提供各种地理位置功能,并且支持由客户端应用104呈现基于地图的媒体内容和消息。例如,地图系统208使得能够在地图上显示(例如,存储在图3的简档数据308中的)用户图标或化身,以在地图的上下文内指示用户的“朋友”的当前或过去位置,以及由这些朋友生成的媒体内容(例如,包括照片和视频的消息的集合)。例如,在客户端应用104的地图界面上,可以将用户从特定地理位置发布到服务器系统108的消息在地图的该特定位置的上下文内显示给特定用户的“朋友”。此外,用户还可以经由客户端应用104与服务器系统108的其他用户(例如,使用适当的状况化身)共享他的或她的位置和状态信息,该位置和状态信息在客户端应用104的地图界面的上下文内被类似地显示给所选择的用户。
游戏系统210在客户端应用104的上下文内提供各种游戏功能。客户端应用104提供游戏界面,该游戏界面提供可用游戏的列表,该游戏可以由用户在客户端应用104的上下文中启动并与服务器系统108的其他用户一起玩。服务器系统108还使特定用户能够通过从客户端应用104向其他用户发出邀请来邀请这样的其他用户参与玩特定游戏。客户端应用104还支持游戏上下文内的语音消息收发和文本消息收发二者(例如,聊天),为游戏提供排行榜,并且还支持提供游戏内奖励(例如,钱币和项)。
用户活动识别系统128可以通过分析经由客户端应用104获得的用户内容来确定与促销对应的用户活动。在一个或更多个示例中,用户活动识别系统128可以基于与用户内容对应的扫描数据来识别用户活动。例如,用户内容的一部分可以被扫描并且提供给用户活动识别系统128。然后,用户活动识别系统128可以分析与对应于用户活动的存储数据有关的扫描数据。在各种示例中,用户活动识别系统128可以确定扫描数据包括用户活动的标识符,例如QR码或条形码。在一个或更多个说明性示例中,该QR码或条形码可以相对于与和多个促销对应的用户活动有关的多个QR码或条形码被分析。在用户内容中包括的标识符对应于促销的场景中,用户活动识别系统128可以与用户活动跟踪和兑换系统130一起操作以跟踪与促销有关的用户活动的量。
用户活动跟踪和兑换系统130可以更新由客户端应用104的各个用户的关于一个或更多个促销的用户活动的量。在一个或更多个示例中,随着用户活动识别系统128识别关于客户端应用104的用户的与促销相关联的用户活动,用户活动跟踪和兑换系统130可以增加由客户端应用104的用户的简档存储的用户活动的量。用户活动跟踪和兑换系统130还可以确定客户端应用104的用户何时有资格兑换关于促销的用户活动的至少一部分。例如,用户活动跟踪和兑换系统130可以确定客户端应用104的用户已经执行了关于促销的至少阈值量的用户活动,并且提供用于兑换关于促销的用户活动的一个或更多个选项。在一个或更多个说明性示例中,关于促销的用户活动的兑换可以导致客户端应用104的用户获得与促销有关的一个或更多个奖励例如一个或更多个免费赠送项或折扣。
图3是示出了根据一个或更多个示例实现方式的可以存储在服务器系统108的数据库118中的数据结构300的示意图。虽然数据库118的内容被示出为包括多个表,但是应当理解,数据可以存储在其他类型的数据结构(例如,作为面向对象的数据库)中。
数据库118包括存储在消息表302内的消息数据。对于任何特定的一条消息,该消息数据包括至少消息发送方数据、消息接收者(或接收方)数据和有效载荷。
实体表304存储实体数据,并且(例如,参考地)链接到实体图306和简档数据308。在实体表304内维持其记录的实体可以包括个人、公司实体、组织、对象、地点、事件等。不管实体类型如何,服务器系统108存储关于其的数据的任何实体可以是被认可的实体。每个实体设置有唯一标识符以及实体类型标识符(未示出)。
实体图306存储关于实体之间的关系和关联的信息。仅作为示例,这样的关系可以是社交的、职业的(例如,在共同的公司或组织工作)、基于兴趣的、或基于活动的。
简档数据308存储关于特定实体的多种类型的简档数据。基于由特定实体指定的隐私设置,简档数据308可以被选择性地使用并呈现给架构100的其他用户。在实体是个人的情况下,简档数据308包括例如用户名、电话号码、地址、设置(例如,通知和私密设置),以及用户选择的化身表示(或这样的化身表示的集合)。特定用户然后可以选择性地将这些化身表示中的一个或更多个包括在经由架构100传送的消息内容或其他数据内,以及包括在由客户端应用104向其他用户显示的地图界面上。化身表示的集合可以包括“状态化身”,其呈现用户可以选择在特定时间进行通信的状态或活动的图形表示。
在实体是团体的情况下,除了团体名称、成员和相关团体的各种设置(例如,通知)之外,团体的简档数据308还可以类似地包括与团体相关联的一个或更多个化身表示。
数据库118还在增强表310中存储增强数据,例如叠加或过滤器。增强数据与视频(针对其数据被存储在视频表314中)和图像(针对其数据被存储在图像表316中)相关联并且应用于视频和图像。
在一个示例中,过滤器是在向接收者用户呈现期间显示为叠加在图像或视频上的叠加。过滤器可以是各种类型的,包括当发送用户正在编写消息时由客户端应用104呈现给发送用户的一组过滤器中用户选择的过滤器。其他类型的过滤器包括地理位置过滤器(也称为地理过滤器),其可以基于地理位置被呈现给发送用户。例如,可以基于由客户端装置102的全球定位系统(GPS)单元确定的地理位置信息,由客户端应用104在用户界面内呈现特定于附近或特殊位置的地理位置过滤器。
另一类型的过滤器是数据过滤器,其可以由客户端应用104基于在消息创建处理期间由客户端装置102聚集的其他输入或信息来选择性地呈现给发送用户。数据过滤器的示例包括特定位置处的当前温度、发送用户行进的当前速度、客户端装置102的电池寿命或当前时间。
可以被存储在图像表316内的其他增强数据包括增强现实内容项(例如,对应于应用镜头或增强现实体验)。增强现实内容项可以是可以被添加至图像或视频的实时特殊效果和声音。
如上所述,增强数据包括增强现实内容项、叠加、图像变换、AR图像以及涉及可以应用于图像数据(例如,视频或图像)的修改的类似项。这包括实时修改,其在图像被使用客户端装置102的装置传感器(例如,一个或多个摄像装置)进行捕获时并且然后在修改的情况下在客户端装置102的屏幕上显示时对图像进行修改。这还包括对存储的内容(例如可以修改的图库中的视频片段)的修改。例如,在访问多个增强现实内容项的客户端装置102中,用户可以使用具有多个增强现实内容项的单个视频片段来查看不同的增强现实内容项将如何修改存储的片段。例如,通过针对内容选择不同的增强现实内容项,可以将应用不同伪随机运动模型的多个增强现实内容项应用于该同一内容。类似地,实时视频捕获可以与示出的修改一起使用,以显示当前由客户端装置102的传感器捕获的视频图像将如何修改捕获的数据。这样的数据可以简单地显示在屏幕上而不存储在存储器中,或者由装置传感器捕获的内容可以在进行或不进行修改(或二者)的情况下被记录并且存储在存储器中。在某些系统中,预览特征可以显示不同的增强现实内容项在同一时间在显示器的不同窗口内的外观。例如,这可以实现同时在显示器上查看具有不同伪随机动画的多个窗口。
因此,使用增强现实内容项的数据和各种系统或使用该数据修改内容的其他此类变换系统可以涉及视频帧中对象(例如,脸、手、身体、猫、狗、表面、物体等)的检测,在这些对象离开视场、进入视场以及在视场四处移动时跟踪这些对象,以及在跟踪这些对象时对其进行修改或变换。在各种实现方式中,可以使用用于实现这种变换的不同方法。一些示例可以涉及生成一个对象或多个对象的三维网格模型,以及在视频内使用模型的变换和动画纹理来实现变换。在其他示例中,可以使用对象上的点的跟踪将图像或纹理(其可以是二维或三维的)放置在所跟踪的定位处。在更进一步的示例中,可以使用视频帧的神经网络分析将图像、模型或纹理放置在内容(例如,图像或视频帧)中。因此,增强现实内容项既指用于在内容中创建变换的图像、模型和纹理,也指通过对象检测、跟踪和放置实现这样的变换所需的附加建模和分析信息。
可以利用保存在任何类型的计算机化系统的存储器中的任何类型的视频数据(例如,视频流、视频文件等)来执行实时视频处理。例如,用户可以加载视频文件并且将其保存在装置的存储器中,或者可以使用装置的传感器生成视频流。此外,可以使用计算机动画模型来处理任何对象,例如人的脸部和人身体的各部分、动物或非生物例如椅子、汽车或其他对象。
在一些示例中,当与要变换的内容一起选择特定修改时,要变换的元素由计算装置识别,并且然后如果要变换的元素存在于视频的帧中,则被检测和跟踪。根据修改请求修改对象的元素,从而变换视频流的帧。对于不同类型的变换,可以通过不同的方法执行对视频流的帧的变换。例如,对于主要是指改变对象的元素的形式的帧的变换,计算对象的每个元素的特性点(例如,使用主动形状模型(ASM)或其他已知方法)。然后,针对对象的至少一个元素中的每一个生成基于特性点的网格。该网格用于跟踪视频流中的对象的元素的后续阶段。在跟踪的处理中,针对每个元素的提及的网格与每个元素的定位对准。然后,在网格上生成附加点。基于修改请求针对每个元素生成第一组第一点,并且基于该组第一点和修改请求针对每个元素生成一组第二点。然后,可以通过基于该组第一点和该组第二点以及网格修改对象的元素来变换视频流的帧。在这样的方法中,也可以通过跟踪和修改背景来改变或扭曲被修改对象的背景。
在一些示例中,使用对象的元素改变对象的一些区域的变换可以通过计算对象的每个元素的特性点并基于计算的特性点生成网格来执行。在网格上生成点,然后基于这些点生成各种区域。然后,通过将每个元素的区域与至少一个元素中的每一个的定位对准来跟踪对象的元素,并且可以基于修改请求来修改区域的属性,从而变换视频流的帧。根据具体的修改请求,可以以不同的方式变换所提及的区域的属性。这样的修改可以涉及:改变区域的颜色;从视频流的帧中移除至少一些部分区域;将一个或更多个新对象包括在基于修改请求的区域中;以及修改或扭曲区域或对象的元素。在各种实现方式中,可以使用这样的修改或其他类似修改的任何组合。对于要被动画化的某些模型,可以选择一些特性点作为要用于确定针对模型动画的选项的整个状态空间的控制点。
在使用脸部检测来变换图像数据的计算机动画模型的一些示例中,使用特定脸部检测算法(例如,Viola-Jones)在图像上检测脸部。然后,将主动形状模型(ASM)算法应用于图像的脸部区域以检测脸部特征参考点。
可以使用适用于脸部检测的其他方法和算法。例如,在一些实现方式中,使用界标来定位特征,该界标表示在所考虑的大多数图像中存在的可区分点。例如,对于脸部界标,可以使用左眼瞳孔的位置。如果初始界标不可识别(例如,如果人有眼罩),则可以使用次级界标。这样的界标识别过程可以用于任何这样的对象。在一些示例中,一组界标形成形状。可以使用形状中的点的坐标将形状表示为矢量。一个形状利用相似变换(允许平移、缩放和旋转)与另一个形状对准,该相似变换使形状点之间的平均欧几里德距离最小化。平均形状是对准的训练形状的均值。
在各种示例中,从与由全局脸部检测器确定的脸部的定位和大小对准的平均形状开始搜索界标。然后,这样的搜索重复以下步骤:通过每个点周围的图像纹理的模板匹配来调整形状点的位置而建议暂定形状,并且然后使暂定形状符合全局形状模型,直至发生收敛。在一个或更多个系统中,个别的模板匹配是不可靠的,并且形状模型将弱模板匹配的结果进行池化,以形成更强的整体分类器。在图像金字塔中的每一级处从粗分辨率到细分辨率重复整个搜索。
变换系统可以在客户端装置(例如,客户端装置102)上捕获图像或视频流,并且在客户端装置102上本地执行复杂的图像操纵,同时保持适当的用户体验、计算时间和功耗。复杂的图像操纵可以包括大小和形状变化、情绪迁移(例如,将脸部从皱眉变为微笑)、状态迁移(例如,使对象变老、减小表面年龄、改变性别)、风格迁移、图形元素应用,以及由已经被配置成在客户端装置102上有效执行的卷积神经网络实现的任何其他合适的图像或视频操纵。
用于变换图像数据的计算机动画模型可以由系统使用,在该系统中,用户可以使用具有神经网络的客户端装置102来捕获用户的图像或视频流(例如,自拍),该神经网络操作为在客户端装置102上操作的客户端应用104的一部分。在客户端应用104内运行的变换系统确定图像或视频流中的脸部的存在并提供与计算机动画模型相关联的修改图标以转换图像数据或者计算机动画模型可以被呈现为与本文中描述的界面相关联。修改图标包括改变,该改变可以是作为修改操作的一部分的用于修改图像或视频流内的用户的脸部的基础。一旦选择了修改图标,则变换系统发起将用户的图像转换以反映所选择的修改图标(例如,在用户上生成笑脸)的处理。一旦图像或视频流被捕获并且指定的修改被选择,修改的图像或视频流就可以呈现在客户端装置102上显示的图形用户界面中。变换系统可以在图像或视频流的一部分上实现复杂的卷积神经网络,以生成和应用所选择的修改。也就是说,一旦选择了修改图标,用户就可以捕获图像或视频流并且实时或近乎实时地呈现修改结果。此外,当正在捕获视频流时,修改可以是持久的,并且所选择的修改图标保持被切换。机器教导的神经网络可以用于实现这样的修改。
呈现由变换系统执行的修改的图形用户界面可以为用户提供附加的交互选项。这样的选项可以基于用于发起特定计算机动画模型的选择和内容捕获的接口(例如,从内容创建者用户接口发起)。在各种实现方式中,在修改图标的初始选择之后,修改可以是持久的。用户可以通过敲击或以其他方式选择由变换系统修改的脸部来打开或关闭修改,并且将其存储以供以后查看或浏览到成像应用的其他区域。在由变换系统修改多个脸部的情况下,用户可以通过敲击或选择在图形用户界面内修改和显示的单个脸部来全局打开或关闭修改。在一些实现方式中,通过敲击或选择图形用户界面内显示的单独脸部或一系列单独脸部,可以单独切换这样的修改,或者可以单独修改一组多个脸部中的各个脸部。
故事表312存储关于消息的集合的数据以及相关联的图像、视频或音频数据,这些数据被编译成集合(例如,故事或图库)。特定集合的创建可以由特定用户(例如,在实体表304中维护针对其的记录的每个用户)发起。用户可以以已经由该用户创建和发送/广播的内容的集合的形式创建“个人故事”。为此,客户端应用104的用户界面可以包括用户可以选择成使得发送用户能够将特定内容添加至他或她的个人故事的图标。
集合还可以构成作为来自多个用户的内容的集合的“实况故事”,该内容的集合是手动地、自动地或者使用手动技术和自动技术的组合创建的。例如,“实况故事”可以构成来自不同位置和事件的用户提交的内容的策展流。其客户端装置具有启用的位置服务并且在特定时间处于共同位置事件的用户可以例如经由客户端应用104的用户界面被呈现有选项,以向特定实况故事贡献内容。可以由客户端应用104基于他的或她的位置向用户标识实况故事。最终结果是从社群角度讲述的“实况故事”。
另外类型的内容集合被称为“位置故事”,其使得其客户端装置102位于特定地理位置(例如,在学院或大学校园)内的用户能够对特定集合做出贡献。在一些示例中,对位置故事的贡献可能需要二级认证来验证终端用户属于特定组织或其他实体(例如,是大学校园中的学生)。
如上面提到的,视频表314存储视频数据,在一个示例中,该视频数据与其记录维护在消息表302内的消息相关联。类似地,图像表316存储图像数据,该图像数据与其消息数据存储在实体表304中的消息相关联。实体表304可以使来自增强表310的各种增强与存储在图像表316和视频表314中的各种图像和视频相关联。
在一个或更多个示例中,简档数据308可以存储针对客户端应用104的各个用户的用户活动跟踪信息140。用户活动跟踪信息140可以指示针对客户端应用104的各个用户的关于一个或更多个促销的用户活动的量。例如,用户活动跟踪信息140可以指示针对客户端应用104的用户的关于第一促销的用户活动的第一量。用户活动跟踪信息140还可以指示针对客户端应用104的用户的关于第二促销的用户活动的第二量。另外,针对客户端应用104的附加用户的用户活动跟踪信息140可以指示关于第一促销的用户活动的第一附加量和关于第二促销的用户活动的第二附加量。
数据库118还可以存储用户活动识别信息数据表318。用户活动识别信息数据表318可以存储和与可以可用于客户端应用104的用户的一个或更多个促销对应的用户活动有关的信息。例如,用户活动识别信息数据表318可以存储与一个或更多个促销有关的用户活动的标识符。为了说明,用户活动识别信息数据表318可以存储一个或更多个QR码,这些QR码对应于与可用于客户端应用104的用户的一个或更多个促销有关的用户活动。在一个或更多个附加示例中,用户活动识别信息数据表318可以存储一个或更多个条形码,这些条形码对应于与可用于客户端应用104的用户的一个或更多个促销有关的用户活动。在各种示例中,用户活动识别信息数据表318可以存储与促销有关的产品的多个条形码或多个QR码中的至少一者。另外,用户活动识别信息数据表318可以包括一个或更多个条形码或者一个或更多个QR码中的至少一者,这些条形码或QR码对应于可以与一个或更多个促销相关联的一个或更多个位置。用户活动识别信息数据表318可以被用户活动识别系统128访问,以识别对应于一个或更多个促销的与用户内容有关的用户活动。在一个或更多个示例中,用户活动识别系统128可以分析由用户活动识别信息数据表318存储的信息,以识别由客户端应用104的用户基于由用户活动识别系统128分析的用户内容而执行的用户活动。
图4是示出了根据一些实现方式的内容400的示例框架的示意图。内容400可以由客户端应用104生成。在各种示例中,内容400可以由客户端应用104的第一实例生成并被传送至客户端应用104的第二实例或服务器系统108中的至少一者。在内容400包括消息的情况下,内容400可以用于填充存储在数据库118内的消息表302并可以由应用服务器114访问。在一个或更多个实现方式中,内容400可以作为客户端装置102或应用服务器114中的至少一者的“在途”或“飞行”数据存储在存储器中。内容400被示出为包括以下组成部分中的至少一部分:
·内容标识符402:标识内容400的唯一标识符。
·内容文本有效载荷404:要由用户经由客户端装置102的用户界面生成并且被包括在内容400中的文本。
·内容图像有效载荷406:由客户端装置102的摄像装置组件捕获或从客户端装置102的存储器组件检索到的并且包括在内容400中的图像数据。发送或接收的内容400的图像数据可以被存储在图像表316中。
·内容视频有效载荷408:由摄像装置组件捕获或从客户端装置102的存储器组件检索并且被包括在内容400中的视频数据。发送或接收的内容400的视频数据可以被存储在视频表314中。
·内容音频有效载荷410:由麦克风捕获或从客户端装置102的存储器组件检索并且被包括在内容400中的音频数据。
·内容增强数据412:表示要应用于内容400的内容图像有效载荷406、内容视频有效载荷408或内容音频有效载荷410的增强的增强数据(例如,过滤器、贴纸或其他注释或增强)。发送或接收的内容400的增强数据可以被存储在增强表310中。
·内容持续时间参数414:以秒为单位的参数值,其指示内容400的一个或更多个部分(例如,内容图像有效载荷406、内容视频有效载荷408、内容音频有效载荷410)将经由客户端应用104呈现给用户或使用户可访问的时间量。
·内容地理位置参数416:与消息的内容有效载荷相关联的地理位置数据(例如,纬度坐标和经度坐标)。多个内容地理位置参数416的值可以被包括在有效载荷中,这些参数值中的每一个与包括在内容中的内容项(例如,内容图像有效载荷406内的特定图像或内容视频有效载荷408中的特定视频)相关联。
·内容故事标识符418:标识与内容400的内容图像有效载荷406中的特定项相关联的一个或更多个内容集合(例如,故事表312中标识的“故事”)的标识符值。例如,可以使用标识符值将内容图像有效载荷406内的多个图像各自与多个内容集合相关联。
·内容标签420:每个内容400可以用多个标签来标记,多个标签中的每个标签指示内容有效载荷中包括的内容的主题。例如,在内容图像有效载荷406中包括的特定图像描绘动物(例如,狮子)的情况下,标签值可以被包括在指示相关动物的内容标签420内。标签值可以基于用户输入手动生成或者可以使用例如图像识别自动生成。
·内容发送方标识符422:指示在其上生成内容400并且从其发送内容400的客户端装置102的用户的标识符(例如,消息收发系统标识符、电子邮件地址或装置标识符)。
·内容接收方标识符424:指示内容400定址到的客户端装置102的用户的标识符(例如,消息收发系统标识符、电子邮件地址或装置标识符)。
·扫描的数据标识符426:包括在用户内容中的已经使用客户端应用104的功能进行扫描的标识符。该标识符可以对应于与提供给客户端应用104的用户的促销有关的用户活动。扫描的数据标识符426可以对应于包括在内容400的扫描部分中的QR码。在附加示例中,扫描的数据标识符426可以对应于包括在内容400的扫描部分中的条形码。
内容400的各种组件的数据(例如,值)可以对应于在其内存储数据的表中的位置的指针。例如,内容图像有效载荷406中的图像值可以是图像表316内的位置的指针(或地址)。类似地,内容视频有效载荷408内的值可以指向存储在视频表314内的数据,存储在内容增强412内的值可以指向存储在增强表310中的数据,存储在内容故事标识符418内的值可以指向存储在故事表312中的数据,并且存储在内容发送者标识符422和内容接收者标识符424内的值可以指向存储在实体表304内的用户记录。此外,扫描的数据标识符426的值可以指向存储在包括用户活动识别信息数据表318的数据结构内的数据。可以相对于包括在用户活动识别信息数据表318中的标识符来分析扫描的数据标识符426,以确定扫描的数据标识符426是否对应于与提供给客户端应用104的用户的促销有关的用户活动。
图5是示出了根据一个或更多个示例实现方式的用于生成增强现实内容的架构500的图形表示,该增强现实内容跟踪客户端应用的用户的活动并且可以用于兑换就用户活动提供的促销。架构500可以包括由用户502操作的客户端装置102。客户端装置102可以存储并执行客户端应用104的实例。客户端装置102还可以包括一个或更多个摄像装置,例如摄像装置504。摄像装置504可以捕获图像内容或视频内容中的至少一者。客户端装置102还可以包括一个或更多个输入装置,这些输入装置捕获可以与由摄像装置504捕获的视频内容对应的音频内容。摄像装置504可以捕获摄像装置视图506,摄像装置视图506可以包括摄像装置504正在捕获的内容的实时视图。
客户端应用104可以使多个用户界面经由客户端装置102的一个或更多个显示装置被显示。例如,客户端应用104可以使第一用户界面508被显示。第一用户界面508可以包括用户内容510。用户内容510可以包括经由摄像装置504捕获的图像内容或视频内容中的至少一者。在一个或更多个示例中,用户内容510可以包括摄像装置视图506。在一个或更多个附加示例中,用户内容510可以包括由摄像装置504先前捕获的内容。在各种示例中,用户内容510的至少一部分可以由客户端装置102的存储器存储。在一个或更多个其他示例中,用户内容510的至少一部分可以被存储在一个或更多个数据存储装置中,这些数据存储装置相对于客户端装置102远程定位并且可以被客户端装置102访问。
第一用户界面508还可以包括扫描用户界面(UI)元素512。扫描UI元素512可以能够选择成扫描用户内容510的一部分并且生成扫描数据514。在一个或更多个示例中,第一用户界面508可以包括示出要被扫描的用户内容510的一部分的指示符。指示符可以响应于来自用户502的输入而被移动,以被放置在用户内容510的指定部分上。在一个或更多个示例中,可以分析扫描数据514以确定用户活动信息是否被包括在扫描数据514中。扫描数据514可以由客户端装置102或服务器系统108中的至少一者进行分析。在一个或更多个实现方式中,扫描数据514可以由用户活动识别系统128分析。可以使用被定位于客户端装置102、服务器系统108、或其组合处的计算资源来执行用户活动识别系统128。
在各种示例中,客户端应用104可以在产生扫描数据514之后或响应于产生扫描数据514而显示第二用户界面516。第二用户界面516可以包括用户内容510和用户活动跟踪器增强现实(AR)UI元素518。用户活动跟踪器AR UI元素518可以与多个附加用户界面元素一起显示。在一个或更多个示例中,用户活动跟踪器AR UI元素518和附加用户界面元素可以能够选择成执行一个或更多个增强现实内容项,这些增强现实内容项可以生成经由客户端应用104显示的增强现实内容。用户活动跟踪器AR UI元素518和附加用户界面元素可以被布置在轮播(carousel)用户界面布置中,该轮播用户界面布置使得客户端应用104的用户能够一次显示多个用户界面元素并且能够水平滚动遍历单独对应于一个或更多个增强现实内容项的多个用户界面元素。在一个或更多个说明性示例中,用户活动跟踪器AR UI元素518可以能够选择成使扫描数据514被分析。
在一个或更多个示例中,可以分析扫描数据514以识别一个或更多个对象。在各种示例中,用户活动识别系统128可以能够执行成确定标识符,例如QR码或条形码中的至少一者是否存在于扫描数据514中。例如,用户活动识别系统128可以先前已经被训练或者包括特定的计算机可读指令以识别扫描数据514中的一种或更多种类型的标识符。另外,用户活动识别系统128可以实现一种或更多种图像处理技术,以识别包括在扫描数据514中的一个或更多个对象。
包括在扫描数据514中的一个或更多个对象可以由用户活动识别系统128相对于由数据库118存储的用户活动识别信息来分析。例如,数据库可以存储多个用户活动的信息,这些信息可以包括用于识别用户内容510内的用户活动的信息。另外,与用户活动有关的促销信息可以由数据库118存储。在图5的说明性示例中,数据库118可以存储第一用户活动信息520。第一用户活动信息520可以包括第一识别信息522。第一识别信息522可以包括可以由用户活动识别系统128用于识别第一用户活动的信息。在一个或更多个示例中,第一识别信息522可以指示可以对应于第一用户活动的一个或更多个对象。一个或更多个对象可以包括对应于第一用户活动的标识符。在第一用户活动正在访问位置的场景中,一个或更多个对象可以包括位置的放置在该位置处的至少一个标识符。在第一用户活动正在购买产品的情况下,一个或更多个对象可以包括产品的至少一个标识符。在各种示例中,一个或更多个对象可以包括供作为第一活动的部分购买的每个产品的标识符。在一个或更多个附加示例中,一个或更多个对象可以包括在位置发现的已经基于分析该位置的先前捕获的图像或先前捕获的视频中的至少一者而识别的对象。在一个或更多个说明性示例中,一个或更多个对象可以包括一个或更多个地标、位置外部的一个或更多个对象、位置内部的一个或更多个对象、一个或更多个地理特征、或者其一个或更多个组合。
第一用户活动信息520还可以包括第一促销信息524。第一促销信息524可以指示提供给客户端应用104的用户的促销的特征,所述促销与第一用户活动对应。在一个或更多个示例中,第一促销信息524可以指示对于客户端应用104的用户用于兑换促销的至少一部分的第一用户活动的阈值量。另外,第一促销信息524可以指示与获得第一用户活动的阈值量有关的一个或更多个奖励。一个或更多个奖励可以对应于供客户端应用104的用户购买的一个或更多个产品。在各种示例中,一个或更多个奖励可以对应于关于可由客户端应用104的用户购买的项的折扣。在其他示例中,一个或更多个奖励可以对应于客户端应用104的用户可用的一个或更多个免费赠送项。在一个或更多个说明性示例中,第一促销信息524可以指示与客户端应用104的用户可购买的产品有关的一个或更多个奖励,这些奖励与对应于第一用户活动的位置有关。
在一个或更多个示例中,第一促销信息524可以指示第一用户活动的多个阈值,这些阈值对应于第一用户活动的各个阈值水平的相应奖励或第一用户活动的各个阈值水平的相应兑换选项中的至少一者。为了说明,第一促销信息524可以指示第一用户活动的对应于与第一用户活动有关的促销的部分兑换的第一阈值水平,以及第一用户活动的对应于与第一用户活动有关的促销的完全兑换的第二阈值水平。在一个或更多个说明性示例中,第一促销信息524可以指示关于第一用户活动的第一阈值水平的第一奖励和关于第一用户活动的第二阈值水平的第二奖励。
数据库118还可以存储与第二用户活动对应的第二用户活动信息526。第二用户活动信息526可以包括第二识别信息528,第二识别信息528可以由用户活动识别系统128相对于用户内容来分析以识别第二用户活动。在各种示例中,第二识别信息528可以指示与第二用户活动对应的一个或更多个对象。另外,第二用户活动信息526可以包括第二促销信息530。第二促销信息530可以指示与第二用户活动有关的促销的一个或更多个特征,例如与关于第二用户活动的促销的至少部分兑换对应的第二用户活动的阈值量。此外,第二促销信息530可以指示与关于第二用户活动的促销对应的一个或更多个奖励。
在一个或更多个附加示例中,数据库118可以存储与第N用户活动对应的高达第N用户活动信息532。第N用户活动信息532可以包括第N识别信息534,第N识别信息534可以由用户活动识别系统128相对于用户内容来分析以识别第N用户活动。在一个或更多个示例中,第N识别信息534可以指示与第N用户活动对应的一个或更多个对象。此外,第N用户活动信息532可以包括第N促销信息536。第N促销信息536可以指示与第N用户活动有关的促销的一个或更多个特征,例如与关于第N用户活动的促销的至少部分兑换对应的第N用户活动的阈值量。此外,第N促销信息536可以指示与关于第N用户活动的促销对应的一个或更多个奖励。
在一个或更多个说明性示例中,用户活动识别系统128可以相对于第一识别信息522、第二识别信息528或第N识别信息534中的至少一者来分析扫描数据514。在一个或更多个示例中,用户活动识别系统128可以相对于包括在第一识别信息522中的一个或更多个对象来分析包括在扫描数据514中的一个或更多个对象,以确定包括在扫描数据514中的一个或更多个对象与包括在第一识别信息522中的一个或更多个对象之间的第一相似性度量。在各种示例中,用户活动识别系统128可以相对于包括在第二识别信息528中的一个或更多个对象来分析包括在扫描数据514中的一个或更多个对象,以确定包括在扫描数据514中的一个或更多个对象与包括在第二识别信息528中的一个或更多个对象之间的第二相似性度量。此外,用户活动识别系统128可以相对于包括在第N识别信息534中的一个或更多个对象来分析包括在扫描数据514中的一个或更多个对象,以确定包括在扫描数据中的一个或更多个对象与包括在第N识别信息534中的一个或更多个对象之间的第三相似性度量。
用户活动识别系统128可以相对于阈值相似性度量来分析第一相似性度量、第二相似性度量和第三相似性度量。用户活动识别系统128可以基于识别至少是阈值相似性度量的相似性度量来确定扫描数据514对应于用户活动。在一个或更多个示例中,用户活动识别系统128可以实现用于确定与扫描数据514对应的用户活动的一个或更多个规则。在一个或更多个说明性示例中,用户活动识别系统128可以实现以下进程:相对于包括在相应用户活动识别信息520、526、532中的一个或更多个对象来分析包括在扫描数据514中的一个或更多个对象,直到识别至少是阈值相似性度量的相似性度量。在各种示例中,用户活动识别系统128可以确定第一相似性量度至少是阈值相似性度量,然后确定扫描数据514对应于第一用户活动。
在确定与扫描数据514对应的用户活动之后,用户活动跟踪和兑换系统130可以确定相对于用户502适用的促销。例如,用户活动识别系统128可以确定对应于第一用户活动的促销适用于用户502。例如,用户活动识别系统128可以确定,扫描数据514对应于与第一用户活动信息520有关的第一用户活动。在这些情况下,用户活动跟踪和兑换系统130可以分析用户502的用户简档数据538,以确定用户502是否参与与第一用户活动有关的促销。在一个或更多个示例中,用户简档数据538可以包括指示用户502正在参与促销的指示符或标识符。在用户502没有参与与第一用户活动有关的促销的情况下,用户跟踪和兑换系统130可以为用户502提供参与促销的提议。在用户502正在参与与第一用户活动有关的促销的情况下,用户简档数据538可以包括用户活动跟踪信息540,用户活动跟踪信息540指示由用户502执行的与促销有关的第一用户活动的量。基于第一用户活动的量,用户活动跟踪和兑换系统130可以根据第一促销信息524为用户502确定与促销有关的一个或更多个兑换选项。在各种示例中,用户活动跟踪和兑换系统130可以确定用户502有资格获得与第一用户活动有关的促销的至少部分兑换。
用户活动跟踪和兑换系统130还可以更新用户活动跟踪信息540。为了说明,在扫描数据514对应于第一用户活动的情况下,用户活动跟踪和兑换系统130可以增加由用户活动跟踪信息540指示的第一用户活动的量,以产生第一用户活动的聚合量。在促销至少被部分兑换的情况下,用户活动跟踪和兑换系统130可以相对于被兑换的促销来减少用户活动的量。
用户活动跟踪和兑换系统130可以生成用户活动和兑换AR内容项542,用户活动和兑换AR内容项542可以执行成显示与对应于用户内容510的促销有关的信息。例如,用户活动和兑换AR内容项542可以能够执行成显示图形内容,该图形内容包括指示与促销有关的用户活动的量的图像内容、视频内容或动画内容中的至少一者。在各种示例中,用户活动和兑换AR内容项542可以能够执行成显示指示与促销有关的一个或更多个兑换选项的图形内容。用户活动和兑换AR内容项542还可以使经由客户端装置102的一个或更多个输出装置产生音频。在一个或更多个示例中,用户活动跟踪和兑换系统130可以基于从与促销有关的用户活动信息和与促销有关的对应于用户502的用户简档数据538获得的信息,生成用户活动和兑换AR内容项542。在促销与第一用户活动有关的一个或更多个说明性示例中,用户活动跟踪和兑换系统130可以基于包括在用户502的用户活动跟踪信息540中的关于第一促销的并且与指示第一促销的兑换信息的第一促销信息524有关的信息,生成用户活动和兑换AR内容项542。
在一个或更多个示例中,在接收到用户活动和兑换AR内容项542之后,客户端应用104可以生成第三用户界面544。第三用户界面544可以包括用户内容510以及用户活动和兑换内容546。用户活动和兑换内容546可以作为执行用户活动和兑换AR内容项542的结果而显示。例如,用户活动和兑换AR内容项542可以能够执行成使得用户活动和兑换内容546被显示在第三用户界面544内。在各种示例中,用户活动和兑换内容546可以指示由用户502在促销方面的用户活动的量。在一个或更多个附加示例中,用户活动和兑换内容546可以为用户502指示关于促销的一个或更多个兑换选项。在用户内容510对应于第一用户活动的一个或更多个场景中,用户活动和兑换内容546可以包括由用户502执行的第一用户活动的量。另外,用户活动和兑换内容546可以包括关于与第一用户活动有关的促销的一个或更多个兑换选项。
在一个或更多个说明性示例中,可以分析用户内容510以确定由用户502执行的用户活动对应于对冰淇淋店的访问。为了说明,用户内容510可以包括被定位于冰淇淋店中的可以由用户502经由客户端应用104扫描的QR码或条形码中的至少一者。在一个或更多个附加示例中,用户内容510可以包括来自冰淇淋店内部的场景(scene),并且用户活动识别系统128可以通过相对于冰淇淋店内部的先前捕获的图像内容或视频内容分析用户内容510来确定用户内容510对应于冰淇淋店。
继续上面冰淇淋店的示例,用户活动和兑换内容546可以指示用户502访问冰淇淋店的次数。另外,用户活动和兑换内容546可以指示与关于冰淇淋店的一个或更多个促销的一个或更多个兑换选项对应的访问冰淇淋店的次数。例如,用户活动和兑换内容546可以包括第一兑换选项和第二兑换选项,第一兑换选项指示在访问冰淇淋店5次之后,可以将50%的折扣应用于一个或更多个冰淇淋产品的购买,第二兑换选项指示在访问冰淇淋10次之后,可以将价值10美元或以下的免费赠送冰淇淋产品提供给用户502。基于用户502访问冰淇淋店的次数,用户活动和兑换内容546可以指示用户502可用第一兑换选项或第二兑换选项中的至少一者。响应于对包括在用户活动和兑换内容546中的兑换选项的选择,可以将兑换码提供给客户端装置102或提供给冰淇淋店的计算装置,以将第一兑换选项或第二兑换选项应用于用户502在冰淇淋店的购买。此外,对兑换选项的选择可以使得用户活动跟踪和兑换系统130减少与促销有关的用户活动的量。在一个或更多个说明性示例中,用户活动跟踪信息540可以指示用户502已经对冰淇淋店执行了11次访问。在这些情况下,对第二兑换选项的选择可以导致用户活动跟踪和兑换系统130将存储在用户活动跟踪信息540中的与冰淇淋店促销有关的用户活动的量从对冰淇淋店的11次访问减少至对冰淇淋店的一次访问。
图6和图7示出了生成和应用增强现实内容项的过程的流程图,该增强现实内容项指示关于促销的用户活动。这些处理可以体现为由一个或更多个处理器执行的计算机可读指令,使得这些处理的操作可以部分地或全部地由客户端应用104或服务器系统108中的至少一者的功能组件执行。因此,在一些情况下,下面参考其通过示例的方式来描述处理。然而,在其他实现方式中,关于图6和图7描述的处理的至少一些操作可以部署在各种其他硬件配置上。因此,关于图6和图7描述的处理不旨在限于服务器系统108或客户端装置102,并且可以通过一个或更多个附加组件整体或部分地实现。尽管所描述的流程图可以将操作示出为顺序处理,但是操作中的许多操作可以并行或同时执行。另外,可以重新布置操作的顺序。当其操作完成时,处理终止。处理可以对应于方法、过程、算法等。方法的操作可以全部或部分地执行,可以与其他方法中的一些或所有操作结合执行,并且可以通过任何数目的不同系统(例如,本文中描述的系统)或者其任何部分(例如,包括在任何系统中的处理器)执行。
图6是示出了根据一个或更多个示例实现方式的用于生成增强现实内容项的过程600的示例操作的流程图,该增强现实内容项指示客户端应用的用户的关于促销的活动。在操作602处,过程600包括从客户端装置接收用户内容。用户内容可以经由客户端装置的显示装置显示在客户端应用的用户界面中。另外,用户内容可以包括图像内容、视频内容、音频内容或文本内容中的至少一者。在各种示例中,用户内容可以由客户端装置的执行客户端应用的实例的一个或更多个输入装置捕获。在一个或更多个说明性示例中,用户内容可以包括由客户端装置的至少一个摄像装置捕获的实时视图。用户内容可以相对于产生、维护和管理客户端应用的服务提供者与客户端装置的用户的账户有关地被捕获。
另外,在操作604处,过程600可以包括分析用户内容以确定与用户内容对应的用户活动。例如,可以分析用户内容以识别包括在用户内容中的对应于用户活动的一个或更多个标识符。在一个或更多个示例中,用户内容可以包括对应于QR码或条形码中的至少一者的码信息,QR码或条形码与用户活动对应。在这些场景中,QR码或条形码可以由客户端应用的用户扫描。然后,QR码或条形码可以相对于数据结构被分析,数据结构包括对应于相应用户活动的多个QR码或条形码。响应于确定所扫描的QR码或条形码与存储在数据结构中的QR码或条形码之间的至少阈值相似性度量,可以使用户活动与用户内容相关联。在一个或更多个其他示例中,用户活动可以包括从商家购买产品,并且包括在用户内容中的QR码或条形码可以指示用户购买的产品。
在各种示例中,用户活动也可以通过分析包括在用户内容中的对象、用户内容的轮廓、用户内容的形状、用户内容的颜色、包括在用户内容中的文本、或其一个或更多个组合来确定。为了说明,用户内容可以包括来自位置的场景,并且该场景可以使用一种或更多种图像处理技术来分析,以相对于存储在与相应位置对应的一个或更多个数据结构中的场景来确定相似性度量。在一个或更多个示例中,当包括在用户内容中的场景与先前捕获的场景之间的相似性度量至少是阈值相似性度量时,可以识别用户活动。在这些情况下,用户活动可以对应于对位置的访问。
过程600还可以包括,在操作606处,确定用户活动对应于提供给客户端应用的用户的促销。在一个或更多个示例中,可以根据一个或更多个资格标准来确定用户在促销方面的资格。在一个或更多个附加示例中,可以相对于各自对应于至少一个促销的多个附加标识符来分析包括在用户内容中的标识符。也就是说,提供给客户端应用的用户的每个促销可以与一个或更多个用户活动相关联,并且可以相对于与提供给客户端应用的用户的促销相关联的用户活动来分析与用户内容有关的用户活动。
在608处,过程600可以包括将客户端应用的用户的关于促销的简档数据从用户活动的第一量修改成用户活动的第二量。在各种示例中,可以相对于与客户端应用有关的用户的账户来跟踪关于促销的用户活动的量。响应于确定用户已经执行了用户活动,用户的账户可以被更新成指示由用户执行的用户活动的量已经增加。在一个或更多个示例中,由用户执行的用户活动的量可以针对与促销有关的一个或更多个兑换选项指示用户的资格。例如,一个或更多个兑换选项可以响应于客户端应用的用户的用户活动的阈值量而被触发。在这些情况下,可以分析用户的简档数据,以确定用户在与用户活动有关的一个或更多个促销方面的资格。
此外,过程600可以包括,在操作610处,生成可以执行成显示关于促销的用户活动的第二量的指示符的增强现实内容项,以及,在操作612处,过程可以包括将增强现实内容项发送至客户端装置。在一个或更多个示例中,增强现实内容项可以能够执行成使图像内容、视频内容、文本内容或音频内容中的至少一者经由客户端装置的一个或更多个输出装置被输出。在各种示例中,增强现实内容项可以能够执行成显示包括一个或更多个图形的内容,这些图形指示由客户端应用的用户执行的关于促销的用户活动的当前量。在各种示例中,图形可以是静态的,并且在附加示例中,图形可以是动态的,例如一个或更多个动画。在一个或更多个说明性示例中,增强现实内容项可以能够执行成在包括用户内容的用户界面内显示一个或更多个图形,这些图形与由客户端应用的用户执行的与促销有关的用户活动的量有关。例如,与由客户端应用的用户执行的关于促销的用户活动的量有关的一个或更多个图形可以被显示为用户内容的一个或更多个叠加。
在一个或更多个实现方式中,增强现实内容项也可以能够执行成显示指示与促销有关的一个或更多个兑换选项的内容。为了说明,增强现实内容项可以能够执行成显示与用户活动的一个或更多个阈值量有关的用户活动的第二量,该阈值量对应于与促销有关的相应兑换选项。在一个或更多个说明性示例中,一个或更多个兑换选项可以与用户内容例如叠加用户内容的图形内容一起显示。在一个或更多个示例中,增强现实内容项可以能够执行成显示用于兑换促销的至少一部分的用户活动的量以及与对应兑换选项相关联的奖励。在各种示例中,增强现实内容项可以能够执行成显示一个或更多个用户界面元素,这些用户界面元素可选择成兑换与促销有关的用户活动的至少一部分。一个或更多个用户界面元素可以能够选择成生成适用于针对与促销有关的一个或更多个项提供折扣的码。在一个或更多个附加示例中,一个或更多个用户界面元素可以能够选择成发起交易,以获得与促销有关的一个或更多个项。
图7是示出了根据一个或更多个示例实现方式的用于执行增强现实内容的过程700的示例操作的流程图,该增强现实内容指示客户端应用的用户的关于促销的活动。过程700可以包括,在操作702处,使用客户端应用的用户的客户端装置的一个或更多个输入装置来捕获用户内容。在一个或更多个示例中,可以使用客户端装置的一个或更多个摄像装置或者一个或更多个麦克风中的至少一者来捕获用户内容。在各种示例中,用户内容可以包括来自客户端装置的至少一个摄像装置的实时视图。
过程700还可以包括,在操作704处,将用户内容的至少一部分发送至服务器系统。在一个或更多个示例中,客户端应用可以显示用户界面以扫描用户内容的一部分。在这些场景中,客户端应用可以捕获用户内容的一部分作为扫描数据,并且将扫描数据发送至服务器系统。服务器系统可以是生产、维护和管理客户端应用的服务提供者的部分。在各种示例中,服务器系统可以分析用户内容以识别与用户内容有关的一个或更多个用户活动,以及以确定适用于一个或更多个用户活动的一个或更多个促销。
在操作706处,过程700可以包括使用户界面被显示,该用户界面包括用户内容和可选择成执行增强现实内容的多个用户界面元素。为了说明,用户界面元素可以能够单独选择成执行增强现实内容项,其中每个增强现实内容具有不同的功能。在各种示例中,用户界面元素可以被布置在轮播中,轮播使得用户能够滚动遍历与增强现实内容有关的一组用户界面元素,并且在给定时间显示用户界面元素的子集。另外,在708处,过程700可以包括确定对多个用户界面元素中的用户界面元素的选择。用户界面元素可以对应于与用户正在参与的一个或更多个促销有关的增强现实内容。对用户界面元素的选择可以由客户端装置的一个或更多个输入装置(例如,触摸屏或麦克风)检测。
此外,在操作710处,过程700可以包括执行与用户界面元素对应的增强现实内容项,以使指示与促销有关的用户活动的量的内容被显示。客户端应用可以从服务器系统获得信息,该信息指示与对应于促销的用户内容有关的用户活动的量。客户端应用还可以从服务器系统获得信息,该信息基于由客户端应用的用户执行的用户活动的量指示与促销有关的一个或更多个兑换选项。增强现实内容可以能够执行成显示图像内容、视频内容或动画内容中的至少一者,图像内容、视频内容或动画内容指示由用户执行的关于促销的用户活动的量。增强现实内容也可以能够执行成显示指示适用于客户端应用的用户的关于促销的一个或更多个兑换选项的附加图像内容或附加视频内容。由增强现实内容生成的内容可以被显示在包括用户内容的其他用户界面中。
在各种示例中,客户端应用可以确定对与兑换选项对应的附加用户界面元素的选择。在一个或更多个示例中,客户端装置可以响应于对附加用户界面元素的选择而接收关于兑换选项的兑换码。在一个或更多个附加示例中,兑换码可以关于与购买与促销有关的一个或更多个产品有关的金融交易适用。兑换码可以被提供给提供一个或更多个产品以供购买的商家。例如,兑换码可以被显示在用户界面中并由商家扫描,或者兑换码可以被电子地传送至商家的计算装置。在其他示例中,可以使用客户端应用的电子商务功能来执行使用兑换码对与促销有关的产品的购买。在这些场景中,客户端装置可以生成金融交易信息,该金融交易信息适用于使用兑换码对与促销有关的产品的一次或更多次购买。
图8是根据一个或更多个示例实现方式的用户界面800的图示,该用户界面800包括用于扫描用户内容的至少一部分以识别与用户内容有关的用户活动的用户界面元素。可以经由客户端装置102的显示装置显示用户界面800。另外,用户界面800可以由客户端应用(例如,客户端应用104)显示,客户端应用包括消息收发功能或社交联网功能中的至少一者。在一个或更多个示例中,用户界面800可以包括在客户端装置102的至少一个摄像装置802的视场内捕获的用户内容。
在各种示例中,用户界面800可以包括可选择成扫描包括在用户界面800中的用户内容的一部分的用户界面元素804。例如,对用户界面元素804的选择可以引起在用户界面800内显示附加用户界面元素806,附加用户界面元素806指示要被扫描的区域808。在一个或更多个示例中,可以通过将附加用户界面元素806移动至用户界面800的不同部分来修改区域808。用户界面800还可以包括文本内容810,文本内容810包括旨在执行关于区域808的扫描操作的指令。
在一个或更多个实现方式中,可以扫描区域808以识别与提供给客户端应用104的用户的促销有关的用户活动的一个或更多个标识符。在图8的说明性示例中,区域808可以包括第一标识符812和第二标识符814。第一标识符812可以指示某个位置。例如,第一标识符812可以包括指示在用户界面800内示出的位置的QR码。在这些场景中,第一标识符812可以指示与客户端应用104的用户访问该位置对应的用户活动。另外,第二标识符814可以包括条形码。条形码可以对应于与提供给客户端应用104的用户的促销有关的产品。在这些情况下,第二标识符814可以指示与客户端应用104的用户购买与第二标识符814有关的一个或更多个产品对应的用户活动。在用户活动指向对一个或更多个产品的购买的各种示例中,对一个或更多个产品的购买可以由提供一个或更多个产品以供购买的商家验证。
图9是根据一个或更多个示例实现方式的用户界面900的图示,该用户界面900包括指示客户端应用的用户的关于促销的活动的增强现实内容项。可以经由客户端装置102的显示装置显示用户界面900。另外,用户界面900可以由客户端应用(例如,客户端应用104)显示,客户端应用包括消息收发功能或社交联网功能中的至少一者。在一个或更多个示例中,用户界面900可以在扫描用户界面900中示出的用户内容的一部分(例如,关于图8描述的扫描操作)之后显示。
用户界面900可以包括用户界面元素902,用户界面元素902可选择成执行一个或更多个增强现实内容项,这些增强现实内容项产生指示与提供给客户端应用104的用户的促销有关的用户活动的量的视频内容、图像内容或音频内容中的至少一者。在图9的说明性示例中,对用户界面元素902的选择可以使内容904被显示。内容904可以指示访问图9中示出的位置的次数。在一个或更多个附加示例中,内容904可以指示由客户端应用104的用户购买的、用户界面900中示出的产品的数目。在各种示例中,内容904可以包括穿孔卡,穿孔卡指示相对于用户活动的阈值量的用户活动的量。尽管在图9的说明性示例中没有示出,但是用户界面900还可以包括一个或更多个用户界面元素,这些用户界面元素可选择成兑换与用户界面900中示出的位置或产品中的至少一者有关的促销的至少一部分。
图10是示出了根据一些示例实现方式的能够从机器可读介质(例如,机器可读存储介质)读取指令并且执行本文中讨论的方法中的任何一种或更多种方法的机器1000的组件的框图。具体地,图10示出了呈计算机系统的示例形式的机器1000的图形表示,在机器1000内可以执行用于使机器1000执行本文中讨论的方法中的任何一种或更多种方法的指令1002(例如,软件、程序、应用、小程序、应用(app)或其他可执行代码)。因此,可以使用指令1002来实现本文中描述的模块或组件。指令1002将通用的未编程的机器1000转换成被编程为以所描述的方式执行所描述和示出的功能的特定机器1000。在替选实现方式中,机器1000作为独立装置操作或可以耦接(例如,联网)至其他机器。在联网部署中,机器1000可以在服务器-客户端网络环境中以服务器机器或客户端机器的身份操作,或者在对等(或分布式)联网环境中作为对等机器操作。机器1000可以包括但不限于:服务器计算机、客户端计算机、个人计算机(PC)、平板计算机、膝上型计算机、上网本、机顶盒(STB)、个人数字助理(PDA)、娱乐媒体系统、蜂窝电话、智能电话、移动装置、可穿戴装置(例如,智能手表)、智能家居装置(例如,智能电器)、其他智能装置、web家用电器、网络路由器、网络交换机、网络桥接器或者能够顺序地或以其他方式执行指定要由机器1000采取的动作的指令1002的任何机器。此外,虽然仅示出了单个机器1000,但是术语“机器”还应被认为包括单独地或联合地执行指令1002以执行本文中讨论的方法中的任何一种或更多种方法的机器的集合。
机器1000可以包括处理器1004、存储器/存储装置1006和I/O组件1008,所述处理器1004、存储器/存储装置1006和I/O组件1008可以被配置成例如经由总线1010彼此通信。在示例实现方式中,处理器1004(例如,中央处理单元(CPU)、简化指令集计算(RISC)处理器、复杂指令集计算(CISC)处理器、图形处理单元(GPU)、数字信号处理器(DSP)、专用集成电路(ASIC)、射频集成电路(RFIC)、另一处理器或其任何合适的组合)可以包括例如可以执行指令1002的处理器1012和处理器1014。术语“处理器”旨在包括多核处理器1004,该多核处理器1004可以包括可以同时执行指令1002的两个或更多个独立的处理器(有时被称为“核”)。尽管图10示出了多个处理器1004,但是机器1000可以包括具有单个核的单个处理器1012、具有多个核的单个处理器1012(例如,多核处理器)、具有单个核的多个处理器1012、1014、具有多个核的多个处理器1012、1014、或其任何组合。
存储器/存储装置1006可以包括诸如主存储器1016或其他存储器存储装置的存储器以及存储单元1018,处理器1004能够例如经由总线1010访问存储器和存储单元1018二者。存储单元1018和主存储器1016存储体现本文中描述的方法或功能中的任一种或更多种方法或功能的指令1002。指令1002还可以在其被机器1000执行期间完全地或部分地驻留在主存储器1016内、存储单元1018内、处理器1004中的至少一个内(例如,处理器的高速缓冲存储器内)或它们的任何合适组合内。因此,主存储器1016、存储单元1018以及处理器1004的存储器是机器可读介质的示例。
I/O组件1008可以包括用于接收输入、提供输出、产生输出、传送信息、交换信息、捕获测量结果等的各种组件。包括在特定机器1000中的具体I/O组件1008将取决于机器的类型。例如,诸如移动电话的便携式机器将很可能包括触摸输入装置或其他这样的输入机构,而无头服务器(headless server)机器将很可能不包括这样的触摸输入装置。将理解的是,I/O组件1008可以包括图10中未示出的许多其他组件。I/O组件1008仅为了简化以下讨论而根据功能被分组,并且该分组决不是限制性的。在各种示例实现方式中,I/O组件1008可以包括用户输出组件1020和用户输入组件1022。用户输出组件1020可以包括视觉组件(例如,诸如等离子体显示面板(PDP)的显示器、发光二极管(LED)显示器、液晶显示器(LCD)、投影仪或阴极射线管(CRT))、声学组件(例如,扬声器)、触觉组件(例如,振动马达、阻力机构)、其他信号发生器等。用户输入组件1022可以包括字母数字输入组件(例如,键盘、被配置成接收字母数字输入的触摸屏、光电键盘或其他字母数字输入组件)、基于点的输入组件(例如,鼠标、触摸板、轨迹球、操纵杆、运动传感器或其他定点仪器)、触觉输入组件(例如,物理按钮、提供触摸或触摸手势的位置或力的触摸屏、或其他触觉输入组件)、音频输入组件(例如,麦克风)等。
在其他示例实现方式中,I/O组件1008可以包括生物计量组件1024、运动组件1026、环境组件1028、或定位组件1030以及各种其他组件。例如,生物计量组件1024可以包括用于检测表达(例如,手表达、脸部表达、声音表达、身体姿势或眼睛跟踪)、测量生物信号(例如,血压、心率、体温、出汗或脑电波)、识别人(例如,语音识别、视网膜识别、脸部识别、指纹识别或基于脑电图的识别)等的组件。运动组件1026可以包括:加速度传感器组件(例如,加速度计)、重力传感器组件、旋转传感器组件(例如,陀螺仪)等。环境组件1028可以包括例如照明传感器组件(例如,光度计)、温度传感器组件(例如,检测周围温度的一个或更多个温度计)、湿度传感器组件、压力传感器组件(例如,气压计)、听觉传感器组件(例如,检测背景噪声的一个或更多个麦克风)、接近传感器组件(例如,检测附近对象的红外传感器)、气体传感器(例如,为了安全而检测危险气体的浓度或者测量大气中的污染物的气体检测传感器)或者可以提供与周围物理环境对应的指示、测量或信号的其他组件。定位组件1030可以包括位置传感器组件(例如,GPS接收器组件)、海拔高度传感器组件(例如,从其中检测可以得到海拔高度的气压的高度计或气压计)、取向传感器组件(例如,磁力计)等。
可以使用各种各样的技术来实现通信。I/O组件1008可以包括通信组件1032,通信组件1032可操作成将机器1000耦接至网络1034或装置1036。例如,通信组件1032可以包括网络接口组件或与网络1034对接的其他合适的装置。在其他示例中,通信组件1032可以包括有线通信组件、无线通信组件、蜂窝通信组件、近场通信(NFC)组件、
Figure BDA0004146114530000402
组件(例如,
Figure BDA0004146114530000403
低能耗)、/>
Figure BDA0004146114530000404
组件和经由其他形式提供通信的其他通信组件。装置1036可以是另一机器1000或各种外围装置中的任何外围装置(例如,经由USB耦接的外围装置)。
此外,通信组件1032可以检测标识符或者包括可操作成检测标识符的组件。例如,通信组件1032可以包括射频识别(RFID)标签阅读器组件、NFC智能标签检测组件、光学阅读器组件(例如,用于检测诸如通用产品代码(UPC)条形码的一维条形码、诸如快速反应(QR)码的多维条形码、Aztec码、数据矩阵、数据符号(Dataglyph)、最大码(MaxiCode)、PDF417、超码(Ultra Code)、UCC RSS-2D条形码和其他光学码的光学传感器)或声学检测组件(例如,用于识别标记的音频信号的麦克风)。另外,可以经由通信组件1032得出各种信息,如经由因特网协议(IP)地理位置的位置、经由
Figure BDA0004146114530000401
信号三角测量的位置、经由检测可以指示特定位置的NFC信标信号的位置等。
图11是示出了可以与本文描述的各种硬件架构结合使用的包括示例软件架构1102的系统1100的框图。图11是软件架构的非限制性示例,并且应当理解,可以实现许多其他架构以促进本文中描述的功能。软件架构1102可以在诸如图10的机器1000的硬件上执行,机器1000包括处理器1004、存储器/存储装置1006和输入/输出(I/O)组件1008等。代表性硬件层1104被示出并且可以表示例如图10的机器1000。代表性硬件层1104包括具有相关联的可执行指令1108的处理单元1106。可执行指令1108表示软件架构1102的可执行指令,包括本文中描述的方法、组件等的实现方式。硬件层1104还包括也具有可执行指令1108的存储器或存储模块存储器/存储装置1110中的至少一者。硬件层1104还可以包括其他硬件1112。
在图11的示例架构中,软件架构1102可以被概念化为一堆层,其中每个层提供特定功能。例如,软件架构1102可以包括诸如操作系统1114、库1116、框架/中间件1118、应用1120和呈现层1122的层。在操作上,层内的应用1120和/或其他组件可以通过软件堆栈激活API调用1124并且响应于API调用1124而接收消息1126。所示出的层在本质上是代表性的,并且并非所有软件架构都具有所有的层。例如,一些移动操作系统或专用操作系统可能不提供框架/中间件1118,而其他操作系统可能提供这样的层。其他软件架构可以包括另外的或不同的层。
操作系统1114可以管理硬件资源并且提供公共服务。操作系统1114可以包括例如核1128、服务1130和驱动器1132。核1128可以用作硬件与其他软件层之间的抽象层。例如,核1128可以负责存储器管理、处理器管理(例如,调度)、组件管理、联网、安全设置等。服务1130可以针对其他软件层提供其他公共服务。驱动器1132负责控制底层硬件或与底层硬件对接。例如,根据硬件配置,驱动器1132包括显示器驱动器、摄像装置驱动器、
Figure BDA0004146114530000411
驱动器、闪速存储器驱动器、串行通信驱动器(例如,通用串行总线(USB)驱动器)、/>
Figure BDA0004146114530000412
驱动器、音频驱动器、电源管理驱动器等。
库1116提供了由应用1120、其他组件或层中的至少一者使用的公共基础设施。库1116提供如下功能,该功能允许其他软件组件以比与底层操作系统1114的功能(例如,核1128、服务1130或驱动器1132)直接对接的方式更容易的方式来执行任务。库1116可以包括系统库1134(例如,C标准库),该系统库1134可以提供诸如存储器分配功能、字符串操作功能、数学函数等的功能。另外,库1116可以包括API库1136,例如媒体库(例如,支持诸如MPEG4、H.264、MP3、AAC、AMR、JPG、PNG的各种媒体格式的呈现和操纵的库)、图形库(例如,可以用于在显示器上以图形内容呈现二维和三维的OpenGL框架)、数据库库(例如,可以提供各种关系数据库功能的SQLite)、web库(例如,可以提供web浏览功能的WebKit)等。库1116还可以包括各种其他库1138,以向应用1120和其他软件组件/模块提供许多其他API。
框架/中间件1118(有时也被称为中间件)提供可以由应用1120或其他软件组件/模块使用的较高级别的公共基础设施。例如,框架/中间件1118可以提供各种图形用户接口功能、高级资源管理、高级位置服务等。框架/中间件1118可以提供可以由应用1120和/或其他软件组件/模块利用的广泛的其他API,其中一些API可以专用于特定的操作系统1114或平台。
应用1120包括内置应用1140和/或第三方应用1142。代表性内置应用1140的示例可以包括但不限于:联系人应用、浏览器应用、图书阅读器应用、位置应用、媒体应用、消息收发应用或游戏应用。第三方应用1142可以包括由除特定平台的供应商之外的实体使用ANDROIDTM或IOSTM软件开发工具包(SDK)开发的应用,并且可以是在诸如IOSTM、ANDROIDTM
Figure BDA0004146114530000421
电话的移动操作系统或其他移动操作系统上运行的移动软件。第三方应用1142可以调用由移动操作系统(例如,操作系统1114)提供的API调用1124,以有利于本文中描述的功能。
应用1120可以使用内置操作系统功能(例如,核1128、服务1130驱动器1132)、库1116以及框架/中间件1118来创建UI以与系统的用户交互。替选地或附加地,在一些系统中,可以通过表示层例如表示层1122发生与用户的交互。在这些系统中,应用/组件“逻辑”可以与应用/组件的同用户交互的各方面分开。
术语表:
该上下文中的“载波信号”是指能够存储、编码或携载由机器1000执行的暂态或非暂态指令1002的任何无形介质并且包括数字或模拟通信信号或其他无形介质以便于这些指令1002的通信。可以使用暂态或非暂态传输介质经由网络接口装置并且使用多个公知的传输协议中的任何一个来通过网络110、1034发送或接收指令1002。
该上下文中的“客户端装置”是指与通信网络110、1034对接以从一个或更多个服务器系统或其他客户端装置102获取资源的任何机器1000。客户端装置102可以是但不限于移动电话、桌上型计算机、膝上型计算机、PDA、智能电话、平板计算机、超级本、上网本、膝上型计算机、多处理器系统、基于微处理器或可编程消费电子产品、游戏控制台、机顶盒或用户可以用于访问网络110、1034的任何其他通信装置。
该上下文中的“通信网络”是指网络110、1034的一个或更多个部分,网络110、1034可以是自组织网络、内联网、外联网、虚拟专用网络(VPN)、局域网(LAN)、无线LAN(WLAN)、广域网(WAN)、无线WAN(WWAN)、城域网(MAN)、因特网、因特网的一部分、公共交换电话网(PSTN)的一部分、普通老式电话服务(POTS)网络、蜂窝电话网络、无线网络、
Figure BDA0004146114530000431
网络、其他类型的网络或两个或更多个这样的网络的组合。例如,网络110、1034或网络的一部分可以包括无线网络或蜂窝网络,并且耦接可以是码分多址(CDMA)连接、全球移动通信系统(GSM)连接或其他类型的蜂窝或无线耦接。在该示例中,耦接可以实现各种类型的数据传输技术中的任何一种,例如单载波无线电传输技术(1xRTT)、演进数据优化(EVDO)技术、通用分组无线业务(GPRS)技术、增强型数据速率GSM演进(EDGE)技术、包括3G的第三代合作伙伴计划(3GPP)、第四代无线(4G)网络、通用移动通信系统(UMTS)、高速分组接入(HSPA)、全球微波接入互操作性(WiMAX)、长期演进(LTE)标准、由各种标准设置组织定义的其他标准、其他远程协议或其他数据传输技术。
该上下文中的“短暂的消息”是指可以在时间有限的持续时间内访问的消息。短消息可以是文本、图像、视频等。短消息的访问时间可以由消息发送方设置。替选地,访问时间可以是默认设置或者由接收者指定的设置。无论设置技术如何,消息都是暂时的。
该上下文中的“机器可读介质”是指能够临时或永久地存储指令1002和数据的组件、装置或其他有形介质,并且可以包括但不限于随机存取存储器(RAM)、只读存储器(ROM)、缓冲存储器、闪速存储器、光学介质、磁介质、高速缓冲存储器、其他类型的存储装置(例如,可擦除可编程只读存储器(EEPROM))和/或其任何合适的组合。术语“机器可读介质”应当被认为包括能够存储指令1002的单个介质或多个介质(例如,集中式或分布式数据库或者相关联的高速缓冲存储器和服务器)。术语“机器可读介质”还应被认为包括能够存储由机器1000执行的指令1002(例如,代码)的任何介质或多个介质的组合,使得指令1002在由机器1000的一个或更多个处理器1004执行时使机器1000执行本文中描述的方法中的任何一种或更多种方法。相应地,“机器可读介质”是指单个存储设备或装置,以及包括多个存储设备或装置的“基于云”的存储系统或存储网络。术语“机器可读介质”不包括信号本身。
该上下文中的“组件”指代具有由功能或子例程调用、分支点、API或者对特定处理或控制功能提供分区或模块化的其他技术定义的边界的装置、物理实体或逻辑。组件可以经由它们的接口与其他组件组合以执行机器处理。组件可以是被设计用于与其他组件一起使用的封装功能硬件单元,以及通常执行相关功能的特定功能的程序的一部分。组件可以构成软件组件(例如,实施在机器可读介质上的代码)或硬件组件。“硬件组件”是能够执行某些操作的有形单元,并且可以以某种物理方式来配置或布置。在各种示例实现方式中,一个或更多个计算机系统(例如,独立计算机系统、客户端计算机系统或服务器计算机系统)或者计算机系统的一个或更多个硬件组件(例如,处理器或处理器组)可以通过软件(例如,应用或应用部分)被配置为进行操作以执行如本文中描述的某些操作的硬件组件。
也可以机械地、电子地或以其任何合适的组合来实现硬件组件。例如,硬件组件可以包括被永久地配置成执行某些操作的专用电路系统或逻辑。硬件组件可以是专用处理器,例如现场可编程门阵列(FPGA)或ASIC。硬件组件还可以包括通过软件被临时配置成执行某些操作的可编程逻辑或电路系统。例如,硬件组件可以包括由通用处理器1004或其他可编程处理器执行的软件。一旦通过这样的软件被配置,则硬件组件成为特定的机器(或机器1000的特定组件),该特定的机器被唯一地定制成执行配置的功能并且不再是通用处理器1004。将理解的是,可以出于成本和时间考虑来推动在专用且永久配置的电路系统中或在临时配置(例如,通过软件配置)的电路系统中机械地实现硬件组件的决策。相应地,短语“硬件组件”(或者“硬件实现的组件”)应当被理解成包含有形实体,即为被物理构造、永久配置(例如,硬连线)或临时配置(例如,编程)成以某种方式操作或者执行本文中描述的某些操作的实体。考虑到硬件组件被临时配置(例如,被编程)的实现方式,无需在任一时刻对每一个硬件组件进行配置或实例化。例如,在硬件组件包括通过软件配置而成为专用处理器的通用处理器1004的情况下,通用处理器1004可以在不同时间处被配置为分别不同的专用处理器(例如,包括不同的硬件组件)。软件相应地配置特定处理器1012、1014或处理器1004以例如在一个时刻处构成特定硬件组件并且在不同的时刻处构成不同的硬件组件。
硬件组件可以向其他硬件组件提供信息以及从其他硬件组件接收信息。因此,描述的硬件组件可以被认为通信地耦接。在同时存在多个硬件组件的情况下,可以通过在两个或更多个硬件组件之间或之中(例如,通过适当的电路和总线)的信号传输来实现通信。在多个硬件组件在不同时间处被配置或实例化的实现方式中,可以例如通过将信息存储在多个硬件组件访问的存储器结构中并且在该存储器结构中检索信息来实现这样的硬件组件之间的通信。例如,一个硬件组件可以执行操作,并且将该操作的输出存储在通信上耦接的存储器装置中。然后,其他硬件组件可以在随后的时间处访问存储器装置以检索和处理存储的输出。
硬件组件还可以发起与输入装置或输出装置的通信,并且可以对资源(例如,信息的集合)进行操作。本文中描述的示例方法的各种操作可以至少部分地由被临时配置(例如,通过软件)或永久配置成执行相关操作的一个或更多个处理器1004来执行。无论是临时配置还是永久配置,这样的处理器1004可以构成进行操作以执行本文中描述的一个或更多个操作或功能的处理器实现的组件。如本文中所使用的,“处理器实现的组件”是指使用一个或更多个处理器1004实现的硬件组件。类似地,本文中描述的方法可以至少部分地由处理器实现,其中特定的处理器1012、1014或处理器1004是硬件的示例。例如,方法的操作中的至少一些操作可以由一个或更多个处理器1004或处理器实现的组件来执行。此外,一个或更多个处理器1004还可以操作成支持“云计算”环境中的相关操作的性能或者操作为“软件即服务”(SaaS)。例如,至少一些操作可以由一组计算机(作为包括处理器1004的机器1000的示例)执行,这些操作可以经由网络110(例如,因特网)并且经由一个或更多个适当的接口(例如,API)访问。某些操作的执行可以分布在处理器之中,不仅驻留在单个机器1000内,而且跨多个机器被部署。在一些示例实现方式中,处理器1004或处理器实现的组件可以位于单个地理位置内(例如,在家庭环境、办公室环境或服务器群内)。在其他示例实现方式中,处理器1004或处理器实现的组件可以跨多个地理位置分布。
该上下文中的“处理器”是指根据控制信号(例如,“命令”、“操作码”、“机器码”等)操纵数据值并且产生被用于操作机器1000的对应输出信号的任何电路或虚拟电路(通过在实际处理器1004上执行的逻辑模拟的物理电路)。例如,处理器1004可以是CPU、RISC处理器、CISC处理器、GPU、DSP、ASIC、RFIC或它们的任何组合。处理器1004还可以是具有两个或更多个可以同时执行指令1002的独立处理器1004(有时称为“核”)的多核处理器。
该上下文中的“时间戳”指代标识某个事件何时发生(例如,给出日期和一天中的时间)的一系列字符或编码信息,有时精确到几分之一秒。
在不脱离本公开内容的范围的情况下,可以对所公开的实现方式进行改变和修改。这些和其他改变或修改旨在被包括在本公开内容的范围内,并且在所附权利要求中被表达。
下面呈现本主题的各方面的编号的非限制性列表。
方面1.一种方法,包括:由各自包括处理器和存储器的一个或更多个计算装置从客户端装置接收用户内容,所述客户端装置对应于能够由所述客户端装置执行的客户端应用的用户,并且所述用户内容包括由所述客户端装置捕获的图像内容或视频内容中的至少一者;由所述一个或更多个计算装置中的至少一个计算装置分析所述用户内容,以确定与所述用户内容对应的用户活动;由所述一个或更多个计算装置中的至少一个计算装置确定所述用户活动与提供给所述客户端应用的用户的促销对应;由所述一个或更多个计算装置中的至少一个计算装置将所述客户端应用的用户的关于所述促销的简档数据从所述用户活动的第一量修改成所述用户活动的第二量;由所述一个或更多个计算装置中的至少一个计算装置生成增强现实内容项,所述增强现实内容项能够执行成显示关于所述促销的用户活动的第二量的指示符;以及由所述一个或更多个计算装置中的至少一个计算装置将所述增强现实内容项发送至所述客户端装置。
方面2.根据方面1所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置确定所述用户活动的第二量对应于关于所述促销的用户活动的阈值量;以及由所述一个或更多个计算装置中的至少一个计算装置基于所述用户活动的第二量对应于所述用户活动的阈值量对于所述用户确定关于所述促销的一个或更多个兑换选项;其中,所述增强现实内容项能够执行成结合所述用户活动的第二量的所述指示符来显示所述一个或更多个兑换选项。
方面3.根据方面2所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置接收兑换信息,所述兑换信息指示对所述一个或更多个兑换选项中的兑换选项的选择;由所述一个或更多个计算装置中的至少一个计算装置生成兑换码;以及由所述一个或更多个计算装置中的至少一个计算装置将所述兑换码发送至所述客户装置。
方面4.根据方面3所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置基于接收到所述兑换信息将所述用户活动的第二量修改成用户活动的第三量;其中,所述用户活动的第三量小于所述用户活动的第二量。
方面5.根据方面1至4中任一项所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置确定包括在所述用户内容中的一个或更多个第一对象;由所述一个或更多个计算装置中的至少一个计算装置,确定所述一个或更多个第一对象相对于包括在用户活动识别信息中的一个或更多个第二对象之间的相似性度量,所述用户活动识别信息指示多个用户活动和与所述多个用户活动中的每个相应用户活动对应的至少一个对象;以及由所述一个或更多个计算装置中的至少一个计算装置,基于所述一个或更多个第一对象与所述一个或更多个第二对象之间的所述相似性量度至少是阈值相似性度量来确定所述用户内容对应于所述用户活动。
方面6.根据方面5所述的方法,其中,所述一个或更多个第一对象包括一个或更多个标识符;以及所述方法包括:由所述一个或更多个计算装置中的至少一个计算装置相对于包括在所述用户活动标识信息中的第二标识符来分析包括在所述用户内容中的第一标识符以确定所述相似性度量。
方面7.根据方面5所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置确定所述一个或更多个第一对象对应于位置;以及由所述一个或更多个计算装置中的至少一个计算装置确定所述用户活动对应于由所述客户端应用的用户对所述位置的访问。
方面8.根据方面5所述的方法,其中:所述一个或更多个第一对象包括位置的至少一个标识符;所述至少一个标识符包括快速响应(QR)码或条形码中的至少一者;以及所述用户活动对应于对所述位置的访问。
方面9.根据方面5所述的方法,其中:所述一个或更多个第一对象包括供购买的产品的至少一个标识符;所述至少一个标识符包括快速响应(QR)码或条形码中的至少一者;以及所述用户活动对应于由所述客户端应用的用户对所述产品的购买。
方面10.根据方面9所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置,从一个或更多个金融服务提供者中的至少一个金融服务提供者或从提供产品以供购买的商家获得购买数据,所述购买数据指示由所述客户端应用的用户从所述商家对所述产品的购买。
方面11.一种系统,包括:一个或更多个硬件处理器;以及包括计算机可读指令的一个或更多个非暂态计算机可读存储介质,所述计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的操作:从客户端装置接收用户内容,所述客户端装置对应于能够由所述客户端装置执行的客户端应用的用户,并且所述用户内容包括由所述客户端装置捕获的图像内容或视频内容中的至少一者;分析所述用户内容以确定与所述用户内容对应的用户活动;确定所述用户活动与提供给所述客户端应用的用户的促销对应;将所述客户端应用的用户的关于所述促销的简档数据从所述用户活动的第一量修改成所述用户活动的第二量;生成增强现实内容项,所述增强现实内容项能够执行成显示关于所述促销的所述用户活动的第二量的指示符;以及将所述增强现实内容项发送至所述客户端装置。
方面12.根据方面11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:使用一种或更多种对象识别技术来确定所述用户内容的一个或更多个对象、一个或更多个形状、一个或更多个轮廓或者一个或更多个颜色中的至少一者;相对于多个位置的图像内容或视频内容中的至少一者,执行对所述一个或更多个对象、所述一个或更多个形状、所述一个或更多个轮廓或者所述一个或更多个颜色中的至少一者的分析;以及基于所述分析,确定所述用户内容对应于所述多个位置中的位置。
方面13.根据方面12所述的系统,其中:所述用户活动对应于对所述位置的访问;以及所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:分析所述用户的简档日期以确定由所述用户对所述位置的访问次数;确定由所述用户对所述位置的访问次数至少是阈值访问次数;以及基于由所述用户对所述位置的访问次数至少是所述阈值访问次数来确定所述用户可用的一个或更多个兑换选项。
方面14.根据方面11至13中任一项所述的系统,其中:所述用户活动对应于对产品的购买;以及所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:分析所述用户的简档日期以确定由所述用户对所述产品的购买次数;确定由所述用户对所述产品的所述购买次数至少是阈值购买次数;以及基于由所述用户对所述产品的所述购买次数至少是所述阈值购买次数来确定所述用户可用的一个或更多个兑换选项。
方面15.根据方面11至14中任一项所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:确定所述用户内容包括与QR码或条形码中的至少一者对应的码信息;相对于多个码分析所述码信息,所述多个码中的各个码对应于相应的用户活动;确定所述码信息与所述多个码中的码之间的相似性度量至少是阈值相似性度量;以及基于所述码信息与所述多个码中的所述码之间的所述相似性度量至少是所述阈值相似性度量来识别所述用户活动。
方面16.一种方法,包括:由各自包括处理器和存储器的一个或更多个计算装置使用客户端应用的用户的客户端装置的一个或更多个输入装置来捕获用户内容;由所述一个或更多个计算装置中的至少一个计算装置将所述用户内容的至少一部分发送至服务器系统;由所述一个或更多个计算装置中的至少一个计算装置使用户界面被显示,所述用户界面包括用户内容和多个用户界面元素,所述多个用户界面元素中的每个用户界面元素能够被选择成使与相应用户界面元素对应的增强现实内容项被执行;由所述一个或更多个计算装置中的至少一个计算装置确定对所述多个用户界面元素中的用户界面元素的选择;以及由所述一个或更多个计算装置中的至少一个计算装置执行与所述用户界面元素对应的所述增强现实内容项,以使图像内容或视频内容中的至少一者与用户内容有关地被显示,所述图像内容或视频内容中的至少一者指示与提供给所述客户端应用的用户的促销有关的用户活动的量。
方面17.根据方面16所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置显示附加用户界面,所述附加用户界面包括能够选择成扫描所述用户内容的一部分的附加用户界面元素;由所述一个或更多个计算装置中的至少一个计算装置确定对所述附加用户界面元素的选择;由所述一个或更多个计算装置中的至少一个计算装置生成与所述用户内容的一部分对应的扫描数据;以及由所述一个或更多个计算装置中的至少一个计算装置将所述扫描数据发送至所述服务器系统。
方面18.根据方面16或17所述的方法,其中,所述增强现实内容项能够执行成显示包括关于所述客户端应用的用户用于兑换所述促销的一个或更多个选项的附加图像内容或附加视频内容中的至少一者。
方面19.根据方面18所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置确定对用于兑换所述促销的所述一个或更多个选项中的选项的选择;以及由所述一个或更多个计算装置中的至少一个计算装置响应于对所述选项的选择来接收兑换码。
方面20.根据方面19所述的方法,包括:由所述一个或更多个计算装置中的至少一个计算装置生成金融交易信息,所述金融交易信息适用于使用所述兑换码对与所述促销有关的产品的一次或更多次购买。

Claims (20)

1.一种方法,包括:
由各自包括处理器和存储器的一个或更多个计算装置从客户端装置接收用户内容,所述客户端装置对应于能够由所述客户端装置执行的客户端应用的用户,并且所述用户内容包括由所述客户端装置捕获的图像内容或视频内容中的至少一者;
由所述一个或更多个计算装置中的至少一个计算装置分析所述用户内容,以确定与所述用户内容对应的用户活动;
由所述一个或更多个计算装置中的至少一个计算装置确定所述用户活动与提供给所述客户端应用的用户的促销对应;
由所述一个或更多个计算装置中的至少一个计算装置将所述客户端应用的用户的关于所述促销的简档数据从所述用户活动的第一量修改成所述用户活动的第二量;
由所述一个或更多个计算装置中的至少一个计算装置生成增强现实内容项,所述增强现实内容项能够执行成显示关于所述促销的所述用户活动的第二量的指示符;以及
由所述一个或更多个计算装置中的至少一个计算装置将所述增强现实内容项发送至所述客户端装置。
2.根据权利要求1所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置确定所述用户活动的第二量对应于关于所述促销的用户活动的阈值量;以及
由所述一个或更多个计算装置中的至少一个计算装置基于所述用户活动的第二量对应于所述用户活动的阈值量对于所述用户确定关于所述促销的一个或更多个兑换选项;
其中,所述增强现实内容项能够执行成结合所述用户活动的第二量的所述指示符来显示所述一个或更多个兑换选项。
3.根据权利要求2所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置接收兑换信息,所述兑换信息指示对所述一个或更多个兑换选项中的兑换选项的选择;
由所述一个或更多个计算装置中的至少一个计算装置生成兑换码;以及
由所述一个或更多个计算装置中的至少一个计算装置将所述兑换码发送至所述客户装置。
4.根据权利要求3所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置基于接收到所述兑换信息将所述用户活动的第二量修改成用户活动的第三量;
其中,所述用户活动的第三量小于所述用户活动的第二量。
5.根据权利要求1所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置确定包括在所述用户内容中的一个或更多个第一对象;
由所述一个或更多个计算装置中的至少一个计算装置,确定所述一个或更多个第一对象相对于包括在用户活动识别信息中的一个或更多个第二对象之间的相似性度量,所述用户活动识别信息指示多个用户活动和与所述多个用户活动中的每个相应用户活动对应的至少一个对象;以及
由所述一个或更多个计算装置中的至少一个计算装置,基于所述一个或更多个第一对象与所述一个或更多个第二对象之间的所述相似性量度至少是阈值相似性度量来确定所述用户内容对应于所述用户活动。
6.根据权利要求5所述的方法,其中,所述一个或更多个第一对象包括一个或更多个标识符;以及所述方法包括:
由所述一个或更多个计算装置中的至少一个计算装置相对于包括在所述用户活动标识信息中的第二标识符来分析包括在所述用户内容中的第一标识符以确定所述相似性度量。
7.根据权利要求5所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置确定所述一个或更多个第一对象对应于位置;以及
由所述一个或更多个计算装置中的至少一个计算装置确定所述用户活动对应于由所述客户端应用的用户对所述位置的访问。
8.根据权利要求5所述的方法,其中:
所述一个或更多个第一对象包括位置的至少一个标识符;
所述至少一个标识符包括快速响应(QR)码或条形码中的至少一者;以及
所述用户活动对应于对所述位置的访问。
9.根据权利要求5所述的方法,其中:
所述一个或更多个第一对象包括供购买的产品的至少一个标识符;
所述至少一个标识符包括快速响应(QR)码或条形码中的至少一者;以及
所述用户活动对应于由所述客户端应用的用户对所述产品的购买。
10.根据权利要求9所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置,从一个或更多个金融服务提供者中的至少一个金融服务提供者或从提供所述产品以供购买的商家获得购买数据,所述购买数据指示由所述客户端应用的用户从所述商家对所述产品的购买。
11.一种系统,包括:
一个或更多个硬件处理器;以及
包括计算机可读指令的一个或更多个非暂态计算机可读存储介质,所述计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的操作:
从客户端装置接收用户内容,所述客户端装置对应于能够由所述客户端装置执行的客户端应用的用户,并且所述用户内容包括由所述客户端装置捕获的图像内容或视频内容中的至少一者;
分析所述用户内容以确定与所述用户内容对应的用户活动;
确定所述用户活动与提供给所述客户端应用的用户的促销对应;
将所述客户端应用的用户的关于所述促销的简档数据从所述用户活动的第一量修改成所述用户活动的第二量;
生成增强现实内容项,所述增强现实内容项能够执行成显示关于所述促销的所述用户活动的第二量的指示符;以及
将所述增强现实内容项发送至所述客户端装置。
12.根据权利要求11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:
使用一种或更多种对象识别技术来确定所述用户内容的一个或更多个对象、一个或更多个形状、一个或更多个轮廓或者一个或更多个颜色中的至少一者;
相对于多个位置的图像内容或视频内容中的至少一者,执行对所述一个或更多个对象、所述一个或更多个形状、所述一个或更多个轮廓或者所述一个或更多个颜色中的至少一者的分析;以及
基于所述分析,确定所述用户内容对应于所述多个位置中的位置。
13.根据权利要求12所述的系统,其中:
所述用户活动对应于对所述位置的访问;以及
所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:
分析所述用户的简档日期以确定由所述用户对所述位置的访问次数;
确定由所述用户对所述位置的所述访问次数至少是阈值访问次数;以及
基于由所述用户对所述位置的所述访问次数至少是所述阈值访问次数来确定所述用户可用的一个或更多个兑换选项。
14.根据权利要求11所述的系统,其中:
所述用户活动对应于对产品的购买;以及
所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:
分析所述用户的简档日期以确定由所述用户对所述产品的购买次数;
确定由所述用户对所述产品的所述购买次数至少是阈值购买次数;以及
基于由所述用户对所述产品的所述购买次数至少是所述阈值购买次数来确定所述用户可用的一个或更多个兑换选项。
15.根据权利要求11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加计算机可读指令,所述附加计算机可读指令当由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行包括以下的附加操作:
确定所述用户内容包括与QR码或条形码中的至少一者对应的码信息;
相对于多个码分析所述码信息,所述多个码中的各个码对应于相应的用户活动;
确定所述码信息与所述多个码中的码之间的相似性度量至少是阈值相似性度量;以及
基于所述码信息与所述多个码中的所述码之间的所述相似性度量至少是所述阈值相似性度量来识别所述用户活动。
16.一种方法,包括:
由各自包括处理器和存储器的一个或更多个计算装置使用客户端应用的用户的客户端装置的一个或更多个输入装置来捕获用户内容;
由所述一个或更多个计算装置中的至少一个计算装置将所述用户内容的至少一部分发送至服务器系统;
由所述一个或更多个计算装置中的至少一个计算装置使用户界面被显示,所述用户界面包括所述用户内容和多个用户界面元素,所述多个用户界面元素中的每个用户界面元素能够被选择成使与相应用户界面元素对应的增强现实内容项被执行;
由所述一个或更多个计算装置中的至少一个计算装置确定对所述多个用户界面元素中的用户界面元素的选择;以及
由所述一个或更多个计算装置中的至少一个计算装置执行与所述用户界面元素对应的所述增强现实内容项,以使图像内容或视频内容中的至少一者与所述用户内容有关地被显示,所述图像内容或视频内容中的至少一者指示与提供给所述客户端应用的用户的促销有关的用户活动的量。
17.根据权利要求16所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置显示附加用户界面,所述附加用户界面包括能够选择成扫描所述用户内容的一部分的附加用户界面元素;
由所述一个或更多个计算装置中的至少一个计算装置确定对所述附加用户界面元素的选择;
由所述一个或更多个计算装置中的至少一个计算装置生成与所述用户内容的一部分对应的扫描数据;以及
由所述一个或更多个计算装置中的至少一个计算装置将所述扫描数据发送至所述服务器系统。
18.根据权利要求16所述的方法,其中,所述增强现实内容项能够执行成显示包括关于所述客户端应用的用户用于兑换所述促销的一个或更多个选项的附加图像内容或附加视频内容中的至少一者。
19.根据权利要求18所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置确定对用于兑换所述促销的所述一个或更多个选项中的选项的选择;以及
由所述一个或更多个计算装置中的至少一个计算装置响应于对所述选项的选择来接收兑换码。
20.根据权利要求19所述的方法,包括:
由所述一个或更多个计算装置中的至少一个计算装置生成金融交易信息,所述金融交易信息适用于使用所述兑换码对与所述促销有关的产品的一次或更多次购买。
CN202180065997.7A 2020-09-28 2021-09-28 跟踪用户活动和兑换促销 Pending CN116210018A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202063198086P 2020-09-28 2020-09-28
US63/198,086 2020-09-28
US17/248,329 2021-01-20
US17/248,329 US11625743B2 (en) 2020-09-28 2021-01-20 Augmented reality content items to track user activity and redeem promotions
PCT/US2021/052379 WO2022067244A1 (en) 2020-09-28 2021-09-28 Tracking user activity and redeeming promotions

Publications (1)

Publication Number Publication Date
CN116210018A true CN116210018A (zh) 2023-06-02

Family

ID=80822784

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180065997.7A Pending CN116210018A (zh) 2020-09-28 2021-09-28 跟踪用户活动和兑换促销

Country Status (5)

Country Link
US (2) US11625743B2 (zh)
EP (1) EP4217952A1 (zh)
KR (1) KR20230074563A (zh)
CN (1) CN116210018A (zh)
WO (1) WO2022067244A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11706167B2 (en) * 2020-06-29 2023-07-18 Snap Inc. Generating and accessing video content for products
US11625743B2 (en) 2020-09-28 2023-04-11 Snap Inc. Augmented reality content items to track user activity and redeem promotions
US20220319083A1 (en) * 2021-04-04 2022-10-06 Lakshminath Reddy Dondeti System and method for generating and providing context-fenced filters to multimedia objects captured in real-time

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120089449A1 (en) * 2010-10-07 2012-04-12 Kevin Yu System and Method for Providing a Promotion
US20150106200A1 (en) 2013-10-15 2015-04-16 David ELMEKIES Enhancing a user's experience by providing related content
US9953334B2 (en) * 2011-02-10 2018-04-24 Visa International Service Association Electronic coupon issuance and redemption apparatuses, methods and systems
US9449343B2 (en) * 2012-10-05 2016-09-20 Sap Se Augmented-reality shopping using a networked mobile device
US10783554B1 (en) * 2014-02-25 2020-09-22 Groupon, Inc. Generation of promotion in an augmented reality
US11151591B2 (en) * 2016-12-06 2021-10-19 Verizon Media Inc. Dynamic scan code generation
US11127047B2 (en) 2018-12-20 2021-09-21 Sap Se Digital promotion system using digital collectibles
US11625743B2 (en) 2020-09-28 2023-04-11 Snap Inc. Augmented reality content items to track user activity and redeem promotions

Also Published As

Publication number Publication date
US20230237523A1 (en) 2023-07-27
EP4217952A1 (en) 2023-08-02
WO2022067244A1 (en) 2022-03-31
KR20230074563A (ko) 2023-05-30
US20220101361A1 (en) 2022-03-31
US11625743B2 (en) 2023-04-11

Similar Documents

Publication Publication Date Title
US20230353639A1 (en) Analyzing augmented reality content usage data
CN116235131A (zh) 包括用户化身以共享位置的增强现实内容项
US11934643B2 (en) Analyzing augmented reality content item usage data
US11625743B2 (en) Augmented reality content items to track user activity and redeem promotions
US11706167B2 (en) Generating and accessing video content for products
CN115699095A (zh) 来自第三方内容的增强现实内容
KR20230031915A (ko) 카메라 사용자 인터페이스에 대한 서드-파티 수정들
CN115868149A (zh) 用于生成内容的摄像装置用户界面
CN116324702A (zh) 为基于ar的化妆选择颜色值
US20210409502A1 (en) Tracking usage of augmented reality content across multiple users
US20230289560A1 (en) Machine learning techniques to predict content actions
US20220101416A1 (en) Templates to generate augmented reality content items that display product information
US20220206924A1 (en) Accessing third party resources via client application with messaging capability
US11924153B2 (en) Messaging user interface element with reminders
CN116438561A (zh) 消息收发应用中的代币

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination