CN115803779A - 分析增强现实内容使用数据 - Google Patents
分析增强现实内容使用数据 Download PDFInfo
- Publication number
- CN115803779A CN115803779A CN202180045808.XA CN202180045808A CN115803779A CN 115803779 A CN115803779 A CN 115803779A CN 202180045808 A CN202180045808 A CN 202180045808A CN 115803779 A CN115803779 A CN 115803779A
- Authority
- CN
- China
- Prior art keywords
- augmented reality
- user
- content item
- reality content
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 399
- 230000003993 interaction Effects 0.000 claims abstract description 177
- 238000000034 method Methods 0.000 claims description 97
- 238000012512 characterization method Methods 0.000 claims description 38
- 230000000007 visual effect Effects 0.000 claims description 34
- 230000004044 response Effects 0.000 claims description 16
- 230000001815 facial effect Effects 0.000 claims description 12
- 238000012544 monitoring process Methods 0.000 abstract description 2
- 230000004048 modification Effects 0.000 description 34
- 238000012986 modification Methods 0.000 description 34
- 230000006870 function Effects 0.000 description 28
- 238000004891 communication Methods 0.000 description 23
- 230000008569 process Effects 0.000 description 22
- 230000009466 transformation Effects 0.000 description 21
- 238000012545 processing Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 12
- 238000001514 detection method Methods 0.000 description 9
- 230000006855 networking Effects 0.000 description 9
- 238000000844 transformation Methods 0.000 description 9
- 230000000694 effects Effects 0.000 description 8
- 230000009471 action Effects 0.000 description 7
- 230000003416 augmentation Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 6
- 210000000887 face Anatomy 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000001131 transforming effect Effects 0.000 description 5
- 230000001413 cellular effect Effects 0.000 description 4
- 239000002537 cosmetic Substances 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000008520 organization Effects 0.000 description 4
- 241000282414 Homo sapiens Species 0.000 description 3
- 241001465754 Metazoa Species 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 239000007789 gas Substances 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 238000010079 rubber tapping Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000003796 beauty Effects 0.000 description 2
- 239000003086 colorant Substances 0.000 description 2
- 238000013527 convolutional neural network Methods 0.000 description 2
- 210000000245 forearm Anatomy 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 238000012000 impulse oscillometry Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000002085 persistent effect Effects 0.000 description 2
- 101100478633 Escherichia coli O157:H7 stcE gene Proteins 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 241000282320 Panthera leo Species 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000002730 additional effect Effects 0.000 description 1
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 230000032683 aging Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000036760 body temperature Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 238000004040 coloring Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000002996 emotional effect Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000003344 environmental pollutant Substances 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- GVVPGTZRZFNKDS-JXMROGBWSA-N geranyl diphosphate Chemical compound CC(C)=CCC\C(C)=C\CO[P@](O)(=O)OP(O)(O)=O GVVPGTZRZFNKDS-JXMROGBWSA-N 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 231100001261 hazardous Toxicity 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007620 mathematical function Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 231100000719 pollutant Toxicity 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000008261 resistance mechanism Effects 0.000 description 1
- 230000004266 retinal recognition Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 101150115529 tagA gene Proteins 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
- H04L67/30—Profiles
- H04L67/306—User profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/01—Customer relationship services
- G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/018—Certifying business or products
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0201—Market modelling; Market analysis; Collecting market data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0242—Determining effectiveness of advertisements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0272—Period of advertisement exposure
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0276—Advertisement creation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0277—Online advertisement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0623—Item investigation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0631—Item recommendations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/06—Buying, selling or leasing transactions
- G06Q30/0601—Electronic shopping [e-shopping]
- G06Q30/0641—Shopping interfaces
- G06Q30/0643—Graphical representation of items or shoppers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/131—Protocols for games, networked simulations or virtual reality
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/535—Tracking the activity of the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
- G06T2219/024—Multi-user, collaborative environment
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Accounting & Taxation (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- General Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Economics (AREA)
- General Business, Economics & Management (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Computer Interaction (AREA)
- Game Theory and Decision Science (AREA)
- Computer Hardware Design (AREA)
- Human Resources & Organizations (AREA)
- Data Mining & Analysis (AREA)
- Tourism & Hospitality (AREA)
- Software Systems (AREA)
- Computer Graphics (AREA)
- Quality & Reliability (AREA)
- Operations Research (AREA)
- Computing Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Primary Health Care (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- User Interface Of Digital Computer (AREA)
- Information Transfer Between Computers (AREA)
Abstract
在一个或更多个实现方式中,可以生成包括用户界面元素的用户界面,用户界面元素使得能够跟踪或监视客户端应用的用户与增强现实内容的交互。可以收集和分析增强现实内容的使用度量。此外,可以生成关于与增强现实内容交互的客户端应用用户的信息。在一个或更多个示例中,可以分析与一个或更多个增强现实内容项交互的客户端应用的用户的特性,以确定一个或更多个增强现实内容项的用户表征。增强现实内容项的使用度量和用户表征可以经由增强现实内容的创建者可访问的仪表板来呈现。
Description
优先权要求
本专利申请要求于2020年6月29日提交的美国申请序列号62/705,468的优先权的权益,该美国申请的全部内容通过引用并入本文中。
背景技术
由客户端设备执行的应用可以用于生成内容。例如,客户端应用可以用于生成消息收发内容、图像内容、视频内容、音频内容、媒体覆盖(media overlays)、文档、创意作品、其组合等。在各种情况下,用户内容可以被增强现实内容修改。
附图说明
在附图(其不一定按比例绘制)中,相同的附图标记可以在不同的视图中描述类似的部件。为了容易地识别对任何特定元件或动作的讨论,附图标记中的一个或更多个最高位数字指代该元件被首次引入时所在的图号。通过示例而非限制的方式示出了一些实现方式。
图1是根据一个或更多个示例实现方式的用于通过网络来交换数据(例如,消息和相关内容)的架构的图形表示。
图2是根据一些示例的可以具有客户端侧和服务器侧功能两者的系统的图形表示。
图3是示出根据一个或更多个示例实现方式的可以存储在服务器系统的数据库中的数据的示意图。
图4是示出根据一个或更多个示例实现方式的可以经由客户端应用访问的内容的示例框架的示意图。
图5是示出根据一个或更多个示例实现方式的用于分析增强现实内容使用数据(augmented reality content usage data)的架构的图形表示。
图6是示出根据一个或更多个示例实现方式的用于确定与一个或更多个增强现实内容项交互的客户端应用用户的表征(characterization)的过程的示例操作的流程图。
图7是根据一个或更多个示例实现方式的用户界面的图示,用户界面包括可以被结合到增强现实内容中的特征。
图8是根据一个或更多个示例实现方式的用户界面的图示,用户界面包括可以应用增强现实内容项的用户内容。
图9是根据一个或更多个示例实现方式的用户界面的图示,用户界面包括应用于用户内容的增强现实内容,其中增强现实内容的多个特征与可选择的用户界面元素相关联。
图10是根据一个或更多个示例实现方式的环境的表示,环境包括显示用户界面的客户端设备,用户界面包括关于AR内容创建者的一个或更多个增强现实内容项的信息。
图11是根据一个或更多个示例实现方式的环境的表示,环境包括显示附加用户界面的客户端设备,附加用户界面包括关于AR内容创建者的一个或更多个增强现实内容项的信息。
图12是根据一个或更多个示例实现方式的环境的表示,环境包括显示用户界面的客户端设备,用户界面包括表征与增强现实内容项交互的客户端应用的用户的信息。
图13是示出根据一个或更多个示例实现方式的呈计算机系统形式的机器的部件的框图,该机器可以从一个或更多个机器可读介质读取和执行指令,以执行本文描述的任何一种或更多种方法。
图14是示出根据一个或更多个示例实现方式的可以与本文描述的一个或更多个硬件架构结合使用的代表性软件架构的框图。
具体实施方式
个人和组织可以创建可以由可以执行增强现实内容的客户端应用的用户消费的增强现实内容。例如,可以创建对包括在用户内容中的一个或更多个对象的外观进行修改的增强现实内容,其中用户内容可以包括经由客户端设备的一个或更多个输入设备捕获的图像内容、视频内容或者音频内容中的至少一个。为了说明,增强现实内容可以修改包括在用户内容中的一个或更多个个人的外观。在一个或更多个示例中,增强现实内容可以通过将对用户内容中包括的对象的外观进行修改的图像内容或视频内容中的至少一个添加至用户内容来修改用户内容。在各种示例中,增强现实内容可以覆盖包括在用户内容中的对象的至少一部分。此外,增强现实内容可以修改图像内容或视频内容的像素数据,以改变包括在用户内容中的至少一个对象的外观。
在现有系统和方法中,增强现实内容创建者可以获得的与其增强现实内容的使用有关的信息量是有限的。在一个或更多个示例中,增强现实内容创建者可以获得指示客户端应用的用户已经观看增强现实内容的时间量或增强现实内容已经与客户端应用的其他用户分享的次数的信息。此外,增强现实内容创建者最多能够获得关于正在消费这些创建者生成的增强现实内容的客户端应用的用户的特性(characteristics)的有限信息。现有系统和方法以向增强现实内容创建者提供关于他们已经创建的增强现实内容的使用的更鲁棒的信息的方式生成缺乏跟踪增强现实内容的使用的技术功能的增强现实内容。特别地,在增强现实内容的创建期间,现有系统和方法提供了关于用户与增强现实内容的交互的有限粒度。此外,现有系统和方法使用的技术基础设施限制了关于与增强现实内容交互的用户的特性的信息的可用性和数量。
本文描述的系统、方法、技术、指令序列和计算机器程序产品旨在收集和分析增强现实内容使用数据。本文描述的实现方式可以用于获得使用现有系统和方法不能够获得的与增强现实内容的使用相关的附加信息。例如,本文描述的实现方式可以收集与增强现实内容交互的客户端应用的用户的简档信息。本文描述的实现方式还可以分析收集的关于客户端应用用户的信息。以此方式,本文描述的系统和方法可以向增强现实内容创建者提供关于消费由这些创建者生成的增强现实内容的用户的详细信息。在一个或更多个场景中,增强现实内容创建者可以基于先前已经与他们的增强现实内容交互的客户端应用用户的特性,将他们的增强现实内容定制给其他客户端应用用户的受众。此外,增强现实内容创建者可以实施广告活动,以使他们的增强现实内容被获知给如下附加客户端应用用户:所述附加客户端应用用户与先前已经与这些创建者生成的增强现实内容交互的客户端应用用户共享特性。
在各种示例中,本文描述的系统和方法可以使得增强现实内容的创建者能够将多个特定用户界面元素与增强现实内容项的特征联系起来。例如,增强现实内容的创建者可以选择他们的增强现实内容项的特征,以针对这些特征跟踪用户与这些特征的交互。为了说明,增强现实内容项可以包括客户端应用用户可以与之交互的多个特征,并且增强现实内容项的创建者可以指示所述特征中的一个或更多个特征与可选择的用户界面元素相关联。在这些情况下,可以收集和分析指示已经选择了可选择的用户界面元素中的至少一个的用户输入。以此方式,可以跟踪不能被现有系统和方法捕获的客户端应用用户与增强现实内容的附加交互,并且可以相对于现有系统和方法跟踪关于与增强现实内容项的特征的交互的更大程度的粒度。在一个或更多个示例中,可以基于从跟踪对与增强现实内容项对应的用户界面元素的选择获得的数据来确定如下度量(metrics):该度量指示与增强现实内容项的用户交互量或与增强现实内容项的特征的用户交互量。
本文描述的系统和方法还可以确定与增强现实内容交互的客户端应用用户的简档信息。在各种示例中,本文描述的实现方式可以识别客户端应用用户与增强现实内容的交互,并将客户端应用用户的简档信息与增强现实内容相关联地存储。本文描述的系统和方法然后可以分析用户简档信息以确定与增强现实内容交互的客户端应用用户的表征。客户端应用用户的表征可以指示与增强现实内容交互的客户端应用用户的特性。在一个或更多个示例中,可以分析与增强现实内容交互的客户端应用用户的简档信息,以确定增强现实内容的目标受众。
因此,与现有系统和方法相比,本文描述的系统、方法、技术、指令序列和计算机器程序产品通过提供底层技术架构来提供各种实现方式以收集更多关于增强现实内容的使用的信息,该底层技术架构使得能够跟踪客户端应用用户与增强现实内容项的各种特征的交互。本文描述的系统和方法还提供了与增强现实内容创建者的现有系统和方法有关的关于与这些创建者生成的增强现实内容项交互的客户端应用用户的附加见解。以此方式,与现有系统和方法相比,增强现实内容创建者可以识别更可能与他们的增强现实内容交互的客户端应用用户。在增强现实内容与一个或更多个产品相关的情况下,与现有系统和方法相比,增强现实内容创建者更可能识别将购买他们的产品的客户端应用用户。
图1是用于通过网络来交换数据(例如,消息和相关内容)的架构100的图形表示。架构100可以包括多个客户端设备102。客户端设备102可以单独地包括但不限于移动电话、台式计算机、膝上型计算设备、便携式数字助理(PDA)、智能电话、平板计算设备、超级本、上网本、多处理器系统、基于微处理器或可编程的消费电子系统、游戏控制台、机顶盒、车辆中的计算机、可穿戴设备、它们的一个或更多个组合、或用户可以用来访问架构100中包括的一个或更多个部件的任何其他通信设备。
每个客户端设备102可以托管多个应用,包括客户端应用104和一个或更多个第三方应用106。用户可以使用客户端应用106来创建内容,例如视频、图像(例如,照片)、音频和媒体覆盖。在一个或更多个说明性示例中,客户端应用104可以包括使得用户能够创建和交换内容的社交网络功能。在各种示例中,客户端应用104可以包括可以用于在由各种客户端设备102执行的客户端应用的实例之间发送消息的消息收发功能。使用客户端应用104创建的消息可以包括视频、一个或更多个图像、音频、媒体覆盖、文本、使用一个或更多个创作工具产生的内容、注释等。在一个或更多个实现方式中,客户端应用104可以用于查看和生成交互消息、查看地图上客户端应用104的其他用户的位置、与客户端应用104的其他用户聊天等。
一个或更多个用户可以是人、机器或与客户端设备例如客户端设备102交互的其他装置。在示例实现方式中,用户可能不是架构100的一部分,但是可以经由客户端设备102或其他方式与架构100中的一个或更多部件交互。在各种示例中,用户可以向客户端设备102提供输入(例如,触摸屏输入或字母数字输入),并且该输入可以被传送至架构100中的其他实体。在这种情况下,架构100中的其他实体响应于用户输入,可以将信息传送到客户端设备102以呈现给用户。以此方式,用户可以使用客户端设备102与架构100中的各种实体交互。
客户端应用104的每个实例能够与客户端应用的另一实例、一个或更多个第三方应用106或服务器系统108中的至少一个进行通信和交换数据。在客户端应用104的实例之间、第三方应用106之间以及客户端应用104的实例与服务器系统108之间交换的数据包括功能(例如,调用功能的命令)和有效载荷数据(例如,文本、音频、图像、视频或其他多媒体数据)。在客户端应用104的实例之间、在第三方应用106之间以及在客户端应用104的至少一个实例与至少一个第三方应用106之间交换的数据可以从由客户端设备102执行的应用的实例和由附加客户端设备102执行的应用的实例直接进行交换。此外,在客户端应用104之间、在第三方应用106之间以及在至少一个客户端应用104与至少一个第三方应用106之间交换的数据可以从由客户端设备102执行的应用的实例间接地(例如,经由一个或更多个中间服务器)传输至由附加的客户端设备102执行的应用的另一实例。在一个或更多个说明性示例中,在应用之间的间接通信中使用的一个或更多个中间服务器可以包括在服务器系统108中。
第三方应用106可以与客户端应用104分离并且与客户端应用104不同。第三方应用106可以由客户端设备102独立于客户端应用104来下载和安装。在各种实现方式中,第三方应用106可以由客户端设备102在下载和安装客户端应用104之前或之后下载和安装。第三方应用106可以是由不同于提供客户端应用104的实体或组织的实体或组织提供的应用。第三方应用106可以由客户端设备102使用与客户端应用104有区分的登录凭证进行访问。即,第三方应用106可以维护第一用户帐户,并且客户端应用104可以维护第二用户帐户。在一个或更多个实现方式中,第三方应用106可以由客户端设备102进行访问以执行各种活动和交互,例如听音乐、视频、跟踪锻炼、查看图形元素(例如,贴纸)、与其他用户通信等。作为示例,第三方应用106可以包括社交网络应用、约会应用、乘车或汽车共享应用、购物应用、交易应用、游戏应用、成像应用、音乐应用、视频浏览应用、锻炼跟踪应用、健康监视应用、图形元素或贴纸浏览应用或任何其他合适的应用。
服务器系统108经由一个或更多个网络110向客户端应用104提供服务器侧功能。根据一些示例实现方式,服务器系统108可以是云计算环境。例如,在一个说明性示例中,服务器系统108以及与服务器系统108相关联的一个或更多个服务器可以与基于云的应用相关联。在一个或更多个实现方式中,客户端设备102和服务器系统108可以经由一个或更多个网络110耦接。
服务器系统108支持向客户端应用104提供的各种服务和操作。这样的操作包括向客户端应用104发送数据、从客户端应用104接收数据以及处理客户端应用104生成的数据。这些数据可以包括消息内容、媒体内容、客户端设备信息、地理位置信息、媒体注释和覆盖、消息内容持久性条件、社交网络信息和实时事件信息作为示例。通过经由客户端应用104的用户界面(UI)可用的功能来调用和控制架构100内的数据交换。
虽然架构100的某些功能在本文中被描述为由客户端应用104或由服务器系统108执行,但是将功能定位在客户端应用104或服务器系统108内是设计选择。例如,以下在技术上可能是优选的:最初在服务器系统108内部署某些技术和功能,但稍后将该技术和功能迁移到客户端设备102具有足够处理能力的客户端应用104。
服务器系统108包括应用编程接口(API)服务器112,该应用编程接口(API)服务器112耦接至应用服务器114并向其提供编程接口。应用服务器114通信地耦接至有助于访问一个或更多个数据库118的数据库服务器116。一个或更多个数据库118可以存储与应用服务器114处理的信息相关联的数据。一个或更多个数据库118可以是存储以下信息的存储设备:例如,未处理的媒体内容、来自用户的原始媒体内容(如,高质量媒体内容)、经处理的媒体内容(例如,被格式化为与客户端设备102共享并在客户端设备102上观看的媒体内容)、与媒体内容项相关的上下文数据、与用户设备(例如,计算设备或客户端设备102)相关的上下文数据、媒体覆盖、媒体覆盖智能小部件或智能元素、用户数据、用户设备信息、媒体内容(如,视频和图像)、媒体内容数据(例如,与视频和图像相关联的数据)、计算设备上下文数据、序列化数据、会话数据项、用户设备位置数据、映射信息、交互消息使用数据、交互消息度量数据等。一个或更多个数据库118还可以存储与第三方服务器、客户端设备102、客户端应用104、用户、第三方应用106等相关的信息。
API服务器112在客户端设备102与应用服务器114之间接收和传输数据(例如,命令和消息有效载荷)。具体地,应用程序接口(API)服务器112提供一组可以由客户端应用104调用或查询以调用应用服务器114的功能的接口(例如,例程和协议)。应用程序接口(API)服务器112公开应用服务器114支持的各种功能,包括账户注册、逻辑功能、经由应用服务器114从客户端应用104的一个实例向客户端应用104的另一实例发送消息、从客户端应用104向应用服务器114发送媒体文件(例如,图像、音频、视频)、以及为了可能被另一客户端应用104访问设置媒体内容的集合(例如,图库、故事、消息集合或媒体集合)、检索客户端设备102的用户的朋友列表、检索这样的集合、检索消息和内容、向社交图添加和删除朋友、朋友在社交图中的位置以及打开应用事件(例如,与客户端应用104相关)。
服务器系统108还可以包括网络(web)服务器120。网络服务器120耦接至应用服务器114,并向应用服务器114提供基于网络的接口。为此,网络服务器120通过超文本传输协议(HTTP)和若干其他相关协议处理传入的网络请求。
应用服务器114托管多个应用和子系统,包括消息收发应用系统122、媒体内容处理系统124、社交网络系统126、增强现实(AR)内容创建系统128、AR内容使用系统(ARcontent usage system)130和内容管理系统132。消息收发应用系统122实现了许多消息处理技术和功能,特别是与包括在从客户端应用104的多个实例接收到的消息中的内容(例如,文本和多媒体内容)的聚合和其他处理有关。例如,消息收发应用系统122可以经由有线网络(例如,因特网)、普通老式电话服务(POTS)或无线网络(例如,移动、蜂窝、WIFI、长期演进(LTE)或蓝牙)使用电子邮件(email)、即时消息收发(IM)、短消息服务(SMS)、文本、传真或语音(例如网络电话(VoIP))消息来传递消息。消息收发应用系统122可以将来自多个源的文本和媒体内容聚合成内容的集合。然后,这些集合由消息应用系统122提供给客户端应用104。考虑到这样处理的硬件要求,其他处理器和内存密集型数据处理也可以由消息应用系统122在服务器侧执行。
媒体内容处理系统124专用于执行各种媒体内容处理操作,通常涉及在消息收发应用系统122处的消息或其他内容项的有效载荷内接收的图像、音频或视频。媒体内容处理系统124可以访问一个或更多个数据存储器(例如,数据库118)以检索存储的数据以用于处理媒体内容并存储处理的媒体内容的结果。
社交网络系统126支持各种社交网络功能和服务,并使这些功能和服务可用于消息收发应用系统122。为此,社交网络系统126维护和访问数据库118内的实体图。社交网络系统126支持的功能和服务的示例包括识别特定用户与其有关系或“关注”的客户端应用104的其他用户,以及识别特定用户的其他实体和兴趣。社交网络系统126可以访问与用户的每个朋友或其他社交网络连接相关联的位置信息,以确定他们在地理上居住或当前位于何处。此外,社交网络系统126可以维护用户的每个朋友的位置简档,该位置简档指示用户的朋友居住的地理位置。
AR内容创建系统128可以用于生成包括多个AR内容项136的AR内容134。各个AR内容项136可以包括可被执行以修改客户端设备102捕获的用户内容的计算机可读指令。在各种示例中,AR内容创建系统128可以提供可以用于创建AR内容134的一个或更多个用户界面。例如,AR内容创建系统128可以提供一个或更多个用户界面以导入可以用来创建一个或更多个AR内容项136的内容。为了说明,AR内容创建系统128可以提供一个或更多个用户界面以导入可以用来生成AR内容项136的图像内容、视频内容或音频内容中的至少一个。AR内容创建系统128还可以提供具有一个或更多个创作工具(creative tools)的一个或更多个用户界面,创作工具可以用于创建AR内容项136中的一个或更多个。在一个或更多个说明性示例中,AR内容创建系统128可以实现可以用于生成AR内容134的绘图工具、书写工具、素描工具或着色工具中的至少一个。
AR内容创建系统128还可以使得AR内容项136的创建者能够提供要监视或跟踪客户端应用104的用户与AR内容项136的交互的指示。在一个或更多个示例中,AR内容创建系统可以使得AR内容项136的创建者能够标识要跟踪的AR内容项的一个或更多个特征。正在被跟踪的AR内容项136的特征可以被包括在被跟踪特征138中。在一个或更多个说明性示例中,AR内容创建系统128可以提供使得能够选择要被跟踪的AR内容项136的一个或更多个特征的一个或更多个用户界面。在各种示例中,诸如光标或指针的用户界面工具可以用于指示针对其的用户交互要被跟踪的AR内容项136的特征或AR内容项136的区域。跟踪AR内容项136的使用可以包括以下中至少之一:识别或计数客户端应用104的用户与AR内容项136的交互。与AR内容项136的交互可以包括以下中至少之一:将AR内容项136应用于用户内容、与客户端应用104的另一用户分享AR内容项136、生成包括AR内容项136的消息或与AR内容项136对应的的链接、激活AR内容项136的特征、选择对应于AR内容项136的特征的用户界面元素、解锁AR内容项136、购买AR内容项136、或选择对应于AR内容项136的图标。
在一个或更多个实现方式中,AR内容创建系统128可以提供指示可以被跟踪的AR内容134的特征的一个或更多个模板。AR内容创建系统128可以为AR内容134的指定分类提供一个或更多个模板。例如,AR内容创建系统128可以为包括面部的AR内容项136提供模板,其中模板指示可以跟踪包括在AR内容项136中的一个或更多个面部特征。在一个或更多个附加示例中,AR内容创建系统128可以为包括可以经由客户端应用104购买的产品的AR内容项136提供模板。在这些场景下,AR内容创建系统128可以提供指示产品的一个或更多个特征的模板,例如能够放大产品的视图的特征、能够旋转产品的视图的特征或能够将产品应用于一个或更多个对象的特征。在AR内容项136与美容产品相关的一个或更多个场景中,AR内容创建系统128可以提供使得美容产品能够应用于用户内容项中包括的个人的一个或更多个面部特征的模板。
在各种示例中,被跟踪特征138可以与客户端应用104的用户可以与之交互的用户界面元素相关联。在一个或更多个示例中,被跟踪特征138可以对应于用户界面的可以检测客户端应用104的用户的输入的部分。可以通过使用输入设备例如光标、触笔、手指、其他工具或客户端设备102的扬声器中的至少一个来检测输入。该输入可以涉及:选择用户界面元素,移动用户界面元素,或指示与被跟踪特征138的交互的另一方法。以此方式,由与AR内容项136的被跟踪特征138对应的用户界面元素检测到的输入可以被收集、存储在例如数据库118并被分析。
AR内容使用系统130可以确定AR内容134的使用量。可以基于与包括在AR内容134中的每个AR内容项136的一个或更多个被跟踪特征138的交互量来确定AR内容134的使用量。客户端应用104的用户与被跟踪特征138的每次交互可以由AR内容使用系统130计数并存储在数据库118中。在各种示例中,数据库118可以包括各个AR内容项136的一个或更多个数据结构,并且每个AR内容项136的一个或更多个数据结构可以指示客户端应用104的用户与一个或更多个被跟踪特征138的交互次数。在一个或更多个示例中,AR内容项136可以具有多个被跟踪特征138。在这些场景下,与AR内容项136对应的数据结构可以指示以下中至少之一:与AR内容项136的被跟踪特征138中的每一个相关的交互或与AR内容项136的被跟踪特征138的组合相关的交互。
在一个或更多个示例中,AR内容使用系统130还可以跟踪与包括在AR内容134中的一个或更多个AR内容项136的一个或更多个被跟踪特征138的使用相关的一个或更多个度量。例如,AR内容使用系统130可以确定AR内容项136被分享给客户端应用104的另外的用户的次数以及AR内容项136被包括在发送至客户端应用104的另外的用户的消息中的次数。此外,AR内容使用系统130可以确定AR内容项136被应用于用户内容的次数以及客户端应用104的用户选择AR内容项136的被跟踪特征138的次数。在附加示例中,AR内容使用系统130可以集体跟踪包括在AR内容134中的一个或更多个AR内容项136的多个被跟踪特征138的使用。为了说明,AR内容使用系统130可以确定与AR内容项136相关的交互的总数。在这些情况下,AR内容使用系统130可以确定包含AR内容项136被分享的次数、AR内容项136与消息相关的次数、AR内容项136被应用于用户内容的次数、以及AR内容项136的被跟踪特征138已与客户端应用104的用户交互的次数的总和。
在各种示例中,AR内容使用数据140可以与用户简档数据144相关联。例如,AR内容使用系统130可以识别与AR内容134交互的客户端应用104的用户。在一个或更多个示例中,客户端应用104的用户的标识符可以由AR内容使用系统130确定。基于识别与一个或更多个AR内容项136交互的客户端应用104的用户,AR内容使用系统130可以确定用户的特性。在一个或更多个示例中,AR内容使用系统130可以确定与和AR内容项136交互的用户相关的人口统计信息,例如年龄、性别、职业、教育、其一个或更多个组合等。在附加示例中,AR内容使用系统130可以确定与AR内容项136交互的客户端应用104的用户的位置信息。在各种示例中,可以基于用户输入或地理定位系统(GPS)数据中的至少一个来确定位置信息。
在另外的示例中,AR内容使用系统130可以确定关于客户端应用104的用户的、对应于客户端应用104的用户与经由客户端应用104消费的内容的交互的附加信息。例如,AR内容使用系统130可以确定与客户端应用104的与AR内容134交互的用户相关的客户端应用104的一个或更多个特征的使用度量。为了说明,AR内容使用系统130可以确定与一个或更多个AR内容项136交互的客户端应用104的用户对客户端应用104的一个或更多个社交网络特征的使用量。AR内容使用系统130还可以确定与一个或更多个AR内容项136交互的客户端应用104的用户对客户端应用104的一个或更多个消息收发特征的使用量。此外,AR内容使用系统130可以确定与一个或更多个AR内容项136交互的客户端应用104的用户对客户端应用104的一个或更多个搜索特征的使用量。此外,AR内容使用系统130可以确定由与一个或更多个AR内容项136交互的客户端应用104的用户访问的内容的内容源。内容源可以包括客户端应用104的一个或更多个附加用户、一个或更多个媒体组织、一个或更多个新闻组织、一个或更多个时尚组织、一个或更多个零售商、一个或更多个制造商、一个或更多个政府组织、一个或更多个作者、一个或更多个博客、一个或更多个网站、一个或更多个期刊、其一个或更多个组合等。在各种示例中,AR内容使用系统130还可以确定由客户端应用104的用户与之交互的AR内容134的类型。在一个或更多个说明性示例中,AR内容使用系统130可以确定与如下AR内容项136的交互:所述AR内容项136包括由客户端应用104的用户执行的图像内容或视频内容中的至少一个的覆盖。此外,AR内容使用系统130可以确定与如下AR内容项136的交互:所述AR内容项136包括由客户端应用104的用户创建的动画。
在一个或更多个实现方式中,AR内容使用系统130可以确定与一个或更多个AR内容项136交互的客户端应用104的用户的表征。在一个或更多个示例中,AR内容使用系统130可以确定与AR内容项136交互的客户端应用104的用户的一个或更多个特性。在各种示例中,AR内容使用系统130可以通过确定与同AR内容项136交互的客户端应用104的至少阈值数量的用户相关联的一个或更多个特性来确定与AR内容项136交互的客户端应用104的用户的表征。例如,AR内容使用系统130可以确定与AR内容项136交互的客户端应用104的至少阈值数量的用户所共有的一个或更多个人口统计特性。AR内容使用系统130还可以确定与AR内容项136交互的客户端应用104的至少阈值数量的用户所共有的一个或更多个位置特性。在附加的示例中,AR内容使用系统130可以确定与AR内容项136交互的客户端应用104的至少阈值数量的用户所共有的一个或更多个AR内容使用特性。
基于与AR内容项136交互的客户端应用104的用户的特性,AR内容使用系统130可以确定AR内容项136的目标受众。AR内容项136的目标受众可以对应于具有与AR内容项136交互的至少阈值可能性的客户端应用104的用户。以此方式,可以与AR内容项136交互的客户端应用104的用户的表征可以向AR内容项136的一个或更多个创建者提供洞察力。因此,AR内容项136的一个或更多个创建者可以识别客户端应用104的以前没有与AR内容项136交互但是具有与AR内容项136交互的至少阈值可能性的用户。在这些场景中,AR内容项136的一个或更多个创建者可以使服务器系统108获知AR内容项136的目标受众。服务器系统108可以经由与AR内容项136相关的广告或推荐中的至少一个使目标受众获知AR内容项136。此外,服务器系统108可以通过增加AR内容项136在由包括在目标受众中的客户端应用104的用户提交的AR内容134的搜索结果中的权重来使AR内容项136获知给目标受众。
内容管理系统132可以生成对应于用户界面的用户界面数据,所述用户界面包括关于涉及一个或更多个AR内容项136的使用度量(usage metrics)的信息。内容管理系统132还可以生成包括指示与一个或更多个AR内容项136交互的客户端应用104的用户的特性的信息的用户界面数据。在各种示例中,AR内容134的创建者可以向服务器系统108发送关于与创建者生成的一个或更多个AR内容项136交互的客户端应用104的用户的信息的请求。这些请求可以指向同与由增强现实内容创建者生成的一个或更多个AR内容项136交互的客户端应用104的用户的指定特性相关的度量。例如,增强现实内容创建者可以向服务器系统108发送请求,以获得与增强现实内容创建者的一个或更多个AR内容项136交互的客户端应用104的用户的年龄、位置、性别、职业或教育中的至少一个。在附加示例中,服务器系统108可以接收来自增强现实内容创建者的请求,所述请求用于获得也与增强现实内容创建者的一个或更多个AR内容项136交互的客户端应用104的用户的一般与AR内容134交互的频率或与AR内容134的类型交互的频率中的至少一个。在各种示例中,内容管理系统132可以提供一个或更多个模板,增强现实内容创建者可以使用所述模板来请求关于与创建者的AR内容项136的交互或与创建者的AR内容项136交互的客户端应用104的用户的特性中的至少之一的信息。
响应于来自增强现实内容创建者的对与由创建者产生的一个或更多个增强现实内容项有关的信息的请求,内容管理系统132可以与AR内容使用系统130结合操作,以确定与创建者的AR内容134相关的客户端应用104的用户的增强现实内容使用度量或特性中的至少一个。内容管理系统132然后可以生成指示满足该请求的信息的用户界面数据。在各种示例中,内容管理系统132可以生成与增强现实内容创建者可访问的仪表板对应的用户界面数据,其中仪表板包括与服务器系统108从创建者接收的信息请求对应的信息。在一个或更多个示例中,仪表板可以包括一个或更多个标准化特征,该标准化特征包括关于AR内容134的使用的信息,这些信息被提供给从服务器系统108请求增强现实内容信息的每个增强现实内容创建者。在附加示例中,仪表板可以包括一个或更多个定制特征,该定制特征包括基于由服务器系统108接收的增强现实内容创建者的特定请求的关于AR内容134的使用的信息。
图2是示出根据一些示例的关于服务器系统108的另外的细节的框图。具体地,服务器系统108被示出为包括客户端应用104和应用服务器114。服务器系统108包含多个子系统,这些子系统在客户端侧由客户端应用104支持并且在服务器侧由应用服务器114支持。这些子系统包括例如短暂定时器系统202、集合管理系统204、增强系统206、地图系统208、游戏系统210、AR内容创建系统128、AR内容使用系统130和内容管理系统132。
短暂定时器系统202负责施行客户端应用104和消息收发应用系统122对内容进行临时或限时访问。短暂定时器系统202包含若干定时器,所述定时器基于与消息或消息的集合(例如,故事)相关联的持续时间和显示参数,经由客户端应用104选择性地启用对消息和相关联内容的访问(例如,用于呈现和显示)。下面提供关于短暂定时器系统202的操作的另外的细节。
集合管理系统204负责管理媒体的组或集合(例如,文本、图像视频和音频数据的集合)。可以将内容(例如,消息,包括图像、视频、文本和音频)的集合组织成“事件图库”或“事件故事”。可以使这样的集合在指定的时间段(例如,内容所涉及的事件的持续时间)内可用。例如,可以使与音乐会相关的内容在该音乐会的持续时间内作为“故事”可用。集合管理系统204还可以负责发布向客户端应用104的用户界面提供特定集合的存在性的通知的图标。
集合管理集合管理系统204还包括允许集合管理器管理和策展内容的特定集合的策展接口212。例如,策展接口212使得事件组织者能够策展与特定事件相关的内容的集合(例如,删除不适当的内容或冗余消息)。另外,集合管理系统204采用机器视觉(或图像识别技术)和内容规则来自动地策展内容集合。在某些示例中,可以向用户支付补偿以将用户生成的内容包括到集合中。在这样的情况下,集合管理系统204进行操作以自动向这样的用户支付费用以使用其内容。
增强系统206提供使得用户能够增强(例如,注释或以其他方式修改或编辑)与经由客户端应用104产生的内容例如消息相关联的媒体内容的各种功能。例如,增强系统206提供与生成和发布用于由服务器系统108处理的内容的媒体覆盖相关的功能。增强系统206基于客户端设备102的地理位置可操作地向消息客户端应用104供应媒体覆盖或增强(例如,图像过滤)。在另一示例中,增强系统206基于其他信息(例如客户端设备102的用户的社交网络信息)可操作地向消息收发客户端应用104供应媒体覆盖。媒体覆盖可以包括音频和视觉内容以及视觉效果。音频和视觉内容的示例包括图片、文本、标志、动画和声音效果。视觉效果的示例包括颜色覆盖。音频和视觉内容或视觉效果可以应用于客户端设备102处的媒体内容项(例如,照片)。例如,媒体覆盖可以包括可以覆盖在由客户端设备102拍摄的照片之上的文本或图像。在另一示例中,媒体覆盖包括位置标识(例如,威尼斯海滩)覆盖、实况事件的名称或商家名称(例如,海滩咖啡馆)覆盖。在另一示例中,增强系统206使用客户端设备102的地理位置来标识包括在客户端设备102的地理位置处的商家的名称的媒体覆盖。媒体覆盖可以包括与商家相关联的其他标记。媒体覆盖可以存储在数据库118中并通过数据库服务器116被访问。
在一些示例中,增强系统206提供基于用户的发布平台,该发布平台使得用户能够选择地图上的地理位置,并且上传与所选择的地理位置相关联的内容。用户还可以指定特定媒体覆盖应当被提供给其他用户的环境。增强系统206生成包括所上传的内容的媒体覆盖并且将所上传的内容与所选择的地理位置相关联。
在其他示例中,增强系统206提供基于商家的发布平台,该发布平台使得商家能够经由竞价过程来选择与地理位置相关联的特定媒体覆盖。例如,增强系统206将最高出价商家的媒体覆盖与对应的地理位置相关联达预定义时间量。
地图系统208提供各种地理定位功能,并且支持客户端应用104呈现基于地图的媒体内容和消息。例如,地图系统208使得能够在地图上显示(例如,存储在图3的简档数据308中)用户图标或化身,以指示用户“朋友”的当前或过去位置,以及由这些朋友在地图的上下文内生成的媒体内容(例如,包括照片和视频的消息的集合)。例如,在客户端应用104的地图界面上,可以将用户从特定地理位置发布到服务器系统108的消息在地图的该特定位置的上下文内显示给特定用户的“朋友”。用户还可以经由客户端应用104与服务器系统108的其他用户(例如,使用适当的状况化身)共享他的或她的位置和状况信息,其中,在客户端应用104的地图界面的上下文内该位置和状况信息被类似地显示给所选择的用户。
游戏系统210在客户端应用104的上下文内提供各种游戏功能。客户端应用104提供游戏界面,该游戏界面提供可用游戏的列表,该游戏可以由用户在客户端应用104的上下文内启动,并与服务器系统108的其他用户一起玩。服务器系统108还使得特定用户能够通过从客户端应用104向其他用户发出邀请来邀请这样的其他用户参与玩特定游戏。客户端应用104还支持在游戏上下文内进行语音消息收发和文本消息收发(例如,聊天)两者,为游戏提供排行榜,并且还支持提供游戏内奖励(例如,币和物品)。
AR内容创建系统128可生成接受可以用于生成增强现实内容的输入的一个或更多个用户界面。经由一个或更多个用户界面获得的输入可以用于确定与增强现实内容相关联的一个或更多个特征。在各种示例中,使用来自AR内容创建系统128的数据生成的一个或更多个用户界面可以包括使得用户能够将一个或更多个视觉效果与增强现实内容相关联的创作工具。在一个或更多个示例中,使用从AR内容创建系统128获得的数据生成的一个或更多个用户界面可以将一个或更多个音频效果与增强现实内容相关联。增强系统206可以结合AR内容创建系统128来操作,以根据经由由AR内容创建系统128生成的用户界面获得的输入生成增强现实内容。例如,增强系统206可以结合AR内容创建系统128来操作,以生成对应于增强现实内容的计算机可读指令,该计算机可读指令可被执行以产生与用户内容有关的视觉效果或音频效果中的至少一个。AR内容创建系统128还可以生成实现跟踪客户端应用104的用户与增强现实内容的交互的用户界面数据。在一个或更多个示例中,AR内容创建系统128可以生成用户界面数据,该用户界面数据使得能够与增强现实内容的一个或更多个特征进行交互并使得与该一个或更多个特征的交互能够被记录。
AR内容使用系统130可以确定增强现实内容的使用量(an amount of usage)。在一个或更多个实现方式中,AR内容使用系统130可以确定与经由客户端应用104执行的增强现实内容交互的次数。在各种示例中,AR内容使用系统130可以确定与经由客户端应用104执行的增强现实内容的一个或更多个指定特征交互的次数。此外,AR内容使用系统130可以确定与增强现实内容交互的客户端应用104的用户的特性。例如,AR内容使用系统130可以确定与增强现实内容交互的客户端应用104的用户的表征,该表征指示人口统计特征、位置信息、与客户端应用104的一个或更多个特征相关的使用度量、与一个或更多个增强现实内容项相关的使用度量、或者与一个或更多个增强现实内容项交互的客户端应用104的用户相关的内容消费信息中的至少一个。
此外,内容管理系统132可以为一个或更多个用户界面生成指示与客户端应用104的用户对应的度量的数据,所述用户经由客户端应用104与增强现实内容交互。在一个或更多个示例中,增强现实内容的创建者可以请求查看与创建者生成的一个或更多个增强现实内容项相关的一个或更多个度量。响应于该请求,内容管理系统132可以生成指示所请求的使用度量的用户界面数据。在各种示例中,内容管理系统132可以结合AR内容使用系统130来操作,以获得对应于该请求的度量,并生成指示所请求的度量的用户界面数据。
图3是示出根据一个或更多个示例实现方式的可以存储在服务器系统108的数据库118中的数据结构300的示意图。虽然数据库118的内容被示出为包括多个表,但是应当理解,数据可以存储在其他类型的数据结构中(例如,作为面向对象的数据库)。
数据库118包括存储在消息表302中的消息数据。对于任何特定的一个消息,该消息数据至少包括消息发送方数据、消息接收方(或接收器)数据和有效载荷。
实体表304存储实体数据,并且(例如,参考地)链接至实体图306和简档数据308。其记录被维护在实体表302内的实体可以包括个人、公司实体、组织、对象、地点、事件等。不管实体类型如何,服务器系统108针对其存储了数据的任何实体都可以是被识别的实体。每个实体设置有唯一标识符以及实体类型标识符(未示出)。
实体图306存储关于实体之间的关系和关联的信息。仅作为示例,这样的关系可以是基于感兴趣的或基于活动的社交关系、职业关系(例如,在共同的公司或组织工作)。
简档数据308存储关于特定实体的多种类型的简档数据。简档数据308可以基于特定实体指定的隐私设置被选择性地使用并呈现给架构100的其他用户。在实体是个人的情况下,简档数据308包括例如用户名、电话号码、地址、设置(例如,通知和隐私设置)以及用户选择的化身表示(或这样的化身表示的集合)。特定用户然后可以选择性地将这些化身表示中的一个或更多个包括在经由架构100传送的消息或其他数据的内容内,以及在由客户端应用104向其他用户显示的地图界面上。化身表示的集合可以包括“状态化身”,其呈现用户可以选择在特定时间进行传送的状态或活动的图形表示。
在实体是团体的情况下,除了团体名称、成员和相关团体的各种设置(例如,通知)之外,团体的简档数据308还可以类似地包括与团体相关联的一个或更多个化身表示。
数据库118还在增强表310中存储增强数据,例如覆盖或过滤器。增强数据与视频(针对其数据被存储在视频表314中)和图像(针对其数据被存储在图像表316中)相关联并且应用于视频和图像。
在一个示例中,过滤器是在向接收方用户呈现期间被显示为覆盖在图像或视频上的覆盖物。过滤器可以是各种类型的,包括当发送方用户正在编写消息时由客户端应用104呈现给发送用户的一组过滤器中用户选择的过滤器。其他类型的过滤器包括地理位置过滤器(也称为地理过滤器),其可以基于地理位置被呈现给发送用户。例如,可以基于由客户端设备102的全球定位系统(GPS)单元确定的地理位置信息,由客户端应用104在用户界面内呈现特定于附近或特殊位置的地理位置过滤器。
另一类型的过滤器是数据过滤器,其可由客户端应用104基于在消息创建期间由客户端设备102收集的其他输入或信息来选择性地呈现给发送用户。数据过滤器的示例包括特定位置处的当前温度、发送用户行进的当前速度、客户端设备102的电池寿命或当前时间。
可以被存储在图像表316内的其他增强数据包括增强现实内容项(例如,对应于应用镜头或增强现实体验)。增强现实内容项可以是可以被添加至图像或视频的实时特殊效果和声音。
如上所述,增强数据包括增强现实内容项、覆盖、图像变换、AR图像,以及涉及可以应用于图像数据(例如,视频或图像)的修改的类似项。这包括实时修改,其在使用客户端设备102的设备传感器(例如,一个或更多个摄像装置)捕获图像时对图像进行修改并且然后在客户端设备102的屏幕上显示具有修改的图像。这还包括对所存储的内容的修改,例如可以被修改的图库中的视频剪辑。例如,在访问多个增强现实内容项的客户端设备102中,用户可以将单个视频剪辑与多个增强现实内容项一起使用来查看不同的增强现实内容项将如何修改所存储的剪辑。例如,通过针对内容选择不同的增强现实内容项,可以将应用不同伪随机运动模型的多个增强现实内容项应用于同一内容。类似地,实时视频捕获可以与所示出的修改一起使用,以示出当前由客户端设备102的传感器捕获的视频图像将如何修改所捕获的数据。这样的数据可以简单地被显示在屏幕上并且不被存储在存储器中,或者由设备传感器捕获的内容可以在有或没有修改(或两者)的情况下被记录并被存储在存储器中。在一些系统中,预览特征可以示出不同的增强现实内容项同时在显示器中的不同窗口内看起来如何。这可以例如使得能够同时在显示器上观看具有不同伪随机动画的多个窗口。
因此,数据以及使用增强现实内容项或其他这样的变换系统来使用该数据修改内容的各种系统可以涉及:对象(例如,面部、手、身体、猫、狗、表面、对象等)的检测;当这样的对象离开、进入视频帧中的视场以及在视场周围移动时对这样的对象进行跟踪;以及当跟踪这样的对象时对这样的对象进行修改或变换。在各种实现方式中,可以使用用于实现这样的变换的不同方法。一些示例可以涉及生成一个或多个对象的三维网格模型,并且使用视频内的模型的变换和动画纹理来实现变换。在其他示例中,可以使用对对象上的点的跟踪来将图像或纹理(其可以是二维或三维的)放置在所跟踪的位置处。在又一示例中,视频帧的神经网络分析可以用于将图像、模型或纹理放置在内容(例如,图像或视频的帧)中。因此,增强现实内容项既涉及用于创建内容中的变换的图像、模型和纹理,又涉及利用对象检测、跟踪和放置实现这样的变换所需的附加建模和分析信息。
可以利用保存在任何类型的计算机化系统的存储器中的任何类型的视频数据(例如,视频流、视频文件等)来执行实时视频处理。例如,用户可以加载视频文件并将它们保存在设备的存储器中,或者可以使用设备的传感器来生成视频流。另外,可以使用计算机动画模型来处理任何对象,例如人的面部和人体的部分、动物、或非生命事物(例如椅子、汽车或其他对象)。
在一些示例中,当连同要变换的内容一起选择特定修改时,计算设备标识要变换的元素,并且然后如果所述元素存在于视频帧中,则检测并跟踪它们。根据针对修改的请求来修改对象的元素,从而变换视频流的帧。可以通过用于不同类型的变换的不同方法来执行视频流的帧的变换。例如,对于主要涉及改变对象元素的形式的帧的变换,计算针对对象的每个元素的特征点(例如,使用主动形状模型(ASM)或其他已知方法)。然后,针对对象的至少一个元素中的每个元素生成基于特征点的网格。该网格用于跟踪视频流中的对象的元素的后续阶段。在跟踪过程中,所提及的针对每个元素的网格与每个元素的位置对准。然后,在网格上生成附加点。基于针对修改的请求来针对每个元素生成第一点的第一集合,并且基于第一点的集合和针对修改的请求来针对每个元素生成第二点的集合。然后,可以基于第一点和第二点的集合以及网格通过修改对象的元素来对视频流的帧进行变换。在这样的方法中,也可以通过跟踪和修改背景来改变或扭曲被修改对象的背景。
在一些示例中,可以通过计算针对对象的每个元素的特征点并基于所计算的特征点生成网格来执行使用对象的元素改变对象的一些区域的变换。在网格上生成点,并且然后生成基于这些点的各种区域。然后通过将针对每个元素的区域与针对至少一个元素中的每个元素的位置对准来跟踪对象的元素,并且可以基于针对修改的请求来修改区域的特性,从而变换视频流的帧。根据针对修改的特定请求,可以以不同的方式来对所提及的区域的特性进行变换。这样的修改可以涉及改变区域的颜色;从视频流的帧中去除区域的至少一些部分;将一个或更多个新对象包括到基于针对修改的请求的区域中;以及修改或扭曲区域或对象的元素。在各种实现方式中,可以使用这样的修改或其他类似修改的任何组合。对于要被动画化的某些模型,可以选择一些特征点作为要用于确定针对模型动画的选项的整个状态空间的控制点。
在使用面部检测来变换图像数据的计算机动画模型的一些示例中,使用特定的面部检测算法(例如,Viola-Jones)在图像上检测面部。然后,将主动形状模型(ASM)算法应用于图像的面部区域以检测面部特征参考点。
可以使用适合于面部检测的其他方法和算法。例如,在一些实现方式中,使用表示在所考虑的大多数图像中存在的可区分点的界标(landmark)来定位特征。例如,对于面部界标,可以使用左眼瞳孔的位置。在初始界标不可标识的情况下(例如,如果人具有眼罩),则可以使用次级界标。这样的界标标识过程可以用于任何这样的对象。在一些示例中,界标的集合形成形状。可以使用形状中的点的坐标将形状表示为向量。利用使形状点之间的平均欧几里得距离最小化的相似性变换(允许平移、缩放和旋转)将一个形状与另一个形状对准。平均形状是对准的训练形状的平均。
在各种示例中,开始从与由全局面部检测器确定的面部的位置和大小对准的平均形状搜索界标。然后,这样的搜索重复以下步骤:通过对每个点周围的图像纹理进行模板匹配来调整形状点的位置来建议暂定形状,并且然后使暂定形状符合全局形状模型,直到出现收敛。在一个或更多个系统中,单独的模板匹配是不可靠的,并且形状模型汇集弱模板匹配器的结果以形成更强的整体分类器。从粗分辨率到细分辨率,在图像金字塔中的每一级处重复整个搜索。
变换系统可以在客户端设备(例如,客户端设备102)上捕获图像或视频流,并且在客户端设备102上本地执行复杂的图像操纵,同时保持适当的用户体验、计算时间和功耗。复杂的图像操纵可以包括大小和形状改变、情感变换(例如,将面部从皱眉改变为微笑)、状态变换(例如,使主体变老、减小外表年龄、改变性别)、风格变换、图形元素应用以及由已经被配置成在客户端设备102上有效执行的卷积神经网络实现的任何其他合适的图像或视频操纵。
用于变换图像数据的计算机动画模型可以由如下系统使用,在该系统中,用户可以使用具有作为在客户端设备102上操作的客户端应用104的一部分而操作的神经网络的客户端设备102来捕获用户的图像或视频流(例如,自拍照)。在客户端应用104内操作的变换系统确定图像或视频流内面部的存在,并且提供与用于变换图像数据的计算机动画模型相关联的修改图标,或者计算机动画模型可以与本文描述的接口相关联地存在。修改图标包括可以是用于作为修改操作的一部分修改图像或视频流内的用户面部的基础的变化。一旦选择了修改图标,则变换系统发起转换用户的图像以反映所选择的修改图标的过程(例如,生成关于用户的微笑面部)。一捕获图像或视频流并且选择了指定的修改,就可以在客户端设备102上显示的图形用户界面中呈现修改后的图像或视频流。变换系统可以在图像或视频流的一部分上实现复杂的卷积神经网络,以生成和应用所选择的修改。也就是说,用户可以捕获图像或视频流,并且一旦选择了修改图标,就可以实时或接近实时地呈现修改后的结果。此外,在捕获视频流并且所选择的修改图标保持切换时,修改可以是持久的。机器教导的神经网络可以用于实现这样的修改。
呈现由变换系统执行的修改的图形用户界面可以向用户供应附加的交互选项。这样的选项可以基于用于发起特定计算机动画模型的选择和内容捕获的界面(例如,从内容创建者用户界面发起)。在各种实现方式中,在初始选择修改图标之后,修改可以是持久的。用户可以通过轻敲或以其他方式选择正由变换系统修改的面部来切换修改的开或关,并对其进行存储以供稍后查看或浏览成像应用的其他区域。在变换系统修改多个面部的情况下,用户可以通过轻敲或选择在图形用户界面内修改和显示的单个面部来全局地切换修改的开或关。在一些实现方式中,可以分别修改多个面部的组中的各个面部,或者可以通过轻敲或选择图形用户界面内显示的各个面部或一系列各个面部来分别切换这样的修改。
故事表312存储关于消息和相关联的图像、视频或音频数据的集合的数据,所述消息和相关联的图像、视频或音频数据被编译成集合(例如,故事或图库)。特定集合的创建可以由特定用户(例如,其记录被维护在实体表304中的每个用户)发起。用户可以创建以已经由该用户创建和发送/广播的内容的集合的形式的“个人故事”。为此,客户端应用104的用户界面可以包括用户可选择以使得发送用户能够将特定内容添加至他或她的个人故事的图标。
集合还可以构成“实况故事”,“实况故事”是被手动地、自动地或使用手动和自动技术的组合来创建的来自多个用户的内容的集合。例如,“实况故事”可以构成来自不同位置和事件的用户提交的内容的策展流。其客户端设备具有启用的位置服务并且在特定时间处于共同位置事件的用户可以例如经由客户端应用104的用户界面被呈现有选项,以向特定实况故事贡献内容。可以由客户端应用104基于他的或她的位置向用户标识实况故事。最终结果是从社群角度讲述的“实况故事”。
另一类型的内容集合被称为“位置故事”,“位置故事”使得其客户端设备102位于特定地理位置(例如,在学院或大学校园)内的用户能够对特定集合做出贡献。在一些示例中,对位置故事的贡献可能需要第二程度的认证来验证终端用户属于特定组织或其他实体(例如,是大学校园中的学生)。
如上所述,视频表314存储视频数据,在一个示例中,视频数据与其记录保持在消息表302内的消息相关联。类似地,图像表316存储与其消息数据存储在实体表304中的消息相关的图像数据。实体表304可以将来自增强表310的各种增强与存储在图像表316和视频表314中的各种图像和视频相关联。
数据库118还可以存储AR内容使用表318,AR内容使用表318存储指示增强现实内容的使用度量的数据。在各种示例中,AR内容使用表318可以包括存储各个增强现实内容项的使用度量的一个或更多个数据结构。度量可以指示客户端应用104的用户与增强现实内容项交互的次数。此外,数据库118可以存储AR内容用户表320,AR内容用户表320指示经由客户端应用104与增强现实内容项交互的客户端应用104的用户。AR内容用户表320可以包括与一个或更多个增强现实内容项交互的客户端应用104的用户的一个或更多个标识符。一个或更多个标识符可以用于访问使用客户端应用104与增强现实内容交互的客户端应用104的用户的简档信息。在一个或更多个示例中,AR内容用户表320可以存储经由客户端应用104与增强现实内容交互的客户端应用104的用户的简档信息的至少一部分。
图4是根据一些实现方式的内容400的示例框架的示意图。内容400可以由客户端应用104生成。在各种示例中,内容400可以通过客户端应用104的第一实例生成,并传送至客户端应用104的第二实例或服务器系统108中的至少一个。在内容400包括消息的情况下,内容400可以用于填充存储在数据库118内并可由应用服务器114访问的消息表302。在一个或更多个实现方式中,内容400可以作为客户端设备102或应用服务器114中的至少一个的“在途”或“飞行中”数据存储在存储器中。内容400
被示出为包括以下分量的至少一部分:
·内容标识符402:标识内容400的唯一标识符。
·内容文本有效载荷404:要由用户经由客户端设备102的用户界面生成并且包括在内容400中的文本。
·内容图像有效载荷406:由客户端设备102的摄像装置部件捕获或从客户端设备102中的存储器部件检索并且包括在内容400中的图像数据。发送或接收的内容400的图像数据可以存储在图像表316中。
·内容视频有效载荷408:由摄像装置部件捕获或从客户端设备102的存储器部件检索并且包括在内容400中的视频数据。发送或接收的内容400的视频数据可以存储在视频表314中。
·内容音频有效载荷410:由麦克风捕获或从客户端设备102的存储器部件检索并且包括在内容400中的音频数据。
·内容增强数据412:表示要应用于内容400的内容图像有效载荷406、内容视频有效载荷408或内容音频有效载荷410的增强的增强数据(例如,过滤器、贴纸或者其他注释或增强)。发送或接收的内容400的增强数据可以存储在增强表310中。
·内容持续时间参数414:以秒为单位指示内容400(例如,内容图像有效载荷406、内容视频有效载荷408、内容音频有效载荷410)的一个或更多个部分将被呈现或使得用户可经由客户端应用104访问的时间量的参数值。
·内容地理位置参数416:与消息的内容有效载荷相关联的地理位置数据(例如,纬度和经度坐标)。多个内容地理位置参数416值可以被包括在有效载荷中,这些参数值中的每个参数值与关于包括在内容中的内容项(例如,内容图像有效载荷406内的特定图像或内容视频有效载荷408中的特定视频)相关联。
·内容故事标识符418:标识与内容400的内容图像有效载荷406中的特定项相关联的一个或更多个内容集合(例如,故事表312中标识的“故事”)的标识符值。例如,内容图像有效载荷406内的多个图像可以各自使用标识符值与多个内容集合相关联。
·内容标签420:每个内容400可以用多个标签来标记,多个标签中的每个标签指示包括在内容有效载荷中的内容的主题。例如,在包括在内容图像有效载荷406中的特定图像描绘动物(例如,狮子)的情况下,指示相关动物的标签值可以包括在内容标签420内。标签值可以基于用户输入手动生成或者可以使用例如图像识别自动生成。
·内容发送者标识符422:指示在其上生成内容400并且从其发送内容400的客户端设备102的用户的标识符(例如,消息收发系统标识符、电子邮件地址或设备标识符)。
·内容接收者标识符424:指示内容400寻址到的客户端设备102的用户的标识符(例如,消息收发系统标识符、电子邮件地址或设备标识符)。
·AR被跟踪特征标识符426:与内容400对应的增强现实内容的特征的标识符,所述特征可能具有被监视或跟踪的使用量。在一个或更多个示例中,AR被跟踪特征标识符426可以对应于与客户端应用104的用户可选择的用户界面元素相关联的增强现实内容项的特征。
内容400的各个分量的数据(例如,值)可以对应于指向在其内存储数据的表中的位置的指针。例如,内容图像有效载荷406中的图像值可以是指向图像表316内的位置(或地址)的指针。类似地,内容视频有效载荷408内的值可以指向存储在视频表310内的数据,存储在内容增强表412内的值可以指向存储在增强表310中的数据,存储在内容故事标识符418内的值可以指向存储在故事表312中的数据,并且存储在内容发送者标识符422和内容接收者标识符424内的值可以指向存储在实体表304内的用户记录。此外,AR被跟踪特征标识符426的值可以指向存储在包括AR内容使用表318的数据结构内的数据。在这些场景中,存储在AR内容使用表318中的用于相应AR被跟踪特征标识符426的数据可以对应于客户端应用104的用户与内容400的增强现实内容项的特征的交互量。
图5是示出根据一个或更多个示例实现方式的分析增强现实内容使用数据的架构500的图形表示。架构500可以包括AR内容创建者502。AR内容创建者502可以包括创建要由客户端应用104执行的增强现实内容的一个或更多个实体。在一个或更多个示例中,AR内容创建者502可以包括客户端应用104的一个或更多个用户。在另外的示例中,AR内容创建者502可以包括为客户端应用104提供增强现实内容的一个或更多个第三方。在另外的示例中,AR内容创建者502可以包括维护和实现服务器系统108的服务提供商。在这些场景中,AR内容创建者502可以是维护和实现客户端应用104的服务提供商。
在一个或更多个说明性示例中,AR内容创建者502可以创建AR内容项136。AR内容项136可以由客户端应用104执行,以生成关于使用客户端应用104可访问的用户内容的一个或更多个视觉效果或一个或更多个音频效果中的至少一个。AR内容项136可以包括可由客户端应用104执行以修改AR内容项136的外观或声音特征中的至少一个的计算机可读指令。例如,客户端应用的用户504可以生成用户内容。用户内容可以包括包含图像内容、视频内容或音频内容中的至少一个的一个或更多个内容项。在各种示例中,用户504可以经由客户端设备102的一个或更多个输入设备来捕获用户内容。为了说明,用户504可以利用客户端设备102的一个或者多个摄像装置来捕获图像内容。在这些情况下,AR内容项136可以通过修改包括在用户内容中的一个或更多个对象的外观来修改图像内容。在另外的示例中,用户504可以利用客户端设备102的一个或更多个麦克风来捕获音频内容。在这些场景中,AR内容项136可以修改包括在用户内容中的音频内容的至少一部分。
AR内容创建者502可以提供用于生成AR内容项136的AR内容创建数据506。AR内容创建者502可以向服务器系统108提供AR内容创建数据506。在一个或更多个实现方式中,AR内容创建系统128可以使用AR内容创建数据506来生成AR内容项136。在一个或更多个示例中,可以使用一个或更多个用户界面来提供AR内容创建数据506。在各种示例中,一个或更多个用户界面可以由AR内容创建系统128生成。一个或更多个用户界面可以包括一个或更多个用户界面元素,以捕获可以用于生成增强现实内容的数据。
在各种示例中,AR内容创建数据506可以指示要由服务器系统108监视或跟踪的客户端应用104的用户关于AR内容项136的一个或多个交互。例如,AR内容创建数据506可以指示AR内容使用系统130要跟踪AR内容项136被分享的次数。在另外的示例中,AR内容创建数据506可以指示AR内容使用系统130要跟踪AR内容项136被包括在消息中的次数。在其他示例中,AR内容创建数据506可以指示AR内容使用系统130要跟踪AR内容项136应用于用户内容的次数。AR内容创建数据506还可以指示要跟踪AR内容项136的一个或更多个特征的使用。为了说明,AR内容项136可以包括客户端应用的用户可以与之交互的一个或更多个特征。在一个或更多个示例中,AR内容项136可以包括一个或更多个特征,所述一个或更多个特征可以被进行以下中至少之一:被客户端应用104的用户选择、移动或修改。与AR内容项136的特征的交互可以基于经由客户端设备102的一个或更多个输入设备获得的用户输入。例如,与AR内容项136的特征的交互可以包括以下至少一个:使用手指或其他工具触摸AR内容项136的用户界面元素达至少阈值时间段;使用手指或其他工具悬停在AR内容项136的用户界面元素上方;选择并移动AR内容项136的用户界面元素;滑动AR内容项136的用户界面元素;相对于AR内容项136的用户界面元素执行聚拢操作(例如,使两个手指更靠近),或者相对于AR内容项136的用户界面元素执行扩展操作(例如,使两个指指彼此远离)。
在一个或更多个说明性示例中,AR内容项136可以包括动画,该动画包括用户504可以与之交互的角色。例如,用户504可以使该角色移动一个或更多个身体部位。在这些情况下,AR内容创建数据506可以指示身体部位中的至少一个是AR内容项136的特征,对于该特征的交互要由服务器系统108跟踪。用户504还可以使角色在用户界面内改变位置。在各种示例中,AR内容创建数据506可以指示修改角色的位置可以是要由服务器系统108跟踪的与AR内容项136的交互。此外,用户504可以使角色发出一个或更多个可听噪声。在这些场景中,AR内容创建数据506可以指示使得角色产生可听噪声中的至少一个是要由服务器系统108跟踪的AR内容项136的特征。
AR内容创建数据506可以经由一个或更多个模板而获得,所述模板指示关于AR内容项的特征或交互中的至少一个,对于该AR内容项,用户交互可以由服务器系统108跟踪。在这些情况下,AR内容创建者502可以使用模板来指示关于要由服务器系统108跟踪的AR内容项136的特征或交互中的至少一个。因此,在使用一个或更多个模板来指示要被跟踪的增强现实内容项的特征或交互中的至少一个的情况下,AR内容创建系统128实施标准化方法来识别要由服务器系统108监视或跟踪的增强现实内容项的特征或交互中的至少一个。在另外的示例中,AR内容创建系统128可以提供用户界面,所述用户界面能够驱使用户选择要被跟踪的增强现实内容项的特征或交互中的至少一个。为了说明,AR内容创建者502可以使用输入设备来指示要由服务器系统108跟踪的AR内容项136的任何数目的特征、与AR内容项的交互或以上两者。在这些情况中,AR内容创建系统128可以实现定制方法,以识别要由服务器系统108监视或跟踪的增强现实内容项的特征或交互中的至少一个。在一个或更多个实现方式中,AR内容创建系统128可以实现选择要由服务器系统108监视的AR内容项的特征或与AR内容项的交互中的至少一个的定制和标准化方法的组合。
在图5的说明性示例中,AR内容项136可以包括第一AR交互508、第二AR交互510,直到第N AR交互512。AR内容使用系统130可以跟踪第一AR交互、第二AR交互510或第N AR交互512中的至少一个。例如,AR内容创建者502可以在AR内容创建数据506中指示服务器系统108要监视第一AR交互508、第二AR交互510或第N AR交互512中的至少一个。在一个或更多个示例中,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以与用户504可以与之交互的AR内容项136的特征相关。例如,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以对应于用户504可以与之交互的对象或对象的一部分。在另外的示例中,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以对应于可以关于AR内容项136执行的附加动作。为了说明,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以对应于用户504向客户端应用104的一个或更多个用户分享与AR内容项136相关的用户内容。在各种示例中,与AR内容项136相关的用户内容可以由用户504经由客户端应用104的社交网络功能来被分享。在另外的示例中,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以对应于用户504生成包括与AR内容项136相关的用户内容的消息,其中该消息可经由客户端应用104被接收者访问。在一个或更多个实现方式中,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以对应于经由客户端应用104显示的用户界面元素。
第一AR交互508可以对应于第一使用度量514。第一使用度量514可以指示客户端应用104的用户执行第一AR交互508的频率。在一个或更多个示例中,第一使用度量514可以指示客户端应用104的一个或更多个用户执行第一AR交互508的次数。在各种示例中,第一使用度量514可以指示客户端应用104的用户在诸如一小时、一天、一周、一个月等时间段内执行第一AR交互508的次数。在附加的示例中,第一使用度量514可以对应于客户端应用104的各个用户执行第一AR交互508的平均次数。第一使用度量514可以由AR内容使用系统130基于由客户端应用104的用户的客户端设备102执行的客户端应用104的实例获得的数据来确定。
第一AR交互508还可以与第一用户简档数据516相关联。第一用户简档数据516可以包括关于执行第一AR交互508的客户端应用104的用户的信息。第一用户简档数据516可以指示执行第一AR交互508的客户端应用104的用户的人口统计信息或位置信息中的至少一个。第一用户简档数据516还可以指示执行第一AR交互508的客户端应用104的用户的内容使用特性。内容使用特性可以指示由执行第一AR交互508的客户端应用104的用户消费的内容的内容源。内容使用特性还可以指示与客户端应用104的用户交互的增强现实内容的类型。此外,内容使用特性可以指示与客户端应用104的用户交互的各个AR内容项。在一个或更多个示例中,内容使用特性可以指示由执行第一AR交互508的客户端应用104的用户与一个或更多个内容源或内容类型中的至少一个交互的频率。
在一个或更多个示例中,响应于获得指示已经执行第一AR交互508的信息,AR内容使用系统130可以确定执行第一AR交互508的客户端应用104的用户。在各种示例中,客户端应用104的各个用户可以与标识符相关联。例如,标识符可以包括唯一识别客户端应用104的各个用户的多个字母数字字符或符号。标识符可以由客户端应用104的各个用户来提供,或者标识符可以由实现和维护客户端应用104或服务器系统108中的至少一个的服务提供商来确定。在各种示例中,由客户端应用104的各个用户执行的一个或更多个动作可以生成包括客户端应用104的用户的标识符并且指示所执行的一个或更多个动作的数据。数据可以被发送至服务器系统108并且由AR内容使用系统130分析以确定执行了一个或更多个动作的客户端应用104的相应用户。另外,AR内容使用系统130可以访问执行了一个或更多个动作的相应用户的简档信息。为了说明,AR内容使用系统130可以使用执行一个或更多个动作的客户端应用104的用户的标识符来查询一个或更多个数据存储体例如数据库118,以访问由一个或更多个数据存储体存储的用户的简档信息。以这种方式,AR内容使用系统130可以关联执行一个或更多个动作的用户的一个或更多个特性。AR内容使用系统130可以聚集执行第一AR交互508的客户端应用104的多个用户的简档信息,以确定执行第一AR交互508的客户端应用104的用户的表征。
以与第一AR交互508类似的方式,第二AR交互510可以与第二使用度量518和第二用户简档数据520相关联,并且第N AR交互512可以与第N使用度量522和第N用户简档数据524相关联。另外,AR内容使用系统130可以基于客户端应用104的用户的标识符来确定执行第二AR交互510或第N AR交互512中的至少一个的客户端应用104的用户例如用户504。
内容管理系统132可以生成AR内容创建者502可访问的仪表板526。仪表板526可以包括一个或更多个用户界面528,一个或更多个用户界面528包括关于AR内容项136的信息。仪表板526中包括的信息可以包括AR内容使用度量530。AR内容使用度量530可以由AR内容使用系统130来确定,并且指示定量测量,所述定量测量指示客户端应用104的用户关于AR内容项136的交互。在各种示例中,AR内容使用度量530可以指示客户端应用104的用户执行第一AR交互508、第二AR交互510或第N AR交互512中的一个或更多个的频率或周期中的至少一个。AR内容使用度量530可以经由一个或更多个图表、一个或更多个表格或一个或更多个图形中的至少一个来显示。
仪表板526还可以包括AR内容用户表征信息532。AR内容用户表征信息532可以指示执行第一AR交互508、第二AR交互510或第N AR交互512中的至少一个的客户端应用104的用户的特性。AR内容用户表征信息532可以由AR内容使用系统130生成。在一个或更多个示例中,AR内容用户表征信息532可以包括关于与AR内容项136交互的客户端应用104的用户相对于客户端应用104的其他用户的特性的信息。例如,AR内容用户表征信息532可以指示执行第一AR交互508的客户端应用104的用户的数目相对于与其他AR内容项136交互的客户端应用104的用户的数目。为了说明,AR内容用户表征信息532可以指示执行第一AR交互508的客户端应用104的用户比不经由客户端应用104与增强现实内容交互的客户端应用104的用户更有可能经由客户端应用104与增强现实内容交互。另外,AR内容用户表征信息532可以指示与执行第一AR交互508的客户端应用104的至少阈值数目的用户对应的一个或更多个人口统计特征或一个或更多个位置特征中的至少一个。在一个或更多个说明性示例中,AR内容用户表征信息532可以指示执行第一AR交互508的客户端应用104的至少50%的用户在25至40岁之间,并且执行第一AR交互508的客户端应用104的至少75%的用户生活在具有人口超过250,000人的城市中。
AR内容创建者502的仪表板526中包括的信息可以基于由服务器系统108从AR内容创建者502的一个或更多个计算设备接收的仪表板请求534。仪表板请求534可以指示关于与由AR内容创建者502生成的AR内容交互的客户端应用104的用户的内容使用度量或特性中的至少一个的一个或更多个标准。在一个或更多个示例中,内容管理系统132可以提供一个或更多个用户界面,AR内容创建者502可以使用所述一个或更多个用户界面来指定要包括在仪表板526中的信息。一个或更多个用户界面可以包括指示要包括在仪表板526中的信息的类型的选项。在图5的说明性示例中,服务器系统108可以向AR内容创建者502发送仪表板UI信息536,仪表板UI信息536包括用于显示仪表板526的一个或更多个用户界面528的信息。
在一个或更多个示例中,内容管理系统132可以提供一个或更多个用户界面,所述一个或更多个用户界面包括可被选择以包括指示AR内容项136的使用频率例如第一AR交互508、第二AR交互510或第N AR交互512中的至少一个的出现频率的度量的选项。一个或更多个用户界面还可以包括可被选择以使得信息经由仪表板526显示的选项,该信息与和AR内容项136交互的客户端应用104的用户的一个或更多个特性相关。为了说明,内容管理系统132可以提供一个或更多个用户界面,所述一个或更多个用户界面包括可被选择以查看与AR内容项136交互的客户端应用104的用户的一个或更多个人口统计特性、与AR内容项136交互的客户端应用104的用户的一个或更多个位置特性、与AR内容项136交互的客户端应用104的用户的一个或更多个内容消费历史特性、其一个或更多个组合等的选项。
此外,内容管理系统132可以提供一个或更多个用户界面,所述一个或更多个用户界面包括可被选择以指示用于呈现仪表板526中包括的信息的一种或更多种视觉格式的选项。例如,内容管理系统132可以提供一个或更多个用户界面,所述一个或更多个用户界面包括可被选择以数字形式显示AR内容使用度量530或AR内容用户表征信息532中的至少一个的一个或更多个选项。在附加的示例中,内容管理系统132可以提供一个或更多个用户界面,所述一个或更多个用户界面包括可被选择以表格格式显示AR内容使用度量530或AR内容用户表征信息532中的至少一个的一个或更多个选项。内容管理系统132还可以提供一个或更多个用户界面,所述一个或更多个用户界面包括可被选择以图形形式例如饼图、线图、条形图、其组合等显示AR内容使用度量530或AR内容用户表征信息532中的至少一个的一个或更多个选项。
在一个或更多个实现方式中,内容管理系统132可以提供指示AR内容项136的目标受众的信息。在各种示例中,与AR内容项136的目标受众相关的信息可以包括在仪表板UI信息536中。在附加的示例中,目标受众信息可以与仪表板UI信息536分开提供。在一个或更多个示例中,目标受众可以由AR内容使用系统130基于与AR内容创建者502的增强现实内容例如AR内容项136交互的客户端应用104的用户的使用度量和用户简档数据来确定。目标受众信息可以指示具有与AR内容项136交互的至少阈值概率的客户端应用104的用户的人口统计特性或位置特性中的至少一个。例如,目标受众信息可以指示具有执行第一AR交互508的至少阈值概率的客户端应用104的用户的人口统计特性或位置特性中的至少一个。另外,目标受众信息可以指示具有执行第二AR交互510的至少阈值概率的客户端应用104的用户的人口统计特性或位置特性中的至少一个。在各种示例中,关于第一AR交互508的目标受众信息可以不同于关于第二AR交互510的目标受众信息。此外,目标受众信息可以指示具有与AR内容项136交互例如执行第一AR交互508或第二AR交互510的至少阈值概率的客户端应用104的用户的内容消费特性。内容消费特性可以包括被客户端应用104的用户查看或访问的内容类型(例如,视频内容、音频内容、图像内容、文本内容、增强现实内容等)、被客户端应用104的用户查看或访问的内容的内容源、经由客户端应用104的一种或更多种类型的内容的使用频率、经由客户端应用104的来自一个或更多个源的内容的使用频率、用于经由客户端应用104访问内容的一个或更多个通道、或者它们的一个或更多个组合。
在确定AR内容项136的目标受众之后,服务器系统108可以从AR内容创建者502获得指示可以用于经由客户端应用104推广AR内容项136的一个或更多个通道的输入。在一个或更多个示例中,AR内容创建者502可以通过在搜索结果的相对较高的位置呈现AR内容项136来指示AR内容项136将被推广给包括在目标受众中的客户端应用104的用户,所述搜索结果是响应于针对AR内容的搜索请求而产生的,所述搜索请求指向与AR内容项136相关联的一个或更多个关键词。在这些场景中,AR内容项136可以以将AR内容项136移动至更靠近提供给包括在向服务器系统108提交搜索请求的目标受众中的客户端应用104的用户的搜索结果的顶部的方式来加权。在一个或更多个附加的示例中,AR内容创建者502可以通过将AR内容项136包括在经由客户端应用104提供的内容推荐中来指示AR内容项136将被推广给包括在目标受众中的客户端应用104的用户。
在一个或更多个实现方式中,可以通过相对于经由客户端应用104可访问的附加AR内容项的至少一个子集的平均使用度量来分析第一AR交互508的使用度量和用户简档数据来确定客户端应用104的用户执行第一AR交互508的阈值概率。例如,AR内容使用系统130可以跨客户端应用104的多个用户确定AR内容项136的平均使用量,并且然后确定使用AR内容项136多于AR内容项136的平均使用量的客户端应用104的用户的特性。AR内容使用系统130可以基于可以包括在目标受众中的客户端应用104的用户的数目来确定客户端应用104的用户包括在AR内容项136的目标受众中的阈值概率。AR内容使用系统130可以基于用户的特性与具有AR内容项136的至少阈值使用量的客户端应用104的用户的特性之间的相似性的度量来确定客户端应用104的用户在AR内容项136的目标受众中的可能性或概率。可以相对于阈值概率来分析客户端应用104的用户在目标受众中的可能性或概率,以确定是否将该用户包括在AR内容项136的目标受众中。
在一个或更多个说明性示例中,AR内容项136可以与一个或更多个产品例如一个或更多个美容产品相关。一个或更多个产品可以经由客户端应用104可供购买。在各种示例中,第一AR交互508可以对应于在由客户端应用104生成的用户界面内选择第一产品,第二AR交互510可以对应于在由客户端应用104生成的用户界面内选择第二产品,并且第N AR交互512可以对应于在由客户端应用104生成的用户界面内选择第N产品。在这些场景中,第一产品可以与第一可选择用户界面元素相关联,第二产品可以与第二可选择用户界面元素相关联,并且第N产品可以与第N可选择用户界面元素相关联。响应于客户端应用104的用户执行第一AR交互508、第二AR交互510或第N AR交互512,一个或更多个视觉效果可以被应用于用户内容。在一个或更多个示例中,第一AR交互508可以对应于第一产品,并且对与第一产品对应的用户界面元素的选择可以使得与第一产品的特性相关的一个或更多个视觉效果被应用于用户内容。在用户内容包括客户端应用104的用户的一个或更多个面部特征并且第一产品是美容产品的情况下,对与第一产品对应的第一用户界面元素的选择可以使得用户内容以示出第一产品被应用于一个或更多个面部特征(例如将眼影应用于用户内容中包括的一只或更多只眼睛周围的区域)的方式被修改。在第二AR交互510对应于第二产品的一个或更多个场景中,对与第二产品对应的用户界面元素的选择可以使得用户内容以示出第二产品被应用于一个或更多个面部特征的方式被修改。第一产品和第二产品可以是相同类型的产品(例如,眼影),但是可以具有不同的特性,例如不同的颜色、不同的色调、不同的亮度、不同的阴影、不同的光泽度等。在附加的示例中,第一产品和第二产品可以是不同类型的产品。为了说明,第一产品可以是眼影,并且第二产品可以是口红。此外,第一产品和第二产品可以是以下中至少之一:由不同制造商生产或由不同零售商提供购买。在其他情况下,第一产品和第二产品可以是以下中至少之一:由同一制造商生产或由同一零售商提供购买。
仪表板526中包括的信息还可以与经由客户端应用104提供购买的一个或更多个产品相关,其中,产品对应于由增强现实内容的创建者生成的增强现实内容项。例如,AR内容创建者502可以是一个或更多个产品的制造商或销售商中的至少一个,并且AR内容项136可以包括对应于与AR内容创建者502制造或销售的一个或更多个产品相关的一个或更多个增强现实内容项的一个或更多个用户界面元素。在一个或更多个示例中,第一AR交互508、第二AR交互510或第N AR交互512中的至少一个可以对应于由AR内容创建者502经由客户端应用104提供购买的产品。在一个或更多个附加的示例中,AR内容项136可以包括对应于由多个不同实体制造或销售的产品的用户界面元素。为了说明,第一AR交互508可以对应于由第一制造商或第一销售商提供购买的第一产品,并且第二AR交互510可以对应于由第二制造商或第二销售商提供购买的第二产品。
在一个或更多个说明性示例中,仪表板526可以包括可被选择以查看关于与客户端应用104执行的增强现实内容项相关的一个或更多个产品的信息的多个选项。仪表板526可以安排与增强现实内容项的使用相关的数据,所述增强现实内容项对应于与增强现实内容项相关的多个产品。仪表板526中包括的信息可以指示与多个产品相关的增强现实内容项的使用次数或频率。在各种示例中,仪表板526中包括的信息可以指示增强现实内容项的视觉效果被应用于用户内容的次数或频率,其中,视觉效果与将产品应用于用户内容中包括的一个或更多个对象相关。
图6示出了用于分析增强现实内容使用数据的过程的一个或更多个实现方式的流程图。过程可以体现在由一个或更多个处理器执行的计算机可读指令中,使得过程的操作可以部分或全部由客户端应用104或服务器系统108中的至少一个的功能部件来执行。因此,在一些情况下,下面描述的过程是作为参考的示例。然而,在其他实现方式中,关于图6描述的过程的至少一些操作可以部署在各种其他硬件配置上。因此,关于图6描述的过程不旨在限于服务器系统108或客户端设备102,而是可以全部或部分地由一个或更多个附加部件来实现。尽管所描述的流程图可以将操作示出为顺序过程,但是许多操作可以并行或同时执行。另外,可以重新安排操作的顺序。当过程的操作完成时,该过程终止。过程可以对应于方法、程序、算法等。方法的操作可以全部或部分执行,可以与其他方法中的一些或所有操作结合执行,并且可以通过任何数目的不同系统例如本文描述的系统或者其任何部分例如包括在任何系统中的处理器执行。
图6是示出根据一个或更多个示例实现方式的用于确定与一个或更多个增强现实内容项交互的客户端应用用户的表征的过程600的示例操作的流程图。在操作602处,过程600可以包括生成经由客户端应用可显示的增强现实内容项。客户端应用可以包括客户端应用104,并且具有社交网络功能或消息收发功能中的至少一个。增强现实内容项可以修改用户内容的外观,所述用户内容例如为由客户端设备的至少一个摄像装置捕获的图像内容或视频内容。修改用户内容的外观可以包括关于用户内容中包括的一个或更多个对象应用一个或更多个视觉效果。在增强现实内容项与产品相关的场景中,修改用户内容的外观可以包括将产品的一个或更多个视觉特性应用于用户内容。增强现实内容项可以包括如下计算机可读指令:所述计算机可读指令可被执行以经由客户端应用来修改用户内容。
可以基于经由一个或更多个用户界面获得的输入来生成增强现实内容项。一个或更多个用户界面可以包括用于设计增强现实内容项的一个或更多个用户界面元素。例如,一个或更多个用户界面元素可以包括响应于增强现实内容项的执行而产生一个或更多个视觉效果的一个或更多个创作工具。一个或更多个用户界面可以包括用于上传可以用于生成增强现实内容项的内容的一个或更多个用户界面元素。
另外,在操作604处,过程600可以包括接收指示要跟踪增强现实内容项的使用的用户输入。在各种示例中,用户输入可以经由可被选择以指示要跟踪增强现实内容项的一个或更多个特征的一个或更多个交互或使用中的至少一个的标准化的一组用户界面元素来捕获。用户输入可以经由可以用于构建增强现实内容项并指示要跟踪增强相关内容项的使用的工具来捕获。在一个或更多个示例中,可被选择以指示要跟踪增强现实内容项的一个或更多个特征的一个或更多个交互或使用中的至少一个的用户界面元素基于与增强现实内容项相关的类型。例如,改变用户内容中包括的诸如面部特征的一个或更多个对象的视觉外观的增强现实内容项可以包括可以被监视的一个或更多个第一特征,并且包括用户内容中显示的动画的增强现实内容项可以包括可以被监视的不同于一个或更多个第一特征的一个或更多个第二特征。
可以被跟踪或监视的增强现实内容项的特征可以包括客户端应用的用户可以与之交互的对象的一个或更多个部分。另外,可以被跟踪或监视的增强现实内容项的特征可以被选择以将与产品相关的视觉效果应用于用户内容中包括的一个或更多个对象。在一个或更多个示例中,可以被跟踪或监视的增强现实内容项的特征可以被选择来发起金融交易以购买经由客户端应用提供购买的至少一个产品。
此外,用户输入可以指示要跟踪或监视的与增强现实内容项的一种或更多种类型的交互。为了说明,用户输入可以指示要跟踪客户端应用的用户对增强现实内容项的分享。另外,用户输入可以指示要跟踪与增强现实内容项相关的消息。在一个或更多个实现方式中,还可以跟踪将增强现实内容添加至由客户端应用的用户激活的一组增强现实内容项。在各种示例中,该组增强现实内容项可以与客户端应用的用户的账户相关联,并且可以例如经由轮播用户界面元素向用户显示。用户输入还可以指示要跟踪增强现实内容项被应用于用户内容的次数。在一个或更多个示例中,增强现实内容项可以响应于对用户界面元素的选择而被应用于用户内容,该用户界面元素对应于增强现实内容项并且引起用户内容的改变,该用户内容可以包括视频内容、图像内容、文本内容或音频内容中的至少一个。
在操作606处,过程600可以包括确定客户端应用的一个或更多个用户与增强现实内容项的交互量。在一个或更多个实现方式中,服务器系统可以监视从由客户端应用的用户的相应客户端设备执行的客户端应用的实例接收的数据,以获取指示关于增强现实内容项已经发生了交互的信息。例如,客户端应用可以被执行以响应于与增强现实内容项的交互来生成数据,并且将该数据发送至服务器系统。在各种示例中,可以基于与对应于增强现实内容项的至少一个用户界面元素的交互来生成与增强现实内容项的交互相关的数据。响应于从客户端应用接收到指示与增强现实内容项的交互的数据,服务器系统可以将与交互相关的信息存储在对应于增强现实内容项的数据结构中。在附加的场景中,客户端应用的各个实例可以收集、存储和分析与增强现实内容项的交互。
与增强现实内容项的交互量可以包括增强现实内容项已经被进行以下中至少之一的次数:应用于用户内容、与客户端应用的其他用户分享或包括在消息中。与增强现实内容项的交互量还可以包括客户端应用的用户已经与增强现实内容项的一个或更多个特征交互的次数。在一个或更多个示例中,与增强现实内容项的交互量可以对应于客户端应用的用户与增强现实内容项交互的频率。
此外,在操作608处,过程600可以包括确定与增强现实内容项交互的客户端应用的一个或更多个用户的简档信息。在一个或更多个示例中,客户端应用可以确定与增强现实内容项交互的客户端应用的各个用户的标识符。客户端应用还可以向服务器系统发送与增强现实内容项交互的客户端应用的用户的相应标识符。服务器系统可以使用用户标识符来解析一个或更多个数据存储体(data stores),以确定关于与增强现实内容项交互的客户端应用的用户的信息。从一个或更多个数据存储体获得的简档信息可以包括人口统计信息、位置信息或内容消费信息中的至少一个。简档信息可以基于来自增强现实内容项的创建者的、识别与增强现实内容项交互的客户端应用的用户的指定特性的一个或更多个请求。简档信息还可以基于客户端应用的用户的特性,所述特性可以预测与一个或更多个增强现实内容项交互或者与一种或更多种类型的增强现实内容项交互的客户端应用的用户。
在操作610处,过程600可以包括基于简档信息来确定增强现实内容项的用户的表征。表征可以指示与增强现实内容项交互的客户端应用的用户的特性。在一个或更多个示例中,表征可以指示具有与增强现实内容项的至少阈值量的交互的客户端应用的用户之间共有的特性。例如,服务器系统可以确定对应于客户端应用的用户子集的与增强现实内容项的交互量。为了说明,服务器系统可以确定与增强现实内容项的交互量落在与增强现实内容项交互的客户端应用的前25%的用户内的客户端应用的用户。服务器系统然后可以确定子集内的用户所共有的特性。在附加的示例中,服务器系统可以确定子集中包括的用户的一个或更多个特性的值的范围。在各种示例中,服务器系统可以确定具有与增强现实内容项的至少阈值量的交互的客户端应用的一定百分比的用户共有的特性。
在一个或更多个实现方式中,可以向增强现实内容项的创建者提供与增强现实内容项交互的客户端应用的用户的表征。例如,可以向增强现实内容项的创建者提供指示与增强现实内容项交互的客户端应用的用户的特性的一个或更多个用户界面。在一个或更多个示例中,与增强现实内容项交互的客户端应用的用户的表征可以用于确定增强现实内容项的目标受众。目标受众可以包括尚未与增强现实内容项交互的客户端应用的用户或者尚未将增强现实内容项添加至相应用户的增强现实内容项集合的客户端应用的用户中的至少一个。
在各种示例中,可以向目标受众中包括的客户端应用的至少一部分用户提供关于增强现实内容项的信息。为了说明,可以在客户端应用的内容发现部分中为包括在目标受众中的客户端应用的至少一部分用户提供关于增强现实内容项的信息。在附加的示例中,在与目标受众中的客户端应用的至少一部分用户提供的搜索请求相关的搜索结果中,可以向关于该增强现实内容项的信息给予更高的优先级。在至少一些示例中,搜索请求可以包括对应于增强现实内容项的一个或更多个关键词。在一个或更多个示例中,目标受众的成员可以接收对包括增强现实内容项的增强现实内容的推荐。此外,目标受众的成员可以接收作为活动的一部分的广告,以获得对增强现实内容项的获知。
图7是根据一个或更多个示例实现方式的用户界面700的图示,用户界面700包括可以结合到增强现实内容中的特征。用户界面700可以经由客户端设备102的显示设备来被显示,并且由客户端设备102执行的客户端应用例如客户端应用104来产生。用户界面700可以包括可以用于修改用户内容中包括的一个或更多个对象的外观的一个或更多个产品702的视图。在各种示例中,一个或更多个产品702可以包括一个或更多个美容产品。在图7的说明性示例中,一个或更多个产品可以包括可以应用于个人眼睛附近的区域的不同颜色的眼影。在一个或更多个示例中,不同颜色的眼影可以是以下中至少之一:由一个或更多个实体制造或销售。也就是说,在一些情况下,眼影的颜色可以由同一实体例如同一制造商或零售商制造或销售,而在其他情况下,至少一些不同颜色的眼影可以由不同的实体例如不同的制造商或零售商制造或销售。
一个或更多个产品702可以包括在客户端设备102的至少一个摄像装置例如摄像装置704的视野中。在一个或更多个实现方式中,一个或更多个产品702的图像内容可以由摄像装置704捕获并且用于创建增强现实内容。例如,对应于一个或更多个产品的图像内容可以用于生成增强现实内容项,该增强现实内容项被执行以产生示出了一个或更多个产品被应用于用户内容中包括的一个或更多个对象的一个或更多个视觉效果。在各种示例中,增强现实内容项可以将一个或更多个产品的一个或更多个特性应用于用户内容。用户内容可以包括由摄像装置704捕获的附加图像内容或视频内容。
用户界面700还可以包括一组用户界面元素706,所述一组用户界面元素706对应于可以应用于经由摄像装置704捕获的用户内容的增强现实内容项的集合。用户界面元素706中的每一个可以是可选择的,以执行关于用户内容的相应的增强现实内容项。执行增强现实内容项可以使得一个或更多个视觉效果被应用于用户内容,以改变用户内容中包括的一个或更多个对象的外观。在图7的说明性示例中,该组用户界面元素706可以包括用户界面元素708,用户界面元素708对应于可以被执行以将一个或更多个美容产品应用于包括在由摄像装置704捕获的用户内容中的个人的增强现实内容项。在各种示例中,用户界面700可以是相对于对应于用户界面元素708的增强现实内容项生成的一系列用户界面中的第一用户界面。
图8是根据一个或更多个示例实现方式的用户界面800的图示,用户界面800包括可以应用增强现实内容项的用户内容802。用户界面800可以经由客户端设备102的显示设备来被显示,并且由客户端设备102执行的客户端应用例如客户端应用104来产生。在一个或更多个示例中,用户界面800可以在用户界面700之后生成,并且可以包括一系列用户界面中的对应于与用户界面元素708相关的增强现实内容项的附加用户界面。在各种示例中,用户内容802可以由摄像装置704捕获,并且可以包括个人的一个或更多个身体部位。在图8的说明性示例中,用户内容802可以包括个人的前臂。
图9是根据一个或更多个示例实现方式的用户界面900的图示,用户界面900包括应用于用户内容的增强现实内容,其中增强现实内容的多个特征与可选择的用户界面元素相关联。用户界面900可以经由客户端设备102的显示设备来被显示,并且由客户端设备102执行的客户端应用例如客户端应用104来产生。用户界面900可以示出经修改的用户内容902,经修改的用户内容902可以是图8的用户内容802的修改版本。在各种示例中,经修改的用户内容902可以是图7的用户界面700所示出的一个或更多个产品被应用于用户界面800所示出的用户内容的结果。在一个或更多个示例中,经修改的用户内容902可以包括应用于个人前臂的不同颜色的眼影。在一个或更多个示例中,用户界面900可以在图8的用户界面800之后生成,并且可以包括一系列用户界面中的与和用户界面元素708相关的增强现实内容项相关联的另一用户界面。
在一个或更多个实现方式中,图9所示出的每种眼影颜色可以对应于可选择的用户界面元素。例如,颜色1可以与第一用户界面元素904相关联,并且颜色2可以与第二用户界面元素906相关联。在各种示例中,第一用户界面元素904可以被选择以执行将第一眼影颜色应用于个人的一只或更多只眼睛附近的区域的第一增强现实内容项,并且第二用户界面元素可以被选择以执行将第二眼影颜色应用于个人的一只或更多只眼睛附近的区域的第二增强现实内容项。在一个或更多个附加的示例中,第一用户界面元素904可以被选择以显示与和第一眼影颜色相关联的第一产品相关的信息,并且第二用户界面元素可以被选择以显示与和第二眼影颜色相关联的第二产品相关的信息。
图10是根据一个或更多个示例实现方式的环境1000的表示,环境1000包括显示用户界面1002的客户端设备102,用户界面1002包括关于AR内容创建者的一个或更多个增强现实内容项的信息。用户界面1002可以经由客户端设备102的显示设备来被显示,并且由客户端设备102执行的客户端应用例如客户端应用104来产生。在一个或更多个示例中,客户端设备102可以由AR内容创建者或AR内容创建者的代表来操作。在一个或更多个说明性示例中,用户界面1002可以相对于图5的仪表板526来被显示。
用户界面1002可以包括第一部分1004,第一部分1004包括AR内容创建者的标识符1006。第一部分1004还可以包括用户界面元素1008,用户界面元素1008使得能够选择一个或更多个选项来显示关于由AR内容创建者创建的增强现实内容项的信息。用户界面1002还可以包括第二部分1010,第二部分1010包括关于由AR内容创建者生成的多个增强现实内容项中的相应增强现实内容项的信息。第二部分1010可以包括增强现实内容项的标识符例如名称、增强现实内容项被更新的日期和时间、以及增强现实内容项的状态。
另外,用户界面1002可以包括第三部分1012,第三部分1012包括关于增强现实内容项的多个使用度量。例如,第三部分1012可以指示客户端应用104的用户已经查看了增强现实内容项的次数。此外,第三部分1012可以指示客户端应用104的用户已经播放或以其他方式执行增强现实内容项的次数、以及客户端应用104的用户已经分享增强现实内容项的次数。第三部分1012还可以包括关于增强现实内容项的附加信息例如增强现实内容项的系统标识符。系统标识符可以是由服务器系统108用以跟踪增强现实内容项的使用的标识符。此外,第三部分1012可以包括用户界面元素1014,用户界面元素1014可被选择以分享关于增强现实内容项的信息。
图11是根据一个或更多个示例实现方式的环境1100的表示,环境1100包括显示附加用户界面1102的客户端设备102,附加用户界面1102包括关于AR内容创建者的一个或更多个增强现实内容项的信息。用户界面1102可以经由客户端设备102的显示设备来被显示,并且由客户端设备102执行的客户端应用例如客户端应用104来产生。在一个或更多个示例中,客户端设备102可以由AR内容创建者或AR内容创建者的代表来操作。在一个或更多个说明性示例中,用户界面1102可以相对于图5的仪表板526来被显示。
用户界面1102可以包括第一部分1104,第一部分1104包括下述多个选项,所述多个选项可被选择以查看与由服务提供商提供的一个或更多个服务相关的信息,该服务提供商收集并分析关于增强现实内容项的使用信息。在各种示例中,服务提供商可以进行以下中的至少之一:实现或维护服务器系统108。第一部分1104还可以包括下述多个选项,所述多个选项可被选择以查看与一个或更多个报告相关的信息,所述一个或更多个报告与提供与增强现实内容项的使用对应的数据的相应服务选项相关联。在图11的说明性示例中,用户界面1102所示出的信息对应于与多个产品相关的增强现实内容项。在各种示例中,可以执行对应于产品的增强现实内容,以通过基于与相应产品相关的视觉效果修改一个或更多个对象的视觉外观来将相应产品的特性应用于用户内容中包括的一个或更多个对象。另外,关于图11的说明性示例,已经选择了对应于报告选项3的用户界面元素1106,其中,报告选项3与服务选项2相关。
用户界面1102还可以包括第二部分1108,第二部分1108包括与第一部分1104中包括的所选择的选项对应的信息。例如,第二部分1108可以包括与产品类别中包括的多个产品相关的增强现实内容项的使用信息。除了指示产品类别和产品名称之外,第二部分1108可以指示各个产品的标识符,例如与各个产品相关的数字标识符、对应于各个产品的增强现实内容项的使用次数、以及用户内容被捕获并被增强现实内容项修改的次数。此外,第二部分1108可以指示对应于各个产品的品牌,其中,品牌可以指示相应产品的销售商或制造商中的至少一个。
图12是根据一个或更多个示例实现方式的环境1200的表示,环境1200包括显示用户界面1202的客户端设备102,用户界面1202包括表征与增强现实内容项交互的客户端应用的用户的信息。用户界面1202可以经由客户端设备102的显示设备来被显示,并且由客户端设备102执行的客户端应用例如客户端应用104来产生。在一个或更多个示例中,客户端设备102可以由AR内容创建者或AR内容创建者的代表来操作。在一个或更多个说明性示例中,用户界面1202可以相对于图5的仪表板526来被显示。
用户界面1202可以包括多个选项1204,多个选项1204可被选择以生成不同的信息视图,所述信息视图指示使用一个或更多个增强现实内容项经由客户端应用104修改用户内容的客户端应用104的用户的特性。用户界面1202还可以包括用户界面元素1206,用户界面元素1206可操作以选择与一个或更多个增强现实内容项的使用相关的信息的日期范围。另外,用户界面1202可以包括第一部分1208,第一部分1208包括与一个或更多个增强现实内容项的使用度量相关的信息,例如一个或更多个增强现实内容项的日常唯一查看、一个或更多个增强现实内容项的总唯一查看、一个或更多个增强现实内容项的日常核心用户、以及客户端应用104的用户查看一个或更多个增强现实内容项的平均时间量。在各种示例中,增强现实内容项的核心用户可以指示在给定时间段内使用增强现实内容项至少阈值次数或阈值时间量的客户端应用104的用户。
此外,用户界面1202可以包括第二部分1210,第二部分1210指示与一个或更多个增强现实内容项的使用相关的随时间的性别人口统计。性别人口统计可以指示在时间段期间使用一个或更多个增强现实内容项的客户端应用104的用户的数目以及这些用户的相应性别。另外,用户界面1202可以包括第三部分1212,第三部分1212指示与一个或更多个增强现实内容项的使用相关的随时间的年龄人口统计。年龄人口统计可以指示在时间段期间使用一个或更多个增强现实内容项的客户端应用104的用户的数目以及这些用户的相应年龄。
图13是示出根据一些示例实现方式的能够从机器可读介质(例如,机器可读存储介质)读取指令并且执行本文中讨论的方法中的任何一种或更多种方法的机器1300的部件的框图。具体地,图13示出了呈计算机系统的示例形式的机器1300的图形表示,在机器1300内可以执行用于使机器1300执行本文中讨论的方法中的任何一种或更多种方法的指令1302(例如,软件、程序、应用、小程序、应用(app)或其他可执行代码)。因此,可以使用指令1302来实现本文中描述的模块或部件。指令1302将通用的未经编程的机器1300转换成被编程为以所描述的方式执行所描述和示出的功能的特定机器1300。在替选实现方式中,机器1300作为独立设备操作或者可以耦接(例如,联网)到其他机器。在联网部署中,机器1300可以在服务器-客户端网络环境中以服务器机器或客户端机器的身份(capacity)来操作,或者在对等(或分布式)网络环境中作为对等机器操作。机器1300可以包括但不限于:服务器计算机、客户端计算机、个人计算机(PC)、平板计算机、膝上型计算机、上网本、机顶盒(STB)、个人数字助理(PDA)、娱乐媒体系统、蜂窝电话、智能电话、移动设备、可穿戴设备(例如,智能手表)、智能家居设备(例如,智能家用电器)、其他智能设备、网络设备(webappliance)、网络路由器、网络交换机、网络桥接器或者能够顺序地或以其他方式执行指定要由机器1300采取的动作的指令1302的任何机器。此外,虽然仅示出了单个机器1300,但是术语“机器”还应被认为包括单独地或联合地执行指令1302以执行本文中讨论的任何一种或更多种方法的机器的集合。
机器1300可以包括处理器1304、存储器/存储装置1306和I/O部件1318,所述处理器1304、存储器/存储装置1306和I/O部件1318可以被配置成例如经由总线1310彼此通信。在示例实现方式中,处理器1304(例如,中央处理单元(CPU)、简化指令集计算(RISC)处理器、复杂指令集计算(CISC)处理器、图形处理单元(GPU)、数字信号处理器(DSP)、专用集成电路(ASIC)、射频集成电路(RFIC)、另一处理器或其任何合适的组合)可以包括例如可以执行指令1302的处理器1312和处理器1314。术语“处理器”旨在包括多核处理器1304,该多核处理器1304可以包括可以同时执行指令1302的两个或更多个独立的处理器(有时被称为“核”)。尽管图10示出了多个处理器1304,但是机器1300可以包括具有单个核的单个处理器1312、具有多个核的单个处理器1312(例如,多核处理器)、具有单个核的多个处理器1312、1314、具有多个核的多个处理器1312、1314、或其任何组合。
存储器/存储装置1306可以包括存储器例如主存储器1316或其他存储装置以及存储单元1318,处理器1304能够例如经由总线1310访问主存储器1316和存储单元1318两者。存储单元1318和主存储器1316存储实施本文中描述的方法或功能中的任一种或更多种方法或功能的指令1302。指令1302还可以在其被机器1300执行期间完全地或部分地驻留在主存储器1316内、存储单元1318内、处理器1304中的至少一个内(例如,处理器的高速缓冲存储器内)或者它们的任何合适的组合内。因此,主存储器1316、存储单元1318以及处理器1304的存储器是机器可读介质的示例。
I/O部件1308可以包括用于接收输入、提供输出、产生输出、传送信息、交换信息、捕获测量结果等的各种部件。包括在特定机器1300中的具体I/O部件1308将取决于机器的类型。例如,诸如移动电话的便携式机器将很可能包括触摸输入设备或其他这样的输入机构,而无终端(headless)服务器机器将很可能不包括这样的触摸输入设备。将理解的是,I/O部件1308可以包括图10中未示出的许多其他部件。仅出于简化以下讨论的目的,根据功能对I/O部件1308进行分组,并且该分组决不是限制性的。在各种示例实现方式中,I/O部件1308可以包括用户输出部件1320和用户输入部件1322。用户输出部件1320可以包括视觉部件(例如,诸如等离子体显示面板(PDP)、发光二极管(LED)显示器、液晶显示器(LCD)、投影仪或阴极射线管(CRT))、声学部件(例如,扬声器)、触觉部件(例如,振动马达、阻力机构)、其他信号发生器等。用户输入部件1322可以包括字母数字输入部件(例如,键盘、被配置成接收字母数字输入的触摸屏、光电键盘或其他字母数字输入部件)、基于指向的输入部件(例如,鼠标、触摸板、轨迹球、操纵杆、运动传感器或其他指向仪器)、触觉输入部件(例如,物理按钮、提供触摸或触摸手势的位置和/或力的触摸屏或其他触觉输入部件)、音频输入部件(例如,麦克风)等。
在其他示例实现方式中,I/O部件1308可以包括生物计量部件1324、运动部件1326、环境部件1328或定位部件1330以及各种其他部件。例如,生物计量部件1324可以包括用于检测表达(例如,手表达、面部表达、声音表达、身体姿势或眼睛跟踪)、测量生物信号(例如,血压、心率、体温、出汗或脑电波)、识别人(例如,语音识别、视网膜识别、面部识别、指纹识别或基于脑电图的识别)等的部件。运动部件1326可以包括:加速度传感器部件(例如,加速度计)、重力传感器部件、旋转传感器部件(例如,陀螺仪)等。环境部件1328可以包括例如照明传感器部件(例如,光度计)、温度传感器部件(例如,检测环境温度的一个或更多个温度计)、湿度传感器部件、压力传感器部件(例如,气压计)、声音传感器部件(例如,检测背景噪声的一个或更多个麦克风)、接近度传感器部件(例如,检测附近对象的红外传感器)、气体传感器(例如,用于检测危险气体的浓度以确保安全或者用于测量大气中的污染物的气体检测传感器)或者可以提供与周围物理环境对应的指示、测量结果或信号的其他部件。定位部件1330可以包括位置传感器部件(例如,全球定位系统(GPS)接收器部件)、高度传感器部件(例如,检测可以从其得到高度的气压的高度计或气压计)、定向传感器部件(例如,磁力计)等。
可以使用各种技术来实现通信。I/O部件1308可以包括通信部件1332,通信部件1332能够进行操作以将机器1300耦接至网络1334或设备1336。例如,通信部件1332可以包括网络接口部件或其他合适的设备以与网络1334接口。在其他示例中,通信部件1332可以包括有线通信部件、无线通信部件、蜂窝通信部件、近场通信(NFC)部件、部件(例如,)、部件以及经由其他模态提供通信的其他通信部件。设备1336可以是另外的机器1300或各种外围设备中的任何外围设备(例如,经由USB耦接的外围设备)。
此外,通信部件1332可以检测标识符或者可以包括可操作以检测标识符的部件。例如,通信部件1332可以包括射频识别(RFID)标签阅读器部件、NFC智能标签检测部件、光学阅读器部件(例如,用于检测诸如通用产品码(UPC)条形码的一维条形码、诸如快速响应(QR)码的多维条形码、Aztec码、数据矩阵、数据符号(Dataglyph)、最大码(MaxiCode)、PDF417、超码(Ultra Code)、UCC RSS-2D条形码以及其他光学码的光学传感器)或声学检测部件(例如,用于识别标记的音频信号的麦克风)。另外,可以经由通信部件1332得到各种信息,例如经由因特网协议(IP)地理位置得到位置、经由信号三角测量得到位置、经由检测可以指示特定位置的NFC信标信号得到位置等。
图14是示出包括示例软件架构1402的系统1400的框图,示例软件架构1402可以与本文中描述的各种硬件架构结合使用。图14是软件架构的非限制性示例,并且应当理解,可以实现许多其他架构以促进本文中描述的功能。软件架构1402可以在硬件例如图10的机器1300上执行,图10的机器1300包括处理器1304、存储器/存储装置1306和输入/输出(I/O)部件1308等。代表性硬件层1404被示出并且可以表示例如图13的机器1300。代表性硬件层1404层包括具有相关联的可执行指令1408的处理单元1406。可执行指令1408表示软件架构1402的可执行指令,包括本文中描述的方法、部件等的实现。硬件层1404还包括同样具有可执行指令1408的存储器和/或存储模块即存储器/存储装置1410中的至少一个。硬件层1404还可以包括其他硬件1512。
在图14的示例架构中,软件架构1402可以被概念化为其中每个层提供特定功能的层的堆叠。例如,软件架构1402可以包括诸如操作系统1414、库1416、框架/中间件1418、应用1420和呈现层1422的层。在操作上,层内的应用1420和/或其他部件可以通过软件堆叠来调用API调用1424以及响应于API调用1424来接收消息1426。所示出的层本质上是代表性的,并且并非所有软件架构都具有所有层。例如,一些移动操作系统或专用操作系统可能不提供框架/中间件1418,而其他操作系统可能提供这样的层。其他软件架构可以包括附加层或不同层。
操作系统1414可以管理硬件资源并且提供公共服务。操作系统1414可以包括例如内核1428、服务1430和驱动器1432。内核1428可以充当硬件层与其他软件层之间的抽象层。例如,内核1428可以负责存储器管理、处理器管理(例如,调度)、部件管理、联网、安全设置等。服务1430可以为其他软件层提供其他公共服务。驱动器1432负责控制底层硬件或与底层硬件接口(interface)。例如,取决于硬件配置,驱动器1432包括显示驱动器、摄像装置驱动器、驱动器、闪速存储器驱动器、串行通信驱动器(例如,通用串行总线(USB)驱动器)、驱动器、音频驱动器、电源管理驱动器等。
库1416提供由应用1420、其他部件或层中的至少一个使用的公共基础设施。库1416提供下述功能,所述功能允许其他软件部件以比与底层操作系统1414的功能(例如,内核1428、服务1430和/或驱动器1432)直接接口的方式更容易的方式来执行任务。库1416可以包括系统库1434(例如,C标准库),系统库1434可以提供函数例如存储器分配函数、串操纵函数、数学函数等。另外,库1416可以包括API库1436,例如媒体库(例如,支持各种媒体格式诸如MPEG4、H.264、MP3、AAC、AMR、JPG、PNG的呈现和操纵的库)、图形库(例如,可以用于在显示器上呈现二维和三维图形内容的OpenGL框架)、数据库库(例如,可以提供各种关系数据库功能的SQLite)、网络库(例如,可以提供网络浏览功能的WebKit)等。库1416还可以包括各种其他库1438,以向应用1420和其他软件部件/模块提供许多其他API。
框架/中间件1418(有时也称为中间件)提供可以由应用1420和/或其他软件部件/模块使用的较高级别的公共基础设施。例如,框架/中间件1418可以提供各种图形用户界面功能、高级资源管理、高级位置服务等。框架/中间件1418可以提供可以由应用1420和/或其他软件部件/模块利用的广泛的其他API,其中一些API可以专用于特定的操作系统1414或平台。
应用1420包括内置应用1440和/或第三方应用1442。代表性内置应用1440的示例可以包括但不限于:联系人应用、浏览器应用、书籍阅读器应用、位置应用、媒体应用、消息收发应用和/或游戏应用。第三方应用1442可以包括由除特定平台的供应商之外的实体使用ANDROIDTM或IOSTM软件开发工具包(SDK)开发的应用,并且可以是在诸如IOSTM、ANDROIDTM、Phone的移动操作系统或其他移动操作系统上运行的移动软件。第三方应用1442可以调用由移动操作系统(例如,操作系统1414)提供的API调用1424以促进本文中描述的功能。
应用1420可以使用内置操作系统功能(例如,内核1428、服务1430和/或驱动器1432)、库1416和框架/中间件1418来创建UI以与系统的用户交互。可替选地或另外地,在一些系统中,可以通过呈现层例如呈现层1422来进行与用户的交互。在这些系统中,应用/部件“逻辑”可以与应用/部件的与用户交互的方面分开。
术语表:
该上下文中的“载波信号”是指能够存储、编码或携载由机器1300执行的暂态或非暂态指令1302的任何无形介质,并且包括数字通信信号或模拟通信信号或者其他无形介质以促进这样的指令1302的通信。可以经由网络接口设备利用暂态或非暂态传输介质并且利用多个公知的传输协议中的任何一种传输协议来通过网络110、1334发送或接收指令1302。
该上下文中的“客户端设备”是指与通信网络110、1334接口以从一个或更多个服务器系统或其他客户端设备102获得资源的任何机器1300。客户端设备102可以是但不限于移动电话、桌上型计算机、膝上型计算机、便携式数字助理(PDA)、智能电话、平板计算机、超级本、上网本、膝上型计算机、多处理器系统、基于微处理器或可编程的消费电子产品、游戏控制台、机顶盒或用户可以用于访问网络110、1334的任何其他通信设备。
该上下文中的“通信网络”是指网络110、1334的一个或更多个部分,网络可以是自组织网络、内联网、外联网、虚拟专用网络(VPN)、局域网(LAN)、无线LAN(WLAN)、广域网(WAN)、无线WAN(WWAN)、城域网(MAN)、因特网、因特网的一部分、公共交换电话网(PSTN)的一部分、普通老式电话服务(POTS)网络、蜂窝电话网络、无线网络、网络、其他类型的网络或两个或更多个这样的网络的组合。例如,网络110、1334或网络110、1334的一部分可以包括无线网络或蜂窝网络,并且耦接可以是码分多址(CDMA)连接、全球移动通信系统(GSM)连接或其他类型的蜂窝或无线耦接。在该示例中,耦接可以实现各种类型的数据传输技术中的任何一种,例如单载波无线电传输技术(1xRTT)、演进数据优化(EVDO)技术、通用分组无线电业务(GPRS)技术、增强型数据速率GSM演进(EDGE)技术、包括3G的第三代合作伙伴计划(3GPP)、第四代无线(4G)网络、通用移动电信系统(UMTS)、高速分组接入(HSPA)、全球微波接入互操作性(WiMAX)、长期演进(LTE)标准、由各种标准设置组织定义的其他标准、其他远程协议或其他数据传输技术。
该上下文中的“短暂消息”是指可以在时间有限的持续时间内访问的消息。短暂消息可以是文本、图像、视频等。短暂消息的访问时间可以由消息发送方设置。可替选地,访问时间可以是默认设置或者由接收者指定的设置。无论设置技术如何,该消息都是暂态的。
该上下文中的“机器可读介质”是指能够临时或永久地存储指令1302和数据的部件、设备或其他有形介质,并且可以包括但不限于随机存取存储器(RAM)、只读存储器(ROM)、缓冲存储器、闪速存储器、光学介质、磁介质、高速缓冲存储器、其他类型的存储装置(例如,可擦除可编程只读存储器(EEPROM))和/或其任何合适的组合。术语“机器可读介质”应当被认为包括能够存储指令1302的单个介质或多个介质(例如,集中式或分布式数据库或者相关联的高速缓冲存储器和服务器)。术语“机器可读介质”还应被认为包括能够存储由机器1300执行的指令1302(例如,代码)的任何介质或多个介质的组合,使得指令1302在由机器1300的一个或更多个处理器1304执行时使机器1300执行本文中所描述的方法中的任何一种或更多种方法。因此,“机器可读介质”指单个存储装置或设备,以及包括多个存储装置或设备的“基于云”的存储系统或存储网络。术语“机器可读介质”不包括信号本身。
该上下文中的“部件”是指具有由功能或子例程调用、分支点、应用程序接口(API)或者对特定处理或控制功能提供分区或模块化的其他技术定义的边界的设备、物理实体或逻辑。部件可以经由其接口与其他部件组合以执行机器处理。部件可以是被设计用于与其他部件一起使用的经封装的功能硬件单元并且可以是通常执行相关功能中的特定功能的程序的一部分。部件可以构成软件部件(例如,体现在机器可读介质上的代码)或硬件部件。“硬件部件”是能够执行某些操作的有形单元,并且可以以某种物理方式来配置或布置。在各种示例实现方式中,可以通过软件(例如,应用或应用部分)将一个或更多个计算机系统(例如,独立计算机系统、客户端计算机系统或服务器计算机系统)或计算机系统的一个或更多个硬件部件(例如,处理器或处理器组)配置成用于执行本文中描述的某些操作的硬件部件。
也可以机械地、电子地或以其任何合适的组合来实现硬件部件。例如,硬件部件可以包括被永久地配置成执行某些操作的专用电路或逻辑。硬件部件可以是专用处理器,例如现场可编程门阵列(FPGA)或专用集成电路(ASIC)。硬件部件还可以包括通过软件临时配置成执行某些操作的可编程逻辑或电路。例如,硬件部件可以包括由通用处理器1304或其他可编程处理器执行的软件。一旦通过这样的软件进行配置,硬件部件就成为被独特地定制成执行所配置功能的特定机器(或机器1300的特定部件),而不再是通用处理器1304。将理解的是,可以出于成本和时间考虑来决定在专用且永久配置的电路中还是在临时配置(例如,由软件配置)的电路中机械地实现硬件部件。相应地,短语“硬件部件”(或者“硬件实现的部件”)应当被理解成包含有形实体,即为被物理构造、永久配置(例如,硬连线)或临时配置(例如,编程)成以某种方式操作或者执行本文中描述的某些操作的实体。考虑硬件部件被临时配置(例如,被编程)的实现方式,无需在任一时刻对硬件部件中的每个硬件部件进行配置或实例化。例如,在硬件部件包括通过软件配置而成为专用处理器的通用处理器1304的情况下,可以在不同时间将该通用处理器1304分别被配置为不同的专用处理器(例如,包括不同的硬件部件)。软件相应地对特定处理器1312、1314或处理器1304进行配置以例如在一个时刻构成特定硬件部件,并且在不同的时刻构成不同的硬件部件。
硬件部件可以向其他硬件部件提供信息以及从其他硬件部件接收信息。因此,所描述的硬件部件可以被认为通信地耦接。在同时存在多个硬件部件的情况下,可以通过(例如,通过适当的电路和总线)在两个或更多个硬件部件之间或之中进行信号传输来实现通信。在其中多个硬件部件在不同时间处被配置或实例化的实现方式中,可以例如通过将信息存储在多个硬件部件访问的存储器结构中并且在该存储器结构中检索信息来实现这样的硬件部件之间的通信。例如,一个硬件部件可以执行操作,并且将该操作的输出存储在与其通信地耦接的存储器设备中。然后,其他硬件部件可以在随后的时间访问存储器设备以检索所存储的输出并对其进行处理。
硬件部件还可以发起与输入设备或输出设备的通信,并且可以对资源进行操作(例如,信息的收集)。在本文中描述的示例方法的各种操作可以至少部分地由被(例如,通过软件)临时地配置或永久地配置成执行相关操作的一个或更多个处理器1304来执行。无论是被临时地配置还是永久地配置,这样的处理器1304可以构成进行操作以执行本文中描述的一个或更多个操作或功能的处理器实现的部件。如本文中使用的,“处理器实现的部件”是指使用一个或更多个处理器1304实现的硬件部件。类似地,本文中描述的方法可以至少部分地由处理器实现,其中,特定的处理器1312、1314或处理器1304是硬件的示例。例如,方法的至少一些操作可以由一个或更多个处理器1304或处理器实现的部件来执行。此外,一个或更多个处理器1304还可以进行操作以支持“云计算”环境中的相关操作的执行或作为“软件即服务”(SaaS)操作。例如,操作中的至少一些操作可以由一组计算机(作为包括处理器1304的机器1300的示例)来执行,其中,这些操作能够经由网络110(例如,因特网)并且经由一个或更多个适当的接口(例如,应用程序接口(API))来访问。操作中的某些操作的执行可以分布在处理器之间,不仅可以驻留在单个机器1300内,而且可以跨多个机器部署。在一些示例实现方式中,处理器1304或处理器实现的部件可以位于单个地理位置(例如,在家庭环境、办公室环境或服务器群内)。在其他示例实施方式中,处理器1304或处理器实现的部件可以跨多个地理位置分布。
该上下文中的“处理器”指根据控制信号(例如,“命令”、“操作码”、“机器码”等)操纵数据值并且产生被应用于操作机器1300的对应输出信号的任何电路或虚拟电路(由在实际的处理器1304上执行的逻辑模拟的物理电路)。例如,处理器1304可以是中央处理单元(CPU)、简化指令集计算(RISC)处理器、复杂指令集计算(CISC)处理器、图形处理单元(GPU)、数字信号处理器(DSP)、专用集成电路(ASIC)、射频集成电路(RFIC)或其任何组合。处理器1304还可以是具有两个或更多个可以同时执行指令1302的独立处理器1304(有时称为“内核”)的多核处理器。
该上下文中的“时间戳”指的是标识某个事件何时发生的字符或编码信息的序列,例如,从而给出日期和一天中的时间,有时精确到几分之一秒。
在不脱离本公开内容的范围的情况下,可以对所公开的实现方式进行改变和修改。这些和其他改变或修改旨在被包括在如所附权利要求中表达的本公开内容的范围内。
本公开的示例方面
方面1.一种方法,包括:由一个或更多个计算设备生成可经由客户端应用执行以修改用户内容的增强现实内容项,所述用户内容由客户端设备的一个或更多个摄像装置捕获;由所述一个或更多个计算设备中的至少一个计算设备接收指示要跟踪所述客户端应用的用户与所述增强现实内容项的交互的用户输入;由所述一个或更多个计算设备中的至少一个计算设备确定与所述增强现实内容项交互的所述客户端应用的多个用户所对应的简档信息;由所述一个或更多个计算设备中的至少一个计算设备基于与所述增强现实内容项交互的所述客户端应用的多个用户的特性来确定所述增强现实内容项的用户表征;以及由所述一个或更多个计算设备中的至少一个计算设备生成与指示所述用户表征的至少一部分的一个或更多个用户界面对应的用户界面数据。
方面2.根据方面1所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备确定所述客户端应用的一个或更多个用户与所述增强现实内容项的交互量;以及由所述一个或更多个计算设备中的至少一个计算设备基于所述客户端应用的一个或更多个用户与所述增强现实内容项的所述交互量来确定与所述增强现实内容项对应的一个或者更多个使用度量,其中,所述一个或更多个用户界面指示所述一个或更多个使用度量的至少一部分。
方面3.根据方面2所述的方法,其中,确定与所述增强现实内容项的交互量包括:由所述一个或更多个计算设备中的至少一个计算设备确定经由所述客户端应用发送的与所述增强现实内容项对应的消息的数量;由所述一个或更多个计算设备中的至少一个计算设备确定所述增强现实内容项已被所述客户端应用的用户分享的第一次数;以及由所述一个或更多个计算设备中的至少一个计算设备确定所述增强现实内容项已被执行以修改用户内容的一个或更多个项的第二次数。
方面4.根据方面1至3中任一项所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备确定与所述增强现实内容项交互的所述客户端应用的至少阈值数目的用户之间共有的特性;由所述一个或更多个计算设备中的至少一个计算设备确定与所述特性相关联且未与所述增强现实内容项交互的所述客户端应用的用户组;以及由所述一个或更多个计算设备中的至少一个计算设备确定所述用户组的至少一部分是所述增强现实内容项的目标受众。
方面5.根据方面4所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备接收对增强现实内容项的搜索请求,所述搜索请求包括一个或更多个关键词并且从所述客户端应用的用户的客户端设备接收所述搜索请求;由所述一个或更多个计算设备中的至少一个计算设备确定搜索结果,所述搜索结果包括与所述一个或更多个关键词对应的多个增强现实内容项,所述多个增强现实内容项包括所述增强现实内容项;由所述一个或更多个计算设备中的至少一个计算设备确定所述用户被包括在所述增强现实内容项的所述目标受众中;以及由所述一个或更多个计算设备中的至少一个计算设备确定经由所述客户端应用向所述用户呈现所述搜索结果的至少一部分的顺序,所述顺序基于所述用户被包括在所述增强现实内容项的所述目标受众中。
方面6.根据方面1至5中任一项所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备生成对应于一个或更多个附加用户界面的附加用户界面数据,所述一个或更多个附加用户界面作为构建增强现实内容项的工具的一部分而被显示,所述一个或更多个附加用户界面包括至少一个用户界面,所述至少一个用户界面使得能够选择增强现实内容项的一个或更多个特征,并且使用所述工具选择所述增强现实内容项的所述一个或更多个特征使得指示被存储在存储与所述增强现实内容项相关的数据的数据结构中,其中,所述指示表示对与所述一个或更多个特征中的特征相关联的用户界面元素的选择对应于与所述增强现实内容项的交互。
方面7.根据方面6所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备确定对所述用户界面元素的选择;以及由所述一个或更多个计算设备中的至少一个计算设备基于对所述用户界面元素的选择将一个或更多个视觉效果应用于包括在用户内容项中的一个或更多个对象。
方面8.根据方面7所述的方法,其中,所述用户界面元素包括产品,并且对所述用户界面元素的选择包括将所述产品的一个或更多个特性应用于包括在所述用户内容项中的个人的一个或更多个面部特征。
方面9.根据方面7所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备基于对所述用户界面元素的选择次数来确定所述客户端应用的一个或更多个用户与所述增强现实内容项的交互量;以及由所述一个或更多个计算设备中的至少一个计算设备基于交互量来确定所述增强现实内容项的一个或更多个使用度量。
方面10.根据方面1至9中任一项所述的方法,包括:由所述一个或更多个计算设备中的至少一个计算设备生成对应于附加用户界面的附加用户界面数据,所述附加用户界面包括由客户端设备的至少一个摄像装置捕获的图像并且包括多个选项,所述多个选项对应于增强现实内容项的集合,并且所述多个选项包括可被选择以执行与所述图像相关的所述增强现实内容项的选项。
方面11.一种系统,包括:一个或更多个硬件处理器;以及一个或更多个非暂态计算机可读存储介质,其包括计算机可读指令,当所述计算机可读指令由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行操作,所述操作包括:生成可经由客户端应用执行以修改用户内容的增强现实内容项,所述用户内容由客户端设备的一个或更多个摄像装置捕获;接收指示要跟踪所述客户端应用的用户与所述增强现实内容项的交互的用户输入;确定与所述增强现实内容项交互的所述客户端应用的多个用户所对应的简档信息;基于与所述增强现实内容项交互的所述客户端应用的所述多个用户的特性,确定所述增强现实内容项的用户表征;以及生成与指示所述用户表征的至少一部分的一个或更多个用户界面对应的用户界面数据。
方面12.根据方面11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:确定所述客户端应用的多个用户与所述增强现实内容项的交互量;基于所述客户端应用的多个用户与所述增强现实内容项的所述交互量来确定与所述增强现实内容项对应的一个或更多个使用度量;以及接收附加用户输入以查看与所述增强现实内容项对应的所述一个或更多个使用度量中的至少一个使用度量,其中,响应于所述附加用户输入来生成所述用户界面数据,并且所述一个或更多个用户界面包括所述至少一个使用度量。
方面13.根据方面12所述的系统,其中,所述增强现实内容项包括第一特征和第二特征,所述第一特征对应于第一用户界面元素,所述第一用户界面元素可被选择以将一个或更多个第一视觉效果应用于一个或更多个第一用户内容项,并且所述第二特征对应于第二用户界面元素,所述第二用户界面元素可被选择以将一个或更多个第二视觉效果应用于一个或更多个第二用户内容项;并且所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:确定对所述第一用户界面元素的第一选择次数;以及确定对所述第二用户界面元素的第二选择次数;并且基于所述第一选择次数和所述第二选择次数来确定所述一个或更多个使用度量。
方面14.根据方面13所述的系统,其中,所述第一用户界面元素对应于第一产品,并且所述一个或更多个第一视觉效果对应于所述第一产品的一个或更多个第一特性,所述第一产品与第一制造商或第一销售商中的至少一个相关联;并且所述第二用户界面元素对应于第二产品,并且所述一个或更多个第二视觉效果对应于所述第二产品的一个或更多个第二特性,所述第二产品与第二制造商或第二销售商中的至少一个相关联。
方面15.根据方面11至14中任一方面所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:确定与所述增强现实内容项交互的所述客户端应用的所述多个用户的内容消费特性;确定与所述增强现实内容项交互的所述客户端应用的所述多个用户所消费的内容的内容源;以及确定由与所述增强现实内容项交互的所述客户端应用的所述多个用户经由所述客户端应用对增强现实内容项的使用量。
方面16.根据方面15所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:确定所述内容消费特性中的以下内容消费特性,所述内容消费特性与同所述增强现实内容项交互的所述客户端应用的所述多个用户中的至少第一阈值数目的用户相关联;确定所述内容源中的以下内容源,所述内容源被与所述增强现实内容项交互的所述客户端应用的所述多个用户中的至少第二阈值数目的用户访问;以及确定由与所述增强现实内容项交互的所述客户端应用的至少第三阈值数目的用户对增强现实内容项的阈值使用量;并且所述用户表征包括所述内容消费特性、所述内容源和所述对增强现实内容项的阈值使用量。
方面17.根据方面11至16中任一方面所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:分析所述客户端应用的用户的第一特性和所述增强现实内容项的目标受众的第二特性;确定所述第一特性与所述第二特性之间的相似度是至少阈值相似度;以及向所述客户端应用的用户的客户端设备发送指示所述增强现实内容项的推荐。
方面18.一种或更多种非暂态计算机可读介质,包括计算机可读指令,所述计算机可读指令在由计算设备执行时,使所述计算设备执行操作,所述操作包括:生成可经由客户端应用执行以修改用户内容的增强现实内容项,所述用户内容由客户端设备的一个或更多个摄像装置捕获;接收指示要跟踪所述客户端应用的用户与所述增强现实内容项的交互的用户输入;确定所述客户端应用的一个或更多个用户与所述增强现实内容项的交互量;基于所述客户端应用的一个或更多个用户与所述增强现实内容项的所述交互量,确定与所述增强现实内容项对应的一个或更多个使用度量;确定与所述增强现实内容项交互的所述客户端应用的多个用户所对应的简档信息;基于与所述增强现实内容项交互的所述客户端应用的所述多个用户的特性,确定所述增强现实内容项的用户表征;以及生成对应于一个或更多个用户界面的用户界面数据,所述用户界面指示所述一个或更多个使用度量中的至少一个或所述用户表征的至少一部分。
方面19.根据方面18所述的一种或更多种非暂态计算机可读介质,还包括附加的计算机可读指令,所述附加的计算机可读指令在由计算设备执行时,使所述计算设备执行附加操作,所述附加操作包括:确定对所述增强现实内容项的用户界面元素的选择次数;并且其中,与所述增强现实内容项的交互量基于对所述用户界面元素的选择次数。
方面20.根据方面19所述的一种或更多种非暂态计算机可读介质,还包括附加的计算机可读指令,所述附加的计算机可读指令在由计算设备执行时,使所述计算设备执行附加操作,所述附加操作包括:响应于对所述用户界面元素的选择,接收指示所述用户界面元素已被选择的数据,其中,所述数据指示做出所述选择的所述客户端应用的用户的标识符;使用所述标识符解析数据存储体以基于所述用户的简档数据来确定所述用户的一个或更多个特性;以及与所述增强现实内容项相关地存储所述一个或更多个特性。
Claims (19)
1.一种方法,包括:
由一个或更多个计算设备生成可经由客户端应用执行以修改用户内容的增强现实内容项,所述用户内容由客户端设备的一个或更多个摄像装置捕获;
由所述一个或更多个计算设备中的至少一个计算设备接收指示要跟踪所述客户端应用的用户与所述增强现实内容项的交互的用户输入;
由所述一个或更多个计算设备中的至少一个计算设备确定与所述增强现实内容项交互的所述客户端应用的多个用户所对应的简档信息;
由所述一个或更多个计算设备中的至少一个计算设备基于与所述增强现实内容项交互的所述客户端应用的所述多个用户的特性来确定所述增强现实内容项的用户表征;以及
由所述一个或更多个计算设备中的至少一个计算设备生成与指示所述用户表征的至少一部分的一个或更多个用户界面对应的用户界面数据。
2.根据权利要求1所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备确定所述客户端应用的一个或更多个用户与所述增强现实内容项的交互量;以及
由所述一个或更多个计算设备中的至少一个计算设备基于所述客户端应用的一个或更多个用户与所述增强现实内容项的所述交互量来确定与所述增强现实内容项对应的一个或者更多个使用度量,
其中,所述一个或更多个用户界面指示所述一个或更多个使用度量的至少一部分。
3.根据权利要求2所述的方法,其中,确定与所述增强现实内容项的交互量包括:
由所述一个或更多个计算设备中的至少一个计算设备确定经由所述客户端应用发送的与所述增强现实内容项对应的消息的数量;
由所述一个或更多个计算设备中的至少一个计算设备确定所述增强现实内容项已被所述客户端应用的用户分享的第一次数;以及
由所述一个或更多个计算设备中的至少一个计算设备确定所述增强现实内容项已被执行以修改用户内容的一个或更多个项的第二次数。
4.根据权利要求1所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备确定与所述增强现实内容项交互的所述客户端应用的至少阈值数目的用户之间共有的特性;
由所述一个或更多个计算设备中的至少一个计算设备确定与所述特性相关联且未与所述增强现实内容项交互的所述客户端应用的用户组;以及
由所述一个或更多个计算设备中的至少一个计算设备确定所述用户组的至少一部分是所述增强现实内容项的目标受众。
5.根据权利要求4所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备接收对增强现实内容项的搜索请求,所述搜索请求包括一个或更多个关键词并且从所述客户端应用的用户的客户端设备接收所述搜索请求;
由所述一个或更多个计算设备中的至少一个计算设备确定搜索结果,所述搜索结果包括与所述一个或更多个关键词对应的多个增强现实内容项,所述多个增强现实内容项包括所述增强现实内容项;
由所述一个或更多个计算设备中的至少一个计算设备确定所述用户被包括在所述增强现实内容项的所述目标受众中;以及
由所述一个或更多个计算设备中的至少一个计算设备确定经由所述客户端应用向所述用户呈现所述搜索结果的至少一部分的顺序,所述顺序基于所述用户被包括在所述增强现实内容项的所述目标受众中。
6.根据权利要求1所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备生成对应于一个或更多个附加用户界面的附加用户界面数据,所述一个或更多个附加用户界面作为构建增强现实内容项的工具的一部分而被显示,所述一个或更多个附加用户界面包括至少一个用户界面,所述至少一个用户界面使得能够选择增强现实内容项的一个或更多个特征,并且使用所述工具选择所述增强现实内容项的所述一个或更多个特征使得指示被存储在存储与所述增强现实内容项相关的数据的数据结构中,其中,所述指示表示对与所述一个或更多个特征中的特征相关联的用户界面元素的选择对应于与所述增强现实内容项的交互。
7.根据权利要求6所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备确定对所述用户界面元素的选择;以及
由所述一个或更多个计算设备中的至少一个计算设备基于对所述用户界面元素的选择将一个或更多个视觉效果应用于包括在用户内容项中的一个或更多个对象。
8.根据权利要求7所述的方法,其中,所述用户界面元素包括产品,并且对所述用户界面元素的选择包括将所述产品的一个或更多个特性应用于包括在所述用户内容项中的个人的一个或更多个面部特征。
9.根据权利要求7所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备基于对所述用户界面元素的选择次数来确定所述客户端应用的一个或更多个用户与所述增强现实内容项的交互量;以及
由所述一个或更多个计算设备中的至少一个计算设备基于交互量来确定所述增强现实内容项的一个或更多个使用度量。
10.根据权利要求1所述的方法,包括:
由所述一个或更多个计算设备中的至少一个计算设备生成对应于附加用户界面的附加用户界面数据,所述附加用户界面包括由客户端设备的至少一个摄像装置捕获的图像并且包括多个选项,所述多个选项对应于增强现实内容项的集合,并且所述多个选项包括可被选择以执行与所述图像相关的所述增强现实内容项的选项。
11.一种系统,包括:
一个或更多个硬件处理器;以及
一个或更多个非暂态计算机可读存储介质,其包括计算机可读指令,所述计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行操作,所述操作包括:
生成可经由客户端应用执行以修改用户内容的增强现实内容项,所述用户内容由客户端设备的一个或更多个摄像装置捕获;
接收指示要跟踪所述客户端应用的用户与所述增强现实内容项的交互的用户输入;
确定与所述增强现实内容项交互的所述客户端应用的多个用户所对应的简档信息;
基于与所述增强现实内容项交互的所述客户端应用的所述多个用户的特性,确定所述增强现实内容项的用户表征;以及
生成与指示所述用户表征的至少一部分的一个或更多个用户界面对应的用户界面数据。
12.根据权利要求11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
确定所述客户端应用的多个用户与所述增强现实内容项的交互量;
基于所述客户端应用的多个用户与所述增强现实内容项的所述交互量来确定与所述增强现实内容项对应的一个或更多个使用度量;以及
接收附加用户输入以查看与所述增强现实内容项对应的所述一个或更多个使用度量中的至少一个使用度量,其中,响应于所述附加用户输入来生成所述用户界面数据,并且所述一个或更多个用户界面包括所述至少一个使用度量。
13.根据权利要求12所述的系统,其中,
所述增强现实内容项包括第一特征和第二特征,所述第一特征对应于第一用户界面元素,所述第一用户界面元素可被选择以将一个或更多个第一视觉效果应用于一个或更多个第一用户内容项,并且所述第二特征对应于第二用户界面元素,所述第二用户界面元素可被选择以将一个或更多个第二视觉效果应用于一个或更多个第二用户内容项;并且
所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
确定对所述第一用户界面元素的第一选择次数;以及
确定对所述第二用户界面元素的第二选择次数;并且
基于所述第一选择次数和所述第二选择次数来确定所述一个或更多个使用度量。
14.根据权利要求13所述的系统,其中,
所述第一用户界面元素对应于第一产品,并且所述一个或更多个第一视觉效果对应于所述第一产品的一个或更多个第一特性,所述第一产品与第一制造商或第一销售商中的至少一个相关联;并且
所述第二用户界面元素对应于第二产品,并且所述一个或更多个第二视觉效果对应于所述第二产品的一个或更多个第二特性,所述第二产品与第二制造商或第二销售商中的至少一个相关联。
15.根据权利要求11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
确定与所述增强现实内容项交互的所述客户端应用的所述多个用户的内容消费特性;
确定与所述增强现实内容项交互的所述客户端应用的所述多个用户所消费的内容的内容源;以及
确定由与所述增强现实内容项交互的所述客户端应用的所述多个用户经由所述客户端应用对增强现实内容项的使用量。
16.根据权利要求15所述的系统,其中,
所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
确定所述内容消费特性中的以下内容消费特性:所述内容消费特性与同所述增强现实内容项交互的所述客户端应用的所述多个用户中的至少第一阈值数目的用户相关联;
确定所述内容源中的以下内容源:所述内容源被与所述增强现实内容项交互的所述客户端应用的所述多个用户中的至少第二阈值数目的用户访问;以及
确定由与所述增强现实内容项交互的所述客户端应用的至少第三阈值数目的用户对增强现实内容项的阈值使用量;并且
所述用户表征包括所述内容消费特性、所述内容源和所述对增强现实内容项的阈值使用量。
17.根据权利要求11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
分析所述客户端应用的用户的第一特性和所述增强现实内容项的目标受众的第二特性;
确定所述第一特性与所述第二特性之间的相似度是至少阈值相似度;以及
向所述客户端应用的用户的客户端设备发送指示所述增强现实内容项的推荐。
18.根据权利要求11所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
确定对所述增强现实内容项的用户界面元素的选择次数;并且
其中,与所述增强现实内容项的交互量基于对所述用户界面元素的选择次数。
19.根据权利要求18所述的系统,其中,所述一个或更多个非暂态计算机可读存储介质包括附加的计算机可读指令,所述附加的计算机可读指令在由所述一个或更多个硬件处理器执行时,使所述一个或更多个硬件处理器执行附加操作,所述附加操作包括:
响应于对所述用户界面元素的选择,接收指示所述用户界面元素已被选择的数据,其中,所述数据指示做出所述选择的所述客户端应用的用户的标识符;
使用所述标识符解析数据存储体以基于所述用户的简档数据来确定所述用户的一个或更多个特性;以及
与所述增强现实内容项相关地存储所述一个或更多个特性。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202062705468P | 2020-06-29 | 2020-06-29 | |
US62/705,468 | 2020-06-29 | ||
PCT/US2021/039695 WO2022006162A1 (en) | 2020-06-29 | 2021-06-29 | Analyzing augmented reality content usage data |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115803779A true CN115803779A (zh) | 2023-03-14 |
Family
ID=79030673
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202180045808.XA Pending CN115803779A (zh) | 2020-06-29 | 2021-06-29 | 分析增强现实内容使用数据 |
Country Status (5)
Country | Link |
---|---|
US (2) | US11641403B2 (zh) |
EP (1) | EP4172957A1 (zh) |
KR (1) | KR20230031908A (zh) |
CN (1) | CN115803779A (zh) |
WO (1) | WO2022006162A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2022006162A1 (en) | 2020-06-29 | 2022-01-06 | Snap Inc. | Analyzing augmented reality content usage data |
US11689487B1 (en) * | 2020-07-16 | 2023-06-27 | Kynami, Inc. | System and method for identifying and blocking trolls on social networks |
US11360733B2 (en) | 2020-09-10 | 2022-06-14 | Snap Inc. | Colocated shared augmented reality without shared backend |
US20220319124A1 (en) * | 2021-03-31 | 2022-10-06 | Snap Inc. | Auto-filling virtual content |
US11894989B2 (en) | 2022-04-25 | 2024-02-06 | Snap Inc. | Augmented reality experience event metrics system |
US11949527B2 (en) | 2022-04-25 | 2024-04-02 | Snap Inc. | Shared augmented reality experience in video chat |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130246595A1 (en) * | 2011-10-18 | 2013-09-19 | Hugh O'Donoghue | Method and apparatus for using an organizational structure for generating, using, or updating an enriched user profile |
US9292758B2 (en) * | 2012-05-14 | 2016-03-22 | Sphero, Inc. | Augmentation of elements in data content |
KR102516124B1 (ko) * | 2013-03-11 | 2023-03-29 | 매직 립, 인코포레이티드 | 증강 및 가상 현실을 위한 시스템 및 방법 |
WO2016177669A1 (en) * | 2015-05-01 | 2016-11-10 | Assa Abloy Ab | Continuous authentication |
US10838210B2 (en) * | 2016-07-25 | 2020-11-17 | Magic Leap, Inc. | Imaging modification, display and visualization using augmented and virtual reality eyewear |
CN106981000B (zh) | 2016-10-13 | 2020-06-09 | 阿里巴巴集团控股有限公司 | 基于增强现实的多人线下交互、点餐方法及系统 |
US10311645B1 (en) * | 2016-10-14 | 2019-06-04 | Floreo, Inc. | Methods and systems for treating autism |
EP3321795B1 (en) * | 2016-11-14 | 2021-05-05 | Nokia Technologies Oy | A method and associated apparatuses |
US9754397B1 (en) * | 2017-04-07 | 2017-09-05 | Mirage Worlds, Inc. | Systems and methods for contextual augmented reality sharing and performance |
US10706554B2 (en) * | 2017-04-14 | 2020-07-07 | Adobe Inc. | Three-dimensional segmentation of digital models utilizing soft classification geometric tuning |
KR101989089B1 (ko) | 2017-07-18 | 2019-06-14 | 네이버랩스 주식회사 | 클라우드 소싱 기반의 ar 컨텐츠 템플릿을 수집하여 ar 컨텐츠를 자동으로 생성하는 방법 및 시스템 |
WO2019079790A1 (en) * | 2017-10-21 | 2019-04-25 | Eyecam, Inc | ADAPTIVE GRAPHIC USER INTERFACE SYSTEM |
US10706584B1 (en) * | 2018-05-18 | 2020-07-07 | Facebook Technologies, Llc | Hand tracking using a passive camera system |
US10984600B2 (en) * | 2018-05-25 | 2021-04-20 | Tiff's Treats Holdings, Inc. | Apparatus, method, and system for presentation of multimedia content including augmented reality content |
US10679393B2 (en) | 2018-07-24 | 2020-06-09 | Snap Inc. | Conditional modification of augmented reality object |
US10679410B2 (en) * | 2018-09-14 | 2020-06-09 | Facebook Technologies, Llc | Display opacity control for preventing view occlusion in artificial reality |
CN113168425A (zh) * | 2018-12-05 | 2021-07-23 | 斯纳普公司 | 激励用户对社交网络内容做出贡献的ui和设备 |
US20200234502A1 (en) * | 2019-01-21 | 2020-07-23 | Alexandre Van Anderlecht | Social Media Platform using Augmented Reality and Microlocation |
WO2022006162A1 (en) | 2020-06-29 | 2022-01-06 | Snap Inc. | Analyzing augmented reality content usage data |
-
2021
- 2021-06-29 WO PCT/US2021/039695 patent/WO2022006162A1/en unknown
- 2021-06-29 CN CN202180045808.XA patent/CN115803779A/zh active Pending
- 2021-06-29 EP EP21833565.1A patent/EP4172957A1/en active Pending
- 2021-06-29 KR KR1020237003280A patent/KR20230031908A/ko unknown
- 2021-06-29 US US17/362,623 patent/US11641403B2/en active Active
-
2023
- 2023-05-01 US US18/310,367 patent/US20230353639A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
US20230353639A1 (en) | 2023-11-02 |
US20210409517A1 (en) | 2021-12-30 |
EP4172957A1 (en) | 2023-05-03 |
US11641403B2 (en) | 2023-05-02 |
WO2022006162A1 (en) | 2022-01-06 |
KR20230031908A (ko) | 2023-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11641403B2 (en) | Analyzing augmented reality content usage data | |
US11910269B2 (en) | Augmented reality content items including user avatar to share location | |
US11934643B2 (en) | Analyzing augmented reality content item usage data | |
US11706167B2 (en) | Generating and accessing video content for products | |
CN115699095A (zh) | 来自第三方内容的增强现实内容 | |
US20210409610A1 (en) | Third-party modifications for a camera user interface | |
US11995677B2 (en) | Augmented reality content items to track user activity and redeem promotions | |
US11758264B2 (en) | Camera user interface to generate content for third-party applications | |
CN115735231A (zh) | 基于产品数据的增强现实内容 | |
US20210409502A1 (en) | Tracking usage of augmented reality content across multiple users | |
US20220206924A1 (en) | Accessing third party resources via client application with messaging capability | |
US20220101416A1 (en) | Templates to generate augmented reality content items that display product information | |
US11924153B2 (en) | Messaging user interface element with reminders | |
US20240187819A1 (en) | Augmented reality content items including user avatar to share location |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |