CN109191229A - 增强现实装饰物推荐方法及装置 - Google Patents

增强现实装饰物推荐方法及装置 Download PDF

Info

Publication number
CN109191229A
CN109191229A CN201810778721.3A CN201810778721A CN109191229A CN 109191229 A CN109191229 A CN 109191229A CN 201810778721 A CN201810778721 A CN 201810778721A CN 109191229 A CN109191229 A CN 109191229A
Authority
CN
China
Prior art keywords
ornament
scenario parameters
server
user
customer parameter
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810778721.3A
Other languages
English (en)
Inventor
潘睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Priority to CN201810778721.3A priority Critical patent/CN109191229A/zh
Publication of CN109191229A publication Critical patent/CN109191229A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0641Shopping interfaces
    • G06Q30/0643Graphical representation of items or shoppers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0623Item investigation
    • G06Q30/0625Directed, with specific intent or strategy
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0631Item recommendations

Landscapes

  • Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明提出增强现实AR装饰物推荐方法及装置。方法包括:服务器接收终端发来的携带用户参数或/和场景参数的AR装饰物请求,针对该请求中的每一用户参数或/和场景参数,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物,并按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物;当对所有用户参数或/和场景参数都搜索完毕时,服务器将选择的所有AR装饰物的信息返回给终端。本发明提高了AR装饰物推荐的有效性。

Description

增强现实装饰物推荐方法及装置
技术领域
本发明涉及增强现实(AR,Augmented Reality)技术领域。尤其涉及AR装饰物推荐方法及装置。
背景技术
当前,AR和人工智能(AI,Artificial Intelligence)成为两大热门方向,通过AR,用户可以在移动终端设备中看见现实场景与虚拟物体叠加的场景,从而实现购物、教育、娱乐等内容。而AI方面,可以通过卷积神经网络(CNN,Convolutional Neural Network)等方法,进行物体分类和物体识别,例如可以通过一张脸部图片识别出用户的性别、年龄范围,表情、肤色等内容,也可以通过一张图片识别出当前场景,如室内、道路、沙滩、球场、广场等等,甚至可以识别出场景中包含了哪些物体,如桌子、沙发、汽车、行人等。
现有技术下,结合人脸识别技术,产生了很多自拍的应用,例如faceU,可以为用户添加很多装饰,实现各种趣味功能。这些应用基于人脸特征点分析,识别出五官的位置,并且把对应的3d模型叠加在上面。
发明内容
本发明提供AR装饰物推荐方法及装置,以实现更有效的AR装饰物推荐。
本发明的技术方案是这样实现的:
一种增强现实AR装饰物推荐方法,该方法包括:
服务器接收终端发来的携带用户参数或/和场景参数的AR装饰物请求,针对该请求中的每一用户参数或/和场景参数,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物,并按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物;其中,对于服务器的AR装饰物数据库中的每个AR装饰物,该AR装饰物具有相对不同用户参数或/和场景参数的权重;
当对所有用户参数或/和场景参数都搜索完毕时,服务器将选择的所有AR装饰物的信息返回给终端;
其中,当终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器。
所述服务器将选择的所有AR装饰物的信息返回给终端包括:
服务器将选择的所有AR装饰物的缩略图及其统一资源定位符URL返回给终端,以使得:终端将所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,且,当检测到用户选择了一AR装饰物的缩略图时,根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
所述服务器将选择的所有AR装饰物的信息返回给终端之后进一步包括:
服务器周期性地统计AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新AR装饰物相对各用户参数或/和场景参数的权重;或/和,
服务器周期性地统计AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新AR装饰物相对各用户参数或/和场景参数的权重。
一种增强现实AR装饰物推荐方法,该方法包括:
终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到预先学习到的用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器,以使得:服务器在AR装饰物数据库中,搜索与该用户参数或/和场景参数匹配的AR装饰物;
终端将服务器返回的AR装饰物的信息显示在相机预览界面上;
终端检测到用户选择了一AR装饰物的信息,将对应的AR装饰物加载到相机预览界面上。
所述得到场景参数之后进一步包括:
当得到多个场景参数时,结合终端的全球定位系统GPS位置信息,确定最终的场景参数;或者,
当得到多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则认为该多个场景参数都有效,将有效的场景参数都发送给服务器。
所述用户参数为性别和年龄;
所述场景参数以场景的名称表示,或者以场景中的标志性物体的集合表示。
一种增强现实AR装饰物推荐装置,该装置位于服务器上,该装置包括:
搜索模块,用于接收终端发来的携带用户参数或/和场景参数的AR装饰物请求,针对该请求中的每一用户参数或/和场景参数,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物;其中,当终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器;
选择模块,对于搜索模块针对每一用户参数或/和场景参数搜索到的AR装饰物,按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物,将选择的所有AR装饰物的信息返回给终端;其中,对于AR装饰物数据库中的每个AR装饰物,该AR装饰物具有相对不同用户参数或/和场景参数的权重。
所述选择模块将选择的所有AR装饰物的信息返回给终端包括:
将选择的所有AR装饰物的缩略图及其统一资源定位符URL返回给终端,以使得:终端将所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,且,当检测到用户选择了一AR装饰物的缩略图时,根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
所述装置进一步包括权重更新模块,用于周期性地统计AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新AR装饰物相对各用户参数或/和场景参数的权重;或/和,
用于周期性地统计AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新AR装饰物相对各用户参数或/和场景参数的权重。
一种增强现实AR装饰物推荐装置,该装置位于终端上,该装置包括:
计算模块,用于检测到相机应用被打开且处于预览模式,则将预览图片分别输入到预先学习到的用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器,以使得:服务器在AR装饰物数据库中,搜索与该用户参数或/和场景参数匹配的AR装饰物;
AR装饰物处理模块,用于将服务器返回的AR装饰物的信息显示在相机预览界面上,检测到用户选择了一AR装饰物的信息,将对应的AR装饰物加载到相机预览界面上。
所述计算模块得到场景参数之后进一步用于,
当得到多个场景参数时,结合终端的全球定位系统GPS位置信息,确定最终的场景参数;或者,
当得到多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则认为该多个场景参数都有效,将有效的场景参数都发送给服务器。
本发明通过相机预览图片计算出用户参数或/和场景参数,搜索与用户参数或/和场景参数匹配的AR装饰物并推荐给用户,实现了更有效的AR装饰物推荐。
附图说明
图1为本发明一实施例提供的AR装饰物推荐方法流程图;
图2为本发明另一实施例提供的AR装饰物推荐方法流程图;
图3为本发明又一实施例提供的AR装饰物推荐方法流程图;
图4为本发明一实施例提供的AR装饰物推荐装置的结构示意图;
图5为本发明另一实施例提供的AR装饰物推荐装置的结构示意图。
具体实施方式
下面结合附图及具体实施例对本发明再作进一步详细的说明。
发明人对现有的faceU应用进行分析发现,其存在如下不足之处:
一、没有针对用户的性别、年龄做区分性地推荐
发明人认为:由于女性和男性的喜好不同,对女性和男性推荐的AR装饰物应有所不同;另外,不同年龄段的人,其可能也有不同的需求,如:年轻人可能希望装饰更潮一些,小婴儿的装饰可能会更萌一些,老年人的装饰就不需要那么浮夸。所以,不同的性别、年龄,甚至不同的肤色种族,需求都不太相同。
二、没有针对不同的场景做区分性地推荐
发明人认为:用户处于不同的场景下,其可能需要与场景搭配的AR装饰物,如:在沙滩,可能需要墨镜和草帽,在球场,则可能需要棒球帽或者足球服。
另外,在没有用户的场景下,针对不同的场景,也可能需要放置不同的AR装饰物,如:室内自拍可能想在桌上放个绿植,道路上可能想在边上放一辆汽车。
目前,若用户需要一些特定AR装饰物,只能在庞大的AR装饰物图库中手动一页页去查找选择需要的AR装饰物,而做不到自动地、针对性地推荐AR装饰物。
图1为本发明一实施例提供的AR装饰物推荐方法流程图,其具体步骤如下:
步骤101:服务器接收终端发来的携带用户参数或/和场景参数的AR装饰物请求。
步骤102:针对该请求中的每一用户参数或/和场景参数,服务器在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物。
步骤103:服务器按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物。
其中,对于服务器的AR装饰物数据库中的每个AR装饰物,该AR装饰物具有相对不同用户参数或/和场景参数的权重。
步骤104:当对所有用户参数或/和场景参数都搜索完毕时,服务器将选择的所有AR装饰物的信息返回给终端。
其中,当终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器。
在实际应用中,服务器将选择的所有AR装饰物的信息返回给终端可具体为:
服务器将选择的所有AR装饰物的缩略图及其URL(Uniform Resource Locator,统一资源定位符)返回给终端,以使得:终端将所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,且,当检测到用户选择了一AR装饰物的缩略图时,根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
在实际应用中,服务器可周期性地统计AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新AR装饰物相对各用户参数或/和场景参数的权重;或/和,服务器周期性地统计AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新AR装饰物相对各用户参数或/和场景参数的权重。
图2为本发明另一实施例提供的AR装饰物推荐方法流程图,其具体步骤如下:
步骤201:终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到预先学习到的用户模型和场景模型中进行计算,得到用户参数或/和场景参数。
当得到多个场景参数时,结合终端的全球定位系统GPS位置信息,确定最终的场景参数;或者,当得到多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则认为该多个场景参数都有效,将有效的场景参数都发送给服务器。
用户参数为性别和年龄,场景参数可以场景的名称表示,或者以场景中的标志性物体的集合表示。
步骤202:终端将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器,以使得:服务器在AR装饰物数据库中,搜索与该用户参数或/和场景参数匹配的AR装饰物。
步骤203:终端将服务器返回的AR装饰物的信息显示在相机预览界面上。
步骤204:终端检测到用户选择了一AR装饰物的信息,将对应的AR装饰物加载到相机预览界面上。
图3为本发明又一实施例提供的AR装饰物推荐方法流程图,其具体步骤如下:
步骤301:预先采用人脸图片样本学习到用于实现性别和年龄检测的用户模型。
具体地,预先采集不同性别、不同年龄的大量人脸图片样本,从每个人脸图片样本中提取性别和年龄特征,对所有人脸图片样本提取完毕,采用预设学习算法对提取的所有性别和年龄特征进行学习,得到用于描述性别和年龄特征与性别参数和年龄参数的关系的用户模型。
性别参数即,男和女。年龄参数可以具体的年龄表示。
步骤302:预先采用场景图片样本学习到用于实现场景检测的场景模型。
具体地,预先采集不同场景的场景图片样本,从每个场景图片样本中提取场景特征,对所有场景图片样本提取完毕,采用预设学习算法对提取的所有场景特征进行学习,得到用于描述场景特征与场景参数的关系的场景模型。
场景参数可直接以场景的名称表示如:沙滩、道路、球场等,或者以场景中的标志性物体的集合表示,例如:包含大海和沙滩的场景1,包含道路的场景2,等等。
步骤303:对于服务器的AR装饰物数据库中的每个AR装饰物,预先设置该AR装饰物相对不同用户参数或/和场景参数的权重。
例如:粉色边框的太阳镜对不同用户参数和场景参数的权重如下:
女:100,男:0;
10-40岁:90,40-60岁:10;
沙滩:90,室内:50,道路:10。
步骤304:终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数和场景参数,将用户参数和场景参数携带在AR装饰物请求中发送给服务器。
在实际应用中,可将连续多帧预览图片分别输入到用户模型和场景模型中,分别得到多组用户参数(性别和年龄参数)和多组/个场景参数,当输出的用户参数和场景参数稳定如:连续预设数目组/个的用户参数和场景参数相同时,停止预览图片输入。
在确定场景参数时,也可结合GPS(Global Positioning System,全球定位系统)位置信息进行判断。例如:当场景模型的输出为:56%预测为球场,43%预测为室内,1%预测为其他时,则可结合GPS位置信息,查看用户所在位置是否为球场,若是,则认为是球场,否则,认为是室内。
当场景模型输出多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则可认为该多个场景参数都有效,将有效的场景参数都发送给服务器。例如:在沙滩边的公路上拍照,既拍到了沙滩,又拍到了道路,沙滩的预测概率为49%,道路的预测概率为47%,则将该两个场景参数:沙滩和道路都发送给服务器。
步骤305:针对终端发来的每一用户参数和每一场景参数,服务器采用该用户参数或场景参数作为关键字,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物,并按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物,当对所有用户参数和所有场景参数都搜索完毕时,将选择的所有AR装饰物的缩略图及其URL返回给终端。
步骤306:终端将服务器发来的所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,以供用户选择。
步骤307:终端检测到用户选择了一AR装饰物的缩略图,则根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
进一步地,服务器可以周期性地统计各AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新各AR装饰物相对各用户参数或/和场景参数的权重。例如:可预先设定多个被选择次数区间,如:(0,A1]、(A1,A2]、(A2,A3]、…、An,∞],为每个区间分配一个权重增加值,其中A1<A2<A3<…<An,区间对应的被选择次数值越大,其对应的权重增加值越大。
或者,在用户选择了一个AR装饰物后,终端也可以通过相机界面交互让用户为该AR装饰物打分,周期性地统计各AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新各AR装饰物相对各用户参数或/和场景参数的权重。
以下给出本发明的应用示例:
应用示例一、
步骤01:用户小美打开了移动终端的相机应用,且切换到后置模式的趣味拍摄模式。其中,后置模式的趣味拍摄模式在相机预览界面的下方,具有供用户选择3D AR装饰物的列表。
步骤02:相机应用的后台启动场景检测和人脸检测功能,检测出相机预览界面显示的场景为沙滩,且没有检测到人脸,则将场景参数:沙滩携带在AR装饰请求中发送给服务器。
步骤03:服务器收到请求后,在AR装饰物数据库中搜索与沙滩匹配且权重排在前面的预设数目个AR装饰物:阳伞、躺椅、海鸥、沙滩车、螃蟹、贝壳、海螺等,将该多个AR装饰物的缩略图及URL发送给移动终端。
步骤04:移动终端的相机应用将AR装饰物的缩略图显示在推荐列表中。
步骤05:移动终端的相机应用检测到用户小美点击了推荐列表中的贝壳,则根据贝壳的URL向服务器请求下载贝壳的3d模型,0.5秒之后下载成功,在相机预览界面上出现一只贝壳,用户小美通过拖拽将贝壳放在了沙滩上,点击“拍照”按钮开始拍照片。
服务器每隔一段时间会统计一次各个AR装饰物相对各个场景的被选择次数,根据被选择次数更新各个AR装饰物相对各个场景的权重。
应用示例二、
步骤01:用户小美将移动终端的相机应用切换为前置模式的趣味拍摄模式。其中,前置模式的趣味拍摄模式在相机预览界面的下方,具有供用户选择的3D AR装饰物列表。
步骤02:相机应用后台启动场景检测和人脸检测功能,检测出该场景为沙滩,检测出用户小美的年龄为26岁,性别女,向服务器发送携带场景参数:沙滩和用户参数:年龄26、性别女的AR装饰请求。
步骤03:服务器收到请求后,在AR装饰物数据库中搜索与沙滩、年龄26和性别女匹配的、且权重排在前面的预设数目个AR装饰物:粉红色墨镜1、粉红色墨镜2、亮黄色墨镜1、带丝带的草帽、沙滩、鸡尾酒等,将该多个AR装饰物的缩略图及URL发送给移动终端。
步骤04:移动终端的相机应用将AR装饰物的缩略图显示在推荐列表中。
步骤05:移动终端的相机应用检测到用户小美点击了推荐列表中的粉红色墨镜2,则根据粉红色墨镜2的URL向服务器请求下载粉红色墨镜2的3d模型,0.5秒后下载成功,在相机预览界面的眼部位置自动添加粉红色墨镜2。用户小美点击“拍照”按钮开始拍照片。
步骤06:拍照完毕后,在照片下方会显示星级选择列表,列表中有5个星级等级可供选择,用户小美给自己拍摄的照片选择了2星。
服务器会每隔一段时间,统计一次各个AR装饰物相对各个用户参数或/和各个场景参数的星级打分,根据星级分数更新各个AR装饰物相对各个用户参数或/和各个场景参数的权重。
本发明的有益技术效果如下:
本发明通过相机预览图片计算出用户参数或/和场景参数,搜索与用户参数或/和场景参数匹配的AR装饰物并推荐给用户,实现了自动地、智能地向用户推荐个性化的AR装饰物,提升了用户体验;且,可根据用户对AR装饰物的选择情况,更新AR装饰物相对用户参数或/和场景参数的权重,使得推荐更加有效。
图4为本发明一实施例提供的AR装饰物推荐装置的结构示意图,该装置位于服务器上,该装置主要包括:搜索模块41和选择模块42,其中:
搜索模块41,用于接收终端发来的携带用户参数或/和场景参数的AR装饰物请求,针对该请求中的每一用户参数或/和场景参数,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物;其中,当终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器。
选择模块42,对于搜索模块41针对每一用户参数或/和场景参数搜索到的AR装饰物,按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物,将选择的所有AR装饰物的信息返回给终端;其中,对于AR装饰物数据库中的每个AR装饰物,该AR装饰物具有相对不同用户参数或/和场景参数的权重。
在实际应用中,选择模块42将选择的所有AR装饰物的信息返回给终端可具体包括:将选择的所有AR装饰物的缩略图及其URL返回给终端,以使得:终端将所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,且,当检测到用户选择了一AR装饰物的缩略图时,根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
在实际应用中,上述装置可进一步包括权重更新模块,用于周期性地统计AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新AR装饰物相对各用户参数或/和场景参数的权重;或/和,用于周期性地统计AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新AR装饰物相对各用户参数或/和场景参数的权重。
图5为本发明另一实施例提供的AR装饰物推荐装置的结构示意图,该装置位于终端上,该装置主要包括:计算模块51和AR装饰物处理模块52,其中:
计算模块51,用于检测到相机应用被打开且处于预览模式,则将预览图片分别输入到预先学习到的用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器,以使得:服务器在AR装饰物数据库中,搜索与该用户参数或/和场景参数匹配的AR装饰物。
AR装饰物处理模块52,用于将服务器返回的AR装饰物的信息显示在相机预览界面上,检测到用户选择了一AR装饰物的信息,将对应的AR装饰物加载到相机预览界面上。
在实际应用中,计算模块51得到场景参数之后可进一步用于,当得到多个场景参数时,结合终端的GPS位置信息,确定最终的场景参数;或者,当得到多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则认为该多个场景参数都有效,将有效的场景参数都发送给服务器。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (11)

1.一种增强现实AR装饰物推荐方法,其特征在于,该方法包括:
服务器接收终端发来的携带用户参数或/和场景参数的AR装饰物请求,针对该请求中的每一用户参数或/和场景参数,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物,并按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物;其中,对于服务器的AR装饰物数据库中的每个AR装饰物,该AR装饰物具有相对不同用户参数或/和场景参数的权重;
当对所有用户参数或/和场景参数都搜索完毕时,服务器将选择的所有AR装饰物的信息返回给终端;
其中,当终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器。
2.根据权利要求1所述的方法,其特征在于,所述服务器将选择的所有AR装饰物的信息返回给终端包括:
服务器将选择的所有AR装饰物的缩略图及其统一资源定位符URL返回给终端,以使得:终端将所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,且,当检测到用户选择了一AR装饰物的缩略图时,根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
3.根据权利要求1所述的方法,其特征在于,所述服务器将选择的所有AR装饰物的信息返回给终端之后进一步包括:
服务器周期性地统计AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新AR装饰物相对各用户参数或/和场景参数的权重;或/和,
服务器周期性地统计AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新AR装饰物相对各用户参数或/和场景参数的权重。
4.一种增强现实AR装饰物推荐方法,其特征在于,该方法包括:
终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到预先学习到的用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器,以使得:服务器在AR装饰物数据库中,搜索与该用户参数或/和场景参数匹配的AR装饰物;
终端将服务器返回的AR装饰物的信息显示在相机预览界面上;
终端检测到用户选择了一AR装饰物的信息,将对应的AR装饰物加载到相机预览界面上。
5.根据权利要求4所述的方法,其特征在于,所述得到场景参数之后进一步包括:
当得到多个场景参数时,结合终端的全球定位系统GPS位置信息,确定最终的场景参数;或者,
当得到多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则认为该多个场景参数都有效,将有效的场景参数都发送给服务器。
6.根据权利要求4所述的方法,其特征在于,所述用户参数为性别和年龄;
所述场景参数以场景的名称表示,或者以场景中的标志性物体的集合表示。
7.一种增强现实AR装饰物推荐装置,该装置位于服务器上,其特征在于,该装置包括:
搜索模块,用于接收终端发来的携带用户参数或/和场景参数的AR装饰物请求,针对该请求中的每一用户参数或/和场景参数,在自身的AR装饰物数据库中,搜索与该用户参数或场景参数匹配的AR装饰物;其中,当终端检测到相机应用被打开且处于预览模式,则将预览图片分别输入到用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器;
选择模块,对于搜索模块针对每一用户参数或/和场景参数搜索到的AR装饰物,按照匹配权重的从高到低对搜索到的AR装饰物进行排序,选择排在前面的预设数目个AR装饰物,将选择的所有AR装饰物的信息返回给终端;其中,对于AR装饰物数据库中的每个AR装饰物,该AR装饰物具有相对不同用户参数或/和场景参数的权重。
8.根据权利要求7所述的装置,其特征在于,所述选择模块将选择的所有AR装饰物的信息返回给终端包括:
将选择的所有AR装饰物的缩略图及其统一资源定位符URL返回给终端,以使得:终端将所有AR装饰物的缩略图显示在相机预览界面的推荐列表中,且,当检测到用户选择了一AR装饰物的缩略图时,根据该AR装饰物的URL向服务器请求该AR装饰物,将服务器返回的该AR装饰物加载到相机预览界面上。
9.根据权利要求7所述的装置,其特征在于,所述装置进一步包括权重更新模块,用于周期性地统计AR装饰物相对各用户参数或/和场景参数被用户选择的次数,并根据被选择的次数更新AR装饰物相对各用户参数或/和场景参数的权重;或/和,
用于周期性地统计AR装饰物相对各用户参数或/和场景参数的用户打分值,并根据用户打分值更新AR装饰物相对各用户参数或/和场景参数的权重。
10.一种增强现实AR装饰物推荐装置,该装置位于终端上,其特征在于,该装置包括:
计算模块,用于检测到相机应用被打开且处于预览模式,则将预览图片分别输入到预先学习到的用户模型和场景模型中进行计算,得到用户参数或/和场景参数,将用户参数或/和场景参数携带在AR装饰物请求中发送给服务器,以使得:服务器在AR装饰物数据库中,搜索与该用户参数或/和场景参数匹配的AR装饰物;
AR装饰物处理模块,用于将服务器返回的AR装饰物的信息显示在相机预览界面上,检测到用户选择了一AR装饰物的信息,将对应的AR装饰物加载到相机预览界面上。
11.根据权利要求10所述的装置,其特征在于,所述计算模块得到场景参数之后进一步用于,
当得到多个场景参数时,结合终端的全球定位系统GPS位置信息,确定最终的场景参数;或者,
当得到多个场景参数时,若预测概率排在前面的多个场景参数之间的预测概率之差在预设范围内,则认为该多个场景参数都有效,将有效的场景参数都发送给服务器。
CN201810778721.3A 2018-07-16 2018-07-16 增强现实装饰物推荐方法及装置 Pending CN109191229A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810778721.3A CN109191229A (zh) 2018-07-16 2018-07-16 增强现实装饰物推荐方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810778721.3A CN109191229A (zh) 2018-07-16 2018-07-16 增强现实装饰物推荐方法及装置

Publications (1)

Publication Number Publication Date
CN109191229A true CN109191229A (zh) 2019-01-11

Family

ID=64936609

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810778721.3A Pending CN109191229A (zh) 2018-07-16 2018-07-16 增强现实装饰物推荐方法及装置

Country Status (1)

Country Link
CN (1) CN109191229A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109918568A (zh) * 2019-03-13 2019-06-21 百度在线网络技术(北京)有限公司 个性化学习方法、装置、电子设备及存储介质
CN111640194A (zh) * 2020-06-07 2020-09-08 上海商汤智能科技有限公司 Ar场景图像展示控制方法、装置、电子设备及存储介质
CN114598939A (zh) * 2022-04-25 2022-06-07 镁佳(北京)科技有限公司 一种视频水印添加方法、装置及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104077306A (zh) * 2013-03-28 2014-10-01 阿里巴巴集团控股有限公司 一种搜索引擎的结果排序方法及系统
CN105653142A (zh) * 2016-01-07 2016-06-08 厦门美图之家科技有限公司 基于区域和用户属性的图像特效排序方法及系统
CN106373084A (zh) * 2016-08-30 2017-02-01 北京奇艺世纪科技有限公司 一种特效推荐方法及装置
CN107909629A (zh) * 2017-11-06 2018-04-13 广东欧珀移动通信有限公司 贴纸的推荐方法、装置、存储介质及终端设备
CN108174096A (zh) * 2017-12-29 2018-06-15 广东欧珀移动通信有限公司 拍摄参数设置的方法、装置、终端及存储介质
CN108230283A (zh) * 2018-01-19 2018-06-29 维沃移动通信有限公司 一种贴图素材推荐方法和电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104077306A (zh) * 2013-03-28 2014-10-01 阿里巴巴集团控股有限公司 一种搜索引擎的结果排序方法及系统
CN105653142A (zh) * 2016-01-07 2016-06-08 厦门美图之家科技有限公司 基于区域和用户属性的图像特效排序方法及系统
CN106373084A (zh) * 2016-08-30 2017-02-01 北京奇艺世纪科技有限公司 一种特效推荐方法及装置
CN107909629A (zh) * 2017-11-06 2018-04-13 广东欧珀移动通信有限公司 贴纸的推荐方法、装置、存储介质及终端设备
CN108174096A (zh) * 2017-12-29 2018-06-15 广东欧珀移动通信有限公司 拍摄参数设置的方法、装置、终端及存储介质
CN108230283A (zh) * 2018-01-19 2018-06-29 维沃移动通信有限公司 一种贴图素材推荐方法和电子设备

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109918568A (zh) * 2019-03-13 2019-06-21 百度在线网络技术(北京)有限公司 个性化学习方法、装置、电子设备及存储介质
CN111640194A (zh) * 2020-06-07 2020-09-08 上海商汤智能科技有限公司 Ar场景图像展示控制方法、装置、电子设备及存储介质
CN114598939A (zh) * 2022-04-25 2022-06-07 镁佳(北京)科技有限公司 一种视频水印添加方法、装置及电子设备

Similar Documents

Publication Publication Date Title
JP7136156B2 (ja) 検索支援システム、検索支援方法及びプログラム
CN110021061A (zh) 搭配模型构建方法、服饰推荐方法、装置、介质及终端
JP7136925B2 (ja) 顔マッチング方法および装置、記憶媒体
CN105224775B (zh) 基于图片处理来对衣服进行搭配的方法和装置
CN108829764A (zh) 推荐信息获取方法、装置、系统、服务器及存储介质
US11836963B2 (en) Computer vision assisted item search
US11948177B2 (en) Image/text-based design creating device and method
CN109191229A (zh) 增强现实装饰物推荐方法及装置
CN103489008B (zh) 图像产品信息提取方法和装置
CN1738456A (zh) 一种具有时装搭配功能的移动通信终端及其搭配方法
CN109173263A (zh) 一种图像数据处理方法和装置
KR102014761B1 (ko) 공간객체 검색결과 정렬 방법, 시스템 및 컴퓨터 독취가능 저장장치
CN107080435A (zh) 虚拟衣橱管理系统和方法以及基于该系统的服饰销售方法
CN102567543A (zh) 一种服装图片的搜索方法和装置
US20100017290A1 (en) Apparatus, method and program for attaching advertisement
CN108734146A (zh) 人脸图像年龄判断方法、装置、计算机设备及存储介质
CN109949116A (zh) 服饰搭配推荐方法、装置、存储介质及移动终端
WO2021083004A1 (zh) 照片展示处理方法及装置、视频展示处理方法及装置
CN109947510A (zh) 一种界面推荐方法及装置、计算机设备
CN106202260A (zh) 搜索方法、装置和搜索引擎
CN113870133A (zh) 多媒体显示及匹配方法、装置、设备及介质
CN111954087B (zh) 视频中图像的截取方法和装置、存储介质和电子设备
CN109074679A (zh) 具有增强现实强化的基于场景的实时广告
US10474919B2 (en) Method for determining and displaying products on an electronic display device
CN106528800A (zh) 一种基于真实场景的影像生成方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190111

RJ01 Rejection of invention patent application after publication