CN117201846A - Ar产品的推送方法、装置、电子设备及存储介质 - Google Patents

Ar产品的推送方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN117201846A
CN117201846A CN202311259488.5A CN202311259488A CN117201846A CN 117201846 A CN117201846 A CN 117201846A CN 202311259488 A CN202311259488 A CN 202311259488A CN 117201846 A CN117201846 A CN 117201846A
Authority
CN
China
Prior art keywords
target
product
video
user
interaction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311259488.5A
Other languages
English (en)
Inventor
方圆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Suzhou Software Technology Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Suzhou Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Suzhou Software Technology Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202311259488.5A priority Critical patent/CN117201846A/zh
Publication of CN117201846A publication Critical patent/CN117201846A/zh
Pending legal-status Critical Current

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本申请提供一种AR产品的推送方法、装置、电子设备及存储介质,该方法包括:在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;对所述目标视频进行识别,得到需要推送的目标AR产品;根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。本申请通过对用户当前观看的目标视频进行识别,确定需要推送的目标AR产品,并确定推送交互方式后,在目标视频的的页面中向用户推送目标AR产品,从而提高了AR产品的推送效率。

Description

AR产品的推送方法、装置、电子设备及存储介质
技术领域
本申请实施例涉及视频技术领域,尤其涉及一种AR产品的推送方法、装置、电子设备及存储介质。
背景技术
随着增强现实(Augmented Reality,AR)技术的发展,在多个领域中AR技术都得到了广泛的应用。在视频技术领域,通过AR技术向用户推送广告产品的场景也越来越多。目前,通过AR技术向观看视频的用户推送广告时,一般为用户被动接受投放的广告,可能会打断用户的观感,分散用户的注意力,广告本身突兀且精准性不足,从而造成AR产品推送效率较低的问题。
发明内容
本申请实施例提供一种AR产品的推送方法、装置、电子设备及存储介质,以解决现有技术中AR产品推送效率较低的问题。
为解决上述问题,本申请是这样实现的:
第一方面,本申请实施例提供了一种AR产品的推送方法,所述方法包括:
在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;
对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;
根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;
基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
可选的,所述对所述目标视频进行识别,得到需要推送的目标AR产品,包括:
获取所述目标视频中包括的多个视频帧;
根据特征提取算法依次对所述多个视频帧进行特征提取,得到目标特征;
基于所述目标特征确定至少一个第一目标视频帧,所述第一目标视频帧为所述多个视频帧中包括目标产品的视频帧,所述目标产品为多个候选AR产品中的AR产品;
计算所述目标产品与数据库包括的多个AR产品的相似度,得到多个相似度值,所述多个相似度值与所述多个第一目标视频帧一一对应;
基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品。
可选的,所述基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品,包括:
基于所述多个计算结果确定至少一个第二目标视频帧,所述第二目标视频帧对应的计算结果小于预设阈值;
基于所述第二目标视频帧包括的目标产品确定需要推送的目标AR产品,所述目标AR产品为所述数据库中与所述目标产品相似度最高的AR产品。
可选的,所述根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式,包括:
根据所述偏好信息确定用户维度,所述用户维度包括功利主义和享乐主义;
根据所述视频信息确定视频维度,所述视频维度包括信息性视频和娱乐性视频;
根据所述目标AR产品确定产品维度,所述产品维度包括高价值功利产品、低价值功利产品、高价值享乐产品和低价值享乐产品;
基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式,所述目标交互方式为产品增强、用户增强或情景增强中的任意一种。
可选的,所述基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式之后,所述方法还包括:
获取所述用户的历史观看数据;
根据所述用户观看数据确定用户指标信息,所述用户指标信息包括以下至少一项:至少两种预设交互方式中的每种交互方式的交互率、至少两种预设交互方式中的每种交互方式的点击率、至少两种预设交互方式中的每种交互方式的观看时间、至少两种预设交互方式中的每种交互方式的浏览深度,所述至少两种预设交互方式包括所述目标交互方式;
根据所述用户指标信息确定更新信息;
根据所述更新信息对所述目标交互方式进行更新。
可选的,所述根据所述用户指标信息确定更新信息,包括:
将所述用户指标信息输入分别输入到产品增强回归模型、用户增强回归模型和情景增强回归模型中,输出第一交互率、第二交互率和第三交互率;
确定目标交互率,所述目标交互率为所述第一交互率、所述第二交互率和所述第三交互率中值最大的交互率;
根据所述目标交互率对应的交互方式确定更新信息,其中,所述至少两种预设交互方式中,不同的交互方式对应的交互率不同。
可选的,所述基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品,包括:
在所述目标视频中确定第三目标视频帧,所述第三目标视频帧为包括所述目标AR产品的视频帧;
基于所述目标交互方式在所述第三目标视频帧中生成目标页面,所述目标页面包括所述目标AR产品;
在目标视频的播放过程中向用户推送所述目标页面。
第二方面,本申请实施例还提供一种AR产品的推送装置,包括:
获取模块,用于在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;
识别模块,用于对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;
确定模块,用于根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;
推送模块,用于基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
第三方面,本申请实施例还提供一种电子设备,包括:收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序;所述处理器,用于读取存储器中的程序实现如前述第一方面所述方法中的步骤。
第四方面,本申请实施例还提供一种可读存储介质,用于存储程序,所述程序被处理器执行时实现如前述第一方面所述方法中的步骤。
本申请提供一种AR产品的推送方法、装置、电子设备及存储介质,该方法包括:在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。本申请通过对用户当前观看的目标视频进行识别,确定需要推送的目标AR产品,并确定推送交互方式后,在目标视频的的页面中向用户推送目标AR产品,从而提高了AR产品的推送效率。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的AR产品的推送方法的流程示意图;
图2是本申请实施例提供的AR产品的推送装置的装置示意图;
图3是本申请实施提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。此外,本申请中使用“和/或”表示所连接对象的至少其中之一,例如A和/或B和/或C,表示包含单独A,单独B,单独C,以及A和B都存在,B和C都存在,A和C都存在,以及A、B和C都存在的7种情况。
参见图1,图1是本申请实施例提供的AR产品的推送方法的流程示意图。
如图1所示,本申请提供的方法可以服务端执行,AR产品的推送方法可以包括以下步骤:
步骤101、在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息。
在本实施例中,目标视频为用户当前观看的视频,其中,服务器会获取用户的用户信息和视频信息,视频信息包括所述目标视频的视频类型例如喜剧、话剧或者综艺等等。而用户信息包括所述用户的偏好信息例如用户喜欢观看喜剧,不喜欢观看综艺等等。
步骤102、对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品。
在本实施例中,对目标视频的每一帧进行识别,确定其中是否包括了需要推荐的目标AR产品,其中,目标AR产品可以是多种AR产品,例如前一帧和后一帧出现的目标AR产品可以不同。
步骤103、根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式。
在本实施例中,目标交互方式包括产品增强的AR交互模式(即AR产品模型四周有文字和图片的增强,用于介绍产品的尺寸、细节、和选择颜色)、用户增强的AR交互模式(即将产品的AR模型叠加到用户的面部或身体上,例如眼镜的AR展示,通过屏幕看到的就是直接叠加在用户眼睛上)和情境增强的AR交互模式(即将产品的AR模型叠加到环境中,就像环境中有了该产品,例如:沙发的AR展示,通过屏幕看到的就是这个空间中有沙发,并且可以在屏幕上移动沙发的位置)。
步骤104、基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
在本实施例中,在所述目标视频的页面中向用户推送目标AR产品。
本申请提供一种AR产品的推送方法,该方法包括:在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。本申请通过对用户当前观看的目标视频进行识别,确定需要推送的目标AR产品,并确定推送交互方式后,在目标视频的的页面中向用户推送目标AR产品,从而提高了AR产品的推送效率。
在一些可行的实施方式中,可选的,所述对所述目标视频进行识别,得到需要推送的目标AR产品,包括:
获取所述目标视频中包括的多个视频帧;
根据特征提取算法依次对所述多个视频帧进行特征提取,得到目标特征;
基于所述目标特征确定至少一个第一目标视频帧,所述第一目标视频帧为所述多个视频帧中包括目标产品的视频帧,所述目标产品为多个候选AR产品中的AR产品;
计算所述目标产品与数据库包括的多个AR产品的相似度,得到多个相似度值,所述多个相似度值与所述多个第一目标视频帧一一对应;
基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品。
在本实施例中,通过对目标视频中包括的多个视频帧进行逐步特征提取,从而确定目标特征。根据目标特征在多个视频帧中确定多个第一视频帧,具体地,广告商可以上传产品的3D模型和相关产品介绍到云服务器中,并且根据产品特性选择希望投放AR广告的视频或视频类型。视频平台导入产品的3D模型的相关特征数据到人工智能计算机视觉特征匹配模型,去匹配特定视频或视频类型。
具体地,通过广告商提供的3D产品模型,进行数据分析,将产品三维特征,包括尺寸、形状、颜色等特征保存到数据库中。
使用适当的特征提取算法从图像或视频中提取目标的特征。考虑到旋转鲁棒性、模糊鲁棒性、尺度变换鲁棒性和计算速度,选择SURF算法,以确保提取到的特征能够正确地代表目标。使用匹配算法将提取的目标特征与视频中的关键帧帧进行匹配。根据数据集大小、目标复杂性、计算资源等因素进行综合考虑的情况下,在选择基于特征的匹配算法。
由于目标是一个3D物体,还需要使用PnP算法确定目标的姿态。它是根据图像中特征点的二维像素坐标和特征点的三维空间坐标来估计相机在参考坐标系中位姿。考虑目标的运动模式和环境噪声等因素,选择卡尔曼滤波器跟踪目标的运动并进行标记。
根据模型匹配结果,得出m个投入AR广告投入点的备选方案。结合用户偏好、产品特征和视频特征确定AR广告与用户交互模式。
可选的,所述基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品,包括:
基于所述多个计算结果确定至少一个第二目标视频帧,所述第二目标视频帧对应的计算结果小于预设阈值;
基于所述第二目标视频帧包括的目标产品确定需要推送的目标AR产品,所述目标AR产品为所述数据库中与所述目标产品相似度最高的AR产品。
在本实施例中,通过计算结果确定至少一个第二目标视频帧,该第二目标视频帧为包含目标AR产品的视频帧,具体地,将选择的视频序列的第一帧作为参考帧,通过欧几里德距离计算相似度,其中x,y是二维空间的两个点:
并将值规约到(0,1]之间,距离越小,相似度越大:
设定相似度阈值δ获取新关键帧。当sim(x,y)<δ时,该帧作为新的关键帧;当sim(x,y)≥δ时,则舍弃该帧。循环上述过程,直至结束遍历视频序列。
可选的,所述根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式,包括:
根据所述偏好信息确定用户维度,所述用户维度包括功利主义和享乐主义;
根据所述视频信息确定视频维度,所述视频维度包括信息性视频和娱乐性视频;
根据所述目标AR产品确定产品维度,所述产品维度包括高价值功利产品、低价值功利产品、高价值享乐产品和低价值享乐产品;
基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式,所述目标交互方式为产品增强、用户增强或情景增强中的任意一种。
在本实施例中,根据用户信息和视频信息可以确定目标AR产品的目标交互方式,具体地,用户维度包括功利主义和享乐主义,其中,功利主义用户,他们更关注产品的实用价值和功利性,享乐主义用户,他们更关注产品的娱乐性和趣味性。视频维度包括信息性视频和娱乐性视频;产品维度包括高价值功利产品、低价值功利产品、高价值享乐产品和低价值享乐产品。
AR产品交互模式分为:产品增强的AR交互模式(即AR产品模型四周有文字和图片的增强,用于介绍产品的尺寸、细节、和选择颜色)、用户增强的AR交互模式(即将产品的AR模型叠加到用户的面部或身体上,例如眼镜的AR展示,通过屏幕看到的就是直接叠加在用户眼睛上)和情境增强的AR交互模式(即将产品的AR模型叠加到环境中,就像环境中有了该产品,例如:沙发的AR展示,通过屏幕看到的就是这个空间中有沙发,并且可以在屏幕上移动沙发的位置)。
由此可得,根据用户偏好,针对功利主义用户,他们更关注产品的实用价值和功利性,在视频中选择性地推送高价值功利产品\低价值功利产品(例如空调\洗衣机等功利产品)进行AR展示,在进行AR交互的过程中保证用户能够充分掌握该产品的信息。信息型视频出现的高价值功利产品,建议采用(产品+情境)增强的AR交互模式,这样可以直观地展示产品的特点和使用场景;信息型视频出现的低价值功利产品,则可以采用产品增强的AR交互模式,让用户更直观地感受到产品的实用性。另外,在三种增强模式下,产品增强模式的成本最低,也利于降低AR广告成本。
针对享乐主义用户,他们更关注产品的娱乐性和趣味性,在视频中选择性地推送高价值享乐产品\低价值享乐产品(例如手表\口红等享乐产品)进行AR展示,在进行AR交互的过程中保证用户能够充分体验到该产品的带给自己的愉悦性。娱乐型视频出现的高价值功利产品,则可以采用(用户+情境)增强的AR交互模式,让用户在娱乐中感受到产品的特点和使用场景;娱乐型视频出现的低价值功利产品,则可以采用用户增强的AR交互模式,让用户更直接地感受到产品的趣味性。
综上,本申请的展示策略方案可以根据不同的用户类型、产品类型和视频特征来灵活调整AR交互模式,从而最大程度地增强产品的展示效果和用户体验。
可选的,所述基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式之后,所述方法还包括:
获取所述用户的历史观看数据;
根据所述用户观看数据确定用户指标信息,所述用户指标信息包括以下至少一项:至少两种预设交互方式中的每种交互方式的交互率、至少两种预设交互方式中的每种交互方式的点击率、至少两种预设交互方式中的每种交互方式的观看时间、至少两种预设交互方式中的每种交互方式的浏览深度,所述至少两种预设交互方式包括所述目标交互方式;
根据所述用户指标信息确定更新信息;
根据所述更新信息对所述目标交互方式进行更新。
在本实施例中,在根据用户观看广告的行为数据对用户进行享乐型和功利型维度划分时,可以考虑以下一些关键行为指标:
观看时长:观看广告的时长可以反映用户对广告内容的关注程度,从而判断其对广告的态度是积极还是消极。通常来说,积极的用户会花更多的时间观看广告。点击率:点击率可以反映用户对广告的兴趣程度,即广告内容是否吸引用户。如果一个广告的点击率比较高,那么说明广告的内容和形式更符合用户的兴趣和需求。完成率:完成率可以反映用户对广告的认可程度,即广告内容是否能够满足用户的需求。如果一个广告的完成率比较高,那么说明广告内容更能够吸引用户,并且符合用户的需求。交互程度:交互程度可以反映用户对广告的参与程度,即用户是否与广告进行互动。通常来说,如果一个广告的交互程度比较高,那么说明广告的形式更具有吸引力,用户更愿意与广告进行互动。
根据这些行为指标,可以将用户划分为享乐型和功利型两种类型。享乐型用户更注重广告的娱乐性和趣味性,他们通常会花更多的时间观看广告,但并不会在意广告内容是否能够满足自己的需求。功利型用户更注重广告的实用性和有效性,他们通常会更关注广告内容是否能够解决自己的问题,因此点击率和完成率比较高。通过对用户行为数据的分析,可以根据用户的行为指标来判断其所属类型,从而为推荐AR产品展示策略提供参考。
值得注意的是,用户的偏好不是固定不变的,可能会发生变化。因此,本申请考虑到当用户偏好变化或实时根据用户观看行为的反馈,来优化调整AR产品展示交互策略。
可选的,所述根据所述用户指标信息确定更新信息,包括:
将所述用户指标信息输入分别输入到产品增强回归模型、用户增强回归模型和情景增强回归模型中,输出第一交互率、第二交互率和第三交互率;
确定目标交互率,所述目标交互率为所述第一交互率、所述第二交互率和所述第三交互率中值最大的交互率;
根据所述目标交互率对应的交互方式确定更新信息,其中,所述至少两种预设交互方式中,不同的交互方式对应的交互率不同。
在本实施例中,用户指标信息输入到产品增强回归模型、用户增强回归模型和情景增强回归模型中,从而进行计算,确定交互率的最大值。具体地,收集用户观看不同模式的AR广告的历史数据,并对数据进行处理和分析,包括计算用户对不同模式广告的交互率、点击率、观看时间、浏览深度等指标,并对数据进行可视化分析。建立一个多元回归模型来预测用户的交互率,将用户对不同模式广告的交互率作为因变量,用户的基本信息、观看时间、广告内容等因素作为自变量,建立一个回归模型。根据回归模型的结果,计算出用户对不同模式广告的预测交互率,并根据交互率的大小来选择最佳的方案。
具体地,产品增强回归模型、用户增强回归模型和情景增强回归模型的计算公式如下:
假设用户观看AR产品增强模式广告的交互率为Pm1,观看AR用户增强模式广告的交互率为Pm2,观看AR情境增强模式广告的交互率为Pm3,那么可以建立如下的多元回归模型:
Pm1=β01X12X23X31,
Pm2=β01X12X23X32,
Pm3=β01X12X23X33,
其中,β0,β1,β2,β3是模型的参数,X1,X2,X3分别表示点击AR广告行为、交互AR时间、关闭AR广告行为因素,ε1,ε2,ε3,分别表示模型的误差。
通过对模型进行拟合和验证,可以得到模型的参数和模型的拟合程度。
本申请通过根据用户的点击AR广告行为、交互AR时间、关闭AR广告行为等因素,预测用户对不同模式广告的交互率,并根据交互率的大小选择最佳的方案。将概率值阈值设定为一个合适的值,例如0.5,当预测的概率值大于阈值时,认为用户会与该AR广告模式进行交互,否则认为用户不会与该AR广告模式进行交互。因此可以根据用户与AR广告交互行为,来优化AR产品交互展示策略。
可选的,所述基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品,包括:
在所述目标视频中确定第三目标视频帧,所述第三目标视频帧为包括所述目标AR产品的视频帧;
基于所述目标交互方式在所述第三目标视频帧中生成目标页面,所述目标页面包括所述目标AR产品;
在目标视频的播放过程中向用户推送所述目标页面。
在本实施例中,目标页面为视频平台在视频片段中嵌入AR产品展示和购买入口。用户点击嵌入了AR产品展示的产品,通过算力网络,AR匹配用户环境或用户自身,进行AR产品展示和购买。
具体地,获取当前终端的硬件配置信息。判断当前设备是否能使用AR。如果当代设备不能使用AR,则不展示边缘高亮产品,继续播放视频。如果当前设备能使用AR,则读取终端当前播放的视频数据信息并发送至对应的云服务器。云服务器反馈的视频中包含的商品,并在商品上生成边缘高亮,引导用户点击。判断用户是否点击标记产品,如果用户点击标记产品,视频暂停,生成该商品AR广告投放请求,云服务器返回AR产品展示和购买界面。如果用户不点击标记产品,则继续播放视频。通过算力网络,根据用户偏好、产品特征和视频特征,用户与AR广告进行交互,进行不同模式下的AR产品展示。用户与AR产品进行交互,沉浸式体验产品,购买产品。当用户结束观看AR产品展示和购买,则返回视频页面,继续播放视频。
本申请通过对用户当前观看的目标视频进行识别,确定需要推送的目标AR产品,并确定推送交互方式后,在目标视频的的页面中向用户推送目标AR产品,从而提高了AR产品的推送效率。
参见图2,图2是本申请实施例提供的AR产品的推送方法装置的结构图。
如图2所示,AR产品的推送方法装置200包括:
获取模块210,用于在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;
识别模块220,用于对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;
确定模块230,用于根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;
推送模块230,用于基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
可选的,识别模块220包括:
第一获取子模块,用于获取所述目标视频中包括的多个视频帧;
提取子模块,用于根据特征提取算法依次对所述多个视频帧进行特征提取,得到目标特征;
第一确定子模块,用于基于所述目标特征确定至少一个第一目标视频帧,所述第一目标视频帧为所述多个视频帧中包括目标产品的视频帧,所述目标产品为多个候选AR产品中的AR产品;
计算子模块,用于计算所述目标产品与数据库包括的多个AR产品的相似度,得到多个相似度值,所述多个相似度值与所述多个第一目标视频帧一一对应;
第二确定子模块,用于基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品。
可选的,第二确定子模块包括:
第一确定单元,用于基于所述多个计算结果确定至少一个第二目标视频帧,所述第二目标视频帧对应的计算结果小于预设阈值;
第二确定单元,用于基于所述第二目标视频帧包括的目标产品确定需要推送的目标AR产品,所述目标AR产品为所述数据库中与所述目标产品相似度最高的AR产品。
可选的,确定模块230包括:
第三确定子模块,用于根据所述偏好信息确定用户维度,所述用户维度包括功利主义和享乐主义;
第四确定子模块,用于根据所述视频信息确定视频维度,所述视频维度包括信息性视频和娱乐性视频;
第五确定子模块,用于根据所述目标AR产品确定产品维度,所述产品维度包括高价值功利产品、低价值功利产品、高价值享乐产品和低价值享乐产品;
第六确定子模块,用于基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式,所述目标交互方式为产品增强、用户增强或情景增强中的任意一种。
可选的,还包括:
第二获取子模块,用于获取所述用户的历史观看数据;
第七确定子模块,用于根据所述用户观看数据确定用户指标信息,所述用户指标信息包括以下至少一项:至少两种预设交互方式中的每种交互方式的交互率、至少两种预设交互方式中的每种交互方式的点击率、至少两种预设交互方式中的每种交互方式的观看时间、至少两种预设交互方式中的每种交互方式的浏览深度,所述至少两种预设交互方式包括所述目标交互方式;
第八确定子模块,用于根据所述用户指标信息确定更新信息;
更新子模块,用于根据所述更新信息对所述目标交互方式进行更新。
可选的,更新子模块,包括:
输入单元,用于将所述用户指标信息输入分别输入到产品增强回归模型、用户增强回归模型和情景增强回归模型中,输出第一交互率、第二交互率和第三交互率;
第三确定单元,用于确定目标交互率,所述目标交互率为所述第一交互率、所述第二交互率和所述第三交互率中值最大的交互率;
第四确定单元,用于根据所述目标交互率对应的交互方式确定更新信息,其中,所述至少两种预设交互方式中,不同的交互方式对应的交互率不同。
可选的,推送模块240,包括:
第九确定子模块,用于在所述目标视频中确定第三目标视频帧,所述第三目标视频帧为包括所述目标AR产品的视频帧;
生成子模块,用于基于所述目标交互方式在所述第三目标视频帧中生成目标页面,所述目标页面包括所述目标AR产品;
推送子模块,用于在目标视频的播放过程中向用户推送所述目标页面。
本申请通过对用户当前观看的目标视频进行识别,确定需要推送的目标AR产品,并确定推送交互方式后,在目标视频的的页面中向用户推送目标AR产品,从而提高了AR产品的推送效率。
本申请实施例还提供一种电子设备。请参见图3,电子设备可以包括处理器301、存储器302及存储在存储器302上并可在处理器301上运行的程序3021。
在通信设备为电子设备的情况下,程序3021被处理器301执行时可实现图1对应的方法实施例中的任意步骤:
在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;
对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;
根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;
基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
可选的,所述对所述目标视频进行识别,得到需要推送的目标AR产品,包括:
获取所述目标视频中包括的多个视频帧;
根据特征提取算法依次对所述多个视频帧进行特征提取,得到目标特征;
基于所述目标特征确定至少一个第一目标视频帧,所述第一目标视频帧为所述多个视频帧中包括目标产品的视频帧,所述目标产品为多个候选AR产品中的AR产品;
计算所述目标产品与数据库包括的多个AR产品的相似度,得到多个相似度值,所述多个相似度值与所述多个第一目标视频帧一一对应;
基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品。
可选的,所述基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品,包括:
基于所述多个计算结果确定至少一个第二目标视频帧,所述第二目标视频帧对应的计算结果小于预设阈值;
基于所述第二目标视频帧包括的目标产品确定需要推送的目标AR产品,所述目标AR产品为所述数据库中与所述目标产品相似度最高的AR产品。
可选的,所述根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式,包括:
根据所述偏好信息确定用户维度,所述用户维度包括功利主义和享乐主义;
根据所述视频信息确定视频维度,所述视频维度包括信息性视频和娱乐性视频;
根据所述目标AR产品确定产品维度,所述产品维度包括高价值功利产品、低价值功利产品、高价值享乐产品和低价值享乐产品;
基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式,所述目标交互方式为产品增强、用户增强或情景增强中的任意一种。
可选的,所述基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式之后,所述方法还包括:
获取所述用户的历史观看数据;
根据所述用户观看数据确定用户指标信息,所述用户指标信息包括以下至少一项:至少两种预设交互方式中的每种交互方式的交互率、至少两种预设交互方式中的每种交互方式的点击率、至少两种预设交互方式中的每种交互方式的观看时间、至少两种预设交互方式中的每种交互方式的浏览深度,所述至少两种预设交互方式包括所述目标交互方式;
根据所述用户指标信息确定更新信息;
根据所述更新信息对所述目标交互方式进行更新。
可选的,所述根据所述用户指标信息确定更新信息,包括:
将所述用户指标信息输入分别输入到产品增强回归模型、用户增强回归模型和情景增强回归模型中,输出第一交互率、第二交互率和第三交互率;
确定目标交互率,所述目标交互率为所述第一交互率、所述第二交互率和所述第三交互率中值最大的交互率;
根据所述目标交互率对应的交互方式确定更新信息,其中,所述至少两种预设交互方式中,不同的交互方式对应的交互率不同。
可选的,所述基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品,包括:
在所述目标视频中确定第三目标视频帧,所述第三目标视频帧为包括所述目标AR产品的视频帧;
基于所述目标交互方式在所述第三目标视频帧中生成目标页面,所述目标页面包括所述目标AR产品;
在目标视频的播放过程中向用户推送所述目标页面。
本申请通过对用户当前观看的目标视频进行识别,确定需要推送的目标AR产品,并确定推送交互方式后,在目标视频的的页面中向用户推送目标AR产品,从而提高了AR产品的推送效率。
本申请实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述AR产品的推送方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (10)

1.一种AR产品的推送方法,其特征在于,包括:
在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;
对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;
根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;
基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
2.根据权利要求1所述的方法,其特征在于,所述对所述目标视频进行识别,得到需要推送的目标AR产品,包括:
获取所述目标视频中包括的多个视频帧;
根据特征提取算法依次对所述多个视频帧进行特征提取,得到目标特征;
基于所述目标特征确定至少一个第一目标视频帧,所述第一目标视频帧为所述多个视频帧中包括目标产品的视频帧,所述目标产品为多个候选AR产品中的AR产品;
计算所述目标产品与数据库包括的多个AR产品的相似度,得到多个相似度值,所述多个相似度值与所述多个第一目标视频帧一一对应;
基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品。
3.根据权利要求2所述的方法,其特征在于,所述基于所述多个计算结果在所述数据库中确定需要推送的目标AR产品,包括:
基于所述多个计算结果确定至少一个第二目标视频帧,所述第二目标视频帧对应的计算结果小于预设阈值;
基于所述第二目标视频帧包括的目标产品确定需要推送的目标AR产品,所述目标AR产品为所述数据库中与所述目标产品相似度最高的AR产品。
4.根据权利要求1所述的方法,其特征在于,所述根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式,包括:
根据所述偏好信息确定用户维度,所述用户维度包括功利主义和享乐主义;
根据所述视频信息确定视频维度,所述视频维度包括信息性视频和娱乐性视频;
根据所述目标AR产品确定产品维度,所述产品维度包括高价值功利产品、低价值功利产品、高价值享乐产品和低价值享乐产品;
基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式,所述目标交互方式为产品增强、用户增强或情景增强中的任意一种。
5.根据权利要求4所述的方法,其特征在于,所述基于所述用户维度、所述视频维度和所述产品维度确定所述目标AR产品的目标交互方式之后,所述方法还包括:
获取所述用户的历史观看数据;
根据所述用户观看数据确定用户指标信息,所述用户指标信息包括以下至少一项:至少两种预设交互方式中的每种交互方式的交互率、至少两种预设交互方式中的每种交互方式的点击率、至少两种预设交互方式中的每种交互方式的观看时间、至少两种预设交互方式中的每种交互方式的浏览深度,所述至少两种预设交互方式包括所述目标交互方式;
根据所述用户指标信息确定更新信息;
根据所述更新信息对所述目标交互方式进行更新。
6.根据权利要求5所述的方法,其特征在于,所述根据所述用户指标信息确定更新信息,包括:
将所述用户指标信息输入分别输入到产品增强回归模型、用户增强回归模型和情景增强回归模型中,输出第一交互率、第二交互率和第三交互率;
确定目标交互率,所述目标交互率为所述第一交互率、所述第二交互率和所述第三交互率中值最大的交互率;
根据所述目标交互率对应的交互方式确定更新信息,其中,所述至少两种预设交互方式中,不同的交互方式对应的交互率不同。
7.根据权利要求1所述的方法,其特征在于,所述基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品,包括:
在所述目标视频中确定第三目标视频帧,所述第三目标视频帧为包括所述目标AR产品的视频帧;
基于所述目标交互方式在所述第三目标视频帧中生成目标页面,所述目标页面包括所述目标AR产品;
在目标视频的播放过程中向用户推送所述目标页面。
8.一种AR产品的推送装置,其特征在于,包括:
获取模块,用于在用户观看目标视频的情况下,获取所述用户的用户信息和所述目标视频的视频信息,所述视频信息包括所述目标视频的视频类型,所述用户信息包括所述用户的偏好信息;
识别模块,用于对所述目标视频进行识别,得到需要推送的目标AR产品,其中,所述目标视频包括所述目标AR产品;
确定模块,用于根据所述用户信息和所述视频信息确定所述目标AR产品的目标交互方式;
推送模块,用于基于所述目标交互方式在所述目标视频的页面中,向用户推送所述目标AR产品。
9.一种电子设备,包括:收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序;其特征在于,所述处理器,用于读取存储器中的程序实现如权利要求1至7中任一项所述的AR产品的推送方法中的步骤。
10.一种可读存储介质,用于存储程序,其特征在于,所述程序被处理器执行时实现如权利要求1至7中任一项所述的AR产品的推送方法中的步骤。
CN202311259488.5A 2023-09-27 2023-09-27 Ar产品的推送方法、装置、电子设备及存储介质 Pending CN117201846A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311259488.5A CN117201846A (zh) 2023-09-27 2023-09-27 Ar产品的推送方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311259488.5A CN117201846A (zh) 2023-09-27 2023-09-27 Ar产品的推送方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN117201846A true CN117201846A (zh) 2023-12-08

Family

ID=88999679

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311259488.5A Pending CN117201846A (zh) 2023-09-27 2023-09-27 Ar产品的推送方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN117201846A (zh)

Similar Documents

Publication Publication Date Title
US11863830B2 (en) System for interacting with objects within rendered scenes in motion
CN104219559B (zh) 在视频内容中投放不明显叠加
CN110378732B (zh) 信息显示方法、信息关联方法、装置、设备及存储介质
US11670055B1 (en) Facial expression tracking during augmented and virtual reality sessions
CN107633441A (zh) 追踪识别视频图像中的商品并展示商品信息的方法和装置
US11625874B2 (en) System and method for intelligently generating digital composites from user-provided graphics
CN108509457A (zh) 一种视频数据的推荐方法和装置
US20140189476A1 (en) Image manipulation for web content
CN106575450A (zh) 通过反照率模型、系统和方法的增强现实内容渲染
CA2875891A1 (en) System and method for identifying and altering images in a digital video
US20160035016A1 (en) Method for experiencing multi-dimensional content in a virtual reality environment
CN105308636A (zh) 用于提供虚拟广告的设备和方法
CN114025188B (zh) 直播广告展示方法、系统、装置、终端及可读存储介质
CN112364203A (zh) 电视视频推荐方法、装置、服务器和存储介质
US10922744B1 (en) Object identification in social media post
US11432046B1 (en) Interactive, personalized objects in content creator&#39;s media with e-commerce link associated therewith
CN112269943B (zh) 一种信息推荐系统及方法
US10984572B1 (en) System and method for integrating realistic effects onto digital composites of digital visual media
CN108833971A (zh) 一种视频处理方法及装置
CN117201846A (zh) Ar产品的推送方法、装置、电子设备及存储介质
US11175807B1 (en) Intelligent contextual video thumbnail display
CN116109368A (zh) 用于电子商务应用的图像和视频实例关联
CN110399527B (zh) 影视推荐方法、装置及存储介质
CN114245193A (zh) 显示控制方法、装置和电子设备
CN115344774A (zh) 用户账号的筛选方法、装置及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination