CN118014659A - 一种电子宣传品生成和播放方法、系统及存储介质 - Google Patents

Abstract

一种电子宣传品生成和播放方法、系统及存储介质，所述电子宣传品生成和播放方法包括：实时采集电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词，基于所述用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并进行播放，所述电子宣传品库中的电子宣传品由产品图像和不同的背景图像合成得到，所述不同的背景图像根据不同的用户标签生成。采用本公开实施例方案，可以实现电子宣传流程的闭环控制，提升用户体验，达到较好的营销效果。

Description

一种电子宣传品生成和播放方法、系统及存储介质

技术领域

本文涉及信息技术领域技术，尤指一种电子宣传品生成和播放方法、系统及存储介质。

背景技术

目前的人工智能(AI)可以进行海报的设计，辅助海报设计人员快速生成海报，降低海报的制作门槛，完成低成本、高效率的海报图像设计和制作。

但是目前的海报生成方法仅用于投放前广告的设计环节，无法自适应进行调整。

发明内容

本申请实施例提供了一种电子宣传品生成和播放方法、系统及存储介质，能够实现电子宣传品的自适应调整和播放。

一方面，本公开实施例提供了一种电子宣传品生成和播放方法，包括：

实时采集电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词，基于所述用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并进行播放，所述电子宣传品库中的电子宣传品由产品图像和不同的背景图像合成得到，所述不同的背景图像根据不同的用户标签生成。

另一方面，本公开实施例还提供了一种电子宣传品生成和播放业务系统，包括：

收集子系统，用于接收实时采集的电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词；

生成子系统，用于根据不同的用户标签生成不同的背景图像，将产品图像和不同的背景图像合成得到电子宣传品，并存入电子宣传品库中；

展示子系统，用于基于所述关注用的用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并发送播放命令。

再一方面，本公开实施例还提供了一种电子宣传品播放系统，包括图像采集装置、电子宣传品生成和播放业务服务器、以及展示装置，其中：

所述图像采集装置用于实时采集电子宣传品播放区域的人脸信息；

所述电子宣传品生成和播放业务服务器上安装有如前所述的电子宣传品生成和播放业务系统；

所述展示装置用于播放所述电子宣传品生成和播放业务系统发送的电子宣传品。

再一方面，本公开实施例还提供了一种计算机可读存储介质，存储有程序指令，当该程序指令被执行时可实现上述电子宣传品生成和播放方法。

采用本公开实施例，可以实时获取当前观看用户的数据，根据当前关注用户的情况对电子宣传品的内容进行实时调整，一方面可以达到电子宣传流程的闭环控制，另一方面可以提升用户体验，达到较好的营销效果。

本申请的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本申请而了解。本申请的其他优点可通过在说明书以及附图中所描述的方案来实现和获得。

附图说明

附图用来提供对本申请技术方案的理解，并且构成说明书的一部分，与本申请的实施例一起用于解释本申请的技术方案，并不构成对本申请技术方案的限制。

图1为本公开实施例电子宣传品生成和播放方法的流程图；

图2为本公开实施例电子宣传品生成和播放系统的示意图；

图3为本公开实施例电子宣传品播放系统的示意图；

图4为本公开实施例广告合成示意图。

具体实施方式

本申请描述了多个实施例，但是该描述是示例性的，而不是限制性的，并且对于本领域的普通技术人员来说显而易见的是，在本申请所描述的实施例包含的范围内可以有更多的实施例和实现方案。尽管在附图中示出了许多可能的特征组合，并在具体实施方式中进行了讨论，但是所公开的特征的许多其它组合方式也是可能的。除非特意加以限制的情况以外，任何实施例的任何特征或元件可以与任何其它实施例中的任何其他特征或元件结合使用，或可以替代任何其它实施例中的任何其他特征或元件。

此外，在描述具有代表性的实施例时，说明书可能已经将方法和/或过程呈现为特定的步骤序列。然而，在该方法或过程不依赖于本文所述步骤的特定顺序的程度上，该方法或过程不应限于所述的特定顺序的步骤。如本领域普通技术人员将理解的，其它的步骤顺序也是可能的。因此，说明书中阐述的步骤的特定顺序不应被解释为对权利要求的限制。此外，针对该方法和/或过程的权利要求不应限于按照所写顺序执行它们的步骤，本领域技术人员可以容易地理解，这些顺序可以变化，并且仍然保持在本申请实施例的精神和范围内。

如背景技术中所述，目前的海报生成方法仅用于投放前广告的设计环节，无法自适应动态调整，例如无法结合实际投放后观看海报的用户群体属性，投放海报的位置或当前季节、节气或天气等进行自适应优化，导致营销效果不理想。

为此本实施例提供了一种电子宣传品生成和播放方法，如图1所示，包括以下步骤：

步骤11，实时采集电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词，可用于描述关注用户的特定属性或兴趣；

所述实时采集电子宣传品播放区域的人脸信息可以是接收图像采集设备采集的人脸信息。图像采集设备可以安装在播放区域，或者直接安装与播放设备上，且朝向播放区域屏幕面对的方向。

所述关注用户是指满足预设条件的用户，例如可以进行以下判断中的一种或者多种，如果判断结果为真(yes)，则将该人脸识别为关注用户：判断实时采集的人脸是否在预设观看范围内；判断实时采集的人脸质量是否高于预设质量阈值；判断实时采集的人脸停留时间是否大于时间阈值；判断人脸视角是否为预设视角。其中，预设观看范围可以小于播放范围，是指观看效果较好的区域。人脸质量例如可以通过清晰度、亮度、是否有遮挡来进行衡量。人脸视角是指人脸的朝向，用于确定人脸是否朝向播放设备。

用户标签可以包括至少一个关键词，可以包括但不限于以下一种或多种：用户基本信息、情绪信息、风格信息、关注时长等。

步骤12，基于所述用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并进行播放，所述电子宣传品库中的电子宣传品由产品图像和不同的背景图像合成得到，所述不同的背景图像根据不同的用户标签生成。

预先根据不同的用户标签生成不同的背景图像，这些用户标签可以是预先设定的，或者可以是预设一段时间内的实时采集、识别得到的用户标签。生成图像可采用预先训练好的图像生成式AI模型完成，例如可以采用BigGAN、StyleGAN或DALL-E等图像生成式AI模型。将生成的背景图像与待宣传产品的图像进行合成，得到电子宣传品。合成也可以采用图像生成式AI模型实现，以获得效果更好的电子宣传品。

本文所述电子宣传品包括但不限于广告或海报等，所述电子宣传品可以是静态的或者也可以是动态的。

采用本公开实施例方法可以实时获取当前观看用户的数据，根据当前关注用户的情况对电子宣传品的内容进行实时调整，一方面可以达到电子宣传流程的闭环控制，另一方面可以提升用户体验，达到较好的营销效果。

在示例性实施例中，产品所有者可以通过输入接口(例如通过播放设备上的触控屏或者业务系统的管理后台或者业务系统提供的登录网址)输入产品图像和目标受众用户画像，采用预先训练好的图像生成式AI模型基于目标受众用户画像生成多幅背景图像，合成所述产品图像和所述背景图像得到电子宣传品，存入电子宣传品库。用户画像是对目标受众的综合描述，包括但不限于以下一种或多种特征：性别、年龄、教育程度、职业、兴趣爱好、消费习惯等。可能包含与用户标签相同的特征。当初次播放时，可以播放基于目标受众用户画像生成的电子宣传品。产品所有者包括但不限于产品生产厂家、产品销售方等。

在示例性实施例中，所述方法还可包括：统计预设时间段内关注用户的用户标签，与目标受众用户画像进行对比，如果关注用户的用户标签中的数据与目标受众用户画像中的特征匹配度低于预设值，则从电子宣传品库中提取根据目标受众用户画像生成的背景图像合成得到的电子宣传品并进行播放。用目标受众用户画像可能具有与用户标签相同或相近的特征，通过对相同的特征进行比较，例如两者中可能都包括年龄、性别，此外目标受众用户画像中的兴趣爱好与用户标签中的风格信息相近，兴趣爱好通常也可以反映目标受众的风格，如果相同或相近特征中的超过半数相符合，或者具有高权重特征相符合，则认为匹配度高于预设值，相当于此时播放的效果较好，关注用户与目标受众接近，如果相同或相近特征中的超过半数不符合，或者具有高权重特征(例如风格)不符合，则认为匹配度低于预设值，说明当前电子宣传品播放效果不好，实际关注用户与目标受众差距较大，则需要调整电子宣传品的风格类型，将其调整为基于目标受众用户画像生成的电子宣传品。

在示例性实施例中，所述方法还包括：根据预设场景生成不同的背景图像，保存在电子宣传品库中，所述预设场景包括但不限于以下一种或多种：促销类场景、节日类场景、天气类场景，根据促销类场景的背景图像和产品图像合成得到促销类场景电子宣传品存入电子宣传品库，根据节日类场景的背景图像和产品图像合成得到节日类场景电子宣传品存入电子宣传品库，根据天气类场景的背景图像和产品图像合成得到天气类场景电子宣传品存入电子宣传品库。

在示例性实施例中，在上述步骤10中，如果识别没有关注用户，则可以执行以下判断中的一种或多种：判断当前日期如果处于促销期，则从所述电子宣传品库中提取一个或多个促销类场景电子宣传品进行播放；判断当前日期如果处于节日期间，则从所述电子宣传品库中提取一个或多个节日类场景电子宣传品进行播放；判断当前天气如果处于预设天气类型，则从所述电子宣传品库中提取当前天气对应的一个或多个天气类场景电子宣传品进行播放。通过增加促销类、节日类和天气类场景，使电子宣传品可根据不同场景进行自适应切换，提高电子宣传品的营销效果。

示例性地，如果上述判断结果均为假(no)，则提取基于用户标签的关注度排名生成的一个或多个电子宣传品进行播放。根据关注度排名生成电子宣传品，使得生成的产品宣传品能够更贴合关注用户的喜好，获得更好的营销效果。

具体地，基于用户标签的关注度排名生成的一个或多个电子宣传品采用以下方式生成：

统计预设时间内关注用户的用户标签，按照所有关注用户的用户标签中的标签出现的数量进行排序，出现数量最多的标签为关注度最高的标签，为出现数量大于预设值的多个标签分别生成背景图像，将生成的背景图像与产品图像进行合成，得到基于用户标签的关注度排名生成的一个或多个电子宣传品。

示例性地，可以采用以下方式进行排序和图像生成：对所有关注用户的用户标签分类排序，选出每一类标签出现数量大于预设值(每类标签对应的预设值可以相同或者不同)的多个标签内容，为每个标签内容生成背景图像，此外，还可以对出现数量大于预设值的多个标签内容进行组合，对组合后的标签生成背景图像。例如，以一个关注用户的用户标签包括年龄、性别、风格为例，以年龄标签为单位统计每个年龄段出现关注用户的数量，以性别标签为单位分别统计男性关注用户和女性关注用户出现的数量，以风格标签为单位分别统计每类风格关注用户出现的数量，为出现数量最多的前2-4个年龄段关注用户分别生成针对男性和女性的背景内容，为出现数量最多的2-10种风格的关注用户分别生成针对男性和女性的背景内容。此处关注度排名和生成背景图像的规则仅为示例，在具体实现时可以有多种变化。

在示例性实施例中，识别如果有关注用户后，所述方法还可以包括：判断所述关注用户如果为VIP客户，则从电子宣传品库中提取与所述VIP客户匹配的电子宣传品并进行播放，所述与VIP客户匹配的电子宣传品是由产品图像和根据所述VIP客户的用户标签生成的背景图像合成的。通过预先为VIP客户生成专属电子宣传品，当识别该VIP客户正在观看时，切换为该VIP客户的专属电子宣传品，使客户具有更好的体验。VIP客户例如是已在产品厂家或销售方注册过的用户，注册时记录VIP客户的人脸信息，识别时根据可根据该人脸信息进行比对。

在示例性实施例中，在合成电子宣传品时，还可以生成与背景图像统一风格的二维码图像，或者基于参考图生成与参考图统一风格的二维码图像，或者基于风格提示词生成对应风格的二维码图像，将生成的二维码图像叠加到由产品图像和背景图像合成得到的电子宣传品中。二维码链接内容由产品所有者提供，包括但不限于以下一种或多种：网址链接、社交媒体链接、应用程序下载链接等。二维码的生成可以使用已有的二维码生成工具，为了使得到的二维码更加美观，可使用图像生成式AI模型，基于背景图、或输入的参考图，或风格提示词等对该二维码进行调整。或者也可以将二维码链接内容与所期望风格特征(例如风格提示词或参考图)输入具有二维码生成功能的图像生成式AI模型。

在示例性实施例中，在合成电子宣传品时，还可以根据背景内容描述提示词、关注用户标签数据、产品描述词，基于预先训练好的大语言模型生成营销文案，将所述营销文案叠加到由产品图像和背景图像合成得到的电子宣传品中。所述背景内容描述提示词可以由深度学习神经网络根据背景图像生成，所述关注用户标签数据可以是关注度排名较高的用户标签或者可以是受众用户的用户画像，所述产品描述词可由产品所有者提供。

在示例性实施例中，所述方法还可包括：采集所述关注用户的手势信息，识别所述手势信息对应的操作命令，执行相应操作。例如用户手势为向左划动，该向左滑动对应的操作命令为切换到上一个播放的电子宣传品，例如用户手势为向右划动，该向右滑动对应的操作命令为切换到下一个播放的电子宣传品。

在示例性实施例中，所述方法还包括：接收产品所有者的编辑命令，从所述电子宣传品库中提取待编辑电子宣传品，根据所述产品所有者的区域选择指示从所述待编辑电子宣传品中切割出局部区域图像，按照所述产品所有者的动态选择指示将所述局部区域图像与待编辑电子宣传品的全局图像内容进行多次叠加，以使得到的多帧图像合成后达到所述动态选择指示的动态效果。其中，所述区域选择指示是指产品所有者确定局部区域的命令，例如可以是用户用手指在触摸屏上对局部区域进行划区操作。所述动态选择指示是指产品所有者确定局部区域图像的运动方向或轨迹。通过上述编辑功能，产品所有者可以对自动生成的电子宣传品进行再次编辑，得到动态的电子宣传品，使得该电子宣传品更具有吸引力。除了可以进行上述动态编辑外，在其他实施例中，产品所有者还可以对电子宣传品进行静态编辑，即对已经生成的电子宣传品进行图像局部的修改，修改方法与上述过程类似，区别是无需生成多帧图像，只需得到一帧修改后的图像即可。

本公开实施例在电子宣传品播放过程中融合了线下的用户数据收集与分析，对电子宣传品的关注用户进行分析，从而面向高关注度的目标用户进行相应风格的电子宣传品展示，并且还可以面向VIP客户的标签数据生成专属的电子宣传品风格和内容，从而实现了从用户分析、到电子宣传品设计和投放的闭环流程，以提升电子宣传品对线下用户的吸引力和营销效果。

本公开实施例还提供了一种实现上述电子宣传品生成和播放方法的电子宣传品生成和播放业务系统，如图2所示，包括收集子系统21、生成子系统22和展示子系统23，其中：

所述收集子系统21，用于接收实时采集的电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词；

所述生成子系统22，用于根据不同的用户标签生成不同的背景图像，将产品图像和不同的背景图像合成得到电子宣传品，并存入电子宣传品库中；

所述展示子系统23，用于基于所述关注用的用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并发送播放命令。

采用本公开实施例系统可以实时获取当前观看用户的数据，根据当前关注用户的情况对电子宣传品的内容进行实时调整，一方面可以达到电子宣传流程的闭环控制，另一方面可以提升用户体验，达到较好的营销效果。

在示例性实施例中，所述生成子系统22还用于根据预设场景生成不同的背景图像，所述预设场景包括：促销类场景、节日类场景、天气类场景，所述生成子系统22根据促销类场景的背景图像和产品图像合成得到促销类场景电子宣传品存入电子宣传品库，所述生成子系统22根据节日类场景的背景图像和产品图像合成得到节日类场景电子宣传品存入电子宣传品库，所述生成子系统22根据天气类场景的背景图像和产品图像合成得到天气类场景电子宣传品存入电子宣传品库。

所述展示子系统23还用于在所述收集子系统21在识别没有关注用户时，执行以下判断中的一种或多种：判断当前日期如果处于促销期，则提取一个或多个促销类场景电子宣传品进行播放；判断当前日期如果处于节日期间，则提取一个或多个节日类场景电子宣传品进行播放；判断当前天气如果处于预设天气类型，则提取当前天气对应的一个或多个天气类场景电子宣传品进行播放；如果上述判断结果均为假，则提取基于用户标签的关注度排名生成的一个或多个电子宣传品进行播放。通过增加促销类、节日类和天气类场景，使电子宣传品可根据不同场景进行自适应切换，提高电子宣传品的营销效果。

在示例性实施例中，所述生成子系统22还用于根据所述VIP客户的用户标签生成背景图像，将产品图像和根据所述VIP客户的用户标签生成的背景图像合成，得到电子宣传品；所述展示子系统23还用于在所述收集子系统21判断所述关注用户为VIP客户时，从电子宣传品库中提取与所述VIP客户匹配的电子宣传品并进行播放。通过预先为VIP客户生成专属电子宣传品，当识别该VIP客户正在观看时，切换为该VIP客户的专属电子宣传品，使客户具有更好的体验。

上述电子宣传品生成和播放业务系统可以安装于业务服务器中，通过对关注用户进行数据收集与分析，调整电子宣传品的展示，从而更贴合关注用户的喜好风格。并且，还可结合当前场景进行电子宣传品的内容切换，此外，还可以面向VIP客户的标签数据生成专属的电子宣传品风格和内容，从而实现了从用户分析、到电子宣传品设计和投放的闭环流程，以提升电子宣传品对线下用户的吸引力和营销效果。

本公开实施例还提供了一种电子宣传品播放系统，如图3所示，包括安装如图2所示的电子宣传品生成和播放业务系统的业务服务器，图像采集装置24以及展示装置25，其中：

所述电子宣传品生成和播放业务系统如前所述，此处不再赘述；

所述图像采集装置24用于实时采集电子宣传品播放区域的人脸信息；

所述展示装置25用于播放所述电子宣传品生成和播放业务系统发送的电子宣传品。

采用本公开实施例的电子宣传品播放系统，可以实时获取当前观看用户的数据，根据当前关注用户的情况对电子宣传品的内容进行实时调整，一方面可以达到电子宣传流程的闭环控制，另一方面可以提升用户体验，达到较好的营销效果。

下面以电子宣传品为广告为例，结合具体系统对上述方法进行说明。

电子宣传品播放系统以下简称广告机，该广告机包括图像采集装置、展示装置以及电子宣传品生成和播放业务系统(以下简称业务系统)，图像采集装置例如可以是设置于广告机上的摄像头，展示装置例如可以是触控显示屏，该广告机还包括用于与业务系统连接的接口，用于与业务系统进行交互。一个业务系统可以管理多台广告机。广告机用户(或称系统用户)为产品所有者，通过在业务系统进行注册从而可具有编辑和发布广告的权限。在其他示例中，如果电子宣传品为海报，下述实施例同样适用。

该业务系统包括三个子系统：收集子系统、生成子系统、展示子系统，该三个系统可部署在同一个业务服务器上。下面分别对每个子系统进行介绍。

●收集子系统用于接收摄像头采集的用户数据，识别关注用户，生成每个关注用户的标签，收集子系统还用于基于关注用户的标签进行数据分析。

1.识别关注用户的具体操作过程如下：

步骤1.1，接收摄像头采集的图像，检测图像中的人脸信息，判断该人脸信息是否在观看范围内，如果是，则执行步骤2，如果不是，返回步骤1.1；

可以根据显示屏的大小确定最佳观看距离范围，在该最佳观看距离范围内设定该屏幕的观看范围，并将该观看范围预先录入客群数据收集系统。

如果有多个人脸信息，则逐个判断是否在观看范围。

步骤1.2，判断人脸质量是否高于预设质量阈值，如果是，执行步骤1.3，如果不是，返回步骤1.1；

如果有多个人脸信息，则逐个判断是否高于预设质量阈值。

判断人脸质量是否高于预设质量阈值例如可以通过以下参数中的一种或多种进行判断：人脸清晰度，人脸亮度，人脸是否有遮挡(如果有遮挡，可进一步判断遮挡面积，遮挡面积越大质量越差)等。

步骤1.4，基于视频流进行人脸跟踪，判断该人脸在观看范围内的时间是否大于时间阈值(例如3s)，如果是，执行步骤1.5，如果不是返回步骤1.1；

步骤1.5，进行人脸视角(朝向)判断(视角例如包括：朝左、朝左前、朝前方、朝右前和朝右等)，如果判断该人脸视角为前方，则认为该人脸为关注用户，启动用户标签生成任务。

在其他实施例中，上述步骤的执行顺序可调，例如可以先进行人脸朝向判断，再进行人脸质量判断，或者是先进行人脸朝向判断，再进行人脸跟踪等。

当在观看范围内，检测到人脸信息、人脸质量高于阈值、则进行人脸跟踪，如果该人脸在观看范围内存在的时间保持一定时间(如3s)以上，进行人脸朝向的判断，如果判断该人脸朝向为前方，则认为该人脸为关注用户，启动用户标签生成任务。

2.收集子系统生成每个关注用户的标签的具体操作过程如下：

步骤2.1，为每个关注用户分配标识(ID)；

步骤2.2，对每个用户ID进行下列数据获取(获取顺序不限)：

基本信息统计，基本信息包括但不限于以下一种或多种：年龄、性别、眼镜；可以使用基于深度学习算法训练后得到的人脸属性模型来获取基本信息，人脸属性模型从原始图像数据中提取有关人脸属性的特征，输出与人脸属性相关的基本信息，该基本信息可以是性别数据(男或女)，以及用户年龄段数据，例如可以将年龄分为青少年(20岁以下)、青年(20-40岁)、中年(40-60岁)、老年(60岁以上)。

情绪统计，情绪包括但不限于以下一种或多种：平静、喜悦、兴奋、悲伤、惊讶、恐惧、愤怒、厌恶等：可以使用基于深度学习算法训练后得到的人脸表情识别模型来获得用户的情绪数据。

风格统计，风格可根据用户的穿着确定，包括但不限于：休闲、时尚、复古、运动、商务等：可以使用基于深度学习算法训练后得到的人体属性识别模型来获得用户的风格数据。

关注时长统计，可基于人脸跟踪算法对该用户人脸持续时间进行跟踪，计算从该人脸出现到丢失的时间，从而得到关注时长。

上述获取的数据构成该关注用户对应的标签，与该用户ID一一对应，通过为关注用户进行数据统计并生成标签，可用于对广告商品的受众用户进行用户画像，还可以用于后续进行数据分析。

3.收集子系统进行数据分析的具体操作过程如下：

根据采集的数据，对当前广告内容的关注用户进行数据分析得到用户画像。数据分析可以包括以下一种或多种：关注用户基本数据分析、高关注度用户数据分析、用户画像差距分析等，其中：

关注用户基本数据分析(或称基本用户画像)，包括但不限于：年龄分布排行、性别占比、穿着分布；可以是指出的统计分析，或者是基于预设时间段内的统计分析；

高关注度用户数据分析(或称高关注度用户画像)，高关注度用户是指表现出积极情绪且关注时长超过预设时间的用户，高关注度用户数据分析包括但不限于：年龄分布排行、性别占比、穿着分布；可选地，还可根据关注时长，对应每段关注时长分别给出用户画像，例如，3s以内关注用户的用户画像、3s-10s内关注用户的用户画像、10s-20s内关注用户的用户画像、20s以上关注用户的用户画像等，对应每段关注时长分别给出其用户画像，可通过统计每段关注时长内用户的年龄分布、性别占比和穿着分布给出用户画像；

VIP客户数据分析，VIP客户可以是已经在商家门店注册过的会员用户，如果广告机识别到VIP客户，则可为每个VIP客户形成独立的用户画像数据，包括但不限于：年龄、性别、喜好商品风格(如运动风格、休闲风格、商务、颜色等)，喜好商品风格可以根据摄像头采集分析获得，还可以从会员用户在商家的注册信息中获得。根据VIP客户的独立用户画像数据可以为该用户推荐适合该用户的商品广告。一种应用场景可以是：对于有VIP客户注册数据的门店，且广告机进行该门店商品展，通过导入门店系统的VIP客户数据，例如该VIP客户ID对应的年龄区域、性别、历史购买商品品类等，生成VIP客户的用户画像数据，以基于该数据为VIP客户生成专属广告。

用户画像差距分析：将关注当前广告的实际关注用户的用户画像与该广告的目标受众(或称目标关注用户)的用户画像进行对比，如果发现实际关注用户的用户标签中的数据与目标受众用户画像中的特征匹配度低于预设值，即实际关注用户与目标受众的差距较大，则表明当前广告设计风格需要调整，例如可以优先调整为符合目标受众对应风格的广告，再例如，如果对于相同的产品，出现实际关注用户与目标受众的差距较大的次数大于预设次数，则对每次出现实际关注用户与目标受众的差距较大的情况时的实际关注用户进行数据分析，基于该数据分析结果调整该产品的广告设计风格。广告的目标受众的用户画像可以通过人工输入的方式进行设置，例如可由产品厂家或销售方的工作人员通过业务服务器的交互界面或广告机的交互界面填写当前广告商品的目标用户画像数据，如“中年、职场女性、稳重、高品质、轻奢、黑白色”等。上述判断实际关注用户与目标受众的差距可以通过以下方式：分别比较实际关注用户与目标受众的基础数据，例如：年龄、性别、风格等，如果基础数据中超过预定比例的数据均不相同，如基础数据中的年龄和风格均不相同，则认为差距较大，此外，还可以通过增加不同基础数据的权重来进行判断，例如风格数据的权重较大，此外，还可以根据实际关注用户中是否有当前产品所属商家的VIP客户来进行判断，当实际关注用户中包含前述VIP客户时，该VIP客户的基础数据的权重值可以设置为高于普通关注用户的基础数据的权重值。

●生成子系统用于根据收集子系统生成的关注用户的标签，针对不同标签的关注用户生成对应的广告图像。具体地，生成子系统可用于生成商品图库和基于预先训练好的图像生成式AI模型生成背景图库，以及基于背景图库生成对于同一产品的对应不同用户标签的广告图像。

生成子系统可以从已有广告图像中获得产品图像，或者可以从广告机用户的照片中获得，并将该产品图像保存在商品图库中，可选地，商品图库中还可以保存有产品图像对应的产品描述，包括但不限于以下一种或多种：产品名称、类别、特点、风格、功效等。已有广告图像、产品照片由广告机用户提供。一种可能实现方式是：广告机用户提供的是现场拍摄的产品照片，通过触摸屏选择商品主体(例如用手指圈出商品主体)，通过图像分割模型得到商品主体像素。

生成子系统可以根据用户标签或者预设场景生成背景图像，将其保存在背景图库中，背景图像是生成广告图像时使用的背景。

生成子系统可以基于以下方式实现基于用户标签的广告背景图像生成：

初次生成产品广告时，可以根据该产品的目标受众的标签生成广告图像，例如将标签输入训练好的图像生成式AI模型，保存图像生成式AI模型输出的图像作为该产品的背景图像。

当产品广告投放之后，可根据收集子系统数据分析的结果继续生成背景图像，例如可以基于关注度排名较高的多个用户标签，分别生成背景图像，或者根据关注度排名高低按比例生成背景图像(即根据排名确定生成背景图像的数量比例)。所述关注度排名可以是按照所有关注用户的用户标签中每一类标签的出现数量进行排序，出现数量最多的各类标签汇总为关注度最高的标签，例如关注度排名高的用户标签包括：“30-40岁、职场、女性、商务“、“20-30岁、男性、运动、休闲”等，则利用大语言模型生成适合该用户标签的背景内容描述提示词，如“柔和的光线、咖啡厅、超写实风格”，将背景内容描述提示词输入预先训练好的图像生成式AI模型，生成多个不同的背景图像。可选地，还可预先设置消极内容提示词，如“丑陋、恐怖、模糊、低质量”等，与背景内容描述提示词一同输入图像生成式AI模型，以避免生成相应风格的广告背景图像。

生成子系统可以基于以下方式实现基于预设场景的广告背景图像生成：

所述预设场景包括但不限于以下场景类型：节日类场景(例如母亲节、春节、情人节等)、促销类场景(例如买一送一、店庆促销等)、节气类场景(例如清明、立冬、冬至等)、天气类场景(例如雨雪天气、高温期、台风期、梅雨季、寒潮期等)等。在生成背景图像时，基于大语言模型对于不同的预设场景生成对应的场景描述提示词，将其作为广告内容描述，输入预先训练好的图像生成式AI模型，生成多个不同的背景图像。可选地，还可以预先设置消极内容提示词一起输入图像生成式AI模型，与背景内容描述提示词一同输入图像生成式AI模型，以避免生成相应风格的广告背景图像。

生成子系统合成产品图像与不同标签和不同场景下的背景图像，例如可以将产品图像叠加在背景图像上，从而批量生成产品广告图像。

可选地，生成子系统还可以具有生成二维码的功能，生成子系统接收广告机用户输入的二维码所链接的内容(如网址链接、社交媒体链接、应用程序下载链接等)、目标受众的用户画像以及用户选择的参考图(可从背景图库中选择，或由广告机用户自行提供)；基于目标受众的用户画像生成对应的风格提示词，如二次元风格、赛博朋克风格、写实风格、古风类风格等；然后生成子系统将二维码链接内容、风格提示词和参考图输入具有二维码生成功能的图像生成式AI模型中，生成二维码图像。风格提示词和参考图均用于表达所期望风格特征，可以仅输入其中一种。广告机用户可自行选择(例如通过拖拽的方式)在广告图像中放置二维码图像的位置，将该二维码图像叠加在产品广告图像中。相比于传统方式，采用本实施例生成的二维码更具有艺术风格和创意。

可选地，生成子系统还可以具有生成营销文案的功能，生成子系统可根据基于广告机用户的需要(是否发出生成营销文案的命令)，为用户选择的广告图像生成营销文案，生成子系统可将生成该广告图像的背景内容描述提示词、目标受众的标签数据(或关注度排名高的用户标签)、产品描述词以及任务描述提示词输入大语言模型(例如GPT模型)，例如输入内容为“基于海报描述的xxx场景内容、面向xxx类型的用户，给xxx商品写一段营销文字，长度xxx”。广告机用户可自行选择(例如通过拖拽的方式)在广告图像中放置营销文案的位置，将该营销文案叠加在产品广告图像中。

可选地，生成子系统还可以具有为VIP客户生成专属广告的功能，当通过摄像头检测到VIP客户时，可基于该VIP客户的独立用户画像，对其感兴趣的产品生成专属广告，生成过程类似上述广告图像生成过程，区别在于，基于该VIP客户的喜好生成广告背景图像。

●展示子系统实现广告图像的展示。图4给出了一种广告生成过程的示意图。

一种初始播放广告图像时展示流程包括：

由广告机用户拍摄待展示的产品，将产品照片以及目标受众的标签输入业务系统，业务系统中的收集子系统记录针对该产品的目标受众的标签，业务系统中的生成子系统从产品照片中截图产品图像保存到商品图库；当业务系统接收到广告机用户针对待展示产品的生成广告命令后，生成子系统从商品图库中提取相应待展示产品的图像和/或产品描述，根据收集子系统记录的该待展示产品的目标受众的标签，从背景图库中提取相应风格的图像，基于图像生成式AI模型生成针对目标受众的产品广告图像。

另一种可实现自适应调整的广告图像的展示流程：

步骤1，收集子系统识别关注用户；

具体方法参见前述步骤1.1-1.5

步骤2，基于收集子系统的关注用户识别结果，展示子系统判断当前是否有关注用户，如果有，执行步骤4，如果没有，执行步骤3；

步骤3，按照预先设定的编排顺序播放广告；

例如，可以判断当前日期是否处于促销期，如果是，则从生成子系统中提取(加载)一个或多个促销类型广告随机播放，如果不是，则判断当前日期是否处于节日期间，如果是，则从生成子系统中提取当前节日对应的节日类型广告进行播放，如果不是，则判断当前天气是否处于预设天气类型(例如雨雪天气、高温期、台风期、梅雨季、寒潮期等)，如果是则从生成子系统中提取当前天气对应的天气类型广告进行播放，如果不是，则从生成子系统中提取一个或多个基于用户标签的关注度排名生成的广告进行播放。上述促销日期、节日期间和特殊天气的判断顺序不限，可任意调整。

步骤4，判断关注用户是否仅有1人，如果是，执行步骤5，如果不是，执行步骤8；

步骤5，判断该关注用户是否为已注册的VIP客户，如果是，执行步骤6，如果不是执行步骤7；

步骤6，立刻停止播放当前的广告，从生成子系统中提取为该VIP客户生成的广告图像(如果有多幅则随机播放)，或者通知生成子系统为该VIP客户生成专属广告，并进行播放；

步骤7，采用收集子系统为该关注用户生成的标签，与高关注度用户画像进行匹配，即判断该关注用户的标签是否符合高关注用户画像，除了全部匹配，超过预设数目的匹配属于高度匹配也可以认为是匹配成功，例如标签包括年龄、性别和穿着风格，如果该关注用户的年龄属于高关注度用户年龄分布，该关注用户的穿着风格属于高关注度用户穿着分布，则可认为该关注用户与高关注度用户画像匹配，如果当前关注用户的用户标签与高关注度用户画像匹配，则停止播放当前广告，从生成子系统中提取基于匹配标签生成的广告图像并进行播放(如果有多幅则可随机播放)，如果不匹配即匹配度较低，说明当前关注用户非高关注度用户，则继续播放当前的广告内容。

步骤8，当关注用户有多名时，则对当前的关注用户标签进行识别和统计，统计数量占比最多的标签，如“青年、女性、时尚”等，与已建立的高关注度用户画像进行匹配，如果匹配成功，则立刻停止播放当前广告，并从生成子系统中提取基于匹配标签生成的广告图像并进行播放(多幅时可随机播放)，如果不匹配，则继续播放当前的广告内容。

在展示广告内容的同时还可以与用户进行互动，展示子系统还可具有互动功能，例如：

一种互动功能可以是：预先在展示装置中还可以设置有动态手势识别模块，在展示广告的过程中，如果检测到预设的对应切换广告的手势动作，则进行推荐广告的切换。除了进行切换广告，还可以预设其他互动手势，这些手势可通过屏幕上的示例告知当前关注用户。当出现多个人手时，可选择面积最大的手部进行手势识别。

另一种互动功能可以是将静态广告转换为具有动态特效，广告机用户可通过预设的特定手势启动该操作，广告机用户可以先选择待转换广告图像，选择当前广告图像上需要移动的部分(例如可以通过手指划区或者涂抹的方式选择)，基于图像分割模型从当前广告图像上切割中用户选择的局部区域，基于广告机用户设定的移动方向或随机设定该局部区域的动态运动方向(例如向某一方向的运动，或向多个方向的往复运动等)，生成多帧局部图像内容和全局图像内容的叠加，基于图像生成式AI模型对每帧中该局部内容的周围像素进行局部重绘，最终获得多张广告图像，将多张广告图像合成为动图格式(如gif)或者视频格式，最终得到局部动图特效的广告。

通过手势识别，可以进行广告互动，从而达到吸引客户、提高客户关注度的效果。

可见，上述流程不但可以实现广告的自动生成和播放，还可以根据实时获取的当前观看用户的数据，对广告图像进行适应性调整，实现了广告图像的闭环控制，可以提高营销效果，提高广告转化率，并且基于图像生成式AI模型自动生成广告，可以大幅提高广告的更新效率，节约成本。

本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、装置中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。在硬件实施方式中，在以上描述中提及的功能模块/单元之间的划分不一定对应于物理组件的划分；例如，一个物理组件可以具有多个功能，或者一个功能或步骤可以由若干物理组件合作执行。某些组件或所有组件可以被实施为由处理器，如数字信号处理器或微处理器执行的软件，或者被实施为硬件，或者被实施为集成电路，如专用集成电路。这样的软件可以分布在计算机可读介质上，计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的，术语“计算机存储介质”包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外，本领域普通技术人员公知的是，通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据，并且可包括任何信息递送介质。

此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”等的特征可以明示或者隐含地包括至少一个该特征。

在本申请的描述中，“多个”的含义是至少两个，例如两个、三个等，除非另有明确具体的限定。

在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

尽管上面已经示出和描述了本申请的实施例，可以理解的是，上述实施例是示例性的，不能理解为对本申请的限制，本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (16)

1.一种电子宣传品生成和播放方法，其特征在于，包括：

实时采集电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词，基于所述用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并进行播放，所述电子宣传品库中的电子宣传品由产品图像和不同的背景图像合成得到，所述不同的背景图像根据不同的用户标签生成。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

接收产品所有者输入的产品图像和目标受众用户画像，采用预先训练好的图像生成式AI模型基于目标受众用户画像生成多幅背景图像，合成所述产品图像和所述背景图像得到电子宣传品，存入电子宣传品库。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

统计预设时间内关注用户的用户标签，与目标受众用户画像进行对比，如果关注用户的用户标签中的数据与目标受众用户画像中的特征匹配度低于预设值，则从电子宣传品库中提取根据目标受众用户画像生成的背景图像合成得到的电子宣传品并进行播放。

4.根据权利要求1所述的方法，其特征在于，采用以下方式识别是否有关注用户：

执行以下判断中的一种或多种，如果判断结果为真，则将该人脸识别为关注用户：

判断实时采集的人脸是否在预设观看范围内；判断实时采集的人脸质量是否高于预设质量阈值；判断实时采集的人脸停留时间是否大于时间阈值；判断人脸视角是否为预设视角。

5.根据权利要求1所述的方法，其特征在于，根据预设场景生成所述不同的背景图像，所述预设场景包括以下一种或多种：促销类场景、节日类场景、天气类场景，根据促销类场景的背景图像和产品图像合成得到促销类场景电子宣传品存入电子宣传品库，根据节日类场景的背景图像和产品图像合成得到节日类场景电子宣传品存入电子宣传品库，根据天气类场景的背景图像和产品图像合成得到天气类场景电子宣传品存入电子宣传品库。

6.根据权利要求5所述的方法，其特征在于，识别如果没有关注用户，所述方法还包括：执行以下判断中的一种或多种：

判断当前日期如果处于促销期，则从所述电子宣传品库中提取一个或多个促销类场景电子宣传品进行播放；

判断当前日期如果处于节日期间，则从所述电子宣传品库中提取一个或多个节日类场景电子宣传品进行播放；

判断当前天气如果处于预设天气类型，则从所述电子宣传品库中提取当前天气对应的一个或多个天气类场景电子宣传品进行播放；

如果上述判断结果均为假，则提取基于用户标签的关注度排名生成的一个或多个电子宣传品进行播放。

7.根据权利要求6所述的方法，其特征在于，所述基于用户标签的关注度排名生成的一个或多个电子宣传品采用以下方式生成：

统计预设时间内关注用户的用户标签，按照所有关注用户的用户标签中的标签出现的数量进行排序，为出现数量大于预设值的多个标签分别生成背景图像，将生成的背景图像与产品图像进行合成，得到基于用户标签的关注度排名生成的一个或多个电子宣传品。

8.根据权利要求6所述的方法，其特征在于，所述识别如果有关注用户后，所述方法还包括：判断所述关注用户如果为VIP客户，则从电子宣传品库中提取与所述VIP客户匹配的电子宣传品并进行播放，所述与VIP客户匹配的电子宣传品是由产品图像和根据所述VIP客户的用户标签生成的背景图像合成的。

9.根据权利要求1或2或5或7或8所述的方法，其特征在于，在合成电子宣传品时，所述方法还包括：生成与背景图像统一风格的二维码图像，或者基于参考图生成与参考图统一风格的二维码图像，或者基于风格提示词生成对应风格的二维码图像，将生成的二维码图像叠加到由产品图像和背景图像合成得到的电子宣传品中。

10.根据权利要求1或2或5或7或8所述的方法，其特征在于，在合成电子宣传品时，所述方法还包括：根据背景内容描述提示词、关注用户标签数据、产品描述词，基于预先训练好的大语言模型生成营销文案，将所述营销文案叠加到由产品图像和背景图像合成得到的电子宣传品中。

11.根据权利要求1所述的方法，其特征在于，所述方法还包括：采集所述关注用户的手势信息，识别所述手势信息对应的操作命令，执行相应操作。

12.根据权利要求2所述的方法，其特征在于，所述方法还包括：

接收产品所有者的编辑命令，从所述电子宣传品库中提取待编辑电子宣传品，根据所述产品所有者的区域选择指示从所述待编辑电子宣传品中切割出局部区域图像，按照所述产品所有者的动态选择指示将所述局部区域图像与待编辑电子宣传品的全局图像内容进行多次叠加，以使得到的多帧图像合成后达到所述动态选择指示的动态效果。

13.一种电子宣传品生成和播放业务系统，其特征在于，包括：

收集子系统，用于接收实时采集的电子宣传品播放区域的人脸信息，识别如果有关注用户，则为所述关注用户生成用户标签，所述用户标签是对关注用户进行分类或标记的关键词；

生成子系统，用于根据不同的用户标签生成不同的背景图像，将产品图像和不同的背景图像合成得到电子宣传品，并存入电子宣传品库中；

展示子系统，用于基于所述关注用的用户标签从电子宣传品库中提取与所述用户标签匹配度最高的电子宣传品并发送播放命令。

14.根据权利要求13所述的业务系统，其特征在于，

所述生成子系统还用于根据预设场景生成不同的背景图像，所述预设场景包括：促销类场景、节日类场景、天气类场景，所述生成子系统根据促销类场景的背景图像和产品图像合成得到促销类场景电子宣传品存入电子宣传品库，所述生成子系统根据节日类场景的背景图像和产品图像合成得到节日类场景电子宣传品存入电子宣传品库，所述生成子系统根据天气类场景的背景图像和产品图像合成得到天气类场景电子宣传品存入电子宣传品库；

所述展示子系统还用于，在所述收集子系统在识别没有关注用户时，执行以下判断中的一种或多种：

判断当前日期如果处于促销期，则提取一个或多个促销类场景电子宣传品进行播放；

判断当前日期如果处于节日期间，则提取一个或多个节日类场景电子宣传品进行播放；

判断当前天气如果处于预设天气类型，则提取当前天气对应的一个或多个天气类场景电子宣传品进行播放；

如果上述判断结果均为假，则提取基于用户标签的关注度排名生成的一个或多个电子宣传品进行播放。

15.一种电子宣传品播放系统，其特征在于，包括图像采集装置、电子宣传品生成和播放业务服务器、以及展示装置，其中：

所述图像采集装置用于实时采集电子宣传品播放区域的人脸信息；

所述电子宣传品生成和播放业务服务器上安装有如权利要求13或14所述的电子宣传品生成和播放业务系统；

所述展示装置用于播放所述电子宣传品生成和播放业务系统发送的电子宣传品。

16.一种非瞬态计算机可读存储介质，存储有程序指令，当该程序指令被执行时可实现权利要求1-12任一项所述的方法。