CN113129112A - 物品推荐方法、装置及电子设备 - Google Patents

物品推荐方法、装置及电子设备 Download PDF

Info

Publication number
CN113129112A
CN113129112A CN202110513571.5A CN202110513571A CN113129112A CN 113129112 A CN113129112 A CN 113129112A CN 202110513571 A CN202110513571 A CN 202110513571A CN 113129112 A CN113129112 A CN 113129112A
Authority
CN
China
Prior art keywords
person
item
article
target
watched
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110513571.5A
Other languages
English (en)
Inventor
李雅纯
王晶晶
王春茂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Digital Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Digital Technology Co Ltd filed Critical Hangzhou Hikvision Digital Technology Co Ltd
Priority to CN202110513571.5A priority Critical patent/CN113129112A/zh
Publication of CN113129112A publication Critical patent/CN113129112A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/06Buying, selling or leasing transactions
    • G06Q30/0601Electronic shopping [e-shopping]
    • G06Q30/0631Item recommendations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例提供了物品推荐方法、装置及电子设备,应用于图像处理技术领域。该方法包括:对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;针对每一人员,基于该人员的视线追踪结果,确定该人员在物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与目标人员的意向物品相匹配的物品,作为推荐物品,并向目标人员推送推荐物品。通过本方案,可以提供物品推荐的准确性。

Description

物品推荐方法、装置及电子设备
技术领域
本发明涉及图像处理技术领域,特别是涉及物品推荐方法、装置及电子设备。
背景技术
随着视觉技术的发展,商场、超市等消费场所的经营模式逐渐发生变化。传统的消费场所依赖店员为用户推荐商品,而近年来,为了吸引用户,一些消费场所引入智能推荐系统为用户推荐商品。
相关技术中,可以通过人脸识别等技术手段智能识别进入消费场所的目标用户,并获取目标用户性别、年龄段等属性信息,从而根据所获取的属性信息,确定与目标用户相匹配的用户画像,最后,向目标用户推送预先为属于该用户画像的用户所配置的推荐商品。
上述根据相匹配的用户画像为用户推送商品的过程中,忽略了用户个体的差异性,导致推荐的准确度较低。
发明内容
本发明实施例的目的在于提供物品推荐方法、装置及电子设备,以提高物品推荐的准确性。具体技术方案如下:
第一方面,本发明实施例提供一种物品推荐方法,所述方法包括:
对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,所述目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
针对每一人员,基于该人员的视线追踪结果,确定该人员在所述物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;
针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与所述目标人员的意向物品相匹配的物品,作为推荐物品,并向所述目标人员推送所述推荐物品。
在一种实现方式中,每一人员的视线追踪结果包括:在物品展示区域内该人员的至少一个注视点和该人员对所注视的每一注视点的注视时长;
所述针对每一人员,基于该人员的视线追踪结果,确定该人员在所述物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长,包括:
针对每一人员,识别该人员的至少一个注视点所能注视到的所述物品展示区域内的物品,并将该人员的每一注视点的注视时长,确定为该注视点所能注视到的物品的注视时长。
在一种实现方式中,所述识别该人员的至少一个注视点所能注视到的所述物品展示区域内的物品,包括:
基于每一物品在所述物品展示界面内的位置信息和该人员的每一注视点的位置信息,确定该每一注视点所能注视到的所述物品展示区域内的物品;或者,
将该人员注视的至少一个注视点的位置信息发送至图像采集设备,以使所述图像采集设备采集所接收位置信息处的图像,并识别所采集图像内的物品,并反馈识别结果;将所述图像采集设备反馈的物品作为该人员的至少一个注视点所能注视到的所述物品展示区域内的物品。
在一种实现方式中,所述基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品,包括:
从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品。
在一种实现方式中,所述从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品,包括:
从该人员所注视的至少一个物品中,筛选注视时长最长的物品,作为该人员的意向物品;和/或,
从该人员所注视的至少一个物品中,筛选注视时长大于预设时长的物品,作为该人员的意向物品。
在一种实现方式中,所述在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与所述目标人员的意向物品相匹配的物品,作为推荐物品,包括:
在接收到针对目标人员的推荐请求的情况下,获取所述目标人员的意向物品的指定属性的属性值,作为目标属性值;
在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品。
在一种实现方式中,在所述在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品之前,所述方法还包括:
获取所述目标人员的人员偏好信息;所述人员偏好信息用于指示所述目标人员对物品的兴趣偏好;
所述在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品,包括:
在物品库中,筛选所述指定属性的属性值与所述目标属性的属性值符合预定匹配条件的物品,且符合所述人员偏好信息所指示兴趣偏好的物品,作为推荐物品。
第二方面,本发明实施例提供一种物品推荐装置,所述装置包括:
视线追踪模块,用于对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,所述目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
物品确定模块,用于针对每一人员,基于该人员的视线追踪结果,确定该人员在所述物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;
意向物品确定模块,用于针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
推荐物品确定模块,用于在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与所述目标人员的意向物品相匹配的物品,作为推荐物品,并向所述目标人员推送所述推荐物品。
在一种实现方式中,每一人员的视线追踪结果包括:在物品展示区域内该人员的至少一个注视点和该人员对所注视的每一注视点的注视时长;
所述物品确定模块,具体用于针对每一人员,识别该人员的至少一个注视点所能注视到的所述物品展示区域内的物品,并将该人员的每一注视点的注视时长,确定为该注视点所能注视到的物品的注视时长。
在一种实现方式中,所述物品确定模块,具体用于基于每一物品在所述物品展示界面内的位置信息和该人员的每一注视点的位置信息,确定该每一注视点所能注视到的所述物品展示区域内的物品;或者,将该人员注视的至少一个注视点的位置信息发送至图像采集设备,以使所述图像采集设备采集所接收位置信息处的图像,并识别所采集图像内的物品,并反馈识别结果;将所述图像采集设备反馈的物品作为该人员的至少一个注视点所能注视到的所述物品展示区域内的物品。
在一种实现方式中,所述意向物品确定模块,具体用于从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品。
在一种实现方式中,所述意向物品确定模块,具体用于从该人员所注视的至少一个物品中,筛选注视时长最长的物品,作为该人员的意向物品;和/或,从该人员所注视的至少一个物品中,筛选注视时长大于预设时长的物品,作为该人员的意向物品。
在一种实现方式中,所述推荐物品确定模块,具体用于在接收到针对目标人员的推荐请求的情况下,获取所述目标人员的意向物品的指定属性的属性值,作为目标属性值;在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品。
在一种实现方式中,还包括:
偏好获取模块,用于在所述推荐物品确定模块执行所述在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品之前,获取所述目标人员的人员偏好信息;所述人员偏好信息用于指示所述目标人员对物品的兴趣偏好;
所述推荐物品确定模块,具体用于在物品库中,筛选所述指定属性的属性值与所述目标属性的属性值符合预定匹配条件的物品,且符合所述人员偏好信息所指示兴趣偏好的物品,作为推荐物品。
第三方面,本发明实施例提供一种电子设备,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现第一方面所述的方法步骤。
第四方面,本发明实施例提供一种计算机可读存储介质,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现第一方面所述的方法步骤。
本发明实施例有益效果:
本发明实施例所提供的物品推荐方法,可以对针对包含有物品展示区域的场景所采集的视频数据中的人员进行视线追踪,得到视线追踪结果,并根据视线追踪结果确定每一人员在包含有物品展示区域的场景中所注视的物品和注视时长,进而可以基于每一人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员在物品展示区域内具有购买意向的意向物品。当需要为目标人员推荐物品时,就在接收到针对目标人员的推荐请求的情况下,将物品库中指定属性与目标人员的意向物品相匹配的物品作为为目标人员推荐的物品,进而向目标人员推送所确定的推荐物品。可见,通过本方案,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
当然,实施本发明的任一产品或方法并不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的实施例。
图1为本发明实施例物品推荐方法的流程图;
图2为本发明实施例物品推荐方法的另一流程图;
图3为本发明实施例物品推荐方法的另一流程图;
图4为本发明实施例物品推荐方法的另一流程图;
图5为本发明实施例提供一种结合场景的物品推荐方法的流程示意图;
图6为本发明实施例物品推荐装置的结构示意图;
图7为本发明实施例所提供的电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
为了提供物品推荐的准确性,本发明实施例提供了物品推荐方法、装置及电子设备。
下面首先本发明实施例所提供的一种物品推荐方法进行介绍。
本发明实施例提供的物品推荐方法可以应用在包含有物品展示区域的场景,例如,商场、店铺、超市等消费场所。物品展示区域为用于展示物品的区域,例如展示商品的货架、柜台等。示例性的,在一种场景中,可以在物品展示区域的四周或内部按照采集视频数据的摄像头,对经过物品展示区域的人员进行录像,得到视频数据。当本发明实施例应用在实时推荐场景时,可以根据实时录制的视频数据为目标人员推送推荐商品。当本发明实施例应用在离线场景时,可以根据数据库中存储的各时段的视频数据为目标人员推送商品。
需要说明的是,本发明实施例可以应用于各类电子设备,例如,个人电脑、服务器等其他具有数据处理能力的设备。并且,本发明实施例提供的物品推荐方法可以通过软件、硬件或软硬件结合的方式实现。示例性的,本发明实施例可以应用与部署在商超等消费场所的智能推荐系统的控制中心,或应用于推荐服务的后台服务器。
为了提高物品推荐的准确性,本发明实施例提供了物品推荐方法,包括:
对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
针对每一人员,基于该人员的视线追踪结果,确定该人员在物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;
针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与目标人员的意向物品相匹配的物品,作为推荐物品,并向目标人员推送推荐物品。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
下面结合附图,对本发明实施例所提供的一种物品推荐方法进行介绍。
如图1所示,本发明实施例提供的一种物品推荐方法,可以包括如下步骤:
S101,对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
其中,当本发明实施例应用在实时推荐场景时,上述目标视频数据可以为部署在包含有物品展示区域的场景中的摄像头实时采集的视频流数据。当本发明实施例应用在离线场景时,上述目标视频数据可以为数据库存储的各时间段的视频数据中,属于指定时间段或包含指定人员的视频数据。而上述视线追踪结果可以包括人员的视线的注视点。针对一段目标视频而言,视频追踪结果可以记录每一帧中该人员的视线的注视点。
可选的,在一种实现方式中,在获取到目标视频数据之后,可以对目标视频数据进行视线跟踪。其中,视线跟踪可以基于现有技术实现,本发明实施例对此不作具体限定。
可选的,可以通过人脸识别技术识别出目标视频数据中出现的人员,并对识别的人员进行跟踪。同时,针对每一人员而言,获取包含该人员的每一视频帧中的该人员的人脸图像或眼睛区域的图像,并识别图像中左眼视线方向和右眼视线方向,进而基于左眼视线方向和/或右眼视线方向,确定该人员的视线追踪结果。
在一种实现方式中,在仅能获取到人员单个眼睛的视线方向(如所获取的人脸图像为侧脸,或人脸图像中存在遮挡物)时,可以将获取的单个眼睛的视线方向作为该人员的视线方向。或者,为了简化处理流程提高处理速度,在可以同时获取到人员的左眼视线方向和右眼视线方向时,从中选择一个作为该人员的视线方向。或者,可以基于左眼视线方向和右眼视线方向,确定一个从双眼中心点指向左眼视线方向和右眼视线方向交点的方向,作为该人员的视线方向。当需要确定人员的视线追踪结果时,可以在包含有物品展示区域的场景所对应的映射空间中,将该人员的视线方向映射为视线向量,并计算该视线向量与物品展示区域在映射空间所抽象的二维平面的交点,并将该交点在包含物品展示区域的场景映射位置作为视线追踪的视线追踪结果。
上述情况中,仅通过人员的单个视线方向确定该人员的视线追踪结果,可选的,在另一种实现方式中,还可以同时基于人员左眼视线方向和右眼视线方向,确定该人员的视线追踪结果。如在得到人员的左眼视线方向和右眼视线方向后,可以在映射空间中,将左眼视线方向映射为左眼视线向量,并计算左眼视线向量与上述二维平面的交点,作为左眼交点,同时将右眼视线方向映射为右眼视线向量,并计算右眼视线向量与上述二维平面的交点,作为右眼交点。选取左眼交点和右眼交点的中心点,作为该人员的视线追踪结果。
可选的,在确定人员视线的注视点的同时,还可以记录该注视点对应的时间戳。进而,可以确定目标视频数据中人员的每一注视点的注视时长。此时,上述视线追踪结果中还可以包含每一注视点的注视时长。
可选的,还可以预先基于深度学习训练得到用于进行视线追踪的模型,进而将所获取的人脸图像或眼睛区域的图像输入到模型中,由模型输出视线追踪结果。
S102,针对每一人员,基于该人员的视线追踪结果,确定该人员在物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;
其中,由于视线追踪结果中记录了人员的视线的注视点,因而,在包含物品展示区域的场景中,各物品在物品展示区域进行展示,当确定出人员的视线追踪结果后,可以基于视线追踪结果,确定出人员在物品展示区域内注视的至少一个物品。
S103,针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
其中,对物品的注视时长反映了人员对物品的购买意愿的强烈程度,一般而言,对物品的注视时长越长,表明购买的意愿越强烈,因此,可以基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品。
S104,在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与目标人员的意向物品相匹配的物品,作为推荐物品,并向目标人员推送推荐物品。
其中,针对不同的使用场景,针对目标人员的推荐请求的形式可以是多样的。在线下商场等消费场所中,针对目标人员的推荐请求可以为目标人员经过或处于某一指定区域,当某一人员在指定区域内时,将该人员作为目标人员,并触发该针对目标人员的推荐请求。示例性的,在某商场中,设置一推荐区域,该推荐区域用于展示为人员推荐的物品。当人员A到达推荐区域后,则位于推荐区域内的处理装置生成针对人员A的推荐请求,以向执行本发明实施例的电子设备(如控制中心)请求为人员A推荐物品。针对线上场景而言,当人员B在终端浏览指定网页或打开指定应用程序时,则终端生成针对人员B的推荐请求。
当物品为商品时,上述指定属性可以为商品的商品类别,也可以为商品的颜色、价格等属性。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
可选的,在一种实施例中,上述每一人员的视线追踪结果包括:在物品展示区域内该人员的至少一个注视点和该人员对所注视的每一注视点的注视时长。
此时,基于图1所示的实施例,如图2所示,本发明的另一实施例所提供的物品推荐方法,上述步骤S102,可以包括:
S102A:针对每一人员,识别该人员的至少一个注视点所能注视到的物品展示区域内的物品,并将该人员的每一注视点的注视时长,确定为该注视点所能注视到的物品的注视时长。
上述注视点为用户视线在物品展示区域上的落点。
上述针对每一人员,识别该人员的至少一个注视点所能注视到的物品展示区域内的物品,并将该人员的每一注视点的注视时长,确定为该注视点所能注视到的物品的注视时长,结合不同的使用场景可以有多种不同的实现方式,包括:
在一种实现方式中,本发明实施例的电子设备可以预先存储有与物品展示界面相关的先验知识,该先验知识可以通过预先在电子设备与物品展示区域的标定步骤确定,包括物品展示区域内每个物品的位置信息,即物品与物品展示区域各位置之间的对应关系。可选的,该对应关系可以是固定的,或者,该对应关系也可以进行调整。
此时,上述确定人员所注视的物品的方式可以包括:
基于每一物品在物品展示界面内的位置信息和该人员的每一注视点的位置信息,确定该每一注视点所能注视到的物品展示区域内的物品。
在另一种实现方式中,除用于采集包含物品展示区域的场景的视频数据的采集设备外,还设置一用于采集物品展示区域的图像采集设备,该图像采集设备与控制中心相连接。当控制中心确定出注视点的位置信息后,可以将该位置信息发生制该图像采集设备,图像采集设备根据该位置信息调整摄像头,以采集该位置信息所表征位置处的图像。
此时,上述确定人员所注视的物品的方式可以包括:
基于每一物品在物品展示界面内的位置信息和该人员的每一注视点的位置信息,确定该每一注视点所能注视到的物品展示区域内的物品;将该人员注视的至少一个注视点的位置信息发送至图像采集设备,以使图像采集设备采集所接收位置信息处的图像,并识别所采集图像内的物品,并反馈识别结果;将图像采集设备反馈的物品作为该人员的至少一个注视点所能注视到的物品展示区域内的物品。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
基于图1所示的实施例,如图3所示,本发明的另一实施例还提供一种物品推荐的方法,上述步骤S103,包括:
S103A,从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品。
上述预设时长筛选条件可以根据需求和经验进行确定。可选的,上述步骤可以采用如下至少一种方式实现:
第一种方式,从该人员所注视的至少一个物品中,筛选注视时长最长的物品,作为该人员的意向物品。
第二种方式,从该人员所注视的至少一个物品中,筛选注视时长大于预设时长的物品,作为该人员的意向物品。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
基于图1所示的实施例,如图4所示,本发明的另一实施例还提供一种物品推荐的方法,上述步骤S104,包括:
S104A,在接收到针对目标人员的推荐请求的情况下,获取目标人员的意向物品的指定属性的属性值,作为目标属性值;
其中,当接收到针对目标人员的推荐请求,则说明需要为目标人员推送推荐商品,因此,可以先获取目标人员的意向物品的指定属性的属性值,作为目标属性值。例如,指导属性为商品类别,则目标属性值可以为衣服。
S104B,在物品库中,筛选指定属性的属性值与目标属性值符合预定匹配条件的物品,作为推荐物品。
示例性的,当目标属性值为衣服时,可以从物品库中筛选出物品类别为衣服的物品,做推荐物品。可选的,推荐物品的数量可以为一个也可以为多个,这都是可以的。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
可选的,在本发明的另一实施例中,上述在S104B之前,可以包括如下步骤:
获取目标人员的人员偏好信息;人员偏好信息用于指示目标人员对物品的兴趣偏好。
上述偏好信息可以包括人员所喜欢的品牌、颜色、款式等。
此时,上述步骤S104B,可以包括:
在物品库中,筛选指定属性的属性值与目标属性的属性值符合预定匹配条件的物品,且符合人员偏好信息所指示兴趣偏好的物品,作为推荐物品。
举例而言,当目标属性值为衣服时,可以从物品库中筛选出物品类别为衣服的物品,进一步的,人员偏好信息标签红色、XX品牌,则从所筛选的衣服中进一步的筛选颜色为红色、且品牌为XX品牌的衣服,作为推荐物品。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
如图5所示,本发明实施例还提供一种结合场景的物品推荐方法的流程示意图。图中包括视线分析系统和个性化推送系统,该个性化推送系统运行流程如图5所示,包括步骤:
第一步,通过视频监控设备实时获取视频流数据;
第二步,对视频流数据中人脸进行检测、跟踪,并输入至视线追踪分析系统中,获取用户的注视点;
其中,对视频流数据中的人脸进行检测、跟踪,并输入至视线追踪系统中获取眼球视线分析获取用户当前的注视点、或直接从视线追踪系统中获取用户当前注视点。可选的,视线追踪方法可以是基于深度学习的方法。
第三步,识别物品信息并记录注视时长;
其中,基于第二步中视线追踪系统得到的注视点,和注视时长识别用户当前注视物品,同时对用户注视物品的时长进行记录。
第四步,根据用户注视物品的时长分析物品类别等物品属性;
其中,基于物品相关信息和注视时长,分析用户的意向物品,同时对物品的类别等相关属性进行细化分析,包括但不限于物品种类(如超市场景中识别洗衣液属于家居清洁种类、服装店中识别某服装为短款上衣等)、所属品牌等
第五步,提取特征进行人脸比对识别用户的身份,并将视线分析信息存储在用户档案;
其中,人脸识别获取用户的身份信息,在数据库中调取用户档案,可选地,将视线追踪分析信息存储在档案中。
第六步,利用实时获取的需求物品属性和历史档案,基于物品推荐模型,在物品库中检索用户需求的同款或相似物品;
其中,基于视线分析系统得到的用户意向物品和相关属性,可选地结合用户的历史档案,通过物品推荐模型在物品库中检索用户需求的同款或者相似物品。
第七步,构建好待推送物品,推送给用户。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
如图6所示,本发明实施例还提供了一种物品推荐装置,装置包括:
视线追踪模块601,用于对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
注视物品确定模块602,用于针对每一人员,基于该人员的视线追踪结果,确定该人员在物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;
意向物品确定模块603,用于针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
推荐物品确定模块604,用于在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与目标人员的意向物品相匹配的物品,作为推荐物品,并向目标人员推送推荐物品。
在一种实现方式中,每一人员的视线追踪结果包括:在物品展示区域内该人员的至少一个注视点和该人员对所注视的每一注视点的注视时长;
物品确定模块,具体用于针对每一人员,识别该人员的至少一个注视点所能注视到的物品展示区域内的物品,并将该人员的每一注视点的注视时长,确定为该注视点所能注视到的物品的注视时长。
在一种实现方式中,物品确定模块,具体用于基于每一物品在物品展示界面内的位置信息和该人员的每一注视点的位置信息,确定该每一注视点所能注视到的物品展示区域内的物品;或者,将该人员注视的至少一个注视点的位置信息发送至图像采集设备,以使图像采集设备采集所接收位置信息处的图像,并识别所采集图像内的物品,并反馈识别结果;将图像采集设备反馈的物品作为该人员的至少一个注视点所能注视到的物品展示区域内的物品。
在一种实现方式中,意向物品确定模块,具体用于从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品。
在一种实现方式中,意向物品确定模块,具体用于从该人员所注视的至少一个物品中,筛选注视时长最长的物品,作为该人员的意向物品;和/或,从该人员所注视的至少一个物品中,筛选注视时长大于预设时长的物品,作为该人员的意向物品。
在一种实现方式中,推荐物品确定模块,具体用于在接收到针对目标人员的推荐请求的情况下,获取目标人员的意向物品的指定属性的属性值,作为目标属性值;在物品库中,筛选指定属性的属性值与目标属性值符合预定匹配条件的物品,作为推荐物品。
在一种实现方式中,还包括:
偏好获取模块,用于在推荐物品确定模块执行在物品库中,筛选指定属性的属性值与目标属性值符合预定匹配条件的物品,作为推荐物品之前,获取目标人员的人员偏好信息;人员偏好信息用于指示目标人员对物品的兴趣偏好;
推荐物品确定模块,具体用于在物品库中,筛选指定属性的属性值与目标属性的属性值符合预定匹配条件的物品,且符合人员偏好信息所指示兴趣偏好的物品,作为推荐物品。
本发明实施例所提供技术方案中,可以基于人员在包含有物品展示区域的场景内的注视行为确定为用户推送的推荐物品,与相关技术中根据相匹配的用户画像为用户推送商品的过程相比,避免忽略了人员的个体差异性,从而提高了物品推荐的准确性。
本发明实施例还提供了一种电子设备,如图7所示,包括处理器701、通信接口702、存储器703和通信总线704,其中,处理器701,通信接口702,存储器703通过通信总线704完成相互间的通信,
存储器703,用于存放计算机程序;
处理器701,用于执行存储器703上所存放的程序时,实现上述实施例提供的方法步骤。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect,PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture,EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory,RAM),也可以包括非易失性存储器(Non-Volatile Memory,NVM),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(Digital SignalProcessing,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中,还提供了一种计算机可读存储介质,该计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述任一物品推荐方法的步骤。
在本发明提供的又一实施例中,还提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述实施例中任一物品推荐方法。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、设备、系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本发明的保护范围内。

Claims (10)

1.一种物品推荐方法,其特征在于,所述方法包括:
对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,所述目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
针对每一人员,基于该人员的视线追踪结果,确定该人员在所述物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长;
针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与所述目标人员的意向物品相匹配的物品,作为推荐物品,并向所述目标人员推送所述推荐物品。
2.根据权利要求1所述的方法,其特征在于,每一人员的视线追踪结果包括:在物品展示区域内该人员的至少一个注视点和该人员对所注视的每一注视点的注视时长;
所述针对每一人员,基于该人员的视线追踪结果,确定该人员在所述物品展示区域内注视的至少一个物品,以及对所注视的每一物品的注视时长,包括:
针对每一人员,识别该人员的至少一个注视点所能注视到的所述物品展示区域内的物品,并将该人员的每一注视点的注视时长,确定为该注视点所能注视到的物品的注视时长。
3.根据权利要求2所述的方法,其特征在于,所述识别该人员的至少一个注视点所能注视到的所述物品展示区域内的物品,包括:
基于每一物品在所述物品展示界面内的位置信息和该人员的每一注视点的位置信息,确定该每一注视点所能注视到的所述物品展示区域内的物品;或者,
将该人员注视的至少一个注视点的位置信息发送至图像采集设备,以使所述图像采集设备采集所接收位置信息处的图像,并识别所采集图像内的物品,并反馈识别结果;将所述图像采集设备反馈的物品作为该人员的至少一个注视点所能注视到的所述物品展示区域内的物品。
4.根据权利要求1所述的方法,其特征在于,所述基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品,包括:
从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品。
5.根据权利要求4所述的方法,其特征在于,所述从该人员所注视的至少一个物品中,筛选注视时长满足预设时长筛选条件的物品,作为该人员的意向物品,包括:
从该人员所注视的至少一个物品中,筛选注视时长最长的物品,作为该人员的意向物品;和/或,
从该人员所注视的至少一个物品中,筛选注视时长大于预设时长的物品,作为该人员的意向物品。
6.根据权利要求1所述的方法,其特征在于,所述在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与所述目标人员的意向物品相匹配的物品,作为推荐物品,包括:
在接收到针对目标人员的推荐请求的情况下,获取所述目标人员的意向物品的指定属性的属性值,作为目标属性值;
在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品。
7.根据权利要求6述的方法,其特征在于,在所述在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品之前,所述方法还包括:
获取所述目标人员的人员偏好信息;所述人员偏好信息用于指示所述目标人员对物品的兴趣偏好;
所述在物品库中,筛选所述指定属性的属性值与所述目标属性值符合预定匹配条件的物品,作为推荐物品,包括:
在物品库中,筛选所述指定属性的属性值与所述目标属性的属性值符合预定匹配条件的物品,且符合所述人员偏好信息所指示兴趣偏好的物品,作为推荐物品。
8.一种物品推荐装置,其特征在于,所述装置包括:
视线追踪模块,用于对目标视频数据中包含的各人员进行视线追踪,得到每一人员的视线追踪结果;其中,所述目标视频数据为针对包含有物品展示区域的场景所采集的视频数据;
物品确定模块,用于针对每一人员,基于该人员的视线追踪结果,确定该人员在所述物品展示区域内注视的至少一个物品,以及对所注视的每一商品的注视时长;
意向物品确定模块,用于针对每一人员,基于该人员对所注视的每一物品的注视时长,从该人员所注视的至少一个物品中,筛选该人员的意向物品;
推荐物品确定模块,用于在接收到针对目标人员的推荐请求的情况下,确定物品库中指定属性与所述目标人员的意向物品相匹配的物品,作为推荐物品,并向所述目标人员推送所述推荐物品。
9.一种电子设备,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器,通信接口,存储器通过通信总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序时,实现权利要求1-7任一所述的方法步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现权利要求1-7任一项所述的方法步骤。
CN202110513571.5A 2021-05-11 2021-05-11 物品推荐方法、装置及电子设备 Pending CN113129112A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110513571.5A CN113129112A (zh) 2021-05-11 2021-05-11 物品推荐方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110513571.5A CN113129112A (zh) 2021-05-11 2021-05-11 物品推荐方法、装置及电子设备

Publications (1)

Publication Number Publication Date
CN113129112A true CN113129112A (zh) 2021-07-16

Family

ID=76781862

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110513571.5A Pending CN113129112A (zh) 2021-05-11 2021-05-11 物品推荐方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN113129112A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115225926A (zh) * 2022-06-27 2022-10-21 广州博冠信息科技有限公司 游戏直播的画面处理方法、装置、计算机设备和存储介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102830793A (zh) * 2011-06-16 2012-12-19 北京三星通信技术研究有限公司 视线跟踪方法和设备
CN107247759A (zh) * 2017-05-31 2017-10-13 深圳正品创想科技有限公司 一种商品推荐方法及装置
CN109298780A (zh) * 2018-08-24 2019-02-01 百度在线网络技术(北京)有限公司 基于ar的信息处理方法、装置、ar设备及存储介质
CN109711827A (zh) * 2018-12-27 2019-05-03 武汉市天蝎科技有限公司 一种近眼显示设备的新零售支付方法及支付系统
CN110363555A (zh) * 2018-04-10 2019-10-22 深圳市阿西莫夫科技有限公司 基于视线跟踪视觉算法的推荐方法和装置
CN110636218A (zh) * 2019-08-19 2019-12-31 RealMe重庆移动通信有限公司 对焦方法、装置、存储介质及电子设备
CN110737335A (zh) * 2019-10-11 2020-01-31 深圳追一科技有限公司 机器人的交互方法、装置、电子设备及存储介质
CN111400605A (zh) * 2020-04-26 2020-07-10 Oppo广东移动通信有限公司 基于眼球追踪的推荐方法及装置
CN112488096A (zh) * 2019-09-11 2021-03-12 奥迪股份公司 行车过程中文本信息的获取方法及装置、计算机设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102830793A (zh) * 2011-06-16 2012-12-19 北京三星通信技术研究有限公司 视线跟踪方法和设备
CN107247759A (zh) * 2017-05-31 2017-10-13 深圳正品创想科技有限公司 一种商品推荐方法及装置
CN110363555A (zh) * 2018-04-10 2019-10-22 深圳市阿西莫夫科技有限公司 基于视线跟踪视觉算法的推荐方法和装置
CN109298780A (zh) * 2018-08-24 2019-02-01 百度在线网络技术(北京)有限公司 基于ar的信息处理方法、装置、ar设备及存储介质
CN109711827A (zh) * 2018-12-27 2019-05-03 武汉市天蝎科技有限公司 一种近眼显示设备的新零售支付方法及支付系统
CN110636218A (zh) * 2019-08-19 2019-12-31 RealMe重庆移动通信有限公司 对焦方法、装置、存储介质及电子设备
CN112488096A (zh) * 2019-09-11 2021-03-12 奥迪股份公司 行车过程中文本信息的获取方法及装置、计算机设备
CN110737335A (zh) * 2019-10-11 2020-01-31 深圳追一科技有限公司 机器人的交互方法、装置、电子设备及存储介质
CN111400605A (zh) * 2020-04-26 2020-07-10 Oppo广东移动通信有限公司 基于眼球追踪的推荐方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115225926A (zh) * 2022-06-27 2022-10-21 广州博冠信息科技有限公司 游戏直播的画面处理方法、装置、计算机设备和存储介质
CN115225926B (zh) * 2022-06-27 2023-12-12 广州博冠信息科技有限公司 游戏直播的画面处理方法、装置、计算机设备和存储介质

Similar Documents

Publication Publication Date Title
RU2636102C2 (ru) Система и способ для помощи в определении местоположения и выборе желаемого предмета в месте хранения
JP6482172B2 (ja) レコメンド装置、レコメンド方法、およびプログラム
US8412656B1 (en) Method and system for building a consumer decision tree in a hierarchical decision tree structure based on in-store behavior analysis
CN106164959A (zh) 行为事件测量系统和相关方法
CN104991906B (zh) 信息获取方法、服务器、终端及数据库构建方法、装置
US11270368B2 (en) Method and apparatus for presenting object based on biometric feature
US20150215674A1 (en) Interactive streaming video
CN108197980B (zh) 个性化购物者的肖像生成方法/系统、存储介质及终端
CN106162355A (zh) 视频交互方法及终端
US20200387865A1 (en) Environment tracking
CN108335317A (zh) 一种线下导购方法及装置
CN111782953A (zh) 推荐方法、装置、设备及存储介质
CN113706227A (zh) 一种货架商品推荐方法及装置
CN113887884A (zh) 商超服务系统
CN111027351A (zh) 一种线下商品推荐方法、装置和电子设备
CN112837108A (zh) 信息处理方法、装置及电子设备
US20170358135A1 (en) Augmenting the Half-Mirror to Display Additional Information in Retail Environments
WO2019192455A1 (zh) 门店系统、物品搭配方法、装置及电子设备
CN113129112A (zh) 物品推荐方法、装置及电子设备
WO2015107424A1 (en) System and method for product placement
US11410216B2 (en) Customer service assistance apparatus, customer service assistance method, and computer-readable recording medium
CN114967922A (zh) 信息展示方法、装置、电子设备及存储介质
KR20200024404A (ko) 의류 데이터와 딥러닝 기술을 이용한 사용자 소유 의상에 대한 의류 추천 방법 및 시스템
CN110487016B (zh) 一种向智能冰箱进行信息精准推送的方法、装置及系统
JP2019057259A (ja) 提供プログラム、提供装置、提供方法、端末装置および情報提供装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination