CN115775153A - 购物提醒方法、装置、设备及存储介质 - Google Patents

Abstract

本发明公开一种购物提醒方法、装置、设备及存储介质，该方法包括：在检测到用户位置位于购物区域时，获取购物区域对应的待售商品信息；将待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；获取用户在购物区域的购物行为，并根据购物行为判断是否提示用户购买待提醒商品。由于本发明是在检测到用户位于购物区域时，根据预先确定的购物清单确定待提醒商品，然后通过检测用户在该购物区域的购物行为来决定是否提醒用户购买待提醒商品，一方面能够智能化的提醒用户购买商品，另一方面也能够避免用户逐一比对购物清单然后购买物品的繁琐操作，既降低了购物提醒过程中的人工参与度，也提高了用户的购物体验。

Description

购物提醒方法、装置、设备及存储介质

技术领域

本发明涉及智能家居技术领域，尤其涉及一种购物提醒方法、装置、设备及存储介质。

背景技术

随着互联网技术的发展，智慧生活越来越成为大众的愿景。智慧生活包括智慧出行、智慧社区、智慧物业、智能家居等。生活中，我们经常忘记采购某些生活必须品。如出门前，在与家人的谈话中提及到需要购买某个商品，但是真正到了购物地点后，却忘记了购买。对于一些需要行驶较远的路程、花费较长的时间才能购买的商品，忘记购买会导致用户再次花费额外的时间和精力去补救，白白浪费宝贵的时间。

针对这类情形，现有的购物提醒方式大多是，用户出门前在手机等电子产品或者是纸上手动记录需要购买的物品，然后去超市之后对着事先记录的购物清单逐一购买，非常的不方便。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供了一种购物提醒方法、装置、设备及存储介质，旨在解决现有的购物提醒方式人工参与度较高，不够智能和方便的技术问题。

为实现上述目的，本发明提供了一种购物提醒方法，所述方法包括以下步骤：

在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

可选地，所述在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息之前，所述方法还包括：

对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；

判断所述语音关键词中是否存在目标类型关键词；

在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单。

可选地，所述在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单，包括：

在所述语音关键词中存在目标类型关键词时，根据所述识别结果确定所述目标类型关键词对应的相邻词汇；

对所述相邻词汇进行语义解析，并根据语义解析结果确定待购买商品；

根据所述待购买商品生成购物清单。

可选地，所述在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息，包括：

在检测到用户位置位于购物区域时，与所述购物区域对应的智能货架系统建立通信连接；

通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息。

可选地，所述通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息，包括：

根据所述用户位置生成货架定位请求；

通过所述通信连接将所述货架定位请求发送至所述智能货架系统，以使所述智能货架系统根据所述用户位置确定目标智能货架，并反馈所述目标智能货架对应的待售商品信息。

可选地，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述目标智能货架上集成的图像采集装置采集用户的购物图像；

根据所述购物图像对用户进行行为分析，获得用户的购物行为；

根据所述购物行为判断是否提示用户购买所述待提醒商品。

可选地，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述用户位置对应区域的图像采集装置采集用户的购物图像；

根据所述购物图像对用户进行行为分析，获得用户的购物行为；

根据所述购物行为判断是否提示用户购买所述待提醒商品。

可选地，所述根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域；

若是，则检测用户是否执行预设动作，所述预设动作包括拿起所述待提醒商品或将所述待提醒商品放入购物车；

在检测到用户未执行所述预设动作时，按预设提示方式提示用户购买所述待提醒商品。

可选地，所述根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域之后，还包括：

若是，则获取用户视线信息，并根据所述用户视线信息判断用户是否处于观察所述待提醒商品的状态；

若是，则记录用户对所述待提醒商品的观察时长，并根据所述观察时长判断是否提示用户购买所述待提醒商品。

可选地，所述根据所述观察时长判断是否提示用户购买所述待提醒商品，包括：

将所述观察时长与预设时长阈值进行比较；

在所述观察时长达到所述预设时长阈值时，取消提示用户购买所述待提醒商品；

在所述观察时长未达到所述预设时长阈值时，按预设提示方式提示用户购买所述待提醒商品。

可选地，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品之后，还包括：

在检测到用户位于商品结算区域时，获取用户的付款类型；

在所述付款类型为移动支付时，获取付款成功时收款设备反馈的账单信息；

将所述账单信息中的已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

可选地，所述在检测到用户位于商品结算区域时，获取用户的付款类型之后，还包括：

在所述付款类型为现金支付时，提示用户拍摄购物小票对应的小票图片，并根据所述小票图片确定已购商品信息；

将所述已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

此外，为实现上述目的，本发明还提出一种购物提醒装置，所述购物提醒装置包括：

信息获取模块，用于在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

信息比对模块，用于将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

购物提醒模块，用于获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

可选地，所述购物提醒装置包括：清单生成模块；所述清单生成模块，用于对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；判断所述语音关键词中是否存在目标类型关键词；在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单。

可选地，所述清单生成模块，还用于在所述语音关键词中存在目标类型关键词时，根据所述识别结果确定所述目标类型关键词对应的相邻词汇；对所述相邻词汇进行语义解析，并根据语义解析结果确定待购买商品；根据所述待购买商品生成购物清单。

可选地，所述信息获取模块，还用于在检测到用户位置位于购物区域时，与所述购物区域对应的智能货架系统建立通信连接；通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息。

可选地，所述信息获取模块，还用于根据所述用户位置生成货架定位请求；通过所述通信连接将所述货架定位请求发送至所述智能货架系统，以使所述智能货架系统根据所述用户位置确定目标智能货架，并反馈所述目标智能货架对应的待售商品信息。

可选地，所述购物提醒模块，还用于向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述目标智能货架上集成的图像采集装置采集用户的购物图像；根据所述购物图像对用户进行行为分析，获得用户的购物行为；根据所述购物行为判断是否提示用户购买所述待提醒商品。

此外，为实现上述目的，本发明还提出一种购物提醒设备，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的购物提醒程序，所述购物提醒程序配置为实现如上文所述的购物提醒方法。

此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有购物提醒程序，所述购物提醒程序被处理器执行时实现如上文所述的购物提醒方法。

本发明通过在检测到用户位置位于购物区域时，获取购物区域对应的待售商品信息；将待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；获取用户在购物区域的购物行为，并根据购物行为判断是否提示用户购买待提醒商品。由于本发明是在检测到用户位于购物区域时，根据预先确定的购物清单确定待提醒商品，然后通过检测用户在该购物区域的购物行为来决定是否提醒用户购买待提醒商品，一方面能够智能化的提醒用户购买商品避免遗忘，另一方面也能够避免用户逐一比对购物清单然后购买物品的繁琐操作，既降低了购物提醒过程中的人工参与度，也提高了用户的购物体验。

附图说明

图1是本发明实施例方案涉及的硬件运行环境的购物提醒设备的结构示意图；

图2为本发明购物提醒方法第一实施例的流程示意图；

图3为本发明购物提醒方法第二实施例的流程示意图；

图4为本发明购物提醒方法第三实施例的流程示意图；

图5为本发明购物提醒装置第一实施例的结构框图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。

参照图1，图1为本发明实施例方案涉及的硬件运行环境的购物提醒设备结构示意图。

如图1所示，该购物提醒设备可以包括：处理器1001，例如中央处理器(CentralProcessing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity，Wi-Fi)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory，RAM)，也可以是稳定的非易失性存储器(Non-Volatile Memory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

本领域技术人员可以理解，图1中示出的结构并不构成对购物提醒设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及购物提醒程序。

在图1所示的购物提醒设备中，网络接口1004主要用于与网络服务器进行数据通信；用户接口1003主要用于与用户进行数据交互；本发明购物提醒设备中的处理器1001、存储器1005可以设置在购物提醒设备中，所述购物提醒设备通过处理器1001调用存储器1005中存储的购物提醒程序，并执行本发明实施例提供的购物提醒方法。

本发明实施例提供了一种购物提醒方法，参照图2，图2为本发明购物提醒方法第一实施例的流程示意图。

本实施例中，所述购物提醒方法包括以下步骤：

步骤S10：在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

需要说明的是，本实施例方法的执行主体可以是具有位置定位、语音\图像采集和处理、网络通信以及程序运行功能的便携式终端设备，例如手机、平板电脑、智能穿戴设备(手环、手表)等。用户在携带这些终端设备时，终端设备可运行程序执行本发明实施例提供的购物提醒方法，从而提醒用户购买需要购买的商品，避免遗漏。以下以移动终端为例对本实施例及下述各实施例进行说明。

可理解的是，本步骤中上述购物区域可以是购物商超或购物商超内部的不同商品售卖区。所述待售商品信息可以是待售商品的种类、品牌、型号、售价、库存数量等商品属性信息。

在具体实现中，移动终端可通过自身集成的定位功能对携带者(即用户)当前所处的位置进行实时定位，然后根据定位结果判断用户是否位于购物区域。

需要说明的是，当用户身处购物商超外面或附近时，所述购物区域对应的待售商品信息可以是整个购物商超所售卖商品的信息，当用户身处购物商超内部时，所述购物区域对应的待售商品信息则可以是用户所在位置的周围(例如1米、3米、5米等)的商超货架上所售卖商品的信息。

进一步地，本实施例中移动终端在用户未进入购物商超时，可采用粗略定位(例如GPS定位)的方式来确定用户位置；在用户进入购物商超时，则可采用室内精确定位的方式来确定用户位置。

本实施例中，上述室内精确定位的方式可以是通过无线网络(wifi)设备或蓝牙设备与移动终端之间的连接信号强度来实现米级的室内定位，即移动终端在与商超的wifi设备或蓝牙设备建立连接后，通过实时检测两者之间的连接信号强度，可大致确定出移动终端与wifi设备或蓝牙设备之间的距离，从而确定移动终端的相对位置，实现室内精确定位。

步骤S20：将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

需要说明的是，上述购物清单可以是预先存储在移动终端中的购物明细单，该清单中可以包含需要购买物品的名称、品牌、数量等信息。本实施例中该购物清单中记录的信息可以由用户手动输入，也可以由移动终端根据用户发出的包含上述信息的语音来生成。本实施例对此不加以限制。

在具体实现中，移动终端可在获取到待售商品信息后将待售商品信息与购物清单进行匹配，然后根据匹配结果确定待提醒的商品。

需要说明的是，本步骤中将待售商品信息与购物清单进行匹配的具体方式可由购物清单中记载的待购买商品的信息维度决定。例如，若购物清单中记录的待购买商品的信息涵盖名称、品牌两个维度，则移动终端在进行匹配时，将根据商品的名称和品牌这两个信息维度进行匹配，以保证用户购买到自己中意的商品。

进一步地，若购物清单中记录的待购买商品的信息只有名称、则移动终端在进行匹配时，仅根据商品的名称进行匹配即可。例如，购物清单中记录需要购买洗衣粉，但未注明购买什么品牌的洗衣粉，此时只要待售商品信息中包含洗衣粉，即可判定匹配成功。反之，购物清单中的记录信息为购买A品牌的洗衣粉，若待售商品信息中仅包含B品牌的洗衣粉，此时可判定匹配不成功，那么接下来待提醒商品中则不包含A品牌的洗衣粉这件商品。

考虑到上述情况，本实施例移动终端在用户录入购物清单时，可提醒用户注明商品的品牌和/或型号信息，对于用户未注明商品的品牌和/或型号信息的情形，可默认商品的品牌和/或型号信息为空，即后续购物提醒过程中不考虑待提醒商品的品牌和/或型号。

步骤S30：获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

需要说明的是，本实施例中用户在购物区域的购物行为可通过分析用户购物时的图像或视频后得出，而用户购物时的图像或视频则可以由移动终端与购物商超的安全管理系统或智能货架系统建立通信连接后，请求购物商超的安全管理系统或智能货架系统对用户进行图像采集后反馈给移动终端。

需要强调的是，上述安全管理系统可以是购物商超的安防系统，该安防系统可以通过预先设置在不同购物区域的图像采集装置(摄像头)采集用户的购物图像。上述智能货架系统则可以是智能货架对应的信息管理系统，可用来记录和更新货架上售卖的商品信息，也可以控制智能货架执行相应的操作，本实施例中智能货架上可集成有用于采集用户购物图像的图像采集装置(摄像头)。

应理解的是，上述购物行为可以包括但不限于：用户观察待提醒商品、用户拿起待提醒商品、用户拿起待提醒商品后又放回、用户拿起待提醒商品后放至购物车/购物篮/购物袋等。

在具体实现中，移动终端可通过这些购物行为大致分析出用户是否知晓自己需要购买这些商品以及购买这些商品的意愿是否强烈等，然后决定是否进行购物提示。

比如，用户存在长时间观察待提醒商品、拿起待提醒商品后又放回或拿起待提醒商品中的任一行为时，大概率此时用户知道自己需要购买该商品，但是由于某种原因放弃了，此时可以放弃提醒用户。又比如，用户拿起待提醒商品后放入至购物车/购物篮/购物袋表明用户已经购买了该商品，此时也无需对用户进行购物提醒。还比如，用户来到待提醒商品所在的智能货架区域，通过行为分析发现用户对待提醒商品一扫而过或者是没有注意到待提醒商品，这种情况大概率是用户没注意到自己要购买的商品在该区域，此时可按预设提示方式提示用户购买所述待提醒商品。

其中，上述预设提示方式包括但不限于语音提示或文本提示。例如，在进行语音提示时，移动终端可根据购物清单播放“您眼前或身后或右侧或左侧的货架上有您需要的xx商品”或“您现在处于酒品货架区，这里有您需要的xx商品”等，从而提示用户购买商品。在进行文本提示时，可以通过推送短信或展示购物清单的方式进行购物提醒。

本实施例通过在检测到用户位置位于购物区域时，获取购物区域对应的待售商品信息；将待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；获取用户在购物区域的购物行为，并根据购物行为判断是否提示用户购买待提醒商品。由于本实施例是在检测到用户位于购物区域时，根据预先确定的购物清单确定待提醒商品，然后通过检测用户在该购物区域的购物行为来决定是否提醒用户购买待提醒商品，一方面能够智能化的提醒用户购买商品避免遗忘，另一方面也能够避免用户逐一比对购物清单然后购买物品的繁琐操作，既降低了购物提醒过程中的人工参与度，也提高了用户的购物体验。

参考图3，图3为本发明购物提醒方法第二实施例的流程示意图。

进一步地，考虑到实际应用场景中能够进行语音识别的智能电子设备有很多，作为一种实施方式，本实施例中上述购物清单还可以由除移动终端之外的其它智能电子设备(智能音箱、智能电视等)生成后发送给移动终端。

例如，智能音箱在家庭中的成员进行交谈时对交谈内容进行分析，然后根据分析结果来生成购物清单。比如，智能音箱监测到家庭成员A说：“家里需要买点西红柿”，此时即可将西红柿作为待购买的商品添加到购物清单中，又或是智能音箱监测到家庭成员B说：“家里需要买两瓶XX啤酒”，此时即可将啤酒作为待购买的商品并按[商品种类：啤酒，品牌：XX，数量：两瓶]的文本格式添加到购物清单中。故基于上述第一实施例，本实施例在上述步骤S10之前，还包括：

步骤S01：对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；

需要说明的是，所述用户语音信息可以是移动终端、智能音箱或智能电视等设备对所在区域一定范围内用户发出的声音进行采集后得到的声音信息。本实施例中所述语音关键词可以是能够表征用户发出的语音的核心含义的词汇。

在具体实现中，可先对用户语音信息进行识别，获得对应的词汇序列，然后对词汇序列进行关键词提取获得语音关键词。例如。对词汇序列“家里/需要/买/两瓶/啤酒”进行关键词提取得到语音关键词“买、两瓶、啤酒”。

需要说明的是，本步骤中关键词提取可基于预先建立的关键词样本库来实现，即将词汇序列中的词汇与关键词样本库中的词汇进行匹配，然后根据匹配结果确定语音关键词。当然，也可以通过模型训练的方式通过大量的涉及购物的语音样本训练出能够进行关键词识别和提取的机器学习模型，然后通过训练好的机器学习模型来对用户语音信息进行识别进而确定语音关键词。

步骤S02：判断所述语音关键词中是否存在目标类型关键词；

需要说明的是，所述目标类型关键词可以是能够表征用户购买/购物意愿的词汇(例如，买、购买、购物、超市、便利店、buy、purchase、shopping等)或者想购买的商品的名称(种类)的词汇(例如，洗衣粉、啤酒、水果等)。实际应用中可预先将这些词汇作为目标类型关键词对识别出的语音关键词进行匹配，从而确定用户是否存在购物的需求。

步骤S03：在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单。

在具体实现中，当检测到语音关键词中存在目标类型关键词时，可根据目标类型关键词及其上下文词汇来确定用户需要够买的商品的名称、品牌、数量等信息，然后再根据这些信息生成购物清单。

本实施例通过对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；判断语音关键词中是否存在目标类型关键词；在语音关键词中存在目标类型关键词时，根据目标类型关键词生成的购物清单，免除了用户手动创建购物清单的操作，提高了用户的购物体验，也避免了需要购买的商品被遗漏。

进一步地，为了准确地生成购物清单，避免非人工参与的情况下生成的购物清单准确度不佳的问题。本实施例中所述步骤S03可具体包括：

步骤S031：在所述语音关键词中存在目标类型关键词时，根据所述识别结果确定所述目标类型关键词对应的相邻词汇；

应理解的是，考虑到仅根据目标类型关键词及其上下文词汇生成购物清单可能会存在误差。因此本实施例在根据目标类型关键词生成购物清单时，还将考虑目标关键词以及上下文词汇(即上述相邻词汇)对应的语义语境来分析出用户是否真正的需要购买商品，以及需要购买商品的数量、品牌等信息。

在具体实现中，当匹配到语音关键词中存在目标类型关键词时，即可根据用户语音信息的识别结果来确定目标类型关键词对应的相邻词汇。其中，所述相邻词汇并不局限于目标类型关键词的前一个词汇和后一个词汇，可以是前后多个词汇。例如用户语音信息“下午去超市购买两瓶常温的XX啤酒”中的目标类型关键词可以是“购买”和“XX啤酒”，则对于目标类型关键词“XX啤酒”而言，其前一个词汇是“常温的”，前两个词汇是“两瓶”，则在本实施例中，相邻词汇还可包含“两瓶”这些用来对所购买的物品进行数量限定的量词、或对所购买的物品进行品牌/型号限定的其它修饰词。

步骤S032：对所述相邻词汇进行语义解析，并根据语义解析结果确定待购买商品；

应理解的是，相同的词汇在不同的语境下表达的语义是不同的，若仅仅根据词汇的本质含义来定义一句话的含义容易出现语义上的偏差。考虑到这种情形，本实施例在确定出上述相邻词汇时，还将对这些相邻词汇结合其上下文进行语义解析，即分析出用户说这句话或这个词时想表达的真实含义，然后根据该真实含义来确定是否需要将用户语音信息中提到的商品(即待购买商品)加入购物清单。

步骤S033：根据所述待购买商品生成购物清单。

需要说明的是，本实施例中，在确定出待购买商品后，还可结合待购买商品的品牌、数量以及需要购买该商品的用户的角色等信息来生成购物清单。例如家庭成员中成员A需要购买的商品种类为啤酒，品牌为XX，数量为两瓶，那么最终生成的购物清单中，这些信息都将被记录在其中，且记录时的文本格式按照[角色：A，商品种类：啤酒，品牌：XX，数量：两瓶]的格式来进行。

本实施例通过上述方式能够智能化的为用户自动生成购物清单，整个过程中用户的人工参与度较低，且生成的购物清单准确度也较高，提高了用户的购物体验。

参考图4，图4为本发明购物提醒方法第三实施例的流程示意图。

基于上述各实施例，在本实施例中，所述步骤S10可具体包括以下步骤：

步骤S101：在检测到用户位置位于购物区域时，与所述购物区域对应的智能货架系统建立通信连接；

需要说明的是，智能货架系统可以是管理购物商超中售卖商品的智能货架以及智能货架上售卖商品信息的大数据平台。该智能货架系统可向智能货架发送控制指令以控制智能货架完成相应的操作，例如商品信息播放、图像采集等等。

在具体实现中，移动终端在检测到用户位置位于购物区域时，可以向购物区域对应的智能货架系统发送关联请求，以建立二者之间的通信连接。

步骤S102：通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息。

在通信连接建立后，移动终端可通过该通信连接向智能货架系统发送信息获取请求，以使智能货架系统接收到该请求后，反馈用户位置对应区域的待售商品信息。

进一步地，为实现对待售商品信息的准确获取，提高购物提醒的可靠性。作为一种实施方式，本实施例中上述步骤S102还可包括以下步骤：

步骤S1020：根据所述用户位置生成货架定位请求；

需要说明的是，本步骤中用户位置的获取可通过室内精确定位的方式实现，具体原理参考上述第一实施例相关内容，此处不再赘述。

步骤S1021：通过所述通信连接将所述货架定位请求发送至所述智能货架系统，以使所述智能货架系统根据所述用户位置确定目标智能货架，并反馈所述目标智能货架对应的待售商品信息。

应理解的是，由于商超内购物区域众多，同一购物区域的智能货架也很多，为了准确地对用户进行购物提醒，可将根据用户位置生成的货架定位请求发送至智能货架系统，以使智能货架系统根据用户位置确定目标智能货架，然后获取并反馈目标智能货架上的待售商品信息。

进一步地，为实现对用户购物行为的准确获取，本实施例中，上述步骤S30还可包括以下步骤：

步骤S301：向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述目标智能货架上集成的图像采集装置采集用户的购物图像；

需要说明的是，本实施例中智能货架上集成有用于采集用户购物图像的图像采集装置(摄像头)。

在具体实现中，移动终端可向智能货架系统发送图像采集请求，使得智能货架系统调用目标智能货架上集成的图像采集装置采集并反馈用户的购物图像。

当然，本实施例中移动终端也可以在获得智能货架系统的授权后，直接与目标智能货架建立通信连接，然后通过目标智能货架采集用户的购物图像，从而减少智能货架系统的工作量，提高购物图像的采集效率。

步骤S302：根据所述购物图像对用户进行行为分析，获得用户的购物行为；

应理解的是，本步骤中的行为分析，即根据购物图像分析用户是否存在购买或知晓自己应当购买待提醒商品的动作或意图。例如，分析用户观察待提醒商品的时长、分析用户对待提醒商品执行的操作(例如，拿起、放下、放入购物车等)。

步骤S303：根据所述购物行为判断是否提示用户购买所述待提醒商品。

在具体实现中，移动终端可以根据用户的购物行为来决定是否对用户进行购物提醒，从而避免机械式提醒(例如，只要检测到用户位于待提醒商品的附近就开始提醒或者只有检测到用户将待提醒商品放入购物车才停止提醒等)导致的用户购物体验不佳的问题。

进一步地，考虑到实际情况中，并非所有的智能货架都集成有图像采集装置(摄像头)。因此，为了保证本实施例提供的购物提醒方法在大多数的购物场景下都能顺利实施，移动终端可向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述用户位置对应区域的图像采集装置(例如安防系统中的摄像头)采集用户的购物图像；然后根据所述购物图像对用户进行行为分析，获得用户的购物行为；再根据所述购物行为判断是否提示用户购买所述待提醒商品。

当然，考虑到大多数的购物区域，例如便利店中都安装有摄像头，本实施例中移动终端也可以在与购物区域的摄像头建立连接后，通过这些摄像头采集用户的购物图像，然后进行后续的行为分析操作，以确保购物提醒的顺利进行。

进一步地，为了使得购物提醒更准确更智能，避免无效提醒或过度提醒。本实施例中，移动终端在获得用户的购物行为后，还可以根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域；若是，则检测用户是否执行预设动作，所述预设动作包括拿起所述待提醒商品或将所述待提醒商品放入购物车；在检测到用户未执行所述预设动作时，按预设提示方式提示用户购买所述待提醒商品。

应理解的是，当用户位于待提醒商品所在的货架区域时再进行提醒，能够使得购物提醒更加人性化，也可以降低移动终端的提醒频率。因此，本实施例移动终端在进行购物提醒前，先判断用户是否已位于待提醒商品所在的货架区域，若用户位于该区域，则检测用户是否执行预先设定的购物动作，例如拿起待提醒商品或将待提醒商品放入购物车等手部动作；若发现用户未执行这些手部动作，则可以大概判断出用户不知道该货架上有需要购买的待提醒商品，此时就可以提示用户购买。

当然，考虑到实际情况中，用户虽然没有执行上述手部动作，但并不代表用户一定不知道所在的货架区域有自己需要购买的商品。例如，用户在该货架区域停留较长时间，且长时间的观察和比较待提醒商品，此时大概率可推断出用户是知晓所要购买的商品就在货架上的。基于此种情况，本实施例中，移动终端可根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域；若是，则获取用户视线信息，并根据所述用户视线信息判断用户是否处于观察所述待提醒商品的状态；若是，则记录用户对所述待提醒商品的观察时长，并根据所述观察时长判断是否提示用户购买所述待提醒商品。

需要说明的是，所述用户视线信息可以是能够用来确定用户视线方向的信息，例如用户头部的俯仰姿势、人脸的朝向，眼部位置，头部的转动角度和方向等。

在具体实现中，移动终端可通过图像采集装置采集的多张购物图像分析出上述用户视线信息，然后基于这些用户视线信息来判断用户是否处于观察待提醒商品的状态，即用户是否存在观察待提醒商品的动作。

可理解的是，用户对待提醒商品的观察时长能够在一定程度上反映用户是否知晓需要购买该商品，因此在实际情况中，可以通过设定一个时长阈值来衡量是否对用户进行购物提醒。具体的，移动终端可将所述观察时长与预设时长阈值进行比较；在所述观察时长达到所述预设时长阈值时，取消提示用户购买所述待提醒商品；在所述观察时长未达到所述预设时长阈值时，按预设提示方式提示用户购买所述待提醒商品。

本实施例通过上述方式能够根据用户的购物图像准确地分析出用户的购物行为，再基于这些购物行为来判断是否需要提醒用户购买物品，既保证了购物提醒的准确度，也避免的过度提醒和无效提醒的情况，提高了用户的购物体验。

基于上述各实施例，提出本发明购物提醒方法的第四实施例。

为了确保用户在购物过程不会遗忘记录在购物清单中的商品，本实施例中，所述步骤S30之后还包括步骤：

步骤S40：在检测到用户位于商品结算区域时，获取用户的付款类型；

需要说明的是，本实施例中的付款类型包括移动支付和现金支付。其中，移动支付可以是通过移动终端等电子设备进行支付，现金支付则可以是通过现金或者银行卡、信用卡等进行支付。

在具体实现中，用户的付款类型可以是通过分析用户在商品结算区域的付款动作图像来确定，也可以是通过检测用户在商品结算区域是否操作移动终端进行付款来确定。比如，用户在离开商品结算区域时，未使用移动终端，则可大致认定用户采用的现金支付。

步骤S50：在所述付款类型为移动支付时，获取付款成功时收款设备反馈的账单信息；

考虑到现有技术中，用户在通过手机等移动终端付款后，账单上并不会显示每件商品的付款明细，只会显示一个总体的付款金额，进而不利于用户进行商品核对。本实施例中移动终端在检测到付款类型为移动支付时，还将向收款设备发送一个账单获取请求，以使收款设备在接收到该请求时，反馈包含商品名称、商品价格和商品数量等付款明细的账单信息。

步骤S60：将所述账单信息中的已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

在具体实现中，移动终端可以将账单信息中的已购商品信息和购物清单进行比对，以确定购物清单中的未购买商品，然后再次提醒用户购买未购买的商品，此时若用户返回购物区域继续购买商品，则移动终端可根据未购买的商品重新生成一份新的购物清单然后基于最新的购物清单进行购物提醒，同时移动终端可将之前的购物清单删除，避免重复提醒。

若新生成的购物清单中的物品存在用户主观上不想购买的物品，移动终端可提醒用户核对和修改新的购物清单的中商品信息，以确保新的购物清单的有效性，同时避免不必要的提醒。

进一步地，为了保证用户通过现金支付时，移动终端同样能够进行购物提醒，在上述步骤S40之后，还包括：

步骤S50'：在所述付款类型为现金支付时，提示用户拍摄购物小票对应的小票图片，并根据所述小票图片确定已购商品信息；

步骤S60'：将所述已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

在具体实现中，若用户是通过现金支付的方式进行付款，在付款完成时，移动终端可提示用户拍摄购物小票对应的小票图片，然后对小票图片进行图像识别，再根据识别结果确定已购商品信息。同样的，在确定出已购商品信息后，即可将其与购物清单进行比对，从而进一步确定购物清单中的未购买商品，最后再提示用户购买未购买商品。

本实施例通过上述方式在用户进行商品结算时，根据购物账单信息或者购物小票对用户已购买商品进行最终的核对和提醒，能够真正的确保用户购物时，不会遗忘需要购买的商品，保证了用户较高的用户体验。

此外，本发明实施例还提出一种存储介质，所述存储介质上存储有购物提醒程序，所述购物提醒程序被处理器执行时实现如上文所述的购物提醒方法。

参照图5，图5为本发明购物提醒装置第一实施例的结构框图。

如图5所示，本发明实施例提出的购物提醒装置包括：

信息获取模块501，用于在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

信息比对模块502，用于将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

购物提醒模块503，用于获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

本实施例通过在检测到用户位置位于购物区域时，获取购物区域对应的待售商品信息；将待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；获取用户在购物区域的购物行为，并根据购物行为判断是否提示用户购买待提醒商品。由于本实施例是在检测到用户位于购物区域时，根据预先确定的购物清单确定待提醒商品，然后通过检测用户在该购物区域的购物行为来决定是否提醒用户购买待提醒商品，一方面能够智能化的提醒用户购买商品避免遗忘，另一方面也能够避免用户逐一比对购物清单然后购买物品的繁琐操作，既降低了购物提醒过程中的人工参与度，也提高了用户的购物体验。

基于本发明上述购物提醒装置第一实施例，提出本发明购物提醒装置的第二实施例。

在本实施例中，所述购物提醒装置包括：清单生成模块；所述清单生成模块，用于对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；判断所述语音关键词中是否存在目标类型关键词；在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单。

进一步地，所述清单生成模块，还用于在所述语音关键词中存在目标类型关键词时，根据所述识别结果确定所述目标类型关键词对应的相邻词汇；对所述相邻词汇进行语义解析，并根据语义解析结果确定待购买商品；根据所述待购买商品生成购物清单。

进一步地，所述信息获取模块，还用于在检测到用户位置位于购物区域时，与所述购物区域对应的智能货架系统建立通信连接；通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息。

进一步地，所述信息获取模块，还用于根据所述用户位置生成货架定位请求；通过所述通信连接将所述货架定位请求发送至所述智能货架系统，以使所述智能货架系统根据所述用户位置确定目标智能货架，并反馈所述目标智能货架对应的待售商品信息。

进一步地，所述购物提醒模块，还用于向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述目标智能货架上集成的图像采集装置采集用户的购物图像；根据所述购物图像对用户进行行为分析，获得用户的购物行为；根据所述购物行为判断是否提示用户购买所述待提醒商品。

进一步地，所述购物提醒模块，还用于向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述用户位置对应区域的图像采集装置采集用户的购物图像；根据所述购物图像对用户进行行为分析，获得用户的购物行为；根据所述购物行为判断是否提示用户购买所述待提醒商品。

进一步地，所述购物提醒模块，还用于根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域；若是，则检测用户是否执行预设动作，所述预设动作包括拿起所述待提醒商品或将所述待提醒商品放入购物车；在检测到用户未执行所述预设动作时，按预设提示方式提示用户购买所述待提醒商品。

进一步地，所述购物提醒模块，还用于在用户已位于所述待提醒商品所在的货架区域时，获取用户视线信息，并根据所述用户视线信息判断用户是否处于观察所述待提醒商品的状态；若是，则记录用户对所述待提醒商品的观察时长，并根据所述观察时长判断是否提示用户购买所述待提醒商品。

进一步地，所述购物提醒模块，还用于将所述观察时长与预设时长阈值进行比较；在所述观察时长达到所述预设时长阈值时，取消提示用户购买所述待提醒商品；在所述观察时长未达到所述预设时长阈值时，按预设提示方式提示用户购买所述待提醒商品。

进一步地，所述购物提醒模块，还用于在检测到用户位于商品结算区域时，获取用户的付款类型；在所述付款类型为移动支付时，获取付款成功时收款设备反馈的账单信息；将所述账单信息中的已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

进一步地，所述购物提醒模块，还用于在所述付款类型为现金支付时，提示用户拍摄购物小票对应的小票图片，并根据所述小票图片确定已购商品信息；将所述已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

本发明购物提醒装置的其他实施例或具体实现方式可参照上述各方法实施例，此处不再赘述。

本发明提供A1一种购物提醒方法，所述购物提醒方法包括：

在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

A2、如A1所述的购物提醒方法，所述在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息之前，所述方法还包括：

对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；

判断所述语音关键词中是否存在目标类型关键词；

在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单。

A3、如A2所述的购物提醒方法，所述在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单，包括：

在所述语音关键词中存在目标类型关键词时，根据所述识别结果确定所述目标类型关键词对应的相邻词汇；

对所述相邻词汇进行语义解析，并根据语义解析结果确定待购买商品；

根据所述待购买商品生成购物清单。

A4、如A1所述的购物提醒方法，所述在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息，包括：

在检测到用户位置位于购物区域时，与所述购物区域对应的智能货架系统建立通信连接；

通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息。

A5、如A4所述的购物提醒方法，所述通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息，包括：

根据所述用户位置生成货架定位请求；

通过所述通信连接将所述货架定位请求发送至所述智能货架系统，以使所述智能货架系统根据所述用户位置确定目标智能货架，并反馈所述目标智能货架对应的待售商品信息。

A6、如A5所述的购物提醒方法，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述目标智能货架上集成的图像采集装置采集用户的购物图像；

根据所述购物图像对用户进行行为分析，获得用户的购物行为；

根据所述购物行为判断是否提示用户购买所述待提醒商品。

A7、如A4所述的购物提醒方法，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述用户位置对应区域的图像采集装置采集用户的购物图像；

根据所述购物图像对用户进行行为分析，获得用户的购物行为；

根据所述购物行为判断是否提示用户购买所述待提醒商品。

A8、如A6或A7所述的购物提醒方法，所述根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域；

若是，则检测用户是否执行预设动作，所述预设动作包括拿起所述待提醒商品或将所述待提醒商品放入购物车；

在检测到用户未执行所述预设动作时，按预设提示方式提示用户购买所述待提醒商品。

A9、如A8所述的购物提醒方法，所述根据所述购物行为判断用户是否已位于所述待提醒商品所在的货架区域之后，还包括：

若是，则获取用户视线信息，并根据所述用户视线信息判断用户是否处于观察所述待提醒商品的状态；

若是，则记录用户对所述待提醒商品的观察时长，并根据所述观察时长判断是否提示用户购买所述待提醒商品。

A10、如A9所述的购物提醒方法，所述根据所述观察时长判断是否提示用户购买所述待提醒商品，包括：

将所述观察时长与预设时长阈值进行比较；

在所述观察时长达到所述预设时长阈值时，取消提示用户购买所述待提醒商品；

在所述观察时长未达到所述预设时长阈值时，按预设提示方式提示用户购买所述待提醒商品。

A11、如A1所述的购物提醒方法，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品之后，还包括：

在检测到用户位于商品结算区域时，获取用户的付款类型；

在所述付款类型为移动支付时，获取付款成功时收款设备反馈的账单信息；

将所述账单信息中的已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品。

A12、如A11所述的购物提醒方法，所述在检测到用户位于商品结算区域时，获取用户的付款类型之后，还包括：

在所述付款类型为现金支付时，提示用户拍摄购物小票对应的小票图片，并根据所述小票图片确定已购商品信息；

将所述已购商品信息和所述购物清单进行比对，以确定所述购物清单中的未购买商品，并提示用户购买所述未购买商品

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种购物提醒方法，其特征在于，所述购物提醒方法包括：

在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

2.如权利要求1所述的购物提醒方法，其特征在于，所述在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息之前，所述方法还包括：

对采集的用户语音信息进行识别，并根据识别结果确定语音关键词；

判断所述语音关键词中是否存在目标类型关键词；

在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单。

3.如权利要求2所述的购物提醒方法，其特征在于，所述在所述语音关键词中存在目标类型关键词时，根据所述目标类型关键词生成的购物清单，包括：

在所述语音关键词中存在目标类型关键词时，根据所述识别结果确定所述目标类型关键词对应的相邻词汇；

对所述相邻词汇进行语义解析，并根据语义解析结果确定待购买商品；

根据所述待购买商品生成购物清单。

4.如权利要求1所述的购物提醒方法，其特征在于，所述在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息，包括：

在检测到用户位置位于购物区域时，与所述购物区域对应的智能货架系统建立通信连接；

通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息。

5.如权利要求4所述的购物提醒方法，其特征在于，所述通过所述通信连接从所述智能货架系统中获取所述用户位置对应区域的待售商品信息，包括：

根据所述用户位置生成货架定位请求；

通过所述通信连接将所述货架定位请求发送至所述智能货架系统，以使所述智能货架系统根据所述用户位置确定目标智能货架，并反馈所述目标智能货架对应的待售商品信息。

6.如权利要求5所述的购物提醒方法，其特征在于，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述目标智能货架上集成的图像采集装置采集用户的购物图像；

根据所述购物图像对用户进行行为分析，获得用户的购物行为；

根据所述购物行为判断是否提示用户购买所述待提醒商品。

7.如权利要求4所述的购物提醒方法，其特征在于，所述获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品，包括：

向所述智能货架系统发送图像采集请求，以使所述智能货架系统调用所述用户位置对应区域的图像采集装置采集用户的购物图像；

根据所述购物图像对用户进行行为分析，获得用户的购物行为；

根据所述购物行为判断是否提示用户购买所述待提醒商品。

8.一种购物提醒装置，其特征在于，所述购物提醒装置包括：

信息获取模块，用于在检测到用户位置位于购物区域时，获取所述购物区域对应的待售商品信息；

信息比对模块，用于将所述待售商品信息与购物清单进行匹配，并根据匹配结果确定待提醒商品；

购物提醒模块，用于获取用户在所述购物区域的购物行为，并根据所述购物行为判断是否提示用户购买所述待提醒商品。

9.一种购物提醒设备，其特征在于，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的购物提醒程序，所述购物提醒程序配置为实现如权利要求1至7中任一项所述的购物提醒方法。

10.一种存储介质，其特征在于，所述存储介质上存储有购物提醒程序，所述购物提醒程序被处理器执行时实现如权利要求1至7任一项所述的购物提醒方法。

Images