CN111507318A - 基于图像识别的离店检测方法及装置 - Google Patents

Abstract

本发明公开了一种基于图像识别的离店检测方法及装置，其中，基于图像识别的离店检测方法包括：采集店铺场所内包含有桌台对象的场所图像；对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量；依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果。根据本发明提供的技术方案，能够自动、精准、快速地基于图像识别进行离店检测，使得服务对象在用户对象离店时能够及时地进行收台、送客离店等服务，大大降低了投入成本，有效地提高了店铺服务质量和用户体验感。

Description

基于图像识别的离店检测方法及装置

技术领域

本发明涉及互联网技术领域，具体涉及一种基于图像识别的离店检测方法及装置。

背景技术

在许多实际的应用场景中，用户需要在店铺场所中来获取服务提供方提供的服务，例如用户在餐饮场所就餐，或者在游乐游艺场所打桌球或棋牌等。在用户结束服务获取而离店后，需要服务人员及时对桌台进行收拾等操作，以便能够将桌台提供给后续进店的用户使用。现有技术中一般是由店铺场所的服务人员时时查看用户是否离店来确定是否需要进行收台等操作，这不仅需要耗费较多的人力成本，而且还容易出现遗漏情况和误判情况。

为了能够及时地检测出用户的离店行为，有些餐饮店铺场所通过安装在桌台周围座椅上的压力传感器来检测座椅上是否有用户，进而判断用户是否离店。然而，这种离店检测方式需要在座椅上安装压力传感器，需要投入较高的硬件安装和维护成本，并且仅能够适用于座椅固定的餐饮店铺场所，对于使用可移动座椅的餐饮店铺场所而言无法适用。

由此可知，现有技术中缺少一种节约投入成本，且能够自动地、精准地进行离店检测的方法。

发明内容

鉴于上述问题，提出了本发明实施例以便提供一种克服上述问题或者至少部分地解决上述问题的基于图像识别的离店检测方法及装置。

根据本发明实施例的一个方面，提供了一种基于图像识别的离店检测方法，该方法包括：

采集店铺场所内包含有桌台对象的场所图像；

对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量；

依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果。

进一步地，对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量进一步包括：

对场所图像进行识别处理，得到场所图像中的桌台对象的桌台标识信息，并根据桌台标识信息，查询店铺订单管理设备中是否包含有桌台对象对应的点单信息；

若查询到桌台对象对应的点单信息，则对场所图像进行识别处理，统计在桌台对象的预设区域内的用户对象数量。

进一步地，对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量进一步包括：

判断场所图像中是否包含有用户对象；

若场所图像中包含有用户对象，则对场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标；根据桌台对象位置坐标和用户对象位置坐标，统计在桌台对象的预设区域内的用户对象数量；

若场所图像中不包含有用户对象，则确定在桌台对象的预设区域内的用户对象数量为零。

进一步地，对场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标进一步包括：

识别场所图像中的桌台对象的桌台轮廓区域和用户对象的用户轮廓区域；

将桌台轮廓区域的中心点在场所图像中的位置坐标确定为桌台对象位置坐标，将用户轮廓区域的中心点在场所图像中的位置坐标确定为用户对象位置坐标。

进一步地，在将用户轮廓区域的中心点在场所图像中的位置坐标确定为用户对象位置坐标之后，该方法还包括：

获取用于采集场所图像的图像采集设备相对于桌台对象的安装角度信息；

根据安装角度信息，对桌台对象位置坐标和用户对象位置坐标进行修正。

进一步地，根据桌台对象位置坐标和用户对象位置坐标，统计在桌台对象的预设区域内的用户对象数量进一步包括：

针对每个用户对象，根据桌台对象位置坐标和该用户对象的用户对象位置坐标，计算该用户对象与桌台对象之间的间隔距离；

统计间隔距离小于预设距离阈值的用户对象的数量，将数量作为在桌台对象的预设区域内的用户对象数量。

进一步地，依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果进一步包括：

根据桌台标识信息，查询店铺订单管理设备中桌台对象对应的点单信息的交易支付状态；

依据用户对象数量，生成携带有桌台对象对应的交易支付状态的离店检测结果。

进一步地，依据用户对象数量，生成携带有桌台对象对应的交易支付状态的离店检测结果进一步包括：

若用户对象数量为零，则判断在预设时间段内基于采集到的场所图像所统计得到的用户对象数量是否为零；

若在预设时间段内基于采集到的场所图像所统计得到的用户对象数量为零，则生成携带有桌台对象对应的交易支付状态的离店检测结果。

进一步地，在依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果之后，该方法还包括：

将离店检测结果发送至通知设备和/或服务对象，以供通知服务对象对桌台对象和/或用户对象进行相应操作；其中，通知设备包括：语音播放设备、语音通话设备、点单设备和/或智能手环，服务对象包括：服务机器人和/或服务人员。

根据本发明实施例的另一方面，提供了一种基于图像识别的离店检测装置，该装置包括：

采集模块，适于采集店铺场所内包含有桌台对象的场所图像；

处理模块，适于对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量；

结果生成模块，适于依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果。

进一步地，处理模块进一步适于：

对场所图像进行识别处理，得到场所图像中的桌台对象的桌台标识信息，并根据桌台标识信息，查询店铺订单管理设备中是否包含有桌台对象对应的点单信息；

若查询到桌台对象对应的点单信息，则对场所图像进行识别处理，统计在桌台对象的预设区域内的用户对象数量。

进一步地，处理模块进一步适于：

判断场所图像中是否包含有用户对象；

若场所图像中包含有用户对象，则对场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标；根据桌台对象位置坐标和用户对象位置坐标，统计在桌台对象的预设区域内的用户对象数量；

若场所图像中不包含有用户对象，则确定在桌台对象的预设区域内的用户对象数量为零。

进一步地，处理模块进一步适于：

识别场所图像中的桌台对象的桌台轮廓区域和用户对象的用户轮廓区域；

将桌台轮廓区域的中心点在场所图像中的位置坐标确定为桌台对象位置坐标，将用户轮廓区域的中心点在场所图像中的位置坐标确定为用户对象位置坐标。

进一步地，处理模块进一步适于：

获取用于采集场所图像的图像采集设备相对于桌台对象的安装角度信息；

根据安装角度信息，对桌台对象位置坐标和用户对象位置坐标进行修正。

进一步地，处理模块进一步适于：

针对每个用户对象，根据桌台对象位置坐标和该用户对象的用户对象位置坐标，计算该用户对象与桌台对象之间的间隔距离；

统计间隔距离小于预设距离阈值的用户对象的数量，将数量作为在桌台对象的预设区域内的用户对象数量。

进一步地，结果生成模块进一步适于：

根据桌台标识信息，查询店铺订单管理设备中桌台对象对应的点单信息的交易支付状态；

依据用户对象数量，生成携带有桌台对象对应的交易支付状态的离店检测结果。

进一步地，结果生成模块进一步适于：

若用户对象数量为零，则判断在预设时间段内基于采集到的场所图像所统计得到的用户对象数量是否为零；

若在预设时间段内基于采集到的场所图像所统计得到的用户对象数量为零，则生成携带有桌台对象对应的交易支付状态的离店检测结果。

进一步地，该装置还包括：发送模块，适于将离店检测结果发送至通知设备和/或服务对象，以供通知服务对象对桌台对象和/或用户对象进行相应操作；其中，通知设备包括：语音播放设备、语音通话设备、点单设备和/或智能手环，服务对象包括：服务机器人和/或服务人员。

根据本发明实施例的又一方面，提供了一种计算设备，包括：处理器、存储器、通信接口和通信总线，处理器、存储器和通信接口通过通信总线完成相互间的通信；

存储器用于存放至少一可执行指令，可执行指令使处理器执行上述基于图像识别的离店检测方法对应的操作。

根据本发明实施例的再一方面，提供了一种计算机存储介质，存储介质中存储有至少一可执行指令，可执行指令使处理器执行如上述基于图像识别的离店检测方法对应的操作。

根据本发明实施例提供的技术方案，基于图像识别技术对场所图像进行处理获得桌台对象的桌台标识信息，并自动地统计桌台对象周围区域的用户对象数量，进而得到离店检测结果，与现有技术相比，本方案无需对店铺场所的座椅进行改造，只需在店铺场所的适当位置安装图像采集设备，即可自动、精准、快速地基于图像识别进行离店检测，大大降低了投入成本，并且还将离店检测与桌台标识信息进行了关联，进一步提高了离店检测的准确率，使得服务对象在用户对象离店时能够及时地进行收台、送客离店等服务，有效地提高了店铺服务质量和用户体验感，还有助于提升店铺的自动化运营程度和整体运转效率，进而提高店铺翻台率和订单量。

上述说明仅是本发明实施例技术方案的概述，为了能够更清楚了解本发明实施例的技术手段，而可依照说明书的内容予以实施，并且为了让本发明实施例的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明实施例的具体实施方式。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明实施例的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了本发明实施例提供的基于图像识别的离店检测方法的流程图；

图2示出了本发明另一实施例提供的基于图像识别的离店检测方法的流程图；

图3示出了本发明实施例提供的基于图像识别的离店检测装置的结构示意图；

图4示出了根据本发明实施例的一种计算设备的结构示意图。

具体实施方式

下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例，然而应当理解，可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本发明，并且能够将本发明的范围完整的传达给本领域的技术人员。

图1示出了本发明实施例提供的基于图像识别的离店检测方法的流程图，如图1所示，该方法包括如下步骤：

步骤S101，采集店铺场所内包含有桌台对象的场所图像。

其中，可通过店铺场所中安装的摄像头等图像采集设备来采集店铺场所内的场所图像，场所图像中需要包含有桌台对象，以便利用场所图像方便地检测出用户对象的离店行为。店铺场所可以是餐饮店铺场所、游乐游艺店铺场所等，这些店铺场所需要利用桌台对象为用户对象提供服务。例如，餐饮店铺场所需要将为用户对象所提供的菜品、饮品等摆放在桌台对象上，以便用户对象享用，在此场景下，桌台对象具体可为餐桌。又如，游乐游艺店铺场所需要将棋牌、桌球等摆放在桌台对象上，以便用户对象使用，在此场景下，桌台对象具体可为牌桌、球桌等。

步骤S102，对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量。

桌台标识信息是指用于标识桌台对象的信息，桌台标识信息与桌台对象一一对应，其中，桌台标识信息可以为桌台对象上所设置的桌台号或者用于点单操作的二维码等图像识别码等。由于场所图像中包含有桌台对象，而桌台对象上又设置有桌台标识信息，那么可利用图像识别技术对场所图像进行识别、分析，以得到桌台对象的桌台标识信息。并且，可利用图像识别技术对场所图像进行识别处理，根据图像识别结果统计在桌台对象的预设区域内的用户对象数量。桌台对象的预设区域具体可为桌台对象的周围区域，本领域技术人员可根据实际需要对预设区域的区域范围进行设置，例如，预设区域的区域范围可为以桌台对象的中心点为圆心，以50像素为半径的区域范围等。

步骤S103，依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果。

具体地，可根据桌台标识信息，查询店铺订单管理设备中桌台对象对应的点单信息以及点单信息的交易支付状态等信息。其中，店铺订单管理设备具体可为POS设备等，用于存储和管理店铺场所的当前时间的点单信息、历史点单信息以及各个点单信息的交易支付状态等。当步骤S102获得的用户对象数量为零时，说明桌台对象的周围没有任何用户对象，则生成桌台对象对应的离店检测结果，该离店检测结果中可携带有桌台号等桌台标识信息以及桌台对象对应的交易支付状态等信息。该离店检测结果具体可包含有用于表示该桌台对象对应的用户对象已离店的信息，例如，离店检测结果可为“***桌的用户已离店”或者“***桌订单未支付，用户已离店”等。

本实施例提供的基于图像识别的离店检测方法，基于图像识别技术对场所图像进行处理获得桌台对象的桌台标识信息，并自动地统计桌台对象周围区域的用户对象数量，进而得到离店检测结果，与现有技术相比，本方案无需对店铺场所的座椅进行改造，只需在店铺场所的适当位置安装图像采集设备，即可自动、精准、快速地基于图像识别进行离店检测，大大降低了投入成本，并且还将离店检测与桌台标识信息进行了关联，进一步提高了离店检测的准确率，使得服务对象在用户对象离店时能够及时地进行收台、送客离店等服务，有效地提高了店铺服务质量和用户体验感，还有助于提升店铺的自动化运营程度和整体运转效率，进而提高店铺翻台率和订单量。

图2示出了本发明另一实施例提供的基于图像识别的离店检测方法的流程图，如图2所示，该方法包括如下步骤：

步骤S201，采集店铺场所内包含有桌台对象的场所图像。

可通过店铺场所中安装的摄像头等图像采集设备来采集店铺场所内的场所图像，场所图像中需要包含有桌台对象，以便利用场所图像方便地检测出用户对象的离店行为。其中，图像采集设备可以安装在桌台对象的正上方或者斜上方等位置处。场所图像可为通过图像采集设备以拍照方式采集到的图像，也可为通过图像采集设备以视频拍摄方式采集到的场所视频中的帧图像，本领域技术人员可根据实际需要来选择场所图像的采集方式，此处不做具体限定。

步骤S202，对场所图像进行识别处理，得到场所图像中的桌台对象的桌台标识信息。

其中，桌台标识信息可以为桌台对象上所设置的桌台号或者用于点单操作的二维码等图像识别码等。在步骤S202中可利用图像识别技术对场所图像进行识别、分析，以得到桌台对象的桌台标识信息。

步骤S203，根据桌台标识信息，查询店铺订单管理设备中是否包含有桌台对象对应的点单信息；若是，则执行步骤S204；若否，则该方法结束。

在分析得到桌台标识信息之后，可根据桌台标识信息来查询店铺订单管理设备中所管理的当前时间的点单信息中是否包含有该桌台对象对应的点单信息。例如，当桌台标识信息为用于点单操作的二维码等图像识别码时，可通过对图像识别码进行识别来确定桌台对象的桌台号，然后查询店铺订单管理设备中是否包含有该桌台号对应的点单信息；当桌台标识信息为桌台号时，则可直接根据桌台号来查询店铺订单管理设备中是否包含有该桌台号对应的点单信息。如果能够查询到该桌台号对应的点单信息，说明店铺订单管理设备中包含有桌台对象对应的点单信息；如果查询不到该桌台号对应的点单信息，说明店铺订单管理设备中不包含有桌台对象对应的点单信息。

如果经查询得到包含有该桌台对象对应的点单信息，说明在当前时间该桌台对象处于占用状态，该桌台对象具有需要提供服务的用户对象，需要执行后续的处理步骤，则执行步骤S204；如果经查询得到不包含有该桌台对象对应的点单信息，说明在当前时间该桌台对象处于空闲状态，该桌台对象不具有需要提供服务的用户对象，则无需执行后续的处理步骤，该方法结束，即此次离店检测结束。

步骤S204，根据桌台标识信息，查询店铺订单管理设备中桌台对象对应的点单信息的交易支付状态。

在经步骤S203查询得到包含有该桌台对象对应的点单信息的情况下，可继续查询该点单信息的交易支付状态，以便能够生成携带有桌台对象对应的交易支付状态的离店检测结果。其中，交易支付状态可包括未支付状态和已支付状态。对于步骤S204，可以在获得桌台对象的预设区域内的用户对象数量之后执行，也可以在获得桌台对象的预设区域内的用户对象数量之前执行，此处不做限定。

在查询到店铺订单管理设备包含有桌台对象对应的点单信息的情况下，可对场所图像进行识别处理，统计在桌台对象的预设区域内的用户对象数量。具体地，对于在桌台对象的预设区域内的用户对象数量的统计过程，可通过步骤S205至步骤S208以及步骤S211进行实现。

步骤S205，判断场所图像中是否包含有用户对象；若是，则执行步骤S206；若否，则执行步骤S211。

其中，可利用现有的人体图像识别技术来识别场所图像中是否包含有用户对象。具体地，若识别得到场所图像中包含有人体，即说明场所图像中包含有用户对象，则执行步骤S206；若识别得到场所图像中不包含有人体，即说明场所图像中不包含有用户对象，则执行步骤S211。

步骤S206，对场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标。

其中，可识别场所图像中的桌台对象的桌台轮廓区域和用户对象的用户轮廓区域。针对桌台轮廓区域的识别，可通过预设物体轮廓检测算法来获取场所图像中桌台对象的桌台轮廓信息，根据桌台轮廓信息确定场所图像中的桌台轮廓区域。其中，桌台对象的外形可能是三角形、四边形、圆形、甚至不规则的多边形，为了提高桌台轮廓区域的识别效率，减少数据处理量，可将桌台对象的外形简化为二维形状，仅获取场所图像中桌台对象的二维的桌台轮廓信息，用于确定场所图像中的桌台轮廓区域。针对用户轮廓区域的识别，可通过预设人体轮廓检测算法来获取场所图像中用户对象的用户轮廓信息，根据用户轮廓信息确定场所图像中的用户轮廓区域。本领域技术人员可根据实际需要对预设物体轮廓检测算法和预设人体轮廓检测算法的具体内容进行选择和设置，此处不做限定。

为了便于统计在桌台对象的预设区域内的用户对象数量，在识别得到桌台轮廓区域和用户轮廓区域之后，还需确定桌台对象在场所图像中的桌台对象位置坐标以及每个用户对象在场所图像中的用户对象位置坐标。具体地，可将桌台轮廓区域的中心点在场所图像中的位置坐标确定为桌台对象位置坐标，将用户轮廓区域的中心点在场所图像中的位置坐标确定为用户对象位置坐标。本领域技术人员可根据实际需要选择中心点的确定算法，此处不做具体限定。

考虑到在实际的应用场景中，用于采集场所图像的图像采集设备很可能并不是设置在桌台对象的正上方而是设置在桌台对象的斜上方或者其他位置处，在这种情况下，还需基于图像采集设备与桌台对象之间的相对位置关系，对上述所确定的桌台对象位置坐标和用户对象位置坐标进行修正。具体地，可获取用于采集场所图像的图像采集设备相对于桌台对象的安装角度信息，然后根据安装角度信息，对桌台对象位置坐标和用户对象位置坐标进行修正。这种处理方式充分考虑了图像采集设备与桌台对象之间的相对位置关系，能够更为精准地确定桌台对象位置坐标和用户对象位置坐标。

步骤S207，根据桌台对象位置坐标和用户对象位置坐标，统计在桌台对象的预设区域内的用户对象数量。

在确定了桌台对象位置坐标和每个用户对象的用户对象位置坐标之后，就可根据桌台对象位置坐标和用户对象位置坐标来计算用户对象与桌台对象之间的间隔距离，基于间隔距离来统计在桌台对象的预设区域内的用户对象数量。具体地，针对每个用户对象，可利用距离计算公式，根据桌台对象位置坐标和该用户对象的用户对象位置坐标，计算该用户对象与桌台对象之间的间隔距离；在完成每个用户对象与桌台对象之间的间隔距离计算之后，统计间隔距离小于预设距离阈值的用户对象的数量，将统计得到的该数量作为在桌台对象的预设区域内的用户对象数量。其中，预设距离阈值是根据预设区域的区域范围而设置的，而本领域技术人员可根据实际需要对预设区域的区域范围进行设置。

例如，当预设区域的区域范围为以桌台对象的中心点为圆心，以50像素为半径的区域范围时，那么预设距离阈值可为50像素。假设经过步骤S206识别得到某个场所图像中包含有1个桌台对象和3个用户对象（分别为用户对象1至用户对象3），并得到桌台对象位置坐标和这3个用户对象的用户对象位置坐标。如果经过计算得到用户对象1与桌台对象之间的间隔距离为60像素，用户对象2与桌台对象之间的间隔距离为40像素，用户对象3与桌台对象之间的间隔距离为70像素，那么间隔距离小于预设距离阈值的用户对象包括用户对象2，则统计得到在桌台对象的预设区域内的用户对象数量为1。

步骤S208，判断在桌台对象的预设区域内的用户对象数量是否为零；若是，则执行步骤S209；若否，则该方法结束。

如果在桌台对象的预设区域内的用户对象数量为零，说明桌台对象的周围没有任何用户对象，该桌台对象对应的用户对象已离店，则执行步骤S209；如果在桌台对象的预设区域内的用户对象数量不为零，说明桌台对象的周围有用户对象，该桌台对象对应的用户对象尚未离店，则该方法结束，此次离店检测结束。

步骤S209，生成携带有桌台对象对应的交易支付状态的离店检测结果。

在桌台对象的预设区域内的用户对象数量为零的情况下，说明桌台对象的周围没有任何用户对象，该桌台对象对应的用户对象已离店，则生成该桌台对象对应的离店检测结果，为了便于店铺场所的服务人员等服务对象及时地获知该桌台对象对应的点单信息的结算情况，所生成的离店检测结果可携带有步骤S204查询到的交易支付状态。例如，所生成的离店检测结果可为“***桌订单已支付，用户已离店”或者“***桌订单未支付，用户已离店”等。

步骤S210，将离店检测结果发送至通知设备和/或服务对象，以供通知服务对象对桌台对象和/或用户对象进行相应操作。

在检测得到用户对象已离店的情况下，将所生成的离店检测结果发送至通知设备和/或服务对象，用于通知服务对象对桌台对象和/或用户对象进行相应操作。其中，通知设备可包括：语音播放设备、语音通话设备、点单设备和/或智能手环等设备，服务对象可包括服务人员等。在实际应用场景中，店铺场所一般会安装有音响等语音播放设备用于播放音乐、订单信息等，服务人员可通过安装有点单应用程序的手机、电脑、POS设备等进行点单操作，另外，当店铺场所较大时，为了能够及时地联系到各个服务人员，还会为服务人员配备语音通话设备、智能手环等设备，其中，语音通话设备具体可包括对讲机等设备，那么可将所生成的离店检测结果发送至语音播放设备、语音通话设备、点单设备和/或智能手环等设备，用于及时通知服务对象对桌台对象进行收台等操作、对用户对象进行送客离店等服务。本领域技术人员可根据实际需要来选择通知设备，此处不做具体限定。

随着科技的不断发展，店铺场所中还可利用服务机器人来为用户对象提供服务，那么服务对象还可包括服务机器人，当服务对象为服务机器人时，可直接将离店检测结果发送至服务机器人，以供通知服务机器人对桌台对象和/或用户对象进行相应操作。

由于离店检测结果还携带有桌台对象对应的交易支付状态，若交易支付状态为未支付状态，则服务对象可根据离店检测结果获知该桌台对象对应的用户对象尚未买单，从而能够及时地拦住用户对象让其进行买单操作，有效地减少了跑单情况的发生，大大降低了因用户对象跑单而给店铺场所带来的经济损失。

步骤S211，确定在桌台对象的预设区域内的用户对象数量为零。

考虑到还可能存在用户对象仅是短暂离开桌台对象而并不是离店的情况，例如去卫生间、去一旁接打电话等，那么在统计得到桌台对象的预设区域内的用户对象数量为零的情况下，并不能直接确定用户对象已离店而生成桌台对象对应的离店检测结果，还需判断在预设时间段内基于采集到的场所图像所统计得到的用户对象数量是否依然为零。若是，说明用户对象离开桌台对象一段时间内都没有返回，用户对象确实是离店了，并不是短暂离开桌台对象，则生成桌台对象对应的离店检测结果；若否，说明用户对象在离开桌台对象后又返回了，用户对象仅是短暂离开桌台对象，并不是真的要离店，则该方法结束，此次离店检测结束。其中，预设时间段可为5分钟或8分钟等，本领域技术人员可根据实际需要进行具体设置，此处不做限定。

需要注意的是，本实施例提供的基于图像识别的离店检测方法可以是定时执行，也可以是实时执行，此处不做限定。若该方法是定时执行的，则可每隔一定时间（例如5分钟等）执行一次离店检测；若该方法是实时执行的，则需要实时地采集店铺场所内包含有桌台对象的场所图像，并基于采集的场所图像实时地进行离店检测。

本实施例提供的基于图像识别的离店检测方法，当场所图像中包含有用户对象时，通过图像识别能够精准地计算用户对象与桌台对象之间的间隔距离，通过对间隔距离和预设距离阈值的比对，便捷地实现了对桌台对象周围的用户对象数量的精准统计，进而生成离店检测结果，实现了基于图像识别的离店精准检测，无需对店铺场所的座椅进行改造，大大降低了投入成本，并且还将离店检测与店铺订单管理设备中的点单信息、交易支付状态进行了关联，不仅进一步提高了离店检测的准确率，而且还丰富了离店检测结果，使得服务对象根据离店检测结果能够清楚地获知桌台对象的交易支付情况，及时地进行追收款项、收台、送客离店等服务，有效地减少了跑单情况的发生，大大降低了因用户对象跑单而给店铺场所带来的经济损失，还有效地提高了店铺服务质量和用户体验感。

图3示出了本发明实施例提供的基于图像识别的离店检测装置的结构示意图，如图3所示，该装置包括：采集模块301、处理模块302和结果生成模块303。

采集模块301适于：采集店铺场所内包含有桌台对象的场所图像。

处理模块302适于：对场所图像进行处理，获得桌台对象的桌台标识信息以及在桌台对象的预设区域内的用户对象数量。

结果生成模块303适于：依据桌台标识信息和用户对象数量，生成桌台对象对应的离店检测结果。

可选地，处理模块302进一步适于：对场所图像进行识别处理，得到场所图像中的桌台对象的桌台标识信息，并根据桌台标识信息，查询店铺订单管理设备中是否包含有桌台对象对应的点单信息；若查询到桌台对象对应的点单信息，则对场所图像进行识别处理，统计在桌台对象的预设区域内的用户对象数量。

可选地，处理模块302进一步适于：判断场所图像中是否包含有用户对象；若场所图像中包含有用户对象，则对场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标；根据桌台对象位置坐标和用户对象位置坐标，统计在桌台对象的预设区域内的用户对象数量；若场所图像中不包含有用户对象，则确定在桌台对象的预设区域内的用户对象数量为零。

可选地，处理模块302进一步适于：识别场所图像中的桌台对象的桌台轮廓区域和用户对象的用户轮廓区域；将桌台轮廓区域的中心点在场所图像中的位置坐标确定为桌台对象位置坐标，将用户轮廓区域的中心点在场所图像中的位置坐标确定为用户对象位置坐标。

可选地，处理模块302进一步适于：获取用于采集场所图像的图像采集设备相对于桌台对象的安装角度信息；根据安装角度信息，对桌台对象位置坐标和用户对象位置坐标进行修正。

可选地，处理模块302进一步适于：针对每个用户对象，根据桌台对象位置坐标和该用户对象的用户对象位置坐标，计算该用户对象与桌台对象之间的间隔距离；统计间隔距离小于预设距离阈值的用户对象的数量，将数量作为在桌台对象的预设区域内的用户对象数量。

可选地，结果生成模块303进一步适于：根据桌台标识信息，查询店铺订单管理设备中桌台对象对应的点单信息的交易支付状态；依据用户对象数量，生成携带有桌台对象对应的交易支付状态的离店检测结果。

可选地，结果生成模块303进一步适于：若用户对象数量为零，则判断在预设时间段内基于采集到的场所图像所统计得到的用户对象数量是否为零；若在预设时间段内基于采集到的场所图像所统计得到的用户对象数量为零，则生成携带有桌台对象对应的交易支付状态的离店检测结果。

可选地，该装置还可包括：发送模块304，适于将离店检测结果发送至通知设备和/或服务对象，以供通知服务对象对桌台对象和/或用户对象进行相应操作。其中，通知设备包括：语音播放设备、语音通话设备、点单设备和/或智能手环，服务对象包括：服务机器人和/或服务人员。

本实施例提供的基于图像识别的离店检测装置，当场所图像中包含有用户对象时，通过图像识别能够精准地计算用户对象与桌台对象之间的间隔距离，通过对间隔距离和预设距离阈值的比对，便捷地实现了对桌台对象周围的用户对象数量的精准统计，进而生成离店检测结果，实现了基于图像识别的离店精准检测，无需对店铺场所的座椅进行改造，大大降低了投入成本，并且还将离店检测与店铺订单管理设备中的点单信息、交易支付状态进行了关联，不仅进一步提高了离店检测的准确率，而且还丰富了离店检测结果，使得服务对象根据离店检测结果能够清楚地获知桌台对象的交易支付情况，及时地进行追收款项、收台、送客离店等服务，有效地减少了跑单情况的发生，大大降低了因用户对象跑单而给店铺场所带来的经济损失，还有效地提高了店铺服务质量和用户体验感。

本发明实施例提供了一种非易失性计算机存储介质，所述计算机存储介质存储有至少一可执行指令，该计算机可执行指令可执行上述任意方法实施例中的基于图像识别的离店检测方法。

图4示出了根据本发明实施例的一种计算设备的结构示意图，本发明具体实施例并不对计算设备的具体实现做限定。

如图4所示，该计算设备可以包括：处理器(processor)402、通信接口(Communications Interface)404、存储器(memory)406、以及通信总线408。

其中：

处理器402、通信接口404、以及存储器406通过通信总线408完成相互间的通信。

通信接口404，用于与其它设备比如客户端或其它服务器等的网元通信。

处理器402，用于执行程序410，具体可以执行上述基于图像识别的离店检测方法实施例中的相关步骤。

具体地，程序410可以包括程序代码，该程序代码包括计算机操作指令。

处理器402可能是中央处理器CPU，或者是特定集成电路ASIC（ApplicationSpecific Integrated Circuit），或者是被配置成实施本发明实施例的一个或多个集成电路。计算设备包括的一个或多个处理器，可以是同一类型的处理器，如一个或多个CPU；也可以是不同类型的处理器，如一个或多个CPU以及一个或多个ASIC。

存储器406，用于存放程序410。存储器406可能包含高速RAM存储器，也可能还包括非易失性存储器（non-volatile memory），例如至少一个磁盘存储器。

程序410具体可以用于使得处理器402执行上述任意方法实施例中的基于图像识别的离店检测方法。程序410中各步骤的具体实现可以参见上述基于图像识别的离店检测实施例中的相应步骤和单元中对应的描述，在此不赘述。所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的设备和模块的具体工作过程，可以参考前述方法实施例中的对应过程描述，在此不再赘述。

在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明实施例也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明实施例的内容，并且上面对特定语言所做的描述是为了披露本发明实施例的最佳实施方式。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明示例性实施例的描述中，各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明实施例要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书（包括伴随的权利要求、摘要和附图）中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书（包括伴随的权利要求、摘要和附图）中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器（DSP）来实现根据本发明实施例中的一些或者全部部件的一些或者全部功能。本发明实施例还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序（例如，计算机程序和计算机程序产品）。这样的实现本发明实施例的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明实施例可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

Claims (12)

1.一种基于图像识别的离店检测方法，所述方法包括：

采集店铺场所内包含有桌台对象的场所图像；

对所述场所图像进行处理，获得所述桌台对象的桌台标识信息以及在所述桌台对象的预设区域内的用户对象数量；

依据所述桌台标识信息和所述用户对象数量，生成所述桌台对象对应的离店检测结果。

2.根据权利要求1所述的方法，其中，所述对所述场所图像进行处理，获得所述桌台对象的桌台标识信息以及在所述桌台对象的预设区域内的用户对象数量进一步包括：

对所述场所图像进行识别处理，得到所述场所图像中的桌台对象的桌台标识信息，并根据所述桌台标识信息，查询店铺订单管理设备中是否包含有所述桌台对象对应的点单信息；

若查询到所述桌台对象对应的点单信息，则对所述场所图像进行识别处理，统计在所述桌台对象的预设区域内的用户对象数量。

3.根据权利要求1所述的方法，其中，所述对所述场所图像进行处理，获得所述桌台对象的桌台标识信息以及在所述桌台对象的预设区域内的用户对象数量进一步包括：

判断所述场所图像中是否包含有用户对象；

若所述场所图像中包含有用户对象，则对所述场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标；根据所述桌台对象位置坐标和所述用户对象位置坐标，统计在所述桌台对象的预设区域内的用户对象数量；

若所述场所图像中不包含有用户对象，则确定在所述桌台对象的预设区域内的用户对象数量为零。

4.根据权利要求3所述的方法，其中，所述对所述场所图像中的桌台对象和用户对象进行识别处理，得到桌台对象位置坐标和用户对象位置坐标进一步包括：

识别所述场所图像中的桌台对象的桌台轮廓区域和用户对象的用户轮廓区域；

将所述桌台轮廓区域的中心点在所述场所图像中的位置坐标确定为桌台对象位置坐标，将所述用户轮廓区域的中心点在所述场所图像中的位置坐标确定为用户对象位置坐标。

5.根据权利要求4所述的方法，其中，在将所述用户轮廓区域的中心点在所述场所图像中的位置坐标确定为用户对象位置坐标之后，所述方法还包括：

获取用于采集所述场所图像的图像采集设备相对于所述桌台对象的安装角度信息；

根据所述安装角度信息，对所述桌台对象位置坐标和所述用户对象位置坐标进行修正。

6.根据权利要求3所述的方法，其中，所述根据所述桌台对象位置坐标和所述用户对象位置坐标，统计在所述桌台对象的预设区域内的用户对象数量进一步包括：

针对每个用户对象，根据所述桌台对象位置坐标和该用户对象的用户对象位置坐标，计算该用户对象与所述桌台对象之间的间隔距离；

统计所述间隔距离小于预设距离阈值的用户对象的数量，将所述数量作为在所述桌台对象的预设区域内的用户对象数量。

7.根据权利要求1-6任一项所述的方法，其中，所述依据所述桌台标识信息和所述用户对象数量，生成所述桌台对象对应的离店检测结果进一步包括：

根据所述桌台标识信息，查询店铺订单管理设备中所述桌台对象对应的点单信息的交易支付状态；

依据所述用户对象数量，生成携带有所述桌台对象对应的交易支付状态的离店检测结果。

8.根据权利要求7所述的方法，其中，所述依据所述用户对象数量，生成携带有所述桌台对象对应的交易支付状态的离店检测结果进一步包括：

若所述用户对象数量为零，则判断在预设时间段内基于采集到的场所图像所统计得到的用户对象数量是否为零；

若在所述预设时间段内基于采集到的场所图像所统计得到的用户对象数量为零，则生成携带有所述桌台对象对应的交易支付状态的离店检测结果。

9.根据权利要求1-6任一项所述的方法，其中，在所述依据所述桌台标识信息和所述用户对象数量，生成所述桌台对象对应的离店检测结果之后，所述方法还包括：

将所述离店检测结果发送至通知设备和/或服务对象，以供通知服务对象对所述桌台对象和/或用户对象进行相应操作；其中，所述通知设备包括：语音播放设备、语音通话设备、点单设备和/或智能手环，所述服务对象包括：服务机器人和/或服务人员。

10.一种基于图像识别的离店检测装置，所述装置包括：

采集模块，适于采集店铺场所内包含有桌台对象的场所图像；

处理模块，适于对所述场所图像进行处理，获得所述桌台对象的桌台标识信息以及在所述桌台对象的预设区域内的用户对象数量；

结果生成模块，适于依据所述桌台标识信息和所述用户对象数量，生成所述桌台对象对应的离店检测结果。

11.一种计算设备，包括：处理器、存储器、通信接口和通信总线，所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信；

所述存储器用于存放至少一可执行指令，所述可执行指令使所述处理器执行如权利要求1-9中任一项所述的基于图像识别的离店检测方法对应的操作。

12.一种计算机存储介质，所述存储介质中存储有至少一可执行指令，所述可执行指令使处理器执行如权利要求1-9中任一项所述的基于图像识别的离店检测方法对应的操作。

Images