CN117133086A - 不正当行为监视装置及存储介质 - Google Patents

Abstract

本发明公开一种不正当行为监视装置及存储介质，能够在关于结算终端的操作可能存在有不正当行为的情况下使结算不能够进行，该不正当行为监视装置包括不正当行为检测部、接受部及禁止部。不正当行为检测部，检测操作者对结算终端的不正当行为。接受部，接受对于不正当行为验证结束的指示。禁止部，禁止残存有没有接受验证结束的指示的不正当行为的结算终端的结算处理。

Description

不正当行为监视装置及存储介质

本申请主张申请日为2022年5月25日、申请号为JP2022-085239的日本申请为优先权，并引用上述申请的内容，通过引用将公开内容全部结合于此。

技术领域

本发明的实施例涉及一种不正当行为监视装置及存储介质。

背景技术

自助POS终端是原则上顾客进行购买商品的从登记到结算的各种操作的全自助类型的结算终端。在这样的结算终端中，顾客有可能进行将已加入到购买商品群中的商品没有作为购买商品进行正确登记等的不正当行为。因此，已经采取通过由照相机拍摄顾客的行为，店员等确认拍摄的视频，从而验证是否进行了不正当行为的措施。

但是，存在店员在从拍摄有顾客的行为的视频发现顾客的不正当行为上需要较长的时间的情况。因此，存在店员虽然发现了顾客的不正当行为，但是顾客已结束了结算而不能纠正不正当行为的情况。根据这样的状况，希望在关于结算终端的操作有可能存在不正当行为的情况下使结算不能够进行。

发明内容

鉴于上述问题，本发明要解决的问题是提供能够在关于结算终端的操作可能存在有不正当行为的情况下使结算不能够进行的不正当行为监视装置及存储介质。

为解决上述问题，本发明的实施例的不正当行为监视装置包括：不正当行为检测部、接受部及禁止部。不正当行为检测部检测操作者对于结算终端的不正当行为。接受部接受对于不正当行为验证完成的指示。禁止部禁止残存有没有接受验证完成的指示的不正当行为的结算终端的结算处理。

根据上述的不正当行为监视装置，能够在关于结算终端的操作有可能存在不正当行为的情况下使结算不能进行。

在上述的不正当行为监视装置中，所述不正当行为检测部基于通过拍摄所述操作者的行为的摄影设备所得到的视频而检测所述操作者的不正当行为，所述接受部通过显示设备回放已检测出所述操作者的不正当行为的场景的视频，并接受所述验证结束的指示。

根据上述的不正当行为监视装置，能够确认视频并输入验证结束的指示。

在上述的不正当行为监视装置中，所述接受部接受有不正当行为或无不正当行为的指示，所述禁止部禁止至少残存有没有接受无不正当行为的指示的不正当行为的所述结算终端的结算处理。

根据上述的不正当行为监视装置，能够在没有接受无不正当行为的指示的情况下禁止结算处理。

在上述的不正当行为监视装置中，还包括：保存部，保存与通过所述接受部已接受有不正当行为的指示的操作者相关的信息。

根据上述的不正当行为监视装置，能够保存有不正当行为的操作者的信息。

在上述的不正当行为监视装置中，还包括：输出部，输出通过所述保存部保存的所述操作者的信息。

根据上述的不正当行为监视装置，能够确认操作者过去的不正当行为的信息。

在上述的不正当行为监视装置中，所述不正当行为检测部基于通过拍摄所述操作者的行为的摄影设备所得到的视频来检测所述操作者的不正当行为，所述不正当行为监视装置还包括：记号处理部，在通过所述不正当行为检测部检测出不正当行为的时间点，向通过所述拍摄设备而得到的视频数据赋予记号。

根据上述的不正当行为监视装置，能够容易地发现已检测出不正当行为的时间点的视频。

在上述的不正当行为监视装置中，所述接受部进一步识别表示所述记号的记号标记被选择的情况，通过显示设备以规定时间回放被赋予了已被选择的所述记号的部分的视频，并接受有不正当行为或无不正当行为的指示。

根据上述的不正当行为监视装置，能够选择检测出不正当行为的视频的部分来验证有不正当行为或无不正当行为。

在上述的不正当行为监视装置中，在通过所述接受部接受了无不正当行为的指示的情况下，所述记号处理部删除视频数据的相应地方的记号，所述禁止部在所述视频数据被赋予有记号的情况下禁止结算处理。

根据上述的不正当行为监视装置，能够在是无不正当行为的视频数据的情况下允许结算处理。

在上述的不正当行为监视装置中，所述不正当行为检测部还检测顾客改正不正当行为的行为，所述记号处理部，在所述不正当行为检测部检测出顾客改正不正当行为的行为的情况下，删除已经赋予了的、相应的不正当行为的记号。

根据上述的不正当行为监视装置，能够减少不正当行为的验证操作的时间的同时，能够避免给善意的顾客带去不快感。

本发明的另一方面的存储介质，存储使不正当行为监视装置的计算机作为以下各部发挥功能的程序：不正当行为检测部，检测操作者对于结算终端的不正当行为；接受部，接受对于所述不正当行为验证结束的指示；以及禁止部，禁止残存有没有接受所述验证结束的指示的不正当行为的所述结算终端的结算处理。

根据上述的存储介质，能够向计算机提供能够在关于结算终端的操作可能存在有不正当行为的情况下不能够进行结算的功能。

附图说明

图1是引入有自助POS终端的店铺的系统构成图；

图2是表示不正当行为监视装置的主要功能构成的框图；

图3是用于说明自助POS终端和照相机的位置关系的图；

图4是表示服务员终端的概略构成的示意图；

图5是表示服务员终端的显示设备所显示的监视图像的一例的示意图；

图6是表示不正当行为监视装置的要部电路构成的框图；

图7是表示不正当行为监视装置中处理器的不正当行为监视模式所涉及的信息处理的要部顺序的流程图；

图8是表示不正当行为监视装置中处理器的不正当行为验证模式所涉及的信息处理的要部顺序的流程图；

图9是表示不正当行为验证前的监视图像区域的视频回放区域和进度条区域的示意图；以及

图10是表示不正当行为验证后的监视图像区域的视频回放区域和进度条区域的示意图。

附图标记说明

11自助POS终端12POS服务器13显示控制装置

14 服务员终端 15 通信网络 21 照相机

22 图像存储装置 23 视频回放装置 24 不正当行为监视装置

31 处理器 32 主存储器 33 辅助存储设备

34 时钟 35 网络接口 36 通信接口

37系统传输线路100自助POS系统121会员数据库

122 不正当行为数据库 200 不正当行为监视系统 301 行为识别部

302 操作识别部 303 不正当行为检测部 304 记号处理部

305 告知部 306 操作接受部 307 验证处理部

308保存部309检索部310结算处理部

具体实施方式

以下，使用附图，关于不正当行为监视装置的一实施例进行说明。

该实施例将自助POS终端11(参照图1)作为结算终端的一例。此外，是例示在关于自助POS终端11的操作有可能存在有不正当行为的情况下，在该自助POS终端11中使结算不能进行的不正当行为监视装置24(参照图1)的实施例。首先，关于具备不正当行为监视装置24的店铺系统构成进行说明。

[店铺的系统构成说明]

图1是引入有自助POS终端11的店铺的系统构成图。本系统包括自助POS系统100和不正当行为监视系统200。自助POS系统100包括多台的自助POS终端11、POS服务器12、显示控制装置13、服务员终端14及通信网络15。多台的自助POS终端11、POS服务器12及显示控制装置13连接于通信网络15。服务员终端14连接于显示控制装置13。通信网络15典型的是LAN(LocalArea Network：局域网)。LAN既可以是有线LAN也可以是无线LAN。

自助POS终端11是顾客自己进行购买商品的从登记到结算的操作的全自助类型的结算终端。即、顾客能够为操作自助POS终端11的操作者。此外，有时，店员能够替代顾客而成为操作者。

POS服务器12是用于统一地控制各自助POS终端11的动作的服务器用计算机。通过POS服务器12的控制，在各自助POS终端11中以相同的条件进行购买商品的登记处理、结算处理等。

POS服务器12管理会员数据库121和不正当行为数据库122。会员数据库121是对应店铺的会员创建的会员数据的集合体。会员例如是已知的积分会员。会员数据包含为了分别地识别各会员而对应会员而设定的唯一的会员ID。另外，会员数据包含会员持有的累计积分、来店次数等。各会员持有存储有自己的会员ID的会员卡。或者，会员将会员专用的应用软件安装于智能手机等的信息终端。通过启动该应用软件，在信息终端的显示设备上显示表示会员ID的条形码或二维码。

不正当行为数据库122是每次由店员认定与自助POS终端11的操作相关的不正当行为时而创建的不正当行为数据的集合体。不正当行为数据包含例如认定了不正当行为的日期时间、认定了不正当行为的自助POS终端11的作为识别信息的收银号码等。不正当行为数据在自助POS终端11的操作者是会员的情况下也包含该会员ID。不正当行为数据有时也包含经由服务员终端14输入的注释。

显示控制装置13是基于从各自助POS终端11输出的数据信号等而对应自助POS终端11创建监视图像，并显示于服务员终端14的显示设备的控制器。服务员终端14是被称为服务员的店员用于基于监视图像监视各自助POS终端11的状态的终端。关于服务员终端14和监视图像的详细将后述。

不正当行为监视系统200包括多个照相机21、图像存储装置22、视频回放(播放)装置23及不正当行为监视装置24。另外，不正当行为监视系统200利用服务员终端14。

多个照相机21分别与多个自助POS终端11一一对应。照相机21是用于拍摄操作对应的自助POS终端11的操作者的设备。以照相机21拍摄的拍摄数据是表示操作者的动作的视频数据。因此，作为照相机21，使用例如包括视频拍摄的功能的摄像机。照相机21是摄影设备的一例。

图像存储装置22在内置的存储设备中，将从各照相机21输出的摄影数据与各照相机21所对应的自助POS终端11的收银号码相关联而存储。作为图像存储装置22，能够单独或组合使用SSD(Solid State Drive：固态驱动器)或HDD(Hard Disc Drive：硬盘驱动器)等的大容量的存储装置。

视频回放装置23是回放基于由图像存储装置22所存储的摄影数据的视频的装置。通过视频回放装置23回放的视频通过显示控制装置13的控制而显示于服务员终端14。

不正当行为监视装置24连接多个自助POS终端11、显示控制装置13、服务员终端14、图像存储装置22及视频回放装置23。不正当行为监视装置24是监视操作自助POS终端11的操作者，当识别到不正当行为时经由服务员终端14向店员告知并催促进行不正当行为的验证的装置。另外，不正当行为监视装置24是禁止在没有完成不正当行为的验证的自助POS终端11进行结算处理的装置。

图2是表示不正当行为监视装置24的主要功能构成的框图。不正当行为监视装置24具有作为行为识别部301、操作识别部302、不正当行为检测部303、记号(章节、chapter)处理部304、告知部305、操作接受部306、验证处理部307、保存部308、检索部309及结算控制部310的功能。

行为识别部301是基于由图像存储装置22存储的摄影数据识别顾客对于自助POS终端11的行为的功能。操作识别部302是基于从各自助POS终端11向显示控制装置13输入的数据信号，识别顾客对于自助POS终端11的操作的功能。不正当行为检测部303是基于通过行为识别部301识别的识别结果和通过操作识别部302识别的识别结果，检测操作自助POS终端11的顾客的不正当行动、即、不正当行为的功能。在此，行为识别部301、操作识别部302及不正当行为检测部303构成检测操作者对于自助POS终端11的不正当行为的不正当行为检测部。

此外，不正当行为检测部303例如，在检测出顾客将商品没有以扫描仪读取就收纳于自己的购物袋的行为的情况下识别为不正当行为。后述的记号处理部304在检测出不正当行为的时间点向摄影数据赋予记号(段落)。但是，顾客有时在结账前改变想法。检测出顾客从自己的购物袋中取出商品，并以扫描仪读取商品的行为。目前，即使在检测出这个行为的情况下也识别为不正当行为。但是，顾客改正不正当行为的行为是善意的行为，所以，不正当行为检测部303在检测出改正不正当行为的行为的情况下，通知记号处理部304删除之前存储的相应的记号。记号处理部304删除记号。此外，在通过店员纠正不正当行为的情况下不删除记号。

也就是说，不正当行为检测部303具有基于通过行为识别部301识别的识别结果和通过操作识别部302识别的识别结果来检测不正当行为的功能。并且，也可以检测出顾客改正不正当行为的行为，并通知记号处理部304删除相应的记号。

据此，能够减少店员要确认的记号。不使善意的顾客感到不快而解决问题。

记号处理部304是在通过不正当行为检测部303检测出对于自助POS终端11的不正当行为的时间点，在以与该自助POS终端11对应的照相机21拍摄的操作者的摄影数据中赋予记号(段落)的功能。向与检测出不正当行为的时间点的视频的摄影时刻相当的部分赋予记号。不正当行为监视装置24能够将被赋予记号的摄影时刻的例如前后10秒间的共计20秒的视频作为不正当行为验证用的视频显示于服务员终端14。在此，记号处理部304构成记录能够识别映有通过不正当行为检测部303检测出的不正当行为的行为的摄影数据的范围的记号的记录部(记录手段)。

告知部305是在通过不正当行为检测部303检测出不正当行为的情况下经由服务员终端14向店员告知的功能。通过该告知而确认了检测出不正当行为的店员观察该不正当行为所涉及的验证用的视频，并验证不正当行为是否真实存在。在此，告知部305构成告知通过不正当行为检测部303检测出不正当行为的告知手段。

操作接受部306是接受店员对于服务员终端14的操作输入的功能。例如，店员在检测出不正当行为的情况下对于服务员终端14进行用于指示该不正当行为的验证的操作输入。此后，根据显示于服务员终端14的验证用的视频等而验证为不正当行为的店员对于服务员终端14进行用于向不正当行为监视装置24通知该验证结果的操作输入。在此，操作接受部306构成接受对于不正当行为的验证结束的指示的接受手段(接受部)。

验证处理部307是依照在操作接受部306接受的操作输入进行不正当行为的验证所涉及的各种的处理的功能。例如，验证处理部307当接受用于指示不正当行为的验证的操作输入时，进行用于基于图像存储装置22所存储的摄影数据而使不正当行为验证用的视频在服务员终端14回放的处理。

例如，验证处理部307当接受表示不正当行为的验证结果的操作输入时，进行用于向记号处理部304及告知部305通知验证结束的处理。接受该通知后，记号处理部304去除(删除)摄影数据的检测出不正当行为的地方被赋予的记号。告知部305向店员告知不正当行为的验证已结束的情况。

例如，验证处理部307当接受表示不正当行为的验证结果为有不正当行为的操作输入时，进行用于创建不正当行为数据的处理。不正当行为数据，如上述那样，在自助POS终端11的操作者是会员的情况下包含用于识别该会员的会员ID。保存部308是将通过验证处理部307创建的不正当行为数据保存于不正当行为数据库122的功能。在此，验证处理部307及保存部308构成保存与通过接受手段接受了有不正当行为的指示的操作者相关的信息的保存手段(保存部)。

检索部309是将会员ID作为检索用的关键词而检索会员数据库121及不正当行为数据库122，并将检测出的会员数据及不正当行为数据提供给验证处理部307的功能。验证处理部307是用于根据从检索部309提供的会员数据和不正当行为数据而将不正当行为的验证中所需要的会员信息输出到服务员终端14的信息处理。会员信息包含会员的来店次数和该会员的不正当行为数据件数。在此，检索部309及验证处理部307构成输出通过保存手段保存的操作者的信息的输出手段(输出部)。

验证处理部307当根据从自助POS终端11向显示控制装置13输出的数据信号检测到在该自助POS终端11中进行了用于向结算过渡的操作输入时，确认在该自助POS终端11检测出的不正当行为的验证操作是否残存。具体地，验证处理部307在与该自助POS终端11的收银机号码相关联而存储于图像存储装置22的摄影数据被赋予有记号的情况下，判定为不正当行为的验证操作残存。在同一摄影数据上没有被赋予记号的情况下，验证处理部307判定为没有残存不正当行为的验证操作。结算控制部310允许在验证处理部307中判定为没有残存不正当行为的验证操作的自助POS终端11中的结算处理。结算控制部310禁止在验证处理部307中判定为残存有不正当行为的验证操作的自助POS终端11中的结算处理。在此，验证处理部307及结算控制部310构成禁止残存有没有接受验证结束的指示的不正当行为的自助POS终端11的结算处理的禁止手段(禁止部)。

[自助POS终端和照相机的位置关系的说明]

图3是用于说明自助POS终端11和照相机21的位置关系的图。首先，关于自助POS终端11的外观构成进行说明。

自助POS终端11包括设置于地面的主体40和设置在该主体40的侧面的装袋台50。主体40在其上部安装有触摸面板41。触摸面板41由显示器和触摸传感器构成。触摸面板41是显示部的一例。显示器是用于对于操作自助POS终端11的操作者显示各种画面的显示器。触摸传感器是用于检测由操作者向画面进行触摸输入的设备。在自助POS终端11中，操作者通常是顾客。

主体40在与设置有装袋台50的一侧相反一侧的侧面中心部设置筐台60。筐台60是用于放置从卖场来的顾客放置购买商品的筐等的台子。顾客站在图2中主体40的跟前侧进行操作，以便看到触摸面板41的画面。因此，从顾客角度来看，隔着主体40，在右侧有筐台60，在左侧有装袋台50。在本实施例中，将顾客站着的一侧作为主体40的正面，将设置装袋台50的一侧作为主体40的左侧，将设置有筐台60的一侧作为主体40的右侧。

主体40在其内部具备扫描仪、卡读取器、票据打印机及现金处理机等。此后，在主体40的正面上形成扫描仪的读取窗42、卡插入口43、票据发放口44、硬币投入口45、硬币支付出口46、纸币投入口47及纸币支付出口48。另外，通信电缆从主体40的右侧面向外部延伸，在该通信电缆的前端连接有手持扫描仪61。另外，虽未图示，但在主体40上也包括电子货币介质用的读取器/写入器。

主体40在其上面安装有显示柱64。显示柱64在其顶端部包括发光部65。发光部65选择性的发出例如蓝色和红色的光。显示柱64通过发光部65的发光颜色而表示自助POS终端11的状态，例如，待机中、动作中、呼叫中、错误中、不正当行为发生中等。显示柱64也可以通过发光部65的闪烁而表示自助POS终端11的状态。

装袋台50为在其上部安装有袋保持器具52的构造。袋保持器具52包括一对保持臂53，通过该保持臂53保持店铺配备的购物袋或顾客拿来的购物袋、即、环保袋等。

接着，说明自助POS终端11和照相机21的位置关系。

如图3所示那样，照相机21设置于从上方能够拍摄站于自助POS终端11的正面，与主体40、装袋台50及筐台60等的部件对峙的顾客的位置。

站于自助POS终端11的正面的顾客，首先在右侧的筐台60上放置装有购买商品的筐等，在左侧的保持臂53上保持购物袋或环保袋等。接着，顾客依照显示于触摸面板41的导向，操作触摸面板41并宣告自助POS终端11的利用开始。

在此之后，顾客从放置于筐台60的筐一件一件的拿取购买商品。此后，在该购买商品上附有条形码的情况下，顾客通过将该条形码对准读取窗42而通过扫描仪读取，从而进行商品登记。在购买商品上没有附有条形码的情况下，顾客通过操作触摸面板41而从无条形码商品的列表选择购买商品，从而进行商品登记。顾客将登记结束的购买商品放入购物袋或环保袋等。

登记结束所有的购买商品的顾客操作触摸面板41，并宣告购买商品的结算，并选择结算方法。例如，在选择了现金结算的情况下，顾客向纸币投入口47或硬币投入口45投入纸币或硬币，取出从纸币支付出口48或硬币支付出口46支付出的找零。例如，如果选择了电子货币结算，则顾客将电子货币介质对准读取器/写入器。例如，如果选择了信用卡结算，则顾客向卡插入口43插入信用卡。这样一来，如果结束结算，则顾客领取从票据发放口44发放的票据，从保持臂53拿下购物袋或环保袋而退出店铺。

照相机21设置于能够拍摄在自助POS终端11的正面如上述那样行动的顾客的手的动作的位置。

[服务员终端和监视图像的说明]

图4是表示服务员终端14的概略构成的示意图。服务员终端14包括触摸面板式的显示器141和文本输入用的键盘142。显示器141的画面具有多个(在图4中为四个)的监视图像区ARa、视频验证区ARb、文本区ARc。另外，在视频验证区ARb和文本区ARc之间配置有无不正当行为按键TBa、有不正当行为按键TBb、以及注释按键TBc。

视频验证区域ARb是回放不正当行为验证用的视频的区。无不正当行为按键TBa是作为服务员终端14的操作者的店员用于在根据在视频验证区ARb被回放的视频等认定为无不正当行为的情况下进行触摸的按键图像。有不正当行为按键TBb是店员用于在根据在视频验证区ARb被回放的视频等认定为有不正当行为的情况下触摸的按键图像。注释按键TBc是店员在需要输入注释的情况下进行触摸的按键图像。店员通过触摸注释按键TBc而能够从键盘142输入作为注释的文本。输入的文本显示于文本区ARc。另外，在文本区ARc也显示上述的会员信息。

多个监视图像区ARa分别与一台自助POS终端11对应。因此，在图4中，示出显示有与四台的自助POS终端11分别对应的监视图像区ARa的例子。例如，服务员终端14与六台的自助POS终端11对应的情况下，在显示器141上显示六个监视图像区ARa。

如图5所示那样，监视图像区ARa被区分为登记明细区ARaa、视频回放区ARab、进度条区ARac。登记明细区ARaa是用于显示在对应的自助POS终端11中已登记的购买商品的商品名、件数、金额、合计金额等的区。视频回放区ARab是用于回放通过对于对应的自助POS终端11所设置的照相机21拍摄的视频的区。进度条区ARac是用于显示表示在视频回放区ARab回放的视频的进度的显示条的区。

显示于监视图像区ARa的图像通过显示控制装置13而控制。即、对于登记明细区ARaa，基于从自助POS终端11向显示控制装置13输出的数据信号显示购买商品的信息。对于视频回放区域ARab，基于从视频回放装置23向显示控制装置13输出的摄影数据而回放操作自助POS终端11的操作者的视频。

[不正当行为监视装置的构成说明]

图6是表示不正当行为监视装置24的要部电路构成的框图。不正当行为监视装置24包括处理器31、主存储器32、辅助存储设备33、时钟34、网络接口35、通信接口36及系统传输线路37。系统传输线路37包含地址总线、数据总线等。不正当行为监视装置24通过以系统传输线路37连接处理器31、主存储器32、辅助存储设备33、时钟34、网络接口35及通信接口36，从而构成计算机。

处理器31相当于上述计算机的中枢部分。处理器31依照操作系统或应用程序而控制应实现作为不正当行为监视装置24的各种的功能的各部。处理器31是例如CPU(CentralProcessing Unit：中央处理器)。

主存储器32相当于上述计算机的主存储部分。主存储器32包含非易失性的存储器区及易失性的存储器区。主存储器32在非易失性存储器区存储操作系统或应用程序。主存储器32在易失性的存储器区存储处理器31执行用于控制各部的处理过程中需要的数据。该种数据有时也存储在非易失性存储器区。主存储器32将易失性的存储器区使用为通过处理器31能够适宜改写数据的工作区。非易失性的存储器区是例如ROM(Read Only Memory：只读存储器)。易失性的存储器区是例如RAM(RandomAccess Memory：随机存取存储器)。

辅助存储设备33相当于上述计算机的辅助存储部分。作为辅助存储设备33，单独或多个组合使用例如SSD(Solid State Drive)、HDD(Hard Disc Drive)、EEPROM(ElectricErasable Programmable Read-Only Memory：电可擦可编程只读存储器)等公知的存储设备。辅助存储设备33保存处理器31进行各种处理中使用的数据、根据在处理器31中进行的处理而生成的数据等。辅助存储设备33有时也存储应用程序。

时钟34作为不正当行为监视装置24的时间信息源发挥功能。处理器31基于通过时钟34计时的时刻信息取得当前的日期及时间。

网络接口35是用于经由通信网络15与POS服务器12等进行数据通信的接口。不正当行为监视装置24能够经由网络接口35与POS服务器12进行数据通信，访问通过POS服务器12管理的会员数据库121及不正当行为数据库122。

通信接口36是用于与各自助POS终端11、显示控制装置13、服务员终端14、图像存储装置22及视频回放装置23的各部进行通信的接口。

在相关构成的不正当行为监视装置24中，处理器31为了实现作为上述的行为识别部301、操作识别部302、不正当行为检测部303、记号处理部304、告知部305、操作接受部306、验证处理部307、检索部309、保存部308及结算控制部310的功能而具有不正当行为监视模式311及不正当行为验证模式312的各动作模式。这些动作模式是依照主存储器32或辅助存储设备33所存储的作为应用程序的一种的控制程序而动作的模式。

将控制程序安装于主存储器32或辅助存储设备33的方法并不特别限定。能够在可移除存储介质中存储控制程序，或通过经由网络的通信分发控制程序并安装于主存储器32或辅助存储设备33中。存储介质只要如CD-ROM、存储卡等那样能够存储程序、且装置可读取即可，其形式不限。

[不正当行为监视模式的动作说明]

图7是表示对于一台自助POS终端11的处理器31的不正当行为监视模式所涉及的信息处理的要部顺序的流程图。处理器31能够对于其他的自助POS终端11也以同样的顺序并列地执行不正当行为监视模式所涉及的信息处理。

处理器31对于处于待机中的状态的自助POS终端11开始图7的流程图所示的顺序的信息处理。作为ACT1，处理器31等待接受在该自助POS终端11中执行购买商品的登记开始操作。

在处于待机中的状态的自助POS终端11的触摸面板41上显示有包含开始键的初始画面。结束在卖场的购物的顾客移动到处于空闲的自助POS终端11的正面，将装有购买商品的购物筐等放置于筐台60上。并且，顾客触摸初始画面的开始键。当触摸开始键时，从自助POS终端11向显示控制装置13输出登记开始信号。当经由通信接口36从显示控制装置13向不正当行为监视装置24输入了登记开始信号时，处理器31在ACT1中判定为YES，并前进到ACT2。作为ACT2，处理器31确认是否进行了会员登记。

是会员的顾客以自助POS终端11的卡读取器读取会员卡的数据。或者，顾客以自助POS终端11的扫描仪读取显示于智能手机等显示设备的表示会员ID的条形码或二维码。通过会员进行任一操作而从自助POS终端11向显示控制装置13输出包含会员ID的数据信号。当经由通信接口36从显示控制装置13向不正当行为监视装置24输入了包含会员ID的数据信号时，则处理器31识别为在ACT2中进行了会员登记。

在进行了会员登记的情况下，处理器31在ACT2中判定为YES，前进到ACT3。作为ACT3，处理器31通过检索部309的功能检索会员数据库121及不正当行为数据库122。处理器31从会员数据库121检索出以会员ID识别的会员的会员数据。另外，在不正当行为数据库122中存在以会员ID识别的会员的不正当行为数据的情况下，处理器31检索出该不正当行为数据。此后，处理器31取得包含会员的来店次数和该会员的不正当行为数据件数的会员信息。作为ACT4，处理器31与对应的自助POS终端11的收银机号码相关联而在主存储器32中存储会员信息。

另一方面，在没有进行会员登记的情况下，处理器31跳过ACT3及ACT4的处理。

作为ACT5，处理器31通过行为识别部301的功能识别顾客对于自助POS终端11的行为。另外，作为ACT6，处理器31通过操作识别部302的功能识别顾客对于自助POS终端11的操作。此后，作为ACT7，处理器31通过不正当行为检测部303的功能，基于行为识别结果和操作识别结果来检测操作自助POS终端11的顾客的不正当行为。

在开始键被触摸的自助POS终端11中，触摸面板41的画面从初始画面过渡到登记画面。确认了过渡到登记画面的顾客，对于自助POS终端11进行用于进行登记购买商品的操作。具体地，顾客从放置于筐台60上的购物筐等中取出第一件购买商品。此后，在该购买商品上附有条形码的情况下，顾客将该条形码对准扫描仪的读取窗42。在没有附有条形码的情况下，顾客从触摸面板41的画面所显示的无条形码商品的列表中选择购买商品。当以扫描仪正确地读取对准读取窗42的条形码、或从无条形码商品的列表中选择购买商品时，从自助POS终端11向显示控制装置13输出包含该购买商品的商品名、件数、金额等的登记商品数据，并显示于服务员终端14的监视图像区ARa中的登记明细区ARaa。这样一来，结束了第一件购买商品的登记的顾客将该购买商品装入准备于装袋台50的购物袋或环保袋等。此后，顾客进行对于第二件购买商品的登记操作。

对于这样的购买商品的登记操作，在不正当行为监视装置24的行为识别部301中识别顾客从筐台60取出购买商品的取出动作和顾客将购买商品装入购物袋或环保袋等的装袋动作。另外，在操作识别部302中，通过检测从自助POS终端11向显示控制装置13输出的登记商品数据，从而识别购买商品的登记操作。在不正当行为检测部303中，当在取出动作和装袋动作之间没有识别到购买商品的登记操作的情况下，检测为不正当行为。即、在顾客将从筐台60取出的商品没有在自助POS终端11登记就装袋的情况下，不正当行为监视装置24检测为不正当行为。

结束ACT7的处理的处理器31，作为ACT8判定是否检测出不正当行为。在没有检测出不正当行为的情况下，处理器31在ACT8中判定为NO，并前进到ACT11。

在检测出不正当行为的情况下，处理器31在ACT8中判定为YES，并前进到ACT9。作为ACT9，处理器31通过记号处理部304的功能向检测出不正当行为的时间点的摄影数据赋予记号。

摄影数据与照相机21所对应的自助POS终端11的收银机号码相关联而被存储于图像存储装置22中。此外，基于该摄影数据的视频在以收银机号码识别的自助POS终端11所对应的监视图像区ARa的视频回放区ARab中被进行回放。处理器31在检测出不正当行为的时间点，向在视频回放区域ARab被回放的视频所对应的摄影数据赋予记号。另外，作为ACT10，处理器31通过告知部305的功能，将检测出不正当行为的情况经由服务员终端14进行告知。此后，处理器31向ACT11前进。

图9是表示对应于检测出不正当行为的自助POS终端11的监视图像区ARa的视频回放区ARab和进度条区ARac的示意图。在进度条区ARac中显示表示在视频回放区ARab中被回放的视频的进度的显示条。显示条是随着视频回放时间的经过而从图9的左端向右端延伸。此后，当向摄影数据赋予记号时，在其时间点，在显示条上显示记号标记CHa、CHb、CHc。在图9中首先，示出在显示有记号标记CHa的第一时间点检测出第一次不正当行为，在显示有记号标记CHb的第二时间点检测出第二次不正当行为，在显示有记号CHc的第三时间点检测出第三次不正当行为的情况。如此，通过记号CHa、CHb、CHc的显示而向店员告知检测出不正当行为的情况。

另外，记号标记CHa、CHb、CHc以第一颜色，例如红色显示。当在后述的不正当行为验证模式的处理中进行验证并确认为无不正当行为而删除记号时(通过记号处理部304删除检测出不正当行为的地方被赋予的记号)，记号标记CHa、CHb、CHc以第二颜色，例如蓝色显示(告知部305向店员告知不正当行为的验证已完成)。

在该实施例中，当判定为有不正当行为的情况下，记号处理部304不删除检测出不正当行为的地方被赋予的记号。此外，判定为有不正当行为的情况下，告知部305也可以变更为表示验证结束的显示。例如，也可以以第二颜色、或黄色等第三颜色进行显示。以下，在判定为有不正当行为的情况下，颜色说明为第一颜色。

图10表示关于与记号标记CHa对应的不正当行为和与记号标记CHb对应的不正当行为判定为结束了验证并且无不正当行为，而关于与记号标记CHc对应的不正当行为判定为验证没有结束或有不正当行为的情况。如此，根据记号标记CHa、CHb、CHc的颜色店员能够知道是否检测出不正当行为或对于该不正当行为的验证是否结束。此外，也可以构成为店员通过记号标记CHa、CHb、CHc的颜色相同、而形状、亮灯和闪烁等不同而能够识别对于不正当行为的验证是否结束。

返回到图7的说明。

当在ACT8中没有检测出不正当行为的情况、或为了检测出不正当行为而执行了ACT9及ACT10的处理的情况下，处理器31前进到ACT11。作为ACT11，处理器31确认在自助POS终端11中是否进行了用于指示结账的操作。

结束了所有的购买商品的登记操作的顾客触摸显示于登记画面上的支付键。当触摸支付键时，从自助POS终端11向显示控制装置13输出结账指令信号。检测出该结账指令信号的处理器31在ACT11中判定为YES，前进到ACT12。与此对应，在没有检测出结账指令信号的情况下，处理器31在ACT11中判定为NO，并返回到ACT2。此后，处理器31与上述同样地执行ACT2至ACT11的处理。

作为ACT12，检测出结账指令信号的处理器31检索自助POS终端11的摄影数据。作为ACT13，处理器31确认摄影数据是否被赋予了记号。后述的不正当行为验证模式的信息处理不与结账指令信号联动而执行。因此，即使是检测出不正当行为的自助POS终端11，在检测出结账指令信号的时候，不正当行为验证已经结束。在此情况下，记号已经被删除。据此，能够防止结账时顾客的等待时间变长。

在摄影数据被赋予有记号的情况下，处理器31在ACT13中判定为YES，并前进到ACT14。作为ACT14，处理器31通过结算控制部310的功能，向自助POS终端11输出结算禁止信号。在从不正当行为监视装置24接收了结算禁止信号的自助POS终端11中，结算处理被禁止。

结束了ACT14的处理的处理器31返回到ACT11。因此，在摄影数据被赋予有记号期间，自助POS终端11的结算处理被禁止。

另一方面，在摄影数据没有被赋予记号的情况下，处理器31在ACT13中判定为NO，并前进到ACT15。作为ACT15，处理器31通过结算控制部310的功能对于自助POS终端11输出结算允许信号。在从不正当行为监视装置24接收了结算允许信号的自助POS终端11中能够进行结算处理。当ACT15的处理结束后，处理器31结束图7的流程图所示的顺序的信息处理。

[不正当行为验证模式的动作说明]

图8是表示对于一台自助POS终端11的处理器31的不正当行为验证模式所涉及的信息处理的要部顺序的流程图。处理器31对于其他的自助POS终端11也能够以同样的顺序并列地执行不正当行为验证模式所涉及的信息处理。

处理器31对于检测出不正当行为的自助POS终端11，开始图8的流程图所示的顺序的信息处理。作为ACT21，处理器31等待接受记号标记被选择操作。

不正当行为验证模式的信息处理不与结账指令信号联动而执行。期待顾客在触摸支付键之前，完成该顾客的不正当行为的验证。

服务员终端14的店员当确认在监视图像区ARa的进度条区ARac中显示有记号标记时，则识别为对于该监视图像区ARa所对应的自助POS终端11检测出不正当行为。店员为了验证不正当行为而进行触摸记号标记的选择操作。

处理器31当通过操作接受部306的功能识别到记号标记被选择操作时(操作接受部306构成识别表示记号的记号标记被选择的情况的接受手段(接受部))，在ACT21中判定为YES，并前进到ACT22。作为ACT22，处理器31通过验证处理部307的功能取得显示有被选择操作的记号标记的监视图像区ARa所对应的自助POS终端11的收银机号码。此后，作为ACT23，处理器31从与该收银机号码相关联而存储于图像存储装置22的摄影数据提取作为不正当行为验证用的视频的摄影数据。即、处理器31提取被赋予了被选择操作的记号标记所对应的记号的摄影时刻的例如前后10秒间的摄影数据。此后，作为ACT24，处理器31在视频验证区ARb中回放该不正当行为验证用的视频。

作为ACT25，处理器31确认以收银机号码识别的自助POS终端11的操作者是否是会员。在是会员的情况下，处理器31在ACT25中判定为YES，并前进到ACT26。作为ACT26，处理器31将对应该会员的会员信息显示于文本区ARc。会员信息是在上述的不正当行为监视模式的处理的ACT4中存储于主存储器32的信息。在不是会员的情况下，处理器31跳过ACT26的处理。

如此，当店员为了验证不正当行为而触摸记号标记时，被赋予了与该记号标记所对应的记号的摄影时刻的例如前后10秒间的视频作为不正当行为验证用的视频而在视频验证区ARb被回放。该视频是表示在自助POS终端11中检测出不正当行为的时间点的操作者的行为的视频。另外，在操作者是会员的情况下，作为会员信息，例如来店次数和不正当行为数据件数也被显示于文本区ARc。

因此，店员观看在视频验证区ARb中被回放的视频，并验证是否实际进行了不正当行为。在此时，在文本区ARc中显示有会员信息的情况下，也参考该会员信息。例如，虽然从视频判断是否进行了不正当行为很难，但在大于等于100次光顾店铺而不正当行为数据件数为0件的情况下，因为操作者是信用度高的会员，所以认定为不是不正当行为。因此，不仔细地验证视频也可以，所以能够缩短验证所需要的时间。反过来说，在光顾店铺次数较少的会员、过去被认定有过不正当行为的会员、或不是会员的情况下，要详细地验证视频。此时，在难以判定是否进行了不正当行为的情况下，店员也可以去向操作者所在地方进行确认。

根据这样的验证的结果，如果认定为没有不正当行为，则店员触摸无不正当行为按键TBa。如果认定有不正当行为，则店员输入有不正当行为按键TBb。另外，例如，当认定有不正当行为的操作者是非会员的情况下，想要留下操作者的特征作为注释。在此情况下，店员触摸注释按键TBc并从键盘142输入注释。

处理器31等待接受作为ACT27而输入注释按键TBc、或作为ACT28而输入有不正当行为按键TBb、或作为ACT29而输入无不正当行为按键TBa。在该等待接受状态下，当输入注释按键TBc时，处理器31在ACT27中判定为YES，并前进到ACT30。作为ACT30，处理器31将通过键盘142的键操作而输入的文本取得为注释。此后，处理器31等待接受有不正当行为按键TBb或无不正当行为按键TBa被输入。

在ACT27至ACT29的等待接受状态下，当输入有不正当行为按键TBb时，处理器31在ACT28中判定为YES，并前进到ACT31。作为ACT31，处理器31创建不正当行为数据，并保存于不正当行为数据库122。此后，处理器31结束对于以被选择的记号标记指定的不正当行为的不正当行为验证模式的处理。

在ACT27至ACT29的等待接受状态下，当输入无不正当行为按键TBa时，处理器31在ACT29中判定为YES，并前进到ACT32。作为ACT32，处理器31删除检测出以选择的记号标记指定的不正当行为时所赋予的记号。此后，处理器31结束不正当行为验证模式的处理。

[不正当行为监视装置的效果说明]

以上，如详述那样，通过在引入有自助POS终端11的店铺中具备不正当行为监视装置24而起到以下的作用效果。

即、在与自助POS终端11的操作相关可能存在有不正当行为的情况下，该不正当行为验证用的视频在服务员终端14被回放。因此，店员通过观看该视频而能够验证是否实际进行了不正当行为。此后，根据该验证的结果，在认定为没有不正当行为的自助POS终端11中结算处理被允许。与此对应，在没有进行不正当行为的验证的情况下，或认定为有不正当行为的自助POS终端11中结算处理被禁止。因此，能够在与自助POS终端11的操作相关可能存在有不正当行为的情况下不能进行结算。其结果，在店员发现顾客的不正当行为的情况下，能够可靠地纠正该种不正当行为。

[变形例]

在该实施例中，不正当行为检测部303基于通过行为识别部301识别的识别结果和通过操作识别部302识别的识别结果来检测操作自助POS终端11的操作者的不正当行为。不正当行为检测部303也可以例如，在根据通过照相机21拍摄的图像检测出操作者可疑的行为的情况下检测不正当行为。另外，也可以使用图像以外的信息检测操作者的不正当行为。

告知部305也可以在通过不正当行为检测部303检测出不正当行为的情况下，利用店员携带的智能手机、平板终端等的信息终端向店员进行告知。

结算控制部310禁止至少残存有没有接受无不正当行为的指示的不正当行为的自助POS终端11的结算处理。关于此点，只要结束了不正当行为的验证，就可以不管不正当行为有无都允许自助POS终端11的结算处理。也就是说，验证处理部307，作为不正当行为的验证结果，当接受了无不正当行为或有不正当行为的操作输入时，则进行用于向记号处理部304及告知部305通知验证完成的处理。顾客只要由店员验证结束就能够进行结账。

在所述实施例中，例示出利用会员ID而识别作为操作者的顾客的情况。关于该点，也可以利用通过例如照相机21拍摄的操作者的人脸等的外观特征数据来识别顾客。通过这样做，即使是非会员也能够指定顾客并留下不正当行为数据。

除此之外，虽然说明了本发明的几个实施例，但这些实施例是作为例子提出的，并不意图限定发明的范围。这些新颖的实施例可以用其他的各种形式来实施，在不脱离发明要旨的范围内可以进行各种省略、替换及变更。另外，这些实施例及其变形均被包含在发明的范围中，而且，包含在权利要求的范围所记载的发明和其均等的范围内。

Claims (10)

1.一种不正当行为监视装置，其特征在于，包括：

不正当行为检测部，检测操作者对结算终端的不正当行为；

接受部，接受对于所述不正当行为验证结束的指示；以及

禁止部，禁止残存有没有接受所述验证结束的指示的不正当行为的所述结算终端的结算处理。

2.根据权利要求1所述的不正当行为监视装置，其中，

所述不正当行为检测部基于通过拍摄所述操作者的行为的摄影设备所得到的视频而检测所述操作者的不正当行为，

所述接受部通过显示设备回放已检测出所述操作者的不正当行为的场景的视频，并接受所述验证结束的指示。

3.根据权利要求2所述的不正当行为监视装置，其中，

所述接受部接受有不正当行为或无不正当行为的指示，

所述禁止部禁止至少残存有没有接受无不正当行为的指示的不正当行为的所述结算终端的结算处理。

4.根据权利要求3所述的不正当行为监视装置，还包括：

保存部，保存与通过所述接受部已接受有不正当行为的指示的操作者相关的信息。

5.根据权利要求4所述的不正当行为监视装置，还包括：

输出部，输出通过所述保存部保存的所述操作者的信息。

6.根据权利要求1所述的不正当行为监视装置，其中，

所述不正当行为检测部基于通过拍摄所述操作者的行为的摄影设备所得到的视频来检测所述操作者的不正当行为，

所述不正当行为监视装置，还包括：

记号处理部，在通过所述不正当行为检测部检测出不正当行为的时间点，向通过所述拍摄设备而得到的视频数据赋予记号。

7.根据权利要求6所述的不正当行为监视装置，其中，

所述接受部进一步识别表示所述记号的记号标记被选择的情况，通过显示设备以规定时间回放被赋予了已被选择的所述记号的部分的视频，并接受有不正当行为或无不正当行为的指示。

8.根据权利要求7所述的不正当行为监视装置，其中，

在通过所述接受部接受了无不正当行为的指示的情况下，所述记号处理部删除视频数据的相应地方的记号，

所述禁止部在所述视频数据被赋予有记号的情况下禁止结算处理。

9.根据权利要求8所述的不正当行为监视装置，其中，

所述不正当行为检测部还检测顾客改正不正当行为的行为，

所述记号处理部，在所述不正当行为检测部检测出顾客改正不正当行为的行为的情况下，删除已经赋予了的、相应的不正当行为的记号。

10.一种存储介质，存储用于使不正当行为监视装置的计算机作为以下各部发挥功能的程序：

不正当行为检测部，检测操作者对于结算终端的不正当行为；

接受部，接受对于所述不正当行为验证结束的指示；以及

禁止部，禁止残存有没有接受所述验证结束的指示的不正当行为的所述结算终端的结算处理。